tongchenkeji 发表于:2023-11-6 12:05:200次点击 已关注取消关注 关注 私信 Flink oraclecdc的全量支持checkpoint嘛?[阿里云实时计算 Flink版] 暂停朗读为您朗读 Flink oraclecdc的全量支持checkpoint嘛? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 实时计算Flink版# 实时计算 Flink版3179# 流计算2236
小周sirAM 2023-11-27 18:25:01 2 Flink CDC 项目的全量读取阶段不支持checkpoint。这是因为在全量读取阶段中,需要从源数据库中读取所有需要复制的数据,这个过程涉及到大量的数据传输和存储,而 Flink Checkpoint 是一个分布式一致性算法,需要将整个程序的状态保存到一个持久化存储系统中,以便在故障发生后能够恢复到一致的状态。由于全量读取阶段涉及到大量数据的传输和存储,因此在当前的技术条件下,还不支持使用 Flink Checkpoint 进行全量备份。但是您可以考虑使用其他的备份方式来保护您的数据。
支持,此回答整理自钉群“【③群】Apache Flink China社区”
Flink CDC 项目的全量读取阶段不支持checkpoint。这是因为在全量读取阶段中,需要从源数据库中读取所有需要复制的数据,这个过程涉及到大量的数据传输和存储,而 Flink Checkpoint 是一个分布式一致性算法,需要将整个程序的状态保存到一个持久化存储系统中,以便在故障发生后能够恢复到一致的状态。由于全量读取阶段涉及到大量数据的传输和存储,因此在当前的技术条件下,还不支持使用 Flink Checkpoint 进行全量备份。但是您可以考虑使用其他的备份方式来保护您的数据。