tongchenkeji 发表于:2023-2-10 10:16:340次点击 已关注取消关注 关注 私信 flink某一个算子的多个并行子任务中,有没有可能某一个子任务已经close了,别的子任务还没有完成[阿里云实时计算 Flink版] 暂停朗读为您朗读 flink某一个算子的多个并行子任务中,有没有可能某一个子任务已经close了,别的子任务还没有完成open呢? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 实时计算Flink版# 实时计算 Flink版3179# 流计算2236
阿里云服务支持-傅建鹏AM 2023-11-27 18:25:14 1 有这种可能,如果说源端是全量MaxaCompute源表这类的源表,读取完源表数据任务就直接结束了,因为各并行子任务处理的数据级量可能不一致(尤其是有数据倾斜的情况下),部分子任务数据已处理完成,部分子任务还没有开始
有这种可能,如果说源端是全量MaxaCompute源表这类的源表,读取完源表数据任务就直接结束了,因为各并行子任务处理的数据级量可能不一致(尤其是有数据倾斜的情况下),部分子任务数据已处理完成,部分子任务还没有开始
有可能的,各并行子任务处理的数据级量可能不一致,部分子任务数据已处理完成,部分子任务还没有开始。
你这个得分有界流 和无界流两种场景了
此答案来自钉钉群“【2】Apache Flink China 社区”