tongchenkeji 发表于:2023-12-10 17:38:110次点击 已关注取消关注 关注 私信 Flink之前任务少mysql数据可以正常抽到doris ,任务超过20几就一直会报超时问题?[阿里云] 暂停朗读为您朗读 Flink之前任务少mysql数据可以正常抽到doris ,任务超过20几就一直会报超时问题设置flinkcdc两个参数,也不行 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 阿里云# MySQL1179# 云数据库 RDS MySQL 版1517# 关系型数据库2577# 实时计算 Flink版3179# 流计算2236
小周sirAM 2023-12-21 8:08:49 2 您好,这个问题可能是由于Flink任务在处理大量数据时出现了超时问题。这可能是由于以下原因导致的: 网络延迟问题:由于网络质量不稳定或者任务管理器与资源管理器之间的连接发生故障,导致心跳消息无法及时到达,从而引发心跳超时问题。 资源不足问题:Flink任务管理器需要充足的内存和CPU资源来运行任务,如果资源不足,则可能导致任务运行缓慢或者失败,从而引起心跳超时问题。 任务调度问题:Flink任务管理器负责接收和执行任务,如果任务调度出现问题,比如任务堆积、任务依赖关系错误等,就会导致心跳超时问题的发生。
按照第一个为主的,你设置后面的也没用,你可以参考doris的整库同步 ,此回答整理自钉群“【③群】Apache Flink China社区”
您好,这个问题可能是由于Flink任务在处理大量数据时出现了超时问题。这可能是由于以下原因导致的: