Flink之前任务少mysql数据可以正常抽到doris ,任务超过20几就一直会报超时问题?[阿里云]

Flink之前任务少mysql数据可以正常抽到doris ,任务超过20几就一直会报超时问题

设置flinkcdc两个参数,也不行

「点点赞赏,手留余香」

    还没有人赞赏,快来当第一个赞赏的人吧!
=====这是一个广告位,招租中,联系qq 78315851====
1 条回复 A 作者 M 管理员
  1. 按照第一个为主的,你设置后面的也没用,你可以参考doris的整库同步 ,此回答整理自钉群“【③群】Apache Flink China社区”

  2. 您好,这个问题可能是由于Flink任务在处理大量数据时出现了超时问题。这可能是由于以下原因导致的:

    1. 网络延迟问题:由于网络质量不稳定或者任务管理器与资源管理器之间的连接发生故障,导致心跳消息无法及时到达,从而引发心跳超时问题。
    2. 资源不足问题:Flink任务管理器需要充足的内存和CPU资源来运行任务,如果资源不足,则可能导致任务运行缓慢或者失败,从而引起心跳超时问题。
    3. 任务调度问题:Flink任务管理器负责接收和执行任务,如果任务调度出现问题,比如任务堆积、任务依赖关系错误等,就会导致心跳超时问题的发生。