tongchenkeji 发表于:2023-10-18 17:33:370次点击 已关注取消关注 关注 私信 实时计算 Flink版这个是重试3次就停止哈,失败了4次还没有停止?[阿里云实时计算 Flink版] 暂停朗读为您朗读 实时计算 Flink版这个是重试3次就停止哈,失败了4次还没有停止? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 实时计算Flink版# 实时计算 Flink版3179# 流计算2236
sun20AM 2023-11-27 18:42:42 1 Flink中的任务重试次数是由TaskManager设置的,而不是由JobManager设置的。这意味着,即使你的任务失败超过了TaskManager允许的最大重试次数,JobManager也不会立即终止该任务。 默认情况下,TaskManager允许的任务最大重试次数是3次。但是,你可以在Flink的配置文件中修改这个值。你可以在flink-conf.yaml文件中找到一个名为taskmanager.numberOfTaskRetries的参数,你可以修改这个参数的值来改变TaskManager允许的最大重试次数。 另外,如果你的任务失败超过了TaskManager允许的最大重试次数,你可以使用Flink的保存点机制来恢复任务。保存点是一种特殊的检查点,它们可以保存任务的当前状态,以便在任务失败后可以从这个状态开始执行。
xin在这AM 2023-11-27 18:42:42 2 你这明显是做checkpoint失败了,看你配置也是checkponit超过30ms就不执行,这个点你是需要去优化你的代码。不要做异步,调接口等操作。我刚刚看了一下。flink的配置和操作系统硬件配置也会影响检查点的成功,此回答整理自钉群“【③群】Apache Flink China社区”
wljslmzAM 2023-11-27 18:42:42 3 实时计算 Flink 版在任务失败时会进行重试,默认情况下会重试3次。如果任务连续失败4次,那么任务将停止运行。但是,如果您的任务配置了重试次数大于3次,那么任务将会继续重试直到达到最大重试次数。此外,您还可以通过设置重试间隔时间来控制任务的重试频率。
Flink中的任务重试次数是由TaskManager设置的,而不是由JobManager设置的。这意味着,即使你的任务失败超过了TaskManager允许的最大重试次数,JobManager也不会立即终止该任务。
默认情况下,TaskManager允许的任务最大重试次数是3次。但是,你可以在Flink的配置文件中修改这个值。你可以在
flink-conf.yaml
文件中找到一个名为taskmanager.numberOfTaskRetries
的参数,你可以修改这个参数的值来改变TaskManager允许的最大重试次数。另外,如果你的任务失败超过了TaskManager允许的最大重试次数,你可以使用Flink的保存点机制来恢复任务。保存点是一种特殊的检查点,它们可以保存任务的当前状态,以便在任务失败后可以从这个状态开始执行。
你这明显是做checkpoint失败了,看你配置也是checkponit超过30ms就不执行,这个点你是需要去优化你的代码。不要做异步,调接口等操作。我刚刚看了一下。flink的配置和操作系统硬件配置也会影响检查点的成功,此回答整理自钉群“【③群】Apache Flink China社区”
实时计算 Flink 版在任务失败时会进行重试,默认情况下会重试3次。如果任务连续失败4次,那么任务将停止运行。但是,如果您的任务配置了重试次数大于3次,那么任务将会继续重试直到达到最大重试次数。此外,您还可以通过设置重试间隔时间来控制任务的重试频率。