就是一个源头表 大概 5KW,加工之后,写入另一个表。 分页处理? 或者 有其它 方法 ?感谢指教
flink 加工 千万级 的表,在流式加工处理的时候,怎么避免 内存溢出啥的?[阿里云实时计算 Flink版]
「点点赞赏,手留余香」
还没有人赞赏,快来当第一个赞赏的人吧!
tongchenkeji @ 同尘科技 2022/7/07
flink 加工 千万级 的表,在流式加工处理的时候,怎么避免 内存溢出啥的?[阿里云实时计算 Flink版]
就是一个源头表 大概 5KW,加工之后,写入另一个表。 分页处理? 或者 有其它 方法 ?感谢指教
0 收藏
扫描二维码继续阅读
false
给undefined打赏
2元
5元
10元
20元
50元
¥0
您的当前余额:¥0
dataStreamAPI的话,不要在map invoke类的方法中频繁的new对象(此答案整理自Flink CDC 社区)
消息队列 写入 批量消费 不就好了(此答案整理自Flink CDC 社区)