tongchenkeji 发表于:2023-10-30 19:19:470次点击 已关注取消关注 关注 私信 有没有 datahub 的 flink sql connector ??[阿里云实时计算 Flink版] 暂停朗读为您朗读 有没有 datahub 的 flink sql connector ?? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 实时计算Flink版# SQL1285# 实时计算 Flink版3179# 数据总线 DataHub25# 流计算2236
sun20AM 2023-11-27 18:33:45 1 DataHub是一款基于Hadoop HDFS的开源数据集成平台,主要用于实现ETL和数据同步功能。目前,Flink官方并没有提供直接支持DataHub的Connector。 但是,你可以通过Flink的Custom Source API来创建自己的Source Function,从而实现从DataHub读取数据的功能。你需要自己实现从DataHub读取数据的方法,并将其封装成一个Source Function。 另外,你也可以考虑使用其他的数据集成工具,如Apache Nifi、Apache Beam等,这些工具都有直接的Flink Connector,可以直接从DataHub读取数据。
DataHub是一款基于Hadoop HDFS的开源数据集成平台,主要用于实现ETL和数据同步功能。目前,Flink官方并没有提供直接支持DataHub的Connector。
但是,你可以通过Flink的Custom Source API来创建自己的Source Function,从而实现从DataHub读取数据的功能。你需要自己实现从DataHub读取数据的方法,并将其封装成一个Source Function。
另外,你也可以考虑使用其他的数据集成工具,如Apache Nifi、Apache Beam等,这些工具都有直接的Flink Connector,可以直接从DataHub读取数据。