tongchenkeji 发表于：2023-10-15 19:52:110次点击 已关注取消关注 关注 私信 DataWorks如何本地数据库数据同步到maxcompute？[阿里云MaxCompute] 暂停朗读为您朗读 DataWorks如何本地数据库数据同步到maxcompute？ 「点点赞赏，手留余香」 赞赏 还没有人赞赏，快来当第一个赞赏的人吧！ 海报 MaxCompute# DataWorks3343# MaxCompute2748# 云原生大数据计算服务 MaxCompute3255# 分布式计算2827# 大数据开发治理平台 DataWorks3946# 数据库1310
小周sirAM 2023-11-27 17:55:21 1 在 DataWorks 中，你可以使用数据同步功能将本地数据库的数据同步到 MaxCompute 中。具体步骤如下： 在 DataWorks 中，点击左侧菜单栏的“数据开发”选项。 在“数据开发”页面中，点击“新建数据源”按钮，创建一个新的数据源。 在“新建数据源”页面中，设置数据源的名称、描述和连接信息等信息。 点击“保存”按钮，创建数据源。 在“数据开发”页面中，点击“数据开发”选项卡，然后点击“新建任务”按钮，创建一个新的数据开发任务。 在“新建任务”页面中，选择数据源，并设置任务的名称、描述和数据处理逻辑等信息。 点击“保存”按钮，创建数据开发任务。 在“数据开发”页面中，点击“运行”按钮，运行数据开发任务，将本地数据库的数据同步到 MaxCompute 中。
xin在这AM 2023-11-27 17:55:21 2 配置一个从OpenTSDB数据库同步抽取数据到本地的作业，使用脚本开发的详情请参见通过脚本模式配置任务。{“order”: {“hops”: [{“from”: “Reader”,”to”: “Writer”}]},”setting”: {“errorLimit”: {“record”: “0”},”speed”: {“concurrent”: 1,”throttle”: true,//当throttle值为flase时，mbps参数不生效，表示不限流；当throttle值为true时,表示限流。”mbps”:”12″//限流}},”steps”: [{“category”: “reader”,”name”: “Reader”,”parameter”: {“endpoint”: “http://host:4242″,”column”: [“xc”],”beginDateTime”: “20190101000000”,”endDateTime”: “20190101030000”},”stepType”: “opentsdb”},{“category”: “writer”,”name”: “Writer”,”parameter”: {},”stepType”: “”}],”type”: “job”,”version”: “2.0”}https://help.aliyun.com/document_detail/137748.html，此回答整理自钉群“DataWorks交流群(答疑@机器人)”
在 DataWorks 中，你可以使用数据同步功能将本地数据库的数据同步到 MaxCompute 中。具体步骤如下：
配置一个从OpenTSDB数据库同步抽取数据到本地的作业，使用脚本开发的详情请参见通过脚本模式配置任务。{“order”: {“hops”: [{“from”: “Reader”,”to”: “Writer”}]},”setting”: {“errorLimit”: {“record”: “0”},”speed”: {“concurrent”: 1,”throttle”: true,//当throttle值为flase时，mbps参数不生效，表示不限流；当throttle值为true时,表示限流。”mbps”:”12″//限流}},”steps”: [{“category”: “reader”,”name”: “Reader”,”parameter”: {“endpoint”: “http://host:4242″,”column”: [“xc”],”beginDateTime”: “20190101000000”,”endDateTime”: “20190101030000”},”stepType”: “opentsdb”},{“category”: “writer”,”name”: “Writer”,”parameter”: {},”stepType”: “”}],”type”: “job”,”version”: “2.0”}
https://help.aliyun.com/document_detail/137748.html，此回答整理自钉群“DataWorks交流群(答疑@机器人)”