tongchenkeji 发表于：2022-10-12 10:10:400次点击 已关注取消关注 关注 私信 Logstash JDBC数据mysql同步es的延迟时间大概有多少[阿里云数据库MySQL版] 暂停朗读为您朗读 问题描述 Logstash JDBC数据同步的延迟时间到底有多少 同步全量数据，接受秒级延迟的场景。 「点点赞赏，手留余香」 赞赏 还没有人赞赏，快来当第一个赞赏的人吧！ 海报 云数据库 MySQL 版# Java948# MySQL1179# RDS654# SQL1285# 云数据库 RDS MySQL 版1517# 关系型数据库2577# 数据库连接135
游客ykfym5dqgv3xkAM 2023-11-27 9:24:25 1 具体延迟时间需要你实际数据场景测试，目前只能说logstash方案适用的场景是能接受延迟秒级别的；若对实时性要求高推荐参考 同步方案选取指南：https://help.aliyun.com/document_detail/170426.html 中 DTS的方式实现数据同步
oizytebewk2vaAM 2023-11-27 9:24:25 2 这个跟用户的数据量、集群的状态和规格等很多因素有关的，没办法给出具体延迟时间。如果对数据同步的实时性要求较高，可以选择DTS的方案。 如果出现同步任务失败（例如管道一直在生效中、前后数据不一致、数据库连接不成功），可以参考通过Logstash将RDS MySQL数据同步至Elasticsearch中的常见问题，排查一下。
具体延迟时间需要你实际数据场景测试，目前只能说logstash方案适用的场景是能接受延迟秒级别的；若对实时性要求高推荐参考 同步方案选取指南：https://help.aliyun.com/document_detail/170426.html 中 DTS的方式实现数据同步
这个跟用户的数据量、集群的状态和规格等很多因素有关的，没办法给出具体延迟时间。如果对数据同步的实时性要求较高，可以选择DTS的方案。
如果出现同步任务失败（例如管道一直在生效中、前后数据不一致、数据库连接不成功），可以参考通过Logstash将RDS MySQL数据同步至Elasticsearch中的常见问题，排查一下。