MySQL同步至Elasticsearch

支持的数据库类型

前提条件

• 如果源数据库没有主键或唯一约束，且所有字段没有唯一性，可能会导致目标数据库中出现重复数据。

• DTS在执行数据同步时将占用源库和目标库一定的读写资源，可能会加重数据库压力。因此您需要在执行数据同步前评估源库和目标库的性能，建议您在业务低峰期进行数据同步。

• 数据同步期间注意不要手动删除binlog文件，否则可能引起同步失败。

• 预检查中如果源库日志模式检查失败，源数据库修改binlog_format、binlog_row_image后，请注意重启数据库，否则可能引起数据不一致。

• 数据同步期间，避免会话级别修改binlog_format为ROW以外的其他模式，避免会话级别修改binlog_row_image为FULL以外的其他模式，否则可能引起迁移失败。

• 同步期间，避免在目的数据库进行写入操作，否则可能引起数据不一致。

• 对于同步失败的任务，DTS会触发自动恢复。在您将业务切换至目标实例前，请务必先结束或释放该任务，避免该任务被自动恢复后，导致源端数据覆盖目标实例的数据。

• 不支持数据库、视图、索引、约束、函数、存储过程、触发器（TRIGGER）和事件（EVENT）的同步。

• 在库表结构同步阶段，请勿执行库或表结构变更的DDL操作，否则数据同步任务会失败。

• 不支持无主键表的同步，无主键表会被自动过滤。

• 若MySQL实例同步至Elasticsearch实例的数据包含DOUBLE类数据，同步后偶现精度差异。

• 若MySQL实例同步至Elasticsearch实例的数据包含GBK类中文字符，同步后会导致数据错误。

• 若MySQL实例同步至Elasticsearch实例的数据包含GEOMETRY类数据，同步后会导致数据错误。

数据库账号的权限要求

数据类型映射

由于MySQL和Elasticsearch实例支持的数据类型不同，数据类型无法一一对应，所以DTS会在同步时对某些数据类型进行特殊处理。以下是部分特殊处理后的数据类型映射关系：

操作步骤

1. 登录数据传输服务控制台，在左侧导航栏点击数据同步，进入数据同步页面，点击新建。

2. 在新建任务页面，配置任务信息。
   

   

3. 配置源库、目标库信息，并分别进行源库、目标库的数据库连通性检查。
   

   

4. 连通性检查成功后，单击授权白名单并进入下一步。

5. 在迁移类型及列表页面，配置迁移类型、迁移对象。

• 配置同步方式和迁移类型
  

  

• 配置迁移对象
  

  

  
  

  

6. 完成配置后单击下一步，在任务详情页面单击预检查进行预检查。

   如果预检查不通过，可以参考 预检查项 修复问题后，重新发起预检查校验。

• 未通过：表示该检测项检测未通过，需要修复问题后重新发起预检查校验。

• 警告：表示该检测项检测不完全符合要求，用户需自行评估该警告是否影响业务场景，根据实际需求决定修复或忽略该问题。
  

  

7. 预检查通过后单击下一步，在购买确认页面选择计费模式，单击确定并创建任务完成订单创建。

8. 支付成功后同步任务创建完成，单击开始任务后同步任务正式开始。如果您需要对任务进行管理，详见 任务管理。