数据应用注意事项:
1、数据应用采用MYSQL数据应用模式
基础加载数据模式,采用直接执行SQL方式实现数据加载模式。docker容器化内部测试,200-400条/秒。
告诉加载模式,采用批量插入INSERT INTO ? VALUES(),(),()方式,同平台,处理速度,1-2W条/秒。
同步前,需要准备:
- 数据传输通道中
- 属性配置ifFilterDDL参数值修改为1,保证数据加载的过程中,过滤所有的DDL操作。
- 属性配置sql_full_mode,sql_real_mode设置为2,使用SQL语句执行方式加载数据。操作速度较慢
- 手工创建表结构【根据实际情况设置好SHARDING】,所有字段不允许为空。
- 数据应用的时候,需要制定数据应用依赖KEY,记数据库主键字段
文档更新时间: 2021-02-06 16:07 作者:阿力