1 目标库配置

1.1 创建用户并赋权

• 创建用户

    CREATE USER 'zcbus' IDENTIFIED BY 'zcbus';

• 用户赋权

    GRANT ALL ON database_name TO zcbus;

2.2 配置/etc/hosts

1. 配置doris所有的地址和主机名，填写到本地的/data/docker02/hosts中

   172.168.2.101 mr_10_manager
   172.168.2.102 mr_node_01
   172.168.2.103 mr_node_02
   172.168.2.104 mr_node_03
   172.168.2.105 mr_node_04

2. 修改yaml文件对应容器配置，使hosts配置持久化：

    volumes:
    - type: bind
      source: /data/docker02/hosts
      target: /etc/hosts

3. 容器生效配置

[root@iZ2ze7y8byz5e2ki7gbcjpZ yaml]# docker-compose up -d zcbus 
[+] Running 1/0
 ✔ Container zcbus  Running

2 补充说明

2.1 特殊属性参数说明

• 注意：
  • 订阅属性中需开启审计模式（audit_mode）
  • 根据业务需求，可自由选择是否增加 ZCBUS_SOURCE_OPTIME 和 ZCBUS_SOURCE_OPTYPE 字段
  • 在通道属性中的table_properties是表的额外属性，需要替换的部分设置特定关键字

table_properties参数的使用
（1）对于UNIQUE 模型，key满足唯一性，最新插入的数据替换掉对应key的数据行。对于主键唯一键，只需填写如下内容即可，zcbus程序可自动替换为UNIQUE KEY(#zcbus_key#)信息内容
ENGINE=OLAP UNIQUE KEY(#zcbus_key#) COMMENT #zcbus_comment# DISTRIBUTED BY HASH(#zcbus_distribute_key#) BUCKETS 10 PROPERTIES ( “replication_allocation” = “tag.location.default: 1”);
（2）对于Aggregate（聚合，合计）模型，需要使用Aggregate KEY关键字
ENGINE=OLAP Aggregate KEY(#zcbus_key#) COMMENT #zcbus_comment# DISTRIBUTED BY HASH(#zcbus_distribute_key#) BUCKETS 10 PROPERTIES(“replication_allocation” = “tag.location.default: 1”);
（3）对于Duplicate（重复，复制）模型，需要使用Duplicate KEY关键字
ENGINE=OLAP Duplicate KEY(#zcbus_key#) COMMENT #zcbus_comment# DISTRIBUTED BY HASH(#zcbus_distribute_key#) BUCKETS 10 PROPERTIES(“replication_allocation” = “tag.location.default: 1”);
（4）对于PRIMARY（主键）模型，需要使用PRIMARY KEY关键字
ENGINE=OLAP PRIMARY KEY(#zcbus_key#) COMMENT #zcbus_comment# DISTRIBUTED BY HASH(#zcbus_distribute_key#) BUCKETS 10 PROPERTIES(“replication_allocation” = “tag.location.default: 1”);

2.2 目前STARROCKS兼容四种数据模型

• Aggregate 模型

  • 聚合模型：Aggregate（聚合，合计）模型，表中key值不重复，对于插入的数据数据按照key值对value值进行聚合函数合并。

• Uniq 模型

  • 更新模型：UNIQUE 模型，聚合类型的特殊情况，key满足唯一性，最新插入的数据替换掉对应key的数据行。

• Duplicate 模型

  • 明细模型：Duplicate（重复，复制）模型，表中的Key值（类似关系模型中的主键）可以重复，和插入数据行一一对应。

• PRIMARY 模型

  • 主键模型：PRIMARY（主键）模型，表中的Key值必须满足唯一性约束，且列的值不会修改。

2.3 配置目标数据库参数列表