###直接增量订阅
建议:

  • 启动表的增量订阅,一般建议该表的增量数据发布已经在运行过程中
  • 停止表所在链路的订阅服务
  1. 按时间启动表的增量订阅
    订阅管理->数据应用->数据表

    配置类型->开启增量订阅时间

      设置增量订阅时间


    设置完成后,返回上一个页面启动服务即可

  2. 根据历史数据存放kafka内的offset值启动增量订阅

  • 如果以偏移量进行表的增量数据启动,建议联系软件运维人员协助处理
  • 通过表名和schema等信息确认
    select realOffset,fulltopic from bus_client_op_status_info where bus_client_product_object_id in (
    select id from bus_client_product_object where targettableschema=’数据库名’ and targettablename=’表名’)
  • 获取的realoffset值就是表在数据队列中存放的最大值,根据最大值自定义启动增量的offset值
文档更新时间: 2021-03-22 23:45   作者:刘志伟