描述
为方便在数据交换平台中，快速定位到需要搜索相关信息，在平台内部特定了部分关键字，根据关键字进行相应数据链路测试检测，并提供实际返回数据信息。
实际配置过程
在数据交换过程中，存在较多的节点，以及输入信息搜索格式：
- 容器名搜索：
- 容器名[CONTAINERNAME]: zcbus_container_01
- 发布节点相关搜索信息&格式，如下：
- 节点号[NODEID]： 35059
- 节点名[NODENAME]： zcbus_oracle
- 发布节点用户[NODEID.TABSCHEMA]： 35059.ZCBUS_DEMO_01
- 发布表[NODEID.TABSCHEMA.TABLENAME]: 35059.ZCBUS_DEMO_01.ZCBUS_EMP_01
- 发布表[TABLENAME]: ZCBUS_EMP_01
- 发布用户[TABLESCHEMA]: ZCBUS_DEMO_01
- IP地址[IP]: 192.168.132.202
- 策略相关信息：
- 策略名[POLICY]: POLICY_ZCBUS_DEPARTMENT_01
- 订阅相关信息：
- 订阅客户端ID[CUSTOMERID]：32070
- 订阅客户端名字[CUSTOMERNAME]:CONSUMER_ZCBUS_01
- 订阅传输控制编号[CONTROLCODE]:CONTROL_CODE_MYSQL_ORACLE_01
- 订阅传输控制编号[CUSTOMERID.CONTROLCODE]:32070.CONTROL_CODE_MYSQL_ORACLE_01
- 订阅数据库IP[IP]：193.188.126.201
{
"children":[
{
"children":[
{
"children":[
],
"id":5,
"levelid":0,
"name":"发布节点-容器信息",
"pid":2,
"value":[
{
"容器":"容器编号:aaa
容器名:ZCBUS 215 测试
运行IP地址:172.17.104.184
版本号:7.5
心跳时间:2021-01-05 11:41:07"
}
]
},
{
"children":[
],
"id":6,
"levelid":0,
"name":"发布节点-数据库配置信息",
"pid":2,
"value":[
{
"发布节点数据库基本信息":"节点名:ZCBUS-35059-mysql,数据库名:mm,数据库类型:mysql,IP地址:172.17.58.146,端口:3306"
}
]
}
],
"id":2,
"levelid":0,
"name":"配置",
"pid":1,
"value":[
{
"配置":"配置分支"
}
]
},
{
"children":[
{
"children":[
],
"id":7,
"levelid":0,
"name":"发布节点-进程信息",
"pid":3,
"value":[
{
"进程状态":"状态:全量zcbus->full-运行中..."
},
{
"进程状态":"状态:增量zcbus->real-运行中..."
}
]
},
{
"children":[
],
"id":8,
"levelid":0,
"name":"发布节点-异常信息",
"pid":3,
"value":[
{
"*":"未发现数据"
}
]
},
{
"children":[
],
"id":9,
"levelid":0,
"name":"发布节点-全量发布【单用户】统计",
"pid":3,
"value":[
{
"导出信息":"导出表总数为 124 个,占用总空间 :2057.09 MB,导出行数进度[11292161行->11292161行]"
}
]
},
{
"children":[
],
"id":10,
"levelid":0,
"name":"发布节点-增量发布【单用户】统计【近30天】",
"pid":3,
"value":[
{
"分析统计":"2020-12-18，插入 17427 条，更新 211063 条,删除 9545 条，表结构变更 2 条,总计 238037 条"
},
{
"分析统计":"2020-12-19，插入 294979 条，更新 3564721 条,删除 28 条，表结构变更 4 条,总计 3859732 条"
},
{
"分析统计":"2020-12-20，插入 470419 条，更新 4726529 条,删除 6556 条，表结构变更 5 条,总计 5203509 条"
},
{
"分析统计":"2020-12-21，插入 987105 条，更新 9297356 条,删除 11228 条，表结构变更 7 条,总计 10295696 条"
},
{
"分析统计":"2020-12-22，插入 295327 条，更新 5128465 条,删除 7503 条，表结构变更 0 条,总计 5431295 条"
},
{
"分析统计":"2020-12-23，插入 291246 条，更新 3773046 条,删除 0 条，表结构变更 0 条,总计 4064292 条"
},
{
"分析统计":"2020-12-24，插入 290681 条，更新 3689922 条,删除 0 条，表结构变更 0 条,总计 3980603 条"
},
{
"分析统计":"2020-12-25，插入 294044 条，更新 3728968 条,删除 468 条，表结构变更 5 条,总计 4023485 条"
},
{
"分析统计":"2020-12-26，插入 303059 条，更新 3863327 条,删除 573 条，表结构变更 0 条,总计 4166959 条"
},
{
"分析统计":"2020-12-27，插入 359488 条，更新 5143130 条,删除 4 条，表结构变更 0 条,总计 5502622 条"
},
{
"分析统计":"2020-12-28，插入 359395 条，更新 4607988 条,删除 0 条，表结构变更 1 条,总计 4967384 条"
},
{
"分析统计":"2020-12-29，插入 337457 条，更新 4086154 条,删除 2286 条，表结构变更 3 条,总计 4425900 条"
},
{
"分析统计":"2020-12-30，插入 343921 条，更新 3806509 条,删除 71 条，表结构变更 0 条,总计 4150501 条"
},
{
"分析统计":"2020-12-31，插入 331834 条，更新 3884793 条,删除 4 条，表结构变更 2 条,总计 4216633 条"
},
{
"分析统计":"2021-01-01，插入 331448 条，更新 4162301 条,删除 25 条，表结构变更 0 条,总计 4493774 条"
},
{
"分析统计":"2021-01-02，插入 346511 条，更新 4106687 条,删除 19453 条，表结构变更 0 条,总计 4472651 条"
},
{
"分析统计":"2021-01-03，插入 300063 条，更新 2900074 条,删除 1841 条，表结构变更 0 条,总计 3201978 条"
},
{
"分析统计":"2021-01-04，插入 329968 条，更新 4022404 条,删除 0 条，表结构变更 0 条,总计 4352372 条"
},
{
"分析统计":"2021-01-05，插入 161170 条，更新 1985098 条,删除 0 条，表结构变更 0 条,总计 2146268 条"
}
]
},
{
"children":[
],
"id":11,
"levelid":0,
"name":"发布节点-延迟心跳",
"pid":3,
"value":[
{
"心跳信息":"分析日志延迟 1 秒,最后心跳时间 2021-01-05 11:41:10"
}
]
}
],
"id":3,
"levelid":0,
"name":"运行",
"pid":1,
"value":[
{
"运行状态":"运行状态分支"
}
]
},
{
"children":[
{
"children":[
],
"id":12,
"levelid":0,
"name":"发布节点-任务处理【单用户】",
"pid":4,
"value":[
{
"*":"未发现数据"
}
]
},
{
"children":[
],
"id":13,
"levelid":0,
"name":"发布节点-增量SQL统计【单用户】",
"pid":4,
"value":[
{
"*":"未发现数据"
}
]
}
],
"id":4,
"levelid":0,
"name":"其他",
"pid":1,
"value":[
{
"其它":"其它分支"
}
]
},
{
"children":[
{
"children":[
],
"id":15,
"levelid":0,
"name":"发布节点-策略定义【单用户】",
"pid":14,
"value":[
{
"分配表数量":"124个",
"状态统计":"发布成功",
"策略":"databus_v4_to_oracle"
},
{
"分配表数量":"124个",
"状态统计":"发布成功",
"策略":"demo_mysql_to_mysql"
},
{
"分配表数量":"124个",
"状态统计":"发布成功",
"策略":"demo_mysql_to_postgresql"
},
{
"分配表数量":"124个",
"状态统计":"发布成功",
"策略":"demo_mysql_to_sqlserver"
},
{
"分配表数量":"124个",
"状态统计":"发布成功",
"策略":"demo_mysql_to_sybase"
},
{
"分配表数量":"10个",
"状态统计":"发布成功",
"策略":"demo_role_demo_2"
},
{
"分配表数量":"124个",
"状态统计":"发布成功",
"策略":"mysql_to_telpg"
},
{
"分配表数量":"124个",
"状态统计":"发布成功",
"策略":"test_role_demo"
}
]
},
{
"children":[
{
"children":[
{
"children":[
],
"id":18,
"levelid":0,
"name":"发布节点-订阅加载【单用户】传输通道",
"pid":17,
"value":[
{
"levelid":"11",
"加载状态":"客户端ID：32070通过传输通道DATABUS_V4_TO_ORACLE运行将数据传输到指定目标oracle12c,ORACLE,172.17.58.145"
},
{
"levelid":"11",
"加载状态":"客户端ID：32070通过传输通道ZCBUS_TO_SQLSERVER运行将数据传输到指定目标zl_test_db,sqlserver,172.17.104.185"
},
{
"levelid":"13",
"加载状态":"客户端ID：32070通过传输通道ZCBUS_TO_SYBASE停止将数据传输到指定目标dt,sybase,172.17.104.186"
},
{
"levelid":"11",
"加载状态":"客户端ID：32070通过传输通道ZCBUS_TO_POSTGRESQL运行将数据传输到指定目标zfl,postgresql,172.17.58.146"
},
{
"levelid":"11",
"加载状态":"客户端ID：32070通过传输通道ZCBUS_TO_MYSQL运行将数据传输到指定目标test,mysql,172.17.58.145"
},
{
"levelid":"11",
"加载状态":"客户端ID：32070通过传输通道mysql_to_telpg运行将数据传输到指定目标postgres,postgresql,172.17.104.184"
},
{
"levelid":"13",
"加载状态":"客户端ID：32073通过传输通道ZCBUS_NODE_001停止将数据传输到指定目标 [未配置应用]"
},
{
"levelid":"11",
"加载状态":"客户端ID：35185通过传输通道ZCBUS_ZDT_001运行将数据传输到指定目标 [未配置应用]"
}
]
},
{
"children":[
],
"id":19,
"levelid":0,
"name":"发布节点-订阅加载【单用户】状态统计",
"pid":17,
"value":[
{
"levelid":"11",
"加载信息":"客户ID32070通过传输通道DATABUS_V4_TO_ORACLE正在增量完成-74,全量完成-50"
},
{
"levelid":"11",
"加载信息":"客户ID32070通过传输通道mysql_to_telpg正在增量完成-64,全量完成-50"
},
{
"levelid":"15",
"加载信息":"客户ID32070通过传输通道mysql_to_telpg正在增量异常-10"
},
{
"levelid":"11",
"加载信息":"客户ID32070通过传输通道ZCBUS_TO_MYSQL正在增量完成-75,全量完成-49"
},
{
"levelid":"11",
"加载信息":"客户ID32070通过传输通道ZCBUS_TO_POSTGRESQL正在增量完成-74,全量完成-50"
},
{
"levelid":"11",
"加载信息":"客户ID32070通过传输通道ZCBUS_TO_SQLSERVER正在增量完成-75,全量完成-49"
},
{
"levelid":"11",
"加载信息":"客户ID32070通过传输通道ZCBUS_TO_SYBASE正在增量完成-16,全量过程中-2,允许全量-19"
},
{
"levelid":"15",
"加载信息":"客户ID32070通过传输通道ZCBUS_TO_SYBASE正在增量异常-7,全量异常-80"
},
{
"levelid":"11",
"加载信息":"客户ID32073通过传输通道ZCBUS_NODE_001正在未初始化-10"
},
{
"levelid":"11",
"加载信息":"客户ID35185通过传输通道ZCBUS_ZDT_001正在增量完成-2,未初始化-122"
}
]
},
{
"children":[
],
"id":20,
"levelid":0,
"name":"发布节点-订阅加载【单用户】延迟统计",
"pid":17,
"value":[
{
"levelid":"11",
"加载信息":"客户端ID:32070通过传输通道DATABUS_V4_TO_ORACLE oracle12c,ORACLE,172.17.58.145将产品test_role_demo输入到数据库，延迟3693 秒"
},
{
"levelid":"11",
"加载信息":"客户端ID:32070通过传输通道ZCBUS_TO_SQLSERVER zl_test_db,sqlserver,172.17.104.185将产品demo_mysql_to_sqlserver输入到数据库，延迟3693 秒"
},
{
"levelid":"11",
"加载信息":"客户端ID:32070通过传输通道ZCBUS_TO_POSTGRESQL zfl,postgresql,172.17.58.146将产品demo_mysql_to_postgresql输入到数据库，延迟3693 秒"
},
{
"levelid":"13",
"加载信息":"客户端ID:32070通过传输通道ZCBUS_TO_SYBASE dt,sybase,172.17.104.186将产品demo_mysql_to_sybase输入到数据库，延迟1771227 秒"
},
{
"levelid":"11",
"加载信息":"客户端ID:32070通过传输通道ZCBUS_TO_MYSQL test,mysql,172.17.58.145将产品demo_mysql_to_mysql输入到数据库，延迟3693 秒"
},
{
"levelid":"11",
"加载信息":"客户端ID:32070通过传输通道mysql_to_telpg postgres,postgresql,172.17.104.184将产品mysql_to_telpg输入到数据库，延迟1510039 秒"
},
{
"levelid":"13",
"加载信息":"客户端ID:32073通过传输通道 未分配 将产品demo_role_demo_2输入到数据库，延迟0 秒"
},
{
"levelid":"11",
"加载信息":"客户端ID:35185通过传输通道 未分配 将产品mysql_to_telpg输入到数据库，延迟0 秒"
}
]
}
],
"id":17,
"levelid":0,
"name":"订阅分支",
"pid":16,
"value":[
{
"订阅":"订阅分支"
}
]
}
],
"id":16,
"levelid":0,
"name":"发布节点-策略分配【单用户】-统计",
"pid":14,
"value":[
{
"策略分配":"策略:databus_v4_to_oracle分配给客户:to_oracle_32001 [Customerid:32053 ]"
},
{
"策略分配":"策略:demo_mysql_to_mysql分配给客户:consumer_h [Customerid:32070 ]"
},
{
"策略分配":"策略:demo_mysql_to_postgresql分配给客户:consumer_h [Customerid:32070 ]"
},
{
"策略分配":"策略:demo_mysql_to_sqlserver分配给客户:consumer_h [Customerid:32070 ]"
},
{
"策略分配":"策略:demo_mysql_to_sybase分配给客户:consumer_h [Customerid:32070 ]"
},
{
"策略分配":"策略:mysql_to_telpg分配给客户:consumer_h [Customerid:32070 ]"
},
{
"策略分配":"策略:test_role_demo分配给客户:consumer_h [Customerid:32070 ]"
},
{
"策略分配":"策略:demo_role_demo_2分配给客户:con_customer_01 [Customerid:32071 ]"
},
{
"策略分配":"策略:demo_role_demo_2分配给客户:cust_001 [Customerid:32072 ]"
},
{
"策略分配":"策略:demo_role_demo_2分配给客户:etl_demo_01 [Customerid:32073 ]"
},
{
"策略分配":"策略:demo_mysql_to_mysql分配给客户:client_java [Customerid:35144 ]"
},
{
"策略分配":"策略:demo_mysql_to_sybase分配给客户:sybase [Customerid:35155 ]"
},
{
"策略分配":"策略:mysql_to_telpg分配给客户:tst [Customerid:35185 ]"
}
]
}
],
"id":14,
"levelid":0,
"name":"策略分支",
"pid":1,
"value":[
{
"策略":"策略分支"
}
]
},
{
"children":[
],
"id":21,
"levelid":0,
"name":"全链路状态【单用户】",
"pid":1,
"value":[
{
"NAME":"35059-databus_v4",
"levelid":"11",
"链路信息":"从节点 [mm,mysql,172.17.58.146] 将数据用户 databus_v4 相关表复制到目标 [DATABUS_V4_TO_ORACLE - oracle12c,ORACLE,172.17.58.145] 对应的用户 zcbus_001 中,最后分析时间为 2021-01-05 11:40:44,生产业务提交时间2021-01-05 11:41:34,目标加载时间2021-01-05 11:41:35,延迟-50秒"
},
{
"NAME":"35059-databus_v4",
"levelid":"11",
"链路信息":"从节点 [mm,mysql,172.17.58.146] 将数据用户 databus_v4 相关表复制到目标 [ZCBUS_TO_SQLSERVER - zl_test_db,sqlserver,172.17.104.185] 对应的用户 dbo 中,最后分析时间为 2021-01-05 11:40:44,生产业务提交时间2021-01-05 11:41:28,目标加载时间2021-01-05 11:41:30,延迟-44秒"
},
{
"NAME":"35059-databus_v4",
"levelid":"15",
"链路信息":"从节点 [mm,mysql,172.17.58.146] 将数据用户 databus_v4 相关表复制到目标 [ZCBUS_TO_SYBASE - dt,sybase,172.17.104.186] 对应的用户 dbo 中,最后分析时间为 2021-01-05 11:40:44,生产业务提交时间2020-12-19 22:19:05,目标加载时间2020-12-20 10:20:18,延迟1430499秒"
},
{
"NAME":"35059-databus_v4",
"levelid":"11",
"链路信息":"从节点 [mm,mysql,172.17.58.146] 将数据用户 databus_v4 相关表复制到目标 [ZCBUS_TO_POSTGRESQL - zfl,postgresql,172.17.58.146] 对应的用户 zcbus 中,最后分析时间为 2021-01-05 11:40:44,生产业务提交时间2021-01-05 11:41:34,目标加载时间2021-01-05 11:41:35,延迟-50秒"
},
{
"NAME":"35059-databus_v4",
"levelid":"11",
"链路信息":"从节点 [mm,mysql,172.17.58.146] 将数据用户 databus_v4 相关表复制到目标 [ZCBUS_TO_MYSQL - test,mysql,172.17.58.145] 对应的用户 zcbus 中,最后分析时间为 2021-01-05 11:40:44,生产业务提交时间2021-01-05 11:41:33,目标加载时间2021-01-05 11:41:35,延迟-49秒"
},
{
"NAME":"35059-databus_v4",
"levelid":"11",
"链路信息":"从节点 [mm,mysql,172.17.58.146] 将数据用户 databus_v4 相关表复制到目标 [mysql_to_telpg - postgres,postgresql,172.17.104.184] 对应的用户 public 中,最后分析时间为 2021-01-05 11:40:44,生产业务提交时间2021-01-05 11:41:27,目标加载时间2021-01-05 11:41:28,延迟-43秒"
}
]
}
],
"id":1,
"levelid":0,
"name":"发布节点分支",
"pid":0,
"value":[
{
"发布节点":"发布节点分支"
}
]
}文档更新时间: 2021-01-14 05:29 作者：阿力
