近两年来，某行清算总中心全栈国产化深度实施，标志着我国金融行业在技术创新方面取得了重要突破。在这个过程中，DSG数据同步技术发挥了关键作用，为该行清算总中心的全栈国产化进程提供了有力支持。

项目背景及现状

项目实施难点

1. 业务系统复杂性强：项目涉及多个业务场景，包括单条insert和多条update场景，以及源端主键与目标端主键不一致和目标端主键与源端主键不一致等场景；

2. 数据同步时效性要求高：在网银业务场景中，涉及到日切、场切、日结、日终等操作，每日固定时间需要确保数据完全同步至汇聚库，保障业务对账的准确性和及时性；

3. 定制化开发需求：针对TDSQL二级分区表、分片表、广播表的更新数据问题，如果只带一个主键，不会正常返回数据影响行数问题，进行定制化开发，实现自适应处理方式，如告警、更新转插入、忽略等。同时，源端数据库需要支持cn、dn故障自适应；

4. 系统特点各异：网银系统为两地三中心、双活架构，需要通过指定标识来区分数据来源实例；外币部分系统为一地到一地的架构，含自由格式的数据表需要进行特殊处理等。各个系统特点、需求灵活多样；

5. 高可用场景要求：需要在10分钟内满足39条同步链路的容灾切换。

项目技术架构

该行网银系统采用两地三中心架构，通过DSG DataXone交换集成管理平台，以GaussDB为源数据库，Oracle与TDSQL为目标数据库，将数据由北京、上海两中心实时同步到北京、上海、无锡三地，保证数据一致性和时效性。

该行外币系统采用两地两中心架构，通过DSG DataXone交换集成管理平台，以GaussDB为源数据库，Oracle为目标数据库，将数据由北京、上海两中心实时同步到北京、上海两地，保证数据一致性和时效性。

项目采集要求及产品说明

1. DataXone交换集成管理平台权限管理；

2. DataXone交换集成管理平台排序功能；

3. DataXone交换管理平台告警划分；

4. DataXone交换管理平台首页自动刷新；

5. DataXone交换管理平台监控展示，包括延时、数据传输量、历史传输量曲线图以及DSG服务器节点历史性能数据；

6. 应对源端数据库故障数据采集连续性保障能力，包括cn、dn故障；

7. 应对目标端数据库各种故障的数据连续性保障同步proxy故障；

8. 同步任务高可用，同步主机宕机时备机自动接管、自动拉起、断点续传，确保数据一致性。

DSG DataXone交换集成管理平台是迪思杰自主研发的拥有自主知识产权的数据采集与共享交换平台，底层集成了自主研发的数据库同步模块、数据转换脱敏模块、文件同步模块、切换导航模块、差异比对模块等功能模块，可实现对多源异构数据库的高效实时同步，支持数据采集、共享、交换、复制、迁移、容灾切换等场景应用，兼容多达百种以上异构源端数据源和目标端，包含国内外数据库、大数据平台、上云、下云和云内各类数据交换共享，是企业集团数据交换的基础平台。

性能指标及部署说明

数据实时同步最小150tps，最大500tps。

此次该行清算总中心全栈国产化，采用中间机部署模式，DSG DataXone部署架构为高可用，由两台DataXone主备、数据库主主复制、Manager主备及zookeeper集群组成。同步链路所在中间机由两台组成，并创建及关联高可用主机组，以应对同步链路高可用切换需求。