近日，嘉银金科自主研发的数据集成平台发布，基于分布式计算框架，利用并行化处理技术，实现了海量、实时数据迁移，最大化释放数据价值。在海量数据、复杂网络环境、复杂业务背景和高时效性数据要求的场景下，嘉银金科数据集成平台提供了数据同步方案，实现了数据高速稳定的传输与迁移。依托强大的数据处理能力和技术水平，嘉银金科数据集成平台有效提升数据使用效率，赋能业务全流程，为企业运营“降本增效”。

在企业运营中，由于碎片化的数据留存在业务各个异构的数据系统中，这些数据系统可能是几十个甚至上百个应用程序、数据库和业务系统。各个系统如同一个个小仓库，承载着不同类型的数据，对应着不同的存储方式，于是就出现了数据孤岛现象。而企业中不同业务部门独立运作，导致越来越多的跨多系统的数据分析诉求和业务场景出现，促使数据集成产品的出现。

数据集成平台采用分布式集群化部署方式和高效的并行计算框架，最大化利用企业现有信息系统的建设成果，在保证现有数据安全性的基础上，将数据进行整合及标准化，通过为用户提供实时同步、离线抽数、告警通知、监控大盘等全方位的产品服务，来保证数据流转稳定高效，方便用户最大化挖掘和探索数据价值。数据集成是数据同步平台，其目标是保证数据在不同数据源之间被高效准确地迁移。异构的数据源可以通过统一的数据集成平台来将异构网络的数据统一抽取到数据仓库平台，在数据仓库平台中完成数据汇聚，进行进一步的数据分析。分析后的结果数据仍可以通过数据集成回流到在线数据库，为在线业务、在线应用提供数据查询。数据集成在整个数据仓库开发建设过程中起到了非常关键的作用，只有通过数据集成将异构数据源统一汇总到数据仓库中，才有后序的数据分析、数据服务、数据应用等。

嘉银金科自研数据集成平台可支持离线集成和实时集成，对应两种不同的数据同步方式：离线集成主要针对数据时效要求低、吞吐量大的场景，解决大规模历史数据的批量迁移问题;实时集成针对数据时效性要求高的场景，其将源端数据的变化实时同步到目标端数据源中，保证源端数据与目标端数据实时保持一致，就可满足业务实时查询分析使用数据或实时计算等需求。在实际业务场景中，离线集成和实时集成搭配使用，为保证已有的数据表在目标端数据源中可用，使用离线集成将该表的历史数据全量同步到目标端数据源中，对于增量数据则通过实时集成来增量同步。

数据集成平台最关键的目标是，在进行异构数据源之间数据迁移时，保证迁移任务被高效完成，被迁入目标端数据源的数据是准确可靠的、实时的，数据传输过程是安全的。嘉银金科数据集成产品具有独到优势：

(1)离线/实时一体化

嘉银金科数据集成平台支持离线集成和实时集成同步方案，为实际业务中海量数据迁移需求，提供了稳定、高效、快速的数据迁移方式。

(2)自动校验功能

嘉银金科数据集成平台已实现自动校验功能和补数机制，实时集成产品已打通从源端到目标端的实时数据同步，并自动校验源端和目标端数据量的一致性，校验不通过时触发补数机制，有效的保证了数据的可靠性、准确性。

(3)分布式架构和任务拆分

分布式架构既支持全量数据迁移，也支持增量数据同步，帮助用户更好的管理各类数据信息，保证数据被高效地迁移。

嘉银金科数据集成平台是大数据平台上下云的核心枢纽，实现数据自由离线或实时的流动。通过数据流通，数据资源流向企业最需要的领域和方向，在生产经营中产生效益，才能最大化地发挥数据价值。

嘉银金科始终注重科技研发和人才培养，成立十多年来，不断精研技术，培养了一支强大的技术团队，形成了自主创新能力。在大数据领域，嘉银金科技术团队依托业务积累和创新实践，不断输出技术成果，并根据实际业务需求不断迭代更新产品，真正做到为业务高效运营赋能。在数据治理方面，嘉银金科“大禹”数据资产管理平台实现对数据全生命周期一站式治理和运营;在数据流通方面，嘉银金科数据集成平台保证了数据高效、准确、实时迁移。此外，嘉银金科还在数据分析、数据可视化、实时计算、数据建模等方面持续探索，将数据效能发挥到最大化，致力于为业务赋能，助力行业打破数据孤岛。