1、项目背景

在吉林银行的金融业务场景中，数据仓库系统大部分都涉及到多种渠道采集来的不同数据来源和数据类型，在系统中，需要对不同数据进行定制化的处理和计算。目前原有的系统无法满足后续业务持续发展，客户决定构建全国产化的分布式部署的新数据仓库。

2、建设目标

本方案的核心目的，就是基于全国产技术路线的基础环境，解决目前数据仓库业务中所大量使用的国外数据库的替换问题。对新建系统平台的目标包括：

1、采用国产芯片服务器、国产操作系统和国产数据库建设，建成全国产化的数仓平台。

2、处理海量结构化数据的平台来提升系统整体性能和处理效率。

3、对金融业务的关键要素和业务进行梳理、规范、治理，构建基础服务组件，实现业务流程化和规范化、数据标准化和集中化、应用组件化和服务化；

4、对应用提供标准接口、迁移工具和方法，帮助用户快速便捷的完成数据仓库整体迁移；

5、提供高可用、高可靠能力，保证业务不中断、可持续提供服务满足业务增长需求；

6、保证各业务系统性能处于同一水平；

7、提供可视化监管运维能力，帮助用户实时了解运行状态、快速定位解决问题。

3、实施方案

吉林银行数仓国产化项目于2020年7月15日开始实施，采用GBase 8a MPP Cluster大规模分布式并行数据库集群系统替代原oracle数据库建设新的数据平台以满足业务需求，并带来更高的价值。到2020年9月22日完成系统上线工作。项目采用全国产环境，“海光7280芯片+中标麒麟v10操作系统+南大通用GBase 8a MPP Cluster v9数据库”。

本项目已经运行了700余天。相比原系统，批量数据处理类性能提升30%；存储空间节省50%以上；软硬件投资节省50-90%，节电30%-50%。

平台共部署20节点，数据总量近千TB，每日增量近百GB，1.5万余张表，最大表超过百亿行，每天运行超10000个库内加工作业。同时为银行内部6万余员工提供7*24小时服务。

在数据装载方面，完成数仓主表加工，原Oracle数据库需1小时35分钟，GBase 8a MPP Cluster只需要15分钟。

日常业务数据跑批性能提升：借助MPP数据库的多表关联查询速度快的优势，模型跑批平均耗时缩短5-10倍。原Oracle数据库需8小时以上，GBase 8a MPP Cluster只需要3小时即可完成。数据批量处理时间缩短一半以上。

数据同步时效性提升：借助GBASE数据同步工具，实现与业务系统事务数据库的高效同步，数据同步由1小时缩短到12分钟，大大提高了数据分析的效能。

4、项目价值

该项目构建了一套完整的国产数据仓库系统，大幅降低建设成本，并为金融行业数据仓库系统建设提供了国产替代方案。

新系统全面支撑外部监管、资产负债、业务管理、以及风险管理等各项业务领域应用，面向全行6大业务系统提供高效、及时、准确的海量数据服务，为业务经营发展提供了创新引擎。