客户案例

专注于数据库软件产品和服务,致力于成为用户最信赖的数据库产品供应商

中国银行总行国产化大数据平台

根据中国银行企业级架构建设总体部署,通过构建“三横两纵一线”的数字资产运营服务体系,为全行数据治理各项工作奠定坚实基础。 “三横”是搭

中国银行总行国产化大数据平台

1项目概况

根据中国银行企业级架构建设总体部署,通过构建“三横两纵一线”的数字资产运营服务体系,为全行数据治理各项工作奠定坚实基础。

“三横”是搭建集团统一数据平台,以“数据+分析+展现”的三层架构,为数据资产的共享、分析应用、服务提供和价值创造提供全面、敏捷、精细的能力支撑,数据仓库是数据层的重要组成部分。

项目采用国产芯片服务器、国产操作系统和国产数据库建设,建成全国产化的企业数仓平台。

2.2解决方案

中国银行企业数仓系统架构示意图如下:

中国银行企业数仓系统架构图

GBase 8a集群作为中国银行企业数仓的核心部分,进行结构化数据的存储管理与计算,支撑全行的公共数据存储、整合模型计算、共性数据模型架构,并直接承担一些业务应用的查询分析。

使用Hadoop平台用于数据湖的数据存储和公共数据交换区,通过TBDS分布式存储汇聚来自各个业务系统的数据,经过初步加工处理后,加载进入GBase 8a集群。GBase 8a集群运算分析后的结果数据再回到TBDS分布式存储,供其他系统使用。

2.3应用效果

  • 实施情况

本项目目前搭建200余台服务器,采用海光芯片的国产服务器,同时使用国产操作系统。部署GBase 8a v9.5.3集群,包含十余个coordinator管理节点服务器,100余个数据节点服务器,近百个freenode节点服务器。为适配国产服务器架构,每个数据节点服务器上部署2个实例。

数据仓库中历史数据约100TB,每日增量超10TB;目前投产上线了6000多个批量任务,核心作业数量约2000个,任务执行时间在3小时内完成。

  • 效果及价值

超大规模集群:超大规模集群提供了海量数据存储和超强计算能力,同时具备横向扩展能力,可扩展到千节点以上,支撑中国银行未来规划;

全国产化:金融行业率先大规模应用国产服务器+国产操作系统+国产数据库;

湖仓一体:打通数据仓库与数据湖的数据通道,实现湖仓融合。