江西农信数据仓库国产化升级改造项目
江西农信作为华中地区有影响力的银行业成员,在几年前采用IBM Netezza一体机解决方案构建了ODS数据仓库平台。数据仓库的应用有效地支撑了江西农信的
江西农信数据仓库国产化升级改造项目
1项目概况
项目背景
江西农信作为华中地区有影响力的银行业成员,在几年前采用IBM Netezza一体机解决方案构建了ODS数据仓库平台。数据仓库的应用有效地支撑了江西农信的经营分析、决策支持、风险控制等多个业务场景的数据分析和数据挖掘的需求。
随着银行业竞争的加剧和各类业务快速发展,作为企业核心竞争力的数据分析和挖掘平台的数据仓库有进一步演进和发展的需要。
关注问题
Netezza 一体机产品属于基于封闭式架构,价格昂贵,后期硬件、软件维护成本较高,且实际场景使用中发现Netteza 批处理能力强,但并发查询弱,满足不了客户多并发查询的业务需求。
2解决方案
江西农信数据平台采用一体机+MPP数据库集群两类大数据平台技术混搭的方式作为据仓库基础架构。架构图如下:

江西农信数据平台架构图
本项目中Netezza一体机平台建议保留并作为ODS系统的主体平台。利用一体机的高稳定性和中、小数据量分析场景下,MPP并行处理、列存储、压缩、FPGA硬件加速等先进技术,提供对各前端业务系统实时或准实时数据的寄存功能,同时提供在线数据处理功能,主要面向各类及时性要求较高的在线业务查询和小数据集的分析类场景。包括及时性要求较高的日常的报表类应用,如日报、周报和和在线的实时统计,实时查询,提供面向固定用户和固定业务场景的数据查询和关联分析能力。
3应用效果及价值
动态高扩展:不受数据量与设备能力的限制,随着业务数据量增长,按需线性扩展;
自主可控:国内自有知识产权,安全可靠,可定制开发;
低成本:采用经济的PC Server+本地磁盘硬件方案,降低系统建设成本;本土企业售后服务及时高效,降低运维成本。