国产数据库助力中移动大数据平台建设
中移动大数据平台建设背景
为有效支撑中国移动“大连接”战略,落实IT领域改革部署,建立“架构先进、运营高效、内外兼顾”的大IT体系,中国移动成立中移信息技术有限公司,对内部承担集中化IT系统的运营和支撑;对外,面向其他行业企业和海外电信运营商提供大数据等IT解决方案和服务。
在大数据时代,移动的大数据体系建设面临一些共性的痛点:数据整合困难;数据服务单一;大数据生态建设难度大;数据加工效率低;数据利用层次低;管理流程不健全。
GBASE南大通用自主研发的分析型数据库GBase 8a MPP Cluster产品经过30多项指标的测试,通过中移动选型测试规范,在标准SQL支持、可扩展测试、高可用等方面表现优异。总共部署GBase集群上千台,存储容量10+PB,满足业务长周期数据存储和跨域数据整合,实现海量数据的分析与挖掘;为集团租户、省份租户与合作伙伴租户提供数据与分析服务,保障数据服务的安全。

中移动大数据平台建设情况
集中化深度分析云项目介绍
集中化经营分析系统于2014年启动一期工程,分为综合应用平台、深度分析云平台和Hadoop云平台三个子工程项目开展建设,2016年初重点应用陆续上线,2018年初完成系统整体上线。构建深度分析云平台,实现对BMO三域数据的引入和长周期存储与管理。应用层面,向总部和省公司提供共性需求和个性需求支撑,以自助分析平台为依托,构建完整的面向各部门的自助分析环境,开拓业务支撑的新型管理及服务模式。
建设中国移动总部集中化经营分析系统深度分析云平台数据仓库,通过部署查询、报表、多维分析及沙盒管理等应用组件,获取各域数据形成企业数据的长周期历史存储,辅以抽样数据、沙盒环境的支撑,并借助自助分析工具环境及必要的模型和应用组件,为各部门数据分析工作提供自助或定制化的深度服务。
深度分析云作为存储数据的平台,由四类数据组成:来自B域、O域、M域的融合数据;来自非结构化数据,即Hadoop云的互联网分析及汇总的结果;来自自助分析提供的沙盒数据、采样验证数据等;来自数据集市数据。

中移动大数据GBase 8a Mpp集群规模
中移动在生产中心、应急中心、合作伙伴中心总计部署GBase集群上千台,存储容量10+PB,满足业务长周期数据存储和跨域数据整合,实现海量数据的分析与挖掘;为集团租户、省份租户与合作伙伴租户提供数据与分析服务,保障数据服务的安全。

GBase 8a Mpp集群使用情况
集群负载:GBase生产集群的CPU和内存利用率较高;为进一步扩大租户支撑范围和数据引入范围,增强长周期数据存储和深度整合能力,已按照计划对GBase集群进行扩容。建设四大业务专区,支撑市场、信安、内审、政企公司等部门的数据分析等需求。
省租户集中化入驻
2019年,中移信息技术公司将持续打造集中、开放、共享的大数据云平台,为入驻的各省公司、专业公司和合作伙伴提供全流程、端到端的一站式专业化服务,促进大数据应用百花齐放,协同构建大数据服务合作生态,加快推进公司集中化战略的实现。
2018年,西藏、天津等四省第一批试点入驻;2019年,第二批试点新疆、内蒙、甘肃、河北等7省入驻;后续将继续向其他省份推广。
结合PaaS平台统一管控GBase 8a MPP Cluster集群租户
为打造中国移动企业级省大数据平台面向内外部客户开放的新格局,实现PaaS平台对外服务的目的,利用中国移动的数据共享优势,运用互联网思维,提供开放的资源服务、工具服务、数据服务。GBase作为服务提供方,以逻辑多组的形式提供租户资源订购、变更、退订、用户管理等服务。

价值体现
开启租户新模式:GBase 8a MPP 集群将以资源池的形式对外提供服务,各省份公司作为租户统一管理,形成数据的大集中、大管理,同时根据租户数量对MPP集群进行按需扩容,集群资源随省份入驻线性扩展。
混搭架构支撑海量数据:通过分布式计算和存储以及Hadoop + MPP + 主数据仓库的混搭结构有效支撑海量数据。
动态扩展:系统可扩展能力强,支持集群动态扩展,且性能随着节点的增加而线性提升;
低投高效:GBase 8a MPP Cluster运行于低成本X86 PC Server,成本低廉,性能高效;
国产化:产品完全自主研发,国产自主可控,响应国家发展趋势。