项目背景

“网上国网”是由国家电网公司打造的一款掌上电力互动服务平台。主要为客户提供通过手机进行支付购电、用电查询、信息订阅、在线客服等相关电力业务。其功能分别有：支付购电、用电查询、信息订阅、在线客服、网店导航、停电公告。服务覆盖26个省（自治区、直辖市），覆盖国土面积的88%以上，供电服务人口超过11亿人。

业务需求

国家电网公司要求“网上国网”服务平台应用查询性能达到毫秒级别，单表数据量在200亿行以上，之前在Oracle、Hadoop生态及国网大数据平台均无法达到毫秒级响应。

建设要求

支撑网上国网报表统计分析类业务：每日对300多张超1亿条（约50G）业务数据表进行抽取汇聚处理，平均每日从网省同步超1000万档案变更数据，每天汇聚超2000万的用户行为日志数据。

指标计算抽取方面：每日需对上亿数据进行批处理计算，对外提供300多个运营指标数据支撑。

基础数据下发方面：每日将网上国网汇聚后的数据下发至全网27家单位，每日下发超2000万条约15G数据。

系统采用GBase 8a MPP Cluster建设，共20个节点，目前系统每个节点数据都已经通过压缩存储,每个节点数据量都超过10TB。

业务规模：每日入库数据量30亿行以上（日增量300G以上），同时支持2000万用户的app账单及用采数据实时查询。

报表统计分析类业务：每日对300多张超1亿条（约50G）业务数据表进行抽取汇聚处理，平均每日从网省同步超1000万档案变更数据，每天汇聚超2000万的用户行为日志数据。

指标计算抽取方面：每日需对上亿数据进行批处理计算，对外提供300多个运营指标数据支撑。

基础数据下发方面：每日将网上国网汇聚后的数据下发至26省（自治区、直辖市），每日下发超4000万条约30G数据。

图12- 1网上国网报表统计分析系统架构图

实施情况

系统采用GBase 8a MPP Cluster建设，共20个节点（20个数据节点，3个管理节点），目前数据量约200T，日增数据量400G左右，并发一般100-500。

效果及价值

海量数据处理：为用户提供了性价比很高的海量并行复杂数据处理平台，帮助客户实现26省（自治区、直辖市）服务11亿供电人口的电费查询、电量电费以及用能分析等业务。

高性能：系统架构高可扩展，性能随着节点数的增加而提升，保证客户接入更全面的业务数据，满足客户的业务需求。

高压缩比：为用户提供完备压缩态存储管理海量数据的能力，进一步降低客户数据仓库建设的成本，并进一步提升系统性能。