基本介绍

南大通用大规模分布式并行数据库集群系统，简称：GBase 8a MPP Cluster，它是在 GBase 8a 列存储数据库基础上开发的一款 Shared Nothing 架构的分布式并行数据库集群，具备高性能、高可用、高扩展等特性，可以为各种规模数据管理提供高性价比的通用计算平台，并广泛用于支撑各类数据仓库系统、BI系统和决策支持系统。GBase 8a MPP Cluster支持与 Hadoop 之间进行数据备份/恢复，将库内数据备份到 Hadoop 中，或将 Hadoop 内的数据文件恢复到库内。 南大通用统一数据平台系统，简称：GBase UP，它是融合了 GBase 8a MPP、GBase 8s、开源 Hadoop 生态系统的大数据平台产品，兼顾大规模分布式并行数据库集群系统、稳定高效的事务数据库，以及 Hadoop 生态系统的多种大规模结构化与非结构化数据处理技术，能够适应 OLAP、OLTP 和 NOSQL 三种计算模型的业务场景，是构建企业数据平台的重要基础设施。融合 Hadoop 生态支持以 Spark 为引擎的 Hive，实现低质量低密度大数据量的Hadoop 数据仓库；支持 HBase，配合 HDFS 实现海量中小文件的存储方案。 GBase 8a MPP Cluster兼容主流的软硬件环境： 支持如下的硬件环境： 1.支持服务器平台：x86_64 的标准 PC 服务器、PowerLinux 服务器、浪 潮 K1、华为泰山、中科曙光海光等； 2) 支持存储：本地存储（SATA、SAS、SSD 等）、阵列存储（SAN、NAS）、 SSD、Flash 卡； 3) 支持网络环境：千兆、万兆、InfiniBand。 操作系统和平台 支持如下的操作系统和平台： 1.支持的 CPU：Intel、AMD、申威、龙芯 3B、飞腾、X86、Power、鲲鹏、 海光等； 2) 支持的操作系统：CentOS、Red Hat、SUSE、中标麒麟、PowerLinux、 深度、银河麒麟、凝思等 64 位操作系统； 3) 支持基于 x86 及 Power 的虚拟机，如 VMware ESX 等。 与第三方软件平台的接口 兼容主流应用软件，包括： 1.BI 工具：MSTR、Cognos、R3 Query、GBase BI、SAS、SPSS 等； 2.ETL 工具：Datastage、Kettle、Informatica 等； 3.中间件：WebSphere、Tuexdo、Hibernate、Weblogic、Tomcat 等。 GBase 8a测试环境建议 1. 数据库测试环境需求： 1.1. 硬件配置建议： 数据库服务器配置 类型配置CPU建议2cpu，主流CPU即可，intel X86平台物理核数建议40核或以上，国产CPU 建议64核或128核;CPU开启性能模式：Performance内存512G以上内存磁盘系统盘：2块，raid1,（大小无严格限制，建议100G以上）；SWAP 64G；数据盘：剩余磁盘，8块以上1.5万转SAS盘，或SSD盘、NVME盘，raid策略需支持raid5、raid50，以及可配置读写策略、调整条带（备注：数据库部署在数据盘，数据、日志等均部署在数据盘，系统盘不需要预留数据库相应空间）RAID策略数据存储单独划分一个RAID分区，建议RAID5或RAID50（盘数多）或RAID0（盘数少）方式Strip Size：条带尺寸为1M（机械盘）、256K(SSD)；Access Policy：设置为RW，可读可写；Read Policy：read ahead；Write Policy：always write back网络万兆网络服务器数量3台以上操作系统redhat/centos 7.x或 8.x 或国产操作系统麒麟V10 等均可 1.2. IP地址需求： 测试服务器每台分配4个IP地址，共需要4x【服务器数量】个IP地址，用于多实例部署，每个实例一个IP地址， IP地址网络互通 1.3. 防火墙及网络端口需求： 建议防火墙关闭，如不能关闭防火墙，需要所有测试服务器开通如下端口，用于数据库部署： 端口协议备注21TCP22TCP5258TCP对外服务端口，JDBC等均使用该端口5050TCP5288TCP6268TCP5493UDP5918UDP5919UDP5678TCP6957TCP8088TCP9110TCP9999TCP8080TCP161TCP9898TCP8443TCP8081TCP16066~16166TCP 1.4. 节点间网络连接需求： 测试服务器间采用万兆网络连接，带宽不低于10Gb/s 1.5. 提供操作系统root口令，用于操作系统参数调整 1.6. 提供服务器操作系统的yum源或者提供ISO镜像文件，用于需要的RPM安装 2. 监控工具环境需求： 1. 监控工具服务器配置 类型配置CPU8c内存16G 磁盘1T网络千兆或万兆网络服务器数量1台操作系统redhat/centos 7.x或 8.x 或麒麟V10 2. 监控工具服务器端口： 端口协议备注8810TCPNginx8080TCPGdom service3307TCPHaproxy3306TCPMysql7481TCPRedis5258TCPGbase9876TCPRocketMQ10911TCP10912TCP10909TCP 配置推荐占比： 根据配置不同，建议的存储数据也不一样，基础建议可以按照1:4-8:200-500G(核数：内存：数据量) 来配比，并不是严格的规则。 也就是建议：64核，256G内存，10T空间 建议多块、快盘，大小无严格建议