写的很详细，步骤清晰，有参考价值！！

活动专区

活动公告

上车！GBase 8a开发者联盟发车了 技术福利、人脉资源全都有！

认证培训专区

认证培训资料

GBase 8s GDCA 认证培训课前准备

GBase 8a

其他

物化视图报错：references invalid table(s) or column(s) or function(s) or definer/invoker of view lack rights to use them

01-GBase 8s 事务型数据库 安装与卸载

GBase 8s

适配迁移

[GBase 8s 教程]GBase 8s 常用函数、表达式

# GCDW物理机版安装手册

很荣幸参加第一期GCDW认证学习班，我补充了一些我自己使用vmware虚拟机安装GCDW的流程，希望能对新手起到一些帮助。

# 一、文档说明

## 1.1 文档目的

本文档为练习GCDW物理机版安装的学员提供详细步骤参考，提供从FoundationDB元数据服务、MinIO对象存储到GCDW集群的完整安装部署指导。

## 1.2 环境信息

本文档基于以下环境进行安装示例：

| **软件** | **版本**                        | **服务器IP**     |
| -------- | ------------------------------- | -------------------- |
| FDB      | FDB-centos7-x86_64-202505120818 | 192.168.100.100~102  |
| MinIO    | 20240704版本                    | 192.168.100.102:9000 |
| GCDW     | 9.8.0.8.3_patch.16              | 192.168.100.100~102  |

说明：

- 服务器环境版本：操作系统CentOS 7、Python 2.7.5+Python 3.8。
- 服务器资源规划：CPU 2核、内存4G、硬盘20G。
- FDB同时部署在3个节点上，其中192.168.100.100兼做控制节点。
- MinIO对象存储部署在192.168.100.102节点。
- GCDW 3个节点同为coordinator、gcware、data节点。

## 1.3 配置CentOS

vmware配置网络教程参考https://blog.csdn.net/m0_74823933/article/details/146432779

CentOS 7镜像下载地址 https://mirrors.huaweicloud.com/centos/7/isos/x86_64/

```bash
# centos7 root密码配置为ROot##123
# 配置域名解析
echo "nameserver 8.8.8.8" &gt;/etc/resolv.conf
echo "nameserver 1.1.1.1" &gt;&gt;/etc/resolv.conf

# 配置yum源
curl -o /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
yum update -y
```

---

# 二、FoundationDB安装部署

FoundationDB（FDB）是GCDW的元数据服务组件，用于持久化GCDW的所有元数据信息。

## 2.1 安装前环境配置

### 2.1.1 SSH连通性配置

FDB自动化安装工具需要通过SSH连接到各个节点，因此需要提前完成以下配置：

**1.**确认各节点root用户及密码，以便使用FDB自动化安装运维工具。

**2.**检查各节点 /etc/ssh/sshd_config 中 PermitRootLogin 参数值是否为 yes：

```bash
cat /etc/ssh/sshd_config | grep PermitRootLogin
```

若显示为 `PermitRootLogin yes` 或 `PermitRootLogin without-password`，则无需修改。否则需要编辑配置文件：

```bash
vi /etc/ssh/sshd_config
```

找到 PermitRootLogin 行，修改为：

```bash
PermitRootLogin yes
```

重启SSH服务使配置生效：

```bash
systemctl restart sshd
```

**3.**配置各节点之间root用户的SSH互信，确保从控制节点可以免密SSH到所有节点：

```bash
# 在控制节点(192.168.100.100)执行
 ssh-keygen -t rsa
 ssh-copy-id root@192.168.100.100
 ssh-copy-id root@172.16.5.178
 ssh-copy-id root@192.168.100.102
```

**4.**验证SSH连通性：

```bash
ssh root@192.168.100.100
ssh root@172.16.5.178
ssh root@192.168.100.102
```

### 2.1.2 安装基础依赖

所有节点（包括控制节点和所有FDB节点）需要安装以下基础依赖：

```bash
# 所有节点执行
yum install -y zlib sshpass python3 java-1.8.0-openjdk postgresql-libs
```

说明：sshpass用于自动化工具通过SSH批量执行命令，python3为自动化工具的运行环境。

### 2.1.3 设置IO调度策略（可选）

建议将所有节点的IO调度策略修改为kyber，该调度器针对数据库类高IO负载场景优化，能有效匹配海量数据查询分析的IO访问需求。

所有节点执行以下命令：

```bash
sed -i '/^GRUB_CMDLINE_LINUX/s/"$/ elevator=kyber "/' /etc/default/grub
grub2-mkconfig -o /boot/efi/EFI/centos/grub.cfg
```

⚠ 注意：执行后需要重启服务器才能生效。若系统使用传统BIOS而非UEFI，grub配置文件路径可能为 `/boot/grub2/grub.cfg`。

### 2.1.4 设置最大打开文件数及最大进程数（可选）

修改系统资源限制，适配FDB和GCDW集群的高并发、高资源占用特性。

首先备份原配置文件：

```bash
cp /etc/security/limits.conf /etc/security/limits.conf.bak
```

然后在所有节点修改 `/etc/security/limits.conf` 文件，在末尾追加以下内容：

```bash
*      soft    nofile         655360
*      hard    nofile         655360
*      soft    nproc          8192
*      hard    nproc          8192
```

保存后退出，重新登录使配置生效。

## 2.2 FDB自动化工具安装

以下操作在控制节点（192.168.100.100）上执行。

**1.**创建安装目录并上传FDB安装包到该目录：

```bash
mkdir /fdb
```

将FDB安装包 `FDBDeploy-20250512090706.tar.gz` 上传到 /fdb 目录下。

**2.**解压安装包并赋权：

```bash
cd /fdb
tar -xzvf FDBDeploy-20250512090706.tar.gz
chown -R root:root FDBDeploy/
chmod -R u+x FDBDeploy/
```

**3.**安装FDB自动化运维工具：

```bash
cd FDBDeploy
./auto.sh install
```

安装成功后将显示相关提示信息。

## 2.3 FDB集群部署

在控制节点上执行以下命令部署一个3节点、高可用（双副本）、内存型的FoundationDB集群。

以下命令需要在同一行执行（使用反斜杠换行仅为展示清晰）：

```bash
./auto.sh \
  -h "192.168.100.100 root gbase2026 172.16.5.178 root gbase2026 192.168.100.102 root gbase2026" \
  -e "ansible_ssh_port=22 ansible_python_interpreter=/usr/bin/python \
  fdb_source_dir=/fdb/FDBDeploy/package/ \
  fdb_rpm_client=foundationdb-clients-6.3.25-20250327171341.el7.x86_64.rpm \
  fdb_rpm_server=foundationdb-server-6.3.25-20250327171341.el7.x86_64.rpm \
  fdbcli_log_dir=/opt/fdbcli_log/ file_owner=root file_group=root \
  task_time_out=120 redundancy_mode=double storage_engine=memory \
  stateless_process=4 transaction_process=2 storage_process=2 \
  coordinator_servers='192.168.100.100:4500 172.16.5.178:4500 192.168.100.102:4500' \
  proxies_number=1 resolver_number=1 logs_number=8 fdbcli_passwd=Gcdw@2025"
```

合成为同一行的命令如下：

```bash
./auto.sh -h "192.168.100.100 root 'ROot##123' 192.168.100.101 root 'ROot##123' 192.168.100.102 root 'ROot##123'" -e "ansible_ssh_port=22 ansible_python_interpreter=/usr/bin/python fdb_source_dir=/fdb/FDBDeploy/package/  fdb_rpm_client=foundationdb-clients-6.3.25-20260408143753.el7.x86_64.rpm fdb_rpm_server=foundationdb-server-6.3.25-20260408143753.el7.x86_64.rpm fdbcli_log_dir=/opt/fdbcli_log/ file_owner=root file_group=root task_time_out=120 redundancy_mode=double storage_engine=memory stateless_process=4 transaction_process=2 storage_process=2 coordinator_servers='192.168.100.100:4500 192.168.100.101:4500 192.168.100.102:4500' proxies_number=1 resolver_number=1 logs_number=8 fdbcli_passwd=Gcdw@2025"
```

参数说明：

| **参数**            | **说明**                         |
| ------------------- | -------------------------------- |
| -h                  | 节点信息，格式：ip user password |
| ansible_ssh_port    | SSH连接端口                      |
| fdb_source_dir      | FDB RPM包所在目录                |
| redundancy_mode     | 副本模式：double=双副本          |
| storage_engine      | 存储引擎：memory=内存型          |
| coordinator_servers | 协调器地址列表                   |
| fdbcli_passwd       | fdbcli连接密码                   |

⚠ 说明：若安装失败，工具会自动回退到安装前状态。可根据报错信息检查失败原因后重新安装。

## 2.4 验证安装

安装成功后，通过fdbcli连接并检查集群状态：

```bash
fdbcli -p ‘Gcdw@2025’
# 输入密码: Gcdw@2025
status
```

若显示集群状态正常、所有进程正常运行，则表示FDB安装成功。

退出fdbcli

```bash
exit
```

## 2.6 FDB卸载

⚠ **警告：卸载操作需要读取各节点的`/etc/foundationdb/foundationdb.conf`文件获取存储目录进行删除。无相关文件会导致卸载失败，且删除的目录无备份，请谨慎操作！**

完整卸载命令如下：

```bash
./auto.sh fdb_uninstall \
-h "192.168.100.100 root gbase2025 172.16.5.178 root gbase2025 192.168.100.102 root gbase2025"
```

---

# 三、MinIO对象存储安装部署

MinIO作为GCDW的对象存储服务，用于持久化GCDW保存的用户数据。本示例在192.168.100.102单个节点上部署MinIO。

## 3.1 MinIO安装

**1.**获取MinIO的RPM安装包：

\# 需要准备的安装包：

```bash
# mcli-20240703201725.0.0-1.x86_64.rpm
# minio-20240704142545.0.0-1.x86_64.rpm
```

**2.**安装MinIO和MC客户端：

```bash
rpm -ivh mcli-20240703201725.0.0-1.x86_64.rpm minio-20240704142545.0.0-1.x86_64.rpm
```

**3.**创建数据存储目录：

```bash
mkdir -p /data
```

**4.**启动MinIO服务：

```bash
# 前台启动（测试时使用）
minio server /data
/usr/local/bin/minio server --console-address :9001 /data

# 或使用systemctl后台启动
systemctl start minio
```

如果出现

```bash
[root@test-102 ~]# systemctl start minio 
Job for minio.service failed because the control process exited with error code. See "systemctl status minio.service" and "journalctl -xe" for details.
```

解决方案

```bash
vi /usr/lib/systemd/system/minio.service
```

```bash
[Service]
Type=simple

User=minio-user
Group=minio-user

WorkingDirectory=/usr/local

ExecStart=/usr/local/bin/minio server /data --console-address :9001

Restart=always
LimitNOFILE=1048576
TasksMax=infinity
TimeoutSec=infinity
```

```bash
groupadd -r minio-user
useradd -r -g minio-user -s /sbin/nologin minio-user
chown -R minio-user:minio-user /data

systemctl daemon-reload
systemctl reset-failed minio
systemctl restart minio
systemctl enable minio
systemctl status minio
```

启动成功后将显示访问地址，默认API端口为9000。

若规划多个节点作为对象存储，启动命令可参考：

```bash
minio server http://10.0.2.181/data http://10.0.2.182/data http://10.0.2.183/data
```

## 3.2 MinIO管理配置

### 3.2.1 创建用户

通过浏览器访问MinIO的Web管理界面（地址如 http://192.168.100.102:9000）

使用默认账户密码 `minioadmin/minioadmin` 登录。

在Identity/Users界面创建新用户：

- 用户名：gcdw
- 密码：gcdw2025

创建完成后，登出并使用gcdw用户重新登录。

### 3.2.2 创建AccessKey

以gcdw用户登录后，在Identity/Users界面创建AccessKey。

系统将生成对应的AccessKey（AK）和SecretKey（SK），请妥善保存。后续GCDW安装配置demo.options文件时需要使用这些信息。

```bash
AK:
JxYo4jg0lBPoAc8hnGR7
SK:
8G427HD7u3sMfJRIstx00V4wKOExPETQ5J82x3GV
```

### 3.2.3 创建Bucket

在Buckets界面创建存储桶，用于GCDW的数据存储。

Bucket名称：`testforgcdw`

创建完成后，记下Bucket名称，后续配置需要使用。

```bash
bucket名
testforgcdw
```

## 3.3 MinIO卸载

如需卸载MinIO，按以下步骤执行：

**1.**停止MinIO服务：

```bash
systemctl stop minio
```

**2.**通过rpm卸载：

```bash
rpm -e mcli-20240703201725.0.0-1.x86_64
rpm -e minio-20240704142545.0.0-1.x86_64
```

**3.**验证卸载：

```bash
minio --version
```

若提示命令不存在，则表示卸载成功。

---

# 四、GCDW安装部署

GCDW（GBase Cloud Data Warehouse）是适用于云上环境和云下环境的海量数据查询分析服务。本节介绍GCDW的完整安装步骤。

## 4.1 创建用户和安装目录

在所有GCDW节点上执行以下操作，创建gbase用户和安装目录。

```bash
# 创建gbase用户
useradd gbase

# 设置密码：gbase2026
echo "gbase2026" | passwd gbase --stdin
pam_tally2 -u gbase --reset
chage -l gbase

# 添加无密码执行sudo命令
echo 'gbase ALL=(ALL) NOPASSWD: ALL' &gt; /etc/sudoers.d/gbase && \
chmod 440 /etc/sudoers.d/gbase && \
visudo -cf /etc/sudoers

# 创建安装目录，并赋权给gbase用户
mkdir -p /opt/gcdw

chmod 777 /opt
chown -R gbase:gbase /opt/gcdw
```

## 4.2 解压安装包与环境配置

**1.**获取安装包并解压，得到gcinstall文件夹：

```bash
cd /opt/gcdw
tar -xjvf GCDW-NoLicense-9.8.0.8.3_patch.16-redhat7-x86_64.tar.bz2
cd ./gcinstall
```

**2.**将环境配置脚本分发到各节点：

```bash
scp SetSysEnv.py root@192.168.100.100:/opt/gcdw
scp SetSysEnv.py root@172.16.5.178:/opt/gcdw
scp SetSysEnv.py root@192.168.100.102:/opt/gcdw
```

**3.**各节点使用root用户执行环境配置脚本：

\# 在各节点分别执行

```bash
cd /opt/gcdw
./SetSysEnv.py --dbaUser=gbase --installPrefix=/opt/gcdw
```

```bash
su - gbase
# 注意替换GBASE_HOME目录
vi ~/.gbase_profile
export GBASE_HOME=/opt/192.168.100.100/gnode/server
export PATH=$GBASE_HOME/bin:$PATH
export LD_LIBRARY_PATH=$GBASE_HOME/lib/gbase:$GBASE_HOME/lib:$LD_LIBRARY_PATH
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.412.b08-1.el7_9.x86_64
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$JAVA_HOME/jre/lib/amd64/server:$JAVA_HOME/jre/lib/amd64

vi ~/.bashrc
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.412.b08-1.el7_9.x86_64/jre
export LD_LIBRARY_PATH=$JAVA_HOME/lib/amd64/server:$JAVA_HOME/lib/amd64:$LD_LIBRARY_PATH

source ~/.gbase_profile
source ~/.bashrc
```

## 4.3 配置demo.options

切换到gbase用户，编辑demo.options文件，配置关键参数：

```bash
su - gbase
vi /opt/gcdw/gcinstall/demo.options
```

需要重点配置以下参数：

| **配置项**             | **示例值****/****说明**               |
| ---------------------- | ------------------------------------- |
| GCDW_S3_BUCKET         | testforgcdw（已创建的Bucket名）       |
| GCDW_S3_ENDPOINT       | 192.168.100.102:9000（S3	API地址） |
| GCDW_S3_ACCESS_KEY_ID  | gcdw（MinIO中创建的AK）               |
| GCDW_S3_SECRET_KEY     | gcdw2025（MinIO中创建的SK）           |
| GCDW_S3_REGION         | minio（可设置为空）                   |
| gcluster_instance_name | gbase8a（实例名，自行设置）           |
| instance_root_name     | root（管理员用户名）                  |
| instance_root_password | 111111（管理员密码）                  |

其他参数根据实际情况配置，保存退出。

```yaml
installPrefix= /opt
coordinateHost = 192.168.100.100,192.168.100.101,192.168.100.102
coordinateHostNodeID = 100,101,102
dataHost = 192.168.100.100,192.168.100.101,192.168.100.102
#existCoordinateHost =
#existDataHost =
#existGcwareHost=
gcwareHost = 192.168.100.100,192.168.100.101,192.168.100.102
gcwareHostNodeID = 100,101,102
dbaUser = gbase
dbaGroup = gbase
dbaPwd = 'gbase2026'
gcluster_instance_name=gbase8a
instance_root_name=root
instance_root_password=111111
rootPwd = '111111'
account_admin_password=Gcdw@2025
#rootPwdFile = rootPwd.json
#characterSet = utf8
#dbPort = 5258
#sshPort = 22
# 's3' or 'hdfs'
#GCDW_JAVA_HOME=
GCDW_STORAGE_STYLE = s3
GCDW_S3_BUCKET=testforgcdw
GCDW_S3_ENDPOINT=192.168.100.102:9000
GCDW_S3_ACCESS_KEY_ID=JxYo4jg0lBPoAc8hnGR7
GCDW_S3_SECRET_KEY=8G427HD7u3sMfJRIstx00V4wKOExPETQ5J82x3GV
GCDW_S3_REGION=minio
#GCDW_HDFS_NAMENODES=192.168.151.100:50070,192.168.151.101:50070
#GCDW_HDFS_URI=hdp://gbase@192.168.151.100:50070/
GCDW_HDFS_AUTH_MODE=
GCDW_HDFS_PRINCIPAL=
GCDW_HDFS_KEYTAB=
GCDW_HDFS_KERBEROS_CONFIG=
```

## 4.4 安装GCDW

以gbase用户执行安装命令：

```bash
su - gbase
cd /opt/gcdw/gcinstall
./gcinstall.py --silent=demo.options

# 每个节点上执行启动命令，如果在root用户下不小心执行了，需要重启服务器
chmod 777 /home/gbase/.gbase_profile && /home/gbase/.gbase_profile && gcluster_services all stop && gcware_services all stop && gcware_services all start && sleep 3 && gcluster_services all start && gcluster_services all info
```

安装过程会自动完成各节点的组件部署，包括coordinator、gcware和data节点。安装成功后会有提示信息。

## 4.5 创建Warehouse

安装完成后，需要创建数据仓库（Warehouse）才能正常使用GCDW。

**1.**编辑warehouse配置文件：

```bash
su - gbase
cd /opt/gcdw/gcinstall

/opt/gcdw/gcinstall/gcadmin createwh e wh.xml
vi /opt/gcdw/gcinstall/wh.xml
```

**2.**使用gcadmin命令创建warehouse：

```bash
/opt/gcdw/gcinstall/gcadmin createwh wh.xml
```

## 4.6 验证安装

通过gcadmin命令检查集群状态和warehouse信息：

```bash
su - gbase
# 查看集群状态
gcadmin
 
# 查看warehouse详情
gcadmin showcluster wh warehouse1
```

若显示warehouse正确创建且nodes已添加，则GCDW安装成功。

## 4.7 简单使用示例

使用gccli客户端连接GCDW，进行简单的数据库操作验证：

```bash
gccli -uroot -p111111
```

连接成功后，执行以下SQL命令：

```sql
-- 使用warehouse
use warehouse warehouse1;
 
-- 创建数据库
create database testdb;
 
-- 切换到testdb
use testdb;
 
-- 创建测试表
create table t1 as select now() d from dual;
 
-- 查询数据
select * from t1;

-- 正常返回当前时间数据，表示GCDW可以正常使用。

-- 查看租户信息：
account --show
```

---

# 五、GCDW服务启停与卸载

## 5.1 服务启停

切换至gbase用户，使用以下命令启停GCDW服务：

```bash
# 切换dba用户
su - gbase
 
# 启动服务
gcluster_services all start
gcware_services all start
 
# 停止服务
gcluster_services all stop
gcware_services all stop
```

## 5.2 GCDW卸载

如需卸载GCDW，在gcinstall目录下执行：

```bash
cd /opt/gcdw/gcinstall
./unInstall.py --silent=demo.options
```

⚠ **注意：卸载操作将删除所有数据，请提前备份重要数据！**



学习笔记

GCDW物理机版安装手册

GCDW物理机版安装手册

评论

热门帖子