GBase 8a
适配迁移
文章

Gbase8a通过简单认证方式与Hadoop进行对接

发表于2025-03-11 15:53:03101次浏览2个评论

Simple认证模式下的对接测试,Hadoop侧需要提供认证的账号、密码以及认证端口

 1、在数据库里需要确认以下参数配置是否正确

-- 设置hdfs认证方式

set gbase_hdfs_auth_mode='Simple';

-- 设置协议

set gbase_hdfs_protocol=http;

2、根据Hadoop侧给的数据文件路径先进行文件读取测试验证,可以通过如下命令进行。命令执行成功后如果能正常看到文件内容,说明文件操作正常。

curl -I -v  -L "http://hadoop:hadoop@10.10.10.10:50070/webhdfs/v1/user/hive/warehouse/test.db/test2411.csv?op=OPEN"

3、进行数据加载验证,根据数据文件格式,已在数据库中创建好对应的表。

-- 指向HDFS对应的目录进行LOAD

load data infile 'hdp://hadoop:hadoop@10.10.10.10:50070/webhdfs/v1/user/hive/warehouse/test.db/test2411.csv‘ into table dbname.tbname fields terminated by'|;

 

评论

登录后才可以发表评论
用户头像
levvel发表于 5个月前
评论是一种尊重
崔哥发表于 5个月前
墙角数枝梅,凌寒独自开。遥知不是雪,为有暗香来。