GBase 8a
其他
文章

从hadoop集群加载数据报couldn't connect to server.的排查经过。

发表于2024-04-30 17:22:4231次浏览2个评论

1、在每个执行加载任务的 coordinator节点,以及集群中的每个 data节点上,配置了/etc/hosts 文件,

在其中加入 Hadoop 的 Namenode 和Datanode 的 IP 地址和主机名映射。

2、执行加载语句报couldn't connect to server.


3、排查管理节点到hadoop namenode节点的50070端口不通。
    咨询hadoop运维人员,获知对50070端口有白名单访问限制。

4、将所有管理节点数据节点加入50070端口白名单后,执行加载语句依然报couldn't connect to server.

5、排查访问不通端口为50075.50075端口也有白名单访问限制。

6、将所有管理节点数据节点加入Datanode的50075端口白名单后,加载成功。

评论

登录后才可以发表评论
用户头像
levvel发表于 8个月前
进来看看,应该有收获
崔哥发表于 4个月前
春风倚棹阖闾城,水国春寒阴复晴。细雨湿衣看不见,闲花落地听无声。日斜江上孤帆影,草绿湖南万里情。东道若逢相识问,青袍今已误儒生。