腾讯云服务器安装hadoop踩坑记录

  • Post author:
  • Post category:其他


问题:只有hadoop web界面只有namenode一个主节点,datanode虽然在服务器端显示启动,但是没有在集群中存活,查看datanode日志显示如下

明显可以看到datanode节点一直在试图连接namenode,但是一直连接不上

查阅网上资料得知,腾讯云分为内外网,集群节点之间进行通信需要用外网,所以主节点上的hosts文件需要映射两个从节点的外网ip,两个从节点的hosts文件直接填写三个节点的外网ip

填写完hosts文件后一定要去腾讯云上将防火墙访问规则添加上!!!!

另外,如果要访问hadoop的web页面也要去防火墙把对应的端口打开,设置方式和上面一样



版权声明:本文为weixin_49289485原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。