个人知识管理站

分享个人生活、工作、学习过程中各种所学、所见、所闻,有趣的、好玩的、技术积累等各方面的内容。

您尚未登录。

公告

不积跬步无以至千里,不积小流无以成江海,网址:www.itecfun.com

#1 2018-10-29 14:59:39

xuyg
管理员
注册时间: 2015-01-21
帖子: 667

hadoop 2.7.7 安装过程及问题

安装过程参考:安装过程

离线

#2 2018-10-29 15:01:31

xuyg
管理员
注册时间: 2015-01-21
帖子: 667

Re: hadoop 2.7.7 安装过程及问题

安装完成后运行
hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.0.jar pi 5 10

Hadoop报错:NoRouteToHostException: No route to host

解决方案是所有主机的关闭防火墙,包括master和所有slave节点的防火墙。

#service iptables stop

#chkconfig iptables on/off

离线

#3 2018-10-29 17:02:06

xuyg
管理员
注册时间: 2015-01-21
帖子: 667

Re: hadoop 2.7.7 安装过程及问题

WARN hdfs.DFSClient: DataStreamer Exception: org.apache.hadoop.ipc.RemoteException: java.io.IOException: File /test.txt could only be replicated to 0 nodes, instead of 1
        at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getAdditionalBlock(FSNamesystem.java:1639)
        at org.apache.hadoop.hdfs.server.namenode.NameNode.addBlock(NameNode.java:736)
        at sun.reflect.GeneratedMethodAccessor3.invoke(Unknown Source)
        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAcc

查找了一下原因始datanode没有找到,用jps检测,datanode已经启动了,原因可能是datanode没有关闭防火墙,

service iptables status 发现防火墙果然没有关闭

执行service iptables stop 关闭之后,再上传就成功了

离线

页脚

©2019 YG Wang 备案号: 赣ICP备19010196号-1