" id="b1img" alt="米课”N+1“思维建站-非官方免费技术支持,Wordpress/Zencart/Opencart建站、SEO" title="米课”N+1“思维建站-非官方免费技术支持,Wordpress/Zencart/Opencart建站、SEO">
  • " alt="米课”N+1“思维建站-非官方免费技术支持,Wordpress/Zencart/Opencart建站、SEO" title="米课”N+1“思维建站-非官方免费技术支持,Wordpress/Zencart/Opencart建站、SEO" />
  • " alt="Windows/Linux服务器运维技术支持 环境搭建、应用发布、服务器管理、虚拟化、云计算" title="Windows/Linux服务器运维技术支持 环境搭建、应用发布、服务器管理、虚拟化、云计算" />
  • " alt="高校/小型企业网络运维与建设免费技术支持,网络规划、网络优化、故障排除、网络管理" title="高校/小型企业网络运维与建设免费技术支持,网络规划、网络优化、故障排除、网络管理" />

Hadoop部署常见问题汇总

程序设计2017-07-02 itlogger阅读(425) 评论(0)

1.Error:JAVA_HOME is not set and could not be found
LINUX环境变量已经添加JAVA_HOME,仍然出现该错误,解决方法:
hadoop安装目录/etc/haddop/hadoop-env.sh修改
export JAVA_HOME=${JAVA_HOME} 为export JAVA_HOME=JAVA安装目录如/usr/soft/jdk1.8.0_131
2.启动hadoop时,提示mkdir: cannot create directory ‘/usr/local/hadoop/bin/../logs’: Permission denied
chown -R hadoop用户:hadoop用户组 hadoop安装目录/
3.Hadoop启动时,SLF4J: Class path contains multIPle SLF4J bindings.
错误原因hadoop jar包和hbase jar包重复冲突,根据信息提示,移除hadoop或hbase对应目录下的jar文件即可
4.Hadoop启动时:Only one image storage directory (dfs.namenode.name.dir) configured. Beware of data loss due to lack
vi hdfs-site.xml

dfs.datanode.dir
file:/usr/soft/hadoop-2.8.0/hdfs/data,/usr/soft/hadoop-2.8.0/hdfs/data-bk//可以设置多个目录做冗余

5.Hadoop运行Mapreduce程序
Current usage: 162.4 MB of 1 GB physical memory used; 3.2 GB of 2.1 GB virtual memory used. Killing container.

删除mapred-site.xml的JAVA参数设置
如: mapred.child.java.opts
-Xmx1512m

6.util.FSUtils: Waiting for dfs to exit safe mode

hadoop dfsadmin -safemode get 查看hadoop当前启动状态是否为safe mode
hadoop dfsadmin -safemode leave 退出
转载请注明 :IT樵客
文章地址:http://www.itlogger.com/program/2296.html
标签:,
相关文章

发表评论

电子邮件地址不会被公开。 必填项已用*标注