首页 / HADOOP / 搭建hadoop集群时的一些问题

搭建hadoop集群时的一些问题

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了搭建hadoop集群时的一些问题，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1363字，纯文字阅读大概需要2分钟。

内容图文

1、在做格式化时，/bin/hdfs namenode -format出错：
ERROR namenode.NameNode: Failed to start namenode.
java.lang.IllegalArgumentException: URI has an authority component
at java.base/java.io.File.(File.java:423)
at org.apache.hadoop.hdfs.server.namenode.NNStorage.getStorageDirectory(NNStorage.java:338)
at org.apache.hadoop.hdfs.server.namenode.FSEditLog.initJournals(FSEditLog.java:286)
at org.apache.hadoop.hdfs.server.namenode.FSEditLog.initJournalsForWrite(FSEditLog.java:257)
at org.apache.hadoop.hdfs.server.namenode.NameNode.format(NameNode.java:1103)
at org.apache.hadoop.hdfs.server.namenode.NameNode.createNameNode(NameNode.java:1551)
at org.apache.hadoop.hdfs.server.namenode.NameNode.main(NameNode.java:1678)
INFO util.ExitUtil: Exiting with status 1
INFO namenode.NameNode: SHUTDOWN_MSG:
原因：一般都是hdfs-site.xml、core-site.xml等的配置的出错，比如涉及到的目录路径有误等。
2、hadoop启动报错：
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
在命令行执行：
export HADOOP_ROOT_LOGGER=DEBUG,console 
然后重启动，在log中查看具体的错误信息，然后针对性排错；
一般找到其中的warn信息或error信息，在这个信附近的前面找到一个：Failed to load native-hadoop with error: java.lang.UnsatisfiedLinkError，这表明是java.library.path出了问题。
针对的解决办法，比如针对性的改进出错项，或比如换一个java版本，向下或向上换一个版本的安装包等。
类似的参考：
http://blog.csdn.net/l1028386804/article/details/51538611

原文：https://www.cnblogs.com/ylnic/p/10151632.html

内容总结

以上是互联网集市为您收集整理的搭建hadoop集群时的一些问题全部内容，希望文章能够帮你解决搭建hadoop集群时的一些问题所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1265138.html

来源：【匿名】