首页 / HADOOP / shell启动hadoop集群

shell启动hadoop集群

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了shell启动hadoop集群，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1411字，纯文字阅读大概需要3分钟。

内容图文

原创，转载请注明。谢谢

shell启动hadoop集群
1：明确启动顺序
1）启动zookeeper集群（分别在centos 4-02，centos6-02，centos7-02）
app/zookeeper-3.4.5/bin/zkServer.sh start //启动进程
app/zookeeper-3.4.5/bin/zkServer.sh status //查看状态
2）启动journalnode（分别在centos 4-02，centos6-02，centos7-02）
app/hadoop-2.7.2/sbin/hadoop-daemon.sh start journalnode
3）格式化HDFS（centos4-01）
hdfs namenode -format
因为已经启动过了，所以不用格式化了。
4）启动HDFS（centos4-01）
app/hadoop-2.7.2/sbin/start-dfs.sh
5）启动YARN(centos7-01,centos8-01,只在centos7-01上启动)
app/hadoop-2.7.2/sbin/start-yarn.sh
6）其他都是datanode
app/hadoop-2.7.2/sbin/hadoop-daemon.sh start datanode

代码如下：

             1
            expect eof

             2
            EOF

             3
            done<zoo.list
 4 5echo"-------------------------start-namenode----------------------------" 6 app/hadoop-2.7.2/sbin/hadoop-daemon.sh start namenode
 7ssh centos6-01 app/hadoop-2.7.2/sbin/hadoop-daemon.sh start namenode
 8 9echo"------------------------start-YARN----------------------------"10ssh centos7-01 app/hadoop-2.7.2/sbin/start-yarn.sh1112echo"------------------------start-datanode----------------------------"13while read line
14do15  ip=$line
16echo $line
17echo $ip
18 /usr/bin/expect <<-EOF
19 spawn ssh -p22 centos@$ip
20 send "app/hadoop-2.7.2/sbin/hadoop-daemon.sh start datanode\r"21 expect "*#"22 send "exit\r"23interact
24expect eof
25EOF
26done<data.list
27echo"-------------------------OVER!----------------------------"

 

原文：http://www.cnblogs.com/wendu/p/6036755.html

内容总结

以上是互联网集市为您收集整理的shell启动hadoop集群全部内容，希望文章能够帮你解决shell启动hadoop集群所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/1201462.html

来源：【匿名】