Hadoop用户启动hdf三个进程

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Hadoop用户启动hdf三个进程，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含2792字，纯文字阅读大概需要4分钟。

内容图文

再上次的课程中我们配置了root用户来启动了hdfs，hdfs-site.xml内的参数都是官方默认的参数，

所以启动项没有整理比较乱，为了做生产标准统一规范使用，我要用hadoop用户启动hdfs进程的启动

显示全部为hadoop-01的主机名，先看看root用户下启动的情况

可以看到namenodes datanode sercondary namenodes 进程启动的名称都不相同，

接下来会详细描述整个过程。

详细的修改步骤：

启动的三个进程：
namenode: hadoop-01    bin/hdfs getconf -namenodes
datanode: localhost    datanodes (using default slaves file)   etc/hadoop/slaves

secondarynamenode: 0.0.0.0

[hadoop@hadoop-01 ~]# cd/opt/software/hadoop
[hadoop@hadoop-01 hadoop]# echo  "hadoop-01" > ./etc/hadoop/slaves

[hadoop@hadoop-01 hadoop]# cat./etc/hadoop/slaves
hadoop-01

[hadoop@hadoop-01 hadoop]# vi./etc/hadoop/hdfs-site.xml
<property>
   <name>dfs.namenode.secondary.http-address</name>

   <value>hadoop-01:50090</value>
   </property>
<property>

<name>dfs.namenode.secondary.https-address</name>
   <value>hadoop-01:50091</value>
</property>

# 重启
[hadoop@hadoop-01 hadoop]#sbin/stop-dfs.sh

[hadoop@hadoop-01 hadoop]#sbin/start-dfs.sh

关于步骤做一个详细的解析：

namenode ： hadoop-01

datnaode ： localhost

seondarynamenode ： 0.0.0.0

对于这三个进程我们要查看如何修改这些参数

1. namenode 他读取的文件是 core-site.xml，所以我们要对这个文件进行修改

<configuration>
    <property>

       <name>fs.defaultFS</name>
         <value>hdfs://hadoop-01:9000</value>
    </property>
</configuration>

namenode进程启动就改为了hadoopp-01

[hadoop@hadoop-01 hadoop-2.8.1]$ cat/etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4localhost4.localdomain4

::1         localhost localhost.localdomain localhost6localhost6.localdomain6
192.168.137.30 hadoop-01 (查看了我们的机器名已经配置了相关的ip地址信息了)
需要查看hdfs启动这三个进程究竟是一个怎样的过程，它写的是一个shell脚本

cat sbin/start-dfs.sh

如下图：

文件显示namenodes on 就等于 [root@hadoop-01 hadoop-2.8.1]$ sbin/start-dfs.sh
Starting namenodes on [localhost]，所以启动的是本地的机器名

 

2.datenode调用的是 slaves file文件

查找下slaves用的是什么，发现是localhost，我们要对其进行修改

覆盖slaves文件，让它变成hadoop-01

3.seondarynamenode  查看shell信息

我们通过命令查看相应的结果：

打开官网查看官网给出的信息

http://hadoop.apache.org/docs/r2.8.3/hadoop-project-dist/hadoop-common/SingleCluster.html

把网站信息往下拉，可以看到下图，点击 hdfs-default.xml

再上节课中我们的hdfs-deault.xml使用的是默认的配置

然后 Ctrl + F 查找 secondary ，第一个就是我们所需要的信息

这里的htpps，带安全认证的意思

 

把以下的信息进行替换到原来的hdf-site.xml

dfs.namenode.secondary.http-address 0.0.0.0:50090

dfs.namenode.secondary.https-address 0.0.0.0:50091

按课程需求将0.0.0.0 替换成 hadoop-01

按颜色进行替换：

实战替换的结果：

需要自行调整排序

 

4.查看是否都是以hadoop-01启动停止：

结果没有任何报错，正常

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

内容总结

以上是互联网集市为您收集整理的Hadoop用户启动hdf三个进程全部内容，希望文章能够帮你解决Hadoop用户启动hdf三个进程所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---