64位CentOS系统下安装配置伪分布式hadoop2.5.2

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了64位CentOS系统下安装配置伪分布式hadoop2.5.2，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1588字，纯文字阅读大概需要3分钟。

内容图文

安装完之后进行配置，首先所有的配置文件从上一版本的hadoop/conf换成了hadoop/etc/hadoop，在hadoop安装目录下，修改 etc/hadoop/core-site.xml，将其配置为： configuration property namehadoop.tmp.dir/name value/usr/hadoop/tmp/value descriptionA ba

安装完之后进行配置，首先所有的配置文件从上一版本的hadoop/conf换成了hadoop/etc/hadoop，在hadoop安装目录下，修改 etc/hadoop/core-site.xml，将其配置为：

hadoop.tmp.dir

/usr/hadoop/tmp

A base for other temporary directories.

fs.defaultFS

hdfs://你的ip:9000

然后执行修改etc/hadoop/hdfs-site.xml进行第二项配置：

dfs.namenode.name.dir

/usr/hadoop/hdfs/name

dfs.datanode.data.dir

/usr/hadoop/hdfs/data

dfs.replication

1

请注意上述路径都需要自己手动用mkdir创建，具体位置也可以自己选择，其中dfs.replication的值建议配置为与分布式 cluster 中实际的 DataNode 主机数一致，在这里由于是伪分布式环境所以设置其为1。

接下来修改 etc/hadoop/mapred-site.xml配置其使用 Yarn 框架执行 map-reduce 处理程序，内容如下：


mapreduce.framework.name
Yarn

最后修改 etc/hadoop/yarn-site.xml对yarn进行配置，其内容如下：

Yarn.nodemanager.aux-services

mapreduce.shuffle

The address of the applications manager interface in the RM.

Yarn.resourcemanager.address

你的ip:18040

The address of the scheduler interface.

Yarn.resourcemanager.scheduler.address

你的ip:18030

The address of the RM web application.

Yarn.resourcemanager.webapp.address

你的ip:18088

The address of the resource tracker interface.

Yarn.resourcemanager.resource-tracker.address

你的ip:8025

然后格式化：

内容总结

以上是互联网集市为您收集整理的64位CentOS系统下安装配置伪分布式hadoop2.5.2全部内容，希望文章能够帮你解决64位CentOS系统下安装配置伪分布式hadoop2.5.2所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---