首页 / HADOOP / 第四章 Hadoop本地运行模式
第四章 Hadoop本地运行模式
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了第四章 Hadoop本地运行模式,小编现在分享给大家,供广大互联网技能从业者学习和参考。文章包含876字,纯文字阅读大概需要2分钟。
内容图文
一、Hadoop官网
Hadoop官方网站:http://hadoop.apache.org/
二、Hadoop运行模式
Hadoop运行模式包括:本地模式、伪分布式模式以及完全分布式模式。
#1.本地模式:单机运行,只是用来演示一下官方案例。生产环境不用。
#2.伪分布式模式:也是单机运行,但是具备Hadoop集群的所有功能,一台服务器模拟一个分布式的环境。个别缺钱的公司用来测试,生产环境不用。
#3.完全分布式模式:多台服务器组成分布式环境,生产环境使用。
三、Hadoop本地运行模式(官方WordCount)
#1.创建在hadoop-3.3.1文件下面创建一个wcinput文件夹
[atguigu@hadoop102 hadoop-3.3.1]$ mkdir wcinput
#2.在wcinput文件下创建一个word.txt文件
[atguigu@hadoop102 hadoop-3.3.1]$ cd wcinput
#3.编辑word.txt文件
[atguigu@hadoop102 wcinput]$ vim word.txt
hadoop yarn
hadoop mapreduce
atguigu
atguigu
#4.回到Hadoop目录/opt/module/hadoop-3.3.1,执行程序
[atguigu@hadoop102 hadoop-3.3.1]$ hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.3.1.jar wordcount wcinput wcoutput
#5.查看结果
[atguigu@hadoop102 hadoop-3.3.1]$ cat wcoutput/part-r-00000
看到如下结果:
atguigu 2
hadoop 2
mapreduce 1
yarn 1
原文:https://www.cnblogs.com/jhno1/p/15209611.html
内容总结
以上是互联网集市为您收集整理的第四章 Hadoop本地运行模式全部内容,希望文章能够帮你解决第四章 Hadoop本地运行模式所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错,欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 gblab@vip.qq.com 举报,一经查实,本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。
来源:【匿名】