首页 / HADOOP / Hadoop集群测试wordcount程序

Hadoop集群测试wordcount程序

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Hadoop集群测试wordcount程序，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含714字，纯文字阅读大概需要2分钟。

内容图文

一.集群环境搭好了，我们来测试一下吧

　　1.在java下创建一个wordcount文件夹：mkdir wordcount

　　2.在此文件夹下创建两个文件，比如file1.txt和file2.txt

在file1.txt中写入：

Hello java

Hello world

在file2.txt中写入：

Hello hadoop

Hello wordcount

　　3.在HDFS中创建一个input文件夹

hadoop fs mkdir /input

hadoop fs -ls /

Hadoop集群测试wordcount程序 - 文章图片

　　4.把刚刚写好的两个文件夹上传到HDFS中input文件夹

 hadoop fs -put ./*.txt /input/

hadoop fs -ls /input/

 Hadoop集群测试wordcount程序 - 文章图片

　　5.运行wordcount程序

去/usr/java/hadoop-2.8.5/share/hadoop/mapreduce文件下运行hadoop-mapreduce-examples-2.8.5.jar

命令：hadoop jar hadoop-mapreduce-examples-2.8.5.jar wordcount /input/ /output/

注：output文件夹是不存在的，使用上述命令后自动创建的。如果此文件夹存在会报错

　　6.之后查看此文件夹

hadoop fs -cat /output/*

 

内容总结

以上是互联网集市为您收集整理的Hadoop集群测试wordcount程序全部内容，希望文章能够帮你解决Hadoop集群测试wordcount程序所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/845155.html

来源：【匿名】