如何运行自带wordcount

 我来答
广州速推信息科技有限公司
2018-08-03 · 诚信经营,以人为本,客户致上!
广州速推信息科技有限公司
文芳阁传媒是一个专业在网络上承接企业,个人软文代写以及软文推广的平台。以低价格把新闻发布在新浪、网易、新华、凤凰、腾讯、央视等3000家门户及地方网站媒体,以塑造公司品牌的知名度和公信力.
向TA提问
展开全部
1.找到examples例子
我们需要找打这个例子的位置:首先需要找到你的hadoop文件夹,然后依照下面路径:
/hadoop/share/hadoop/mapreduce
第二步:
我们需要需要做一下运行需要的工作,比如输入输出路径,上传什么文件等。
1.先在HDFS创建几个数据目录:
1.hadoop fs -mkdir -p /data/wordcount
2.hadoop fs -mkdir -p /output/
2.目录/data/wordcount用来存放Hadoop自带的WordCount例子的数据文件,运行这个MapReduce任务的结果输出到/output/wordcount目录中。
首先新建文件inputWord:
1.vi /usr/inputWord
新建完毕,查看内容:
将本地文件上传到HDFS中:
可以查看上传后的文件情况,执行如下命令:
1.hadoop fs -ls /data/wordcount
可以看到上传到HDFS中的文件。
登录到Web控制台,访问链接可以看到任务记录情况。
yangjinlong76
活跃答主

2017-10-12 · 非职业答题人
知道顶级答主
回答量:5.7万
采纳率:94%
帮助的人:1.9亿
展开全部
你好,
  1.找到examples例子
  我们需要找打这个例子的位置:首先需要找到你的hadoop文件夹,然后依照下面路径:
  /hadoop/share/hadoop/mapreduce会看到如下图:
  hadoop-mapreduce-examples-2.2.0.jar

  第二步:
  我们需要需要做一下运行需要的工作,比如输入输出路径,上传什么文件等。
  1.先在HDFS创建几个数据目录:
  hadoop fs -mkdir -p /data/wordcount
  hadoop fs -mkdir -p /output/
  2.目录/data/wordcount用来存放Hadoop自带的WordCount例子的数据文件,运行这个MapReduce任务的结果输出到/output/wordcount目录中。
  首先新建文件inputWord:
  vi /usr/inputWord

  新建完毕,查看内容:
  cat /usr/inputWord
  将本地文件上传到HDFS中:
  hadoop fs -put /usr/inputWord /data/wordcount/
  可以查看上传后的文件情况,执行如下命令:
  hadoop fs -ls /data/wordcount
  可以看到上传到HDFS中的文件。
  通过命令
  hadoop fs -text /data/wordcount/inputWord
  看到如下内容:

  

  下面,运行WordCount例子,执行如下命令:
  hadoop jar /usr/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.2.0.jar wordcount /data/wordcount /output/wordcount

  
  可以看到控制台输出程序运行的信息
  查看结果,执行如下命令:
  hadoop fs -text /output/wordcount/part-r-00000

结果数据示例如下:

登录到Web控制台,访问链接http.//master:8088/可以看到任务记录情况。
本回答被提问者采纳
已赞过 已踩过<
你对这个回答的评价是?
评论 收起
推荐律师服务: 若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询

为你推荐:

下载百度知道APP,抢鲜体验
使用百度知道APP,立即抢鲜体验。你的手机镜头里或许有别人想知道的答案。
扫描二维码下载
×

类别

我们会通过消息、邮箱等方式尽快将举报结果通知您。

说明

0/200

提交
取消

辅 助

模 式