码迷,mamicode.com
首页 > 其他好文 > 详细

Hadoop使用实例

时间:2020-11-07 16:36:45      阅读:33      评论:0      收藏:0      [点我收藏+]

标签:oop   dfs   red   png   技术   lazy   查看   统计   streaming   

1.词频统计

a.下载喜欢的电子书或大量文本数据,并保存在本地文本文件中

技术图片

 

 b.编写map与reduce函数

技术图片

 

 

技术图片

 c.本地测试map和reduce

技术图片

 

 d.将文本数据上传到HDFS上

技术图片

 e.用hadoop streaming提交任务

技术图片

 

 技术图片

 

 f.查看运行结果

技术图片

 

 g.计算结果取回本地

技术图片

 

Hadoop使用实例

标签:oop   dfs   red   png   技术   lazy   查看   统计   streaming   

原文地址:https://www.cnblogs.com/linxueze/p/13935202.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!