码迷,mamicode.com
首页 > 其他好文 > 详细

Hadoop实例

时间:2020-11-07 16:17:20      阅读:18      评论:0      收藏:0      [点我收藏+]

标签:bsp   stream   计算   任务   load   电子书   reduce   loading   数据   

1.下载喜欢的电子书或大量文本数据,并保存在本地文本文件中

技术图片

 

 2编写map与reduce函数

技术图片

 

 3本地测试map与reduce

技术图片

 

4将文本数据上传至HDFS上

技术图片

5.用hadoop streaming提交任务

技术图片

 

 6.查看运行结果

 

 技术图片

 

 7.计算结果取回到本地

 技术图片

 

Hadoop实例

标签:bsp   stream   计算   任务   load   电子书   reduce   loading   数据   

原文地址:https://www.cnblogs.com/sujialiang/p/13936486.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!