Hadoop实例

技术文章 1年前 (2020) 完美者
1,812 0

标签:bsp   stream   计算   任务   load   电子书   reduce   loading   数据   

1.下载喜欢的电子书或大量文本数据,并保存在本地文本文件中

技术图片

 

 2编写map与reduce函数

技术图片

 

 3本地测试map与reduce

技术图片

 

4将文本数据上传至HDFS上

技术图片

5.用hadoop streaming提交任务

技术图片

 

 6.查看运行结果

 

 技术图片

 

 7.计算结果取回到本地

 技术图片

 

Hadoop实例

标签:bsp   stream   计算   任务   load   电子书   reduce   loading   数据   

原文地址:https://www.cnblogs.com/sujialiang/p/13936486.html

版权声明:完美者 发表于 2020-11-07 16:17:20。
转载请注明:Hadoop实例 | 完美导航

暂无评论

暂无评论...