Hadoop使用实例

技术文章 5个月前 完美者
1,248 0

标签:oop   dfs   red   png   技术   lazy   查看   统计   streaming   

1.词频统计

a.下载喜欢的电子书或大量文本数据,并保存在本地文本文件中

技术图片

 

 b.编写map与reduce函数

技术图片

 

 

技术图片

 c.本地测试map和reduce

技术图片

 

 d.将文本数据上传到HDFS上

技术图片

 e.用hadoop streaming提交任务

技术图片

 

 技术图片

 

 f.查看运行结果

技术图片

 

 g.计算结果取回本地

技术图片

 

Hadoop使用实例

标签:oop   dfs   red   png   技术   lazy   查看   统计   streaming   

原文地址:https://www.cnblogs.com/linxueze/p/13935202.html

版权声明:完美者 发表于 2020-11-07 16:36:45。
转载请注明:Hadoop使用实例 | 完美导航

暂无评论

暂无评论...