IT虾米网

wordcount实例设计

luoye 2022年06月12日 大数据 181 0
一 MapReduce设计思想

二 MapReduce设计的四个阶段

三 wordcount实例设计
1 split阶段
2 Map阶段(编码)
3 shuffle阶段
Shuffle阶段过程比较复杂,可以理解为从Map输出到Reduce输入的过程,而且涉及网络传输。
4 Reduce阶段(编码)

四 wordcount实例设计总结


评论关闭
IT虾米网

微信公众号号:IT虾米 (左侧二维码扫一扫)欢迎添加!

利用MapReduce进行排序