大数据之-Hadoop3.x_MapReduce_ReduceTask源码解析---大数据之hadoop3.x工作笔记0127

Mhhao

 关注

阅读 40

2022-01-05

然后我们接着去reducetask的源码:

可以看到上面,maptask执行以后,数据被分区,然后溢写到磁盘文件中,然后

就到了执行reducetask的时候,首先走到reducetask的上面这个位置,然后

可以看到,有3个部分要执行.

copy sort reduce 3个部分对吧.

可以看到正好对应了reduce的3个阶段对吧.

 

    这里c

相关推荐

大数据之-Hadoop3.x_MapReduce_MapJoin案例完成---大数据之hadoop3.x工作笔记0134

暮晨夜雪 71 0 0

大数据之-Hadoop3.x_MapReduce_MapJoin案例需求分析---大数据之hadoop3.x工作笔记0133

巧乐兹_d41f 80 0 0

大数据之-Hadoop3.x_Yarn_总结---大数据之hadoop3.x工作笔记0157

小布_cvg 69 0 0

大数据之-Hadoop3.x_MapReduce_ReduceJoin案例TableBean---大数据之hadoop3.x工作笔记0129

witmy 53 0 0

大数据之-Hadoop3.x_MapReduce_数据压缩_案例实现---大数据之hadoop3.x工作笔记0139

乐百川 87 0 0

大数据之-Hadoop3.x_MapReduce_MapJoin案例调试_debug---大数据之hadoop3.x工作笔记0135

开源分享 22 0 0

大数据之-Hadoop3.x_Yarn_基础架构---大数据之hadoop3.x工作笔记0141

践行数据分析 43 0 0

大数据之-Hadoop3.x_Yarn_容量调度器---大数据之hadoop3.x工作笔记0145

耶也夜 86 0 0

大数据之-Hadoop3.x_Yarn_FIFO调度器---大数据之hadoop3.x工作笔记0144

鱼满舱 26 0 0

大数据之-Hadoop3.x_Yarn_Tool接口案例完成---大数据之hadoop3.x工作笔记0156

半夜放水 38 0 0

精彩评论（0）

0 0 举报