老师您好，Map阶段输出的是k2,v2，Reduce阶段传入的参数就编程了v2s,这个参数他是怎么衔接的呢

慕丝6090765 2022-12-14

源自：Hadoop之初识MR 2-3 实战：WordCount案例开发

4

收起

1回答

徐老师 2022-12-14 21:17:55

map阶段一共6步，咱们在代码里面实现的mapper类相当于第2步，后面的步骤还会对数据进行排序，分组，转成<k2,v2s>这种形式。

提问者慕丝6090765 #1

那是直接在调用的Map的相关代码里面就处理完成了是吗，不需要我们再去进行处理了

2022-12-14 21:19:51
徐老师 #2

Mapreduce一共可以分为10步，咱们只需要实现其中2步，其余的框架会做，在课程1-2小节里面有详细分析

2022-12-14 21:22:22
提问者慕丝6090765 回复徐老师 #3

嗯嗯，那个我看了，明白啦

2022-12-14 21:24:30

相似问题

map阶段的疑问

当点击子盒子btn时，只输出了我是捕获阶段下的父盒子，，所以这种情况下的阻断事件传播，连冒泡阶段也会阻断是吗？

阶段五没有作业了吗？

封装的addHandler为什么是捕获阶段呢?

老师，map阶段从shuffle中读取数据？

登录后可查看更多问答，登录/注册

大数据工程师

参与学习 1166 人
提交作业 6092 份
解答问题 1170 个

不用Java初级内容充数！不用与大数据岗位无关内容占课时！我们做的就是“精华版”大数据课程

本课精华内容

问答作业

老师，每个比较大的文件都会分割成块保存在DataNode中，那就说一个datanode坏了导致整个文件不可用，这样不就减低了可靠性吗？

56 2

对多个executor并行处理，对数据进行去重，这样会不会有重复数据

32 1

数据倾斜问题

78 5

并行度调优疑问

29 9

yum install -y ntpdate执行报错

19 22

查看更多本课问答

请稍等 ...

意见反馈帮助中心 APP下载