Hadoop MapReduce计算的流程是________。
A: Map任务—Shuffle—Reduce任务
B: Map任务—Reduce任务—Shuffle
C: Reduce任务—Map任务—Shuffle
D: Shuffle—Map任务—Reduce任务
A: Map任务—Shuffle—Reduce任务
B: Map任务—Reduce任务—Shuffle
C: Reduce任务—Map任务—Shuffle
D: Shuffle—Map任务—Reduce任务
A
举一反三
- 在MapReduce编程模式中,Map任务与Reduce任务的数量分别是()? A: 一个Map任务,多个Reduce任务 B: 多个Map任务,多个Reduce任务 C: 一个Map任务,一个Reduce任务 D: 多个Map任务,一个Reduce任务
- 在MapReduce编程模式中,Map任务与Reduce任务的数量分别是多个Map任务,多个Reduce任务
- Reduce端的shuffle会取走map输出的数据,把来自不同map任务的文件归并,再合并
- 关于MapReduce原理,下面说法错误的是? A: 分为Map和Reduce两个阶段 B: Map阶段由一系列Map任务组成 C: Reduce阶段由一系列Reduce任务组成 D: Map阶段与Reduce阶段没有任何依赖关系
- MapReduce中的Map和Reduce是同一组任务
内容
- 0
Map任务和Reduce任务都具有数据本地化的特性。
- 1
15. Hadoop中,MapReduce处理流程的三大步骤不包括( )。 A: Map B: Reduce C: Sort D: Shuffle
- 2
MapReduce的三大阶段即是Map阶段→shuffle阶段→reduce阶段。( )
- 3
MapReduce处理流程的三大步骤不包括( )。 A: map B: sort C: shuffle D: reduce
- 4
Map和Reduce之间通过Shuffle进行通信。