MapReduce框架中,在Map和Reduce之间的combiner的作用是()
A: 对Map的输出结果排序
B: 对中间过程的输出进行本地的聚集
C: 对中间结果进行混洗
D: 对中间格式进行压缩
A: 对Map的输出结果排序
B: 对中间过程的输出进行本地的聚集
C: 对中间结果进行混洗
D: 对中间格式进行压缩
B
举一反三
- MapReduce框架中,在Map和Reduce之间的combiner的作用是( ) A: 对中间格式进行压缩 B: 对中间结果进行混洗 C: 对Map的输出结果排序 D: 将中间结果中同一个key的数据合并
- 在MapReduce中,________________是为了避免Map任务和Reduce任务之间的数据传输而设置的,负责对中间格式进行压缩,减少传输到Reduce中的数据量。
- MapReduce框架中,在Map和Reduce之间的combiner的作用是?
- 在一个MapReduce应用程序中,map函数的输出由MapReduce框架处理后,发送到reduce函数。这个处理过程是基于键值对进行排序和分组。()
- 在MapReduce中,下面哪个选项会将输入键值对处理成中间键值对()。 A: Map B: Reduce C: Map和Reduce
内容
- 0
所谓 过程,是指对Map输出结果进行分区、排序、合并等处理,并交给Reduce的过程。
- 1
Shuffle过程是指对Map输出结果进行分区、排序、合并等处理并交给Reduce的过程。( )
- 2
在MapReduce中,________阶段,Mapper执行maptask,将输出结果写入中间文件。 A: Shuffle B: Map C: Reduce D: Sort
- 3
下面关于MapReduce模型中Map函数与Reduce函数的描述正确的是____ A .一个Map函数就是对一部分原始数据进行指定的操作 B.一个Map操作就是对每个ReD.uce所产生的一部分中间结果进行合并操作 C.Map与Map之间不是相互独立的 D. Reduce与Reduce之间不是相互独立的
- 4
中国大学MOOC: 所谓 过程,是指对Map输出结果进行分区、排序、合并等处理,并交给Reduce的过程。