MapReduce框架中，在Map和Reduce之间的combiner的作用是（ ）
A: 对中间格式进行压缩
B: 对中间结果进行混洗
C: 对Map的输出结果排序
D: 将中间结果中同一个key的数据合并
A: 对中间格式进行压缩
B: 对中间结果进行混洗
C: 对Map的输出结果排序
D: 将中间结果中同一个key的数据合并
举一反三
- MapReduce框架中，在Map和Reduce之间的combiner的作用是() A: 对Map的输出结果排序 B: 对中间过程的输出进行本地的聚集 C: 对中间结果进行混洗 D: 对中间格式进行压缩
- MapReduce框架中，在Map和Reduce之间的combiner的作用是?
- 在MapReduce中,________________是为了避免Map任务和Reduce任务之间的数据传输而设置的,负责对中间格式进行压缩,减少传输到Reduce中的数据量。
- 在MapReduce中,________阶段,Mapper执行maptask,将输出结果写入中间文件。 A: Shuffle B: Map C: Reduce D: Sort
- 下列关于Map和Reduce函数的描述，哪个是错误的？ A: Map将小数据集进一步解析成一批<;key,value>;对，输入Map函数中进行处理 B: Map每一个输入的<;k1, v1 >;会输出一批<;k2, v2 >;。<;k2, v2 >;是计算的中间结果 C: Reduce输入的中间结果<;k2, List(v2 )>;中的List(v2 )表示是一批属于不同k2 的value D: Reduce输入的中间结果<;k2, List(v2 )>;中的List(v2 )表示是一批属于同一个k2 的value