Reducer是所有用户定制Reducer类的基础,它的输入是key和一个value值,同时还有Reducer的上下文。Reduce的结果由Reducer.Context的write方法输出到文件中。
错误
举一反三
- 也是一个小型的reducer,主要作用是减少输出到reduce的个数,减少reducer的输入,提高reducer的执行效率
- ()也是一个小型的reducer,主要作用是减少输出到reduce的个数,减少reducer的输入,提高reducer的执行效率。 A: Combiner B: Reduce C: Map D: Shuffle
- MapReduce框架中中间有一步叫shuffle,把同样的(____)运输到同一个(____)上面去。 A: value, key B: value, reducer C: key, reducer D: key, value
- 有一个mapper为每个键生成一个整数值,下面是reduce操作。Reducer A :输出整数值集合的总和Reducer B :输出值集合中的最大值Reducer C :输出值集合的平均值Reducer D :输出集合中最大值与最小值之差这些reduce操作中,哪个可被安全地用作combiner? A: 全部 B: 都不可以 C: A和B D: A、B和D E: C和D
- Combiner和Reducer类都指向继承于Reducer的内部类( )。 A: Hdfs B: JobTracker C: Reduce D: TaskTracker
内容
- 0
ODPSMR可以通过控制Reducer的个数来进行调优,以下哪些方法可以帮用户调节Reducer的个数() A: 可以通过调整Mapper的个数间接的影响Reducer的个数(Reducer的个数默认为Mapper个数的1/4) B: 在编程的时候(以Java为例),初始化Reducer的方法里,可手工指定Reducer个数 C: 可以通过setNumReducerTasks来设置 D: 可以通过addReducer随意增加Reducer的个数
- 1
你必须为MapReduce作业指定哪些内容? A: mapper和reducer类 B: mapper、reducer和Combiner类 C: mapper、reducer、Combiner和Partitioner类 D: 什么都不需要,所有类都默认实现
- 2
MapReduce确保每个reducer的输入都是按键排序的。系统执行排序的过程即将map输出作为输入传给reducer称为______ 。
- 3
在MapReduce中,下面哪个会将输入键值对处理成中间键值对( ) A: Mapper B: Reducer C: Mapper和Reducer
- 4
具有同一个key的key/value对可能被分配到不同的reducer上。 A: 正确 B: 错误