在MapReduce的Shuffle阶段,每个Reducer使用HTTP协议来从Mapper节点获取自己的partition。默认每个Reducer使用几个线程来获取Maper节点数据?()
A: 3个
B: 4个
C: 5个
D: 6个
A: 3个
B: 4个
C: 5个
D: 6个
举一反三
- 链式MapReduce计算中,对任意一个MapReduce作业,Map和Reduce阶段可以有无限个Mapper,但Reducer只能有一个。
- 在MapReduce中哪一个阶段 把Mapper 的输出数据并整理后分发给Reducer处理 A: Shuffle B: Map C: Reduce D: Sort
- 常规四叉树每个节点通常储存()个变量,即()子节点指针、()个父节点指针和()个节点值
- ODPSMR可以通过控制Reducer的个数来进行调优,以下哪些方法可以帮用户调节Reducer的个数() A: 可以通过调整Mapper的个数间接的影响Reducer的个数(Reducer的个数默认为Mapper个数的1/4) B: 在编程的时候(以Java为例),初始化Reducer的方法里,可手工指定Reducer个数 C: 可以通过setNumReducerTasks来设置 D: 可以通过addReducer随意增加Reducer的个数
- 你必须为MapReduce作业指定哪些内容? A: mapper和reducer类 B: mapper、reducer和Combiner类 C: mapper、reducer、Combiner和Partitioner类 D: 什么都不需要,所有类都默认实现