下列关于Map/Reduce计算流程叙述不正确的一项为:
A: Mapper读取分派给它的输出Split,并生成相应的本地缓存。
B: Mapper执行计算处理任务,将中间结果输出保存在本地缓存。
C: Application Master调度Reducer读取Mapper的中间输出文件,执行Reduce任务。
D: Reducer将最后结果写入输出文件保存到HDFS。
A: Mapper读取分派给它的输出Split,并生成相应的本地缓存。
B: Mapper执行计算处理任务,将中间结果输出保存在本地缓存。
C: Application Master调度Reducer读取Mapper的中间输出文件,执行Reduce任务。
D: Reducer将最后结果写入输出文件保存到HDFS。
举一反三
- 在MapReduce中,________阶段,Mapper执行maptask,将输出结果写入中间文件。 A: Shuffle B: Map C: Reduce D: Sort
- 在MapReduce中哪一个阶段 把Mapper 的输出数据并整理后分发给Reducer处理 A: Shuffle B: Map C: Reduce D: Sort
- 以下关于MapReduce计算框架描述正确的是? A: JobTracker:Master节点,只有一个,管理所有作业,作业/任务的监控、错误处理等;将任务分解成一系列任务,并分派给TaskTracker。 B: TaskTracker:Slave节点,运行Map Task和Reduce Task;并与JobTracker交互,汇报任务状态。 C: Map Task:解析每条数据记录,传递给用户编写的map(),并执行,将输出结果写入本地磁盘(如果为map-only作业,直接写入HDFS)。 D: Reducer Task:从Map Task的执行结果中,远程读取输入数据,对数据进行排序,将数据按照分组传递给用户编写的reduce函数执行。
- 在MapReduce中,________阶段,Reducer执行reducetask,将最后结果写入HDFS。 A: Shuffle B: Map C: Reduce D: Sort
- Mapper排序后的输出将作为下面哪个的输入 A: Mapper B: Shuffle C: Sort D: Reducer E: 3.4