Map负责将数据打散,Reduce负责将数据进行聚集。
对
举一反三
- Shuffle连接Map和Reduce两个阶段。 Map Task将数据写到本地磁盘，Reduce Task从每个Map Task上读取一份数据。
- 下列描述中符合Map/Reduce的是() A: Map是将数据映射成Key/Value再交给Reduce B: Reduce先运行，然后运行Map C: Map/Reduce是函数式的设计思想 D: Map结束后，Partitioner会将相同Key分到同一个组交给Reduce进程
- 在MapReduce框架中，如果需要处理的数据很小，可以将数据读取到计算节点完成Map运算和Reduce运算，节省网络传输带宽
- Mapreduce将计算过程分为两个阶段，Map阶段并行处理输入数据，Reduce阶段对Map结果进行汇总。
- OSI模型中负责将数据分割成帧的层次是（）。
内容
- 0
数据读入在mapreduce的那个阶段产生？ A: Map B: Reduce
- 1
Map任务和Reduce任务都具有数据本地化的特性。
- 2
如果对一系列数据进行排序，可以把这些数据作为map阶段的输出键，在Reduce中定义如何排序。
- 3
____负责将数据分组从源节点通过网络转发到目的节点
- 4
TCP协议主要作用分别为_________。 A: 负责数据的压缩 B: 负责数据的分解 C: 负责数据的分析 D: 负责数据的可靠传输