Map负责将数据打散,Reduce负责将数据进行聚集。
举一反三
- Shuffle连接Map和Reduce两个阶段。 Map Task将数据写到本地磁盘，Reduce Task从每个Map Task上读取一份数据。
- 下列描述中符合Map/Reduce的是() A: Map是将数据映射成Key/Value再交给Reduce B: Reduce先运行，然后运行Map C: Map/Reduce是函数式的设计思想 D: Map结束后，Partitioner会将相同Key分到同一个组交给Reduce进程
- 在MapReduce框架中，如果需要处理的数据很小，可以将数据读取到计算节点完成Map运算和Reduce运算，节省网络传输带宽
- Mapreduce将计算过程分为两个阶段，Map阶段并行处理输入数据，Reduce阶段对Map结果进行汇总。
- OSI模型中负责将数据分割成帧的层次是（）。