标签:键值 函数 数据处理 数据中心 机器 输出 bsp 输入 图例
1. MapReduce
定义:
是一种可用于数据处理的编程的模型
优势:
MapReduce 本质上是并行运行的,因此可以将大规模的数据分析任务,分发给任何一个拥有足够多机器的
的数据中心。
MapReduce 的优势在于处理大规模数据集。
过程: (map 和 reduce)
每个阶段都已 键值对 作为输入和输出
图例:
map 函数
|
|
MapReduce 框架处理
|
|
reduce 函数
Hadoop 学习笔记 (2) -- 关于MapReduce
标签:键值 函数 数据处理 数据中心 机器 输出 bsp 输入 图例
原文地址:http://www.cnblogs.com/llduo/p/6932050.html