MapReduce概述

分类: 文章 • 2024-10-26 08:32:40

一、MapReduce是一种分布式计算模型，由Google提出，主要用于搜索领域，解决海量数据的计算问题。Apache对其做了开源实现，整合在hadoop中实现通用分布式数据计算。MR由两个阶段组成：Map和Reduce，用户只需要实现map()和reduce()两个函数，即可实现分布式计算，非常简单。大大简化了分布式并发处理程序的开发。