开发者社区> 问答> 正文

MapReduce的主要思想是什么?

MapReduce的主要思想是什么?

展开
收起
游客mm5dulkpivqdo 2021-12-04 14:58:53 354 0
1 条回答
写回答
取消 提交回答
  • (1)分布式的运算程序往往需要分成至少 2 个阶段

    (2)第一个阶段的 MapTask 并发实例,完全并行运行,互不相干。

    (3)第二个阶段的 ReduceTask 并发实例互不相干,但是他们的数据依赖于上一个阶段的所有MapTask 并发实例的输出。

    (4)MapReduce 编程模型只能包含一个 Map 阶段和一个 Reduce 阶段,如果用户的业务逻辑非常复杂,那就只能多个 MapReduce 程序,串行运行。

    2021-12-04 17:49:38
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
Hadoop存储与计算分离实践 立即下载
Quanta:Quora的HBase分层计数系统 立即下载
实时计算正当时-Apache Flink 理论和实战精解 立即下载