其他分享
首页 > 其他分享> > MapReduce核心思想

MapReduce核心思想

作者:互联网

 

1)分布式的运算程序往往需要分成至少2个阶段。

2)第一个阶段的MapTask并发实例,完全并行运行,互不相干。

3)第二个阶段的ReduceTask并发实例互不相干,但是他们的数据依赖于上一个阶段的所有MapTask并发实例的输出。

4)MapReduce编程模型只能包含一个Map阶段和一个Reduce阶段,如果用户的业务逻辑非常复杂,那就只能多个MapReduce程序,串行运行。

 

标签:核心思想,不相干,MapReduce,MapTask,并发,实例,阶段
来源: https://www.cnblogs.com/xcf001/p/15659781.html