Google大数据三大论文
MapReduce:面向大型集群的简化数据处理
https://blog.csdn.net/qq_38122518/article/details/78205655
与之前理解的差异:
SRE实战 互联网时代守护先锋,助力企业售后服务体系运筹帷幄!一键直达领取阿里云限量特价优惠。1、Map不是分块函数,而是分块处理函数。分块函数没名字
2、原始的MapReduce是通过文件传输数据的,包括中间数据也是由Map写到文件里,再由Reduce来获取的。
3、在每个工作节点上,可以先进行一次结果处理,也就是Recuce处理,以减少最终Reduce的压力,以及网络传输压力。

更多精彩