欢迎访问九五青年博客,本博客致力于大数据技术、应用和项目技术架构分享
  1. 文章总数:87
  2. 阅读总数:1,014,797
  3. 分类目录:26个
  4. 最近更新:2019年11月5日
  5. 稳定运行:969天

MapReduce原理理解: 看下图图示即可明白整体流程 点击图片可看高清大图 原型: 在mapreduce中,map task调用map处理逻辑将处理后的key和value利用outputcollector.collect()放入一个环形缓冲区中,那么这个缓冲区是有一定大小的,那么如果放入的内容很多很多的时候怎么办呢?其实hadoop里……