HadoopHadoop MR 性能优化 Combiner机制

Posted junneyang 的博客

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了HadoopHadoop MR 性能优化 Combiner机制相关的知识,希望对你有一定的参考价值。

1、概念

 

 

2、参考资料

提高hadoop的mapreduce job效率笔记之二(尽量的用Combiner) :http://sishuo(k).com/forum/blogPost/list/5829.html

Hadoop学习笔记—8.Combiner与自定义Combiner:http://www.tuicool.com/articles/qAzUjav

Hadoop深入学习:Combiner:http://blog.csdn.net/cnbird2008/article/details/23788233

(平均值场景)0Hadoop 使用Combiner提高Map/Reduce程序效率:http://blog.csdn.net/jokes000/article/details/7072963

 

以上是关于HadoopHadoop MR 性能优化 Combiner机制的主要内容,如果未能解决你的问题,请参考以下文章

HadoopHadoop mr wordcount基础

HadoopHadoop MR 自定义排序

HadoopHadoop MR 自定义分组 Partition机制

hadoophadoop的Job 提交流程切片源码

数据热门深入浅出数据仓库中SQL性能优化之Hive篇

Hive性能优化(新手重新标注版)