Hadoop三句话告诉你 mapreduce 中MAP进程的数量怎么控制?
Posted lylcore
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop三句话告诉你 mapreduce 中MAP进程的数量怎么控制?相关的知识,希望对你有一定的参考价值。
hadooop提供了一个设置map个数的参数mapred.map.tasks,我们可以通过这个参数来控制map的个数。但是通过这种方式设置map的个数,并不是每次都有效的。原因是mapred.map.tasks只是一个hadoop的参考数值,最终map的个数,还取决于其他的因素。
以上是关于Hadoop三句话告诉你 mapreduce 中MAP进程的数量怎么控制?的主要内容,如果未能解决你的问题,请参考以下文章