SPARK之分区器
Posted xiangyuguan
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了SPARK之分区器相关的知识，希望对你有一定的参考价值。
-
只有Key-Value类型的RDD才有分区器的，非Key-Value类型的RDD分区器的值是None
-
每个RDD的分区ID范围：0~numPartitions-1，决定这个值是属于那个分区的
以上是关于SPARK之分区器的主要内容，如果未能解决你的问题，请参考以下文章
spark中的分区和自定义分区器中的重新分区和排序给出数组越界异常
Spark分区器HashPartitioner和RangePartitioner代码详解