Spark常用的算子总结——flatMap
Posted pocahontas
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了Spark常用的算子总结——flatMap相关的知识，希望对你有一定的参考价值。
与map类似，区别是原RDD中的元素经map处理后只能生成一个元素，而原RDD中的元素经flatmap处理后可生成多个元素
val a = sc.parallelize(1 to 4, 2)
val b = a.flatMap(x => 1 to x)//每个元素扩展
b.collect
/*
结果 Array[Int] = Array( 1,
1, 2,
1, 2, 3,
1, 2, 3, 4)
*/
以上是关于Spark常用的算子总结——flatMap的主要内容，如果未能解决你的问题，请参考以下文章