Python中pyspark_map数据计算方法

Posted sakura_aqi

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python中pyspark_map数据计算方法相关的知识,希望对你有一定的参考价值。

最近在学习python中的pyspark使用方法,在使用_map方法进行大数据计算时出现报错

此处报错是因为使用了print(rdd2.collect()),只要把这句注释掉就不会报错,请问这是什么原因导致的,还有怎么把这个报错解决,新人上路一个星期,求大佬赐教

以上是关于Python中pyspark_map数据计算方法的主要内容,如果未能解决你的问题,请参考以下文章

Python气象数据处理与绘图(2):常用数据计算方法

Python与数值计算方法

Python中数据类型

怎么用python计算股票

Python 数据类型

在 python 或 spark 中获取大数据缺失值的最快方法是啥?