countDistinct - Spark 中未找到值错误
Posted
技术标签:
【中文标题】countDistinct - Spark 中未找到值错误【英文标题】:countDistinct - value not found error in Spark 【发布时间】:2021-10-25 13:03:00 【问题描述】:我开始学习 Spark,但在下面的快照中出现错误,请告诉我需要进行的修改
附上包含代码和错误信息的图片
【问题讨论】:
函数 countDistinct 不在范围内,请参阅此处***.com/questions/33500816/… 【参考方案1】:你需要导入那个函数
import org.apache.spark.sql.functions.countDistinct
【讨论】:
太好了,如果对你有帮助,欢迎采纳!以上是关于countDistinct - Spark 中未找到值错误的主要内容,如果未能解决你的问题,请参考以下文章
Spark多个动态聚合函数,countDistinct不起作用
Zeppelin 与 Kubernetes。在非本地模式的解释器设置中未指定 SPARK_HOME
如何加入 Spark 数据集 A 和 B 并标记 A 中未加入的记录?
Spark中groupBy groupByKey reduceByKey的区别