countDistinct - Spark 中未找到值错误

Posted

技术标签:

【中文标题】countDistinct - Spark 中未找到值错误【英文标题】:countDistinct - value not found error in Spark 【发布时间】:2021-10-25 13:03:00 【问题描述】:

我开始学习 Spark,但在下面的快照中出现错误,请告诉我需要进行的修改

附上包含代码和错误信息的图片

【问题讨论】:

函数 countDistinct 不在范围内,请参阅此处***.com/questions/33500816/… 【参考方案1】:

你需要导入那个函数

import org.apache.spark.sql.functions.countDistinct

【讨论】:

太好了,如果对你有帮助,欢迎采纳!

以上是关于countDistinct - Spark 中未找到值错误的主要内容,如果未能解决你的问题,请参考以下文章

Spark多个动态聚合函数,countDistinct不起作用

Zeppelin 与 Kubernetes。在非本地模式的解释器设置中未指定 SPARK_HOME

如何加入 Spark 数据集 A 和 B 并标记 A 中未加入的记录?

Spark中groupBy groupByKey reduceByKey的区别

countDistinct 和 distinct.count 的区别

http/404未找或无法使用怎么解决