spark常见错误持续更新
Posted qinglanmei
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了spark常见错误持续更新相关的知识，希望对你有一定的参考价值。
错误1.错误: 找不到或无法加载主类 idea、scala代码
idea 导入的scala工程，编写代码后报该错误。
原因：srcmainscala 包路径下没有将scala这个包设置成Sources root
解决：设置scala的文件夹属性
错误2.
ERROR scheduler.LiveListenerBus: Listener SQLListener threw an exception java.lang.NullPointerException
WARN spark.ExecutorAllocationManager: No stages are running, but numRunningTasks != 0
该错误是使用sparksql的时候报的错，原因是我的数据量太大导致的
解决：适当的增加 --driver-memory 的大小即可
以上是关于spark常见错误持续更新的主要内容，如果未能解决你的问题，请参考以下文章
Tomcat项目启动常见错误以及原因,持续更新.........
[JavaWeb]_[初级]_[Jfinal使用时的常见错误]*持续更新*