Spark报错
Posted ruili07
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Spark报错相关的知识,希望对你有一定的参考价值。
1.
Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
at com.mysql.jdbc.MysqlIO.nextRowFast(MysqlIO.java:2145)
增加driver内存, 原因是数据从各executor汇总到driver造成的。
2.
Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask
能调大的内存,全部调大。
以上是关于Spark报错的主要内容,如果未能解决你的问题,请参考以下文章