hive tez报错:java.lang.OutOfMemoryError: Java heap space
Posted 黑色水晶球
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hive tez报错:java.lang.OutOfMemoryError: Java heap space相关的知识,希望对你有一定的参考价值。
ERROR : Vertex failed, vertexName=Map 15, vertexId=vertex_1670479589375_0012_5_18, diagnostics=[Task failed, taskId=task_1670479589375_0012_5_18_000000, diagnostics=[TaskAttempt 0 failed, info=[Error: Error while running task ( failure ) : java.lang.OutOfMemoryError: Java heap space
解决方法:
1、调大hive.tez.container.size的值,如hive.tez.container.size=20480MB ,hive.tez.java.opts=-Xmx16384m;(hive.tez.container.size的80%)
或者
(可选)tez.runtime.shuffle.memory.limit.percent 改小一点,默认是0.25 , 如改为0.15
以上是关于hive tez报错:java.lang.OutOfMemoryError: Java heap space的主要内容,如果未能解决你的问题,请参考以下文章
hive tez报错:java.lang.OutOfMemoryError: Java heap space
hive.optimize.index.filter设置我true,tez查询udf函数报错
FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.tez.TezTask
已解决:FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask
已解决:FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask