java.lang.reflect.InvocationTargetException java.lang.NoClassDefFoundError: com/google/common/io/Lim

Posted 2023-02-26

【中文标题】java.lang.reflect.InvocationTargetException java.lang.NoClassDefFoundError: com/google/common/io/LimitInputStream

【英文标题】：

【发布时间】：2016-04-20 21:32:11

【问题描述】：

我使用的是 hadoop 版本 2.5.0。在此行上运行 mapreduce 作业时遇到此异常

boolean b = job.waitForCompletion(true);



 java.lang.reflect.InvocationTargetException
        at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
        at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
        at java.lang.reflect.Method.invoke(Method.java:606)
        at org.springframework.boot.loader.MainMethodRunner.run(MainMethodRunner.java:53)
        at java.lang.Thread.run(Thread.java:745)
Caused by: java.lang.NoClassDefFoundError: com/google/common/io/LimitInputStream
at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:467)
        at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1295)
        at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1292)
        at java.security.AccessController.doPrivileged(Native Method)
        at javax.security.auth.Subject.doAs(Subject.java:415)
        at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1642)
        at org.apache.hadoop.mapreduce.Job.submit(Job.java:1292)
        at org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:1313)

更新 我的问题是 hadoop 需要从 guava16.0 中删除并达到 guava14.0 的 LimitInputStream 类。 在添加 org.springframework.boot:spring-boot-gradle-plugin:1.2.7.RELEASE 我收到此错误。如何解决此问题

【问题讨论】：

您是否在 mapreduce 中使用任何第三方 jar

我正在使用 hadoop-client:2.5.0-cdh5.3.0

【参考方案1】：

你必须强制 guava 版本为 14.0

<dependencyManagement>
    <dependencies>
        <dependency>
            <groupId>com.google.guava</groupId>
            <artifactId>guava</artifactId>
            <version>14.0</version>
        </dependency>
    </dependencies>
</dependencyManagement>