windows下用idea编写wordcount单词计数项目并打jar包上传到hadoop执行

Posted wxx-wxx

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了windows下用idea编写wordcount单词计数项目并打jar包上传到hadoop执行相关的知识,希望对你有一定的参考价值。

windows下用idea编写wordcount单词计数项目并打jar包上传到hadoop执行

参考 https://blog.csdn.net/weixin_42370346/article/details/88688693

1、最后一步运行jar包时报错 

技术图片

原因:未指出主类名

解决方法:hadoop jar /home/wxx/WordCount.jar com.hadoop.project.WordcountMain /user/hadoop/input/file.txt /user/hadoop/output

 

2、重新生成jar包时要先删除MANIFEST.MF文件

技术图片

 

3、生成jar包时报错

技术图片

参考 https://blog.csdn.net/stripeybaby/article/details/80010734

以上是关于windows下用idea编写wordcount单词计数项目并打jar包上传到hadoop执行的主要内容,如果未能解决你的问题,请参考以下文章

用IDEA编写spark的WordCount

使用SparkSQL编写wordCount的词频统计

java在window下用cmd (javacjar)命令行模拟Intellij IDEA软件生成jar包

2.3 基于IDEA开发第一个MapReduce大数据程序WordCount

idea中使用maven运行wordcount代码

Spark通过IDEA远程提交WordCount案例