大数据基础之如何导出jar包并放在hdfs上执行

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据基础之如何导出jar包并放在hdfs上执行相关的知识,希望对你有一定的参考价值。

我口才不好,文字描述也不行,但是基本逻辑是通的。

导出jar包
1.首先完成mapper和reducer还有main方法的编码
技术分享图片
2。右键点击peopleinfo的包,选择export-》Java-》JAR file,点击NEXT
技术分享图片
3.输入jar包名称以及导出地址,点击next->next
技术分享图片
4.点击Browse,选择主方法,点击OK,然后点击Finish
技术分享图片

放在hdfs上执行 mapreduce的方法
登陆到大数据的VM,前提是已经在该VM中搭建了hdfs的环境输入su - hdfs ,记住-与hdfs有空格

技术分享图片

然后执行hadoop jar jar包 数据文件 输出路径
技术分享图片

以上是关于大数据基础之如何导出jar包并放在hdfs上执行的主要内容,如果未能解决你的问题,请参考以下文章

大数据之HDFS

如何让用Android studio 导出jar包并混淆和aar

小白学习大数据测试之hadoop hdfs和MapReduce小实战

我要进大厂之大数据Hadoop HDFS知识点

IDEA导出项目依赖jar包并生成清单文件

万丈高楼平地起——大数据配置管理之HDFS(上)