Eclipse中将hadoop项目放在集群中运行
Posted 月之暗面
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Eclipse中将hadoop项目放在集群中运行相关的知识,希望对你有一定的参考价值。
1、加入配置文件到项目源码目录下(src)
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>
读取配置文件内容,使项目知道向集群提交运行
2、将本项目打包到项目源码目录下(src)
3、在Java代码加入下一句话
Configuration conf = new Configuration();
conf.set("mapreduce.job.jar", "wc.jar");
注意:这些目的是为了让集群找到所要运行的jar包
以上是关于Eclipse中将hadoop项目放在集群中运行的主要内容,如果未能解决你的问题,请参考以下文章
Hadoop集群搭建记录 | 云计算[CentOS7] | 伪分布式集群 Master运行WordCount
Hadoop集群搭建记录 | 云计算[CentOS7] | Eclipse安装并创建第一个项目
大数据技术之_03_Hadoop学习_02_入门_Hadoop运行模式+本地运行模式+伪分布式运行模式+完全分布式运行模式(开发重点)+Hadoop编译源码(面试重点)+常见错误及解决方案(示例代(代