Eclipse中将hadoop项目放在集群中运行

Posted 月之暗面

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Eclipse中将hadoop项目放在集群中运行相关的知识,希望对你有一定的参考价值。

1、加入配置文件到项目源码目录下(src)

  1. <configuration>
  2. <property>
  3. <name>mapreduce.framework.name</name>
  4. <value>yarn</value>
  5. </property>
  6. </configuration>
读取配置文件内容,使项目知道向集群提交运行

 2、将本项目打包到项目源码目录下(src)

 3、在Java代码加入下一句话

  1. Configuration conf = new Configuration();
  2. conf.set("mapreduce.job.jar", "wc.jar");
注意:这些目的是为了让集群找到所要运行的jar包




以上是关于Eclipse中将hadoop项目放在集群中运行的主要内容,如果未能解决你的问题,请参考以下文章

Hadoop集群搭建记录 | 云计算[CentOS7] | 伪分布式集群 Master运行WordCount

windows下eclipse 做hadoop开发

Hadoop集群搭建记录 | 云计算[CentOS7] | Eclipse安装并创建第一个项目

大数据技术之_03_Hadoop学习_02_入门_Hadoop运行模式+本地运行模式+伪分布式运行模式+完全分布式运行模式(开发重点)+Hadoop编译源码(面试重点)+常见错误及解决方案(示例代(代

Eclipse远程提交MapReduce任务到Hadoop集群

Eclipse调用hadoop2运行MR程序