Hadoop上简单运行WordCount
Posted 那山的狐狸
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop上简单运行WordCount相关的知识,希望对你有一定的参考价值。
我们先搭建本地环境
准备的两个工具
将winutils中的两个文件拷贝
配置环境变量
将日志文件拷贝到我们新建的Eclipse中的Maven项目中
编写Mapper
编写Reduce
编写主类
我们来运行一下
我们先打一个JAR包
我导出到本地项目中了
将包上传到我们的虚拟机中
上传我们的测试文件
我们运行一下
我们查看一下浏览器
虚拟机查看一下
以上是关于Hadoop上简单运行WordCount的主要内容,如果未能解决你的问题,请参考以下文章
在ubuntu上安装eclipse同时连接hadoop运行wordcount程序
Windows 上运行 Hadoop WordCount 用例