hadoop小试

Posted 2020-06-14

下载

wget http://mirror.bit.edu.cn/apache/hadoop/common/stable/hadoop-2.7.2.tar.gz
 

解压到/usr/local/hadoop目录下（先创建此目录）

 

用root身份新建hadoop用户,并设定密码

useradd hadoop
passwd hadoop

 

切换到hadoop用户，并编辑~/.bashrc文件，添加以下指令

alias hadoop="/usr/local/hadoop/bin/hadoop"

 

体验下单词计数

mkdir input
echo "aaa bbb ccc aaa" >> input/words

 

hadoop jar /usr/local/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar wordcount input output

 (ps , 可能碰到主机名报错，无法识别的主机名等等，编辑/etc/hosts文件，添加记录  "127.0.0.1 主机名")