测试Hadoop hdfs 上传 与 mr

Posted 2020-10-04 -草根-颜

1.随便在哪个目录新增一个文档。内容随便输入

mkdir words

 

2.在hdfs 中新建文件输入目录

./hdfs dfs -mkdir /test

 

3.把新建的文档 (/home/hadoop/test/words)  上传到新建的(test)  hdfs目录

./hdfs dfs -put /home/hadoop/test/words /test/

 

4.查看文档是否成功

./hdfs dfs -ls

 

5.执行 wordsCount按列  计算

bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.4.jar wordcount /test/words /test/out

 

6.查看计算结果目录

bin/hdfs dfs -ls /test/out/

 

7.查看计算log

bin/hadoop fs -cat /test/out/part-r-00000