hadoop任务测试

时间:2022-05-06
本文章向大家介绍hadoop任务测试,主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。

(1)

cd 
echo “Hello World Bye World” > file01
echo “Hello Hadoop Goodbye Hadoop” > file02

(2)在hdfs 中建立一个input 目录:

cd hadoop/hadoop1.0.0/bin/
./hadoop dfs –mkdir input

(3)将file01 和file02 拷贝到hdfs 中:

./hadoop dfs –put  ~/file0* input

(4)执行wordcount:

./hadoop jar hadoop-examples-1.0.2.jar wordcount input output

(5)完成之后,查看结果:

./hadoop dfs -cat output/*