测试hadoop

首先你要理解hadoop世界中的 文件系统 HDFS 和 我们常用的文件系统(FAT EXT NTFS)不是同一个概念。

1 给HDFS 建一个 input 文件夹(放数据)  output 文件夹(出结果)
   hadoop fs -mkdir -p  /user/root/input
2 通过命名把本地文件系统的数据 放到 HDFS 里面 的input  文件夹 里面
   hadoop fs -put /usr/hadoop/input/*   /user/root/input
3 运行你的job
4 到output里面去查看结果 ,通常是通过url 访问

可能需要用到的命名
删除HDFS input文件夹
hadoop fs -rm -r /user/root/input


检查你的节点状态



检查整个集群的情况
http://192.168.0.105:50070/


output已经存在



猜你喜欢

转载自ycljf86.iteye.com/blog/2316045