Hadoop（1）：Hadoop 初体验

1、HDFS 使用

http://主节点:50070 其中可以查看目前的namenode和datanode节点：

也可查看目前datanode中的目录情况：

下面对目录进行一个简单操作演示：从Linux本地上传一个文本文件到 hdfs 的/test/input 目录下

hadoop fs -mkdir -p /wordcount/input

发现目录添加成功。

对目录添加文件

hadoop fs -put /root/someword.txt /wordcount/input

上传成功。

2、运行mapreduce程序

在 Hadoop 安装包的 hadoop-2.7.4/share/hadoop/mapreduce 下有官方自带的 mapreduce 程序。我们可以使用如下的命令进行运行测试。

示例程序 jar:

              hadoop-mapreduce-examples-2.7.4.jar

计算圆周率:

hadoop jar hadoop-mapreduce-examples-2.7.4.jar pi 20 50

关于圆周率的估算，感兴趣的可以查询资料 Monte Carlo 方法来计算 Pi 值。

运行以上程序会发现yarm的web页面会显示一条在执行的任务。

运行完结果如下：