ubuntu-14.04.3-desktop-amd64(32位的总是报不能识别系统的jvm等错误)
至少1G内存
相关链接
http://www.tuicool.com/articles/bmeUneM
二,
安装JDK http://fulndon.iteye.com/blog/2276974
安装ssh和无密码登录
http://blog.csdn.net/hackerwin7/article/details/28109073
使用shell下载
wget http://mirrors.hust.edu.cn/apache/hadoop/core/stable/hadoop-2.7.1.tar.gz
tar -zxvf hadoop-2.7.1.tar.gz
三,对hadoop2.7.1/etc/hadoop下的相关配置文件进行配置
一 core-site.xml
<configuration> <property> <name>hadoop.tmp.dir</name> <value>file:/home/sijiu/program/hadoop/tmp</value> <description>Abase for other temporary directories.</description> </property> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value> </property> </configuration>
二 mapred-site.xml.template
<configuration> <property> <name>mapred.job.tracker</name> <value>localhost:9001</value> </property> </configuration>
三 hdfs-site.xml
<configuration> <property> <name>dfs.replication</name> <value>1</value> </property> <property> <name>dfs.namenode.name.dir</name> <value>file:/home/sijiu/program/hadoop/tmp/dfs/name</value> </property> <property> <name>dfs.datanode.data.dir</name> <value>file:/home/sijiu/program/hadoop/tmp/dfs/data</value> </property> </configuration>
三, 运行
1.初始化HDFS系统
在hadop2.7.1目录下使用如下命令:
bin/hdfs namenode -format
2.开启 NameNode 和 DataNode 守护进程
使用如下命令开启:
sbin/start-dfs.sh,
若启动时报找不到JAVA_HOME的错误,将JAVA_HOME的真实路径替换掉hadoop-env.sh中的${JAVA_HOME}
3.查看进程信息
使用如下命令查看进程信息
jps,正常可以看到namenode,datanode,secondarynamenode,jps四个进程
遇到的问题:查看日志启动正常,但看到的进程不全,解决:重新格式化hdfs,切换到root用户(我曾用root用户启动过)结束hadoop运行
44.查看Web UI
在浏览器中输入 http://机器ip:50070