Hadoop2.7.1安装的一些坑

1. 在/etc/profile里更新了JDK的版本,因为Hadoop2.7只能使用JDK1.7,更新后,需要即时更新,可以使用命令>. /etc/profile.

 

2. hadoop 2.7 的Eclipse plugin没有测试成功,但是Hadoop官方网站已经提供了开发工具,实际上也是一个Eclipse的plugin(http://hdt.incubator.apache.org/download.html

 

3. 几个网站对配置Hadoop2 比较有用:

http://www.aboutyun.com/thread-11909-1-1.html

http://www.open-open.com/lib/view/open1436855630959.html 

http://www.cnblogs.com/meiyuanbao/p/3545929.html

 

4. 如果配置了namenode的HA,当format一个namenode,另外一个必须使用hdfs namenode -bootstrapStandby.

 

5. 如果多于一次的format namenode,那么datanode的clusterid总是和第一次的namenode culsterid一样,之后不会改变。两种方式修复这个问题:

 - 修改datanode下的VERSION,改成跟namenode一致

- 删除namenode.dir和datanode.dir,然后重新格式话

 

6. 如果拷贝多个虚拟机,比如数据节点完成配置,拷贝出其它两个,如果data.dir里已经有文件,那么uuid在多个数据节点就是重复的,会导致只有一个数据节点是活着的。其它无法注册。

猜你喜欢

转载自ajaxcn.iteye.com/blog/2288990