Hadoop必须知道的几个问题

1,master slaves文件只有 namenode secondnamenode jobtracker这3个机器需要知道,其他的datanode不需要知道,也就是说如果修改了这2个文件,那么只要同步以上提到的3个机器就可以了,而一般的开发测试环境,这3个机器是在同一个机器上。
2,需要的默认内存
datanode默认内存为2.8G
namenode默认内存为3G
secondnamenode默认内存为3G
3,M/R任务数
M/R任务数为datanode机器cpu的个数乘2或乘4,R的任务数要比M的任务数少。
增加任务数必须增加datanode的内存。

猜你喜欢

转载自keren.iteye.com/blog/1484054