Hadoop相关配置参数整理

core-site.xml部分参数

参数名 默认值 说明 建议
hadoop.native.lib true 设置是否使用本地库(Hadoop默认是启动本地库的) -

hdfs-site.xml部分参数

参数名 默认值 说明 建议
dfs.namenode.name.dir file://${hadoop.tmp.dir}/dfs/name 本地磁盘目录,NN存储fsimage文件的地方。可以是按逗号分隔的目录列表,fsimage文件会存储在全部目录,冗余安全。 这里多个目录设定,最好在多个磁盘,另外,如果其中一个磁盘故障,不会导致系统故障,会跳过坏磁盘。由于使用了HA,建议仅设置一个。如果特别在意安全,可以设置2个
dfs.namenode.edits.dir ${dfs.namenode.name.dir} 本地文件,NN存放edits文件的目录。可以是逗号分隔的目录列表。edits文件会存储在每个目录,冗余安全。 建议设置多个目录,最好在多个磁盘

猜你喜欢

转载自blog.csdn.net/wangkai_123456/article/details/88366576