今天在安装hadoop后,启动start-yarn.sh后,nodemanager起不起来,后来查看DN节点的日志,报了以下一个错误:
FATAL org.apache.hadoop.yarn.server.nodemanager.NodeManager: Error starting NodeManager java.lang.IllegalArgumentException: The ServiceName: mapreduce.shuffle set in yarn.nodemanager.aux-services is invalid.The valid service name should only contain a-zA-Z0-9_ and can not start with numbers
解决办法:
修改yarn-site.xml文件:
<property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property>
是由于yarn.nodemanager.aux-services配置错误导致。
这个我有个纳闷点,在使用cloudera CDH4 hadoop2.0版本时,这个配置的值设置的是mapreduce.shuffle,而且查了这个值的默认就是这个,为什么在CDH5版本中变成了下划线不得而知。