hadoop 解决内存溢出问题 2.1 GB of 2.1 GB virtual memory used. Killing container

hadoop集群启动成功之后,牛刀小试一下自带的jar包里的程序,计算一下pi值:

报如下错误:2.1 GB of 2.1 GB virtual memory used. Killing container

1.在etc/hadoop/yarn-site.xml文件中,修改检查虚拟内存的属性为false,如下:

<property>
    <name>yarn.nodemanager.vmem-check-enabled</name>
    <value>false</value>
</property>

运行一下还是报同样的错误

再次添加如下内容:

2.修改mapred-site.xml 配置文件,加入如下内容:

<property>
<name>mapreduce.cluster.map.memory.mb</name>
<value>-1</value>
</property>
<property>
<name>mapreduce.cluster.reduce.memory.mb</name>
<value>-1</value>
</property>
 

重新启动集群

成功!!计算出pi值

原文参考:https://blog.csdn.net/ma0903/article/details/48289731

https://blog.csdn.net/dd390738878/article/details/9785679

猜你喜欢

转载自blog.csdn.net/weixin_37600848/article/details/83418646
gb
2.1