执行yarn-session.sh后,分配taskmanager不起作用:
无论分配多少taskmanager,并行度设置得少,只在一个host上运行,但是每次的host不一定相同;
并行度设置得多,才在不同的host上运行。
比如:-n 3,-s 4,照理说并行度-p 6就应该在2个taskmanager上运行了,但是直到-p 20+才在第二个taskmanager上运行,说明-n 3,-s 4没有起到作用,也就是yarn-session没有真正进行分配,但是查看8088界面application是起来了的,log显示有zookeeper的authentication failed错误,这个有关系吗?其他报错没有……
参考:https://blog.csdn.net/xu470438000/article/details/79576989的博客中说道:
但我的情况显然是启动了所有资源,大家有遇到这种问题解决了的吗?求教……