Flink On Yarn的奇怪问题

执行yarn-session.sh后,分配taskmanager不起作用:

无论分配多少taskmanager,并行度设置得少,只在一个host上运行,但是每次的host不一定相同;

并行度设置得多,才在不同的host上运行。

比如:-n 3,-s 4,照理说并行度-p 6就应该在2个taskmanager上运行了,但是直到-p 20+才在第二个taskmanager上运行,说明-n 3,-s 4没有起到作用,也就是yarn-session没有真正进行分配,但是查看8088界面application是起来了的,log显示有zookeeper的authentication failed错误,这个有关系吗?其他报错没有……

参考:https://blog.csdn.net/xu470438000/article/details/79576989的博客中说道:

但我的情况显然是启动了所有资源,大家有遇到这种问题解决了的吗?求教……

发布了20 篇原创文章 · 获赞 1 · 访问量 4910

猜你喜欢

转载自blog.csdn.net/piaoken5588/article/details/88662651