Yarn快速入门系列(2)——Yarn的运行流程

举报
大数据梦想家 发表于 2021/09/28 23:19:37 2021/09/28
【摘要】         本篇博客,为大家介绍的是Yarn的运行流程!      ...

        本篇博客,为大家介绍的是Yarn的运行流程!

        码字不易,先赞后看!
在这里插入图片描述


Yarn的运行流程

在这里插入图片描述
1、client向RM提交应用程序,其中包括启动该应用的ApplicationMaster的必须信息,例如ApplicationMaster程序、启动ApplicationMaster的命令、用户程序等。

2、ResourceManager启动一个container用于运行ApplicationMaster。

3、启动中的ApplicationMaster向ResourceManager注册自己,启动成功后与RM保持心跳。

4、ApplicationMaster向ResourceManager发送请求,申请相应数目的container。

5、申请成功的container,由ApplicationMaster进行初始化。container的启动信息初始化后,AM与对应的NodeManager通信,要求NM启动container。

6、NM启动启动container。

7、container运行期间,ApplicationMaster对container进行监控。container通过RPC协议向对应的AM汇报自己的进度和状态等信息。

8、应用运行结束后,ApplicationMaster向ResourceManager注销自己,并允许属于它的container被收回。

详细流程见下图:

在这里插入图片描述
        好了,本次关于Yarn运行流程的内容就介绍到这里。下一篇文章将为大家介绍Yarn 调度器Scheduler以及一个关于Yarn多租户资源隔离的案例,敬请期待!


在这里插入图片描述

文章来源: alice.blog.csdn.net,作者:大数据梦想家,版权归原作者所有,如需转载,请联系作者。

原文链接:alice.blog.csdn.net/article/details/104781019

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。