《Spark数据分析:基于Python语言 》 —3.3.2 ApplicationMaster作为Spark主进程
【摘要】 本节书摘来自华章计算机《Spark数据分析:基于Python语言 》 一书中第3章,第3.3.2节,作者是[澳] 杰夫瑞·艾文(Jeffrey Aven) ,王道远 译。
3.3.2 ApplicationMaster作为Spark主进程
ApplicationMaster是Spark的主进程。和其他的集群部署模式中的主进程一样,Application-Master在应用的驱动器进程和集群管理器(在此情况下即ResourceManager)之间协调资源,然后把这些资源(容器)交给驱动器进程来作为执行器使用,为应用执行任务和存储数据。ApplicationMaster在应用的整个生命周期中保持留驻。
【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)