《Spark数据分析:基于Python语言 》 —3.2 使用独立集群的Spark应用
【摘要】 本节书摘来自华章计算机《Spark数据分析:基于Python语言 》 一书中第3章,第3.2节,作者是[澳] 杰夫瑞·艾文(Jeffrey Aven) ,王道远 译。
3.2 使用独立集群的Spark应用
在第2章中,我们已经介绍了以独立集群调度器部署Spark的方式。在其中的一个练习里,我们也部署了一个具有完整功能的Spark独立集群。之前介绍过,在以独立模式部署的Spark集群里,Spark主进程会兼任集群管理器,管理集群中可用的资源,并把资源交给驱动器进程,以供Spark应用使用。
【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)