《Spark数据分析:基于Python语言 》 —2.9 本章小结
【摘要】 本节书摘来自华章计算机《Spark数据分析:基于Python语言 》 一书中第2章,第2.9节,作者是[澳] 杰夫瑞·艾文(Jeffrey Aven) ,王道远 译。
2.9 本章小结
在本章中,我们介绍了如何安装Spark以及相关的各种前置要求和依赖软件,还介绍了Spark集群的各种部署模式,包括本地模式、Spark独立集群模式、基于YARN集群的模式,还有基于Mesos集群的模式。
在第一个练习中,你安装了一个功能完整的Spark独立集群。在本章中,你还了解了一些在云端部署Spark集群时可选的方案,比如使用AWS的EC2集群或EMR集群、Google的Cloud Dataproc服务、Databricks平台等。本章介绍或展示的各种部署方式都可以用于本书后续章节的编程练习,而且不限于本书所涉及的用法。
【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)