Spark最简安装

举报
Smy1121 发表于 2019/06/21 20:11:44 2019/06/21
【摘要】 Spark最简安装

Spark最简安装

Spark预编译安装包下载(学习环境使用)

● Spark 官方下载

● 如无特殊说明,本次默认以Spark1.6.1为例


Spark最简安装

学习环境下开箱即用,无需修改任何配置。


Spark目录介绍

● README.md


包含用来入门Spark 的简单的使用说明。


● bin


包含可以用来和Spark 进行各种方式的交互的一系列可执行文件,后面会讲到的Spark shell。


● sbin


启停脚本


● examples


包含一些可以查看和运行的Spark 程序,对学习Spark 的API 非常有帮助。


运行spark自带的example

切换到spark bin目录下直接运行相关例子即可。


cd spark-1.6.1-bin-hadoop2.6/bin/

./run-example SparkPi //直接就可以运行SparkPi统计圆周率


【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。