个人介绍
这个人很懒，什么都没有留下
感兴趣或擅长的领域
暂无数据
个人勋章
TA还没获得勋章~
成长雷达
50
0
0
0
0
达成规则
全部时间
全部时间
最近三天
最近一周
最近一月
- 全部
- 暂无专栏分类
本文将介绍如何通过在Linux的机器上，执行kettle脚本，在MRS集群中，运行Spark程序。
999+
0
0
2019-05-24 11:22:30
如果能配合jupyter notebook使用pyspark，无论是机器学习，数据探索，还是ETL应用的开发，开发效率直接起飞。本文就来介绍配合jupyter notebook来使用pyspark。
999+
0
0
2018-12-25 18:49:40
如果我们安装了python3.7版本来运行spark，并且用到了RDD的take函数，就会报错：RuntimeError: generator raised StopIteration。本文介绍了问题的原因和处理方法。
999+
0
0
2018-12-25 16:41:18
使用python3运行pyspark，需要做两步：1. 在mrs集群的所有core节点，以及提交任务的节点（通常为mrs的master节点），均安装python3；2. 指定pyspark使用的python路径。
999+
0
3
2018-12-25 16:40:00