Lv.1
aloe
更多个人资料
20
成长值
0
关注
1
粉丝
+ 关注
私信
个人介绍
这个人很懒,什么都没有留下
感兴趣或擅长的领域
暂无数据
个人勋章
TA还没获得勋章~
成长雷达
20
0
0
0
0
个人资料
个人介绍
这个人很懒,什么都没有留下
感兴趣或擅长的领域
暂无数据
达成规则
以上满足
项可达成此勋章
博客
关注
粉丝
论坛
全部时间
全部时间
最近三天
最近一周
最近一月
全部
暂无专栏分类
Spark3.0主要特性(1)—— Adaptive Query Execution
Spark目前依赖的基于代价的优化规则,根据估计Plan节点的大小决定优化策略,一定程度上优化了执行计划。 但是表的统计信息不完善时,或者预估的节点大小不精确时,仍然有些场景无法做到最优。AQE能够在此基础上,带来一定的改善。
数据湖探索 DLI
aloe
2020-08-25 10:41:46
6638
0
0
2020-08-25 10:41:46
999+
0
0
上千个Hive UDF迁移到Spark--Facebook实践经验
随着Spark SQL计算引擎的发展,Spark批处理的能力和性能也越来越成熟。很多大数据平台开始将自己的业务从Hive迁移到Spark,Facebook就是其中之一。在迁移过程中难免出现不兼容、性能下降等问题,本文将针对Facebook Hive UDF迁移到Spark过程中遇到的各种问题进行介绍。
软件开发
云计算
aloe
2020-07-15 15:26:34
7533
0
3
2020-07-15 15:26:34
999+
0
3
https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
+ 关注