作者小头像 Lv.1
更多个人资料
20 成长值
1 关注
2 粉丝
+ 关注 私信

个人介绍

这个人很懒,什么都没有留下

感兴趣或擅长的领域

IOT、人工智能、大数据、云存储、云计算
个人勋章
TA还没获得勋章~
成长雷达
20
0
0
0
0

个人资料

个人介绍

这个人很懒,什么都没有留下

感兴趣或擅长的领域

IOT、人工智能、大数据、云存储、云计算

达成规则

以上满足项可达成此勋章

  • 博客
  • 关注
  • 粉丝
  • 论坛
全部时间
全部时间
最近三天
最近一周
最近一月
  • 全部
  • 暂无专栏分类
Impala - Runtime Filter的原理及实现
RuntimeFilter 是Impala 2.5及更高版本中可用的优化特性 。当针对分区表进行查询,或join条件仅需要表中的一小部分数据时,Impala会在查询运行时确定适当的条件,并将该信息广播到所有正在读取数据的impalad节点,以便它们可以避免不必要的IO,并仅输出与之匹配的数据子集来避免不必要的网络传输。
存储 SQL 数据库
作者小头像 weizisheng 2020-06-11 16:11:14
12871
2
2
2020-06-11 16:11:14
999+
2
2
Impala - Bloom Filter的实现及使用
Bloom Filter是由Bloom在1970年提出的一种多哈希函数映射的快速查找算法。通常应用在一些需要快速判断某个元素是否属于集合,但是并不严格要求100%正确的场合,因此各大Sql计算引擎都用来作为运行时过滤器。Impala采用了与Hive、Spark都不同的Split Bloom Filter实现作为其Runtime Filter。
数据结构
作者小头像 weizisheng 2020-05-27 20:01:04
11378
1
1
2020-05-27 20:01:04
999+
1
1
https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
作者小头像
作者小头像
快速交付
+ 关注