MRS 3.1.1-lts版本 HetuEngine新特性预告(2021.06.30)

HetuEngine九级代言 发表于 2021/06/16 14:26:10 2021/06/16
【摘要】 MRS 3.1.1-lts版本预计将于2021年6月30日前后发布,在这个新版本中,HetuEngine将带来哪些振奋人心的新特性呢? 让我们一起先睹为快~~

MRS 3.1.1-lts版本预计将于2021年6月30日前后发布,在这个新版本中,HetuEngine将带来哪些振奋人心的新特性呢?

让我们一起先睹为快(以下仅为预告,新特性列表以正式发布的产品文档为准)——

Category Feature name
竞争力特性 特性:HetuEngine支持读Hudi存储格式的hive表
价值:离线数据湖、实时数据湖整体解决方案关键一环
特性:HetuEngine支持对接Clickhouse
价值:实时数据湖整体解决方案关键一环
内核升级:内核基线升级到Openlookeng 1.2.0
价值:
1.TPC-DS性能提升
XX%
2.新计算下推框架提升跨源跨域connector性能优化效率

特性:新增UDF SQL语法,支持Remote UDF计算下推
价值:
1. 跨源跨域解决方案的关键部分,满足无限膨胀的第三方异构数据源UDF匹配需求
功能提升 HQL语法兼容性增强,可无缝搬迁90%的传统业务语句
价值:
1.传统大数据生态业务迁移改造成本降低
80%
2.提升业务系统对接效率,上线周期缩短
2/3
支持Basic认证方式访问HetuEngine
价值:
1.北向生态工具的对接支持率从30%提升到95%
2.用户对接体验与传统数据库看齐
3.满足客户业务系统从云原生容器化环境中访问HetuEngine的需求
访问GaussDB数据源支持多用户映射
价值:
1. 解决跨源访问时只能使用固定账号访问数据源引发的问题,满足个性化的权限管控需求
访问Hive数据源支持多用户映射
价值:
1. 解决跨源访问时只能使用固定账号访问数据源引发的问题,满足个性化的权限管控需求
Hive数据源访问权限管控策略完善,支持选择是否继承Hive数据源已有的访问权限控制策略
价值:
1. 支持继承Hadoop集群原有hive权限控制定义策略,提升数据安全
访问视图时,只校验视图权限,不追溯基础表权限定义
价值:
1.满足数据虚拟化场景下的运维管控需求
性能提升 小表漫游(本地跨源+跨域场景)
价值:
1. 大小表关联场景SQL任务性能提升
1-5倍
跨域访问的SQL任务支持sub-query pushdown
价值:
1.跨域复杂SQL任务性能提升
2-10倍
新增JDBC URL访问请求参数,提升BI工具界面元数据展现速度
价值:
1.支持常见BI工具界面极速刷新,刷新速度提升
10倍,提升用户体验
运维提升 支持管理员手动操作触发计算实例在线平滑扩缩容(无损业务)
价值:
1.不中断业务即可实现计算实例规模平滑调整,灵活适应业务需求变化
支持常驻角色进程的滚动重启(HSBroker、HSConsole、HSFabric)
价值:
1.修改常驻角色配置后可通过滚动重启生效,避免影响业务
对外开放RestAPI用于支撑业务侧运维
价值:
1.跨源跨域整体解决方案的关键一环
2.支持客户业务系统直接通过RestAPI调用实现运维管控、数据源信息刷新,有效满足企业客户对于自动化运维监控、数据安全的需求
新增hetuuser用户组,完善用户组的职责定位
价值:
1. 实现运维管理、业务提交的用户组分离,确保数据业务的信息安全
高可用提升 新增访问hive-metastore的连接池功能
价值:
1.约束对hive-metastore的负载压力,提升系统高可用
优化访问hive-metastore多实例,提升负载均衡
价值:
1.优化对hive-metastore的负载均衡,提升系统高可用
HSBroker引入CN地址缓存
价值:
1.约束对公共基础组件的负载压力,提升系统高可用
【版权声明】本文为华为云社区用户原创内容,未经允许不得转载,如需转载请发送邮件至:cloudbbs@huaweicloud.com;如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容。
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。