MRS 3.1.1-lts版本 HetuEngine新特性预告(2021.06.30)
【摘要】 MRS 3.1.1-lts版本预计将于2021年6月30日前后发布,在这个新版本中,HetuEngine将带来哪些振奋人心的新特性呢?
让我们一起先睹为快~~
MRS 3.1.1-lts版本预计将于2021年6月30日前后发布,在这个新版本中,HetuEngine将带来哪些振奋人心的新特性呢?
让我们一起先睹为快(以下仅为预告,新特性列表以正式发布的产品文档为准)——
Category | Feature name |
竞争力特性 | 特性:HetuEngine支持读Hudi存储格式的hive表 价值:离线数据湖、实时数据湖整体解决方案关键一环 |
特性:HetuEngine支持对接Clickhouse 价值:实时数据湖整体解决方案关键一环 |
|
内核升级:内核基线升级到Openlookeng 1.2.0 价值: 1.TPC-DS性能提升 XX% 2.新计算下推框架提升跨源跨域connector性能优化效率 |
|
特性:新增UDF SQL语法,支持Remote UDF计算下推 价值: 1. 跨源跨域解决方案的关键部分,满足无限膨胀的第三方异构数据源UDF匹配需求 |
|
功能提升 | HQL语法兼容性增强,可无缝搬迁90%的传统业务语句 价值: 1.传统大数据生态业务迁移改造成本降低80% 2.提升业务系统对接效率,上线周期缩短2/3 |
支持Basic认证方式访问HetuEngine 价值: 1.北向生态工具的对接支持率从30%提升到95% 2.用户对接体验与传统数据库看齐 3.满足客户业务系统从云原生容器化环境中访问HetuEngine的需求 |
|
访问GaussDB数据源支持多用户映射 价值: 1. 解决跨源访问时只能使用固定账号访问数据源引发的问题,满足个性化的权限管控需求 |
|
访问Hive数据源支持多用户映射 价值: 1. 解决跨源访问时只能使用固定账号访问数据源引发的问题,满足个性化的权限管控需求 |
|
Hive数据源访问权限管控策略完善,支持选择是否继承Hive数据源已有的访问权限控制策略 价值: 1. 支持继承Hadoop集群原有hive权限控制定义策略,提升数据安全 |
|
访问视图时,只校验视图权限,不追溯基础表权限定义 价值: 1.满足数据虚拟化场景下的运维管控需求 |
|
性能提升 | 小表漫游(本地跨源+跨域场景) 价值: 1. 大小表关联场景SQL任务性能提升 1-5倍 |
跨域访问的SQL任务支持sub-query pushdown 价值: 1.跨域复杂SQL任务性能提升 2-10倍 |
|
新增JDBC URL访问请求参数,提升BI工具界面元数据展现速度 价值: 1.支持常见BI工具界面极速刷新,刷新速度提升10倍,提升用户体验 |
|
运维提升 | 支持管理员手动操作触发计算实例在线平滑扩缩容(无损业务) 价值: 1.不中断业务即可实现计算实例规模平滑调整,灵活适应业务需求变化 |
支持常驻角色进程的滚动重启(HSBroker、HSConsole、HSFabric) 价值: 1.修改常驻角色配置后可通过滚动重启生效,避免影响业务 |
|
对外开放RestAPI用于支撑业务侧运维 价值: 1.跨源跨域整体解决方案的关键一环 2.支持客户业务系统直接通过RestAPI调用实现运维管控、数据源信息刷新,有效满足企业客户对于自动化运维监控、数据安全的需求 |
|
新增hetuuser用户组,完善用户组的职责定位 价值: 1. 实现运维管理、业务提交的用户组分离,确保数据业务的信息安全 |
|
高可用提升 | 新增访问hive-metastore的连接池功能 价值: 1.约束对hive-metastore的负载压力,提升系统高可用 |
优化访问hive-metastore多实例,提升负载均衡 价值: 1.优化对hive-metastore的负载均衡,提升系统高可用 |
|
HSBroker引入CN地址缓存 价值: 1.约束对公共基础组件的负载压力,提升系统高可用 |
【版权声明】本文为华为云社区用户原创内容,未经允许不得转载,如需转载请自行联系原作者进行授权。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)