MRS3.1.3-LTS HetuEngine重点新特性一览

HetuEngine九级代言 发表于 2022/05/08 12:24:39 2022/05/08
【摘要】 分类描述物化视图新增CREATE/DROP/REFRESH/SHOW/VERIFY/Hints物化视图SQL语法。并对物化视图SQL提供权限控制。使用物化视图后TPC-DS 99整体性能提升100%。维护计算实例管理员可通过HSConsole创建维护计算实例。定期高耗资源作业(例如:物化视图自动刷新)由维护计算实例执行,不影响业务计算实例。维护计算实例和业务计算实例资源互相隔离。物化视图自动...

【版权声明】本文为华为云社区用户原创内容,转载时

HetuEngine是华为云FusionInsight团队自研的一款高性能交互式分析&数据虚拟化引擎,可与大数据生态无缝融合,实现海量数据秒级查询;支持多源异构协同,使能数据湖内/湖间/湖仓一站式SQL融合分析。

图 HetuEngine架构图

参考链接:

湖仓一体天花板,大数据一站式SQL分析技术实践


分类 描述
物化视图 新增CREATE/DROP/REFRESH/SHOW/VERIFY/Hints物化视图SQL语法。并对物化视图SQL提供权限控制。使用物化视图后TPC-DS 99整体性能提升100%。
维护计算实例 管理员可通过HSConsole创建维护计算实例。定期高耗资源作业(例如:物化视图自动刷新)由维护计算实例执行,不影响业务计算实例。维护计算实例和业务计算实例资源互相隔离。
物化视图自动刷新 支持创建具有优先级的、自动刷新的物化视图。物化视图周期性自动刷新,可视化展示物化视图自动刷新任务的执行历史和执行结果状态。
查询Schema演进的Hudi表 对于Schema演进(列变换:修改列位置、在非最后位置插入新列;数据类型变更:Decimal精度扩充、Int转Float/Double、Long转Float/Double、所有类型转String、String转Date/Decimal)的Hudi表,支持查询。
HSFabric提供统一SQL访问入口 支持应用程序跨网段、跨VPC使用JDBC方式访问HetuEngine。只需有限个HSFabric实例作为固定的入口。支持用户名密码认证和Kerberos认证。支持第三方BI工具对接。
Massive Data Exchange (MDE) 高速批量写入数据到GaussDB(DWS)。写入性能3X。
SQL执行进度查询API JDBC Driver提供查询SQL语句执行进度的API。
JOIN增强 支持2表及以上的Semi/Anti Join。
RANK函数增强 优化RANK()函数查询性能。
INSERT性能增强 写入分区表时task_writer_count=1性能最优,写入非分区表时task_writer_count=8性能最优。
开发者支持 REST API手册改版,REST API二次开发样例代码推送外网。
易运维 HSBroker配置(hsbroker.cluster.launcher.source.client.enabled)可控制是否允许客户端提交SQL拉起计算实例。
数据防误删 支持存算分离(OBS)数据防误删。
离线+滚动升级路径 支持MRS 3.0.0 >> MRS 3.0.2 >> MRS 3.1.2离线+滚动升级路径。
国密算法SCC 支持加解密使用国密算法SCC。
【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区),文章链接,文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件至:cloudbbs@huaweicloud.com进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容。
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。