大数据分析Day03打破数据孤岛异构数据源联合分析
【摘要】 大数据分析Day03打破数据孤岛-异构数据源联合分析业务创新实践 异构数据源的商业价值 数据湖探索服务DLI数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。用户不需要管理任何服务...
大数据分析Day03打破数据孤岛-异构数据源联合分析业务创新实践
异构数据源的商业价值
数据湖探索服务DLI
- 数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。用户不需要管理任何服务器,即开即用。支持标准SQL/Spark SQL/Flink SQL,支持多种接入方式,并兼容主流数据格式。数据无需复杂的抽取、转换、加载,使用SQL或程序就可以对云上CloudTable、RDS、DWS、CSS、OBS、ECS自建数据库以及线下数据库的异构数据进行探索。
三大基本功能
- SQL作业支持SQL查询功能:可为用户提供标准的SQL语句
- Flink作业支持Flink SQL在线分析功能:支持Window、Join等聚合函数、地理函数、CEP函数等,用SQL表达业务逻辑,简便快捷实现业务。
- Spark作业提供全托管式Spark计算特性:用户可通过交互式会话(session)和批处理(batch)方式提交计算任务,在全托管Spark队列上进行数据分析。
多数据源分析
- Spark跨源连接:可通过DLI访问CloudTable,DWS,RDS和CSS等数据源。
- Flink跨源支持与多种云服务连通,形成丰富的流生态圈。
BI工具
- 对接永洪BI:与永洪BI对接实现数据分析。
- 对接Tableau Desktop:与Tableau Desktop对接实现数据分析。
支持地理空间查询
案例分享:企业智能化数据经营分析实战
- 案例介绍
场景1:计算经销商B1每月Mate20销量与销售
- CloudTable与DWS联合查询
- 创建跨域连接
场景2:预测经销商B1下月Mate20销量
- MLS 深度集成DLI的机器学习服务
- 使用DLI进行多源数据分析实践
【版权声明】本文为华为云社区用户原创内容,未经允许不得转载,如需转载请自行联系原作者进行授权。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)