大数据分析Day03打破数据孤岛异构数据源联合分析

举报
孙小北 发表于 2021/08/03 16:38:25 2021/08/03
【摘要】 大数据分析Day03打破数据孤岛-异构数据源联合分析业务创新实践 异构数据源的商业价值 数据湖探索服务DLI数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。用户不需要管理任何服务...

大数据分析Day03打破数据孤岛-异构数据源联合分析业务创新实践

异构数据源的商业价值

数据湖探索服务DLI

  • 数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。用户不需要管理任何服务器,即开即用。支持标准SQL/Spark SQL/Flink SQL,支持多种接入方式,并兼容主流数据格式。数据无需复杂的抽取、转换、加载,使用SQL或程序就可以对云上CloudTable、RDS、DWS、CSS、OBS、ECS自建数据库以及线下数据库的异构数据进行探索。

image.png

三大基本功能

  • SQL作业支持SQL查询功能:可为用户提供标准的SQL语句
  • Flink作业支持Flink SQL在线分析功能:支持Window、Join等聚合函数、地理函数、CEP函数等,用SQL表达业务逻辑,简便快捷实现业务。
  • Spark作业提供全托管式Spark计算特性:用户可通过交互式会话(session)和批处理(batch)方式提交计算任务,在全托管Spark队列上进行数据分析。

多数据源分析

  • Spark跨源连接:可通过DLI访问CloudTable,DWS,RDS和CSS等数据源。
  • Flink跨源支持与多种云服务连通,形成丰富的流生态圈。

BI工具

  • 对接永洪BI:与永洪BI对接实现数据分析。
  • 对接Tableau Desktop:与Tableau Desktop对接实现数据分析。

支持地理空间查询

案例分享:企业智能化数据经营分析实战

  • 案例介绍
    image.png
    image.png

场景1:计算经销商B1每月Mate20销量与销售

  • CloudTable与DWS联合查询
  • 创建跨域连接
    image.png

场景2:预测经销商B1下月Mate20销量

  • MLS 深度集成DLI的机器学习服务
    image.png
  • 使用DLI进行多源数据分析实践
    image.png
【版权声明】本文为华为云社区用户原创内容,未经允许不得转载,如需转载请自行联系原作者进行授权。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。