大数据分析Day02数据湖探索DLI快速使用SQL语句查询数据

举报
孙小北 发表于 2021/08/01 21:37:57 2021/08/01
【摘要】 数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。

数据湖探索DLI快速使用SQL语句查询数据

  • 数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。

快速使用SQL语句查询数据

Step1 登录管理控制台

Step2 创建SQL作业,选择队列

image.png

image.png

默认队列,该队列为服务默认的共享队列,队列大小按需分配,自动扩展。
image.png

Step3 创建数据库

  • 语法校验”,校验成功后,单击“执行”
 CREATE DATABASE DB1

image.png

Step4 创建表

(1)首先上传数据文件到OBS

  • 找到刚才自动创建的OBS桶

image.png

  • 创建dli文件夹

image.png

  • 上传

image.png
image.png

  • 复制文件路径

image.png
(2)执行SQL

create table table1 (id int, name string) using csv options (path 'obs://dli-cn-north-4-08d1bb2d9e00f38d2f0ec002218f00cb/dli/data.csv')

image.png

Step5 执行SQL查询语句

  • 在SQL语句编辑区域中,输入查询语句对数据进行分析
  • 例如:查询DB1数据库的Table1数据表中的1000条数据
SELECT * FROM db1.table1 LIMIT 1000

image.png

Step6 收尾工作

  • 删除桶内文件夹
    image.png
  • 删除桶
    image.png
  • 删除表、数据库
    image.png
【版权声明】本文为华为云社区用户原创内容,未经允许不得转载,如需转载请自行联系原作者进行授权。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。