大数据分析Day02数据湖探索DLI快速使用SQL语句查询数据

网友投稿 528 2022-05-30

数据湖探索DLI快速使用SQL语句查询数据

大数据分析Day02数据湖探索DLI快速使用SQL语句查询数据

数据湖探索(Data Lake Insight,简称DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生态,提供一站式的流处理、批处理、交互式分析的Serverless融合处理分析服务。

快速使用SQL语句查询数据

Step1 登录管理控制台

登录华为云,进入控制台:https://www.huaweicloud.com/

选择“大数据 > 数据湖探索”

Step2 创建SQL作业,选择队列

默认队列,该队列为服务默认的共享队列,队列大小按需分配,自动扩展。

Step3 创建数据库

语法校验”,校验成功后,单击“执行”

CREATE DATABASE DB1

Step4 创建表

(1)首先上传数据文件到OBS

找到刚才自动创建的OBS桶

创建dli文件夹

上传

复制文件路径

(2)执行SQL

create table table1 (id int, name string) using csv options (path 'obs://dli-cn-north-4-08d1bb2d9e00f38d2f0ec002218f00cb/dli/data.csv')

Step5 执行SQL查询语句

在SQL语句编辑区域中,输入查询语句对数据进行分析

例如:查询DB1数据库的Table1数据表中的1000条数据

SELECT * FROM db1.table1 LIMIT 1000

Step6 收尾工作

删除桶内文件夹

删除桶

删除表、数据库

数据湖探索 DLI

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:技术流:刷脸访客管理系统化身智能前台
下一篇:互联网协议 — TCP — 拥塞控制(网络质量保障)
相关文章