大數(shù)據(jù)“復(fù)活”記
676
2022-05-30
數(shù)據(jù)湖探索DLI快速使用SQL語(yǔ)句查詢數(shù)據(jù)
數(shù)據(jù)湖探索(Data Lake Insight,簡(jiǎn)稱DLI)是完全兼容Apache Spark、Apache Flink、openLooKeng(基于Apache Presto)生態(tài),提供一站式的流處理、批處理、交互式分析的Serverless融合處理分析服務(wù)。
快速使用SQL語(yǔ)句查詢數(shù)據(jù)
Step1 登錄管理控制臺(tái)
登錄華為云,進(jìn)入控制臺(tái):https://www.huaweicloud.com/
選擇“大數(shù)據(jù) > 數(shù)據(jù)湖探索”
Step2 創(chuàng)建SQL作業(yè),選擇隊(duì)列
默認(rèn)隊(duì)列,該隊(duì)列為服務(wù)默認(rèn)的共享隊(duì)列,隊(duì)列大小按需分配,自動(dòng)擴(kuò)展。
Step3 創(chuàng)建數(shù)據(jù)庫(kù)
語(yǔ)法校驗(yàn)”,校驗(yàn)成功后,單擊“執(zhí)行”
CREATE DATABASE DB1
Step4 創(chuàng)建表
(1)首先上傳數(shù)據(jù)文件到OBS
找到剛才自動(dòng)創(chuàng)建的OBS桶
創(chuàng)建dli文件夾
上傳
復(fù)制文件路徑
(2)執(zhí)行SQL
create table table1 (id int, name string) using csv options (path 'obs://dli-cn-north-4-08d1bb2d9e00f38d2f0ec002218f00cb/dli/data.csv')
Step5 執(zhí)行SQL查詢語(yǔ)句
在SQL語(yǔ)句編輯區(qū)域中,輸入查詢語(yǔ)句對(duì)數(shù)據(jù)進(jìn)行分析
例如:查詢DB1數(shù)據(jù)庫(kù)的Table1數(shù)據(jù)表中的1000條數(shù)據(jù)
SELECT * FROM db1.table1 LIMIT 1000
Step6 收尾工作
刪除桶內(nèi)文件夾
刪除桶
刪除表、數(shù)據(jù)庫(kù)
數(shù)據(jù)湖探索 DLI
版權(quán)聲明:本文內(nèi)容由網(wǎng)絡(luò)用戶投稿,版權(quán)歸原作者所有,本站不擁有其著作權(quán),亦不承擔(dān)相應(yīng)法律責(zé)任。如果您發(fā)現(xiàn)本站中有涉嫌抄襲或描述失實(shí)的內(nèi)容,請(qǐng)聯(lián)系我們jiasou666@gmail.com 處理,核實(shí)后本網(wǎng)站將在24小時(shí)內(nèi)刪除侵權(quán)內(nèi)容。