華為云數(shù)據(jù)湖探索(Data Lake Insight,簡稱DLI)是兼容Apache Spark、Apache Flink、HetuEngine生態(tài),提供一站式的流處理、批處理、交互式分析的Serverless融合處理分析服務(wù)。用戶不需要管理任何服務(wù)器,即開即用。
DLI支持標準SQL/Spark SQL/Flink SQL,支持多種接入方式,并兼容主流數(shù)據(jù)格式。數(shù)據(jù)無需復(fù)雜的抽取、轉(zhuǎn)換、加載,使用SQL或程序就可以對云上CloudTable、RDS、DWS、CSS、OBS、ECS自建數(shù)據(jù)庫以及線下數(shù)據(jù)庫的異構(gòu)數(shù)據(jù)進行探索。
1.即來即用
完全托管,用戶無需運維任何基礎(chǔ)設(shè)施,數(shù)秒開通服務(wù),即來即用。
2.簡單易用,低門檻上手
兼容主流數(shù)據(jù)格式,支持多種接入方式,同時保持用戶使用習(xí)慣。
3.支持跨源聯(lián)邦查詢能力
用戶直接使用SQL查詢海量明細數(shù)據(jù)、過程緩存數(shù)據(jù)、高階加工數(shù)據(jù)。
4.企業(yè)多租戶
資源隔離、數(shù)據(jù)權(quán)限控制。
5.秒級查詢性能
采用Hudi存儲技術(shù),本地存儲加速,提供秒級查詢性能。
1.歷史數(shù)據(jù)源聯(lián)合分析
直接查詢海量原始數(shù)據(jù),數(shù)據(jù)時間范圍跨度大,查詢維度不固定,靈活多變。
典型應(yīng)用:流水審計、車輛駕駛行為分析、軌跡回放等。
2.異構(gòu)數(shù)據(jù)源聯(lián)合分析
數(shù)據(jù)存在不同存儲系統(tǒng)中,業(yè)務(wù)復(fù)雜,需要對數(shù)據(jù)做關(guān)聯(lián)分析。
典型應(yīng)用:冷熱數(shù)據(jù)同比分析,對云上OBS、CloudTable、RDS、DWS的數(shù)據(jù)做聯(lián)合分析。
3.交互式多維分析
查詢維度相對固定,數(shù)據(jù)查詢時延低,支撐產(chǎn)品數(shù)據(jù)化運營決策。
典型應(yīng)用:BI分析,用戶留存率,用戶分類偏好分析,商品好評率分析等。
4.海量行為日志分析
直接查詢海量原始數(shù)據(jù),數(shù)據(jù)時間范圍跨度大,查詢維度不固定,靈活多變。
典型應(yīng)用:車輛駕駛行為分析、廣告運營數(shù)據(jù)分析、金融行情分析等。
注:本文素材參考華為云官方,版權(quán)歸作者所有