溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點(diǎn)擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

大數(shù)據(jù)中數(shù)據(jù)湖和數(shù)據(jù)中臺的區(qū)別有哪些

發(fā)布時間:2021-06-16 14:07:00 來源:億速云 閱讀:363 作者:小新 欄目:大數(shù)據(jù)

這篇文章主要介紹大數(shù)據(jù)中數(shù)據(jù)湖和數(shù)據(jù)中臺的區(qū)別有哪些,文中介紹的非常詳細(xì),具有一定的參考價值,感興趣的小伙伴們一定要看完!

一、數(shù)據(jù)湖的定義

維基百科上定義,數(shù)據(jù)湖(Data Lake)是一個以原始格式存儲數(shù)據(jù)的存儲庫或系統(tǒng)。它按原樣存儲數(shù)據(jù),而無需事先對數(shù)據(jù)進(jìn)行結(jié)構(gòu)化處理。一個數(shù)據(jù)湖可以存儲結(jié)構(gòu)化數(shù)據(jù)(如關(guān)系型數(shù)據(jù)庫中的表),半結(jié)構(gòu)化數(shù)據(jù)(如CSV、日志、XML、JSON),非結(jié)構(gòu)化數(shù)據(jù)(如電子郵件、文檔、PDF)和二進(jìn)制數(shù)據(jù)(如圖形、音頻、視頻)。

但是隨著大數(shù)據(jù)技術(shù)的融合發(fā)展,數(shù)據(jù)湖不斷演變,匯集了各種技術(shù),包括數(shù)據(jù)倉庫、實(shí)時和高速數(shù)據(jù)流技術(shù)、數(shù)據(jù)挖掘、深度學(xué)習(xí)、分布式存儲和其他技術(shù)。逐漸發(fā)展成為一個可以存儲所有結(jié)構(gòu)化和非結(jié)構(gòu)化任意規(guī)模數(shù)據(jù),并可以運(yùn)行不同類型的大數(shù)據(jù)工具,對數(shù)據(jù)進(jìn)行大數(shù)據(jù)處理、實(shí)時分析和機(jī)器學(xué)習(xí)等操作的統(tǒng)一數(shù)據(jù)管理平臺。

二、數(shù)據(jù)中臺的定義

關(guān)于數(shù)據(jù)中臺,筆者查閱了很多資料,也沒有找到對于它的確切和標(biāo)準(zhǔn)定義。事實(shí)上也是如此,實(shí)際上,數(shù)據(jù)中臺是一個具有“中國特色”的概念,在國外并沒有太多人談?wù)摂?shù)據(jù)中臺。

通俗來講,數(shù)據(jù)中臺是一套可持續(xù)“讓企業(yè)的數(shù)據(jù)用起來”的機(jī)制,一種戰(zhàn)略選擇和組織形式,是依據(jù)企業(yè)特有的業(yè)務(wù)模式和組織架構(gòu),通過有形的產(chǎn)品和實(shí)施方法論支撐,構(gòu)建一套持續(xù)不斷把數(shù)據(jù)變成資產(chǎn)并服務(wù)于業(yè)務(wù)的機(jī)制。

三、數(shù)據(jù)湖與數(shù)據(jù)中臺的關(guān)系,數(shù)據(jù)湖和數(shù)據(jù)中臺的區(qū)別

大數(shù)據(jù)時代,數(shù)據(jù)量越來越多,數(shù)據(jù)形式日益復(fù)雜,而以數(shù)據(jù)倉庫為代表的、現(xiàn)有的數(shù)據(jù)存儲和處理技術(shù)無法滿足海量、多樣的數(shù)據(jù)處理需求的背景下產(chǎn)生的。“數(shù)據(jù)湖”是將復(fù)雜的事物具象化,偏技術(shù)一些,以一個形象的名字,反應(yīng)了它在大數(shù)據(jù)存儲和大數(shù)據(jù)處理方面的優(yōu)勢和能力。

數(shù)據(jù)湖作為一個集中的存儲庫,可以在其中存儲任何形式(結(jié)構(gòu)化和非結(jié)構(gòu)化)、任意規(guī)模的數(shù)據(jù)。在數(shù)據(jù)湖中,可以不對存儲的數(shù)據(jù)進(jìn)行結(jié)構(gòu)化,只有在使用數(shù)據(jù)的時候,再利用數(shù)據(jù)湖強(qiáng)大的大數(shù)據(jù)查詢、處理、分析等組件對數(shù)據(jù)進(jìn)行處理和應(yīng)用。因此,數(shù)據(jù)湖具備運(yùn)行不同類型數(shù)據(jù)分析的能力。

數(shù)據(jù)湖和數(shù)據(jù)中臺的區(qū)別?

數(shù)據(jù)中臺從技術(shù)的層面承接了數(shù)據(jù)湖的技術(shù),通過數(shù)據(jù)技術(shù),對海量、多源、多樣的數(shù)據(jù)進(jìn)行采集、處理、存儲、計(jì)算,同時統(tǒng)一標(biāo)準(zhǔn)和口徑,把數(shù)據(jù)統(tǒng)一之后,以標(biāo)準(zhǔn)形式存儲,形成大數(shù)據(jù)資產(chǎn)層,以滿足前臺數(shù)據(jù)分析和應(yīng)用的需求。

數(shù)據(jù)湖更強(qiáng)調(diào)應(yīng)用,離業(yè)務(wù)更近,強(qiáng)調(diào)服務(wù)于前臺的能力,實(shí)現(xiàn)邏輯、算法、標(biāo)簽、模型、數(shù)據(jù)資產(chǎn)的沉淀和復(fù)用,能更快速的相應(yīng)業(yè)務(wù)和應(yīng)用開發(fā)的需求,可追溯,更精準(zhǔn)。

以上是“大數(shù)據(jù)中數(shù)據(jù)湖和數(shù)據(jù)中臺的區(qū)別有哪些”這篇文章的所有內(nèi)容,感謝各位的閱讀!希望分享的內(nèi)容對大家有幫助,更多相關(guān)知識,歡迎關(guān)注億速云行業(yè)資訊頻道!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點(diǎn)不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報(bào),并提供相關(guān)證據(jù),一經(jīng)查實(shí),將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI