2022年數(shù)據(jù)湖行業(yè)現(xiàn)狀及發(fā)展前景分析

• 2022年4月14日 HaoChenChong來(lái)源：互聯(lián)網(wǎng) 398 19
• 繁體

國(guó)內(nèi)數(shù)據(jù)湖行業(yè)市場(chǎng)前景如何? 數(shù)據(jù)湖作為新一代大數(shù)據(jù)基礎(chǔ)設(shè)施，近年來(lái)持續(xù)火熱。根據(jù)有關(guān)數(shù)據(jù)顯示，2020年數(shù)據(jù)湖產(chǎn)品市場(chǎng)規(guī)模達(dá)72.5億元，相比2019年的56.4億元增長(zhǎng)了28.5%。

國(guó)內(nèi)數(shù)據(jù)湖行業(yè)市場(chǎng)前景如何? 數(shù)據(jù)湖作為新一代大數(shù)據(jù)基礎(chǔ)設(shè)施，近年來(lái)持續(xù)火熱。根據(jù)有關(guān)數(shù)據(jù)顯示，2020年數(shù)據(jù)湖產(chǎn)品市場(chǎng)規(guī)模達(dá)72.5億元，相比2019年的56.4億元增長(zhǎng)了28.5%。

2022年數(shù)據(jù)湖行業(yè)現(xiàn)狀及發(fā)展前景分析

亞馬遜云科技、阿里云、華為云是我國(guó)數(shù)據(jù)湖產(chǎn)品市場(chǎng)份額排名前三的廠商，三者合計(jì)占比接近50%。亞馬遜云科技作為率先幫助用戶走出數(shù)據(jù)湖價(jià)值落地之路的云服務(wù)提供商代表，并逐漸得到了市場(chǎng)的認(rèn)可。

數(shù)據(jù)湖中數(shù)據(jù)量龐大，要讓數(shù)據(jù)不被淹沒(méi)，能隨時(shí)得到追蹤，就需要維護(hù)好數(shù)據(jù)目錄，數(shù)據(jù)湖中的數(shù)據(jù)目錄是元數(shù)據(jù)的集合。好的數(shù)據(jù)湖系統(tǒng)，計(jì)算引擎在處理數(shù)據(jù)時(shí)，能從元數(shù)據(jù)中直接獲取數(shù)據(jù)存儲(chǔ)位置、數(shù)據(jù)格式、數(shù)據(jù)模式、數(shù)據(jù)分布等信息，然后直接進(jìn)行數(shù)據(jù)處理，而無(wú)需進(jìn)行人工/編程干預(yù)。更進(jìn)一步，好的數(shù)據(jù)湖系統(tǒng)還可以對(duì)數(shù)據(jù)湖中的數(shù)據(jù)進(jìn)行訪問(wèn)控制，控制的力度可以做到“庫(kù)表列行”等不同級(jí)別。

數(shù)據(jù)目錄充當(dāng)可用數(shù)據(jù)的清單，并提供信息以評(píng)估適用數(shù)據(jù)的預(yù)期用途。一個(gè)有效的方法是維護(hù)中央數(shù)據(jù)目錄，并在各種處理框架(如Hadoop、Spark以及其他可用工具)中使用，這樣可以應(yīng)用簡(jiǎn)單的數(shù)據(jù)治理規(guī)則來(lái)確保元數(shù)據(jù)的完整性。

根據(jù)中研研究院出版的《2022-2027年管理軟件行業(yè)市場(chǎng)深度分析及發(fā)展規(guī)劃咨詢綜合研究報(bào)告》統(tǒng)計(jì)分析顯示：

據(jù)悉，我國(guó)農(nóng)業(yè)銀行選擇在企業(yè)級(jí)大數(shù)據(jù)平臺(tái)的基礎(chǔ)上，圍繞“采、建、管、用”四個(gè)關(guān)鍵環(huán)節(jié)進(jìn)行數(shù)據(jù)湖建設(shè)。從源頭上豐富數(shù)據(jù)種類，在建設(shè)中提升海量數(shù)據(jù)存儲(chǔ)計(jì)算能力，在管理上加強(qiáng)數(shù)據(jù)資產(chǎn)線上化和規(guī)范化水平，在消費(fèi)端通過(guò)租戶管理、資源開(kāi)放和自助服務(wù)，實(shí)現(xiàn)數(shù)據(jù)應(yīng)用的快速構(gòu)建。

現(xiàn)已通過(guò)立機(jī)制、建工具、落實(shí)施，實(shí)現(xiàn)了海量?jī)?nèi)外部數(shù)據(jù)的快速入湖，為全行各業(yè)務(wù)領(lǐng)域百余個(gè)應(yīng)用場(chǎng)景提供數(shù)據(jù)支撐。同時(shí)正在積極開(kāi)展數(shù)據(jù)湖新技術(shù)架構(gòu)的建設(shè)落地，通過(guò)開(kāi)源軟件和國(guó)產(chǎn)商用產(chǎn)品融合的方式，完成了異構(gòu)存儲(chǔ)管理、元數(shù)據(jù)管理、計(jì)算引擎上云及實(shí)時(shí)數(shù)據(jù)處理等關(guān)鍵技術(shù)攻關(guān)和重點(diǎn)場(chǎng)景驗(yàn)證。

近期在數(shù)據(jù)湖新技術(shù)架構(gòu)的基礎(chǔ)上，上線各類新業(yè)務(wù)場(chǎng)景;中期打通數(shù)據(jù)湖與現(xiàn)有數(shù)倉(cāng)，實(shí)現(xiàn)湖倉(cāng)架構(gòu)融合，并推進(jìn)大數(shù)據(jù)與云計(jì)算的融合，進(jìn)一步提升資源管理和服務(wù)能力;最終，建成云數(shù)據(jù)湖，實(shí)現(xiàn)集團(tuán)數(shù)據(jù)一體化管理，形成行業(yè)領(lǐng)先的大數(shù)據(jù)基礎(chǔ)架構(gòu)，全面夯實(shí)企業(yè)級(jí)數(shù)據(jù)底座，為集團(tuán)提供更豐富、更及時(shí)、更開(kāi)放、更融合的數(shù)據(jù)支撐。

目前市面上流行的三大開(kāi)源數(shù)據(jù)湖方案分別為：Apache Delta、Apache Iceberg和Apache Hudi。 開(kāi)源項(xiàng)目的優(yōu)勢(shì)包括：頭部企業(yè)提出的開(kāi)源項(xiàng)目，技術(shù)可行性強(qiáng);群策群智，發(fā)展迅速;商業(yè)化版本也比較多，方便選擇等。

有關(guān)機(jī)構(gòu)預(yù)測(cè)，到2024年，市場(chǎng)規(guī)模將達(dá)到201億美元，預(yù)測(cè)期內(nèi)(2019～2024年)的復(fù)合年增長(zhǎng)率為20.6%。

想要了解更多數(shù)據(jù)湖行業(yè)詳細(xì)分析，請(qǐng)點(diǎn)擊關(guān)注中研研究院出版的《2022-2027年管理軟件行業(yè)市場(chǎng)深度分析及發(fā)展規(guī)劃咨詢綜合研究報(bào)告》

• 相關(guān)深度報(bào)告REPORTS

  

  2022-2027年管理軟件行業(yè)市場(chǎng)深度分析及發(fā)展規(guī)劃咨詢綜合研究報(bào)告

  管理軟件行業(yè)研究報(bào)告中的管理軟件行業(yè)數(shù)據(jù)分析以權(quán)威的國(guó)家統(tǒng)計(jì)數(shù)據(jù)為基礎(chǔ)，采用宏觀和微觀相結(jié)合的分析方式，利用科學(xué)的統(tǒng)計(jì)分析方法，在描述行業(yè)概貌的同時(shí)，對(duì)管理軟件行業(yè)進(jìn)行細(xì)化分析，重...

  查看詳情

延伸閱讀

推薦閱讀

猜您喜歡