“未來的大數(shù)據(jù)分析將以湖倉一體為基礎設施、流批一體會成為未來新的架構標準”,近日,由中國大數(shù)據(jù)網(wǎng)發(fā)布的《中國大數(shù)據(jù)分析行業(yè)研究報告》中,通過對大數(shù)據(jù)技術趨勢深入研究,得出此觀點和結論。
作為中國科協(xié)直屬國家一級學會中國科技新聞學會主辦的大數(shù)據(jù)與科技傳播專業(yè)委員會官方平臺,中國大數(shù)據(jù)網(wǎng)此次發(fā)布的研究報告采取訪談調研方式,還對大數(shù)據(jù)各細分市場中的典型廠商做了重點分析。滴普科技作為湖倉一體、流批一體典型廠商,入選報告得到權威機構認可。
湖倉一體是新一代數(shù)據(jù)基礎設施的未來
報告顯示,大數(shù)據(jù)市場經(jīng)過20年的發(fā)展,形成了豐富的市場生態(tài),但隨著數(shù)據(jù)規(guī)模持續(xù)的高速增長,大數(shù)據(jù)基礎設施技術從數(shù)據(jù)庫、數(shù)據(jù)倉庫、數(shù)據(jù)湖演化到如今的湖倉一體架構。湖倉一體兼顧數(shù)據(jù)湖的靈活性和數(shù)據(jù)倉庫的成長性/事務性,是大數(shù)據(jù)基礎設施的未來,也是數(shù)據(jù)分析所依賴的基礎平臺,正成為新一代大數(shù)據(jù)分析的基礎設施。
大數(shù)據(jù)產(chǎn)品分類
另一方面,因企業(yè)對于數(shù)據(jù)分析的實時性需求增強,而流批一體可以將流式計算與批量計算兩種不同架構的數(shù)據(jù)處理模式融合到一起,正在成為新的市場趨勢。
在這樣的技術趨勢驅動下,一批廠商迅速崛起。譬如,滴普科技作為大數(shù)據(jù)新興廠商代表,自主研發(fā)了云原生數(shù)據(jù)智能平臺FastData ,具有湖倉一體、流批一體的架構,體現(xiàn)了存儲、計算、分析應用三方面的構成,且擁有不同的組件適用于不同的場景需求。
技術架構上,F(xiàn)astData采用存算分離架構,支持結構化、半結構化、非結構化等多模數(shù)據(jù)的統(tǒng)一存儲,以及數(shù)據(jù)處理、數(shù)據(jù)分析、數(shù)據(jù)科學等多工作負載。同時,F(xiàn)astData采用Kappa Plus架構可實現(xiàn)一套架構同時滿足流和批的處理,提供實時性秒級數(shù)據(jù)處理與分析能力,滿足了數(shù)據(jù)分析場景的實時性需求。
依托FastData提供的核心技術,滴普科技已成功服務100余家知名大中型企業(yè),驗證了國產(chǎn)分析型數(shù)據(jù)庫的技術實踐能力,推動了新一代大數(shù)據(jù)基礎設施的創(chuàng)新與增長。
堅持云中立理念,助大數(shù)據(jù)產(chǎn)業(yè)高質量發(fā)展
報告還認為,隨著大數(shù)據(jù)技術的快速演進,中國大數(shù)據(jù)市場規(guī)模迎來強勢增長,且云計算技術的發(fā)展,使大數(shù)據(jù)云化部署持續(xù)增長,公有云、非公有云部署同步發(fā)展。
提前預判到云化部署的趨勢,滴普科技已與AWS、微軟云、華為云緊密合作,未來將為更多客戶提供云上產(chǎn)品和服務。滴普科技的理念是保持產(chǎn)品的云中立和互聯(lián)網(wǎng)生態(tài)中立,使企業(yè)產(chǎn)品能夠在任何云、任何互聯(lián)網(wǎng)生態(tài)中都可以部署。
根據(jù)IDC預測,中國大數(shù)據(jù)市場2021年整體規(guī)模超110億美元,且有望在2025年超過250億美元,這意味著大數(shù)據(jù)產(chǎn)業(yè)將邁向新的發(fā)展階段。未來在數(shù)據(jù)庫國產(chǎn)化替代的趨勢下,需要國內廠商不斷創(chuàng)新大數(shù)據(jù)基礎設施,為大數(shù)據(jù)基礎軟件行業(yè)貢獻應有的力量,進而推動大數(shù)據(jù)產(chǎn)業(yè)高質量發(fā)展