華為云新一代全場景智能數(shù)據(jù)湖

相較于傳統(tǒng)的數(shù)據(jù)庫分析系統(tǒng)及業(yè)界普遍宣傳的以對象存儲為底座的數(shù)據(jù)湖產(chǎn)品，華為云新一代全場景智能數(shù)據(jù)湖，具有高性價比、敏捷智能應用以及全場景等優(yōu)勢：

極速：基于華為云多元新架構和多樣算力的新一代智能數(shù)據(jù)湖，具有超高算力，并通過對存儲層、大數(shù)據(jù)引擎的優(yōu)化，實現(xiàn)30%的系統(tǒng)性能提升。

敏捷智能：華為云大數(shù)據(jù)處理引擎具備智能、自學習及自調(diào)優(yōu)的特點。智能數(shù)據(jù)運營平臺DAYU能夠?qū)崿F(xiàn)全流程、可視、支持行業(yè)化模板，幫助客戶把大數(shù)據(jù)治理的時間從原來的“周”縮短到“分鐘”，實現(xiàn)分鐘級敏捷創(chuàng)新。

全場景：新一代的智能數(shù)據(jù)湖能夠讓企業(yè)的數(shù)據(jù)工程師、數(shù)據(jù)分析師以及數(shù)據(jù)科學家等多角色在同一個平臺上工作，解決了多團隊各自為政，多個數(shù)據(jù)散落在各個團隊中，數(shù)據(jù)需要不斷導入導出，無法有效管理的問題。全場景智能數(shù)據(jù)湖支持統(tǒng)一的索引機制、統(tǒng)一的存儲機制、統(tǒng)一的大數(shù)據(jù)引擎，可以幫助企業(yè)多角色在同一平臺上工作，無需多次搬運數(shù)據(jù)，無需處理多種索引，一個平臺支持多類業(yè)務應用，給企業(yè)應用帶來極大的敏捷性和便利性。

 全棧高性價比：華為鯤鵬芯片在大數(shù)據(jù)場景下具有天然的優(yōu)勢：多核帶來的更強算力，高集成度以及更大的網(wǎng)絡帶寬，并內(nèi)置了壓縮、加解密等很多常用算法。華為云新一代智能數(shù)據(jù)湖服務基于鯤鵬芯片進行了全棧架構優(yōu)化，通過向量化處理加速，讓數(shù)據(jù)掃描得飛快。通過分級鎖架構，揚長避短，減少多線程對于臨界資源的隨機競爭，更好地發(fā)揮了鯤鵬的多核優(yōu)勢，在計算、I/O密集的場景下，可以幫助數(shù)據(jù)湖服務達到最高性價比。

華為云新一代全場景智能數(shù)據(jù)湖背后，包括了三個核心的創(chuàng)新技術點。

?統(tǒng)一數(shù)據(jù)存儲、高效計算、智能加速

華為云智能數(shù)據(jù)湖實現(xiàn)一個平臺一份數(shù)據(jù)支撐企業(yè)多角色協(xié)同工作，通過將CarbonData和對象存儲服務OBS的技術結合，實現(xiàn)一份數(shù)據(jù)存儲多場景應用。通過創(chuàng)新的多級別多維度的索引技術，能夠讓索引自適應調(diào)整，能夠一份數(shù)據(jù)多個索引滿足不同的場景，提升了10倍以上的數(shù)據(jù)存儲IO性能。通過CarbonData數(shù)據(jù)引擎，加速數(shù)據(jù)的訪問和一致性，在業(yè)界領先的計算和存儲分離架構下，通過支持彈性伸縮，分級存儲，競價實例等，成本可降低高達80%，同時在存儲加速，緩存加速，計算引擎加速等多級加速技術支持下，性能高于自建100%。

業(yè)界領先的某視頻直播廠商，對于性能和穩(wěn)定性要求極高，遷移到華為云后，相比自建的IDC，性能提升218%。

?數(shù)據(jù)+AI協(xié)同，自動學習，自動調(diào)優(yōu)

通過將AI技術引入大數(shù)據(jù)引擎，實現(xiàn)自學習大數(shù)據(jù)引擎。在數(shù)據(jù)處理過程中，自動感知數(shù)據(jù)的特點，自動學習，并對大數(shù)據(jù)處理進行自動調(diào)優(yōu)，進一步提升了大數(shù)據(jù)性能。

?智能數(shù)據(jù)運營平臺DAYU，加速企業(yè)敏捷創(chuàng)新

華為云智能數(shù)據(jù)運營平臺DAYU

華為云DAYU是一站式的數(shù)據(jù)運營平臺，希望為企業(yè)提供數(shù)據(jù)治理的敏捷可視、自助分析、快速開發(fā)、全局治理，并能對數(shù)據(jù)湖中的數(shù)據(jù)具備高效探索的能力，幫助企業(yè)實現(xiàn)數(shù)據(jù)“找得到，管得住，用得好”。某跨境電商遷移到華為云后，性能上提升100%，成本上降低60%。

截至目前，華為云智能數(shù)據(jù)湖已廣泛應用于金融、醫(yī)學、物流、互聯(lián)網(wǎng)、汽車、政府等行業(yè)。

xiesc