AI開發(fā),大象們的舞臺
AI技術(shù)與云本身就是強(qiáng)綁定的。想要發(fā)展AI,只有兩條路,一條是走專精之路,如訊飛、商湯等,另一條則是走綜合發(fā)展之路,這條路就是大象們的舞臺。凡是綜合性AI玩家,沒有一個能脫離云的幫助,國外的AWS、谷歌,國內(nèi)如阿里、騰訊、華為。從大象也能起舞,到只有大象能起舞,這一局面是很多因素的共同存在導(dǎo)致的。
從開發(fā)角度來看,AI涉及到的內(nèi)容極其繁雜,進(jìn)而使得單一企業(yè)難以實現(xiàn)。僅僅從底層開發(fā)角度來看,機(jī)器學(xué)習(xí)、知識庫、自然語言處理、語音語義識別、計算機(jī)視覺、機(jī)器感知、情感計算、神經(jīng)網(wǎng)絡(luò)以及各類強(qiáng)人工智能技術(shù)等數(shù)十個研發(fā)領(lǐng)域,這其中巨大的研發(fā)投入是普通企業(yè)難以承受。
同時,開源社區(qū)的發(fā)展讓AI技術(shù)的業(yè)務(wù)領(lǐng)域得以進(jìn)一步擴(kuò)散,不少開源項目展現(xiàn)出極強(qiáng)的生命力。但是開源技術(shù)的不穩(wěn)定性和前沿性并存,普通企業(yè)可以探索也能開發(fā)一下產(chǎn)品,但卻很難全面掌控開源技術(shù),一旦失敗也沒有巨頭們的試錯機(jī)會,只能在競爭中無奈退出。
AI技術(shù)發(fā)展還有一個典型的特點(diǎn),那就是對數(shù)據(jù)的依賴性很強(qiáng)。在數(shù)據(jù)量不足的情況下,人工智能技術(shù)很難發(fā)展起來的。尤其是基于行業(yè)進(jìn)行智能化升級時,行業(yè)數(shù)據(jù)將會是AI研發(fā)的加速器。當(dāng)今時代號稱信息爆炸的時代,海量數(shù)據(jù)用于AI模型和算法的訓(xùn)練再合適不過,近年來火力全開的深度學(xué)習(xí)和生成式對抗網(wǎng)絡(luò)等都是需要大量的數(shù)據(jù)完成深度神經(jīng)網(wǎng)絡(luò)模型訓(xùn)練才能發(fā)揮其功效的典型代表。
如果說技術(shù)上的差距可以靠個別優(yōu)秀人才來彌補(bǔ),生態(tài)上的問題恐怕就是無解難關(guān)了。大型企業(yè)的優(yōu)勢在于生態(tài)和業(yè)務(wù)布局。原有業(yè)務(wù)生態(tài)提供大量的數(shù)據(jù)給AI模型進(jìn)行訓(xùn)練和迭代完善,大量成型的AI技術(shù)及模型構(gòu)建成可靠的行業(yè)通用型AI平臺,當(dāng)平臺逐步完善成熟,再反哺回原有業(yè)務(wù)進(jìn)行智能化升級,一條閉環(huán)的生態(tài)鏈會進(jìn)一步構(gòu)成企業(yè)的護(hù)城河,使得其競爭力獨(dú)步天下。
以往的AI技術(shù)與云的關(guān)聯(lián)性是很低的,但在近兩年里,這一局面開始扭轉(zhuǎn)。一方面是AI技術(shù)落地速度加快,云在各個行業(yè)已經(jīng)扎穩(wěn)根基;另一方面是由于云計算、大數(shù)據(jù)、AI技術(shù)相通性和相輔相成效果極佳,云計算能夠解決AI系統(tǒng)根本上的算力難題,再加上如今5G技術(shù)正在大力普及,邊緣計算和云也走向邊云融合,AI的算力得到極大的滿足,這也恰恰讓原本的大型公有云服務(wù)提供商優(yōu)勢更加凸顯。
算力的基礎(chǔ)只有云嗎?并不,還有芯片。國內(nèi)能生成芯片的企業(yè)并不多,大型企業(yè)可能只有華為的昇騰、寒武紀(jì)、阿里的平頭哥等寥寥數(shù)家,但芯片的重要性卻無以復(fù)加,一方面自產(chǎn)芯片能夠極大的適配業(yè)務(wù),實現(xiàn)定制化生產(chǎn),另一方面自主研發(fā)的芯片能夠形成真正的技術(shù)閉環(huán),端、邊、云全線融合,進(jìn)一步降低安全風(fēng)險,保障軟硬件和數(shù)據(jù)的穩(wěn)定。
面對AI這一前所未有的巨大機(jī)遇,大象們雖然看似行動緩慢,但卻早已翩躚起舞,開始尋覓屬于自己的時代。華為云就是其中最為搖滾的一個。
搖滾的華為文化,激情的AI探索
根據(jù)IDC的數(shù)據(jù)來看,華為云在上個季度增速達(dá)到300%,為排名前五的幾家云廠商中增速最快的一個。當(dāng)我們習(xí)慣了華為云的速度之后,不難發(fā)現(xiàn),華為云在AI方面也走到了舞臺的中心。究其原因,華為云的后發(fā)先至可歸功于其兩大法寶:深厚的技術(shù)基礎(chǔ)和搖滾的探索精神。
這個世界并不缺乏狂人,而區(qū)分狂言和豪言最可靠的辦法,就是看結(jié)果。華為云曾經(jīng)的愿景如今一一都在變成現(xiàn)實,這不難看出華為云深厚的技術(shù)底蘊(yùn)。根源上來看,華為本身在通信服務(wù)、云計算、硬件終端等方面就有著深厚的技術(shù)積累;同時又統(tǒng)一了API、服務(wù)、生態(tài)和架構(gòu),讓企業(yè)應(yīng)用能夠自由遷移和并存;再者,華為云“上不碰應(yīng)用,下不碰數(shù)據(jù)”的理念也構(gòu)筑起了用戶的信任感,從而能夠迅速發(fā)展。
在AI方面,華為云雄厚的技術(shù)家底也讓人眼饞。在剛剛結(jié)束的AICon上,華為云就對外全面展示了自家的AI技術(shù)全景圖。硬件方面, 進(jìn)行模型訓(xùn)練往往需要花費(fèi)大量時間,因此算力更強(qiáng)的計算平臺將更具優(yōu)勢。華為推出的專業(yè)的AI處理器昇騰系列芯片,通過華為3D Cube架構(gòu)和高達(dá)90%的卷積算子能實現(xiàn)每個時鐘周期完成4096x FP16 MAC運(yùn)算。同時,這一芯片利用達(dá)芬奇智能架構(gòu)成功實現(xiàn)“端邊云”的統(tǒng)一,跨平臺跨終端的智能技術(shù)更加暢通無阻。
硬件性能如同一匹千里馬,軟件就是伯樂,唯有真正懂馬之人才能發(fā)揮出硬件的真正實力。為了將昇騰芯片的能力完全釋放,華為云從硬件到神經(jīng)網(wǎng)絡(luò)研發(fā)出來一系列的昇騰處理器專用開發(fā)工具鏈?;谌A為昇騰處理器的軟件??梢苑譃樗膶?,底層是計算資源,包括了AI芯片、視覺處理專用硬件及各類操作系統(tǒng);上一層是芯片使能層,包括了張量加速引擎、任務(wù)調(diào)度器等計算加速產(chǎn)品;再往上一層則是執(zhí)行框架,包括框架管理器和流程編排器等;最頂部則是應(yīng)用層,這就包括了開發(fā)過程中會用到的計算視覺引擎、語言文字引擎、通用業(yè)務(wù)引擎等諸多應(yīng)用。
賦能開發(fā)者需要開放的不只是產(chǎn)品,還有工具。華為云針對昇騰軟件棧打造了一套完善的工具鏈,包括了工程管理、編譯調(diào)劑、流程編排、離線模型轉(zhuǎn)換、比對工具、日志管理以及自定義算子等,并通過神經(jīng)網(wǎng)絡(luò)軟件流進(jìn)一步進(jìn)行調(diào)度和管理,從而提升AI開發(fā)效率。
搖滾不死,前沿的探索精神便不滅。華為每年超過10%的研發(fā)投入是其前進(jìn)的保障,搖滾的探索精神讓華為云在前沿技術(shù)上也一樣快人一步。中文是世界上最古老的語言之一,但對于新派的計算機(jī)來講,理解古老的中文甚至是古詩詞也就很是困難。為此,華為諾亞方舟實驗室的三項預(yù)訓(xùn)練語言模型技術(shù):哪吒,樂府和 TinyBERT。
中文預(yù)訓(xùn)練語言模型哪咤通過混合精度訓(xùn)練和LAMB優(yōu)化器的幫助,在中文任務(wù)中達(dá)到了業(yè)界最好水平;樂府模型則通過與華為云的合作,經(jīng)過大規(guī)模現(xiàn)代漢語及詩歌預(yù)訓(xùn)練并基于詩歌的Finetune實現(xiàn)詩歌序列化,能夠自主產(chǎn)出詩歌;TinyBERT則是將預(yù)訓(xùn)練語言模型實現(xiàn)小型化,并基于知識蒸餾和數(shù)據(jù)增強(qiáng)完成模型壓縮,保障模型精度。
除了在語言方面的研發(fā),華為云還在當(dāng)下熱門的物聯(lián)網(wǎng)領(lǐng)域進(jìn)行的深入研發(fā)。華為云推出的知識圖譜將人、車、家及辦公場景實現(xiàn)無縫拉通,實現(xiàn)全場景智慧升級。并通過知識圖譜端到端構(gòu)建平臺解決了知識圖譜構(gòu)建周期長、人工投入大的難題。在未來,華為云知識圖譜還將面向運(yùn)營商領(lǐng)域的效率提升與智能決策提供更多幫助。
全棧全場景AI攻略,唱響未來之聲
隨著5G時代的逐步到來,AI技術(shù)的發(fā)展已經(jīng)走向全面落地。華為云的探索不只是軟硬件,還有全棧全場景的AI開發(fā)體系。
華為云面向AI的戰(zhàn)略無比清晰,投資基礎(chǔ)研究,提供安全可信、自動自治的機(jī)器學(xué)習(xí)基礎(chǔ)能力;打造全棧方案,提供高效、易用的全流程AI平臺;投資開放生態(tài)和人才培養(yǎng),持續(xù)與產(chǎn)學(xué)研及行業(yè)伙伴進(jìn)行合作;增強(qiáng)解決方案,打造更強(qiáng)更可靠的更具價值的產(chǎn)品和服務(wù);提升內(nèi)部管理效率,應(yīng)用AI技術(shù)提高內(nèi)部運(yùn)營的效率及質(zhì)量。
也正是在這一的戰(zhàn)略之下,華為打造了一系列面向AI技術(shù)的全棧全場景產(chǎn)品及平臺。應(yīng)用使能方面,華為云打造了提供全流程服務(wù)ModelArts平臺,不僅提供了從數(shù)據(jù)采集、篩選、標(biāo)注、到管理的全鏈數(shù)據(jù)處理流程,還能夠提供自動化模型訓(xùn)練能力,實現(xiàn)模型可視化,通過AI市場提供API、數(shù)據(jù)集以及模型的交易,并提供云端實時業(yè)務(wù)部署,一站式解決用戶的AI從研發(fā)到落地的各類需求。
在框架方面,華為云打造了支持端、邊、云獨(dú)立的和協(xié)同的統(tǒng)一訓(xùn)練和推理框架MindSpore。該價格通過新編程范式,實現(xiàn)AI算法即代碼,降低AI開發(fā)門檻,并基于數(shù)學(xué)原生表達(dá)的AI編程新范式讓算法專家聚焦AI創(chuàng)新和探索;通過新的執(zhí)行模式, Ascend Native的執(zhí)行引擎可以實現(xiàn) 整圖卸載執(zhí)行,充分發(fā)揮昇騰大算力,并且全場景以按需協(xié)同的方式部署,能夠更好的資源效率和隱私保護(hù),打破端云界限, 多設(shè)備協(xié)同模型實時更新。
讓AI產(chǎn)品上線離不開安全穩(wěn)定的測試環(huán)境,華為云基于Cloud IDE+Codehub構(gòu)建的高效可信的開發(fā)環(huán)境,可以進(jìn)一步提升開發(fā)效率。華為云DevCloud就是一個一站式、全流程、安全可信的DevOps云平臺,其提供的Cloud IDE能夠為AI開發(fā)者提供輕量、極速的Visual Studio Code編碼體驗,并且,能夠支持插件擴(kuò)展,支持主流編程語言,兼容VSCode。華為云CodeHub(代碼托管)則是基于Git的在線代碼托管服務(wù),是一個具備安全管控、成員/權(quán)限管理、分支保護(hù)/合并、在線編輯、統(tǒng)計服務(wù)等功能的云端代碼倉庫,并且還提供了開發(fā)軟件效率最快的各式各樣的半成品:源碼、算法、組件、框架,站在巨人的肩膀上進(jìn)行開發(fā)無疑將會事半功倍。
縱覽天下AI風(fēng)云,國內(nèi)的競爭已經(jīng)逐漸趨于紅?;?,但是細(xì)數(shù)各大廠商,大浪淘沙之后能夠剩下的、值得期待的企業(yè)卻并不多,華為云就是其中一個。從底層芯片到上層應(yīng)用,再到開發(fā)所需的各類工具及環(huán)境,華為云在AI方面已經(jīng)布置好一個巨大的舞臺。只要合作伙伴需要,只要開發(fā)者需要,華為云的搖滾表演就勢必會震撼全場。