圖 1 星辰天合高級(jí)副總裁張旭明在論壇上發(fā)表主題演講

這半年以來，跟人工智能相關(guān)最火熱的概念就是大模型，他們固然對(duì) GPU 算力有著非常突出的需求，但是在另外一個(gè)維度來說，也對(duì)存儲(chǔ)有著不一樣的需求，需要在數(shù)據(jù)中心層面實(shí)現(xiàn)算力與存力的協(xié)同。

人工智能應(yīng)用，尤其是在大模型領(lǐng)域，在數(shù)據(jù)層面有著幾個(gè)顯著的特點(diǎn)。其一是參數(shù)規(guī)模特別大，其二是數(shù)據(jù)來源非常廣泛，這造成了非常大的數(shù)據(jù)量，因此他們?cè)诖鎯?chǔ)層面，主要有著三方面的需求：

• 便利的數(shù)據(jù)匯聚與共享，如何將所需海量數(shù)據(jù)進(jìn)行有效的保存，并且匯聚到一個(gè)中心，以便進(jìn)行處理，然后將其分享出去，這是一個(gè)很高的門檻；
• 存儲(chǔ)需要足夠的高擴(kuò)展性和高性能，畢竟，對(duì)于 AI 訓(xùn)練而言，時(shí)間和效率，是非常重要的；
• 在保證性能的前提下，解決方案需要具備足夠好的性價(jià)比，否則無法真正實(shí)現(xiàn)大規(guī)模商用。

以三種 SDS 產(chǎn)品，應(yīng)對(duì) AI 數(shù)據(jù)存儲(chǔ)需求

星辰天合的眾多客戶基本上會(huì)采用三款產(chǎn)品來解決其 AI 數(shù)據(jù)存儲(chǔ)的需求，以對(duì)象存儲(chǔ)來承接海量的數(shù)據(jù)、以高性能文件存儲(chǔ)來做模型訓(xùn)練，同時(shí)將相關(guān)的業(yè)務(wù)軟件運(yùn)行在我們的計(jì)算產(chǎn)品之上。

這也是星辰天合在 AI 領(lǐng)域的通用解決方案，該解決方案接入 AI 模型訓(xùn)練的完整數(shù)據(jù)流程，從數(shù)據(jù)收集、數(shù)據(jù)治理到訓(xùn)練評(píng)估，一直到數(shù)據(jù)歸檔，星辰天合都可以提供相應(yīng)的數(shù)據(jù)存儲(chǔ)服務(wù)。

除此之外，星辰天合還可以提供眾多數(shù)據(jù)管理的功能。比如說，

• 通過數(shù)據(jù)遷移的方式，我們可以幫助客戶從各個(gè)數(shù)據(jù)源端把數(shù)據(jù)匯聚到了我們的對(duì)象存儲(chǔ)上；
• 在數(shù)據(jù)完成提取、抽取、清洗等步驟之后，人工智能對(duì)存儲(chǔ)的需求就會(huì)變成高性能，畢竟，存儲(chǔ)性能太低，就會(huì)讓上層的 GPU 等待時(shí)間過長(zhǎng)，在這個(gè)階段，我們提供高性能文件存儲(chǔ)協(xié)議去支持，同時(shí)也支持 AI 框架的各類生態(tài)；
• 在后一個(gè)階段，我們可以提供數(shù)據(jù)歸檔、復(fù)制在內(nèi)的相關(guān)數(shù)據(jù)流動(dòng)功能，將計(jì)算的結(jié)果數(shù)據(jù)進(jìn)行長(zhǎng)期保存。

從高校、自動(dòng)駕駛到先進(jìn)制造，SDS 服務(wù)各行 AI 應(yīng)用

在高校領(lǐng)域，由于資金有限，高校進(jìn)行相關(guān) AI 應(yīng)用探索時(shí)，會(huì)格外注意成本問題。在某高校，他們希望解決兩個(gè)問題，第一是利舊原有的硬件，第二是解決寫性能不足的問題。這兩點(diǎn)，正好都是軟件定義存儲(chǔ)所能夠體現(xiàn)的價(jià)值。

圖 2 星辰天合高級(jí)副總裁張旭明分享 SDS 在 AI 領(lǐng)域應(yīng)用案例

一方面，星辰天合的軟件定義存儲(chǔ)產(chǎn)品可以整合原有的硬件存儲(chǔ)節(jié)點(diǎn)，將其形成一個(gè)高質(zhì)量有效的存儲(chǔ)資源；另外一方面，星辰天合的產(chǎn)品能夠提供一個(gè)目錄預(yù)取，存儲(chǔ)產(chǎn)品可以感知業(yè)務(wù)需要的數(shù)據(jù)。在很多 AI 訓(xùn)練時(shí)會(huì)一次性讀取一個(gè)訓(xùn)練集的數(shù)據(jù)，如果存儲(chǔ)產(chǎn)品能夠感知相關(guān)業(yè)務(wù)需求，相關(guān)后續(xù)的訓(xùn)練就會(huì)更加高效。

在自動(dòng)駕駛領(lǐng)域，自動(dòng)駕駛的汽車上面載有激光雷達(dá)和攝像頭，在路面運(yùn)行時(shí)，會(huì)將所有的路測(cè)數(shù)據(jù)收集回來供后續(xù)研發(fā)使用。這些數(shù)據(jù)量非常大，以星辰天合的某自動(dòng)駕駛領(lǐng)域的客戶舉例，他們每天會(huì)有數(shù)百 TB 的數(shù)據(jù)增量。這些數(shù)據(jù)收集回來之后，以對(duì)象存儲(chǔ)的方式存儲(chǔ)，清洗完之后迭代其數(shù)據(jù)源，導(dǎo)入到高性能文件存儲(chǔ)中以適配它的模型訓(xùn)練。

在先進(jìn)制造行業(yè)、金融行業(yè)，我們所服務(wù)的企業(yè)也是類似的場(chǎng)景和需求。我們也同樣提供了一種方案，由對(duì)象存儲(chǔ)來承接其訓(xùn)練元數(shù)據(jù)，清洗完之后的數(shù)據(jù)在高性能文件存儲(chǔ)中訓(xùn)練，訓(xùn)練完之后歷史數(shù)據(jù)重新再利用對(duì)象存儲(chǔ)歸檔。

從數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)流動(dòng)，到整合數(shù)據(jù)生態(tài)平臺(tái)

作為技術(shù)領(lǐng)先的數(shù)據(jù)基礎(chǔ)設(shè)施提供商，星辰天合以“數(shù)據(jù)常青”為使命，始終專注于軟件定義存儲(chǔ)領(lǐng)域，以數(shù)據(jù)價(jià)值為核心為客戶提供數(shù)據(jù)服務(wù)。

圖 3 星辰天合以軟件定義存儲(chǔ)為客戶提供數(shù)據(jù)服務(wù)

為更方便理解星辰天合所提供的產(chǎn)品和服務(wù)，我們將數(shù)據(jù)服務(wù)分為了三個(gè)層次：

• 第一，星辰天合可以幫助客戶構(gòu)筑數(shù)據(jù)存儲(chǔ)平臺(tái)，能夠提供擴(kuò)展性、高性能、敏捷性、靈活性、低成本的數(shù)據(jù)存儲(chǔ)系統(tǒng)。
• 第二，星辰天合可以為客戶提供數(shù)據(jù)管理平臺(tái)，客戶的業(yè)務(wù)所使用的是數(shù)據(jù)，需要我們提供的是數(shù)據(jù)服務(wù)。在傳統(tǒng)模式中，所有的數(shù)據(jù)存在于硬件介質(zhì)中，其本身有生命周期，當(dāng)硬件老化之后就可能要被替換。而軟件定義存儲(chǔ)將數(shù)據(jù)存在軟件中，硬件的更換迭代不影響給業(yè)務(wù)提供數(shù)據(jù)服務(wù)；此外，需要將數(shù)據(jù)快速出現(xiàn)在業(yè)務(wù)想要訪問它的位置，以供業(yè)務(wù)進(jìn)行數(shù)據(jù)分析等，因此數(shù)據(jù)的智能流動(dòng)是新一代存儲(chǔ)架構(gòu)中的重要特性，而這已經(jīng)脫離了傳統(tǒng)存儲(chǔ)的能力范疇。
• 第三，企業(yè)需要對(duì)數(shù)據(jù)生態(tài)平臺(tái)進(jìn)行整合，星辰天合努力兼容各種業(yè)務(wù)生態(tài)，包括云計(jì)算、大數(shù)據(jù)、人工智能，以及敏態(tài)發(fā)展各類容器的業(yè)務(wù)等，這也是數(shù)據(jù)服務(wù)廠商需要支持的。

通過在軟件定義存儲(chǔ)領(lǐng)域的長(zhǎng)期創(chuàng)新與突破，星辰天合以豐富的產(chǎn)品和解決方案，幫助企業(yè)實(shí)現(xiàn)存力與算力的協(xié)同。 在大數(shù)據(jù)與人工智能發(fā)展極為迅猛的今天，為持續(xù)滿足相關(guān)應(yīng)用對(duì)存儲(chǔ)的需求，星辰天合的存儲(chǔ)也在不斷地革新中。在今年，星辰天合也即將發(fā)布一個(gè)全新的全閃架構(gòu)，帶動(dòng)存儲(chǔ)系統(tǒng)性能的大幅度進(jìn)步，在更高端的領(lǐng)域?qū)崿F(xiàn)存力與算力的協(xié)同進(jìn)步與均衡發(fā)展。

崔歡歡