
曙光首創(chuàng)XDS技術攻克大模型存儲三大痛點
國內(nèi)大模型百花齊放,據(jù)統(tǒng)計,中國10億以上參數(shù)大模型已發(fā)布79個。 大模型海量計算,對存儲提出了更高要求。而三大存力痛點,制約大模型計算發(fā)展:一是數(shù)據(jù)加載慢,導致訓練時間長;二是數(shù)據(jù)訪問協(xié)議多樣性,要求數(shù)據(jù)訪問效率更高;三是數(shù)據(jù)生命周期管理...
國內(nèi)大模型百花齊放,據(jù)統(tǒng)計,中國10億以上參數(shù)大模型已發(fā)布79個。 大模型海量計算,對存儲提出了更高要求。而三大存力痛點,制約大模型計算發(fā)展:一是數(shù)據(jù)加載慢,導致訓練時間長;二是數(shù)據(jù)訪問協(xié)議多樣性,要求數(shù)據(jù)訪問效率更高;三是數(shù)據(jù)生命周期管理...