宏杉科技產(chǎn)品部副總工謝勇發(fā)表主題演講

宏杉MOFS洞見海量數(shù)據(jù)價(jià)值

根據(jù)IDC預(yù)測(cè),全球數(shù)據(jù)量將由2019年的45ZB增長到2025年的175ZB,整體漲幅超過300%,中國將成為全球最大的數(shù)據(jù)圈,由人口紅利時(shí)代轉(zhuǎn)向數(shù)據(jù)紅利時(shí)代。其中非結(jié)構(gòu)化數(shù)據(jù)與日俱增,占比超過80%,意味著分布式存儲(chǔ)發(fā)展的黃金時(shí)代已經(jīng)來臨。

MOFS是宏杉科技針對(duì)海量數(shù)據(jù)存儲(chǔ)應(yīng)用推出的大規(guī)模分布式通用并行文件集群系統(tǒng),具備開放架構(gòu)、卓越性能、極致可靠、數(shù)據(jù)融合、應(yīng)用優(yōu)化五大特性,針對(duì)用戶多樣化的業(yè)務(wù)需求場景,提供文件、對(duì)象、大數(shù)據(jù)存儲(chǔ)資源服務(wù)。

1、開放架構(gòu)

宏杉MOFS分布式存儲(chǔ)系統(tǒng)采用主流的分布式去中心化存算分離架構(gòu),可為用戶提供分布式塊、分布式文件、分布式對(duì)象多種存儲(chǔ)資源,滿足用戶在IT系統(tǒng)建設(shè)中靈活選擇、高效擴(kuò)容、安全隔離的需求。

MOFS分布式存儲(chǔ)系統(tǒng)的另一開放架構(gòu)特性是支持豐富的接口類型,尤其是支持100G InfiniBand接口,可為HPC高性能計(jì)算業(yè)務(wù)提供更高帶寬,單口達(dá)到100Gb/s吞吐、微秒級(jí)時(shí)延,顯著提升HPC高性能計(jì)算業(yè)務(wù)效率。

2、卓越性能

在性能方面,宏杉MOFS分布式存儲(chǔ)系統(tǒng)通過自主研發(fā)的增強(qiáng)型智能存儲(chǔ)協(xié)議,實(shí)現(xiàn)三方面提升:首先,采用源端切片技術(shù),支持負(fù)載均衡多線程的并發(fā)讀寫,整體讀寫效率可提升30%以上;其次,通過7種權(quán)限靈活設(shè)置、共127種權(quán)限組合,打造業(yè)界領(lǐng)先的內(nèi)核級(jí)權(quán)限管理,提供更高級(jí)別的數(shù)據(jù)保護(hù);此外,借助智能增強(qiáng)型客戶端,無需配置后端網(wǎng)絡(luò),組網(wǎng)更加靈活。

在海量小文件應(yīng)用場景中,宏杉MOFS分布式存儲(chǔ)系統(tǒng)結(jié)合增強(qiáng)型客戶端,采用創(chuàng)新Nest小文件聚合技術(shù),有效解決海量小文件對(duì)IO占用嚴(yán)重的問題,優(yōu)化小文件的數(shù)據(jù)恢復(fù)和檢索速度,全面提升存儲(chǔ)性能。

3、極致可靠

宏杉MOFS分布式存儲(chǔ)系統(tǒng)能從系統(tǒng)級(jí)、節(jié)點(diǎn)級(jí)和權(quán)限級(jí)為用戶提供高達(dá)8個(gè)9的整體可靠性保障,實(shí)現(xiàn)本地?cái)?shù)據(jù)極致可靠。

此外,宏杉MOFS分布式存儲(chǔ)系統(tǒng)還可通過跨節(jié)點(diǎn)的數(shù)據(jù)復(fù)制技術(shù),利用大文件切片多線傳輸,小文件的打包傳輸、加密、壓縮、斷點(diǎn)續(xù)傳和文件校驗(yàn)等豐富的子功能進(jìn)行組合,保證數(shù)據(jù)在惡劣環(huán)境下仍能傳輸?shù)饺轂?zāi)節(jié)點(diǎn),實(shí)現(xiàn)容災(zāi)級(jí)數(shù)據(jù)極致可靠的保護(hù)。

4、數(shù)據(jù)融合

依托高效的多協(xié)議互通技術(shù),宏杉MOFS分布式存儲(chǔ)系統(tǒng)可通過CIFS、NFS、HDFS、S3等多種文件或?qū)ο蟠鎯?chǔ)協(xié)議,同時(shí)訪問在同一個(gè)集群內(nèi)同一個(gè)目錄下的內(nèi)容;并實(shí)現(xiàn)所有非結(jié)構(gòu)化數(shù)據(jù)協(xié)議互通,共享一份數(shù)據(jù)。在大數(shù)據(jù)分析應(yīng)用中,無需生成額外的數(shù)據(jù)副本,直接進(jìn)行數(shù)據(jù)分析和應(yīng)用,極大提升數(shù)據(jù)分析效率,節(jié)省整體TCO。

5、應(yīng)用優(yōu)化

在HPC高性能計(jì)算等應(yīng)用場景中,需要對(duì)同一個(gè)文件的不同位置進(jìn)行并行處理,宏杉科技MOFS分布式存儲(chǔ)系統(tǒng)根據(jù)用戶業(yè)務(wù)進(jìn)行自主研發(fā)和優(yōu)化,創(chuàng)新采用分布式字節(jié)鎖技術(shù),通過增強(qiáng)型協(xié)議客戶端,獲取該文件不同位置的鎖權(quán)限,權(quán)限粒度由傳統(tǒng)分布式存儲(chǔ)的文件級(jí)精確細(xì)化到字節(jié)級(jí),實(shí)現(xiàn)前端多個(gè)客戶端同時(shí)對(duì)同一個(gè)文件的不同位置進(jìn)行并行處理,提升整體處理性能,加速數(shù)據(jù)獲取,提升數(shù)據(jù)價(jià)值。

宏杉MOFS分布式存儲(chǔ)系統(tǒng)

多元化應(yīng)用場景落地

目前,宏杉MOFS分布式存儲(chǔ)系統(tǒng)已廣泛應(yīng)用于高性能計(jì)算、人工智能、大數(shù)據(jù)應(yīng)用等場景之中。在百易存儲(chǔ)研究院、中國計(jì)算機(jī)協(xié)會(huì)、信息存儲(chǔ)專委會(huì)、中國計(jì)算機(jī)行業(yè)協(xié)會(huì)、信息存儲(chǔ)和安全專委會(huì)以及DOIT傳媒聯(lián)合發(fā)布的 《2022分布式存儲(chǔ)市場調(diào)研報(bào)告》中,對(duì)MOFS分布式存儲(chǔ)系統(tǒng)過硬的產(chǎn)品實(shí)力和廣泛的行業(yè)應(yīng)用表示高度認(rèn)可:

在高性能計(jì)算場景中,要充分釋放高性能計(jì)算的算力潛能,需要并行文件系統(tǒng)具備高效、穩(wěn)定、可靠、海量等特性。MOFS 并行文件系統(tǒng)具備高性能、高可靠、高可用和高 IO 吞吐能力,支持全局統(tǒng)一的系統(tǒng)映像和完全 POSIX 兼容的數(shù)據(jù)訪問接口,從而提供數(shù)以萬計(jì)的客戶端系統(tǒng)支持、PB 級(jí)存儲(chǔ)空間和每秒數(shù)百 GB 的吞吐量等強(qiáng)大動(dòng)力,為高性能計(jì)算應(yīng)用提供全新的支撐。宏杉科技MOFS分布式存儲(chǔ)系統(tǒng)在教育科研、交通、政府、醫(yī)療大數(shù)據(jù)、企業(yè)等行業(yè)的多樣化高性能場景中均已實(shí)現(xiàn)落地,為用戶業(yè)務(wù)提供高效可靠的數(shù)據(jù)保障,獲得用戶高度認(rèn)可。

結(jié)束語

作為一站式數(shù)據(jù)存儲(chǔ)專家,宏杉科技擁有SAN、分布式、備份、云與超融合等全存儲(chǔ)產(chǎn)品線,具備涵蓋全產(chǎn)品、全方案、全服務(wù)的一站式數(shù)據(jù)存儲(chǔ)能力。未來,宏杉科技將充分發(fā)揮研發(fā)創(chuàng)新能力,持續(xù)優(yōu)化升級(jí)宏杉分布式存儲(chǔ),進(jìn)一步激活數(shù)據(jù)價(jià)值,助力千行百業(yè)從容應(yīng)對(duì)海量多元化數(shù)據(jù)挑戰(zhàn)。

分享到

xiesc

相關(guān)推薦