紅星路的視頻監(jiān)控設(shè)備采集的數(shù)據(jù)以1MB以下的圖片為主,據(jù)統(tǒng)計(jì),每個(gè)視頻監(jiān)控設(shè)備每天需要采集圖片數(shù)據(jù)近1.2萬(wàn)張左右,而紅星路上總共有數(shù)百個(gè)視頻監(jiān)控設(shè)備,每天需要存儲(chǔ)的數(shù)據(jù)量就達(dá)到TB級(jí)別,再加上交通系統(tǒng)往往會(huì)存儲(chǔ)相當(dāng)長(zhǎng)時(shí)期內(nèi)的歷史數(shù)據(jù)來(lái)進(jìn)行查證、回溯,對(duì)當(dāng)前存儲(chǔ)系統(tǒng)容量帶來(lái)壓力。
更大的挑戰(zhàn)在于小文件的存儲(chǔ)性能問(wèn)題,這些海量小文件在寫(xiě)入時(shí),每個(gè)小文件存儲(chǔ)都會(huì)執(zhí)行一次全寫(xiě)流程,操作頻繁,使得分布式文件系統(tǒng)的磁盤(pán)壓力劇增。其不僅會(huì)由于有用數(shù)據(jù)占獲取數(shù)據(jù)量比例過(guò)低,導(dǎo)致內(nèi)存、帶寬的浪費(fèi),而且,當(dāng)用戶(hù)讀取大量小文件時(shí),首先選擇與元數(shù)據(jù)交互,當(dāng)訪(fǎng)問(wèn)過(guò)于集中、信息交互過(guò)于頻繁時(shí),將產(chǎn)生顯而易見(jiàn)的延遲。
IHS Markit發(fā)布的《2018全球視頻監(jiān)控信息服務(wù)報(bào)告》還顯示,基于深度學(xué)習(xí)的視頻監(jiān)控存儲(chǔ)/服務(wù)器設(shè)備(DLRS)市場(chǎng)將以平均每年62.7%的復(fù)合增長(zhǎng)率高速增長(zhǎng),這帶來(lái)了對(duì)于小文件讀寫(xiě)性能的更高要求,這也使得對(duì)于小文件存儲(chǔ)的優(yōu)化成為視頻監(jiān)控行業(yè)的突出需求。
100% 的性能提升 浪潮AS13000 實(shí)現(xiàn)高效存儲(chǔ)
針對(duì)成都市紅星路智能交通系統(tǒng)碰到的存儲(chǔ)難題,浪潮提供了軟件定義存儲(chǔ) AS13000 的系統(tǒng),AS13000 該可以支持 480PB 以上的存儲(chǔ)容量,整體支持十億級(jí)的文件數(shù)量,可以有效應(yīng)對(duì)未來(lái)5-10年內(nèi),成都市紅星路視頻監(jiān)控?cái)?shù)據(jù)的快速增長(zhǎng)。
尤為重要的是,AS13000 針對(duì)紅星路視頻監(jiān)控以小文件存儲(chǔ)為主的應(yīng)用場(chǎng)景,對(duì)于小文件存儲(chǔ)性能進(jìn)行了優(yōu)化,這些優(yōu)化技術(shù)包括:面向全局存儲(chǔ)資源的條帶化,確保應(yīng)用數(shù)據(jù)的并發(fā)寫(xiě)入、讀取;同時(shí),AS13000還通過(guò)小文件聚合技術(shù),將碎片化小文件聚合成一個(gè)大文件,在數(shù)據(jù)讀寫(xiě)時(shí)提前讀取相關(guān)數(shù)據(jù),提高緩存命中率;提高磁盤(pán)使用率,讀小文件時(shí)將所在對(duì)象讀入緩存,提高讀命中率、縮短讀I/O路徑。通過(guò)這些技術(shù),紅星路視頻監(jiān)控存儲(chǔ)系統(tǒng),實(shí)現(xiàn)小文件讀寫(xiě)性能提高100%,讀集群性能提高50%。
除了極大的優(yōu)化小文件的存儲(chǔ)性能,浪潮軟件定義存儲(chǔ)解決方案在擴(kuò)展性、可用性、節(jié)能性等方面表現(xiàn)突出。在擴(kuò)展性方面,AS13000 節(jié)點(diǎn)可根據(jù)視頻監(jiān)控?cái)?shù)據(jù)增長(zhǎng)的需求靈活擴(kuò)展,隨著節(jié)點(diǎn)數(shù)量的增加,存儲(chǔ)容量與性能都會(huì)得到高效的擴(kuò)展;在可用性方面,解決方案采用4+2的糾刪冗余,可以容許兩個(gè)節(jié)點(diǎn)同時(shí)故障,或者任意兩個(gè)節(jié)點(diǎn)同時(shí)各壞一塊磁盤(pán)的故障。
讓紅星路成為智能與文明之路
在浪潮軟件定義存儲(chǔ) AS13000 解決方案部署之后,紅星路視頻監(jiān)控系統(tǒng)得到了堅(jiān)實(shí)的存儲(chǔ)能力支撐,可以放心的投入到視頻監(jiān)控設(shè)備擴(kuò)容、視頻超清化改造、智能視覺(jué)識(shí)別等智能交通系統(tǒng)的建設(shè)中,將紅星路打造成為文明駕駛之路與智慧之路。除了應(yīng)用于紅星路的存儲(chǔ)系統(tǒng)建設(shè)之中,浪潮AS13000存儲(chǔ)系統(tǒng)還在成都三環(huán)路、成彭高速、東海平安城市、山東臨沂高新區(qū)等視頻監(jiān)控項(xiàng)目中實(shí)現(xiàn)了PB級(jí)大規(guī)模部署,提高了城市管理水平,為經(jīng)濟(jì)社會(huì)發(fā)展提供有力保障。
聚焦新數(shù)據(jù)時(shí)代,浪潮在軟件定義存儲(chǔ)領(lǐng)域定義了云計(jì)算、大數(shù)據(jù)、人工智能、高性能、視頻監(jiān)控、媒資、通用應(yīng)用七大一級(jí)場(chǎng)景和超過(guò)上百個(gè)二級(jí)應(yīng)用場(chǎng)景,針對(duì)場(chǎng)景開(kāi)展存儲(chǔ)系統(tǒng)深度優(yōu)化,以“開(kāi)放、融合、智能”的軟件定義存儲(chǔ)設(shè)計(jì)理念和特性為橋梁,將應(yīng)用與技術(shù)通過(guò)浪潮軟件定義存儲(chǔ)產(chǎn)品上實(shí)現(xiàn)對(duì)接。2018年,浪潮存儲(chǔ)入圍Gartner分布式存儲(chǔ)魔力象限,成為新數(shù)據(jù)時(shí)代的數(shù)據(jù)與介質(zhì)的連接者。在行業(yè)用戶(hù)向過(guò)智能應(yīng)用演進(jìn)的過(guò)程中,浪潮存儲(chǔ)提供了極致容量、迅捷性能、智能管理的數(shù)據(jù)存儲(chǔ)解決方案,幫助用戶(hù)快速存儲(chǔ)、處理海量數(shù)據(jù),加速了業(yè)務(wù)創(chuàng)新步伐,進(jìn)一步提升了業(yè)務(wù)效率。