新華社多媒體數(shù)據(jù)庫匯集新華社文字、圖片、圖表、音視頻、報刊等全部資源和社會上其他有價值的新聞信息資源,是國內(nèi)最大規(guī)模的多媒體、多文種新聞信息綜合性數(shù)據(jù)庫。文字系統(tǒng)不僅收錄了新華社全部原創(chuàng)新聞信息,還匯集了大量的海內(nèi)外媒體數(shù)據(jù)資源。通過整理加工形成的數(shù)百個特色鮮明的新聞信息產(chǎn)品,以其豐富的內(nèi)容為廣大用戶提供誠信的服務(wù)。


    從2002年開始建設(shè)的多媒體數(shù)據(jù)庫及其應(yīng)用系統(tǒng),目標(biāo)是把多媒體數(shù)據(jù)庫建成新華社統(tǒng)一的數(shù)據(jù)存儲和管理平臺,全社的采編系統(tǒng)、辦公信息化系統(tǒng)、發(fā)布系統(tǒng)、通信供稿系統(tǒng)等都要掛接到這個平臺上,并成為統(tǒng)一平臺的應(yīng)用系統(tǒng)。


    報刊數(shù)據(jù)庫建設(shè)項目是多媒體數(shù)據(jù)庫建設(shè)工程中重要的項目之一,目標(biāo)是充分發(fā)揮新華社??國家通訊社作用,豐富新華社的新聞信息資源,為落地統(tǒng)計、報刊管理、新聞監(jiān)督等應(yīng)用提供數(shù)據(jù)基礎(chǔ)。為了滿足這些應(yīng)用,新華社進(jìn)一步擴容了存儲系統(tǒng),存儲報刊數(shù)據(jù)庫的海量報刊版面數(shù)據(jù)。


    系統(tǒng)需求


    新華社數(shù)據(jù)中心的報刊數(shù)據(jù)庫和多媒體數(shù)據(jù)庫,是全社所有業(yè)務(wù)系統(tǒng)集中進(jìn)行數(shù)據(jù)存儲、數(shù)據(jù)交換的平臺。通過多媒體數(shù)據(jù)庫和報刊數(shù)據(jù)庫的建設(shè),把相關(guān)應(yīng)用系統(tǒng)和多媒體數(shù)據(jù)庫實現(xiàn)關(guān)聯(lián),形成數(shù)據(jù)庫和應(yīng)用系統(tǒng)之間的合理體系結(jié)構(gòu),充分發(fā)揮數(shù)據(jù)中心的作用。


新華社目前在線數(shù)據(jù)近30TB,近線數(shù)據(jù)和離線數(shù)據(jù)超過200TB。為了能夠很好的管理這些海量數(shù)據(jù),同時全面提升系統(tǒng)的數(shù)據(jù)存儲和數(shù)據(jù)交換的性能,需要對現(xiàn)有主機及存儲設(shè)備進(jìn)行全面擴容,并對主機、存儲、網(wǎng)絡(luò)、數(shù)據(jù)庫及應(yīng)用等各個方面進(jìn)行優(yōu)化。


    解決方案


  




    硬件系統(tǒng)擴容


    方案采用2臺HP StorageWork Core Switch 2/64光纖交換機和2臺EMC Connectrix DS16交換機集聯(lián),搭建了冗余的SAN鏈路,并得到了超過100個SAN接入端口,從而滿足SAN設(shè)備逐漸增多的要求,也為進(jìn)一步提高性能打下基礎(chǔ)。


    SUN E10K上的2個Domain都在現(xiàn)有配置基礎(chǔ)上擴充到20顆CPU和20GB內(nèi)存,此外再擴充一個Domain,配置為4 CPU,4GB內(nèi)存。總共需要增加24顆CPU和24GB內(nèi)存。


    磁盤存儲系統(tǒng)采用HP StorageWorks Disk Array xp1024系統(tǒng)和EMC Symmetrix磁盤系統(tǒng)。磁盤存儲系統(tǒng)配置了專業(yè)的存儲管理軟件,以全面實現(xiàn)新華社要求的各項管理功能。


    SAN環(huán)境中共享文件的實現(xiàn)


    方案設(shè)計利用現(xiàn)有的VERITAS File System和VERITAS Cluster Server作為SAN環(huán)境中共享文件管理的基礎(chǔ),在其上增加VERITAS Cluster File System和VERITAS Cluster Volume Manager等集成管理軟件系統(tǒng),使多媒體數(shù)據(jù)庫系統(tǒng)稱為SAN下的共享文件系統(tǒng),從而真正實現(xiàn)業(yè)務(wù)系統(tǒng)的分離和數(shù)據(jù)共享,以實現(xiàn)提高系統(tǒng)性能的目的,從而使數(shù)據(jù)庫系統(tǒng)真正運行在群集環(huán)境下。


SERVER-FREE備份和磁帶異地容災(zāi)的實現(xiàn)


    備份系統(tǒng)擴容的主要的工作是將新增的報刊服務(wù)器系統(tǒng)納入到原有多媒介體數(shù)據(jù)庫系統(tǒng)的備份系統(tǒng)中,實現(xiàn)對這報刊應(yīng)用服務(wù)器的LAN-Free備份。本次方案通過增加NetBackup的功能模塊的方式,進(jìn)一步完善備份方案,實現(xiàn)SERVER-FREE的備份。方案依照原有的VERITAS NetBackup備份軟件的架構(gòu)進(jìn)行設(shè)計,并參照目前多媒體數(shù)據(jù)庫系統(tǒng)的備份策略,設(shè)計了報刊數(shù)據(jù)庫系統(tǒng)的備份策略。備份的擴容帶來了對存儲容量需求上的增加,磁帶庫系統(tǒng)也進(jìn)行了擴容。


    另外,利用NetBackup Vault模塊,實現(xiàn)備份磁帶的復(fù)制和異地保存。


    應(yīng)用實施效果


    同有飛驥公司依照新華社的要求,作為高端存儲產(chǎn)品的綜合集成商,滿足了新華社對系統(tǒng)擴容的需求;同時,本著對用戶負(fù)責(zé)的態(tài)度,依賴長期積累的大型存儲和數(shù)據(jù)庫系統(tǒng)性能優(yōu)化方面的經(jīng)驗,在系統(tǒng)的實際性能優(yōu)化方面,進(jìn)行了詳細(xì)的分析和論述,從而在最大程度上提升了新華社數(shù)據(jù)中心的系統(tǒng)性能,使系統(tǒng)最終具有了對所有業(yè)務(wù)系統(tǒng)數(shù)據(jù)進(jìn)行集中存儲和數(shù)據(jù)交換的能力。

分享到

多易

相關(guān)推薦