整套解決方案以曙光XData大數(shù)據(jù)一體機系統(tǒng)作為支撐,XData 大數(shù)據(jù)一體機由 1個管理節(jié)點, 2個namenode,42個datanode組成,存儲接近600TB容量數(shù)據(jù),隨著業(yè)務(wù)數(shù)據(jù)量的增加,系統(tǒng)通過簡單擴展硬件的方式保證符合業(yè)務(wù)對容量和性能的要求。
曙光存儲產(chǎn)品總監(jiān)惠潤海表示:“由于業(yè)務(wù)復雜,數(shù)據(jù)格式多變,非結(jié)構(gòu)數(shù)據(jù)如票據(jù)影像大量存在,對這些數(shù)據(jù)進行統(tǒng)一存儲分析管理成為一項重要的需求。曙光大數(shù)據(jù)解決方案立足于基礎(chǔ)平臺建設(shè),通過SQL連接器和常用BI報表工具進行集成。此外,系統(tǒng)還可以迅速完成結(jié)構(gòu)化數(shù)據(jù)急速導入,完全融入數(shù)據(jù)生命周期管理。”在解決方案部署之后,實現(xiàn)了以下部署效果:
Ø 高可靠性:系統(tǒng)全年7×24小時無間斷服務(wù)。
Ø 高可用性:服務(wù)器故障情況下,系統(tǒng)仍能穩(wěn)定工作,并保證數(shù)據(jù)完整性和可用性。
Ø 靈活擴展:通過增加存儲設(shè)備,容量可以平滑的擴展,性能可以同比提高。當性能(并發(fā)訪問、IO帶寬)不足時,簡單通過擴展硬件即可同比地擴展系統(tǒng)的總體性能。
Ø 高性能:提供每秒數(shù)十萬的記錄導入速度,百億級規(guī)模記錄隨機點查詢秒級返回。
Ø 低成本:在大規(guī)模部署時,該系統(tǒng)有總體價格優(yōu)勢。
Ø 易開發(fā):系統(tǒng)對外呈現(xiàn)單一入口,并提供類JDBC和SQL訪問接口,便于業(yè)務(wù)的開發(fā)及移植。
Ø 易管理:提供圖形化管理界面,方便用戶對系統(tǒng)進行管理和監(jiān)控。
在應用了曙光XData大數(shù)據(jù)一體機系統(tǒng)之后,滿足了系統(tǒng)對于并發(fā)用戶數(shù)和性能的要求,能夠支撐銀行歷史數(shù)據(jù)查詢和分析業(yè)務(wù),為下一步的業(yè)務(wù)拓展奠定了基礎(chǔ)。相關(guān)負責人指出:“在曙光的幫助下,我們建立了相對完善的大數(shù)據(jù)系統(tǒng),并解決了部署、業(yè)務(wù)移植開發(fā)等技術(shù)難題,跨過了應用門檻。為公司盤活數(shù)據(jù)資產(chǎn)、搶占新技術(shù)的制高點提供了支撐,推動了業(yè)務(wù)創(chuàng)新和持續(xù)不斷的發(fā)展。”