不同于很多大型央企,組建于2014年的中國鐵塔公司的信息化系統(tǒng)始建之初就構(gòu)建在天翼云、華為云和聯(lián)通云等云服務(wù)的基礎(chǔ)上,生來就是云公司,沒有很多央企傳統(tǒng)應(yīng)用系統(tǒng)的包袱。盡管如此,應(yīng)用中他們也遭遇了數(shù)據(jù)及時(shí)交付的難題。
數(shù)據(jù)交付效率難題
中國鐵塔實(shí)施的是”一體兩翼”的策略,以面向行業(yè)內(nèi)塔類與室分業(yè)務(wù)為”一體”,以基于站址資源社會(huì)化共享業(yè)務(wù)、面向社會(huì)專業(yè)化備電保障服務(wù)為”兩翼”,如今已經(jīng)發(fā)展培育了多點(diǎn)支撐的業(yè)務(wù)增長格局。
中國鐵塔根據(jù)需要,目前已經(jīng)構(gòu)建了大大小小130多個(gè)信息化應(yīng)用系統(tǒng),涉及5000多臺(tái)虛擬機(jī)以及大約7PB數(shù)據(jù)存儲(chǔ)容量。
這100多個(gè)包括生產(chǎn)系統(tǒng)、準(zhǔn)生產(chǎn)系統(tǒng)、開發(fā)驗(yàn)收以及測試系統(tǒng)。根據(jù)需要,以每3個(gè)月左右為周期,定期要向開發(fā)/測試系統(tǒng)提交生產(chǎn)數(shù)據(jù),每一次數(shù)據(jù)交付周期,都讓專業(yè)技術(shù)人員大費(fèi)周章。
據(jù)了解,為了盡可能減少對生產(chǎn)系統(tǒng)性能的干擾,傳統(tǒng)獲取數(shù)據(jù)的方式,要借助準(zhǔn)生產(chǎn)系統(tǒng)恢復(fù)備份數(shù)據(jù),然后提交生產(chǎn)/測試系統(tǒng)使用。這個(gè)過程主要依靠手工完成,效率不高,大約需要1個(gè)月左右時(shí)間,加班加點(diǎn)才能完成,由于依靠備份數(shù)據(jù),這些數(shù)據(jù)不能完全貼合業(yè)務(wù)的實(shí)時(shí)狀況。
有數(shù)據(jù)顯示:一份生產(chǎn)系統(tǒng)數(shù)據(jù),在企業(yè)內(nèi)部往往會(huì)有10多個(gè)數(shù)據(jù)副本,供容災(zāi)、測試、開發(fā)以及數(shù)據(jù)分析等使用。對這些副本數(shù)據(jù)缺乏行之有效管理,存在很多安全管理的漏洞,很多泄密事件系由此產(chǎn)生。中國鐵塔沒有那么多數(shù)據(jù)副本,但是開發(fā)/測試\驗(yàn)收對數(shù)據(jù)還是有周期性需求,所涉及系統(tǒng)眾多,因此存在數(shù)據(jù)及時(shí)交付的問題。
經(jīng)過多方技術(shù)調(diào)研,中國鐵塔引入了上海上訊ADM (Agile Data Management,敏捷數(shù)據(jù)管理平臺(tái))。采用新的系統(tǒng),原本需要6人1月的工作量,最多一周就可完成,有時(shí)候2天就可完成工作量,數(shù)據(jù)實(shí)時(shí)性也得到保障,難題迎刃而解,開發(fā)/測試部門滿意度顯著提升。
揭秘ADM系統(tǒng)
讓人交口稱贊ADM是怎樣一個(gè)系統(tǒng)呢?
ADM是一套綜合數(shù)據(jù)治理解決方案,它采用數(shù)據(jù)庫虛擬化等核心技術(shù),保障業(yè)務(wù)數(shù)據(jù)高效使用、安全管控以及合規(guī)審計(jì),由生產(chǎn)數(shù)據(jù)管理、備份數(shù)據(jù)管理、敏感數(shù)據(jù)管理、測試數(shù)據(jù)管理、數(shù)據(jù)訪問管理五部分組成,可以解決數(shù)據(jù)備份與恢復(fù)、備份數(shù)據(jù)自動(dòng)化恢復(fù)與有效性驗(yàn)證、靜態(tài)數(shù)據(jù)脫敏、測試數(shù)據(jù)多副本快速交付、數(shù)據(jù)庫權(quán)限訪問控制與動(dòng)態(tài)脫敏以及多場景融合下的實(shí)際問題。
在中國鐵塔案例中大顯身手的就是測試數(shù)據(jù)多副本快速交付系統(tǒng),所謂拷貝數(shù)據(jù)管理(CDM)系統(tǒng),它通過數(shù)據(jù)庫虛擬化技術(shù)獲取、存儲(chǔ)與生成生產(chǎn)數(shù)據(jù)副本,借助原始數(shù)據(jù)存儲(chǔ),虛擬數(shù)據(jù)庫掛載等技術(shù),實(shí)現(xiàn)數(shù)據(jù)快速交付、集中管控,以及中間數(shù)據(jù)存儲(chǔ)、流轉(zhuǎn)等目標(biāo)。
需要格外關(guān)注的是,CDM系統(tǒng)不僅交付數(shù)據(jù),同時(shí)也交付了一套完整存儲(chǔ)系統(tǒng),供開發(fā)/測試等業(yè)務(wù)部門使用,實(shí)現(xiàn)了數(shù)據(jù)集中管控,從而擺脫了單純數(shù)據(jù)拷貝引發(fā)的失控問題。
據(jù)了解,CDM提交的這個(gè)存儲(chǔ)系統(tǒng),內(nèi)置了獨(dú)有的壓縮比高達(dá)4:1的高效壓縮存儲(chǔ)池,存儲(chǔ)即壓縮,數(shù)據(jù)存儲(chǔ)成本效率高。要知道傳統(tǒng)數(shù)據(jù)交付,企業(yè)也需要占用磁盤等存儲(chǔ)空間,副本越多,容量越大,越分散,這同樣占用企業(yè)資金。
如今,透過集中管控的存儲(chǔ)系統(tǒng),上海上訊ADM專利技術(shù)能夠做到一份基礎(chǔ)數(shù)據(jù)源,應(yīng)對多種業(yè)務(wù)系統(tǒng)的需要,ADM可快速拉起多份虛擬數(shù)據(jù)庫供不同系統(tǒng)使用,彼此之間可獨(dú)立讀/寫操作,其內(nèi)置的智能讀/寫緩存機(jī)制,不僅解決系統(tǒng)并行操作使用的壓力,同時(shí)保障數(shù)據(jù)完整和安全使用。
通常情況下,ADM可將TB量級數(shù)據(jù)庫在分鐘級拉起,滿足開發(fā)/測試、查詢分析、合規(guī)審計(jì)、應(yīng)急容災(zāi)等業(yè)務(wù)的需要。
由于采用了集中式數(shù)據(jù)存儲(chǔ)系統(tǒng),在數(shù)據(jù)管理上,ADM就能夠提供可視化虛擬數(shù)據(jù)庫拓?fù)浣Y(jié)構(gòu)圖,對系統(tǒng)全局?jǐn)?shù)據(jù)使用關(guān)系提供預(yù)覽,讓測試數(shù)據(jù)的組織機(jī)構(gòu)、優(yōu)化測試數(shù)據(jù)的資源分配等一目了然;ADM提供的虛擬數(shù)據(jù)庫資源分組管理,可實(shí)現(xiàn)同組人員數(shù)據(jù)操作權(quán)限共享、測試數(shù)據(jù)庫分類管理等功能;其測試數(shù)據(jù)版本管理,可跟蹤數(shù)據(jù)流向,識(shí)別虛擬數(shù)據(jù)庫使用狀態(tài),實(shí)時(shí)拍攝快照,實(shí)現(xiàn)數(shù)據(jù)版本的保留,數(shù)據(jù)的回退或切換,讓數(shù)據(jù)版本管理更加靈活。
冰山一角而已
在中國鐵塔案例應(yīng)用中,上海上訊ADM旗開得勝,馬到成功。但是青出于藍(lán)勝于藍(lán),這不過是小試牛刀,冰山一角而已,ADM的驚喜遠(yuǎn)非如此。
CDM能夠解決的不僅是數(shù)據(jù)交付,也具有數(shù)據(jù)備份與恢復(fù)、備份數(shù)據(jù)自動(dòng)化恢復(fù)與有效性驗(yàn)證、靜態(tài)數(shù)據(jù)脫敏、以及數(shù)據(jù)庫權(quán)限訪問控制與動(dòng)態(tài)脫敏等多種功能,依托大數(shù)據(jù)和人工智能,未來也可以增加數(shù)據(jù)分析的功能,為數(shù)據(jù)業(yè)務(wù)創(chuàng)新提供支持!
在傳統(tǒng)信息化系統(tǒng)布局中,生產(chǎn)系統(tǒng)、辦公管理等核心系統(tǒng)之外,容災(zāi)備份、開發(fā)/測試,以及數(shù)據(jù)分析等屬于輔助系統(tǒng),企業(yè)根據(jù)實(shí)際情況分散建設(shè),缺乏全局統(tǒng)籌規(guī)劃和管理。但是隨著數(shù)字化轉(zhuǎn)型,數(shù)字經(jīng)濟(jì)的備受關(guān)注,輔助系統(tǒng)的重要性不斷提升。
統(tǒng)籌規(guī)劃輔助業(yè)務(wù)系統(tǒng)的技術(shù)也已經(jīng)成熟,所謂第二存儲(chǔ),簡單說就是透過一個(gè)集中式的系統(tǒng),同時(shí)滿足容災(zāi)備份、開發(fā)、測試和數(shù)據(jù)分析等輔助業(yè)務(wù)系統(tǒng)的需求,變分散為集中,集中調(diào)度,集中管理。上海上訊ADM就是其中的佼佼者之一。
全面推廣和使用ADM可能嗎?
推廣ADM的難題不在技術(shù)上,技術(shù)已經(jīng)非常成熟,難在觀念上,需要突破人的固有觀念。
長久以來,習(xí)慣了現(xiàn)有的應(yīng)用方式,以容災(zāi)為例,已經(jīng)習(xí)慣用備份、數(shù)據(jù)復(fù)制的方式來實(shí)現(xiàn)容災(zāi),也有行業(yè)等保條例的要求。很多業(yè)務(wù)系統(tǒng)也是按照這個(gè)節(jié)奏逐步發(fā)展成熟?,F(xiàn)在需要我們改變這種方式,挑戰(zhàn)就是顯而易見的。
不求有功但求無過的禁錮,讓我們難以突破。
但是這種突破帶來的價(jià)值是顯而易見的,無論容災(zāi)保護(hù)速度、水平,還是DevOps、數(shù)據(jù)創(chuàng)新與分析,AI應(yīng)用,完全架構(gòu)在一個(gè)統(tǒng)一的數(shù)據(jù)架構(gòu)基礎(chǔ)上集中管理,安全性、效率完全得到保障。
突破也不意味著推動(dòng)重建,以一個(gè)問題作為突破口,由點(diǎn)到面,逐步發(fā)展,類似農(nóng)村包圍城市的道路,也不是一種最明智的選擇!
無論如何,ADM的新機(jī)遇已經(jīng)到來。
小結(jié)
數(shù)字經(jīng)濟(jì)時(shí)代,圍繞著數(shù)據(jù)這個(gè)核心創(chuàng)新業(yè)務(wù)發(fā)展,必將成為發(fā)展的關(guān)鍵環(huán)節(jié)。新時(shí)期,不僅需要新的技術(shù)方法,更需要視野和勇氣!數(shù)據(jù)交付不過是冰山一角,還有更多的金礦有待發(fā)掘,這是一個(gè)數(shù)據(jù)創(chuàng)新的時(shí)代!