在圓桌對話環(huán)節(jié),浪潮金融存儲產(chǎn)品總監(jiān)張刃,平安銀行分布式數(shù)據(jù)庫技術負責人李中原,諾致科技創(chuàng)始人、原上海華瑞銀行科技部總經(jīng)理及互聯(lián)網(wǎng)業(yè)務總部總監(jiān)鄺謐、英方軟件華東一區(qū)銷售總監(jiān)李光等嘉賓相聚一起,共話“數(shù)據(jù)金融如何引領業(yè)務創(chuàng)新”。
本次對話由百易傳媒(DOIT)總編宋家雨主持。
宋家雨:今天對話主題放到了數(shù)據(jù)金融的場景下,在金融這個特定的領域里,數(shù)據(jù)如何促進金融業(yè)務創(chuàng)新的。
先請諾致科技創(chuàng)始人、原上海華瑞銀行科技部總經(jīng)理及互聯(lián)網(wǎng)業(yè)務總部總監(jiān)鄺謐談一談,從數(shù)據(jù)驅(qū)動金融創(chuàng)新角度,目前關注的方向是什么。
鄺謐:各位好,我很榮幸參加到這個峰會。我之前在IBM負責大型機,那是典型的集中架構,到做大集中,到后來直連存儲和SaaS,一直到現(xiàn)在分布式。
大家可能注意到,金融都在講場景金融,場景金融就是要跟金融產(chǎn)品結合,跟外部溝通,涉及到大量的數(shù)據(jù)交換,而且現(xiàn)在大家已經(jīng)嘗到甜頭了。
最近一段時間我關注到有一個領域是非常熱的,就是隱私計算。很容易理解,要把數(shù)據(jù)共享,就涉及到如何保證數(shù)據(jù)安全隱私。過去前幾年比較粗放,沒有那么嚴謹,現(xiàn)在已經(jīng)認識到,并且看到了趨勢。
我前面也看到幾位嘉賓演講,包括和區(qū)塊鏈的結合,這方面會以什么形式結束,目前來說看不到,但是大家都做了不少探索,所以我很期待。
宋家雨:這種海量很多是非結構化數(shù)據(jù),它還需要大量存儲容量,數(shù)據(jù)的積累一定會給業(yè)務帶來新的變化。
接下來把問題給平安銀行分布式數(shù)據(jù)庫技術負責人李中原。平安銀行我們熟悉的是保險,您現(xiàn)在做分布式數(shù)據(jù)庫。如果把視角放得大一點,放在數(shù)據(jù)金融創(chuàng)新角度,分布式數(shù)據(jù)庫在里面所承擔的角色是什么?僅僅是為了像以前講去IOE,還是為了數(shù)據(jù)創(chuàng)新做數(shù)據(jù)方面的準備?
李中原:這個問題多是方面的。從數(shù)據(jù)結合今天話題,可從這幾個方面來理解。
作為我的專業(yè),我可能每天都會跟數(shù)據(jù)打交道,另一方面我也和它們很陌生。為什么陌生呢?因為它們隨時可能跟我翻臉,這其實是所有做這個行業(yè)人的通病。
為了避免它們“翻臉”,我們要提供很多技術的保障,最簡單的做法就是冗余。從傳統(tǒng)的方案來講,做SaaS,擔心Saas也不夠,我現(xiàn)在個人研究的方向就是分布式數(shù)據(jù)庫,這個可能是在底層硬件之上,從另外一個層次,即從數(shù)據(jù)和應用層面做冗余,最終目的就是保證數(shù)據(jù)的一致性管理和可用性。
在基礎需求之上,我們對應用,對數(shù)據(jù)以及對存儲有更多的需求,在座的各位都可能會有這樣的感觸。簡單舉幾個例子。
在存儲的和系統(tǒng)穩(wěn)定性之間,有平衡的,怎么來說呢?我的使用率如果要求過高,那系統(tǒng)出現(xiàn)故障的情形以及引發(fā)變更的風險次數(shù)也會相應的增加,怎么實現(xiàn)這樣的平衡?從銀行現(xiàn)在角度來講,可能寧愿犧牲一定的使用率也要保證它的穩(wěn)定性。當然,使用率并不是沒有要求;使用率稍稍的提升,也許對整個組織來講,它在資金方面的節(jié)省可能是以千萬或者以億為計量的。
當今,互聯(lián)網(wǎng)發(fā)展非???,業(yè)務指出對存儲需求并不那么高,隨著業(yè)務的增長數(shù)據(jù)量存儲需求越來越高。從數(shù)據(jù)庫層面,換一個存儲,整個過程可能對于核心的系統(tǒng)會持續(xù)很長時間才能完成這樣的方案。
另外,有的系統(tǒng)負載不一定是很均勻的,有可能日常的時候使用很低,有的使用又非常高,批量的系統(tǒng)可能每天就一個小時的IO非常集中,需要很高性能,過了這個時間以后只需要很普通的存儲就可以了。如何用高性能的存儲,在它高性能的時間,提供相應的服務,總結來看,一個是能夠隨需的分配存儲,另一個外是可以按需分配性能,這對我們來說是很好的解決方案。
宋家雨:對金融行業(yè)來講,可靠性、穩(wěn)定性是第一位的存儲需求,所以一定要在企業(yè)應用方面做可靠性、穩(wěn)定性的保障。提到隨著業(yè)務發(fā)展的彈性問題,存儲要保證效率的同時,要隨著業(yè)務發(fā)展,提供彈性,這個彈性是不是跟云,以及目前的預算有類似。無論是在數(shù)據(jù)的可靠性、穩(wěn)定性,還是在數(shù)據(jù)的組織準備,有很多需要做的工作和需要從架構設計上考慮很多問題。
如何滿足特定的場景下對存儲數(shù)據(jù)處理,以及數(shù)據(jù)的共享,請浪潮金融存儲產(chǎn)品總監(jiān)張刃分享一下,金融行業(yè)的數(shù)據(jù)共享,存儲應該做哪些針對性的工作?
張刃:今天開場提到了一個詞——“后疫情”時代,這次疫情給所有業(yè)務帶來很大變化。
以前我們辦業(yè)務要去銀行柜臺,現(xiàn)在在手機終端就辦了。曾經(jīng)我有一次和銀行客戶聊天,他說數(shù)據(jù)像大象一樣,前臺軟件可能是酒店的前臺,大象那么大一定不可能放在酒店,要放在倉庫里。我來到前臺問,看一下大象,前臺肯定是給一個條,這個條可能是一個地址,這個條可能有有很多需求,如果是手機、電腦業(yè)務,一個固定的終端辦理。如果是網(wǎng)頁,會訓練三分鐘過期、七分鐘過期的常用密碼方式,結合越緊密業(yè)務落地越好,更好能夠協(xié)調(diào)。
這種情況下,我們發(fā)現(xiàn)客戶的變化導致文件積累,文件樣本量增加從原來幾萬個,變成現(xiàn)在我們看到是幾億、十幾億文件級別。
平時電腦文件夾可以明確感覺,如果文件夾幾萬、十幾萬、上百萬的文件,打開速度都一樣的,那幾十億的文件,如何查閱處理,還要跟大平臺進行共享,還要提供其他的業(yè)務,這個時候如何能夠各自職責,首先面臨的是如何從原來數(shù)據(jù)在文件系統(tǒng)上但對象系統(tǒng)。首先就需要做定制化,讓它和對象存儲直接共享,這樣和前臺的軟件之間搭配好,等于減少了大量拷貝或者遷移的時間和資源。
剛才提到大數(shù)據(jù)平臺,提到各種資源的互相利用,我們盡量能夠讓平臺支持多合一,在同一個資源池里調(diào)度,這個過程會很復雜,自然帶來管理的復雜,所以我們要分三個方向打造一個管理的解決方案:
一是能夠協(xié)調(diào)各種各樣的資源,在數(shù)據(jù)來了以后進行管理,這個數(shù)據(jù)就是銀行的資產(chǎn)。二是數(shù)據(jù)資產(chǎn)要有一個展現(xiàn)。當這塊兒業(yè)務已經(jīng)不再是熱的,不再是生產(chǎn)的情況下,如何卸載相應的資源,或者應用到其他地方用,把資源讓存儲快速布局再加入到群體當中。最后一個核心的問題,就是把所有業(yè)務調(diào)試好了,最后大量并發(fā)以后,延時導致后續(xù)業(yè)務受到?jīng)_擊是不希望的,那么是用全閃還是傲騰?以上是我的觀點,數(shù)據(jù)的金融數(shù)字化改變,引領了存儲技術比較,存儲技術要和業(yè)務結合,才能適應這個場景。
宋家雨:大象的比喻特別恰當,后臺里面有我們大量的數(shù)據(jù),可能大象也不是一頭,有各種各樣的類型,怎么可以根據(jù)前端業(yè)務需求應用到所需要的數(shù)據(jù)提,這些都在業(yè)務創(chuàng)新中需要考慮的問題。
英方的專長是數(shù)據(jù)復制,剛才提到金融應用場景里快速做數(shù)據(jù)響應,具體什么樣的復制技術可派到什么樣的用場呢?請英方軟件華東一區(qū)銷售總監(jiān)李光做個分享。
李光:英方在數(shù)據(jù)海量增長過程中,價值點在數(shù)據(jù)的備份,尤其金融行業(yè)重要的行業(yè)。隨著時代的發(fā)展,海量數(shù)據(jù)各種數(shù)據(jù)頻繁訪問,英方軟件推出了一個產(chǎn)品,叫英方。英方維度是數(shù)據(jù)容災,自身定義是基礎數(shù)據(jù)的復制。英方軟件從動態(tài)定義的非結構化存儲提供基于硬件以及應用以下基礎數(shù)據(jù)塊以上的平臺,幫助很多業(yè)務場景尤其是金融行業(yè)。
這幾年應用得比較多的行業(yè),像券商。在數(shù)據(jù)需要快速、準確、安全等不同的業(yè)務場景和不同數(shù)據(jù)平臺之間,快速響應,甚至達到毫秒級,我們的軟件基于底層的塊存儲,針對剛才張刃總說的金融可信數(shù)據(jù)海量十億級、百億級碎文件或者非結構化的動態(tài)文件,可以快速在不同存儲壞和數(shù)據(jù)平臺之間搭建一個平臺,幫助數(shù)據(jù)能夠在毫秒級響應到每一個業(yè)務場景。
我們把數(shù)據(jù)安全發(fā)展做一個比喻,跟國家經(jīng)濟發(fā)展是一樣的。比如很多年前高鐵不存在,從北京到上海需要20幾個小時,隨著業(yè)務需要,現(xiàn)在的動車、高鐵,把車身變成幾節(jié),但是可以在三到四小時從北京到上海打通一條高鐵上很多人選擇A到B產(chǎn)生的數(shù)據(jù)價值是怎樣的。
數(shù)據(jù)產(chǎn)生了非常大的量,這個量有沒有價值,有多快把核心數(shù)據(jù)產(chǎn)生A到B的轉換,英方從分布式存儲和數(shù)據(jù)的遷移,包括在異構云平臺之間,私有化平臺之間,能夠把A云到B云之間實現(xiàn)切換,這是我們公司做的。形象的比喻是做一個管道,海量數(shù)據(jù)之間挑出有用、有價值需要做轉換的數(shù)據(jù),快速毫秒級,數(shù)據(jù)頻繁交互達到業(yè)務快速響應,最終是為業(yè)務服務。
這個服務價值體現(xiàn)在時間、數(shù)據(jù)、安全這些細節(jié)上,所以英方廠家這五年的重點工作,就是A數(shù)據(jù)快速搬到B,用B可以給客戶帶來業(yè)務連續(xù)性,業(yè)務連續(xù)性是否安全,數(shù)據(jù)是否可用,我們的主要工作是幫助大家打通通道。
宋家雨:今天我們看待數(shù)據(jù)創(chuàng)新的時候,就是數(shù)據(jù)組成和管理,數(shù)據(jù)的復制也不僅僅針對傳統(tǒng)意義上的容災、備份,我們從數(shù)據(jù)管理講了具體技術手段,也講到了海量數(shù)據(jù),像大象這樣的東西。數(shù)據(jù)在金融創(chuàng)新中心中,諾致科技可以給我們帶來什么分享?
鄺謐:其實大家思考的問題就是從原來的消費比較成熟的集中式架構,到現(xiàn)在分布式架構,尤其和外部的互聯(lián)網(wǎng)連接以后。
銀行做數(shù)據(jù)治理的時候,傳統(tǒng)的數(shù)據(jù)治理體系接口相對很完整,但是對于新產(chǎn)生的數(shù)據(jù),它的數(shù)據(jù)治理,原來的數(shù)據(jù)質(zhì)量、管控這些東西帶來大量的需求,大量銀行對這部分是不擅長的,傳統(tǒng)服務商能力也不足,比較擅長的就是互聯(lián)網(wǎng)廠商,但是他們對銀行環(huán)境也不熟悉,這造成了這里面大家的困惑和探索。到目前為止,也沒有看到特別成熟把這兩塊兒整合起來的,中間一段時間銀行設了CDO這樣的職位,但是并沒有看到特別成功的案例在業(yè)界可以廣泛成熟的模式出來,目前沒有。
這方面可以跟大家探討的備份,原來非常細的點,現(xiàn)在變成大家迫切的事情了,傳統(tǒng)銀行上來都是做全量備份的,大概就是這樣。
宋家雨:因為講了結構化、非結構化數(shù)據(jù)的管理,您這邊擅長的應該分布式數(shù)據(jù)庫,它能解決類似這樣的問題嗎?
張刃:其分布式數(shù)據(jù)庫最大的好處是化整為零,把很大的數(shù)據(jù)體量分成很小的一塊兒去做。在復制數(shù)字技術,我個人有比較深刻的感受。我們在服務銀行用戶時遇到的比較大的數(shù)據(jù)庫,中型已經(jīng)在幾十TB級別,再大一點上百TB,要想對它做完整的備份,需要投入的成本,包括時間消耗以及可能帶來對業(yè)務的影響,都是蠻大的。所以我們也在探索把一些重要的往分布式方向走,這對于我們從事相應工作的時候,它相應的難度就會減少了很多。
與此同時,也帶來另外一個方面的挑戰(zhàn),即單個體量是變小了,但數(shù)量相應的增加,這個對存儲廠商或者技術提供方帶來另外一個挑戰(zhàn),即如何能夠同時管理這么多的分布式系統(tǒng),這也是現(xiàn)在所面臨比較重要的問題。
隨著分布式上的系統(tǒng)越來越多,這個問題可能會越來越明顯。據(jù)我了解,國內(nèi)銀行大多在往分布式方向走,而且也有在加快的趨勢。在不久將來,有比較好的解決方案。
宋家雨:分布式系統(tǒng),剛才李總用了一個詞叫化整為零,通過這個解決了很多以前在數(shù)據(jù)物理方面所面臨的難題。這方面,我們講創(chuàng)新實際上基于數(shù)據(jù)的創(chuàng)新,那首先把海量數(shù)據(jù)保存下來,保護好,在這個基礎之上再跟以前的應用創(chuàng)新。在應用創(chuàng)新這方面牽涉到很多數(shù)據(jù)的組織和管理,快速的給使用數(shù)據(jù)的人應用,找到它所需要的數(shù)據(jù)。這方面在互聯(lián)網(wǎng)行業(yè)還是有很多的經(jīng)驗可以借鑒的,為什么有大量數(shù)據(jù)庫類型呢?整個是圍繞數(shù)據(jù)管理、數(shù)據(jù)組織的需要,和后端存儲的配合,和軟件定義存儲這樣比較有特性的存儲性結合是至關重要的。
關于數(shù)據(jù)創(chuàng)新是特別大的話題,不是一句話、兩句話講清楚的。期待以后機會繼續(xù)探討。謝謝各位嘉賓!