??△?DataPipeline榮獲科技創(chuàng)新獎
??主論壇中,DataPipeline合伙人&CPO陳雷發(fā)表《實時數(shù)據(jù)管理,下一代金融數(shù)字化創(chuàng)新基礎(chǔ)設(shè)施》的主題演講,他表示:“新一代技術(shù)的爆發(fā)式增長正在推動整個產(chǎn)業(yè)生態(tài)加速發(fā)展,作為銀行數(shù)字化創(chuàng)新基礎(chǔ)設(shè)施的數(shù)據(jù)管理技術(shù)也在不斷進化。其中,實時數(shù)據(jù)管理平臺成為十分必要且重要的組成部分,預(yù)測將來會進一步被擴展為全銀行綜合性平臺。DataPipeline企業(yè)級實時數(shù)據(jù)融合平臺可以幫助用戶把多源異構(gòu)數(shù)據(jù)庫之間的實時的數(shù)據(jù)流打通,極大降低了用戶自建的時間精力和難度,而自建預(yù)計時間能達到6～8個月?！?/p>
??▲銀行業(yè)數(shù)據(jù)管理技術(shù)發(fā)展歷程
??對此,陳雷分享了DataPipeline的深入思考和實踐經(jīng)驗。據(jù)介紹,DataPipeline實時數(shù)據(jù)融合平臺具備以下四大特點:
??1.?支持主流關(guān)系型數(shù)據(jù)、大數(shù)據(jù)平臺及國產(chǎn)數(shù)據(jù)庫
??支持例如Oracle實時日志解析的數(shù)據(jù)同步、DB2等主流數(shù)據(jù)庫,openGauss、TiDB、SequoiaDB巨杉等國產(chǎn)數(shù)據(jù)庫,同時支持包括星環(huán)大數(shù)據(jù)平臺等數(shù)據(jù)庫管理技術(shù)和API等的其他數(shù)據(jù)接口類型。
??2.?配置式鏈路定義,無代碼任務(wù)構(gòu)建提升實時數(shù)據(jù)敏捷性
??使用分層管理、按需服務(wù)的配置型平臺來提升?IT?敏捷開發(fā)效率。產(chǎn)品采用B/S架構(gòu),全頁面化配置,數(shù)據(jù)融合任務(wù)的研發(fā)交付時間低至5分鐘。一方面保證數(shù)據(jù)節(jié)點的安全性、穩(wěn)定性、業(yè)務(wù)連續(xù)性,一方面為數(shù)據(jù)應(yīng)用提供更多的自主性,使用戶可以將數(shù)據(jù)獲取的范圍、數(shù)據(jù)任務(wù)的生命周期、系統(tǒng)資源投入的多寡等權(quán)限更多地交給實際使用數(shù)據(jù)的業(yè)務(wù)部門及應(yīng)用開發(fā)人,從而在業(yè)務(wù)需求變化時從容應(yīng)對,加速達成數(shù)字化轉(zhuǎn)型目標。
??3.?豐富全面的運維監(jiān)控與管理守護任務(wù)穩(wěn)定運行
??通過任務(wù)監(jiān)控模塊監(jiān)控系統(tǒng)級任務(wù)運行狀態(tài),支持提供圖形化的監(jiān)控頁面,支持重要任務(wù)、故障任務(wù)監(jiān)控、性能監(jiān)控、關(guān)注任務(wù)的實時監(jiān)控、同步延遲監(jiān)控、表級別數(shù)據(jù)量監(jiān)控與核對;豐富的系統(tǒng)級任務(wù)運行統(tǒng)計與任務(wù)級實時運行報告,報表可按照任務(wù)、系統(tǒng)等維度進行統(tǒng)計及展現(xiàn)、導出等功能;靈活豐富的運行控制配置滿足各類場景要求,讀取寫入限制降低源目標壓力、資源組保障重要任務(wù)運行、任務(wù)分組方便管理。
??4.?分布式引擎、組件級高可用保障實時鏈路穩(wěn)定高容錯
??融合引擎采用分布式架構(gòu),容器化部署?？梢员ＷC系統(tǒng)業(yè)務(wù)連續(xù)性要求。在分布式集群的基礎(chǔ)上,采用系統(tǒng)資源組的形式隔離不同任務(wù)的運行環(huán)境,保障重要任務(wù)的穩(wěn)定有序運行。
??此次榮獲銀行數(shù)字化科技創(chuàng)新獎,是銀行業(yè)界對DataPipeline在行業(yè)做出突出貢獻的重要表彰。DataPipeline自成立以來,不忘初心,始終專注于實時數(shù)據(jù)融合領(lǐng)域,至今已服務(wù)了中國人壽、民生銀行、山東城商行聯(lián)盟、財通證券、中國石油、吉利集團、星巴克、順豐等在各自行業(yè)信息化水平領(lǐng)先的客戶。憑借業(yè)內(nèi)領(lǐng)先的技術(shù)、卓越的產(chǎn)品表現(xiàn)和成熟的行業(yè)解決方案,DataPipeline獲得「A100數(shù)智中國榜:TOP企業(yè)IT基礎(chǔ)設(shè)施數(shù)智化方案」、「DTCC:年度技術(shù)卓越獎」、「創(chuàng)新互聯(lián)網(wǎng)企業(yè)TOP100」、「大數(shù)據(jù)產(chǎn)業(yè)創(chuàng)新服務(wù)產(chǎn)品」等榮譽。
??▲DataPipeline部分用戶展示
??未來,DataPipeline將繼續(xù)深化自身在實時數(shù)據(jù)融合領(lǐng)域的研究,持續(xù)助力多行業(yè)用戶數(shù)字化轉(zhuǎn)型。“我們非常專注這一件事,就是打造實時數(shù)據(jù)處理中間件產(chǎn)品。基于數(shù)十人的專職研發(fā)團隊成果及阿里、華為、騰訊等產(chǎn)業(yè)上下游合作伙伴的生態(tài)力量,我們現(xiàn)已基本可以替代傳統(tǒng)外商的實時數(shù)據(jù)采集技術(shù)。”陳雷表示。
