流處理通俗來(lái)說(shuō),是一種用來(lái)解決海量流式數(shù)據(jù)的實(shí)時(shí)處理計(jì)算問(wèn)題的手段。 流式數(shù)據(jù)是指在時(shí)間分布和數(shù)量上無(wú)限的一系列數(shù)據(jù)集合體,網(wǎng)站實(shí)時(shí)訪問(wèn)數(shù)據(jù)、網(wǎng)絡(luò)攻擊數(shù)據(jù)等都屬于流數(shù)據(jù)的范疇。不同于傳統(tǒng)的DB數(shù)據(jù),流式數(shù)據(jù)具有無(wú)限性和無(wú)界性,數(shù)據(jù)性質(zhì)上的差異和業(yè)務(wù)對(duì)處理實(shí)時(shí)性的要求導(dǎo)致傳統(tǒng)的數(shù)據(jù)處理系統(tǒng)無(wú)法有效進(jìn)行處理,從而產(chǎn)生流式數(shù)據(jù)處理系統(tǒng)。

目前,流式計(jì)算系統(tǒng)已經(jīng)被廣泛運(yùn)用于搜索、廣告、安全等業(yè)務(wù)。其中,安全行業(yè)由于攻防對(duì)抗工作具有海量數(shù)據(jù)處理、多策略多場(chǎng)景、高實(shí)時(shí)性要求的獨(dú)特性質(zhì),對(duì)數(shù)據(jù)處理的性能有著更為強(qiáng)烈和嚴(yán)苛的要求,騰訊天幕打造了面向多場(chǎng)景的實(shí)時(shí)流式大數(shù)據(jù)處理平臺(tái)解決方案,孵化了超過(guò)60項(xiàng)國(guó)家級(jí)技術(shù)專利。

基于騰訊自研的安全算力算法PaaS的支撐,憑借高性能安全算力以及安全算法優(yōu)勢(shì),騰訊天幕打造了萬(wàn)億級(jí)海量、自動(dòng)智能、強(qiáng)實(shí)時(shí)保證的流式計(jì)算解決方案,實(shí)現(xiàn)了全局威脅檢測(cè)與全網(wǎng)全出口實(shí)時(shí)攔截,并將安全算力算法平臺(tái)能力輸送至各行業(yè)用戶,在日常運(yùn)營(yíng)以及重保期間提供實(shí)時(shí)智能的安全保障。

騰訊天幕通過(guò)PaaS化的服務(wù),支持任務(wù)QoS服務(wù)以及資源隔離,核心能力均開(kāi)放API接口,為其他安全產(chǎn)品業(yè)務(wù)賦能,實(shí)現(xiàn)基于天幕PaaS的軟件定義安全能力。同時(shí),騰訊天幕采用全自研系統(tǒng),具有高效低碳,安全可靠的特性。目前,騰訊天幕已為DDoS檢測(cè)、業(yè)務(wù)風(fēng)控、威脅感知等業(yè)務(wù)場(chǎng)景計(jì)算需求提供底層強(qiáng)勁安全PaaS支撐,并在性能消耗,實(shí)時(shí)性保障,成本投入等方面表現(xiàn)出明顯優(yōu)勢(shì),位列安全算力技術(shù)業(yè)界領(lǐng)先梯隊(duì)。 

2020年,騰訊天幕曾參與多項(xiàng)大數(shù)據(jù)、安全算法方面國(guó)家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)制定,并榮獲了全球下一代互聯(lián)網(wǎng)峰會(huì)“IPv6最佳實(shí)踐獎(jiǎng)”、中國(guó)電子政務(wù)領(lǐng)域“自主可控創(chuàng)新產(chǎn)品獎(jiǎng)”等獎(jiǎng)項(xiàng),本次評(píng)測(cè)中,通過(guò)了14項(xiàng)嚴(yán)格的測(cè)試項(xiàng)目。

騰訊云另一王牌產(chǎn)品——騰訊云數(shù)據(jù)庫(kù)TDSQL則通過(guò)了分布式事務(wù)型數(shù)據(jù)庫(kù)性能評(píng)測(cè)。TDSQL是騰訊企業(yè)級(jí)分布式關(guān)系型數(shù)據(jù)庫(kù),目前旗下涵蓋了金融級(jí)分布式、云原生、分析型等多引擎融合的完整數(shù)據(jù)庫(kù)產(chǎn)品體系,服務(wù)騰訊集團(tuán)內(nèi)部及騰訊云上包括中國(guó)銀行、平安銀行、華夏銀行等頂級(jí)銀行在內(nèi)的數(shù)千家金融、政務(wù)、社交、電商、交通、游戲等行業(yè)客戶,并在第七次人口普查期間,15天內(nèi)支撐了14億海量C端數(shù)據(jù)業(yè)務(wù)的入庫(kù)。

作為國(guó)產(chǎn)數(shù)據(jù)庫(kù),TDSQL擁有深厚的技術(shù)研發(fā)積累,在基礎(chǔ)研究領(lǐng)域獲得了超百項(xiàng)國(guó)際和國(guó)家認(rèn)證及國(guó)內(nèi)外技術(shù)專利,是首批完成中國(guó)信通院基于管理能力、核心功能、兼容能力、高可用特性、擴(kuò)展性、安全性六大特性進(jìn)行的分布式測(cè)試的國(guó)產(chǎn)數(shù)據(jù)庫(kù)產(chǎn)品。

在本次信通院分布式事務(wù)數(shù)據(jù)庫(kù)性能測(cè)評(píng)中,TDSQL數(shù)據(jù)庫(kù)滿足了ACID要求,并在集群部署能力,容災(zāi)架構(gòu)部署能力,同步架構(gòu)設(shè)計(jì),數(shù)據(jù)庫(kù)遷移、升級(jí)、升級(jí)整合等性能上排名靠前,獲得了分布式事務(wù)型數(shù)據(jù)庫(kù)性能、數(shù)據(jù)庫(kù)應(yīng)用遷移服務(wù)能力和數(shù)據(jù)庫(kù)實(shí)施部署服務(wù)能力專項(xiàng)評(píng)測(cè)證書(shū)。

值得一提的是,騰訊云安全隱私計(jì)算平臺(tái)通過(guò)了多方安全計(jì)算產(chǎn)品性能評(píng)測(cè)、聯(lián)邦學(xué)習(xí)產(chǎn)品性能評(píng)測(cè)等兩項(xiàng)評(píng)測(cè)。該平臺(tái)以聯(lián)邦學(xué)習(xí)(FL)、安全多方計(jì)算(MPC)、可信執(zhí)行環(huán)境(TEE)等隱私數(shù)據(jù)保護(hù)技術(shù)為基礎(chǔ),針對(duì)機(jī)器學(xué)習(xí)算法進(jìn)行定制化的隱私保護(hù)改造,保證原始數(shù)據(jù)不出本地即可完成聯(lián)合建模,既能保障數(shù)據(jù)安全,又能發(fā)揮數(shù)據(jù)最大價(jià)值,很好地解決了企業(yè)面臨的數(shù)據(jù)孤島難題。

在本次評(píng)測(cè)中,騰訊云安全隱私計(jì)算在聯(lián)邦學(xué)習(xí)的測(cè)試結(jié)果中XGB樹(shù)模型訓(xùn)練及推理、特征工程都以絕對(duì)的優(yōu)勢(shì)獲得最優(yōu)性能評(píng)測(cè)表現(xiàn),在安全多方計(jì)算測(cè)試結(jié)果中基礎(chǔ)運(yùn)算、聯(lián)合統(tǒng)計(jì)、特征工程、模型訓(xùn)練及推理都有大幅度優(yōu)于平均水平的表現(xiàn)。目前騰訊云安全隱私計(jì)算平臺(tái)在銀行、保險(xiǎn)、政務(wù)、教育等行業(yè)都有標(biāo)桿性案例,其優(yōu)異的安全性、性能表現(xiàn)在諸多風(fēng)控、營(yíng)銷場(chǎng)景下都發(fā)揮了重要作用。

此外,在本次測(cè)評(píng)中,騰訊云數(shù)圖軟件(簡(jiǎn)稱騰訊云TGDB)也通過(guò)了圖數(shù)據(jù)庫(kù)基礎(chǔ)能力評(píng)測(cè)。據(jù)了解,這款圖數(shù)據(jù)庫(kù)能夠?qū)崿F(xiàn)萬(wàn)億級(jí)關(guān)聯(lián)關(guān)系數(shù)據(jù)實(shí)時(shí)查詢,高效治理異構(gòu)數(shù)據(jù),支持實(shí)時(shí)圖計(jì)算。同時(shí),深度挖掘大數(shù)據(jù)中的隱藏關(guān)聯(lián)關(guān)系,幫助企業(yè)構(gòu)筑全局視角,釋放潛在商業(yè)價(jià)值。

據(jù)了解,“中國(guó)信通院大數(shù)據(jù)產(chǎn)品能力測(cè)試”是國(guó)內(nèi)首個(gè)面向大數(shù)據(jù)產(chǎn)品的權(quán)威評(píng)測(cè)體系,旨在從基礎(chǔ)能力、性能、可靠性、安全等維度全面衡量企業(yè)級(jí)大數(shù)據(jù)產(chǎn)品能力,目前已經(jīng)成為大數(shù)據(jù)領(lǐng)域最權(quán)威的第三方評(píng)測(cè)品牌之一,通過(guò)評(píng)測(cè)的產(chǎn)品,代表著中國(guó)大數(shù)據(jù)能力的第一梯隊(duì)水平,也是領(lǐng)先技術(shù)發(fā)展的風(fēng)向標(biāo)。

作為國(guó)內(nèi)最早探索大數(shù)據(jù)的互聯(lián)網(wǎng)企業(yè)之一,騰訊云目前是國(guó)內(nèi)算力最強(qiáng)的云廠商,同時(shí)也有著國(guó)內(nèi)最大的日實(shí)時(shí)計(jì)算量。未來(lái)騰訊云將持續(xù)深耕大數(shù)據(jù)、數(shù)據(jù)庫(kù)等技術(shù)的基礎(chǔ)研究創(chuàng)新,推動(dòng)各行業(yè)數(shù)據(jù)應(yīng)用安全,助力更多企業(yè)實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型。

分享到

songjy

相關(guān)推薦