陳磊:每個(gè)月都增加目標(biāo)量
騰訊社交網(wǎng)絡(luò)事業(yè)部副總裁陳磊致歡迎詞時(shí)介紹說,騰訊云對(duì)騰訊來說是非常重要的核心業(yè)務(wù),也代表了未來的發(fā)展方向。現(xiàn)在整個(gè)行業(yè)越來越多的企業(yè)在使用云,從騰訊自己的業(yè)務(wù)數(shù)據(jù)、整個(gè)行業(yè)監(jiān)控的數(shù)據(jù)看,今年第一個(gè)季度云計(jì)算行業(yè)發(fā)展非常好,特別是公有云的發(fā)展具備很大的加速度,而且加速度越來越大。
騰訊社交網(wǎng)絡(luò)事業(yè)部副總裁 陳磊
陳磊認(rèn)為發(fā)展互聯(lián)網(wǎng)業(yè)務(wù),可以考慮云所帶來的價(jià)值。因?yàn)橐环矫鎻男б婧统杀旧蟻砜?,選擇云是最合理的選擇;另一方面安全問題帶來挑戰(zhàn)是非常錯(cuò)綜復(fù)雜的。這兩個(gè)方面能力的建設(shè)需要長期的投入和積累。
騰訊云架構(gòu)分析和實(shí)踐
騰訊云總架構(gòu)師劉穎在題為《騰訊云架構(gòu)分析和實(shí)踐》的主題分享中,介紹了騰訊云網(wǎng)絡(luò)架構(gòu)、虛擬化架構(gòu)和存儲(chǔ)架構(gòu)三方面的演進(jìn)。
劉穎介紹說騰訊云總體分為三個(gè)主要部分。第一,計(jì)算平臺(tái),分為兩種類型的計(jì)算平臺(tái),一種是傳統(tǒng)的云主機(jī),另一種是PaaS的引擎叫做CEE。第二,存儲(chǔ)服務(wù),有各種介質(zhì)、各種類型的,還有一些對(duì)象存儲(chǔ),分別在不同的場(chǎng)景下有不同的用途。第三,大數(shù)據(jù)分析的服務(wù)、面向個(gè)人存儲(chǔ)的云服務(wù)以及安全產(chǎn)品。
在介紹到騰訊云的存儲(chǔ)方面時(shí),劉穎說騰訊云的存儲(chǔ)可以分為:虛擬機(jī)里結(jié)合更緊密的服務(wù)CBS云盤、存儲(chǔ)服務(wù)CDB以及對(duì)象存儲(chǔ)COS。遇到運(yùn)維問題時(shí),CDB中間有一個(gè)代理層可自動(dòng)做切換,用戶對(duì)外看到的數(shù)據(jù)是不會(huì)變化的,程序無感知,安全性上也更有保障,此外還具備高性能、低價(jià)格的優(yōu)勢(shì)。
提問:騰訊有沒有針對(duì)專門的數(shù)據(jù)類型做加速優(yōu)化?
劉穎:其實(shí)各個(gè)網(wǎng)絡(luò)商是都有類似的方案。我們也有自己的一套經(jīng)驗(yàn)數(shù)值,比如騰訊視頻對(duì)大視頻怎么樣去切片。
提問:針對(duì)虛擬機(jī)等登陸會(huì)有審計(jì)的相關(guān)工作,這些審計(jì)數(shù)據(jù)是我們可以看得到嗎?還是說只是你們內(nèi)部看得到?
劉穎:審計(jì)目前是不對(duì)外部公開的,首先大家知道騰訊的產(chǎn)品這么多,云是一個(gè)toB的產(chǎn)品,我們內(nèi)部有審計(jì)對(duì)所有的日志,不僅僅是我們自己能看到,其實(shí)也有一個(gè)第三方團(tuán)隊(duì)來去審計(jì)我們。
騰訊大數(shù)據(jù)實(shí)戰(zhàn)
緊接著,騰訊云高級(jí)架構(gòu)師羅奇帶來了《騰訊大數(shù)據(jù)實(shí)戰(zhàn)》的主題演講,分享主題包括:什么是騰訊TOD,為什么會(huì)做它以及給用戶會(huì)帶來什么樣的價(jià)值;TOD的功能和界面以及基于TOD騰訊內(nèi)部做的應(yīng)用;舉例說明其中用到的技術(shù)。
TOD是騰訊公司面向第三方開發(fā)商提供的云端的數(shù)據(jù)介入大數(shù)據(jù)平臺(tái),包括了存儲(chǔ)、計(jì)算和應(yīng)用三方面。開發(fā)者可以在線創(chuàng)建數(shù)據(jù)倉庫,編寫、調(diào)試和運(yùn)行SQL腳本,調(diào)用MR程序,完成對(duì)海量數(shù)據(jù)的各種處理。另外開發(fā)者還可以將編寫的數(shù)據(jù)處理腳本定義成周期性執(zhí)行的任務(wù),通過可視化界面拖拽定義任務(wù)間依賴關(guān)系,實(shí)現(xiàn)復(fù)雜的數(shù)據(jù)處理工作流。主要應(yīng)用于海量數(shù)據(jù)統(tǒng)計(jì)、數(shù)據(jù)挖掘等領(lǐng)域。已經(jīng)為微信、QQ空間、廣點(diǎn)通、騰訊游戲、財(cái)付通、QQ網(wǎng)購等關(guān)鍵業(yè)務(wù)的提供了數(shù)據(jù)分析服務(wù)。
“現(xiàn)在大數(shù)據(jù)這個(gè)詞很火,很多公司也都想做大數(shù)據(jù),而怎么落地是很多公司關(guān)注的事情。騰訊公司內(nèi)部因?yàn)槲覀償?shù)據(jù)量在整個(gè)互聯(lián)網(wǎng)業(yè)界很大,其實(shí)內(nèi)部一直都是在做大數(shù)據(jù)的處理。我們把自己內(nèi)部的處理能力開放出來給到其他的這些公司,當(dāng)他們想要使用這種大數(shù)據(jù)能力的時(shí)候,就可以直接拿過來用。”羅奇介紹說。
羅奇分享了騰訊在數(shù)據(jù)處理方面常常遇到的問題?包括:1. 數(shù)據(jù)存儲(chǔ)的格式、位置不同;2. 數(shù)據(jù)處理流程有很強(qiáng)的步驟和依賴關(guān)系;3. 需要進(jìn)行各種意外處理:任務(wù)失敗需要重試、任務(wù)長時(shí)間沒有執(zhí)行、任務(wù)監(jiān)控預(yù)警;4. 現(xiàn)有的工具不匹配。
據(jù)羅奇介紹,騰訊分布式數(shù)據(jù)倉庫(Tencent distributed Data Warehouse,TDW),支持百PB級(jí)的數(shù)據(jù)存儲(chǔ)和計(jì)算,為騰訊產(chǎn)品提供海量、高效、穩(wěn)定的大數(shù)據(jù)平臺(tái)支撐和決策支持。已覆蓋商業(yè)數(shù)據(jù)庫的常用功能;低門檻開發(fā)界面,騰訊內(nèi)部開發(fā)者超過2000人;性能提升明顯,穩(wěn)定性高。通過替換商業(yè)數(shù)據(jù)庫,TDW實(shí)現(xiàn)了公司級(jí)的數(shù)據(jù)集中存儲(chǔ):1. 覆蓋90%+業(yè)務(wù)產(chǎn)品,總記錄數(shù)300萬億條,日接入5千億條;2. 數(shù)據(jù)提取和分析人數(shù)每月3000+人(來自100多個(gè)部門),日活躍開發(fā)者500+;3. 單集群5600臺(tái),日運(yùn)行Job數(shù)100w+。
提問:金融企業(yè)更多希望云端做的是存儲(chǔ)和計(jì)算方面,應(yīng)用可能會(huì)有私有化的一些場(chǎng)景。騰訊的云計(jì)算方面必須架構(gòu)在自有的生態(tài)鏈上嗎?你提到了Hadoop/HIVE的優(yōu)化工作,很多廠商也在做這方面,想過部分開源嗎?
羅奇:前面有說到我們的應(yīng)用這塊我們沒做,你完全是可以說只用我們這個(gè)TOD這套服務(wù)來處理數(shù)據(jù),處理完數(shù)據(jù)的話你自己去應(yīng)用。我們已經(jīng)開源了,現(xiàn)在騰訊也在做一個(gè)開源這樣的項(xiàng)目,第一批開源的項(xiàng)目里面,就有我們TDW。
玩轉(zhuǎn)微信云
目前微信的月活躍用度已經(jīng)達(dá)到了3.55億,在本次活動(dòng)中騰訊云高級(jí)產(chǎn)品經(jīng)理向國屹為大家?guī)砹恕锻孓D(zhuǎn)微信云》的主題分享,專門聊聊和微信有關(guān)的事。據(jù)向國屹介紹,現(xiàn)在整個(gè)公眾平臺(tái)已經(jīng)有兩百多萬個(gè)公眾賬號(hào)。“整個(gè)互聯(lián)網(wǎng)十年發(fā)展到現(xiàn)在,整個(gè)PC網(wǎng)站加移動(dòng)網(wǎng)站基本上才350萬個(gè)左右,僅僅微信公眾賬號(hào)在一年的時(shí)間內(nèi)突破了兩百多萬,現(xiàn)在已經(jīng)接近三百萬。按現(xiàn)在的增長速度到今年年底將近四百萬的量,這個(gè)增長量很快。我們可以看到微信以及微信公眾賬號(hào)對(duì)于整個(gè)移動(dòng)互聯(lián)網(wǎng)的生態(tài)影響其實(shí)影響會(huì)越來越大。”向國屹補(bǔ)充道。
騰訊云高級(jí)產(chǎn)品經(jīng)理 向國屹
微信云想要做的是什么事情?向國屹說,整個(gè)行業(yè)已經(jīng)到了一個(gè)高速發(fā)展的時(shí)期,有越來越多的企業(yè)有問題了會(huì)主動(dòng)找到他們。因?yàn)槠髽I(yè)說這是騰訊出的,企業(yè)花了很多錢撲在上面,又出了一些安全問題,騰訊是不應(yīng)該負(fù)責(zé)?“我們很冤枉,因?yàn)檫@不是我們提供的服務(wù),我們只不過做了中間的橋梁,我們發(fā)現(xiàn)這種問題越來越多,因?yàn)樘嗟钠髽I(yè)關(guān)注它,很多企業(yè)投到這個(gè)上面來。我們就推出了微信云這樣一個(gè)平臺(tái),要做的工作就是希望做成一個(gè)打造公眾賬號(hào)一站式的服務(wù)平臺(tái)。”向國屹說。
向國屹說發(fā)展微信云,最主要想解決的問題就是用戶最關(guān)心的三個(gè)點(diǎn):安全,整個(gè)基于騰訊云的這套安全體系,能把所有的服務(wù)商這部分的安全隱患消除掉;透明度,企業(yè)到我們平臺(tái)上必須遵循規(guī)章制度和規(guī)則;標(biāo)準(zhǔn)化,把整個(gè)騰訊這些年的技術(shù),包括一些大數(shù)據(jù)的點(diǎn)都直接放在平臺(tái)上給大家用,把相關(guān)的一些接口規(guī)范,甚至包括服務(wù)接口,希望在這個(gè)平臺(tái)的用戶都能體會(huì)到最好的服務(wù)和體驗(yàn)。
提問:這個(gè)平臺(tái)是不是為第三方服務(wù)商來服務(wù)的,而不是為最終的用戶來服務(wù)?
向國屹:我們希望平臺(tái)要良性發(fā)展,涉及到三方的良性發(fā)展,上游的話我們希望把這些服務(wù)商服務(wù)好,因?yàn)樗琴u東西的,下游的話我們需要把最終的企業(yè)用戶服務(wù)好,因?yàn)樗切枰I東西的。我們平臺(tái)方是純粹提供整個(gè)大的平臺(tái)能力支撐包括流量支撐,包括大數(shù)據(jù)分發(fā)能力的支撐,我們希望三方都愿意在我們這個(gè)平臺(tái)上良好地發(fā)展下去。
現(xiàn)場(chǎng)主題分享結(jié)束后,與會(huì)嘉賓一起參觀了騰訊總部并留影紀(jì)念。