首先,騰訊云發(fā)布了自研編碼器“瑤池V500”和音頻技術(shù)方案“騰訊天籟”,為提升音視頻通信質(zhì)量輸出能力;其次,針對融合通信,騰訊云發(fā)布了TRTC在金融及IOT領(lǐng)域的方案,超低延遲“快直播”產(chǎn)品結(jié)束公測,正式規(guī)模商用;另外,在內(nèi)容生產(chǎn)方面,騰訊云進(jìn)一步升級多模態(tài)內(nèi)容制作能力,發(fā)布AI媒體內(nèi)容生產(chǎn)平臺智媒,“騰訊云制作”方案在業(yè)務(wù)能力、素材模版資源及渠道發(fā)布能力方面全面升級;最后,“騰訊臨境”沉浸式媒體解決方案及對應(yīng)SaaS平臺也在會上正式發(fā)布,提供從硬件采集、空間建模、云端SaaS編輯器到終端展示互動的完整一站式能力。除此之外,視頻云還發(fā)布了視頻云海外2.0版本,提升全球服務(wù)能力。
首款自研硬件編碼器瑤池V500亮相,助力云游戲、超清直播等
隨著5G時代的到來,云游戲、4K/8K高清直播等超高清流媒體應(yīng)用越發(fā)增長迅猛,視頻編碼是決定體驗和成本的關(guān)鍵技術(shù)。不過,目前市面上的編碼器,通常會為了滿足實時編碼要求,而對編碼工具和算法做大量裁剪和簡化,最終導(dǎo)致壓縮效率低下。
為解決這個痛點,騰訊云首款自研H265硬件編碼器瑤池V500把實時編碼器的壓縮效率提高到了一個新的水平。
騰訊云架構(gòu)平臺部視頻研發(fā)負(fù)責(zé)人李雅卿介紹道,在算法上,瑤池V500完整實現(xiàn)了高精度運動搜索、全率失真優(yōu)化、高效自適應(yīng)量化等所有主流編碼工具,并融合了騰訊云軟件編碼器碼率控制等方面的領(lǐng)先技術(shù),壓縮效率優(yōu)越;在硬件設(shè)計上,通過靈活的多核擴(kuò)展架構(gòu)、高性能編碼流水線、層級化Memory布局等技術(shù),很好滿足了高吞吐、低時延和實時的要求。
項目實測,瑤池V500不僅能夠滿足手游云游戲體驗要求,且在相同畫質(zhì)下相比市面主流方案降低了15%帶寬,如果是在相同帶寬條件下,對畫質(zhì)的提升效果明顯。
(騰訊云瑤池V500與市面主流方案在手游云游戲中的畫質(zhì)對比)
除了云游戲之外,騰訊云瑤池V500硬件編碼器也適用于高清直播場景。直播場景與云游戲場景不同,直播對延時要求不敏感,因此算法優(yōu)化空間更大。經(jīng)實測,瑤池V500在直播場景下壓縮效率的優(yōu)勢能提升30%,相同帶寬下面畫質(zhì)提升更加明顯。
“騰訊天籟”讓你“聽得見、聽得清、聽得真”
解決了視頻的畫面問題,緊接著是聲音。騰訊天籟實驗室專家研究員肖瑋介紹,“騰訊天籟”是騰訊面向?qū)崟r音視頻會議的新一代實時音頻技術(shù)產(chǎn)品,為了解決實時音視頻會議場景下的各種挑戰(zhàn),騰訊天籟以‘聽得見、聽得清、聽得真’為目標(biāo),打造了一整套圍繞音頻通信核心體驗的技術(shù)體系。
從生活場景體驗來看,實時音視頻會議面臨諸多挑戰(zhàn),如接入設(shè)備的差異性、接入場景的復(fù)雜化、通話環(huán)境的多樣化、多人同場地通話、噪聲消除,以及網(wǎng)絡(luò)環(huán)境的穩(wěn)定性等等。
對此,“騰訊天籟”依靠信號處理和深度學(xué)習(xí)提升聲音質(zhì)量采集上界,同時強化了弱網(wǎng)下的質(zhì)量保障;相關(guān)技術(shù)已經(jīng)在包括騰訊會議的諸多產(chǎn)品中獲得應(yīng)用。例如在聲音采集方面,騰訊會議的AI降噪,能夠適應(yīng)多種噪聲環(huán)境下語音增強任務(wù),提供高質(zhì)量通話效果;騰訊會議采納自研的cPLC、cFEC技術(shù),能夠在連續(xù)120ms突發(fā)丟包或者大丟包等場景保持通話連續(xù)性。此外,借助本次Techo Park開發(fā)者大會,騰訊天籟實驗室,也對外發(fā)布了《音頻聯(lián)合信源信道編碼技術(shù)白皮書》。
智媒時代來臨,騰訊云AI技術(shù)讓內(nèi)容生產(chǎn)更智能
騰訊多媒體實驗室總監(jiān)李松南介紹了AI媒體內(nèi)容生產(chǎn)平臺“智媒”?!爸敲健本邆渥詣幼髟~、視頻增強、橫屏轉(zhuǎn)豎屏、視頻剪輯、視頻配樂、智能封面等能力,部分功能已開始服務(wù)于騰訊云上的明星產(chǎn)品,如騰訊明眸和騰訊智眸。
以視頻剪輯為例,利用AI結(jié)合多模態(tài),可實現(xiàn)體育、游戲、影視等場景的精彩視頻生成?!袄缱闱蛞曨l,我們可以把一場足球比賽按照不同的事件進(jìn)行拆分,還可以把射門、慢動作、進(jìn)球等事件拼接起來,自動生成一段針對一場足球比賽的精彩集錦?!崩钏赡辖榻B道。
此外,AI技術(shù)可以識別圖片或視頻中的人物、動作等信息,自動生成文字描述,當(dāng)前可完成通用、電商、游戲領(lǐng)域的自動描述,各種領(lǐng)域均可定制。同時還支持自定義語言風(fēng)格,使其符合標(biāo)題、摘要、彈幕、解說等各種場景的表達(dá)習(xí)慣。
騰訊實時音視頻TRTC和快直播LEB迭代升級
騰訊實時音視頻產(chǎn)品TRTC為開發(fā)者提供可快速搭建的低成本、低延時、高品質(zhì)的互動解決方案,助力企業(yè)將線下活動、會議無縫遷移到線上。
據(jù)騰訊云終端產(chǎn)品中心高級工程師蔣磊介紹,騰訊實時音視頻通信TRTC針對多人互動深度優(yōu)化,全球端到端延時低于300ms,實測抗丟包率超過 40%,抗網(wǎng)絡(luò)抖動超過 1000ms,超低延遲大房間支持 10萬人在線。
此外,TRTC還采用了騰訊自研的領(lǐng)先行業(yè)的實時音頻引擎TRAE,具備優(yōu)秀的3A處理效果,出眾的音效處理能力,突出的性能優(yōu)勢,為包括 QQ、微信、全民K歌、QQ音樂 等在內(nèi)的各類 APP 提供音頻底層技術(shù)。
隨后,蔣磊還展示了“快直播方案LEB”。 據(jù)了解,國內(nèi)傳統(tǒng)直播主要采用RTMP、HTTP-FLV、HLS這幾種傳輸協(xié)議,一般會出現(xiàn)3~20秒的延時,特殊的場景比如活動賽事直播這種不強調(diào)互動性而是要求流暢性的直播延時通常在10秒以上。
騰訊云快直播兼容標(biāo)準(zhǔn)WebRTC并對WebRTC協(xié)議進(jìn)行了多項優(yōu)化升級,將直播延遲降低至百毫秒級,同時兼顧秒開、卡頓率等核心指標(biāo),優(yōu)化直播體驗。不僅如此,快直播兼容目前騰訊云標(biāo)準(zhǔn)直播的全部功能,推流、轉(zhuǎn)碼、錄制、截圖、鑒黃、播放全功能支持,能夠滿足現(xiàn)有標(biāo)準(zhǔn)直播業(yè)務(wù)平滑遷移。只需一步即可從標(biāo)準(zhǔn)直播升級到快直播(超低延遲直播),騰訊云快直播現(xiàn)已結(jié)束公測期,全面正式商用。
騰訊視頻云海外媒體方案2.0發(fā)布,云+端一體化、超低延遲、Mediaservice全面上線
面對日益增加的海外媒體服務(wù)需求,騰訊視頻云海外媒體方案2.0發(fā)布。
騰訊視頻海外媒體方案2.0主打三大新方向升級:完善“云+端”一體化方案、超低延遲直播全球部署、媒體服務(wù)系列新產(chǎn)品Mediaservice全面上線。
目前云+終端一體化解決方案全面上架國際站,極具騰訊云特色的移動直播SDK、短視頻SDK、美顏特效SDK全面上線國際站,為海外用戶提供“云+端”全鏈路一體化解決方案。而超低延遲直播(快直播)也已正式在海外上線部署,將為海外客戶提供百毫秒級的直播新體驗。
媒體服務(wù)系列三大新產(chǎn)品(MediaLive MediaPackage MediaConnect)正式在海外上線,能為客戶提供極致的轉(zhuǎn)碼、封裝、全球傳輸新能力,提供海外OTT場景下的全新解決方案。媒體服務(wù)系列新產(chǎn)品覆蓋了多種海外常見傳輸或音視頻協(xié)議,支持7×24小時極致穩(wěn)定性能,極速高清智能轉(zhuǎn)碼更是最多可達(dá)到30%視頻壓縮率。
此外,騰訊云在全球部署了超過2000個CDN的節(jié)點和超過120T的儲備帶寬,支持RTP/SRT/HLS/DASH等8種海外常見傳輸或音視頻協(xié)議支持能力,目前騰訊視頻云已經(jīng)部署全球60多個國家和地區(qū)。
騰訊云制作能力全面升級,助力內(nèi)容創(chuàng)作
騰訊云制作也進(jìn)行了全面升級,這是騰訊云面向內(nèi)容制作領(lǐng)域,推出的制作云SaaS產(chǎn)品,為視頻內(nèi)容創(chuàng)作提供了一套“采集-傳輸-云端導(dǎo)播-視頻編輯-剪輯-云端分發(fā)”全生命周期解決方案。
此次發(fā)布的騰訊云制作產(chǎn)品,提供騰訊獨家版權(quán)素材庫、創(chuàng)意模板庫和AI工具箱,除了升級視頻剪輯業(yè)務(wù)功能外,還支持一鍵分發(fā)至企鵝號,新浪微博,快手等媒體平臺。
與此同時,騰訊云制作還升級了業(yè)務(wù)模式,除了0研發(fā)投入、0代碼接入,2天的急速交付模式讓客戶低成本且快速擁有自己的整套視頻創(chuàng)意網(wǎng)站,上線團(tuán)隊管理模塊與行業(yè)模板還可提高管理效果和客戶使用效果。
騰訊臨境打造沉浸式空間體驗
騰訊臨境為視頻云團(tuán)隊針對企業(yè)級營銷提供的全新一站式沉浸式解決方案,依托多硬件采集支持、空間建模能力、實時通訊/客戶呼叫中心等營銷能力集成,覆蓋客戶需要的多樣場景,支持多平臺終端打造沉浸式新體驗。能夠助力企業(yè)快速實現(xiàn)VR沉浸式營銷方式,帶給用戶全真互聯(lián)網(wǎng)新體驗。
此外本次臨境還新發(fā)布了臨境SaaS平臺產(chǎn)品,平臺能夠為采集完成后的模型輕松疊加營銷觸達(dá)能力,具有操作簡單、營銷功能全面、模型管理、多平臺分發(fā)四大特點,讓用戶的沉浸式營銷變得更加簡單易用。
例如,國際文博會騰訊VR展廳,打破了時空的限制;“云上濱?!盫R展廳使更多人可以參觀到騰訊濱海大廈展廳,通過實時VR帶看講解功能,用戶可以了解騰訊的文化產(chǎn)業(yè)內(nèi)容和理念。線上參觀的方式降低了物質(zhì)成本,打破了實體展廳人數(shù)限制的弊端,可容納參觀人數(shù)無上限,“一對多”的互動講解方式也提升了接待效率。 隨著5G、邊緣計算等新興技術(shù)的發(fā)展,音視頻技術(shù)正改寫電商、教育等行業(yè)的發(fā)展模式。騰訊云將持續(xù)迭代音視頻及通信技術(shù),交付高質(zhì)量、高穩(wěn)定性及高性價比的技術(shù)服務(wù)回饋客戶與合作伙伴的信任, 助力各行業(yè)創(chuàng)新發(fā)展與變革。