目前,世界杯正在如火如荼的舉辦,作為排球運(yùn)動(dòng)最頂尖的比賽,世界杯一度成為奪得近短時(shí)間的最大IP。同時(shí),明年新組建的中央廣播電視總臺(tái)首次分銷世界杯新媒體版權(quán),也將去年國(guó)外歌迷觀賽人數(shù)拉上了一個(gè)新門檻。頂尖的比賽、立體的渠道,在世界杯直播的背后,云估算起到了關(guān)鍵的作用,此前有觀點(diǎn)覺得“沒有云,你都看不了本屆世界杯”。7月7日,騰訊云在上海組織了一場(chǎng)線下沙龍,解密了衛(wèi)視網(wǎng)世界杯急速高清直播背后的云估算技術(shù),展示出騰訊云AI音視頻能力對(duì)世界杯等頂尖體育比賽的強(qiáng)悍支撐。
AI發(fā)力直播,急速高清、降本提速
伴隨聯(lián)通網(wǎng)路的提速降費(fèi)以及智能手機(jī)的普及,短視頻、直播等行業(yè)迎來了全新的夏天。隨著人們對(duì)視頻清晰度的要求越來越高,也為諸多視頻企業(yè)帶來了前所未有的流量壓力。
“對(duì)于視頻企業(yè)來說,帶寬開支占很大一部份營(yíng)運(yùn)成本,假如想為用戶提供高清的視頻體驗(yàn),就必須降低視頻流的分辨率,相應(yīng)的帶寬的總成本也會(huì)進(jìn)一步增強(qiáng)。而急速高清正解決了該問題,可以以更低的分辨率給用戶提供更高清的視頻。”騰訊云中級(jí)產(chǎn)品總監(jiān)李海琦在沙龍上表示。
騰訊云中級(jí)產(chǎn)品總監(jiān)李海琦
騰訊云急速高清技術(shù),又叫“智能動(dòng)態(tài)編碼技術(shù)”,主要借助機(jī)器深度學(xué)習(xí),通過視頻場(chǎng)景智能分類、編碼參數(shù)匹配、前置處理、編碼動(dòng)態(tài)優(yōu)化、碼率智能控制、、ROI處理等技術(shù)和流程,對(duì)直播或則點(diǎn)播視頻流進(jìn)行智能處理,以匹配最優(yōu)編碼參數(shù),進(jìn)而以更低的帶寬成本給用戶提供更高清的視頻直播流。
在視頻場(chǎng)景智能分類方面,通過深度學(xué)習(xí)的方式,產(chǎn)生十幾個(gè)主流大類及幾十個(gè)小類場(chǎng)景模型庫(kù)。急速高清技術(shù)服務(wù)期間,可實(shí)時(shí)對(duì)直播流進(jìn)行測(cè)量剖析,并匹配對(duì)應(yīng)場(chǎng)景模型。匹配率方面,較顯著的場(chǎng)景如游戲、足球、籃球、動(dòng)漫等CNN網(wǎng)路模型,匹配確切率在98%以上;在電視劇、戶外運(yùn)動(dòng)、美食、旅游等畫面特點(diǎn)分散,幀間運(yùn)動(dòng)變化較大的場(chǎng)景下,通過CNN+RNN+LSTM做頻域及空間域的剖析,可保證匹配確切率在85%以上;
編碼參數(shù)匹配方面,騰訊云急速高清技術(shù),會(huì)依照?qǐng)鼍胺诸悓?shí)時(shí)辨識(shí)結(jié)果,結(jié)合視頻源碼率、幀率、分辨率、紋理和運(yùn)動(dòng)變化幅度等情況,以及綜合機(jī)器負(fù)載和音質(zhì)療效等維度,選擇最優(yōu)編碼參數(shù);
在后置處理方面,依據(jù)不同場(chǎng)景分類、客戶對(duì)視頻音質(zhì)的不同要求,以及結(jié)合視頻源畫面紋理和實(shí)時(shí)運(yùn)動(dòng)測(cè)量結(jié)果進(jìn)行白平衡、軟模糊、反交錯(cuò)、去塊、降噪、色階補(bǔ)償、降幀等后置處理;
騰訊云急速高清技術(shù)還支持編碼動(dòng)態(tài)優(yōu)化,可針對(duì)不同視頻類別,同一個(gè)視頻內(nèi)不同視頻段,應(yīng)用完全不一樣的編碼參數(shù),且支持編碼參數(shù)按幀實(shí)時(shí)更新生效。
據(jù)悉,急速高清技術(shù)的分辨率智能控制,可將主觀觀看得分VMAF值提升3-5分;技術(shù),才能以極低的CPU消耗對(duì)噪音宏塊進(jìn)行優(yōu)化,同時(shí)保留清晰宏塊的完整性;ROI處理技術(shù),通過SIFT+差分圖象+運(yùn)動(dòng)目標(biāo)圖象測(cè)量的聯(lián)動(dòng),可對(duì)POI區(qū)域的宏塊編碼進(jìn)行加強(qiáng)、銳化、色階補(bǔ)償?shù)忍幚怼?/p>
500場(chǎng)模擬、百場(chǎng)實(shí)戰(zhàn),推動(dòng)衛(wèi)視網(wǎng)口碑逆襲
世界杯期間,衛(wèi)視網(wǎng)選擇接入騰訊云急速高清服務(wù)。“世界杯閉幕賽期間,在各家直播問題頻出的同時(shí),正是憑著騰訊云急速高清技術(shù)支持的衛(wèi)視影音,一舉實(shí)現(xiàn)了口碑的逆襲。”騰訊云中級(jí)工程師盧林表示。
騰訊云中級(jí)工程師盧林
盧林表示:“其實(shí),早在去年新年,騰訊云針對(duì)世界杯賽事場(chǎng)景深度學(xué)習(xí)就早已開始”。去年新年后,騰訊云急速高清服務(wù)開始相繼接入一些腦部游戲直播平臺(tái),而且取得了良好的反饋。
為了為世界杯場(chǎng)景打下急速高清的基礎(chǔ),騰訊云網(wǎng)路爬蟲籃球聯(lián)賽視頻超過500場(chǎng)。針對(duì)每場(chǎng)賽事視頻在高速運(yùn)動(dòng)場(chǎng)景、足球追隨模型訓(xùn)練、長(zhǎng)遠(yuǎn)鏡頭優(yōu)化、精彩回放ROI區(qū)域提高、觀眾表情捕捉等細(xì)節(jié)做一些視覺療效剖析以及優(yōu)化療效評(píng)估,構(gòu)建了世界杯最優(yōu)動(dòng)態(tài)編碼的模型。
英超比賽期間,騰訊云向龍珠直播的英超聯(lián)賽主動(dòng)推廣了急速高清服務(wù),并針對(duì)德甲的一些賽事逐漸降低了急速高清服務(wù);足總杯比賽期間,騰訊云利用構(gòu)架師及商務(wù)對(duì)新英體育進(jìn)行了急速高清服務(wù)的推廣。在多輪的測(cè)試及優(yōu)化下,騰訊云最終為世界杯的將至,打下了最堅(jiān)實(shí)的急速高清基礎(chǔ)。
“本次世界杯與衛(wèi)視網(wǎng)的合作,也正是由于急速高清技術(shù)”。盧林表示,這次世界杯前,衛(wèi)視決定在世界杯期間引入提高賽事清晰度的技術(shù),作為整個(gè)視頻云行業(yè)都十分看重的顧客,各云服務(wù)廠商都提供了自己的解決方案。
經(jīng)過幾輪測(cè)試,在與對(duì)手的PK過程中,騰訊云在分辨率控制、去模糊、去塊、反交錯(cuò)、運(yùn)動(dòng)搜索和分塊決策等模塊共進(jìn)行了幾十次服務(wù)升級(jí)和優(yōu)化,最終衛(wèi)視網(wǎng)最終選擇了騰訊云。數(shù)據(jù)顯示,在同樣的條件下,騰訊云-急速高清分辨率比友商少8%-10%左右。
除此之外,在本就時(shí)間急迫的世界杯前夕,騰訊云還掏出了全新的私有化方案,在衛(wèi)視網(wǎng)搭一整套騰訊云急速高清轉(zhuǎn)碼集群,支持衛(wèi)視網(wǎng)世界杯期間CCTV5頻道直播,RTMP/FLV推拉源流,轉(zhuǎn)碼處理后支持衛(wèi)視RTMP/FLV/HLS拉流。
最終,在世界杯開鑼前,騰訊云兼容了顧客硬件設(shè)備以及軟件代碼模塊的各類適配要求。目前,這條方案的各項(xiàng)服務(wù)指標(biāo)一切正常,出流療效也超出預(yù)期,上映療效對(duì)比其他平臺(tái)優(yōu)勢(shì)顯著。
聯(lián)接視頻產(chǎn)業(yè),騰訊云AI驅(qū)動(dòng)行業(yè)駛向快車道
2017年是各行業(yè)強(qiáng)監(jiān)管的重要轉(zhuǎn)折黑科技監(jiān)控視頻12分鐘,直播、視頻行業(yè)同樣這么。在監(jiān)管壓力、內(nèi)容創(chuàng)新的要求下,步入“下半場(chǎng)”的直播行業(yè)怎樣通過創(chuàng)新增加企業(yè)資金壓力,提高行業(yè)競(jìng)爭(zhēng)力,是企業(yè)急待解決的問題。
去年一月份發(fā)布的《2017中國(guó)網(wǎng)路演出(直播)發(fā)展報(bào)告》中顯示,2017年我國(guó)網(wǎng)路直播市場(chǎng)整體產(chǎn)值規(guī)模達(dá)到304.5萬元,比2016年的218.5萬元下降39%。網(wǎng)路直播早已成為網(wǎng)路文化內(nèi)容供應(yīng)、技術(shù)創(chuàng)新、商業(yè)模式創(chuàng)新的代表,是網(wǎng)路文化市場(chǎng)重要組成部份。
看似下降中的直播行業(yè),雖然也急切須要以技術(shù)驅(qū)動(dòng)變革升級(jí)。據(jù)了解,目前有好多的視頻平臺(tái)依然處于燒錢階段;在全民UGC時(shí)代,直播平臺(tái)須要愈發(fā)智能的內(nèi)容編輯及內(nèi)容初審;據(jù)悉,高手氣、高并發(fā),帶來巨額的帶寬成本,也是行業(yè)迫需解決的問題。
在去年“云+未來”峰會(huì)上,騰訊云發(fā)布了全新的音視頻AI產(chǎn)品解決方案—騰訊雙眸,除了將急速高清技術(shù)列入,還在視頻業(yè)務(wù)安全方面加入了人工智能,通過騰訊高效的圖象辨識(shí)及關(guān)鍵詞過濾等AI技術(shù),騰訊雙眸可為用戶提供視頻涉毒、暴恐辨識(shí)、涉政監(jiān)控、關(guān)鍵詞過濾等智能服務(wù)。
截止目前,騰訊視頻云早已服務(wù)了超過80%的腹部直播平臺(tái)。其中,騰訊音視頻AI產(chǎn)品解決方案,除了為在線視頻、泛娛樂直播、短視頻等行業(yè)有效節(jié)約帶寬資源黑科技監(jiān)控視頻12分鐘,提高觀看體驗(yàn),更幫助企業(yè)節(jié)約了成本,保障了業(yè)務(wù)安全。
此前,騰訊云媒體及營(yíng)運(yùn)商業(yè)務(wù)總總監(jiān)李郁韜表示:“騰訊云將輸出能力,以視頻所能,為你而+”。相信在騰訊云急速高清技術(shù)以及音視頻AI解決方案的推動(dòng)下,視頻行業(yè)也將加速駛向新的快車道。