沉浸式實時視頻 開啟未來娛樂新境界
近年來隨著全球多國(guo)陸(lu)續開展(zhan)高速(su)數(shu)據(ju)基礎設施建設,以及設備制(zhi)造商承諾提(ti)供(gong)更加快速(su)、高效的聯網體(ti)驗,5G正逐(zhu)漸走入我(wo)們生(sheng)活的各(ge)個角落。5G是(shi)新一(yi)代蜂窩網絡標準,可(ke)實現(xian)更高的數(shu)據(ju)下載和上(shang)傳(chuan)速(su)度(du),相比現(xian)有已經采用了約十年的LTE標準前進了一(yi)大步。你可(ke)能在新聞或廣告中看過,5G將改變我(wo)們生(sheng)活和工作的方式(shi),但是(shi)怎樣改變呢?
騰訊已(yi)經(jing)基于5G開展(zhan)相關工(gong)作(zuo),我們看到了如何發揮這項技術的(de)潛(qian)力來升(sheng)級(ji)人們的(de)娛樂消費方式——它讓前所未有(you)的(de)真正的(de)沉浸(jin)式體驗成為可能。
事實(shi)上,過(guo)去一年的疫情環境已大大加速了高(gao)清視頻和沉浸式體驗在保(bao)持聯絡、放(fang)松身(shen)心、居家辦公以及遠(yuan)程醫療等領域的應用(yong)。
“我們過去一年經歷(li)的(de)(de)改變顯然會為(wei)許多個人和(he)企業帶(dai)(dai)來(lai)(lai)深遠(yuan)的(de)(de)影響,”騰訊杰出科(ke)學家、多媒體實驗室負責(ze)人劉(liu)杉博士表(biao)示:“人們已(yi)習慣了基于視(shi)頻和(he)多媒體的(de)(de)線上(shang)生活,因此(ci)我認為(wei)將(jiang)應用場景與(yu)視(shi)頻技術提升相結合(he)可以為(wei)5G時代拓展更(geng)多可能。增長的(de)(de)寬帶(dai)(dai)需求給全(quan)球網絡帶(dai)(dai)來(lai)(lai)更(geng)大壓(ya)力,視(shi)頻壓(ya)縮(suo)技術正變得越來(lai)(lai)越關鍵(jian)。”
5G和視頻技術將實現前所未有的真正的沉浸式體驗。
解(jie)鎖5G新(xin)時代的(de)關鍵是縮減視(shi)(shi)頻(pin)(pin)文件的(de)大小(xiao),這樣它們就不會阻(zu)塞網(wang)絡。我們的(de)工程師(shi)參與開發了新(xin)的(de)視(shi)(shi)頻(pin)(pin)編解(jie)碼標準(zhun),該技術可在(zai)保證(zheng)高(gao)清畫質的(de)情(qing)況(kuang)下將(jiang)視(shi)(shi)頻(pin)(pin)壓縮為適合串流(liu)和下載且易管理的(de)大小(xiao)。2020年(nian),騰(teng)訊參與制(zhi)定的(de)新(xin)一代國(guo)際視(shi)(shi)頻(pin)(pin)編解(jie)碼標準(zhun)Versatile Video Coding(通用視(shi)(shi)頻(pin)(pin)編碼,VVC)正(zheng)式發布。4K畫質視(shi)(shi)頻(pin)(pin)在(zai)最新(xin)標準(zhun)下的(de)大小(xiao)比(bi)在(zai)現有標準(zhun)下縮小(xiao)一半。
騰訊多年(nian)來(lai)積極參與(yu)國際視頻編(bian)解碼標(biao)準(zhun)的研發(fa)工(gong)作(zuo)。在這次全球通用的標(biao)準(zhun)制定中,騰訊有(you)超過100項技(ji)術提案被采(cai)納。
對(dui)大多數人而言,“壓縮(suo)”和“編解碼”之類的術語似乎過于(yu)專業和復雜。但你幾(ji)乎每天都在不知不覺(jue)地(di)使用(yong)此類技術。每當(dang)你播放或下載(zai)視(shi)頻時,這項技術都在背后默默支持。
騰訊多媒體實驗室認(ren)為,這一新的(de)視頻編解碼標(biao)準將重塑我們生(sheng)活的(de)方方面面,甚(shen)至有助于(yu)實現線上和(he)線下角(jiao)色的(de)相(xiang)互融合。
消費者和企業都將受益于升級后的視頻壓縮技術。
騰訊多媒體實驗室視(shi)頻(pin)(pin)編碼標準(zhun)化團隊表示,無論是電影(ying)、游戲還是在線教育(yu),多媒體娛樂(le)行業基(ji)本(ben)上都起始(shi)(shi)于(yu)視(shi)頻(pin)(pin)源。生成原始(shi)(shi)視(shi)頻(pin)(pin)后,就(jiu)需(xu)要使用視(shi)頻(pin)(pin)編解碼技術(shu)和(he)算法來(lai)無縫地存儲、傳輸、存取(qu)和(he)編輯視(shi)頻(pin)(pin)內容。因此(ci)需(xu)要建立統一的標準(zhun),確保視(shi)頻(pin)(pin)編解碼可以被(bei)世界各地不同(tong)的網絡和(he)視(shi)頻(pin)(pin)播放器(qi)識(shi)別。
VVC普(pu)及之后(hou),用戶(hu)只(zhi)用原來一半的(de)(de)時間(jian)就能(neng)下載高(gao)(gao)品質電影(ying),僅需一半帶寬(kuan)即(ji)可暢(chang)玩沉浸(jin)式網(wang)絡(luo)游戲。而對(dui)于企業而言,這(zhe)(zhe)意味著更快的(de)(de)速(su)度(du),更高(gao)(gao)的(de)(de)效率,以(yi)(yi)及更低的(de)(de)網(wang)絡(luo)成本。這(zhe)(zhe)樣每年可以(yi)(yi)節省數(shu)(shu)百萬(wan)甚至(zhi)數(shu)(shu)十億美元的(de)(de)成本。
新標準將不可能變為可能
新標準對(dui)豐富的(de)數字媒體創作(zuo)和(he)消費而言將會是極大的(de)推動(dong)力。
預計這一標準(zhun)最快今年(nian)可(ke)以實(shi)現商業化部署并支(zhi)持 8K 視頻。目(mu)前,受視頻大小(xiao)(xiao)和帶寬(kuan)限(xian)制,即(ji)使(shi)進行(xing) 4K串流也(ye)十分困難(nan)。VVC標準(zhun)可(ke)大幅提升視頻壓(ya)縮效率(lv),與現有(you)標準(zhun)相比,在輸(shu)出相同主觀質量視頻的(de)情況(kuang)下能夠(gou)使(shi)文件(jian)大小(xiao)(xiao)減少 40% - 50%。
超(chao)高(gao)清(qing)視頻不(bu)只適用于(yu)娛樂(le)領(ling)域。實(shi)際(ji)上,針對電子(zi)競技、云(yun)游(you)戲、社交媒(mei)體產(chan)品(pin)和生產(chan)力解決方案等關鍵領(ling)域的投入正(zheng)不(bu)斷(duan)增加。
如今,云游戲已發展為1,500億美元的巨大市場,玩家數量達到25億[1]?。更先進的下一代媒體技術成熟后,這一行業將迎來新一輪的急速爆發。與當前主要在智能手機、游戲主機和PC端下載玩的大部分游戲相比,云游戲只需要數據中心和傳送網絡,因此能夠為玩家和供應商節省大量成本。下一代視頻編解碼標準是打造互動性更強和沉浸式社交娛樂平臺的關鍵要素。
2019年,騰訊多媒體實驗室為“一部手機游云南”項目開發了裸眼虛擬現實全景式解決方案,用戶只需借助手機即可全方位體驗云南的迷人景色。云南省地處中國西南部,以其美麗景色和悠久歷史聞名于世。騰訊多媒體實驗室借助先進的多媒體技術,將文化遺產視頻內容整合到“游云南”手機App和微信小程序之內。游客在家中即可觀賞當地風景名勝和各種演出節目。疫情期間,多地政府頒布了隔離措施,而許多人借助此款App及小程序打破空間隔閡,線上“云游”各地美景。(閱讀此文了解云南如何運用科技:大數據和云計算定制暢游云南體驗)
游客可以通過“游云南”小程序中的VR直播觀看云南當地表演。
依托自身在編解碼(ma)技術和(he)算(suan)法方面的(de)(de)深厚積累,騰訊多媒體(ti)實驗(yan)室為此(ci)項目(mu)提供了(le)諸多支持。視頻壓縮的(de)(de)基礎是對(dui)不(bu)同幀(zhen)(zhen)之間的(de)(de)運動(dong)進(jin)(jin)行建模以(yi)及確定相(xiang)同幀(zhen)(zhen)內多個像素(su)的(de)(de)相(xiang)關(guan)性。據實驗(yan)室介紹,其研(yan)發(fa)成果(guo)廣泛應用于虛擬現實、增(zeng)強現實和(he)點云產品,依靠算(suan)法可(ke)以(yi)進(jin)(jin)一步壓縮而不(bu)降(jiang)低畫質的(de)(de)內容。這(zhe)一技術在旅(lv)游、教(jiao)育和(he)醫療等應用場景獲得了(le)廣泛好評。
從學術研究走向實際應用
VVC標(biao)準于2018年4月開始制(zhi)定(ding),這也是騰訊(xun)首次(ci)參與(yu)國際視頻編解碼標(biao)準制(zhi)定(ding)工作。
視(shi)頻(pin)編(bian)碼(ma)技術(shu)的(de)歷史比較(jiao)久(jiu)遠。此項技術(shu)在(zai)1980年代首次提出(chu)(chu),隨著技術(shu)創新也在(zai)不斷發展和進步(bu)。騰訊多媒體(ti)實驗室認為(wei)視(shi)頻(pin)編(bian)碼(ma)標準非(fei)常重要,因為(wei)只要使用視(shi)頻(pin)內(nei)容,就會涉及(ji)標準,而視(shi)頻(pin)的(de)使用量與(yu)日俱增。一份行業預測指出(chu)(chu),2021年互聯網(wang)視(shi)頻(pin)內(nei)容將占(zhan)據所有網(wang)絡流量的(de)82%。
一名團隊(dui)成員(yuan)表示(shi):“我們可以(yi)大膽(dan)想象,交流思(si)想,碰撞(zhuang)思(si)維,并將(jiang)想法變(bian)為現(xian)實。騰(teng)訊廣泛(fan)的(de)產品組合和業(ye)務領(ling)域使我們在將(jiang)學術研(yan)究成果向實際(ji)產品和應用進行(xing)轉化(hua)時(shi)享(xiang)有天(tian)然(ran)的(de)優勢。能夠解決實際(ji)問題讓我十分高(gao)興。”?
騰訊多媒體實驗室在2020 Techo Park開發者大會上展示其沉浸式媒體解決方案。
這一新標準將在全球廣泛應用,幫助騰訊實現更好的在線娛樂體驗。從騰訊云、騰訊視頻到微視、全民K歌、QQ 等眾多應用,視頻是騰訊產品的重要組成部分。高效強大的視頻編解碼標準將為整個騰訊產品線帶來新的發展契機。
十(shi)年(nian)前,4G技(ji)術(shu)給我(wo)們(men)帶來(lai)了(le)全新(xin)的(de)(de)(de)移動(dong)應用業態,催生了(le)多個價(jia)值數十(shi)億的(de)(de)(de)業務領域(yu)。劉杉認為(wei)5G的(de)(de)(de)影響(xiang)將有過之(zhi)而無不及。“未來(lai),我(wo)們(men)將迎來(lai)更加全面的(de)(de)(de)沉浸式用戶體驗,能夠(gou)更好地重(zhong)現(xian)現(xian)實(shi)世界。我(wo)們(men)正走在以融(rong)合藝術(shu)與(yu)技(ji)術(shu)的(de)(de)(de)方式來(lai)塑造人類未來(lai)的(de)(de)(de)最前沿。”
?
[1]?根據德(de)勤于2020年發布(bu)的“Cloud gaming and the future of social interactive media”?報告 。