2016年8月26-27日，由51CTO.com主辦的【W(wǎng)OT2016移動(dòng)互聯(lián)網(wǎng)技術(shù)峰會(huì)】在北京粵財(cái)JW萬豪酒店隆重召開。自2012年以來，WOT品牌大會(huì)秉承專注技術(shù)、服務(wù)技術(shù)人員的理念已經(jīng)成功舉辦十一屆，不僅積累了大量的專家資源，更獲得廣大IT從業(yè)者和技術(shù)愛好者的認(rèn)可和好評(píng)，并成為業(yè)界重要的技術(shù)分享及人脈拓展平臺(tái)。

在本次WOT2016移動(dòng)互聯(lián)網(wǎng)技術(shù)峰會(huì)上，RGBVR聯(lián)合創(chuàng)始人兼CTO任福新分享了主題為《VR直播的挑戰(zhàn)和關(guān)鍵技術(shù)》的演講，具體包括VR直播面臨的很多問題，從系統(tǒng)落地角度，拍攝、編碼壓縮、網(wǎng)絡(luò)傳輸和播放等各個(gè)環(huán)節(jié)進(jìn)行系統(tǒng)的設(shè)計(jì)和優(yōu)化。從用戶體驗(yàn)角度，需要在臨場感、沉浸感和互動(dòng)性三個(gè)方面一起發(fā)力，才能為用戶提供合格的VR直播。會(huì)后，51CTO記者采訪了任老師，他就VR直播技術(shù)的發(fā)展現(xiàn)狀、應(yīng)用場景、存在的實(shí)現(xiàn)難點(diǎn)和未來3-5年的發(fā)展目標(biāo)等話題進(jìn)行了詳細(xì)闡述。

嘉賓簡介

[[170604]]

任福新：之前做手機(jī)游戲，于2015年創(chuàng)立RGBVR并兼任CTO，專注于VR視頻方面的產(chǎn)品和技術(shù)研究，期間搭建國內(nèi)***VR直播秀場-小花秀。

目前，虛擬現(xiàn)實(shí)技術(shù)VR和VR直播這兩塊發(fā)展火爆，特別是VR直播成為2016年VR行業(yè)的熱點(diǎn)，得到大家的普遍看好。據(jù)艾媒咨詢公司的數(shù)據(jù)顯示，到2020年，VR直播的市場規(guī)模將達(dá)到550多億元，成為一個(gè)新興的藍(lán)海市場。

為什么VR直播從內(nèi)容方面可以脫穎而出，畢竟VR游戲和VR視頻是VR的兩個(gè)最重要的內(nèi)容。這是因?yàn)閂R的游戲體驗(yàn)成本相對(duì)比較高。而VR視頻的制作成本和拍攝的邏輯方式，從業(yè)者還處于摸索期。相比較而言，VR直播的創(chuàng)作成本比較低。目前，大家在VR上的直播嘗試，已經(jīng)有很多公司在做，但是成型的體驗(yàn)比較好的產(chǎn)品還沒有出來，仍處在萌芽期。

VR直播面臨的五大挑戰(zhàn)包括：1.適合VR的內(nèi)容形式與表演方式。2.拍攝高質(zhì)量(清晰、真實(shí))的VR視頻。3.分發(fā)和存儲(chǔ)高分辨率和高碼率的VR視頻對(duì)帶寬的要求較高。4.具體的呈現(xiàn)方式(設(shè)備質(zhì)量、算法)。5.直播的交互方式。

作為VR的一大助力，哪些內(nèi)容適合采用VR直播模式傳播

任老師認(rèn)為可以使用的行業(yè)很多，傳統(tǒng)適合做VR的內(nèi)容，同樣適合現(xiàn)在的VR直播。而且，原來不適合手機(jī)直播，PC直播的內(nèi)容，也將變得適合VR直播。在這方面，RGBVR已經(jīng)做了一些嘗試和探索，包括在不侵害當(dāng)事人隱私前提下的醫(yī)療行業(yè)手術(shù)直播，一些發(fā)布會(huì)的直播，事件和演唱會(huì)的直播等。相對(duì)于日常的電視直播方式，放到VR場景里面的直播，觀看者的視野更加開闊和清晰，對(duì)全場景盡在掌握。

《小花秀》是RGBVR推出的VR視頻直播互動(dòng)平臺(tái)，通過廣角3D等技術(shù)力求***呈現(xiàn)主播的表演，為用戶提供身臨其境的觀看體驗(yàn)。小花秀的***個(gè)嘗試是180度的3D直播，因?yàn)榇蟛糠秩丝碫R的時(shí)候，長期觀看習(xí)慣就是面前的角度，不會(huì)頻繁地扭頭來回看。之所以選用3D是因?yàn)檫@樣的立體效果非常重要，它讓你能夠看出來，物體離你有多遠(yuǎn)。這個(gè)和在真實(shí)生活，用戶看到的場景是一樣的，會(huì)產(chǎn)生一個(gè)真實(shí)的沉浸感。小花秀的國外對(duì)標(biāo)產(chǎn)品是美國的NextVR，NextVR主要的應(yīng)用場景是大型體育賽事和大型活動(dòng)，內(nèi)容量不是很大，每次使用一個(gè)專門的采訪車開到現(xiàn)場來做活動(dòng)直播。而小花秀也是采用3D方式呈現(xiàn)，希望這一產(chǎn)品可以讓更多人使用，降低用戶的使用成本。小花秀的運(yùn)作目標(biāo)是打造一個(gè)綜合的娛樂平臺(tái)，跟現(xiàn)在的手機(jī)直播一樣，最終每個(gè)喜歡它的用戶都可以收看，感受VR的魅力。

VR直播技術(shù)的實(shí)現(xiàn)難點(diǎn)

任老師提的VR直播技術(shù)的實(shí)現(xiàn)難點(diǎn)很多，包括從流程、拍攝端，傳輸?shù)皆贫朔职l(fā)，到播放端，頭盔，端到端，還有視頻的應(yīng)對(duì)，幾乎每一個(gè)環(huán)節(jié)都存在困難。但是，RGBVR團(tuán)隊(duì)已經(jīng)在小花秀上線前的測試過程中基本處理完各個(gè)“坑”了。

VR直播流程和普通直播流程很像，但要達(dá)到身臨其境的感覺，在頭盔端需要達(dá)到4K甚至更高的分辨率，所以整個(gè)流程對(duì)各個(gè)環(huán)節(jié)的要求都提高了。

VR直播環(huán)節(jié)需要具備的條件有：

1.合格的拍攝設(shè)備。

有的還會(huì)在設(shè)備內(nèi)完成圖像的部分處理，所以需要高性能的處理芯片。

• 多顆廣角鏡頭

• 傳感器同步

• 色彩、白平衡等參數(shù)一致

2.高效的視頻處理流程

• 拼接：將多鏡頭拍攝的畫面進(jìn)行亮度色彩調(diào)整、對(duì)齊、畸變矯正、投影到球面等一系列處理后，合成為一幅完整畫面的過程。

• 基于圖像特征control points控制點(diǎn)。

3.夠?qū)挼木W(wǎng)絡(luò)傳輸

• 盡量減少上行碼率

• 使用云轉(zhuǎn)碼生成多碼率視頻

• 根據(jù)客戶情況動(dòng)態(tài)調(diào)整下行碼率

4.舒適的頭顯設(shè)備

(1)移動(dòng)頭顯設(shè)備

• Cardboard

• GearVR

• 一體機(jī)

(2)參數(shù)指標(biāo)

• 分辨率：2K

• 計(jì)算能力：驍龍820

• 解碼能力：4K硬解

• 系統(tǒng)&交互：Daydream

• 其他：無畸變、無色散、角度夠大、延遲低

5.精心打造的直播應(yīng)用

(1)營造強(qiáng)沉浸感

• 全空間包圍

• 直播畫面大于人眼FOV

• 等比例還原

• Avatar形象提升代入感

(2)營造強(qiáng)臨場感

• 3D

(3)豐富方便的交互

• 語音聊天

• 送禮物

(4)方便的交互方式

在VR直播中，VR的交互是比較難實(shí)現(xiàn)的，因?yàn)橐坏┯脩舸魃狭祟^盔，呈現(xiàn)的交互方式和原來將完全不一樣。在PC時(shí)代，用戶已經(jīng)習(xí)慣了使用鼠標(biāo)、鍵盤和手機(jī)的觸摸屏進(jìn)行信息輸入。到了VR時(shí)代，現(xiàn)在還沒有一個(gè)很方便的輸入方式，可以讓大家把這個(gè)習(xí)慣傳承和延續(xù)下來。在VR世界里面，如果用戶想快速地輸入一些文字類內(nèi)容，包括一些交互是比較困難，這個(gè)是VR直播面臨的***一個(gè)問題，現(xiàn)在有一些方法仍在探索一些更新的交互點(diǎn)。

(5)其他：高性能解碼播放、適配各種手機(jī)和頭顯設(shè)備、低延遲、秒開、音畫一致等。

***在VR直播發(fā)展趨勢這塊，任老師看好三維場景、真實(shí)互動(dòng)和VR穿梭。上面介紹的這些形式僅僅是VR直播最基礎(chǔ)的形式。很多用戶往往都會(huì)想自由走動(dòng)，從不同角度觀看。未來的VR直播肯定能夠支持這點(diǎn)，使用三維場景真實(shí)還原現(xiàn)實(shí)環(huán)境，并提供更自然直接的交互方式。微軟、Replay Technologies的FreeD已經(jīng)在這些方面有些成果出來了。甚至像前段時(shí)間intel發(fā)布的Project Alloy宣傳片中展現(xiàn)的那樣，與環(huán)境發(fā)生真實(shí)交互。

未來3到5年，VR直播行業(yè)的發(fā)展前景

手機(jī)直播在這兩年變得非常的火，無論是什么類型的公司，比如互聯(lián)網(wǎng)公司、傳統(tǒng)公司和旅游公司，現(xiàn)在直播已經(jīng)成了一個(gè)標(biāo)配，成為大家傳遞信息的一種新方式，包括圖片，文字，視頻，還有直播，這個(gè)是交換信息傳遞的一種進(jìn)步方式。VR就是下一個(gè)，就是一系列的信息傳遞之后的下一個(gè)方式。這種方式中，VR直播將扮演非常重要的一個(gè)角色。它會(huì)深入到生活的方方面面，深入到各個(gè)行業(yè)里面去，也會(huì)慢慢成為標(biāo)配，會(huì)成為大家日常生活當(dāng)中獲取知識(shí)并與親朋好友交流的一種標(biāo)準(zhǔn)方式。

從國內(nèi)發(fā)展行業(yè)看，所有大的手機(jī)廠商都在規(guī)劃這個(gè)未來發(fā)展并推出自己的產(chǎn)品，無論是適配VR的頭盔手機(jī)，還是自己去生產(chǎn)VR頭盔。而且，國外的Facebook，谷歌，也在做這個(gè)事情。相信有這些大廠商的推動(dòng)，VR直播的發(fā)展速度將會(huì)更快。

采訪視頻鏈接地址：http://v.pptvyun.com/show/0a2dnq6ao6Cimq2L4K2enK_hoaecnKaXpw.html