去年的MWC,F(xiàn)acebook CEO馬克·扎克伯格登臺演講
聲網(wǎng)作為全球首個VR AR實時通信云服務商,受邀參加2017移動世界大會(MWC),并在大會中就VR和AR領(lǐng)域中的實時通信技術(shù)發(fā)展及應用發(fā)表了演講。
在此次大會上,VR和AR是一大熱點。但與去年不同的是,關(guān)注焦點從硬件轉(zhuǎn)向視覺與內(nèi)容的增強上,除了游戲領(lǐng)域,虛擬增強現(xiàn)實可能會在教育、醫(yī)療、建筑等更多領(lǐng)域嶄露頭角。三星 C-Labs 實驗室展出針對視障患者的智能輔助應用 Re!úmǐno、無顯示器 PC 瀏覽眼鏡Monitorless、一個 VR 家居裝飾解決方案VuildUs、以及一個 360 度旅游體驗平臺traVRer。移動設(shè)備方面,各大廠商的旗艦機型大多用上了雙攝像頭,這對于未來的 AR 發(fā)展是有實實在在的好處的。雙攝像頭中如果有一個負責景深處理,那么 AR 則可先顯示更多的信息。
VR和AR在2016年,突然掀起了一股創(chuàng)業(yè)潮,盡管這個行業(yè)其實在國外已經(jīng)發(fā)展了幾十年。這股狂潮持續(xù)到2016年底,大家開始反思,應該如何正確面對這個行業(yè)。
風口掀起的時候,大多數(shù)從業(yè)者走的是游戲娛樂方向,賣硬件、研發(fā)游戲,受制于基礎(chǔ)設(shè)施體驗并不好,消費者大多只是體驗,實際并不買單。但是,有這樣一些行業(yè),VR和AR卻有了比較好的應用場景。
AR全息投影的演講直播,讓聽眾有沉浸式的體驗
AR模擬現(xiàn)場指導工程作業(yè)、維修,消除時空上的阻隔。
還有一些初具雛形的VR應用案例,協(xié)同設(shè)計
VR直播
醫(yī)學實操教學,與此類似的有軍方的戰(zhàn)斗教學。
以上應用場景,都涉及到人與人之間的實時溝通、協(xié)同作業(yè),他們面臨的巨大挑戰(zhàn)是,所有AR/VR的實時交互數(shù)據(jù),都需要通過互聯(lián)網(wǎng)來進行傳輸。
VR/AR的實時通信云服務有很多難點。拿VR視頻來說,它是360度的全景視頻,目前做法是多角度拍攝再合成,因此對合成質(zhì)量和顯示質(zhì)量有極高要求,否則會導致畫面模糊、錯位。同時,VR視頻的數(shù)據(jù)量是普通視頻的數(shù)十倍,因此傳輸上,對網(wǎng)絡帶寬有極高要求。VR語音,需要配合視頻有方位感、立體感。一個設(shè)計錯誤的VR音頻系統(tǒng),不僅會使得臨場感急劇下降;錯誤的聲音定位,也會導致人的眩暈感。所以,在VR音頻處理上,需要多聲道,低延時的實時音頻通信系統(tǒng)。用戶間的實時溝通,對延時要求很苛刻,不能容忍較高的延時,業(yè)界公認一般是電信標準800ms。在巨大的數(shù)據(jù)量下,要實現(xiàn)低延時,是一個巨大的挑戰(zhàn)。
聲網(wǎng)在音視頻數(shù)據(jù)編解碼上高質(zhì)量低碼率,傳輸上依托于全球部署的SD-RTN?實時虛擬通信網(wǎng),智能路由選擇最快線路,使得VR/AR的實時通信數(shù)據(jù)能夠以極低延時傳輸?shù)綄Χ恕M瑫r,聲網(wǎng)的音頻編解碼專利技術(shù),在設(shè)計支持,就支持全方位多聲道的立體聲,讓VR語音用戶能夠聽聲辯位。
聲網(wǎng)作為全球首家VR/AR實時通信云服務商,能夠提供具有質(zhì)量保障的的實時通信服務。通過一個簡單易集成的SDK即可接入聲網(wǎng)的云服務,并能享受到聲網(wǎng)24小時的技術(shù)支持。VR和AR中,需要用戶之間是實時溝通、協(xié)同操作的場景,比如視頻指導、語音交流等功能,都可通過聲網(wǎng)的通信云服務來實現(xiàn)。目前,聲網(wǎng)Agora.io已經(jīng)與美國ARHT Media、樂視VR等多家行業(yè)代表廠商都有VR/AR和全息方面的多個項目合作。當然,由于VR和AR的數(shù)據(jù)傳輸量非常大,所以如何保證超大數(shù)據(jù)傳輸?shù)牡脱舆t,是需要不斷優(yōu)化突破的技術(shù)難點。
市場研究公司IDC預測稱,今年全世界在VR和AR上的花費將達139億美元,而2016年只有61億美元。游戲和娛樂讓VR和AR在2016年登上頂峰,卻因為同質(zhì)化的競爭,讓相當一批創(chuàng)業(yè)者跌到谷底。VR/AR行業(yè)的未來像什么,或許誰也說不清。但可以看到的是,VR/AR與實時通信結(jié)合的跨地域協(xié)作,正在讓這些行業(yè)的交互方式發(fā)生著巨大的改變,這些行業(yè)的地理障礙正在瓦解。