7月26日,由愛奇藝與上方傳媒主辦的老段說智能硬件第一期沙龍——《VR生態(tài)圈兒》在北京上方花園舉行,百度、阿里、騰訊、優(yōu)酷、搜狐、樂視、暴風(fēng)、PPTV等互聯(lián)網(wǎng)公司;小米、華為、聯(lián)想、長虹、兆馳等相關(guān)軟硬件公司;相關(guān)內(nèi)容拍攝制作公司、游戲公司、媒體和科研機(jī)構(gòu)等200多家單位參加會議。
美國凌感科技(杭州)總經(jīng)理張宏在會上進(jìn)行了演講。
以下為演講全文(現(xiàn)場速記):
張宏:凌感科技有兩個團(tuán)隊,一個在美國硅谷,一個在杭州。我負(fù)責(zé)杭州這一塊,杭州這一塊也是研發(fā)團(tuán)隊,主要是應(yīng)用層面的研發(fā)。硅谷主要是硬件和底層算法的研發(fā)。我們的產(chǎn)品目前也是VR頭盔,這個頭盔有兩個特性:一個是移動的,第二個從交互方面來說有專門的三維手勢交互,這是非常突出的一點。目前這個產(chǎn)品會在今年年底推出量產(chǎn)版,我們今年5月份在Kickstarter做了一個眾籌,籌了大概30多萬美金。產(chǎn)品的名字叫Impression PI,印象湃,圓周率的那個Pi。這里我很快介紹一下公司的情況,這次主要講技術(shù),后面馬上講干貨。我們的團(tuán)隊基本上都是從美國回來的,我以前在游戲行業(yè),有些老朋友都認(rèn)識我。我們公司2013年成立,完成了Pre A輪的融資。
VR的四個維度
下面我分享一下我們對VR技術(shù)上的一些看法,我們認(rèn)為VR有四個維度,或者說四個要素:第一個,需要有內(nèi)置的高性能的慣性傳感器,這個傳感器給到一個比較低的延遲,它能快速的跟蹤頭部的移動,知道你頭的移動的方向。第二個是無限制3D位置跟蹤,目前來說大部分VR是要求坐在固定的位置上,比如坐在椅子上,非常局限的空間里。不過既然叫做移動設(shè)備的話,我們認(rèn)為VR也是可以戴著比較自由的在一個范圍內(nèi)進(jìn)行移動,而不是固定的位置上。第三個,交互是非常重要的一塊,VR在輸出方面已經(jīng)做了非常大的提高,全屏360度的,全新的沉浸式體驗,但是在輸入方面相對是落后的,我們還在用以前的方式來對VR進(jìn)行操作。我們覺得VR需要全新的交互方式。第四個,VR和AR這兩個技術(shù)存在很久了,到目前為止,我覺得可能是比較好的時機(jī),AR可以和VR融合,產(chǎn)生更多的應(yīng)用或者內(nèi)容出來。
所以我們的產(chǎn)品特性從這四個方向來做,我們具有傳感器的技術(shù),AR、VR融合的技術(shù),我們團(tuán)隊的核心其實更主要是在計算系統(tǒng)方面,我們的8位博士都是計算機(jī)算法方面的專家。
我剛才講到我們的核心技術(shù),其中最主要的一點是在三維輸入方面,我這里比較詳細(xì)分享我們在交互方面的技術(shù)?傮w來說,我們認(rèn)為做到這幾塊,一是輸入,輸入方面我們通過手勢進(jìn)行交互,完全是自然的。因為我們看到好多玩家或者是體驗者,戴上VR頭盔之后,第一個反應(yīng)就是拿手去抓一個東西,因為已經(jīng)看到一個全景的空間,很自然想用手去摸,而不是用鍵盤或者觸摸屏的這種方式。第二個就是位置跟蹤,剛才提到了需要比較自由跟移動的空間,能跟蹤你的位置,根據(jù)不同的位置渲染不同的環(huán)境。第三個,AR這一塊怎么和VR結(jié)合。我們其實跟大家做的稍微有不一樣,我們有一個自己的硬件,目前來說是一個板子,以后也許會集成到芯片上。這塊板子上面有幾個核心器件,有兩個攝像頭,是集成的彩色攝像頭和紅外攝像頭,我們并不用手機(jī)上的IMU,我們認(rèn)為手機(jī)上的IMU還不夠強(qiáng)大,這樣我們把大部分的信號處理和計算都在板子上做掉了。因為如果用手機(jī)來做,功耗、電池上面都有問題。
三維輸入, AR和VR融合是未來的方向
剛才講到三維輸入,三維輸入的硬件其實可以分為三大類,結(jié)構(gòu)光,光飛時間TOF,和多角成像。大家比較熟悉的VR公司就是Oculus,他們收購了兩家跟交互有關(guān)的公司。一個是剛剛完成的,叫Pebble,以色列公司;還有一家Nimble Sense, 美國公司,這兩家公司都是做手勢交互的,Nimble Sense用光飛技術(shù)做的,TOF,穩(wěn)定性非常強(qiáng),但是功耗大。Pebble 是采用機(jī)構(gòu)光的技術(shù),更適合在較遠(yuǎn)距離上的交互?赡苡腥藭䥺,我們跟Leap Motion 有什么區(qū)別?他們和我們一樣也是用的多角成像的技術(shù)。但我們比他做得早,更早我們就在安卓的移動平臺上做,Leap Motion的方案主要還在PC上面。
剛才講到我們認(rèn)為的四個要素。我們這個板上有兩組攝像頭來幫助實現(xiàn),這個攝像頭其實可以做兩個事情,因為我們在VR頭盔里看到前面的景象已經(jīng)在360度的虛擬場景當(dāng)中,但是你看不到周圍的真實場景。你說要喝杯水,水在哪里?你其實看不到。我們的前置攝像頭可以拍下來給你看到,這個應(yīng)用就是第一個可以跟蹤你,第二個可以作為AR的疊加,3D建模,建模到這個應(yīng)用里面,一個游戲場景很方便把那些東西做進(jìn)去互相可以進(jìn)行操作,這是AR和VR未來的一個方向。
所以在產(chǎn)品定位方面,我們看到圖上是現(xiàn)在VR幾大類的產(chǎn)品。我們的定位,目前來說更接近Oculus Rift 加Nimble Sense。在移動和用戶體驗上面我們畫這樣一個坐標(biāo),橫軸是移動性,縱軸是VR的能力,四個要素。目前來說,Oculus的交互還是做得不錯,但是這個方案,移動上面其實相對比較弱;移動做得比較好的三星Gear VR ,交互和AR疊加這一塊是相對比較弱的,我們的方向就是在這個點,第一象限,好的交互以及較強(qiáng)的移動性。
這里有個我們的產(chǎn)品演示,視頻就不放了,但是我可以大概解釋一下。大家可能做計算機(jī)圖形的會知道,全球計算機(jī)圖形處理方面最著名的一個會議,SIGGRAPH,每年夏天都在洛杉磯舉行,下個月在洛杉磯有展位展示我們這個產(chǎn)品演示。我們這個入選了SIGGRAPH 創(chuàng)新比賽的top10。我解釋一下,左下方有一個小圖,一個觀眾跑到博物館里,他看到一個兵馬俑,他看到的兵馬俑是實物,戴上我們這個VR頭盔,在現(xiàn)實的兵馬俑之前可以疊加一層虛擬的東西,就是有點像AR,是彩色的,呈現(xiàn)出來的是彩色的兵馬俑,右邊會出來一個虛擬的控制面板,可以用手去直接控制它,假設(shè)我想看到這個兵馬俑2000多年前的樣子,我用手勢轉(zhuǎn)動之后整個畫面切換到完全VR的場景,同時,你可以轉(zhuǎn)過你的頭看另外一些東西,看到原來的場景怎么樣,他們怎么來制作的,還可以交互,你還是用到手,這個視頻是截圖,你可以用手抓了一把劍直接遞給兵馬俑,這就是現(xiàn)實與虛擬之間的疊加,這個完全體現(xiàn)了我們產(chǎn)品追尋的方向,上面說到的四個要素,頭部跟蹤、位置跟蹤、三維的交互還有AR的疊加。
我們目前的產(chǎn)品大概是這樣的Roadmap,我們第一個產(chǎn)品是手機(jī)版的,這是一個過渡產(chǎn)品。我們手機(jī)版支持的手機(jī)型號比較少,我們想保證比較好的用戶體驗,說老實話,VR這一塊對于手機(jī)要求是比較高的,不管從顯示屏還是從它里面的計算能力,還是從功耗來說都是要求比較高的。我們認(rèn)為最終的產(chǎn)品還是一體機(jī),剛才幾位嘉賓說到的,一體機(jī)這是一個方向,我們明年1季度會出一體機(jī)。剛才講到生態(tài)。我們做VR的,當(dāng)然會有生態(tài)、有軟件、有內(nèi)容,有外設(shè),有很多東西,我們作為一個創(chuàng)業(yè)公司只能有一個點做得比較好,我們提供的就是VR的三維交互,還有位置跟蹤、AR疊加這樣的一個體驗。目前VR還是比較早期的市場,大家一起努力,一起來把這個事情做好做大。謝謝大家!