7月26日,由愛奇藝與上方傳媒主辦的老段說(shuō)智能硬件第一期沙龍——《VR生態(tài)圈兒》在北京上方花園舉行,百度、阿里、騰訊、優(yōu)酷、搜狐、樂(lè)視、暴風(fēng)、PPTV等互聯(lián)網(wǎng)公司;小米、華為、聯(lián)想、長(zhǎng)虹、兆馳等相關(guān)軟硬件公司;相關(guān)內(nèi)容拍攝制作公司、游戲公司、媒體和科研機(jī)構(gòu)等200多家單位參加會(huì)議。
美國(guó)凌感科技(杭州)總經(jīng)理張宏在會(huì)上進(jìn)行了演講。
以下為演講全文(現(xiàn)場(chǎng)速記):
張宏:凌感科技有兩個(gè)團(tuán)隊(duì),一個(gè)在美國(guó)硅谷,一個(gè)在杭州。我負(fù)責(zé)杭州這一塊,杭州這一塊也是研發(fā)團(tuán)隊(duì),主要是應(yīng)用層面的研發(fā)。硅谷主要是硬件和底層算法的研發(fā)。我們的產(chǎn)品目前也是VR頭盔,這個(gè)頭盔有兩個(gè)特性:一個(gè)是移動(dòng)的,第二個(gè)從交互方面來(lái)說(shuō)有專門的三維手勢(shì)交互,這是非常突出的一點(diǎn)。目前這個(gè)產(chǎn)品會(huì)在今年年底推出量產(chǎn)版,我們今年5月份在Kickstarter做了一個(gè)眾籌,籌了大概30多萬(wàn)美金。產(chǎn)品的名字叫Impression PI,印象湃,圓周率的那個(gè)Pi。這里我很快介紹一下公司的情況,這次主要講技術(shù),后面馬上講干貨。我們的團(tuán)隊(duì)基本上都是從美國(guó)回來(lái)的,我以前在游戲行業(yè),有些老朋友都認(rèn)識(shí)我。我們公司2013年成立,完成了Pre A輪的融資。
VR的四個(gè)維度
下面我分享一下我們對(duì)VR技術(shù)上的一些看法,我們認(rèn)為VR有四個(gè)維度,或者說(shuō)四個(gè)要素:第一個(gè),需要有內(nèi)置的高性能的慣性傳感器,這個(gè)傳感器給到一個(gè)比較低的延遲,它能快速的跟蹤頭部的移動(dòng),知道你頭的移動(dòng)的方向。第二個(gè)是無(wú)限制3D位置跟蹤,目前來(lái)說(shuō)大部分VR是要求坐在固定的位置上,比如坐在椅子上,非常局限的空間里。不過(guò)既然叫做移動(dòng)設(shè)備的話,我們認(rèn)為VR也是可以戴著比較自由的在一個(gè)范圍內(nèi)進(jìn)行移動(dòng),而不是固定的位置上。第三個(gè),交互是非常重要的一塊,VR在輸出方面已經(jīng)做了非常大的提高,全屏360度的,全新的沉浸式體驗(yàn),但是在輸入方面相對(duì)是落后的,我們還在用以前的方式來(lái)對(duì)VR進(jìn)行操作。我們覺得VR需要全新的交互方式。第四個(gè),VR和AR這兩個(gè)技術(shù)存在很久了,到目前為止,我覺得可能是比較好的時(shí)機(jī),AR可以和VR融合,產(chǎn)生更多的應(yīng)用或者內(nèi)容出來(lái)。
所以我們的產(chǎn)品特性從這四個(gè)方向來(lái)做,我們具有傳感器的技術(shù),AR、VR融合的技術(shù),我們團(tuán)隊(duì)的核心其實(shí)更主要是在計(jì)算系統(tǒng)方面,我們的8位博士都是計(jì)算機(jī)算法方面的專家。
我剛才講到我們的核心技術(shù),其中最主要的一點(diǎn)是在三維輸入方面,我這里比較詳細(xì)分享我們?cè)诮换シ矫娴募夹g(shù)?傮w來(lái)說(shuō),我們認(rèn)為做到這幾塊,一是輸入,輸入方面我們通過(guò)手勢(shì)進(jìn)行交互,完全是自然的。因?yàn)槲覀兛吹胶枚嗤婕一蛘呤求w驗(yàn)者,戴上VR頭盔之后,第一個(gè)反應(yīng)就是拿手去抓一個(gè)東西,因?yàn)橐呀?jīng)看到一個(gè)全景的空間,很自然想用手去摸,而不是用鍵盤或者觸摸屏的這種方式。第二個(gè)就是位置跟蹤,剛才提到了需要比較自由跟移動(dòng)的空間,能跟蹤你的位置,根據(jù)不同的位置渲染不同的環(huán)境。第三個(gè),AR這一塊怎么和VR結(jié)合。我們其實(shí)跟大家做的稍微有不一樣,我們有一個(gè)自己的硬件,目前來(lái)說(shuō)是一個(gè)板子,以后也許會(huì)集成到芯片上。這塊板子上面有幾個(gè)核心器件,有兩個(gè)攝像頭,是集成的彩色攝像頭和紅外攝像頭,我們并不用手機(jī)上的IMU,我們認(rèn)為手機(jī)上的IMU還不夠強(qiáng)大,這樣我們把大部分的信號(hào)處理和計(jì)算都在板子上做掉了。因?yàn)槿绻檬謾C(jī)來(lái)做,功耗、電池上面都有問(wèn)題。
三維輸入, AR和VR融合是未來(lái)的方向
剛才講到三維輸入,三維輸入的硬件其實(shí)可以分為三大類,結(jié)構(gòu)光,光飛時(shí)間TOF,和多角成像。大家比較熟悉的VR公司就是Oculus,他們收購(gòu)了兩家跟交互有關(guān)的公司。一個(gè)是剛剛完成的,叫Pebble,以色列公司;還有一家Nimble Sense, 美國(guó)公司,這兩家公司都是做手勢(shì)交互的,Nimble Sense用光飛技術(shù)做的,TOF,穩(wěn)定性非常強(qiáng),但是功耗大。Pebble 是采用機(jī)構(gòu)光的技術(shù),更適合在較遠(yuǎn)距離上的交互?赡苡腥藭(huì)問(wèn),我們跟Leap Motion 有什么區(qū)別?他們和我們一樣也是用的多角成像的技術(shù)。但我們比他做得早,更早我們就在安卓的移動(dòng)平臺(tái)上做,Leap Motion的方案主要還在PC上面。
剛才講到我們認(rèn)為的四個(gè)要素。我們這個(gè)板上有兩組攝像頭來(lái)幫助實(shí)現(xiàn),這個(gè)攝像頭其實(shí)可以做兩個(gè)事情,因?yàn)槲覀冊(cè)赩R頭盔里看到前面的景象已經(jīng)在360度的虛擬場(chǎng)景當(dāng)中,但是你看不到周圍的真實(shí)場(chǎng)景。你說(shuō)要喝杯水,水在哪里?你其實(shí)看不到。我們的前置攝像頭可以拍下來(lái)給你看到,這個(gè)應(yīng)用就是第一個(gè)可以跟蹤你,第二個(gè)可以作為AR的疊加,3D建模,建模到這個(gè)應(yīng)用里面,一個(gè)游戲場(chǎng)景很方便把那些東西做進(jìn)去互相可以進(jìn)行操作,這是AR和VR未來(lái)的一個(gè)方向。
所以在產(chǎn)品定位方面,我們看到圖上是現(xiàn)在VR幾大類的產(chǎn)品。我們的定位,目前來(lái)說(shuō)更接近Oculus Rift 加Nimble Sense。在移動(dòng)和用戶體驗(yàn)上面我們畫這樣一個(gè)坐標(biāo),橫軸是移動(dòng)性,縱軸是VR的能力,四個(gè)要素。目前來(lái)說(shuō),Oculus的交互還是做得不錯(cuò),但是這個(gè)方案,移動(dòng)上面其實(shí)相對(duì)比較弱;移動(dòng)做得比較好的三星Gear VR ,交互和AR疊加這一塊是相對(duì)比較弱的,我們的方向就是在這個(gè)點(diǎn),第一象限,好的交互以及較強(qiáng)的移動(dòng)性。
這里有個(gè)我們的產(chǎn)品演示,視頻就不放了,但是我可以大概解釋一下。大家可能做計(jì)算機(jī)圖形的會(huì)知道,全球計(jì)算機(jī)圖形處理方面最著名的一個(gè)會(huì)議,SIGGRAPH,每年夏天都在洛杉磯舉行,下個(gè)月在洛杉磯有展位展示我們這個(gè)產(chǎn)品演示。我們這個(gè)入選了SIGGRAPH 創(chuàng)新比賽的top10。我解釋一下,左下方有一個(gè)小圖,一個(gè)觀眾跑到博物館里,他看到一個(gè)兵馬俑,他看到的兵馬俑是實(shí)物,戴上我們這個(gè)VR頭盔,在現(xiàn)實(shí)的兵馬俑之前可以疊加一層虛擬的東西,就是有點(diǎn)像AR,是彩色的,呈現(xiàn)出來(lái)的是彩色的兵馬俑,右邊會(huì)出來(lái)一個(gè)虛擬的控制面板,可以用手去直接控制它,假設(shè)我想看到這個(gè)兵馬俑2000多年前的樣子,我用手勢(shì)轉(zhuǎn)動(dòng)之后整個(gè)畫面切換到完全VR的場(chǎng)景,同時(shí),你可以轉(zhuǎn)過(guò)你的頭看另外一些東西,看到原來(lái)的場(chǎng)景怎么樣,他們?cè)趺磥?lái)制作的,還可以交互,你還是用到手,這個(gè)視頻是截圖,你可以用手抓了一把劍直接遞給兵馬俑,這就是現(xiàn)實(shí)與虛擬之間的疊加,這個(gè)完全體現(xiàn)了我們產(chǎn)品追尋的方向,上面說(shuō)到的四個(gè)要素,頭部跟蹤、位置跟蹤、三維的交互還有AR的疊加。
我們目前的產(chǎn)品大概是這樣的Roadmap,我們第一個(gè)產(chǎn)品是手機(jī)版的,這是一個(gè)過(guò)渡產(chǎn)品。我們手機(jī)版支持的手機(jī)型號(hào)比較少,我們想保證比較好的用戶體驗(yàn),說(shuō)老實(shí)話,VR這一塊對(duì)于手機(jī)要求是比較高的,不管從顯示屏還是從它里面的計(jì)算能力,還是從功耗來(lái)說(shuō)都是要求比較高的。我們認(rèn)為最終的產(chǎn)品還是一體機(jī),剛才幾位嘉賓說(shuō)到的,一體機(jī)這是一個(gè)方向,我們明年1季度會(huì)出一體機(jī)。剛才講到生態(tài)。我們做VR的,當(dāng)然會(huì)有生態(tài)、有軟件、有內(nèi)容,有外設(shè),有很多東西,我們作為一個(gè)創(chuàng)業(yè)公司只能有一個(gè)點(diǎn)做得比較好,我們提供的就是VR的三維交互,還有位置跟蹤、AR疊加這樣的一個(gè)體驗(yàn)。目前VR還是比較早期的市場(chǎng),大家一起努力,一起來(lái)把這個(gè)事情做好做大。謝謝大家!