神經(jīng)技術(shù)公司MindMaze近日公布了一個(gè)可使用腦電波進(jìn)行操控的虛擬現(xiàn)實(shí)游戲系統(tǒng)——MindLeap。它原先的專屬系統(tǒng)是為了在醫(yī)學(xué)領(lǐng)域的運(yùn)用而開(kāi)發(fā)的，MindLeap可以感應(yīng)到人類大腦與肌肉的活動(dòng)，在虛擬現(xiàn)實(shí)與擴(kuò)增實(shí)境中使用腦波控制與動(dòng)態(tài)捕捉鏡頭進(jìn)行游戲。

這家來(lái)自瑞士的公司趁國(guó)外軟件的Oculus所掀起的虛擬現(xiàn)實(shí)熱潮推出自己的產(chǎn)品，并在公布這款新產(chǎn)品的同時(shí)附帶宣布自己獲得了850萬(wàn)美元的天使投資，而MindMaze公司將會(huì)把這筆資金用于醫(yī)學(xué)領(lǐng)域產(chǎn)品的開(kāi)發(fā)，它的技術(shù)將可以幫助有神經(jīng)功能缺陷的患者更快地恢復(fù)健康。這回也是該公司首次將這款腦波控制虛擬現(xiàn)實(shí)裝置MindLeap應(yīng)用在游戲領(lǐng)域。

MindMaze方面表示，這個(gè)系統(tǒng)讓玩家們?cè)谕嬉恍┰缫咽煜さ挠螒驎r(shí)得到了一種新的體驗(yàn)。裝有“神經(jīng)護(hù)目鏡”和3D動(dòng)作攝像頭的頭戴式顯示器在幾個(gè)月后就可以使用。這款使用腦波操控解放雙手的虛擬現(xiàn)實(shí)設(shè)備可以在多個(gè)游戲平臺(tái)上使用，包括有Xbox與PlayStation(不過(guò)開(kāi)發(fā)商沒(méi)有明確透露MindLeap究竟是應(yīng)用于PS4與Xbox One平臺(tái)還是更老一些的系統(tǒng))，iOS與安卓平臺(tái)也可適用。

MindLeap所使用的開(kāi)發(fā)引擎將會(huì)在數(shù)個(gè)月后推出的軟件開(kāi)發(fā)工具包中提供給游戲開(kāi)發(fā)者們，而這個(gè)系統(tǒng)自身也將在今年推出。

我們?cè)?015年的游戲開(kāi)發(fā)者大會(huì)上與MindMaze公司進(jìn)行了一次會(huì)面，探討了神經(jīng)學(xué)技術(shù)如何能應(yīng)用到虛擬現(xiàn)實(shí)之中。

MindLeap頭戴式顯示器讓玩家可以進(jìn)行無(wú)手柄控制的虛擬現(xiàn)實(shí)游戲

從醫(yī)學(xué)設(shè)備到游戲設(shè)備

MindMaze的創(chuàng)始人兼首席執(zhí)行官泰杰·塔迪博士(Dr. Tej Tadi)表示，任何給定的動(dòng)作都會(huì)讓大腦做出反應(yīng)。比如移動(dòng)一下手臂，在這個(gè)動(dòng)作進(jìn)行之前的毫秒之間，大腦就可以進(jìn)行這個(gè)指令的傳輸。能夠追蹤大腦與肌肉的運(yùn)動(dòng)，讓這間公司的設(shè)備可以收集到大腦傳輸給手臂讓它進(jìn)行移動(dòng)的信號(hào)。據(jù)這位神經(jīng)生物學(xué)家介紹，人類的動(dòng)作、運(yùn)動(dòng)以及看到和觸摸到的所有東西，全部都會(huì)整合到大腦的同一個(gè)地方，而MindMaze的設(shè)備就是從這個(gè)起源處開(kāi)始追蹤信號(hào)的。

因此，把握信號(hào)從大腦的這個(gè)地方傳出的時(shí)機(jī)就是MindMaze公司技術(shù)的關(guān)鍵。塔迪博士介紹說(shuō)，我們知道觸感傳遞到大腦的時(shí)間為20毫秒，而視覺(jué)傳遞到大腦的時(shí)間則為70毫秒。知道了這些固定的時(shí)間之后，“就能夠讓用戶的體驗(yàn)變得完美”。

而MindLeap設(shè)備背后的創(chuàng)意則在于，它可以將腦波追蹤元素與現(xiàn)在的虛擬現(xiàn)實(shí)和擴(kuò)增實(shí)境技術(shù)結(jié)合起來(lái)，為游戲平臺(tái)的游戲操控創(chuàng)造出新的維度。

“現(xiàn)在，我們可以在它里面加入心理健康的元素。”塔迪博士說(shuō)道，“你在訓(xùn)練大腦的同時(shí)也在監(jiān)視著大腦的活動(dòng)。這讓我們可以在游戲黃總增加近一些全新的元素。內(nèi)容創(chuàng)造者們?nèi)缃窬陀辛撕芏嗫梢园l(fā)揮的空間，這些空間多到令人難以置信。”

MindLeap的動(dòng)作感知攝像頭

MindLeap平臺(tái)

MindMaze公司利用了多個(gè)系統(tǒng)來(lái)建造這個(gè)游戲平臺(tái)——動(dòng)作捕捉系統(tǒng)、大腦閱讀系統(tǒng)、集成平臺(tái)以及其他的一些高科技系統(tǒng)。與所有虛擬現(xiàn)實(shí)平臺(tái)一樣，頭戴式顯示器則是其中的核心部分。這個(gè)顯示器的正面裝備了動(dòng)作捕捉攝像頭與深度傳感器，可以將虛擬現(xiàn)實(shí)與擴(kuò)增實(shí)境混合在一起。這個(gè)設(shè)備的原型看起來(lái)就像是安裝了眾多傳感器的無(wú)檐便帽，不過(guò)塔迪博士表示，最終版的設(shè)備將會(huì)更像是帶了護(hù)目鏡的頭巾。

這個(gè)平臺(tái)同時(shí)還裝備有一個(gè)可以傳輸3D動(dòng)作捕捉數(shù)據(jù)的無(wú)線平臺(tái)，用以補(bǔ)充頭戴式顯示器的追蹤功能。它可以進(jìn)行頭部運(yùn)動(dòng)追蹤、全3D點(diǎn)云的身體動(dòng)作追蹤以及骨架識(shí)別式的身體運(yùn)動(dòng)追蹤。塔迪博士稱這與微軟公司的Kinect體感系統(tǒng)有一些相似，不過(guò)他們針對(duì)原先的醫(yī)療應(yīng)用而做出一些調(diào)整。

“我們不得不從零開(kāi)始打造它。你們已經(jīng)見(jiàn)識(shí)過(guò)Kinect了對(duì)不對(duì)?如果你們將Kinect放在病人的面前，離開(kāi)它兩米之外就無(wú)效了，或者你坐在床鋪上，它也無(wú)法追蹤你的動(dòng)作。”塔迪博士說(shuō)道，“因此，我們不得不自己來(lái)設(shè)計(jì)它。”

他們最終的目標(biāo)是讓這個(gè)設(shè)備的外型更為小巧，并且可以在移動(dòng)設(shè)備上發(fā)揮作用。

“這就需要有一個(gè)無(wú)線攝像頭，可以將3D動(dòng)作捕捉的數(shù)據(jù)流傳輸?shù)侥愕闹悄苁謾C(jī)上。這樣你就能用給你的平板電腦設(shè)備來(lái)捕捉動(dòng)作。”塔迪博士說(shuō)道，“因此我們想要做到這一點(diǎn)，希望讓它能夠支持智能手機(jī)。這是我們前進(jìn)的方向，也是我們下一個(gè)將要實(shí)現(xiàn)的目標(biāo)。”

MindLeap的大腦追蹤技術(shù)在多用戶條件下的使用演示

該未來(lái)性技術(shù)的未來(lái)

在未來(lái)的六個(gè)月之內(nèi)，MindLeap的軟件開(kāi)發(fā)工具包就將發(fā)布。它將包含有軟件、護(hù)目鏡以及各個(gè)攝像頭。不過(guò)MindMaze公司尚未公布軟件開(kāi)發(fā)工具包的價(jià)格。

塔迪博士表示，MindLeap是首個(gè)將虛擬現(xiàn)實(shí)、擴(kuò)增實(shí)境、3D動(dòng)作捕捉以及神經(jīng)學(xué)技術(shù)同時(shí)應(yīng)用于游戲領(lǐng)域的設(shè)備。

“你們現(xiàn)在已經(jīng)看到了這個(gè)設(shè)備所具有的能力。我們的下一步就是與內(nèi)容創(chuàng)造者和游戲開(kāi)發(fā)商合作。我們將會(huì)向他們提供開(kāi)發(fā)組件，這樣他們就可以為這個(gè)設(shè)備創(chuàng)造一些東西。”他解釋到，“我們想要做的是讓它成為一種開(kāi)源設(shè)備。我們還想讓它成為一種跨平臺(tái)的無(wú)線設(shè)備。這樣人們就能以一種更為精準(zhǔn)的新方式來(lái)體驗(yàn)游戲。”