文/VR陀螺 小鉆風(fēng)

今日,中國(guó)從事腦機(jī)接口(BCI)10余年的研發(fā)商博�？敌�布完成過(guò)億元B輪融資,紅杉中國(guó)獨(dú)家領(lǐng)投。 腦機(jī)接口現(xiàn)已成為當(dāng)今最熱門(mén)的話題,造火箭的馬斯克、Facebook的小扎都是其狂熱粉絲。 腦機(jī)接口不只是深得巨頭看好,越來(lái)越多的初創(chuàng)公司也開(kāi)始從事相關(guān)研究,來(lái)自法國(guó)的神經(jīng)技術(shù)初創(chuàng)公司NextMind便是其中之一。

創(chuàng)始人Sid Kouider此前是認(rèn)知神經(jīng)科學(xué)教授,積累了大量有關(guān)無(wú)創(chuàng)解碼神經(jīng)信號(hào)的專(zhuān)業(yè)知識(shí),希望開(kāi)發(fā)出能通過(guò)視覺(jué)皮層視野解碼視覺(jué)意識(shí),進(jìn)行腦機(jī)交互的產(chǎn)品,于是成立了NextMind。 NextMind曾在CES上展出腦機(jī)接口設(shè)備,引發(fā)大量關(guān)注。今天,陀螺君想要帶大家體驗(yàn)的便是NextMind這款腦機(jī)接口設(shè)備,借這款產(chǎn)品帶大家開(kāi)啟腦機(jī)接口的大門(mén)。

售價(jià)399美元,不足巴掌大小的腦機(jī)接口設(shè)備N(xiāo)extMind有何特別之處? 

腦機(jī)接口設(shè)備N(xiāo)extMind裝置非常簡(jiǎn)單,小巧簡(jiǎn)潔,易安裝,易操作,僅包含三個(gè)部分:傳感器、頭帶以及USB電纜,其核心是傳感器,也就是進(jìn)行腦機(jī)連接的接口。

傳感器外形設(shè)計(jì)與蜘蛛類(lèi)似,通體黑色,由一個(gè)包含傳感器電路的圓形主體與包含九個(gè)EEG(腦電波)傳感器的弧形支架組成。

從傳感器的凹面看,可以清楚的看到九個(gè)類(lèi)似小腳的EEG傳感器,交流數(shù)據(jù)由這些傳感器直接向主體傳達(dá)。  圓形主體的側(cè)面,一側(cè)設(shè)有USB-C端口用于充電,另一側(cè)設(shè)有按鈕和指示燈,該按鈕用于打開(kāi)/關(guān)閉NextMind,以及進(jìn)行藍(lán)牙配對(duì)。 續(xù)航時(shí)間較長(zhǎng),充滿電需2個(gè)小時(shí),可持續(xù)使用時(shí)間約為8小時(shí)。據(jù)介紹,傳感器對(duì)電池的管理方式較為智能,閑置幾秒后便會(huì)處于待機(jī)狀態(tài),因此在佩戴前最好提前檢查是否處于開(kāi)機(jī)狀態(tài)。 NextMind規(guī)格如下:

圖源:VR陀螺 

NextMind傳感器可與PC、Mac兼容。與NextMind兼容并不需要很高配置,但如需與VR頭顯一起使用,則需使用支持VR的PC。

圖源:VR陀螺

需要注意的是,NextMind僅與PC、Mac兼容,目前尚未支持Android系統(tǒng)。這意味NextMind與Oculus共同使用時(shí),需使用Link進(jìn)行PC連接,不可直接與Quest獨(dú)立使用。 有猜測(cè)認(rèn)為,未來(lái)可能會(huì)通過(guò)藍(lán)牙連接的方式增加對(duì)獨(dú)立VR頭顯的支持,運(yùn)行時(shí)可能會(huì)將其移植至Android系統(tǒng),并對(duì)移動(dòng)系統(tǒng)進(jìn)行優(yōu)化。 NextMind現(xiàn)可在全球多個(gè)地區(qū)購(gòu)買(mǎi),售價(jià)399美元起。 

易安裝,可與VR頭顯配合使用的NextMind如何工作? 

NextMind的安裝很簡(jiǎn)單,無(wú)需任何技巧,核心只需做到讓傳感器緊貼后腦勺,別讓頭發(fā)擋住,以及綁緊點(diǎn),別讓它滑動(dòng)即可。 使用頭帶時(shí),只需將傳感器與頭帶連接,戴上頭帶后確保傳感器保持在頸背,佩戴好頭帶后,輕輕地進(jìn)行上下調(diào)整,使EEG傳感器觸角與頭骨部分的皮膚相連接(而不是頭發(fā)),讓從大腦讀取的數(shù)據(jù)更為可靠。

如果與頭顯一起使用,不使用頭帶,而是將傳感器直接連接到設(shè)備后部,戴上頭顯后,確保其保持在頸背位置。

傳感器之所以佩戴在后腦勺部位,是為了靠近視覺(jué)皮層以讀取其發(fā)出的腦電波。當(dāng)我們注意力集中在某個(gè)物體時(shí),眼睛會(huì)將所看到的信息發(fā)送給大腦,大腦的各個(gè)區(qū)域會(huì)針對(duì)這些信息進(jìn)行處理。 “視覺(jué)皮層”就是其中的一個(gè)重要區(qū)域�！耙曈X(jué)皮層”在面對(duì)不同信息時(shí)會(huì)產(chǎn)生可識(shí)別的反應(yīng),也就是不同頻率的腦電波。NextMind傳感器通過(guò)讀取這些腦電波信號(hào)來(lái)“理解”我們的想法。

雖然顏值高,佩戴方便,但NextMind佩戴舒適度有待提高,NextMind官方提供的頭帶配有魔術(shù)貼,用戶可自行調(diào)節(jié)松緊。想要獲得更好的大腦讀數(shù),傳感器需與頭部保持緊密貼合,且避免移動(dòng),否則校準(zhǔn)無(wú)效。 因此頭帶繃緊比松弛狀態(tài)更好。然而傳感器的觸角部分塑料邊緣非常鋒利,如果頭帶束緊,會(huì)引起疼痛。  在與頭顯配合使用時(shí),同樣會(huì)出現(xiàn)類(lèi)似情況。在頭顯背部位置安裝傳感器后,頭顯與頭部貼合度會(huì)被改變。為使傳感器與頸背相貼合,頭顯佩戴時(shí),頭顯后部要比通常位置低,因此,頭顯眼鏡部分會(huì)向上翹起,導(dǎo)致和鼻梁間的空隙變大。 此外,傳感器在與頭顯進(jìn)行連接時(shí),不一定能保持穩(wěn)定,因此需要注意不能使傳感器滑落。 軟件方面,用戶可在NextMind網(wǎng)站下載可配置所有內(nèi)容的安裝程序,該安裝程序會(huì)安裝帶有內(nèi)置演示的集線器,以及一個(gè)指導(dǎo)安裝的實(shí)用程序。軟件安裝僅需通過(guò)藍(lán)牙將NextMind傳感器連接到計(jì)算機(jī),這是設(shè)備唯一的通信渠道。

安裝好需進(jìn)行校準(zhǔn),首先需要啟動(dòng)應(yīng)用程序驗(yàn)證該傳感器正在從大腦讀取可靠數(shù)據(jù),如果沒(méi)有,可能是傳感器未與皮膚直接接觸,而是接觸到頭發(fā),需要進(jìn)行調(diào)整。此時(shí),可看到一個(gè)脈動(dòng)圓圈持續(xù)40秒的時(shí)間,以便運(yùn)行時(shí)可根據(jù)用戶特定大腦反應(yīng)校準(zhǔn)其檢測(cè)算法。

校準(zhǔn)完成后,用戶會(huì)獲得1至5的分?jǐn)?shù),分?jǐn)?shù)越高,表示運(yùn)行時(shí)的數(shù)據(jù)感測(cè)效果越好。如果分?jǐn)?shù)高于3,則表示校準(zhǔn)結(jié)果可接受,用戶可以進(jìn)行正常使用。 NextMind的等待時(shí)間有些長(zhǎng)。時(shí)間之所以長(zhǎng),原因可能在于系統(tǒng)希望在執(zhí)行操作進(jìn)行數(shù)據(jù)傳輸前,確保用戶確實(shí)在查看系統(tǒng)所理解的內(nèi)容。 這意味著,從用戶開(kāi)始查看對(duì)象,到對(duì)象被激活,最佳情況下需等待1～3秒。與NextMind互動(dòng)緩慢,意味著它不能在以速度為基礎(chǔ)的場(chǎng)景下使用,比如動(dòng)作游戲。換言之,想要準(zhǔn)確性,則需以失去速度為代價(jià)。 當(dāng)校準(zhǔn)結(jié)束后啟動(dòng)應(yīng)用程序時(shí),系統(tǒng)會(huì)不斷讀取用戶的腦電波,當(dāng)檢測(cè)到與校準(zhǔn)過(guò)程中識(shí)別的信號(hào)相似時(shí),會(huì)理解為用戶正在查看該信號(hào)。 目前NextMind支持的功能只能對(duì)特定對(duì)象信息進(jìn)行識(shí)別,并不能真正理解用戶正在查看的內(nèi)容。它無(wú)法知道用戶面前具體看的是周杰倫還是劉德華的臉。它只知道用戶正在查看某些特定模式。

雖然NextMind識(shí)別范圍限定性很強(qiáng),但同時(shí)可靠性得到了保證,能夠較為精準(zhǔn)、穩(wěn)定地識(shí)別經(jīng)過(guò)校準(zhǔn)測(cè)試后的對(duì)象。

所以從某種程度上來(lái)看,可將其理解為一個(gè)眼動(dòng)追蹤裝置,只是該裝置追蹤的不是人眼,而是腦電波。

此外,針對(duì)開(kāi)發(fā)者,目前NextMind提供了相應(yīng)的Unity SDK,其帶有許多現(xiàn)成的預(yù)制件和示例場(chǎng)景,適用于VR和2D,并且具備很多功能,其中一項(xiàng)功能為模擬器:在進(jìn)行應(yīng)用程序調(diào)適時(shí),無(wú)需使用真實(shí)的傳感器,只需使用鼠標(biāo)并單擊鼠標(biāo)即可模擬凝視(按住鼠標(biāo)左鍵的次數(shù)越多,在該對(duì)象上的虛擬觀察越多)。

在Unity應(yīng)用程序中實(shí)現(xiàn)思維控制僅需向場(chǎng)景中添加NeuroManager預(yù)制,然后向需跟蹤的每個(gè)對(duì)象添加Neuro Tag腳本。Neuro Tag會(huì)確保對(duì)象閃爍,以便被識(shí)別。對(duì)Neuro Tag事件進(jìn)行定位,比如觸發(fā)對(duì)象后,便可實(shí)現(xiàn)所需的所有邏輯。編寫(xiě)應(yīng)用程序非常容易,只需只分鐘便可開(kāi)發(fā)出Unity Cube,如果注視Unity Cube,它會(huì)變大,當(dāng)注視移開(kāi)時(shí),會(huì)再次恢復(fù)到原始大小。

NextMind初體驗(yàn)沒(méi)有讀心術(shù),但在VR中用神眼殺死了敵人 

NextMind提供有許多2D演示,包括游戲、鍵盤(pán)、音樂(lè)創(chuàng)作等,這些都由大腦進(jìn)行交互。 從演示體驗(yàn)來(lái)看,軟件穩(wěn)定性好,偶爾會(huì)有延遲,這一點(diǎn)在游戲時(shí)體現(xiàn)的最為明顯。以演示游戲《Might Arkanoid》為例,想要準(zhǔn)確地接住球,需要提前三秒預(yù)測(cè)其軌跡。體驗(yàn)平臺(tái)游戲時(shí),用眼神殺死敵人會(huì)很痛苦。使用UI界面,比如創(chuàng)建音樂(lè)時(shí)情況會(huì)更好。  在測(cè)試中還注意到另一個(gè)問(wèn)題,在進(jìn)行體驗(yàn)時(shí),如果精神上稍作停頓,眼睛開(kāi)始游離,設(shè)備會(huì)繼續(xù)會(huì)保持追蹤,將目光視為輸入,這個(gè)過(guò)程中可能會(huì)隨機(jī)激活其他操作。在進(jìn)行凝視驅(qū)動(dòng)的UX設(shè)計(jì)時(shí)應(yīng)將這種情況考慮進(jìn)去。 眼神的游離是一個(gè)較為常見(jiàn)的狀態(tài),不應(yīng)該用于觸發(fā)重要事件,可以調(diào)制為通過(guò)硬觸發(fā)(比如鼠標(biāo)單擊)進(jìn)行確認(rèn)。 演示的應(yīng)用程序當(dāng)中,有一款最令人滿足,用戶可在該程序中找到NextMind的3D模型以及一些“動(dòng)作點(diǎn)”,當(dāng)用戶將鼠標(biāo)懸在動(dòng)作點(diǎn)保持不動(dòng)時(shí),會(huì)有更多相關(guān)信息出現(xiàn)。這是一種較為理想的方案,就像在日常生活中一樣,使用凝視獲取更多上下文信息。 最后一款演示應(yīng)用程序是一款VR動(dòng)作游戲《Mindvasion》,用戶通過(guò)觀察外星人搏動(dòng)的大腦來(lái)射擊外星人。

VR動(dòng)作游戲《Mindvasion》

《Mindvasion》游戲玩法簡(jiǎn)單,敵人移動(dòng)速度非常慢,會(huì)停留在某個(gè)位置,以便玩家更好地瞄準(zhǔn)他們頭部進(jìn)行射擊,并在傳感器所需求的時(shí)間內(nèi)殺死敵人。游戲不錯(cuò),但它再次證實(shí)目前并不是游戲理想的傳感器。 

總結(jié) 

整個(gè)體驗(yàn)下來(lái),NextMind確實(shí)實(shí)現(xiàn)了用“意念”操作,但腦機(jī)接口技術(shù)目前仍處于早期階段,無(wú)法實(shí)現(xiàn)《刀劍神域》中的功能。 基于目前的腦機(jī)接口技術(shù),NextMind算得上其中一款非常好的設(shè)備。該公司在策略上選擇只提供一項(xiàng)功能,用眼睛選擇對(duì)象并將這一項(xiàng)功能做到很好,設(shè)備的準(zhǔn)確性高,可用性也很高,安裝簡(jiǎn)單,學(xué)習(xí)起來(lái)很快,并向開(kāi)發(fā)人員開(kāi)放SDK。 唯一的問(wèn)題在于檢測(cè)速度較慢,因此建議不要在對(duì)反應(yīng)時(shí)間要求高的應(yīng)用程序中使用它。 如果想開(kāi)始嘗試使用高質(zhì)量且易于使用的大腦計(jì)算機(jī)設(shè)備,如果預(yù)算允許,NextMind比較適合。需要注意,NextMind仍然是一款實(shí)驗(yàn)性設(shè)備,如果需要在專(zhuān)業(yè)環(huán)境中追蹤用戶視線,更建議購(gòu)買(mǎi)眼動(dòng)追蹤配件。 隨著大廠相繼曝出要加快推進(jìn)腦機(jī)接口設(shè)備商業(yè)化腳步,資本熱潮開(kāi)始逐漸往這塊新興市場(chǎng)涌入,至于最終誰(shuí)會(huì)成為最大受益者,現(xiàn)在還不得而知,但腦機(jī)接口與VR/AR的結(jié)合一定是眾多企業(yè)翹首布局的重要陣地。 NextMind是目前為數(shù)不多得以量產(chǎn)的腦機(jī)接口設(shè)備,盡管功能尚簡(jiǎn)單,但從近期Facebook這些廠商放出的消息來(lái)看,更高階的腦機(jī)接口設(shè)備已經(jīng)具備了商業(yè)化落地和量產(chǎn)的資本,我們拭目以待。