如果大家有印象,微軟有研發過一個機器人+ AR框架,基于HoloLens實現機器人操控交互。另外,正在積極研發軍工版微軟HoloLens的美國陸軍同樣有在探索“機器人+ AR”的協同作戰行動。
這種機器人+ AR的解決方案可以免除攜帶主機、鍵盤、控制器等多余硬件設備的需要,同時允許用戶直接在視場可視化各種數據信息,進一步優化控制機器人的能力。
現在,隨著腦機接口BMI的迅速發展,業界開始探索直接通過意念+AR的方式來控制機器人。這對于一系列的領域都具有應用潛力,例如允許殘障人士通過意念控制輪椅或操作假肢等等。
這對于軍事領域同樣重要,因為現在無人機器的應用越發廣泛,但對于無人機器與士兵的協同作戰,任何多余的動作或言語都可能會暴露士兵的位置,并造成生命威脅。
所以在悉尼科技大學,研究人員正在與澳大利亞陸軍和國防創新中心合作,共同研發一種基于干式可穿戴腦機接口和微軟HoloLens的機器人控制方法。
腦機接口系統通常由三個模塊組成:外部感覺刺激、傳感接口和神經信號處理單元。其中,傳感接口通過植入或可穿戴神經傳感器(如腦電圖EEG電極)檢測皮層電活動,對人類意圖(頻率為~150 Hz的腦電波)進行編碼。
對于可穿戴神經傳感器的方式,這與軍用頭盔十分相配,比如說基于微軟HoloLens的IVAS頭戴式硬件。
然而,傳統的可穿戴神經傳感器依賴于在頭皮和頭發涂抹導電凝膠電解質,而凝膠的使用會導致皮膚刺激、感染風險、過敏反應、以及由于凝膠逐漸干燥而不適合長期操作等問題。
由于具有非常薄的性質,加上高導電性、生物相容性、耐腐蝕性和在汗液中的穩定性,可以用作侵入性和非侵入性神經接口的傳感器,諸如石墨烯和石墨烯衍生物這樣的二維納米材料非常適合作為腦機接口傳感器的電極材料。
然而,大多數基于二維材料的非侵入性傳感器通常由具有平坦表面的薄膜電極組成,并且不適用于頭皮有毛區域(為了測量來自頭部枕葉區域的EEG信號,傳感器需要放置在后腦勺,而這里通常存在頭發覆蓋)。
所以,澳大利亞悉尼科技大學的研究人員探索了一種亞納米厚外延石墨烯的三維微圖案傳感器,可用于檢測枕葉區域的腦電圖信號。實驗表明,這種干式外延石墨烯傳感器顯示出低阻抗的有效皮膚接觸,并且可以實現與濕式傳感器相當的信噪比。
然后,團隊將完整的腦機接口平臺aBRI與微軟HoloLens,以支持用戶通過AR+意念的方式來控制機器人。
具體來說,aBRI平臺由四個主要組件組成:接口設備,移動腦電圖系統,單板計算機,以及機器人系統。所有主要組件都通過傳輸控制協議/互聯網協議進行通信。被試首先接受手機界面的培訓,以熟悉aBRI平臺和腦機接口應用程序。然后他們穿戴微軟HoloLens,并使用aBRI與Q-UGV機器人交互。
團隊表示:“我們的技術可以在兩秒內發出至少九個命令。這意味著我們有九種不同的命令,操作員可以在這九種命令中選擇一種。我們同時探索了如何最大限度地減少來自身體和環境的噪音,以從操作員的大腦中獲得更清晰的信號?!?/p>
值得一提的是,據Techxplore報道,澳大利亞陸軍同樣測試了這項技術。其中,士兵使用腦機接口以免手免語音方式操作Ghost Robotics四足機器人,而準確率高達94%。
審核編輯黃宇
-
傳感器
+關注
關注
2550文章
51045瀏覽量
753118 -
機器人
+關注
關注
211文章
28390瀏覽量
206943 -
Ar
+關注
關注
24文章
5096瀏覽量
169474
發布評論請先 登錄
相關推薦
評論