HoloLens應用模仿回聲定位幫助視障人士導航
大家對HoloLens這種MR頭顯的一般印象是黑科技、科幻片成真,但實際上HoloLens APP也是可以充滿溫情的,例如下面的這個應用就可以幫助視覺障礙人群進行室內導航,原理據說類似蝙蝠的回聲定位。
盡管實際體驗過的人其實不多,但經過一年多的普及,很多人至少已經聽說過VR頭顯,而MR和HoloLens則仍然只有科技愛好者知道。這些設備誕生的根本原因還是在于為人們帶來更加方便的生活。人們探索VR和AR在醫療等方面的應用,并考慮讓它們進入日常生活中。
現在,一位波特蘭的HoloLens開發者Javier Davalos就展示了MR硬件在幫助視障人士方面的作用。
在開發者上傳到YouTube的視頻介紹中,Davalos使用HoloLens的音頻輔助正常地在室內環境中走動。我們知道HoloLens擁有掃描周圍3D環境構建實時地圖的能力,Davalos就借助HoloLens的音頻提示確定方向和物品的距離等。這個應用模仿了蝙蝠的回聲定位系統,將檢測到的視覺信息轉化為容易理解的音頻波動,用戶聽到的聲音會因為距離物品的遠近而發生變化。
首先,Davalos展示了一個單視場版本的應用,它可以根據用戶前方的物品的不同而改變音頻。例如樓梯的這一層和另一層就聽起來不同。屋子里的其他物品也擁有自己獨有的聲音。這個系統可以讓人憑聲音分辨不同的物品。
然后就是立體模式,或者說你將擁有“兩只眼”,而我們知道雙目視覺可以識別出物體的遠近了。這時,來自兩個不同點的聲音會分別進入用戶的左右耳,這樣我們甚至能聽出是不是到墻邊了或者前面是否是桌角等信息。總之就是精確度提升。
除了立體模式,Davalos還設計了簡單的語音命令系統,用戶可以聽到HoloLens SLAM系統測量物品長度的結果,或者電子羅盤提供的方向信息,又或者讓HoloLens幫你數樓梯階數。
目前,Davalos還在完善這個HoloLens應用,他還需要一些視障人士幫助他正確評估軟件功能。
未經授權,禁止轉載,違者必將追究法律責任。
文章點評
相關閱讀
-
微軟解鎖觀眾視角:HoloLens輕松拍攝MR視頻
微軟表示:混合現實(MR)視頻拍起來也不是那么困難嘛,不過,首先你得有HoloLens。...
- CEO辟謠:Magic Leap諜照并非原型機
- 現實與理想的落差 Magic Leap原型機諜照曝光
- 納米材料顯神威!Metalenses助力iGlass概念成真
- 畫個圈圈讓你消失:《傳送門MR》真神奇!
- 重現阿凡達:腦機接口如何應用于MR?