首頁應用教育學習

盲人增強現實:用耳朵看!

用耳朵看! The vOICe for Android將實時攝像頭視圖映射到音景,通過感官替代和計算機視覺為完全盲人提供增強現實和前所未有的視覺細節。還包括實時說話 OCR、說話顏色識別器、說話指南針、說話人臉檢測器和說話 GPS 定位器,而 Microsoft Seeing AI 和 Google Lookout 對象識別可以通過點擊左側或右側屏幕邊緣從The vOICe for Android啟動。

它是增強現實遊戲還是嚴肅的工具?兩者都可以,就看你想要什麼了!最終目標是為盲人提供一種合成視覺,但視力正常的用戶也可以輕鬆玩“無視力”遊戲。如果聽覺反饋有助於他們注意到視覺周邊的變化,患有嚴重隧道視野的視力受損用戶可以嘗試。 The vOICe for Android在智能手機和平板電腦上運行,但也與大多數智能眼鏡兼容,使用這些眼鏡中的微型攝像頭和特殊的用戶界面來生成實時聲音增強現實疊加,免提!您可能需要使用通過 USB 線連接的外部電池,以防止智能眼鏡電池耗盡太快。您可以通過博客和推文講述您的經歷、您的用例以及*您*如何學會用聲音看東西來幫助我們。

它是如何運作的? vOICe 在任何視圖的一秒從左到右掃描中使用音高表示高度,使用響度表示亮度:上升的亮線聽起來像是上升的音調,亮點是蜂鳴聲,明亮的填充矩形作為噪聲爆發,垂直網格作為節奏。最適合與立體聲耳機一起使用,以獲得最身臨其境的體驗和最詳細的聽覺分辨率。

首先嘗試簡單的視覺模式,因為現實生活中的圖像極其複雜。隨機將一個明亮的物品(例如 DUPLO 積木)放在黑暗的桌面上,並學習僅通過聲音來夠到它(如果您有視力,請閉上眼睛)。接下來嘗試探索您自己的安全家庭環境,並學習將復雜的聲音模式與您已知的聲音模式聯繫起來。視力正常的用戶還可以通過在主屏幕上向下滑動來切換雙目視圖,從而在 Google Cardboard 兼容設備上使用該應用程序。

對於認真的用戶來說:學習用聲音看就像學習外語或學習演奏樂器一樣,真正挑戰你的毅力和大腦可塑性。它很可能是終極的大腦訓練系統,通過人工聯覺連接感官。 vOICe 的一般培訓手冊(不特定於 Android 版本)可在線獲取:

https://www.seeingwithsound.com/manual/The_vOICe_Training_Manual.htm

以及在智能眼鏡上免提運行 The vOICe for Android 的使用說明位於

https://www.seeingwithsound.com/android-glasses.htm

不用擔心 Android 版 vOICe 的眾多選項:人眼沒有按鈕或選項,而 vOICe 的設計類似,開箱即可執行其主要功能,因此您無需使用任何選項即可開始操作。當您在主屏幕上緩慢滑動手指時,會出現一些最常見的選項。

為什麼 The voice 是免費的?因為我們的首要目標是通過盡可能降低使用障礙來實現真正的改變。您會發現競爭技術的成本高達 10,000 美元以上,但規格卻較低。 The vOICe 提供的感知分辨率甚至是價值 150,000 美元的“仿生眼”視網膜植入物無法比擬的(PLoS ONE 7(3): e33136)。

The vOICe for Android支持英語、荷蘭語、德語、法語、西班牙語、意大利語、愛沙尼亞語、匈牙利語、波蘭語、斯洛伐克語、土耳其語、俄語、中文、韓語和阿拉伯語(菜單選項 | 語言)。

請向[email protected]報告錯誤,並訪問網頁http://www.seeingwithsound.com/android.htm以獲取詳細說明和免責聲明。我們的 Twitter 賬號為@seeingwithsound。

謝謝你!

最新版本 2.75 的新增功能

最後更新於 2024 年 12 月 14 日 v2.75:添加了 QR 碼識別作為條形碼識別的一部分(菜單“選項”|“其他設置”中的複選框)。任何結果都會粘貼到剪貼板以供其他應用程序使用。

v2.74:添加了對 Android 15 的支持,修復了 Android 10+ 上預覽圖像保存損壞的問題,並修復了一些小錯誤。



v2.73:修復了應用程序主屏幕上一些位置錯誤的圖形按鈕的錯誤。

閱讀更多信息

用戶還查看了

看全部

您可能感興趣

看全部

更多類似應用

看全部

更多Level應用

看全部