視覚障害者のための拡張現実: 耳で見てください!
耳で見てください！ The vOICe for Android 、ライブ カメラのビューをサウンドスケープにマッピングし、感覚の代替とコンピューター ビジョンを通じて、全盲の人に拡張現実と前例のない視覚的な詳細を提供します。また、ライブ トーキング OCR、トーキング カラー識別子、トーキング コンパス、トーキング フェイス ディテクター、トーキング GPS ロケーターも含まれており、Microsoft Seeing AI と Google Lookout オブジェクト認識は、画面の左端または右端をタップすることでThe vOICe for Androidから起動できます。
それは拡張現実ゲームですか、それとも本格的なツールですか?希望に応じて、両方にすることもできます。最終的な目標は、視覚障害者に合成視覚の形式を提供することですが、晴眼者のユーザーは、単純に視力のない視覚ゲームを楽しむこともできます。重度のトンネル視野を持つ視覚障害のあるユーザーは、聴覚フィードバックが視覚周辺の変化に気づくのに役立つかどうかを試すことができます。 The vOICe for Androidスマートフォンやタブレット上で動作しますが、ほとんどのスマート グラスとも互換性があり、これらのグラスの小型カメラと特別なユーザー インターフェイスを使用して、ハンズフリーでライブ音響拡張現実オーバーレイを生成します。スマート グラスのバッテリーが急速に消耗するのを防ぐために、USB ケーブルで接続された外部バッテリーを使用することもできます。あなたの経験、使用事例、そして*あなた*が音で見る方法を学ぶ方法についてブログやツイートをすることで、私たちを支援することができます。
どのように機能するのでしょうか? vOICe は、任意のビューの 1 秒間の左から右へのスキャンで、高さにはピッチを、明るさには音量を使用します。上昇する明るい線は上昇トーンとして聞こえ、明るい点はビープ音として聞こえ、明るく塗りつぶされた長方形はノイズ バーストとして、垂直グリッドはリズムとして聞こえます。最も没入感のある体験と最も詳細な聴覚解像度を得るには、ステレオ ヘッドフォンとの併用が最適です。
現実の画像は非常に複雑であるため、最初は単純な視覚パターンを試してください。デュプロのレンガなどの明るいアイテムを暗いテーブルの上にランダムに落とし、音だけでそれに手を伸ばすことを学びます（視力がある場合は目を閉じてください）。次に、自分自身の安全な家庭環境を探索して、複雑な音のパターンをそこにあるとすでに知っているものと関連付けることを学びます。晴眼のあるユーザーは、メイン画面を下にスワイプして両眼視を切り替えることで、Google Cardboard 互換デバイスでアプリを使用することもできます。
真剣なユーザー向け: 音で見ることを学ぶことは、外国語を学ぶことや楽器の演奏を学ぶことに似ており、忍耐力と脳の可塑性が非常に試されます。それは、人工共感覚によって感覚を橋渡しする、究極の脳トレーニングシステムかもしれません。 vOICe の一般的なトレーニング マニュアル (Android バージョンに固有のものではありません) は、次の場所からオンラインで入手できます。
https://www.seeingwithsound.com/manual/The_vOICe_Training_Manual.htm
スマート グラスで Android 用 vOICe をハンズフリーで実行するための使用上の注意事項は、次のとおりです。
https://www.seeingwithsound.com/android-glasses.htm
The vOICe for Android の多くのオプションについて心配する必要はありません。人間の目にはボタンやオプションがありません。vOICe も同様に、すぐに使用できる主な機能を実行するように設計されているため、使い始めるためにオプションを使用する必要はありません。メイン画面上で指をゆっくりとスライドさせると、最も一般的なオプションのいくつかが表示されます。
The VOICe が無料なのはなぜですか?なぜなら、私たちの最大の目標は、使用の障壁をできる限り下げることで真の変化を起こすことだからです。競合するテクノロジーの価格は 10,000 ドルを超え、スペックが低いことがわかります。 The vOICe が提供する知覚解像度は、15 万ドルの「バイオニック アイ」網膜インプラント (PLoS ONE 7(3): e33136) にも匹敵しません。
The vOICe for Androidは、英語、オランダ語、ドイツ語、フランス語、スペイン語、イタリア語、エストニア語、ハンガリー語、ポーランド語、スロバキア語、トルコ語、ロシア語、中国語、韓国語、アラビア語をサポートしています (メニュー オプション | 言語)。
バグについては、[email protected] に報告してください。詳細な説明と免責事項については、Web ページ http://www.seeingwithsound.com/android.htm にアクセスしてください。 Twitter では @seeingwithsound を使用しています。
ありがとう！
v2.73: アプリのメイン画面上のいくつかの間違って配置されたグラフィック ボタンのバグを修正しました。
続きを読む
