Realidad aumentada para ciegos: ¡mira con tus oídos!
¡Mira con tus oídos! The vOICe for Android asigna vistas de cámara en vivo a paisajes sonoros, ofreciendo realidad aumentada y detalles visuales sin precedentes para personas totalmente ciegas a través de sustitución sensorial y visión por computadora. También incluye OCR parlante, un identificador de color parlante, una brújula parlante, un detector de rostros parlante y un localizador GPS parlante, mientras que el reconocimiento de objetos Microsoft Seeing AI y Google Lookout se pueden iniciar desde The vOICe for Android tocando el borde izquierdo o derecho de la pantalla.
¿Es un juego de realidad aumentada o una herramienta seria? ¡Pueden ser ambas cosas, dependiendo de lo que quieras que sea! El objetivo final es proporcionar una forma de visión sintética a los ciegos, pero los usuarios videntes pueden simplemente divertirse jugando el juego de la vista sin vista. Los usuarios con discapacidad visual y visión de túnel grave pueden intentarlo si la retroalimentación auditiva les ayuda a notar cambios en la periferia visual. The vOICe for Android se ejecuta en teléfonos inteligentes y tabletas, pero también es compatible con la mayoría de las gafas inteligentes, utilizando la pequeña cámara de estas gafas y una interfaz de usuario especial para generar una superposición sónica de realidad aumentada en vivo, ¡manos libres! Es posible que desee utilizar una batería externa conectada mediante un cable USB para evitar que la batería de las gafas inteligentes se agote demasiado rápido. Puedes ayudarnos escribiendo blogs y twitteando sobre tus experiencias, tus casos de uso y sobre cómo *tú* aprendes a ver con el sonido.
¿Cómo funciona? VOICe utiliza el tono para la altura y el volumen para el brillo en escaneos de un segundo de izquierda a derecha de cualquier vista: una línea brillante ascendente suena como un tono ascendente, un punto brillante como un pitido, un rectángulo relleno brillante como una explosión de ruido, una cuadrícula vertical como ritmo. Se utiliza mejor con auriculares estéreo para disfrutar de la experiencia más inmersiva y la resolución auditiva más detallada.
Simplemente experimente primero con patrones visuales simples, porque las imágenes de la vida real son extremadamente complejas. Deja caer aleatoriamente un objeto brillante, como un ladrillo DUPLO, sobre una mesa oscura y aprende a alcanzarlo solo a través del sonido (cierra los ojos si tienes vista). A continuación, intente explorar el entorno seguro de su hogar y aprenda a asociar los complejos patrones de sonido con lo que ya sabe que hay allí. Los usuarios videntes también pueden usar la aplicación con dispositivos compatibles con Google Cardboard deslizando el dedo hacia abajo en la pantalla principal para alternar la vista binocular.
Para usuarios serios: aprender a ver con sonido es como aprender un idioma extranjero o aprender a tocar un instrumento musical, lo que realmente desafía su perseverancia y plasticidad cerebral. Bien podría ser el sistema de entrenamiento cerebral definitivo, que une los sentidos a través de la sinestesia artificial. Un manual de capacitación general para The vOICe (no específico para la versión de Android) está disponible en línea en
https://www.seeingwithsound.com/manual/The_vOICe_Training_Manual.htm
y las notas de uso para ejecutar The voICe para Android con manos libres en gafas inteligentes se encuentran en
https://www.seeingwithsound.com/android-glasses.htm
No se preocupe por las muchas opciones de The vOICe para Android: los ojos humanos no tienen botones ni opciones, y The vOICe está diseñado de manera similar para realizar su función principal de manera inmediata, por lo que no tiene que usar ninguna opción para comenzar. Algunas de las opciones más comunes aparecen al deslizar lentamente el dedo por la pantalla principal.
¿Por qué La Voz es gratuita? Porque nuestro principal objetivo es lograr un cambio real reduciendo las barreras para consumir tanto como podamos. Descubrirá que las tecnologías de la competencia cuestan más de 10 000 dólares y, sin embargo, tienen especificaciones más bajas. La resolución perceptiva que ofrece The vOICe no tiene comparación ni siquiera con los implantes de retina "ojo biónico" valorados en 150.000 dólares (PLoS ONE 7(3): e33136).
The vOICe for Android admite inglés, holandés, alemán, francés, español, italiano, estonio, húngaro, polaco, eslovaco, turco, ruso, chino, coreano y árabe (opciones de menú | Idioma).
Informe los errores a [email protected] y visite la página web http://www.seeingwithsound.com/android.htm para obtener una descripción detallada y exenciones de responsabilidad. Estamos en Twitter en @seeingwithsound.
¡Gracias!
v2.73: Corrección de errores para algunos botones gráficos mal colocados en la pantalla principal de la aplicación.
Leer más
