Realidade Aumentada para Cegos: Veja com seus ouvidos!
Veja com seus ouvidos! The vOICe for Android mapeia visualizações de câmeras ao vivo para paisagens sonoras, oferecendo realidade aumentada e detalhes visuais sem precedentes para pessoas totalmente cegas por meio de substituição sensorial e visão computacional. Também inclui OCR falante ao vivo, um identificador de cor falante, bússola falante, detector de rosto falante e um localizador GPS falante, enquanto o reconhecimento de objetos Microsoft Seeing AI e Google Lookout pode ser iniciado a partir The vOICe for Android tocando na borda esquerda ou direita da tela.
É um jogo de realidade aumentada ou uma ferramenta séria? Pode ser os dois, dependendo do que você quer que seja! O objetivo final é fornecer uma forma de visão sintética aos cegos, mas os usuários com visão podem simplesmente se divertir jogando o jogo da visão sem visão. Usuários com deficiência visual com visão de túnel severa podem tentar se o feedback auditivo os ajudar a perceber mudanças na periferia visual. The vOICe for Android funciona em smartphones e tablets, mas também é compatível com a maioria dos óculos inteligentes, usando a pequena câmera desses óculos e uma interface de usuário especial para gerar uma sobreposição de realidade aumentada sonora ao vivo, com as mãos livres! Você pode usar uma bateria externa conectada via cabo USB para evitar que a bateria dos óculos inteligentes se esgote muito rapidamente. Você pode nos ajudar blogando e twittando sobre suas experiências, seus casos de uso e sobre como *você* aprende a ver com som.
Como funciona? O vOICe usa pitch para altura e volume para brilho em varreduras de um segundo da esquerda para a direita de qualquer visualização: uma linha brilhante crescente soa como um tom crescente, um ponto brilhante como um bipe, um retângulo preenchido com brilho como uma explosão de ruído, uma grade vertical como um ritmo. Melhor usado com fones de ouvido estéreo para uma experiência mais envolvente e resolução auditiva mais detalhada.
Experimente primeiro padrões visuais simples, porque as imagens da vida real são extremamente complexas. Solte aleatoriamente um item brilhante, como um tijolo DUPLO, em uma mesa escura e aprenda a alcançá-lo apenas através do som (feche os olhos se tiver visão). Em seguida, tente explorar o seu próprio ambiente doméstico seguro e aprenda a associar os padrões sonoros complexos com o que você já sabe que existe. Usuários com visão também podem usar o aplicativo com dispositivos compatíveis com o Google Cardboard deslizando para baixo na tela principal para alternar a visão binocular.
Para usuários sérios: aprender a ver com som é como aprender uma língua estrangeira ou aprender a tocar um instrumento musical, desafiando realmente sua perseverança e plasticidade cerebral. Pode muito bem ser o melhor sistema de treinamento cerebral, unindo os sentidos através da sinestesia artificial. Um manual de treinamento geral para The vOICe (não específico para a versão Android) está disponível online em
https://www.seeingwithsound.com/manual/The_vOICe_Training_Manual.htm
e notas de uso para executar o vOICe para Android com viva-voz em óculos inteligentes estão em
https://www.seeingwithsound.com/android-glasses.htm
Não se preocupe com as muitas opções do The vOICe para Android: os olhos humanos não têm botões ou opções, e o The vOICe foi projetado de forma semelhante para executar sua função principal imediatamente, para que você não precise usar nenhuma opção para começar. Algumas das opções mais comuns aparecem conforme você desliza lentamente o dedo pela tela principal.
Por que o The vOICe é gratuito? Porque o nosso principal objetivo é fazer uma mudança real, reduzindo as barreiras à utilização, tanto quanto pudermos. Você descobrirá que as tecnologias concorrentes custam mais de US$ 10.000 e ainda assim têm especificações mais baixas. A resolução perceptiva oferecida pelo The vOICe é incomparável até mesmo por implantes de retina de "olho biônico" de US$ 150.000 (PLoS ONE 7(3): e33136).
The vOICe for Android suporta inglês, holandês, alemão, francês, espanhol, italiano, estoniano, húngaro, polonês, eslovaco, turco, russo, chinês, coreano e árabe (menu Opções | Idioma).
Por favor, relate bugs para [email protected] e visite a página da web http://www.seeingwithsound.com/android.htm para obter descrições detalhadas e isenções de responsabilidade. Estamos no Twitter em @seeingwithsound.
Obrigado!
v2.73: Correção de bug para alguns botões gráficos posicionados incorretamente na tela principal do aplicativo.
Leia mais
