Deficientes visuais "enxergam" com aparelho que traduz cores em música

O usuário pode usar o "aparelho de substituição sensorial" na forma de óculos, ou apontar diretamente a câmera para o objeto de interesse (embaixo à direita). [Imagem: Dupliy/Amedi/Levy-Tzedek]

Dispositivos de substituição sensorial
Pesquisadores criaram um novo dispositivo para ajudar pessoas cegas a não apenas perceberem o ambiente ao seu redor, mas também a identificar objetos individuais.
Já existem vários trabalhos que tentam criar "mapas sonoros do ambiente", convertendo imagens em sons.
O objetivo final é construir os chamados "dispositivos de substituição sensorial", aparelhos que usam diversas tecnologias para traduzir as informações de um sentido - geralmente não funcional no indivíduo - por informações que afetem outro sentido.
Alguns desses estudos já estão em estágio avançado de testes.

• 
  

Transformando imagens em sons
Mas Maxim Dupliy e seus colegas não queriam apenas uma forma de ajudar as pessoas cegas a caminharem dentro ou fora de casa: eles queriam construir algo mais funcional, que permita, por exemplo, que uma pessoa pegue uma fruta, ou aperte a mão de um amigo.
O aparelho, batizado de EyeMusic, usa uma câmera para capturar as imagens. Cada imagem digital é processada, transformando os pixels em notas musicais.
Por exemplo, os pixels na vertical, que mostram a altura dos objetos, são representados por notas musicais que variam do grave (objetos mais baixos) ao agudo (objetos mais altos).
A localização horizontal de cada pixel é indicada pela temporização das notas musicais, com tempos maiores indicando a direita, e tempos menores a esquerda.
O brilho de cada parte da imagem é codificado pelo volume do som.
Música para os meus olhos
Mas ninguém gosta de "ouvir em preto e branco". Restava então codificar as cores.
Para isso, foram usados diferentes instrumentos musicais, um para cada uma de cinco cores.
O azul é representado pelo trompete, o vermelho pelo órgão, o verde pelo órgão de palheta sintetizado e o amarelo pelo violino. Finalmente, o branco é representado por um vocal e o preto pelo silêncio.
Os pesquisadores preocuparam-se também com o lado artístico, para que os sons soem sempre suaves e harmônicos, evitando apitos e chiados desconfortáveis ou desagradáveis.
"As notas se estendem por cinco oitavas e foram cuidadosamente escolhidas por músicos para criar uma experiência agradável para os usuários," disse Amir Amedi, coautor do estudo.
Percepção espacial no cérebro
Se na descrição parece tudo muito complicado, na prática deu-se o contrário: os usuários conseguiram operar o dispositivo muito rapidamente, alguns deles com apenas meia hora de treinamento.
Assim, o experimento dá suporte à hipótese de que a representação do espaço no cérebro pode não ser dependente de como a informação espacial é recebida, e que é necessário muito pouco treinamento para criar uma representação do espaço sem a visão - isto pode ser feito, como se comprovou, usando sons.
"O nível de precisão alcançado em nosso estudo indica que é factível usar um dispositivo de substituição sensorial para realizar tarefas do dia-a-dia, indicando um grande potencial para seu uso em terapias de reabilitação," concluiu.