Como a IA capacita pessoas cegas ou com visão reduzida para a vida cotidiana

mãecom filha no colo e livro aberto

Por Kumiko Tezuka,Microsoft Japão

Akiko Ishii está sentada em sua sala segurando um livro ilustrado e equilibrando sua filha de quatro anos, Ami, no colo. Parece uma cena doméstica típica em um bairro típico de Tóquio, mas há algo especial acontecendo aqui.

Akiko é cega e seu smartphone está fazendo a leitura por ela.

mãe lendo para filha
Akiko Ishii e sua filha Ami usando AI para ler um livro de fotos juntas.

Conforme a câmera do telefone examina cada página, o aplicativo Seeing AI da Microsoft lê o texto em voz alta. Akiko e Ami sorriem ao ouvir. Com essa tecnologia, elas podem passar um tempo inestimável lendo juntas e criando laços – assim como mães e filhos fazem em qualquer lugar.

Poder da inteligência artificial

O Seeing AI é um aplicativo gratuito que narra o mundo para a comunidade de cegos e deficientes visuais. É o produto de um projeto de pesquisa em andamento que aproveita o poder da inteligência artificial (IA) para abrir o mundo visual, descrevendo pessoas, textos e objetos próximos.

Atualmente, está disponível em 70 países e em vários idiomas. A versão em japonês foi lançada há um ano.

O Seeing AI usa a tecnologia de IA não apenas para reconhecer e ler pequenas passagens de texto, documentos, rótulos de produtos e assim por diante, mas também para descrever pessoas e cenários capturados por uma câmera de telefone celular.

Akiko, que perdeu a visão em uma cirurgia, já estava usando a versão em inglês do Seeing AI antes da versão em japonês ser lançada.

“Estou usando a versão em japonês de Seeing AI há cerca de um ano e posso dizer com convicção que se tornou indispensável para aprimorar minha individualidade.”

Ela diz que embora haja uma série de outros aplicativos disponíveis no Japão para ajudar pessoas com deficiência visual, eles tendem a ser projetados para um propósito único e específico e não fornecem uma gama tão ampla de funções fáceis de usar em um único serviço.

Com o Seeing AI, ela pode realizar todos os tipos ações da sua vida cotidiana usando seu telefone. Além da leitura, ela pode usá-lo para verificar o brilho das luzes em uma sala, para descrever os arredores e identificar pessoas e objetos enquanto ela se move. Assista o vídeo a seguir:

A leitura de áudio em japonês do aplicativo é tão rápida que alguém não familiarizado com ele pode achar que é  rápido demais para acompanhar. “É difícil acompanhar, não é?” Akiko diz com uma risada.

“É muito mais rápido do que a velocidade de uma conversa normal e estou bem com isso porque sou cega e faço tudo pelos ouvidos. Coisas como ler ou olhar algo que as pessoas podem fazer em um instante, tenho que ouvir e assimilar antes de poder agir.

marmita
Um bento que Akiko fez para Ami, bolas de arroz à direita e um conjunto de pedaços à esquerda.

“É por isso que me acostumei a ouvir em alta velocidade. A versão em inglês não conseguia reconhecer texto em japonês. Quando o usei para descrever meus arredores e coisas do gênero, não consegui ouvir nessa velocidade, já que não sou falante nativa de inglês e não tenho um domínio bom o suficiente do idioma.”

A versão japonesa capacitou Akiko a fazer muito mais sozinha. Por exemplo, ela agora pode ler notas do jardim de infância de Ami, que dizem o que Ami precisa levar no dia seguinte. Antes do Seeing AI, Akiko teria que escanear cada folheto e usar o software de reconhecimento ótico de caracteres para gerar um texto digital que pudesse ser lido em seu PC. Agora é só usar o telefone dela.

Ser capaz de realizar tarefas facilmente deu a ela mais independência e confiança para fazer as coisas de que gosta, como cozinhar.

Ela usa a função de “texto curto” do Seeing AI para ler os rótulos dos supermercados, verificar as datas de validade e identificar os ingredientes. O aplicativo possui uma função de reconhecimento de cor que, por exemplo, pode dizer se um pimentão é vermelho, amarelo ou verde.

Reconhecendo pessoas, cores e muito mais

“Eu realmente gosto de fazer o lanche da Ami hoje em dia com o Seeing AI, posso pensar na cor dos ingredientes enquanto preparo a lancheira, então posso, por exemplo, usar um pedaço de pimentão amarelo para combinar com o ovo na lancheira de amanhã.”

O telefone de Akiko contém uma grande quantidade de fotos de família, muitas delas são fotos dela com o marido, Yoshimi, e Ami.

“Eu configurei a função reconhecimento do Seeing AI para reconhecer Ami e meu marido, então agora posso ver seus rostos nas fotos que tirei.”

No passado, Akiko não tinha como saber o que cada foto mostrava, mas agora ela usa a função de reconhecimento do Seeing AI para descrever as fotos para ela. E ao pré-configurar o aplicativo para reconhecer Ami e seu marido, ela também pode percorrer fotos que mostram muitas pessoas para encontrar apenas aquelas em que Ami ou seu marido aparecem.

três pessoas sorrindo pra câmera
Akiko, Ami e o marido Yoshimi em um parque de diversões.

“Sempre quero minhas fotos da Ami e da família por perto. Elas também são um registro do seu crescimento, então não quero excluir nenhuma delas.”

Akiko diz que o uso do aplicativo continua a evoluir em casa e também no trabalho, em sua função de liderar uma organização que ajuda as pessoas com deficiência a se tornarem mais independentes e obter uma melhor qualidade de vida.

“Vejo a deficiência como uma individualidade única”, diz Akiko. “E aprimorando essa individualidade (deficiência), acho que podemos transformar cada pedra bruta em um diamante brilhante. Eu tenho usado a versão em japonês de Seeing AI por cerca de um ano e posso dizer com convicção que se tornou indispensável para aprimorar minha própria individualidade.”

mãe e filha sorrindo
Akiko e Ami alegres e relaxando.

Tags: , , ,

Posts Relacionados