Ir para a página inicial
Garoto usa o app InnerVoice em um tablet.

Super-heróis, bichinhos e IA ajudam crianças com deficiência a vencer problemas de linguagem

Como você aprendeu a falar?

Provavelmente foi assim: seu cérebro infantil, um centro de atividade neurológica, captou os tons de fala e as expressões faciais de seus pais. Você começou a imitar seus sons, interpretar suas emoções e diferenciar os parentes dos estranhos. E um dia, cerca de um ano de vida, você apontou e começou a dizer algumas palavras significativas com alegria.

Mas muitas crianças, particularmente aquelas diagnosticadas com Transtornos do Espectro Autista, adquirem a linguagem de maneiras diferentes. Em todo o mundo, uma em 160 crianças é diagnosticada com TEA. Nos Estados Unidos, é uma em 59 crianças – e aproximadamente 40% desse grupo é não-verbal.

Aprendendo com super-heróis e filhotes

Lois Jean Brady e Matthew Guggemos, cofundadores da iTherapy, fonoaudiólogos e especialistas em autismo, estão enfrentando a crescente prevalência de desafios de fala relacionados ao autismo com o InnerVoice, um aplicativo de inteligência artificial cujos avatares personalizáveis estimulam “pistas” sociais. O aplicativo anima avatares de super-heróis, filhotes, bichos de pelúcia e pessoas para ajudar crianças pequenas que têm dificuldades com linguagem e expressão de palavras com significado e prática de conversação.

A iTherapy recebeu uma subvenção do programa AI for Accessibility, da Microsoft, em 2018. O programa oferece subsídios, tecnologia e conhecimento para indivíduos, grupos e empresas apaixonadas pela criação de ferramentas que tornam o mundo mais inclusivo. A iTherapy está usando a subvenção para integrar a plataforma de IA do Azure para aprimorar a geração de fala, o reconhecimento de imagem e a animação facial.

Menino de cinco anos usa o Zyrobotics para aprender a ler.
Menino de cinco anos usa o Zyrobotics para aprender a ler no Ranch Santa Gertrudes Elementary

“Acredito que o componente de IA era o elo perdido”, diz Guggemos sobre o aplicativo. “Como você usa palavras e o que as palavras significam? O que um símbolo representa? Como você usa a inteligência artificial para desenvolver problemas que exigem linguagem para serem resolvidos?”

Como um hipopótamo ajuda a ensinar a falar

A IA também está se revelando um desenvolvimento empolgante na melhoria de fala e linguagem para a Zyrobotics, uma empresa de tecnologia educacional sediada em Atlanta que foi a primeira beneficiária do programa AI for Accessibility em 2018. A Zyrobotics está usando o Azure Machine Learning para ajudar sua ferramenta educacional ReadAble Storiez a interpretar quando um aluno precisa de ajuda.

ReadAble Storiez usa um avatar de um hipopótamo para ajudar os alunos com dificuldades de aprendizagem, como dislexia e outros desafios, como gagueira, pausas e sotaques acentuados.

Ayanna Howard, fundadora da empresa e professora de robótica, foi motivada pela primeira vez a criar o ReadAble Storiez ao assistir um professor usando o aplicativo Counting Zoo, da Zyrobotics, com uma criança. Quando a professora se virou para ela e disse: “Você pode fazer esse aplicativo fazer mais do que apenas ler com ele? Eu acho fantástico que isso ajude a melhorar sua matemática – isso também poderia ajudá-lo a melhorar sua leitura?”

Howard também encontrou professores mencionando os desafios da dislexia na sala de aula. “Eu estava tipo, ‘Oh, o que acontece se você tem uma dificuldade de leitura?’ Então aprendi que os sinais de dislexia em crianças não são detectados até muito mais tarde, normalmente quando as escolas começam os testes padronizados. Percebi que precisávamos de uma intervenção muito antes e que poderíamos fazer isso com o Counting Zoo.”

Os modelos de aprendizagem que não levam em consideração os desafios individualizados, ou não abordam os padrões de fala das crianças, “tendem a falhar”, diz Howard. O ReadAble Storiez emprega um modelo de fala personalizado e um sofisticado “tutor” para converter a fala em texto e medir a precisão, a fluência e a melhoria da leitura da criança.

“Isso me surpreendeu!”

Howard está satisfeita com o sucesso inicial do programa. “Enquanto estavam lendo um livro, as crianças se corrigiam”, diz ela. “Como tecnóloga, você diz que suas coisas funcionam, mas eu estou sentada lá com as crianças e me surpreendo, ‘Realmente funciona!’ É emocionante ver que o que funciona no laboratório realmente funciona no mundo real, no ambiente da criança. O [avatar] forneceria feedback, e uma criança seria como: “Eu não disse uma palavra corretamente. Posso tentar de novo?” Isso me surpreendeu. Essa foi a afirmação. Nossa solução estava no caminho certo e no alvo.”

Brady, que surgiu com a ideia da InnerVoice depois de estudar e escrever um livro sobre aplicativos para pessoas com autismo, reflete sobre o impacto que causou. Ela cita um exemplo de trabalho com um aluno que não é verbal e usou o aplicativo para se comunicar com um avatar de si mesmo.

“Ele tirava uma foto de uma maçã, e um avatar a lia como ‘maçã’, e depois escrevia, ‘maçã’. Até então, eu nem pensava nessa estratégia.”

Mãe usa o InnerVoice para trabalhar em habilidades de comunicação com sua filha.
Mãe usa o InnerVoice para trabalhar habilidades de comunicação com sua filha mais nova

Brady e Guggemos imaginam os benefícios da comunicação assistida por IA além do público-alvo. Eles estão trabalhando com pessoas com demência, ferimentos na cabeça e derrames. “Muitos aplicativos de comunicação apenas falam por você”, acrescenta Brady. “O nosso abrange muitos aspectos da comunicação para todos – até mesmo para alunos de inglês. Por que eu não tentaria isso? Ele fornece um modelo. Há uma xícara de café na mesa, tire uma foto dela. Como você diz isso?”

Howard sonha com a Zyrobotics ajudando a fechar a lacuna entre estudantes e alunos com dificuldades de aprendizado. Para começar, no final deste ano, a Zyrobotics apresentará o ReadAble Storiez às salas de aula do distrito escolar de Los Nietos, Califórnia, onde as dificuldades de aprendizado são altas. A empresa também aplicará a inteligência artificial à sua suíte STEM Storiez, uma série de nove livros interativos e inclusivos que ajudam crianças de 3 a 7 anos a se envolverem com ciências, matemática, engenharia e tecnologia.

O programa AI for Accessibility tem sido fundamental para fazer a Zyrobotics decolar com o ReadAble Storiez. “Se não tivéssemos conseguido a subvenção, estaríamos na fase zero”, diz Howard. “Corremos em subsídios para garantir o acesso a tecnologias de aprendizagem para todos os alunos. Precisamos estar lá fora para as crianças que precisam de nós.”

A subvenção deu a Brady e Guggemos a tecnologia para levar o InnerVoice ao próximo nível. “Nossos filhos precisam dessa tecnologia”, diz Brady. “Não é um luxo. Queremos continuar adicionando as melhores coisas. A Microsoft realmente nos impulsionou nessa arena.”

Imagem do topo: Garoto usa o chatbot InnerVoice para descrever sua foto de um ursinho de pelúcia na clínica iTherapy .