Aprimoramento do eyeTalk": interface de usuário para escrita e comunicação utilizando comandos oculares e faciais para dispositivos móveis

• Processo: 18/15122-8
• Modalidade de apoio: Auxílio à Pesquisa - Pesquisa Inovativa em Pequenas Empresas - PIPE
• Data de Início da vigência: 01 de setembro de 2021
• Data de Término da vigência: 31 de agosto de 2023
• Área do conhecimento: Ciências Exatas e da Terra - Ciência da Computação - Sistemas de Computação
• Pesquisador responsável: Marcus Vinicius Pontes Lima
• Beneficiário: Marcus Vinicius Pontes Lima
• Empresa: Acta Visio Desenvolvimento em Visão Computacional Ltda
• CNAE: Desenvolvimento e licenciamento de programas de computador customizáveis
• Pesquisadores principais: Hélio Pedrini ; Vinicius Benites Bastos
• Pesquisadores associados: Alan Ferreira Pinheiro Tavares ; Victor Cesar de Souza
• Vinculado ao auxílio: 16/15351-1 - Projeto, desenvolvimento e montagem de um protótipo de sistema de rastreamento ocular embarcado em óculos de visão em primeira pessoa para controle de um drone destinado a pessoas tetraplégicas, AP.PIPE
• Bolsa(s) vinculada(s): 21/10977-8 - Detecção facial e parâmetros, BP.TT; 21/13527-3 - Aprimoramento do eyeTalk: interface de usuário para escrita e comunicação utilizando comandos oculares e faciais para dispositivos móveis, BP.PIPE; 21/10028-6 - Otimização dos parâmetros para detecção ocular e facial EyeTalk, BP.PIPE
• Assunto(s): Visão computacional Dispositivos móveis Interface usuário-computador Pessoas com deficiência Acessibilidade Reconhecimento facial Comunicação Escrita
• Palavra(s)-Chave do Pesquisador: Comandos Faciais | Comunicação | Dispositivos Móveis | interface de usuário | Rastreamento ocular | Visão Computacional | Visão Computacional

Resumo

A comunicação suplementar e/ou alternativa (CSA) é caracterizada pelo uso de gestos, expressões faciais e corporais, símbolos gráficos, fotos, objetos, voz digitalizada ou sintetizada, a qual tem por finalidade promover a comunicação face a face de indivíduos com dificuldades na comunicação. Sabe-se que de acordo com o Censo de 2010, no Brasil há 23,9% da população brasileira com algum tipo de deficiência, sendo que destes, 5,1%, 7% e 1,4% possuem deficiência auditiva, motora, mental ou intelectual, respectivamente. A partir disto, observam-se a importância e a necessidade no desenvolvimento de novas tecnologias ou adaptações para pessoas com deficiência. O propósito deste projeto é a integração de novos recursos no aplicativo EyeTalk" para o aprimoramento da comunicação, melhoria da acessibilidade e o aumento de funcionalidades destinado à pessoas que tenham dificuldade na comunicação ou pessoas não-verbais. O aplicativo EyeTalk" consiste na utilização da câmera frontal de um smartphone ou tablet para realizar a comunicação de uma pessoa que tenha paralisia ou dificuldade na fala - a primeira solução no mundo de comunicação utilizando comandos oculares por aplicativo móvel. A tecnologia utiliza um algoritmo de marcos faciais para detectar o olho do usuário e através disso realizar a digitação de palavras por meio de um teclado especial. Foi desenvolvido um teclado específico para o usuário realizar a seleção do conjunto de letras do alfabeto. Até a presente proposta o aplicativo desenvolvido apresenta uma boa acurácia, mas fatores como a iluminação do ambiente interferem na sua robustez. Visto isso, o aplicativo EyeTalk" será beneficiado e melhorado em muitos aspectos para que possa entrar ao mercado de forma eficaz. A implementação de novos recursos e ferramentas facilitarão a comunicação do usuário com outras pessoas, tais como: expressões faciais, implementação de frases prontas, conversão do texto digitado em voz (masculina ou feminina), recurso de preenchimento automático de palavras, teclado traduzido - para esta fase de teste será em inglês e português, desenvolvimento de um teclado universal.A expansão desta nova ferramenta proporcionará ao usuário ter maior controle do seu dispositivo com o uso do movimento ocular e expressões faciais, criando uma base para uma interface para controle total do smartphone ou tablet por comandos oculares e faciais - tecnologia ainda não existente no mercado. Inicialmente, para o eyeTalk", o negócio está voltado diretamente ao consumidor (B2C) com fonte de renda através de licenciamento do aplicativo, com planos mensais, trimestrais, semestrais e anuais. Para esta proposta, será analisado o modelo B2B, com o licenciamento ou venda da tecnologia para empresas produtoras de smartphones e tablets como a Apple, Samsung, LG, de forma a agregar mais valor a seus produtos com o aumento de acessibilidade e funcionalidades. Para esta fase 2 propõe-se expandir as funcionalidades do EyeTalk" tornando-o mais completo para entrar no mercado e possibilitar a exploração do licenciamento ou vendas da tecnologia para grandes empresas fabricantes de dispositivos móveis, com o objetivo de agregar mais valor a seus produtos e disponibilizar mais acessibilidade para um número maior de pessoas. (AU)