#PraCegoVer: audiodescrição automática de imagens

Resumo

A Internet tem se tornado cada vez mais acessível, alcançando os mais diversos públicos. Entretanto, pouco se tem avançado na questão da inclusão das pessoas com deficiência, e o cenário se torna ainda pior quando se trata especificamente de deficiência visual, dado que grande parte do conteúdo publicado é exclusivamente visual (por exemplo, fotos, imagens publicitárias). Diariamente, os deficientes visuais sofrem com a violação de seu direito ao acesso à Internet, que é garantido pelo Art. 4º, inciso I do Marco Civil da Internet. Assim, descrever de forma automática o conteúdo de imagens usando sentenças bem formuladas é uma tarefa importante para a inclusão de pessoas com deficiência visual na Internet. Todavia, realizar esse tipo de descrição, problema conhecido como image captioning, ainda é um grande desafio. Image captioning tem como objetivo descrever não apenas os objetos contidos na imagem, mas também a relação semântica entre eles. Dessa forma, além de métodos de interpretação visual, modelos linguísticos são necessários para expressar as questões semânticas descritas. Recentemente, as postagens de imagens nas redes sociais estão sendo publicadas com a hashtag #PraCegoVer, que consiste na breve descrição do conteúdo visual da imagem. O projeto PraCegoVer, iniciado em 2012, visa a disseminação da cultura da acessibilidade nas redes sociais a partir da audiodescrição de imagens (tradução do conteúdo visual para o textual, obedecendo aos critérios de acessibilidade) para apreciação das pessoas com deficiência visual. Inspirado nesse movimento, este projeto de Iniciação Científica visa investigar técnicas de Aprendizado de Máquina para\emph{image captioning} para audiodescrição de imagens. Os objetivos principais são: 1) construir uma base de dados multimodal, composta por imagens e suas audiodescrições anotadas em Português (maior parte das bases são voltadas para a língua inglesa); 2) estudar e propor melhorias para as arquiteturas de redes neurais para image captioning; 3) criar um modelo para a geração automática de audiodescrição, que será validado junto a um especialista na área. Como consequência, esperamos incluir pessoas portadoras de deficiência visual na Internet, tornando-a mais acessível. (AU)