Correção da pose de faces em videoconferência usando câmeras RGBD

• Processo: 15/26951-7
• Modalidade de apoio: Bolsas no Brasil - Iniciação Científica
• Data de Início da vigência: 01 de abril de 2016
• Data de Término da vigência: 31 de dezembro de 2016
• Área de conhecimento: Ciências Exatas e da Terra - Ciência da Computação - Sistemas de Computação
• Pesquisador responsável: Carlos Hitoshi Morimoto
• Beneficiário: Rafael Pereira Lima
• Instituição Sede: Instituto de Matemática e Estatística (IME). Universidade de São Paulo (USP). São Paulo , SP, Brasil
• Assunto(s): Computação gráfica Visão computacional Processamento de imagens Videoconferência Percepção de profundidade Câmeras de vídeo
• Palavra(s)-Chave do Pesquisador: Computação Gráfica | Processamento de imagens | RealSense | Videoconferência | Computação Gráfica

Resumo

O estímulo visual fornecido em videoconferências enriquece a comunicação à distância, mas a experiência do usuário ainda é muito diferente de um contato presencial. Um fator limitante durante essas conversações é a inexistência de contato visual direto, visto que a câmera que filma a pessoa precisa ser colocada em uma posição distinta da imagem da face exibida na tela do computador. Nesse projeto de iniciação científica, propomos o estudo de técnicas de visão computacional para estimar a pose da face por meio de uma câmera RGBD e gerar um novo vídeo com a pose corrigida para criar uma interação mais natural. Para isso, o candidato vai estudar a tecnologia RealSense da Intel para detectar e estimar a pose de faces em imagens RGBD, e também estudar técnicas de computação gráfica para modelar faces e renderizá-las sob uma nova orientação.