Detecção de Cenas em Segmentos Semanticamente Complexos

• Processo: 11/05238-0
• Modalidade de apoio: Bolsas no Brasil - Mestrado
• Data de Início da vigência: 01 de março de 2012
• Data de Término da vigência: 31 de março de 2013
• Área de conhecimento: Ciências Exatas e da Terra - Ciência da Computação
• Pesquisador responsável: Rudinei Goularte
• Beneficiário: Bruno Lorenço Lopes
• Instituição Sede: Instituto de Ciências Matemáticas e de Computação (ICMC). Universidade de São Paulo (USP). São Carlos , SP, Brasil
• Assunto(s): Multimídia Multimodalidade
• Palavra(s)-Chave do Pesquisador: Multimídia | Multimodalidade | Personalização de Conteúdo | Segmentação de Vídeo | Multimídia

Resumo

O objetivo deste projeto é desenvolver uma técnica de segmentação de vídeo que seja capaz de identificar cenas em segmentos semanticamente complexos, onde mudanças de cena ocorrem quando o assunto ou tema mudam. A proposta é investigar a aplicação da técnica Bag of Features para categorizar semanticamente os segmentos de um vídeo. A semântica alcançada por essa técnica é latente e diz respeito apenas às características visuais do vídeo, clusterizando segmentos visualmente similares. Assim, propõe-se investigar meios de estender a técnica Bag of Features para trabalhar com multimodalidade, processando também características vindas de outras mídias presentes no vídeo (como o áudio e o closed caption). Desse modo seria possível reconhecer segmentos vizinhos visualmente diferentes, que, contudo, tratam do mesmo assunto, como pertencentes a uma mesma cena.

Publicações acadêmicas

(Referências obtidas automaticamente das Instituições de Ensino e Pesquisa do Estado de São Paulo)

LOPES, Bruno Lorenço. Detecção de cenas em segmentos semanticamente complexos. 2014. Dissertação de Mestrado - Universidade de São Paulo (USP). Instituto de Ciências Matemáticas e de Computação (ICMC/SB) São Carlos.