Busca avançada
Ano de início
Entree

Aprendizado de características espaço-temporais em vídeos

Processo: 15/05310-3
Linha de fomento:Bolsas no Brasil - Doutorado
Vigência (Início): 01 de julho de 2015
Vigência (Término): 31 de janeiro de 2019
Área do conhecimento:Ciências Exatas e da Terra - Ciência da Computação - Metodologia e Técnicas da Computação
Convênio/Acordo: Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)
Pesquisador responsável:Moacir Antonelli Ponti
Beneficiário:Gabriel de Barros Paranhos da Costa
Instituição-sede: Instituto de Ciências Matemáticas e de Computação (ICMC). Universidade de São Paulo (USP). São Carlos , SP, Brasil
Vinculado ao auxílio:11/22749-8 - Desafios em visualização exploratória de dados multidimensionais: novos paradigmas, escalabilidade e aplicações, AP.TEM
Bolsa(s) vinculada(s):17/00728-5 - Aprendizado de características espaço-temporais e zero-shot learning utilizando fatoração de tensores, BE.EP.DR
Assunto(s):Reconhecimento de padrões   Análise espaço-temporal

Resumo

Atualmente, o método considerado como estado da arte para realizar a extração de características espaço-temporais a partir de vídeos baseia-se em pontos de interesse e trajetórias densas para aplicar extratores de características clássicos, como SIFT e HOG. Com a melhora na capacidade de processamento de CPUs e GPUs, combinada com o aumento da disponibilidade de bases de dados de imagens e vídeos, métodos de aprendizado de características, em especial de \textit{deep learning}, têm alcançado o estado da arte em diversas áreas de inteligência artificial e processamento de sinais. Apesar disso, esses métodos foram pouco explorados com relação à extração de características espaço-temporais a partir de vídeos. As pesquisas realizadas nessa área têm obtido resultados promissores, entretanto, elas tendem focar em uma aplicação específica, restringindo a utilização das características obtidas àquela aplicação. Além disso, diversos conceitos usados para projetar manualmente extratores de características ainda não foram testados em conjunto com algoritmos de aprendizado de características. Neste projeto, propõe-se o desenvolvimento de algoritmos de aprendizado de características espaço-temporais em vídeos. Espera-se que esses métodos consigam extrair representações capazes de descrever eventos que não são capturados a partir da análise de um único quadro, mas sim na evolução da cena. Pretende-se que essas características formem uma série temporal multidimensional, na qual a informação espacial esteja codificada. Para avaliar a qualidade da representação desenvolvida, técnicas de visualização e projeção serão utilizadas de forma a possibilitar a análise do espaço de parâmetros obtido. Além disso, buscar-se-á por métodos que permitam visualizar as características obtidas, de forma a facilitar sua relação com os eventos ocorridos nos vídeos. (AU)

Publicações científicas
(Referências obtidas automaticamente do Web of Science e do SciELO, por meio da informação sobre o financiamento pela FAPESP e o número do processo correspondente, incluída na publicação pelos autores)
PONTI, MOACIR A.; DA COSTA, GABRIEL B. PARANHOS; SANTOS, FERNANDO P.; SILVEIRA, KAUE U. Supervised and unsupervised relevance sampling in handcrafted and deep learning features obtained from image collections. APPLIED SOFT COMPUTING, v. 80, p. 414-424, JUL 2019. Citações Web of Science: 0.

Por favor, reporte erros na lista de publicações científicas escrevendo para: cdi@fapesp.br.