OnAIR 2.0: um sistema web 2.0 para busca e recuperação de informação multimídia baseado em ontologias

• Processo: 10/19111-9
• Modalidade de apoio: Auxílio à Pesquisa - Regular
• Data de Início da vigência: 01 de junho de 2011
• Data de Término da vigência: 30 de novembro de 2013
• Área do conhecimento: Ciências Exatas e da Terra - Ciência da Computação
• Pesquisador responsável: Renata Wassermann
• Beneficiário: Renata Wassermann
• Instituição Sede: Instituto de Matemática e Estatística (IME). Universidade de São Paulo (USP). São Paulo , SP, Brasil
• Pesquisadores associados: Fabio Kon
• Bolsa(s) vinculada(s): 11/10624-6 - Um sistema de nuvem para busca, recuperação e visualização de informações multimídia, BP.TT
• Assunto(s): Web Ontologia (ciência da computação) Web semântica Web 2.0 Recuperação da informação Multimídia interativa
• Palavra(s)-Chave do Pesquisador: Multimídia | ontologias | Recuperação de informações | Web semântica

Resumo

Desde o início da Web, o desejo de tornar as páginas mais dinâmicas e atrativas, com conteúdo multimídia como música e vídeos, sempre esteve presente. Nos últimos anos, com conexões de banda larga e o crescimento do poder computacional dos computadores pessoais e dispositivos móveis, estamos presenciando uma nova explosão na quantidade de material multimídia disponível na Internet e o surgimento de interessantes ferramentas de compartilhamento deste material associadas à Web 2.0. No entanto, o crescimento do volume de informações em formato multimídia na Web enfrenta hoje o problema de análise e acesso ao conteúdo armazenado. Não há ainda ferramentas de eficiência e popularidade semelhantes às voltadas a texto quando se trata de busca em coleções de objetos multimídia. Quase sempre, as buscas por material multimídia limitam-se a buscas textuais nos nomes dos arquivos e a rótulos (tags) a eles associados pelos seus criadores. O crescimento do volume de informações traz consigo também o problema da disponibilização do conteúdo. A disponibilização de centenas de horas de conteúdo multimídia para visualização sem prever a quantidade de acessos gera congestionamentos que impedem o acesso à informação pelo usuário. O projeto aqui proposto visa a contribuir com o desenvolvimento de novas interfaces e formas de colaboração na Web centradas no compartilhamento, navegação e busca em informações multimídia, principalmente vídeo+áudio, utilizando-se de ferramentas avançadas de Sistemas de Software, Inteligência Artificial e Ontologias. Visa também contribuir com a implementação de uma arquitetura colaborativa que permita a disponibilização de informações multimídia prevendo os congestionamentos e mantendo o sistema sempre disponível. A pesquisa será embasada em um trabalho anterior desenvolvido em conjunto por membros da equipe proponente que culminou no desenvolvimento do Sistema OnAIR (Ontology Aided Information Retrieval). OnAIR permite que um vídeo de longa duração seja recortado em pequenos trechos e que texto e meta-informações sejam associados a cada um destes trechos por um especialista do domínio. Em posse destas informações e de uma ontologia do assunto tratado no vídeo, o sistema oferece uma interface através da qual o usuário pode digitar uma pergunta em linguagem natural, por exemplo, português e o sistema apresenta uma lista ordenada dos trechos de vídeo que melhor respondem à pergunta. Propomos, neste novo projeto, o desenvolvimento de um arcabouço conceitual e tecnológico de busca e recuperação de informação multimídia baseado no uso de ontologias; tal arcabouço poderá ser usado tanto no contexto de portais ao estilo da Web 2.0 quanto em aplicações independentes para computadores pessoais ou dispositivos móveis tais como telefones celulares. A fim de demonstrar a efetividade do arcabouço, ele será utilizado para o desenvolvimento de um portal pedagógico sobre Padrões de Projeto de Software Orientado a Objetos e assuntos relacionados contendo dezenas de horas de vídeo indexado sobre o assunto. O portal pedagógico sobre Padrões de Projeto de Software foi escolhido como aplicação de OnAIR 2.0 pela natureza altamente colaborativa da comunidade de padrões, pela importância educacional do tema para a formação de novos computólogos e desenvolvedores de software e pelo caráter estruturado, objetivo e racional do domínio de Engenharia de Software. A primeira versão do OnAIR foi testada sobre o domínio da arte contemporânea. A aplicação permitia que um usuário interagisse com uma artista, fazendo perguntas sobre sua obra, que eram respondidas em vídeo. Selecionamos, portanto, para demonstrar a grande abrangência potencial de OnAIR 2.0, duas aplicações cujos impactos remodelam a sociedade: a tecnologia, com seus desdobramentos na prática cotidiana representada pelo uso de padrões no desenvolvimento de software, e a arte, que oferece ao mundo signos dinâmicos dessa transformação. (AU)

Publicações científicas

(4)

(Referências obtidas automaticamente do Web of Science e do SciELO, por meio da informação sobre o financiamento pela FAPESP e o número do processo correspondente, incluída na publicação pelos autores)

COSTA-JUSSA, MARTA R.. Segmentation Strategies to Face Morphology Challenges in Brazilian-Portuguese/English Statistical Machine Translation and Its Integration in Cross-Language Information Retrieval. Comp. y Sist., v. 19, n. 2, p. 14-pg., 2015-01-01. (10/19111-9)

COSTA-JUSSA, MARTA R.. Segmentation Strategies to Face Morphology Challenges in Brazilian-Portuguese/English Statistical Machine Translation and Its Integration in Cross-Language Information Retrieval. Comp. y Sist., v. 19, n. 2, p. 357-370, 2015. (10/19111-9)

ROCHA, VLADIMIR; KON, FABIO; COBE, RAPHAEL; WASSERMANN, RENATA. A hybrid cloud-P2P architecture for multimedia information retrieval on VoD services. COMPUTING, v. 98, n. 1-2, SI, p. 73-92, JAN 2016. (10/19111-9)

ROCHA, VLADIMIR; KON, FABIO; COBE, RAPHAEL; WASSERMANN, RENATA. A hybrid cloud-P2P architecture for multimedia information retrieval on VoD services. COMPUTING, v. 98, n. 1-2, p. 20-pg., 2016-01-01. (10/19111-9)