Coleta de dados complementares para análises personalizáveis.

• Processo: 24/09211-9
• Modalidade de apoio: Bolsas no Brasil - Programa Capacitação - Treinamento Técnico
• Data de Início da vigência: 01 de julho de 2024
• Data de Término da vigência: 31 de dezembro de 2025
• Área de conhecimento: Ciências Exatas e da Terra - Ciência da Computação - Sistemas de Computação
• Pesquisador responsável: Danilo Amaral de Oliveira
• Beneficiário: Rodolfo Murilo Barbosa Moura
• CNAE: Tratamento de dados, provedores de serviços de aplicação e serviços de hospedagem na internet ; Outras atividades de prestação de serviços de informação não especificadas anteriormente
• Vinculado ao auxílio: 23/16491-5 - Sigalei Analytics: Transformando Documentos Regulatórios em Decisões Estratégicas, AP.PIPE
• Palavra(s)-Chave do Pesquisador: estrutura de dados | web crawling | Engenharia de dados

Resumo

Documentos complementares não são documentos oficiais para a aprovação de uma regulamentação, contudo estes documentos possuem indicadores de oportunidades e riscos sobre o relacionamento de parlamentares e organizações com as regulamentações em trâmite. Entre os documentos complementares podem ser citados dados de redes sociais (twitter, linkedin e threads), artigos, notícias e matérias publicadas em sites específicos. Nesse sentido, o bolsista será responsável pela implementação de robôs automatizados para coletar documentos complementares. A alta variabilidade dos tipos de documentos e o grande volume das fontes de publicação incrementam a complexidade na execução desta atividade.O bolsista também será responsável por realizar correções nos robôs desenvolvidos para que a aquisição de documentos complementares e a estruturação destes dados seja executada (e permaneça) sem erros. Por fim, é importante que o bolsista desenvolva robôs coletores que respeitem os termos legais e evite a sobrecarga desnecessária nas fontes publicadoras de dados.