Desenvolvimento de recursos para ampliar o uso de Big Data como suporte às políticas públicas

• Processo: 22/00602-0
• Modalidade de apoio: Bolsas no Brasil - Programa Capacitação - Treinamento Técnico
• Data de Início da vigência: 01 de abril de 2022
• Data de Término da vigência: 31 de março de 2024
• Área de conhecimento: Ciências Humanas - Ciência Política - Políticas Públicas
• Pesquisador responsável: Mariana Abrantes Giannotti
• Beneficiário: Fernando Gomes
• Instituição Sede: Faculdade de Filosofia, Letras e Ciências Humanas (FFLCH). Universidade de São Paulo (USP). São Paulo , SP, Brasil
• Vinculado ao auxílio: 13/07616-7 - CEM - Centro de Estudos da Metrópole, AP.CEPID
• Assunto(s): Big data Geoprocessamento LIDAR Mineração de dados
• Palavra(s)-Chave do Pesquisador: big data | Geoprocessamento | Lidar | Mineração de Dados | Processamentos de dados e espacialização

Resumo

O grande volume de dados abertos à disposição e as inúmeras possibilidades de mineração nas mais variadas disciplinas, sãouma oportunidade para o suporte ao desenvolvimento e monitoramento de políticas públicas, sobretudo para o contexto do estudodas cidades e metrópoles. Comumente chamado de Big Data, esse cenário pode não ser mais viável em modelos deinfraestrutura computacional vigentes como clientes/servidores, onde a informação fica a disposição 24/7, em máquinasdedicadas, com processamento sob demanda a partir da requisição do cliente. Além disso, a velocidade de acesso à rede, afacilidade de processamento em nuvem e o barateamento da publicação de conteúdo estático processável no lado do clientecomeçam a desenhar um novo panorama para a publicação, o processamento e a divulgação/publicação de dados e métodos napesquisa. Com base nessa perspectiva, esse projeto tem como objetivo implantar a Metodologia Ágil com entregas e integraçãocontínuas, através da criação de repositórios de código aberto com finalidade específica e DOI único, onde será possíveldisseminar as técnicas, o acesso aos dados brutos e os resultados obtidos, através do compartilhamento de forma reprodutívelem linguagens amplamente utilizadas como Python, R, JavaScript e C++, utilizando bibliotecas e projetos de código aberto elicenças livres. Os códigos e scripts escritos e documentados, além de serem uma forma de persistir e publicar o método, tambémsão os elementos responsáveis pelo processamento em si, seja único ou de integração contínua em uma infraestrutura decomputação em nuvem. Da mesma forma, os resultados serão publicados em formatos abertos legíveis por máquina commetadados em padrões reconhecidos, além de, quando possível, serão disponibilizados em visualizadores para browserexecutados do lado do cliente (sem a necessidade de servidor) utilizando HTML, JavaScript, WebGl e todo um ecossistema deframeworks de visualização de dados consolidados na comunidade de software livre. Com intuito de facilitar e disseminar osdados e métodos desenvolvidos serão promovidos vídeos-aulas, workshops, e eventos de transferência de tecnologia parapúblicos específicos com necessidades pontuais, como servidores da prefeitura do município de São Paulo. Dessa maneira, esteprojeto visa ampliar a capacidade para o uso de Big Data com maior engajamento nos protocolos relativos a dados sugeridos pelaopen science através da implantação de diversos repositórios com temas específicos no GitHub buscando sempre três níveis deenfoque: no método acessível que pode ser reproduzível, contestado e continuamente melhorado; no nível da divulgação deresultados brutos que podem ser utilizados por outras pesquisas, atualizados conforme o estado dos dados originários (ETL) esobretudo na divulgação mais ampla em hotsites e visualizadores de dados/mapas no lado do cliente que, além de ser maiseficiente computacionalmente, é menos oneroso aos institutos que provêm a publicação. Nos três níveis, além da documentação,serão realizados WorkShops, vídeos tutoriais, treinamentos, aulas e treinamentos para auxiliar na divulgação e no engajamentodas pesquisas em curso, além de promover a transferência de tecnologia para a administração municipal.