Computação forense e criminalística de documentos: coleta, organização, classificação e análise de evidências

• Processo: 10/05647-4
• Modalidade de apoio: Auxílio à Pesquisa - Jovens Pesquisadores
• Data de Início da vigência: 01 de dezembro de 2010
• Data de Término da vigência: 30 de novembro de 2014
• Área do conhecimento: Ciências Exatas e da Terra - Ciência da Computação - Metodologia e Técnicas da Computação
• Pesquisador responsável: Anderson de Rezende Rocha
• Beneficiário: Anderson de Rezende Rocha
• Instituição Sede: Instituto de Computação (IC). Universidade Estadual de Campinas (UNICAMP). Campinas , SP, Brasil
• Município da Instituição Sede: Campinas
• Auxílio(s) vinculado(s): 14/18289-0 - 7th International Conference on Similarity Search and Applications (SISAP'2014), AR.EXT
• Bolsa(s) vinculada(s): 11/03808-3 - Atribuição de fonte em imagens provenientes de câmeras digitais, BP.MS
• Assunto(s): Criminalística Falsificação
• Palavra(s)-Chave do Pesquisador: Análise de Evidências | Análise Forense de Documentos | Coleta e Organização de Evidências | Computação Forense e Criminalística de Documentos | Deteccção de Falsificações | Ferramentas Forenses | Computação Forense Digital

Resumo

Documentos digitais (e.g., imagens, vídeos) estão em toda parte --- desde nossos celulares a websites de notícias. No entanto, o que podemos fazer com as diferentes técnicas de processamento de documentos digitais disponíveis atualmente traz à tona uma diversidade surpreendente de questões legais e éticas que precisamos tratar. A manipulação de uma imagem é apropriada em casos onde a mesma imagem pode afetar o comportamento das pessoas? Como saber se uma imagem representa um crime ou uma situação que nunca existiu? Antes de qualquer ação policial ser empregada baseada em um documento questionável, precisamos analisar o documento em si. Investigadores provenientes dos mais diversos campos da Ciência precisam das melhores abordagens e ferramentas para lidar com os desafios apresentados pelas técnicas de processamento maliciosas disponíveis atualmente. Neste projeto de pesquisa, propomos a investigação de possíveis soluções para problemas de Computação Forense Digital relacionados à coleta, organização, classificação e análise de evidências digitais. Em relação à coleta e organização, procuramos abordagens para reduzir a utilização errônea e ingênua de possíveis evidências importantes. Com respeito à classificação, buscamos soluções que nos permitam categorizar as evidências de modo a reduzir o esforço técnico necessário durante sua análise. Finalmente, em relação à análise, objetivamos investigar a fonte originadora de um determinado documento, como sua autenticidade. Na identificação da fonte originadora, buscamos identificar o modelo particular de um dispositivo de captura (e.g., scanner, câmera, impressora), ou o dispositivo exato, que fez a captura de um documento. Na detecção de manipulações, procuramos estabelecer a autenticidade de um documento ou expor quaisquer manipulações que este possa ter sofrido. Propomos realizar esta pesquisa em colaboração com nossos parceiros da Polícia Federal do Brasil e com a Polícia Técnico-Científica do Estado de São Paulo. (AU)

Publicações científicas

(40)

(Referências obtidas automaticamente do Web of Science e do SciELO, por meio da informação sobre o financiamento pela FAPESP e o número do processo correspondente, incluída na publicação pelos autores)

MORAIS, ERIKSON; FERREIRA, ANESLMO; CUNHA, SERGIO AUGUSTO; BARROS, RICARDO M. L.; ROCHA, ANDERSON; GOLDENSTEIN, SIOME. A multiple camera methodology for automatic localization and tracking of futsal players. PATTERN RECOGNITION LETTERS, v. 39, n. SI, p. 21-30, APR 1 2014. (10/05647-4)

FABIAN, JUNIOR; PIRES, RAMON; ROCHA, ANDERSON. Visual words dictionaries and fusion techniques for searching people through textual and visual attributes. PATTERN RECOGNITION LETTERS, v. 39, n. SI, p. 74-84, APR 1 2014. (10/05647-4)

COSTA, FILIPE DE O.; SILVA, EWERTON; ECKMANN, MICHAEL; SCHEIRER, WALTER J.; ROCHA, ANDERSON. Open set source camera attribution and device linking. PATTERN RECOGNITION LETTERS, v. 39, n. SI, p. 92-101, APR 1 2014. (10/05647-4)

ROCHA, ANDERSON; PAPA, JOAO PAULO; MEIRA, LUIS A. A.. HOW FAR DO WE GET USING MACHINE LEARNING BLACK-BOXES?. INTERNATIONAL JOURNAL OF PATTERN RECOGNITION AND ARTIFICIAL INTELLIGENCE, v. 26, n. 2, MAR 2012. (10/05647-4)

ROCHA, ANDERSON; SCHEIRER, WALTER; BOULT, TERRANCE; GOLDENSTEIN, SIOME. Vision of the Unseen: Current Trends and Challenges in Digital Image and Video Forensics. ACM COMPUTING SURVEYS, v. 43, n. 4, OCT 2011. (07/52015-0, 08/08681-9, 05/58103-3, 10/05647-4)

DIAS, ZANONI; GOLDENSTEIN, SIOME; ROCHA, ANDERSON. Large-Scale Image Phylogeny: Tracing Image Ancestral Relationships. IEEE MULTIMEDIA, v. 20, n. 3, p. 58-70, JUL-SEP 2013. (10/05647-4)

MENDES JUNIOR, PEDRO R.; DE SOUZA, ROBERTO M.; WERNECK, RAFAEL DE O.; STEIN, BERNARDO V.; PAZINATO, DANIEL V.; DE ALMEIDA, WALDIR R.; PENATTI, OTAVIO A. B.; TORRES, RICARDO DA S.; ROCHA, ANDERSON. Nearest neighbors distance ratio open-set classifier. MACHINE LEARNING, v. 106, n. 3, p. 359-386, MAR 2017. (10/05647-4, 13/50155-0, 15/19222-9, 13/50169-1)

PIRES, RAMON; AVILA, SANDRA; JELINEK, HERBERT F.; WAINER, JACQUES; VALLE, EDUARDO; ROCHA, ANDERSON. Beyond Lesion-Based Diabetic Retinopathy: A Direct Approach for Referral. IEEE JOURNAL OF BIOMEDICAL AND HEALTH INFORMATICS, v. 21, n. 1, p. 193-200, JAN 2017. (08/54443-2, 10/05647-4)

MENOTTI, DAVID; CHIACHIA, GIOVANI; PINTO, ALLAN; SCHWARTZ, WILLIAM ROBSON; PEDRINI, HELIO; FALCAO, ALEXANDRE XAVIER; ROCHA, ANDERSON. Deep Representations for Iris, Face, and Fingerprint Spoofing Detection. IEEE Transactions on Information Forensics and Security, v. 10, n. 4, p. 864-879, APR 2015. (11/22749-8, 13/04172-0, 13/11359-0, 10/05647-4)

CARVALHO, TIAGO; FARIA, FABIO A.; PEDRINI, HELIO; TORRES, RICARDO DA S.; ROCHA, ANDERSON. Illuminant-Based Transformed Spaces for Image Forensics. IEEE Transactions on Information Forensics and Security, v. 11, n. 4, p. 720-733, APR 2016. (11/22749-8, 10/14910-0, 10/05647-4)

FABIAN, JUNIOR; PIRES, RAMON; ROCHA, ANDERSON. Visual words dictionaries and fusion techniques for searching people through textual and visual attributes. PATTERN RECOGNITION LETTERS, v. 39, p. 11-pg., 2014-04-01. (10/05647-4)

AFONSO, L.; PAPA, J.; PAPA, L.; MARANA, A.; ROCHA, ANDERSON; IEEE. AUTOMATIC VISUAL DICTIONARY GENERATION THROUGH OPTIMUM-PATH FOREST CLUSTERING. 2012 IEEE INTERNATIONAL CONFERENCE ON IMAGE PROCESSING (ICIP 2012), v. N/A, p. 4-pg., 2012-01-01. (09/16206-1, 10/05647-4)

PINTO, ALLAN; PEDRINI, HELIO; SCHWARTZ, WILLIAM ROBSON; ROCHA, ANDERSON. Face Spoofing Detection Through Visual Codebooks of Spectral Temporal Cubes. IEEE Transactions on Image Processing, v. 24, n. 12, p. 4726-4740, DEC 2015. (11/22749-8, 10/05647-4)

CHIACHIA, GIOVANI; FALCAO, ALEXANDRE X.; PINTO, NICOLAS; ROCHA, ANDERSON; COX, DAVID. Learning Person-Specific Representations From Faces in the Wild. IEEE Transactions on Information Forensics and Security, v. 9, n. 12, p. 2089-2099, DEC 2014. (13/11359-0, 10/00994-8, 10/05647-4)

COSTA, FILIPE DE O.; OIKAWA, MARINA A.; DIAS, ZANONI; GOLDENSTEIN, SIOME; ROCHA, ANDERSON DE REZENDE. Image Phylogeny Forests Reconstruction. IEEE Transactions on Information Forensics and Security, v. 9, n. 10, p. 1533-1546, OCT 2014. (13/08293-7, 10/05647-4)

FERREIRA, ANSELMO; NAVARRO, LUIZ C.; PINHEIRO, GIULIANO; DOS SANTOS, JEFERSSON A.; ROCHA, ANDERSON. Laser printer attribution: Exploring new features and beyond. Forensic Science International, v. 247, p. 105-125, FEB 2015. (10/05647-4)

ROCHA, ANDERSON; GOLDENSTEIN, SIOME KLEIN. Multiclass from Binary: Expanding One-Versus-All, One-Versus-One and ECOC-Based Approaches. IEEE TRANSACTIONS ON NEURAL NETWORKS AND LEARNING SYSTEMS, v. 25, n. 2, p. 289-302, FEB 2014. (10/05647-4)

FARIA, F. A.; PERRE, P.; ZUCCHI, R. A.; JORGE, L. R.; LEWINSOHN, T. M.; ROCHA, A.; TORRES, R. DA S.. Automatic identification of fruit flies (Diptera: Tephritidae). JOURNAL OF VISUAL COMMUNICATION AND IMAGE REPRESENTATION, v. 25, n. 7, p. 1516-1527, OCT 2014. (98/05085-2, 10/14910-0, 09/54806-0, 10/05647-4)

DIAS, ZANONI; GOLDENSTEIN, SIOME; ROCHA, ANDERSON. Exploring heuristic and optimum branching algorithms for image phylogeny. JOURNAL OF VISUAL COMMUNICATION AND IMAGE REPRESENTATION, v. 24, n. 7, p. 1124-1134, OCT 2013. (10/05647-4)

PIRES, RAMON; JELINEK, HERBERT F.; WAINER, JACQUES; GOLDENSTEIN, SIOME; VALLE, EDUARDO; ROCHA, ANDERSON. Assessing the Need for Referral in Automatic Diabetic Retinopathy Detection. IEEE Transactions on Biomedical Engineering, v. 60, n. 12, p. 3391-3398, DEC 2013. (11/15349-3, 10/05647-4)

SCHEIRER, WALTER J.; ROCHA, ANDERSON; MICHEALS, ROSS J.; BOULT, TERRANCE E.. Meta-Recognition: The Theory and Practice of Recognition Score Analysis. IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, v. 33, n. 8, p. 1689-1695, AUG 2011. (10/05647-4)

FARIA, FABIO A.; ALMEIDA, JURANDY; ALBERTON, BRUNA; MORELLATO, LEONOR PATRICIA C.; ROCHA, ANDERSON; TORRES, RICARDO DA S.. Time series-based classifier fusion for fine-grained plant species recognition. PATTERN RECOGNITION LETTERS, v. 81, n. SI, p. 101-109, OCT 1 2016. (10/51307-0, 14/00215-0, 10/14910-0, 10/52113-5, 13/50155-0, 07/59779-6, 10/05647-4, 07/52015-0, 09/18438-7, 11/51523-8)

FARIA, FABIO A.; DOS SANTOS, JEFERSSON A.; ROCHA, ANDERSON; TORRES, RICARDO DA S.. A framework for selection and fusion of pattern classifiers in multimedia recognition. PATTERN RECOGNITION LETTERS, v. 39, n. SI, p. 52-64, APR 1 2014. (12/18768-0, 10/14910-0, 10/05647-4)

FARIA, FABIO A.; PEDRONETTE, DANIEL C. G.; DOS SANTOS, JEFERSSON A.; ROCHA, ANDERSON; TORRES, RICARDO DA S.. Rank Aggregation for Pattern Classifier Selection in Remote Sensing Images. IEEE JOURNAL OF SELECTED TOPICS IN APPLIED EARTH OBSERVATIONS AND REMOTE SENSING, v. 7, n. 4, p. 1103-1115, APR 2014. (10/14910-0, 12/18768-0, 13/08645-0, 10/05647-4)

PIRES, RAMON; JELINEK, HERBERT F.; WAINER, JACQUES; VALLE, EDUARDO; ROCHA, ANDERSON. Advancing Bag-of-Visual-Words Representations for Lesion Classification in Retinal Images. PLoS One, v. 9, n. 6, JUN 2 2014. (11/15349-3, 10/05647-4)

SCHEIRER, WALTER J.; ROCHA, ANDERSON DE REZENDE; PARRIS, JONATHAN; BOULT, TERRANCE E.. Learning for Meta-Recognition. IEEE Transactions on Information Forensics and Security, v. 7, n. 4, p. 1214-1224, AUG 2012. (10/05647-4)

SCHEIRER, WALTER J.; ROCHA, ANDERSON DE REZENDE; SAPKOTA, ARCHANA; BOULT, TERRANCE E.. Toward Open Set Recognition. IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, v. 35, n. 7, p. 1757-1772, JUL 2013. (10/05647-4)

DE OLIVEIRA, ALBERTO A.; FERRARA, PASQUALE; DE ROSA, ALESSIA; PIVA, ALESSANDRO; BARNI, MAURO; GOLDENSTEIN, SIOME; DIAS, ZANONI; ROCHA, ANDERSON. Multiple Parenting Phylogeny Relationships in Digital Images. IEEE Transactions on Information Forensics and Security, v. 11, n. 2, p. 328-343, FEB 2016. (13/08293-7, 11/22749-8, 13/21251-1, 10/05647-4)

MORAES, DANIEL; WAINER, JACQUES; ROCHA, ANDERSON. Low false positive learning with support vector machines. JOURNAL OF VISUAL COMMUNICATION AND IMAGE REPRESENTATION, v. 38, p. 340-350, JUL 2016. (10/05647-4)

PINTO, ALLAN; SCHWARTZ, WILLIAM ROBSON; PEDRINI, HELIO; ROCHA, ANDERSON DE REZENDE. Using Visual Rhythms for Detecting Video-Based Facial Spoof Attacks. IEEE Transactions on Information Forensics and Security, v. 10, n. 5, p. 1025-1038, MAY 2015. (11/22749-8, 10/05647-4)

TOKUDA, ERIC; PEDRINI, HELIO; ROCHA, ANDERSON. Computer generated images vs. digital photographs: A synergetic feature and classifier combination approach. JOURNAL OF VISUAL COMMUNICATION AND IMAGE REPRESENTATION, v. 24, n. 8, p. 1276-1292, NOV 2013. (11/22749-8, 10/13745-6, 10/05647-4)

SILVA, EWERTON; CARVALHO, TIAGO; FERREIRA, ANSELMO; ROCHA, ANDERSON. Going deeper into copy-move forgery detection: Exploring image telltales via multi-scale analysis and voting processes. JOURNAL OF VISUAL COMMUNICATION AND IMAGE REPRESENTATION, v. 29, p. 16-32, MAY 2015. (10/05647-4)

PIRES, RAMON; CARVALHO, TIAGO; SPURLING, GEOFFREY; GOLDENSTEIN, SIOME; WAINER, JACQUES; LUCKIE, ALAN; JELINEK, HERBERT F.; ROCHA, ANDERSON. Automated Multi-Lesion Detection for Referable Diabetic Retinopathy in Indigenous Health Care. PLoS One, v. 10, n. 6, JUN 2 2015. (08/54443-2, 10/05647-4)

RUPPERT, GUILHERME C. S.; CHIACHIA, GIOVANI; BERGO, FELIPE P. G.; FAVRETTO, FERNANDA O.; YASUDA, CLARISSA L.; ROCHA, ANDERSON; FALCAO, ALEXANDRE X.. Medical image registration based on watershed transform from greyscale marker and multi-scale parameter search. COMPUTER METHODS IN BIOMECHANICS AND BIOMEDICAL ENGINEERING-IMAGING AND VISUALIZATION, v. 5, n. 2, p. 138-156, 2017. (13/11359-0, 07/52015-0, 10/00994-8, 10/05647-4)

PAPA, JOAO PAULO; ROCHA, ANDERSON; IEEE. IMAGE CATEGORIZATION THROUGH OPTIMUM PATH FOREST AND VISUAL WORDS. 2011 18TH IEEE INTERNATIONAL CONFERENCE ON IMAGE PROCESSING (ICIP), v. N/A, p. 4-pg., 2011-01-01. (09/16206-1, 10/05647-4)

COSTA, FILIPE DE O.; SILVA, EWERTON; ECKMANN, MICHAEL; SCHEIRER, WALTER J.; ROCHA, ANDERSON. Open set source camera attribution and device linking. PATTERN RECOGNITION LETTERS, v. 39, p. 10-pg., 2014-04-01. (10/05647-4)

MORAIS, ERIKSON; FERREIRA, ANESLMO; CUNHA, SERGIO AUGUSTO; BARROS, RICARDO M. L.; ROCHA, ANDERSON; GOLDENSTEIN, SIOME. A multiple camera methodology for automatic localization and tracking of futsal players. PATTERN RECOGNITION LETTERS, v. 39, p. 10-pg., 2014-04-01. (10/05647-4)

SILVA, ELIEZER; TEIXEIRA, THIAGO; TEODORO, GEORGE; VALLE, EDUARDO; TRAINA, AJM; TRAINA, C; CORDEIRO, RLF. Large-Scale Distributed Locality-Sensitive Hashing for General Metric Data. SIMILARITY SEARCH AND APPLICATIONS, v. 8821, p. 12-pg., 2014-01-01. (10/05647-4)

FARIA, FABIO A.; ALMEIDA, JURANDY; ALBERTON, BRUNA; MORELLATO, LEONOR PATRICIA C.; ROCHA, ANDERSON; TORRES, RICARDO DA S.. Time series-based classifier fusion for fine-grained plant species recognition. PATTERN RECOGNITION LETTERS, v. 81, p. 9-pg., 2016-10-01. (10/05647-4, 10/14910-0, 14/00215-0, 10/51307-0, 11/51523-8, 07/52015-0, 10/52113-5, 07/59779-6, 13/50155-0, 09/18438-7)

FARIA, FABIO A.; DOS SANTOS, JEFERSSON A.; ROCHA, ANDERSON; TORRES, RICARDO DA S.. A framework for selection and fusion of pattern classifiers in multimedia recognition. PATTERN RECOGNITION LETTERS, v. 39, p. 13-pg., 2014-04-01. (10/14910-0, 12/18768-0, 10/05647-4)