Alinhamento de modelos médicos 3D no Microsoft Hololens

• Processo: 21/12132-5
• Modalidade de apoio: Bolsas no Brasil - Iniciação Científica
• Data de Início da vigência: 01 de abril de 2022
• Data de Término da vigência: 31 de março de 2023
• Área de conhecimento: Ciências Exatas e da Terra - Ciência da Computação - Metodologia e Técnicas da Computação
• Pesquisador responsável: Paulo Sergio Silva Rodrigues
• Beneficiário: Guilherme Vieira Silva Gonçalves
• Instituição Sede: Centro Universitário FEI (UNIFEI). Campus de São Bernardo do Campo. São Bernardo do Campo , SP, Brasil
• Assunto(s): Visão computacional Processamento da informação Metodologia e técnicas de computação Modelagem tridimensional
• Palavra(s)-Chave do Pesquisador: Augmented reality | Medical Environment key points | Medical Image | Surgical Navigation | 3D reconstruction | Visão Computacional

Resumo

Desde o seu lançamento em 2016, o Microsoft Hololens tem sido líder no mercado como o hardware mais avançado para Realidade Aumentada disponível para o público geral. Essa popularidade impulsionou a área de RA em diversas aplicações. A área médica, por exemplo, tem aplicado com grande entusiasmo essas técnicas, tanto para ensino quanto dentro de centros cirúrgicos. No entanto, o alinhamento automático entre as imagens da cena real com os modelos 3D, ainda é um desafio, devido ao alto processamento computacional. O principal obstáculo para esse alinhamento é a detecção de pontos fiduciais da cena e a sua correspondência com o modelo 3D projetado. Este projeto propõe a utilização de novos algoritmos para a detecção de pontos fiduciais, baseados tanto em CNN (Convolutional Neural Network)e comparados com o tradicional algoritmo SITF (Scale Invariant Feature Transform).(AU)