Busca avançada
Ano de início
Entree
(Referência obtida automaticamente do Web of Science, por meio da informação sobre o financiamento pela FAPESP e o número do processo correspondente, incluída na publicação pelos autores.)

A Kinect-Based Wearable Face Recognition System to Aid Visually Impaired Users

Texto completo
Autor(es):
Neto, Laurindo Britto ; Grijalva, Felipe ; Margareth Lima Maike, Vanessa Regina ; Martini, Luiz Cesar ; Florencio, Dinei ; Calani Baranauskas, Maria Cecilia ; Rocha, Anderson ; Goldenstein, Siome
Número total de Autores: 8
Tipo de documento: Artigo Científico
Fonte: IEEE TRANSACTIONS ON HUMAN-MACHINE SYSTEMS; v. 47, n. 1, p. 52-64, FEB 2017.
Citações Web of Science: 20
Resumo

In this paper, we introduce a real-time face recognition (and announcement) system targeted at aiding the blind and low-vision people. The system uses a Microsoft Kinect sensor as a wearable device, performs face detection, and uses temporal coherence along with a simple biometric procedure to generate a sound associated with the identified person, virtualized at his/her estimated 3-D location. Our approach uses a variation of the K-nearest neighbors algorithm over histogram of oriented gradient descriptors dimensionally reduced by principal component analysis. The results show that our approach, on average, outperforms traditional face recognition methods while requiring much less computational resources (memory, processing power, and battery life) when compared with existing techniques in the literature, deeming it suitable for the wearable hardware constraints. We also show the performance of the system in the dark, using depth-only information acquired with Kinect's infrared camera. The validation uses a new dataset available for download, with 600 videos of 30 people, containing variation of illumination, background, and movement patterns. Experiments with existing datasets in the literature are also considered. Finally, we conducted user experience evaluations on both blindfolded and visually impaired users, showing encouraging results. (AU)

Processo FAPESP: 12/50468-6 - Visão para o cego: traduzindo conceitos visuais 3D em informações de 3D de áudio
Beneficiário:Siome Klein Goldenstein
Linha de fomento: Auxílio à Pesquisa - Parceria para Inovação Tecnológica - PITE
Processo FAPESP: 14/14630-9 - Aprendizado de máquina em processamento de sinais aplicado ao áudio espacial
Beneficiário:Felipe Leonel Grijalva Arévalo
Linha de fomento: Bolsas no Brasil - Doutorado
Processo FAPESP: 13/21349-1 - Visão para o cego: traduzindo conceitos visuais 3D em informações de 3D de áudio
Beneficiário:Felipe Leonel Grijalva Arévalo
Linha de fomento: Bolsas no Brasil - Mestrado
Processo FAPESP: 15/19222-9 - DéjáVu: análise forense de mídias sociais para interpretação de eventos criminais
Beneficiário:Anderson de Rezende Rocha
Linha de fomento: Bolsas no Exterior - Pesquisa