Gaze interaction in wearable computing: an interface for the Internet of Things

• Grant number: 18/12247-4
• Support Opportunities: Scholarships in Brazil - Technical Training Program - Technical Training
• Start date: August 01, 2018
• End date: January 31, 2019
• Field of knowledge: Physical Sciences and Mathematics - Computer Science - Computer Systems
• Principal Investigator: Carlos Hitoshi Morimoto
• Grantee: Raiza Tamae Sarkis Hanada
• Host Institution: Instituto de Matemática e Estatística (IME). Universidade de São Paulo (USP). São Paulo , SP, Brazil
• Associated research grant: 16/10148-3 - Gaze-Based Interaction in Wearable Computing: an interface for the Internet of Things, AP.R

Abstract

A Internet das Coisas (IoT) vai permitir que um grande número de dispositivos se comuniquem conosco para os mais diversos propósitos. Criar uma forma eficaz, segura e robusta para interagir com esses dispositivos é um dos grandes desafios dessa área emergente. Nesse projeto propomos investigar o uso de plataformas computacionais vestíveis, enriquecidas com a informação do olhar, para interação com dispositivos IoT. Apesar de vários avanços recentes da computação vestível (CV), essa tecnologia ainda não atingiu grande alcance comercial, em parte devido a dificuldade de interação e limitação de suas aplicações. O estado atual da tecnologia de interação pelo olhar também apresenta restrições apesar de ser utilizada com relativo sucesso em interfaces para pessoas com deficiências físicas. Uma possível contribuição desse projeto será o desenvolvimento de uma forma ainda pouco explorada de interação em computação vestível. Em particular, para interações simples e rápidas em um contexto de IoT, o olhar pode fornecer à plataforma vestível informações importantes sobre o contexto para serem utilizadas pelas aplicações vestíveis.Um primeiro objetivo dessa pesquisa é o desenvolvimento de uma plataforma computacional vestível composta basicamente por um notebook, uma micro-monitor montado à frente do olho do usuário e um rastreador de olhar. Serão investigados dois modelos de monitores, um monocular e outro binocular. Uma vez construída essa plataforma, investigaremos como o olhar pode ser utilizado na interação, desenvolvendo novas interfaces de realidade aumentada para dispositivos IoT controladas pelo olhar. Esse projeto será desenvolvido com a participação de vários alunos da graduação e pós-graduação da USP.