Google Research Award para Fernando Vilariño

12/09/2014

Los contenidos físicos, como libros o revistas, y los contenidos digitales, tales como referencias contextualizadas, descripciones y contenidos multimedia, generalmente se encuentran desconectados entre sí. Este proyecto trata de vincular las dos fuentes de información mediante el uso de un eye-tracker de bajo coste y un dispositivo de Google Glass durante el proceso de lectura.
 
Para lograr esta vinculación, se hará un seguimiento de la posición de la cabeza y de los ojos con el que el sistema será capaz de calcular qué región del documento, o qué palabra, está leyendo en ese momento la persona. A partir de estos datos, el sistema puede mostrar información relevante a la pantalla de las Google Glass.
 
El proyecto tiene cuatro retos principales de investigación a hacer frente. En primer lugar, los eye-trackers de luz natural son muy sensibles a las variaciones de luz y las características de seguimiento son muy inestables, por lo que se pueden producir imprecisiones.
 
En segundo lugar, los investigadores deberán desarrollar un algoritmo para el mapeo que se va efectuando en tiempo real entre los datos obtenidos por el eye-tracker y el documento, que debe permitir reducir al mínimo los errores acumulados que provienen de la calibración del eye-tracker y de la cámara del dispositivo Google Glass.
 
Seguidamente, los investigadores también tendrán que desarrollar otro algoritmo para asegurar un reconocimiento eficiente en línea de los documentos digitalizados y la identificación automática de las palabras, una por una.
 
Finalmente, se deberá asegurar que será una aplicación en tiempo real, una aplicación de software libre completamente funcional basada en el uso de un eye-tracker de bajo coste y un dispositivo de Google Glass con una correcta identificación de todas las palabras, de modo que en cada momento la información mostrada por el dispositivo se relaciona con la zona del documento que el usuario está mirando.
 
El proyecto pretende ofrecer una experiencia de lectura aumentada para estudiantes de inglés en su ambiente natural. Para ello, la validación de esta investigación se llevará a cabo en un living lab, con estudiantes de inglés reales en un contexto de aprendizaje real. La aplicación se podrá adaptar fácilmente a diferentes experiencias de lectura, tales como el análisis de mapas, la observación detallada de obras de arte o la lectura de partituras musicales, entre otros.
 
Los Google Research Awards son unos premios anuales que dan apoyo a los mejores proyectos de investigación presentados por profesores de universidades de todo el mundo, en el ámbito de las Ciencias de la Computación, de la Ingeniería y de otros campos afines.