Desarrollo de un sistema de asistencia Android para personas con baja visión basado en la detección de poses con Smart Glasses

Abstract

La baja visión es una condición visual que afecta en gran medida la calidad de vida de quienes sufren de esta, limitando su capacidad para realizar actividades cotidianas debido a la reducción de la agudeza visual y también de su campo de visión. Aunque existen ayudas tradicionales como lupas o gafas de aumento, estas soluciones suelen ser estáticas y no siempre se adaptan a las necesidades individuales de los pacientes. En este contexto, las tecnologías emergentes, como las smart glasses, ofrecen un enfoque innovador al combinar dispositivos portátiles con inteligencia artificial para proporcionar asistencia visual personalizada y en tiempo real.

En este trabajo presentamos el desarrollo de una aplicación Android para ser usada con Smart Glasses, diseñada para asistir a pacientes con baja visión mediante la descripción de información de personas a través de la detección de poses. La aplicación, desarrollada en Android Studio, utiliza un modelo de inteligencia artificial entrenado por nosotros específicamente para reconocer y analizar posturas humanas. Este enfoque permite a los usuarios recibir descripciones auditivas y visuales de las personas en su entorno, mejorando su capacidad para interactuar socialmente y su movilidad en entornos públicos.

La integración de la aplicación con nuestras smart glasses ofrece ventajas significativas, como la portabilidad y la discreción, aspectos clave para la aceptación de estos dispositivos por parte de los usuarios. Además, el uso de un modelo de Inteligencia Artificial personalizado asegura que la detección de poses sea precisa y que sea capaz de adaptarse a las necesidades específicas de cada persona. El sistema está diseñado con un enfoque escalable, permitiendo la incorporación de nuevas poses y funcionalidades de manera sencilla, lo que facilita su adaptación a diferentes escenarios y necesidades.

En conclusión, este proyecto demuestra cómo la combinación de smart glasses, aplicaciones móviles y modelos de inteligencia artificial puede ofrecer soluciones efectivas y personalizadas para personas con baja visión.

Low vision is a visual condition that greatly affects the quality of life of those who suffer from it, limiting their ability to perform everyday activities due to the reduction of visual acuity and also of their field of vision. Although traditional aids such as magnifying glasses or loupes are available, these solutions are often static and not always adapted to the individual needs of patients. In this context, emerging technologies such as smart glasses offer an innovative approach by combining wearable devices with artificial intelligence to provide personalised, real-time visual assistance.

In this paper we present the development of an Android application for use with smart glasses, designed to assist patients with low vision by describing information about people through pose detection. The application, developed in Android Studio, uses an artificial intelligence model trained by us specifically to recognise and analyse human poses. This approach allows users to receive auditory and visual descriptions of people in their environment, improving their ability to interact socially and their mobility in public settings.

The integration of the app with our smart glasses offers significant advantages, such as portability and discretion, which are key to the acceptance of these devices by users. In addition, the use of a customised Artificial Intelligence model ensures that pose detection is accurate and able to adapt to the specific needs of each individual. The system is designed with a scalable approach, allowing the incorporation of new poses and functionalities in a simple way, which facilitates its adaptation to different scenarios and needs.

In conclusion, this project demonstrates how the combination of smart glasses, mobile applications and artificial intelligence models can offer effective and personalised solutions for people with low vision.