Herramientas de comprensión de lenguaje natural y de reconocimiento facial aplicadas a un entorno de realidad virtual

Abstract

La educación es uno de los factores más influyentes respecto al avance y progreso de personas y sociedades. Además de la adquisición de conocimientos y habilidades, la educación proporciona valores, hábitos, creencias y virtudes a personas que en un futuro serán trabajadores o padres. Por esta razón es importante centrarse en los métodos educativos actuales y promover toda innovación al sector de la educación. Para eso es necesario contar con docentes experimentados con la habilidad de poder solucionar los conflictos en clase con seguridad y decisión de la mejor manera posible. La comunicación entre un alumno y el profesor es vital para la solución de estos conflictos. Cuando se habla de comunicación hay que tener en cuenta la comunicación no verbal y la verbal. Hay que saber mostrar las intenciones con el lenguaje natural pero también es importante tener en cuenta las expresiones faciales y el lenguaje corporal ante los ojos de un alumno. En este proyecto, se investigan y se implementan tecnologías que permiten el procesamiento del lenguaje natural y el reconocimiento facial en un juego serio de temática educativa. Durante la ejecución se analizan las intenciones del usuario con una inteligencia artificial de comprensión del lenguaje. Por otra parte, se han implementado funcionalidades para poder hacer un seguimiento de ojos y analizar la frecuencia cardiaca y las emociones. De este proyecto, se concluye que las nuevas tecnologías pueden ser de gran ayuda para poder evaluar a futuros docentes y ofrecerles una experiencia lo más realista posible de un entorno conflictivo.

Education is one of the most influential factors in the advancement and progress of individuals and societies. In addition to the acquisition of knowledge and skills, education provides values, habits, beliefs, and virtues to people who will be workers or parents in the future. That’s why it’s important to focus on current educational methods and promote innovations in the education sector. To do this, it is necessary to have teachers experienced with the ability to solve classroom conflicts safely and in the best possible way. The communication between a student and a teacher is vital for the resolution of these conflicts. When talking about communication, it is important to consider nonverbal and verbal communication.it is crucial to know how to show intention with natural language, but it is also important to consider facial expressions and body language in front of a student. In this project, we investigate and implement technologies that allow the processing of natural language and facial recognition in an educational-themed serious game. During the execution, the user’s intentions are analyzed with a natural language understanding artificial intelligence. Furthermore, other functionalities have been implemented to be able to eye tracking and analyze heart rate and emotions. From this project, it is concluded that modern technologies can be of significant help in evaluating future teachers by offering them an experience as realistic as possible of a conflictive environment.