Resumen
Alesia: Asistente para la interpretación a lenguaje de signos con Inteligencia Artificial
Curso: 2024/25 Centro: IES Alonso de Madrigal (Ávila) Profesor: Jose María Pérez Ramos
Alumnos: Alessandro Jherik Paucar Enrriquez, David Andrés Lozano Sánchez e Ian Gabriel Mendoza Portillo
Este trabajo presenta los resultados de una investigación aplicada desarrollada por estudiantes del Ciclo Formativo de Grado Superior en Desarrollo de Aplicaciones Multiplataforma, cuyo objetivo ha sido diseñar un sistema de traducción automática entre lengua oral y Lengua de Signos Española (LSE) utilizando tecnologías de inteligencia artificial. El sistema, denominado ALESIA (Asistente para la interpretación a Lenguaje de Signos con Inteligencia Artificial), integra módulos de reconocimiento de voz, adaptación gramatical, análisis visual mediante visión artificial y representación animada en 2D y 3D.
La investigación se ha estructurado en cuatro fases experimentales: conversión voz-texto y texto-voz, transformación gramatical del español oral a LSE, interpretación de signos a partir de coordenadas generadas por MediaPipe, y visualización en 3D mediante un avatar animado en Unity. La validación se ha realizado a través de un cuestionario propio, basado en criterios establecidos por la CNSE y literatura especializada, aplicado a intérpretes profesionales de LSE.
Presentación del proyecto
Esta presentación corresponde a los 'Premios de Investigación e Innovación en ESO, Bachillerato y Formación Profesional 2024-25'
Video demostración
En el siguiente vídeo podéis ver una demostración de la ejecución del proyecto.
Palabras claves
Lengua de Signos Española (LSE), Inteligencia Artificial, Visión Artificial, Modelado 3D, Procesamiento del Lenguaje Natural (PLN), Reconocimiento de Voz, Accesibilidad Comunicativa, #PiiECyL.
Spanish Sign Language (SSL), Artificial Intelligence, Computer Vision, 3D Modeling, Natural Language Processing (NLP), Speech Recognition, Communicative Accessibility, #PiiECyL.