Handly evalúa la ejecución motriz de las manos a través de la cámara del dispositivo sin almacenar los videos, entregando retroalimentación instantánea para complementar la enseñanza formal y disminuir la deserción en los cursos.
La dificultad para practicar fuera del aula y la falta de validación constante en el aprendizaje de la Lengua de Señas Chilena (LSCh) motivaron a un grupo de estudiantes de la Universidad Técnica Federico Santa María (USM) a crear Handly, una innovadora aplicación web interactiva que emplea inteligencia artificial para corregir errores de ejecución en tiempo real.
Desarrollada en el contexto de la Feria de Software de la casa de estudios que se realizó recientemente, la iniciativa busca responder a las barreras que enfrentan los usuarios oyentes que desean acercarse a la comunidad sorda, alineándose con los Objetivos de Desarrollo Sostenible ODS 4 (Educación de Calidad) y ODS 10 (Reducción de las Desigualdades).
Aprendizaje autónomo
El origen del proyecto se gestó tras identificar que los estudiantes de lengua de señas enfrentan importantes obstáculos de acceso y continuidad. Al respecto, Fredy Bozo, tech Lead del equipo, explicó que “la idea siempre fue integrar las tecnologías desde una perspectiva práctica. Nos centramos en que el problema principal no era la falta de interés de la gente por aprender, sino que ese interés nunca se concretaba debido a las barreras de entrada. Estas incluyen la inscripción a cursos y la falta de disponibilidad de tiempo para practicar. Aunque el aprendizaje siempre debe ser con la comunidad sorda, esta también tiene sus límites de tiempo”.
ara profundizar en estas dificultades, el equipo se vinculó con la institución de Coquimbo “Hablemos con las manos”, entidad que imparte cursos en modalidad online y presencial. Carlos Rabutia, product owner del proyecto, detalló los principales problemas detectados en conjunto con la organización, entre ellos “la deserción, que alcanza hasta el 30% en los cursos; la inasistencia constante, de entre un 10% y un 20%; y la pérdida de tiempo lectivo, donde hasta un 50% de las clases se desperdicia recapitulando contenidos anteriores y validando de forma individual el aprendizaje previo de cada alumno”.
Validación en tiempo real
Frente a la limitación de los materiales pasivos tradicionales —como guías estáticas o videos en los que el estudiante intenta imitar movimientos frente al espejo sin recibir correcciones—, Handly actúa como un tutor virtual.
Sobre el funcionamiento de la plataforma, Carlos Rabutia señaló que Handly es básicamente un validador de la ejecución de la seña frente a una cámara. “Buscamos rellenar ese espacio vacío donde el usuario practica sin validación, entregando correcciones del tipo ‘te equivocaste en esto’, ‘lo ejecutaste bien’ o ‘te faltó subir más las manos’. Esto se logra mediante algoritmos e inteligencia artificial para validar la ejecución motriz”.
Para garantizar la seguridad de los usuarios y evitar cualquier recelo sobre el manejo de información sensible, el desarrollo priorizó la confidencialidad desde el diseño. En este sentido, Fredy Bozo dijo que “uno de nuestros mayores temores al diseñar el sistema era la privacidad: no queríamos grabar al usuario ni almacenar sus videos en ningún servidor. La solución fue procesar la información directamente a través de la cámara del dispositivo: el software no graba el video, sino que extrae las coordenadas de los movimientos (la posición de la mano y los dedos), las compara estadísticamente con el modelo correcto y descarta el video de inmediato”.
Por su parte, el entrenamiento del modelo requirió una exhaustiva recopilación de datos basada en fotografías y secuencias de video procesadas en conjunto con la institución asociada, cubriendo tanto letras estáticas del abecedario como saludos y frases dinámicas de mayor complejidad.
Validación en terreno
Para saber si la herramienta estaba o no funcionando de la manera adecuada, el equipo llevó a cabo una prueba de validación en terreno con diez participantes vinculados a la enseñanza de la lengua, obteniendo una alta aceptación y retroalimentación favorable respecto a la utilidad de la herramienta para potenciar la inclusión.
En relación al futuro, los estudiantes proyectan la escalabilidad de la plataforma más allá del ámbito académico universitario, respondiendo además a las necesidades de diversas instituciones interesadas en optimizar el proceso formativo.
El equipo está conformado además por Badir Villegas, scrum master; Fernanda Ojeda, UX/UI y Marketing; Tomás Bello, testing y calidad y Cristhofer Sandoval, líder de IA.


