Plataforma de aprendizaje de lengua de señas y accesibilidad de textos para personas con discapacidad auditiva en Guatemala.

Abstract

Este trabajo se enfoca en un modelo que pueda ser integrado con una plataforma fun cional y con interfaz amigable al usuario para que las personas sordas se puedan comunicar de forma eficaz con personas oyentes. El trabajo abarca tres temas principales: discapacidad auditiva, aprendizaje del lenguaje en personas sordas y el modelo propuesto para predecir lengua de señas a texto. En el aspecto de la discapacidad auditiva, se examinan los tipos de sordera y cómo afecta la misma en aspectos pisocológicos desde niños. El aprendizaje del lenguaje en personas sordas se centra en el aprendizaje viso gestual para aprender a darle sentido a las palabras, además de la ayuda de la lectura fácil para facilitar el aprendizaje y se habla de un segundo método que es el deletreo manual. La dactilología es una parte importante en la comunicación de la comunidad sorda al hacer uso del deletreo en lengua de señas. Por último, se describen los modelos propuestos para la predicción de lengua de señas a texto. El cual se construyó haciendo uso de redes neuronales convolucionales, árboles de decisión y máquinas de vectores de soporte. El modelo recibe un video como entrada y devuelve como máximo tres palabras con mayor probabilidad de ser la correcta. En el caso del deletreo, se recibe la(s) imagen(es) en secuencia y se devuelve la palabra o letra predicha. En conclusión, este trabajo ofrece un flujo completo para mejorar la comunicación entre personas sordas y oyentes tras proveer un modelo que será integrado en Deaflens Studio, una aplicación disponible para Android la cual permitirá visualizar las palabras con su intérprete, subir nuevas palabras para ayudar a la comunidad y un sistema eficiente para predecir lengua de señas a texto. (LA)