Abstract:
Este trabajo se enfoca en un modelo que pueda ser integrado con una plataforma fun cional y con interfaz amigable al usuario para que las personas sordas se puedan comunicar
de forma eficaz con personas oyentes. El trabajo abarca tres temas principales: discapacidad
auditiva, aprendizaje del lenguaje en personas sordas y el modelo propuesto para predecir
lengua de señas a texto.
En el aspecto de la discapacidad auditiva, se examinan los tipos de sordera y cómo afecta
la misma en aspectos pisocológicos desde niños. El aprendizaje del lenguaje en personas
sordas se centra en el aprendizaje viso gestual para aprender a darle sentido a las palabras,
además de la ayuda de la lectura fácil para facilitar el aprendizaje y se habla de un segundo
método que es el deletreo manual. La dactilología es una parte importante en la comunicación
de la comunidad sorda al hacer uso del deletreo en lengua de señas. Por último, se describen
los modelos propuestos para la predicción de lengua de señas a texto. El cual se construyó
haciendo uso de redes neuronales convolucionales, árboles de decisión y máquinas de vectores
de soporte. El modelo recibe un video como entrada y devuelve como máximo tres palabras
con mayor probabilidad de ser la correcta. En el caso del deletreo, se recibe la(s) imagen(es)
en secuencia y se devuelve la palabra o letra predicha.
En conclusión, este trabajo ofrece un flujo completo para mejorar la comunicación entre
personas sordas y oyentes tras proveer un modelo que será integrado en Deaflens Studio, una
aplicación disponible para Android la cual permitirá visualizar las palabras con su intérprete,
subir nuevas palabras para ayudar a la comunidad y un sistema eficiente para predecir lengua
de señas a texto. (LA)
