Aplicación móvil traductor de señas para la población sordomuda en Colombia implementando técnicas machine learning, talk to hands

Para este proyecto, un sistema que traduce el lenguaje de señas a texto implementando inteligencia artificial, que permita a las personas con discapacidad auditiva que su única fuente de comunicación sea las señas puedan hablar con el resto de personas que no manejen este tipo de lenguaje. El sistema requiere la imagen que luego pasa por el procesamiento de imágenes digitales y que finalmente realiza la traducción. El programa fue desarrollado en React native para el frontend, Python para el backend y la librería de TensorFlow que nos proporciona el kit de herramientas de inteligencia artificial con el reconocimiento de objetos que personalizamos para que reconociera el dataset con el banco de señas creado por el equipo. Para el desarrollo del dataset se utilizó el software LabelImg que nos proporciona eliminar el ruido alrededor de las imágenes y solo concentrarse en las señas. En la actualidad la tecnología que se ha desarrollado en los últimos años nos ha facilitado una gran cantidad de información tanto en calidad como en cantidad. La disponibilidad y facilidad de acceso a esta, ha facilitado las formas de innovar y la toma de decisiones de pequeños o grandes proyectos. Aunque existan estas alternativas actualmente, las personas con esta discapacidad aún dependen de que las demás personas manejen el lenguaje de señas para poder interactuar con ellas, es decir, si las demás personas no manejan este lenguaje de igual forma no podrán interactuar ni establecer comunicación de manera independiente, por esta razón sería conveniente sistematizar este proceso con el fin de permitir la comunicación entre las personas con discapacidad y las personas sin discapacidad independientemente de que conozca o no el lenguaje de señas

• Autores: Maldonado, Mauricio; Duran, Carla; Arteaga, Juan
• Fecha de publicación: 2022
• Institución: Universidad del Norte
• Repositorio: Repositorio Uninorte
• Idioma: spa
• OAI Identifier: oai:manglar.uninorte.edu.co:10584/10577
• Acceso en línea: http://hdl.handle.net/10584/10577
• Palabra clave: Lenguaje de señas; Machine Learning; Inteligencia artificial
• License: Universidad del Norte