Reconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales Convolucionales

El lenguaje de señas brinda un sistema para que las personas con discapacidad oral/auditiva se comuniquen efectivamente. Sin embargo, aún falta para que el resto de la sociedad se apropie de este conocimiento. Este trabajo consiste en diseñar un método de visión artificial que identifique las señas...

Full description

Autores:
Suat Rojas, Néstor E.
Montoya Serna, Brayan S.
Pinzón Velásquez, Edward M.
Rodríguez Galeano, Oscar S.
Tipo de recurso:
Article of journal
Fecha de publicación:
2021
Institución:
Universidad de los Llanos
Repositorio:
Repositorio Digital Universidad de los LLanos
Idioma:
spa
OAI Identifier:
oai:repositorio.unillanos.edu.co:001/4004
Acceso en línea:
https://repositorio.unillanos.edu.co/handle/001/4004
https://doi.org/10.22579/20112629.680
Palabra clave:
Colombian sign language
convolutional neural network
image processing
machine learning
aprendizaje automático
lengua de señas colombiana
procesamiento de imágenes
red neuronal convolucional
aprendizado de máquina
língua de sinais colombiana
processamento de imagem
rede neural convolucional
Rights
openAccess
License
http://creativecommons.org/licenses/by-nc/4.0
id Unillanos2_b24529f3f8caa1eca2e6e9dc0290d448
oai_identifier_str oai:repositorio.unillanos.edu.co:001/4004
network_acronym_str Unillanos2
network_name_str Repositorio Digital Universidad de los LLanos
repository_id_str
spelling Suat Rojas, Néstor E.Montoya Serna, Brayan S.Pinzón Velásquez, Edward M.Rodríguez Galeano, Oscar S.2021-06-16T00:00:00Z2024-07-25T18:15:11Z2021-06-16T00:00:00Z2024-07-25T18:15:11Z2021-06-160121-3709https://repositorio.unillanos.edu.co/handle/001/400410.22579/20112629.6802011-2629https://doi.org/10.22579/20112629.680El lenguaje de señas brinda un sistema para que las personas con discapacidad oral/auditiva se comuniquen efectivamente. Sin embargo, aún falta para que el resto de la sociedad se apropie de este conocimiento. Este trabajo consiste en diseñar un método de visión artificial que identifique las señas estáticas del abecedario de la Lengua de Señas Colombiana (LSC). La metodología consiste en un algoritmo de clasificación que combina una arquitectura de Redes Neuronales Convolucionales (CNN) y técnicas de procesamiento de imágenes. Nuestro enfoque logra reconocer las señas del alfabeto sin movimiento con un 79.2% de exactitud. El sistema es capaz de reconocer las letras según la forma, orientación y posición de los dedos de la mano, usando un conjunto de datos desbalanceado por clase.  Sign language provides a system for people with speech or hearing impairments to communicate effectively. However, it is still necessary for the rest of society to appropriate this knowledge. This work consists in designing a computer vision method that recognizes the static signs of the Colombian Sign Language (LSC) alphabet. The methodology consists of a classification algorithm that combines a Convolutional Neural Network (CNN) architecture and image processing techniques. Our approach manages to recognize signs of the alphabet that don’t involve any movement, with 79.2% accuracy. The system is capable of recognizing letters according to the shape, orientation and position of the fingers in each sign, using an imbalanced dataset.application/pdfspaUniversidad de los Llanoshttp://creativecommons.org/licenses/by-nc/4.0info:eu-repo/semantics/openAccessEsta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial 4.0.http://purl.org/coar/access_right/c_abf2https://orinoquia.unillanos.edu.co/index.php/orinoquia/article/view/680Colombian sign languageconvolutional neural networkimage processingmachine learningaprendizaje automáticolengua de señas colombianaprocesamiento de imágenesred neuronal convolucionalaprendizado de máquinalíngua de sinais colombianaprocessamento de imagemrede neural convolucionalReconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales ConvolucionalesRecognition of the Colombian sign language alphabet using Convolutional Neural NetworksArtículo de revistainfo:eu-repo/semantics/articleJournal articleinfo:eu-repo/semantics/publishedVersionhttp://purl.org/coar/resource_type/c_6501http://purl.org/coar/resource_type/c_2df8fbb1Texthttp://purl.org/coar/version/c_970fb48d4fbd8a85https://orinoquia.unillanos.edu.co/index.php/orinoquia/article/download/680/1218Núm. 1 , Año 2021 : Suplemento3012525OrinoquiaPublicationOREORE.xmltext/xml2742https://repositorio.unillanos.edu.co/bitstreams/9638e1d6-3488-4b84-af21-26a74443204d/download627381ad560430a992c1dd8ab4ade57eMD51001/4004oai:repositorio.unillanos.edu.co:001/40042024-07-25 13:15:11.601http://creativecommons.org/licenses/by-nc/4.0metadata.onlyhttps://repositorio.unillanos.edu.coRepositorio Universidad de Los Llanosrepositorio@unillanos.edu.co
dc.title.spa.fl_str_mv Reconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales Convolucionales
dc.title.translated.eng.fl_str_mv Recognition of the Colombian sign language alphabet using Convolutional Neural Networks
title Reconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales Convolucionales
spellingShingle Reconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales Convolucionales
Colombian sign language
convolutional neural network
image processing
machine learning
aprendizaje automático
lengua de señas colombiana
procesamiento de imágenes
red neuronal convolucional
aprendizado de máquina
língua de sinais colombiana
processamento de imagem
rede neural convolucional
title_short Reconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales Convolucionales
title_full Reconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales Convolucionales
title_fullStr Reconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales Convolucionales
title_full_unstemmed Reconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales Convolucionales
title_sort Reconocimiento del abecedario de la lengua de señas colombiana con Redes Neuronales Convolucionales
dc.creator.fl_str_mv Suat Rojas, Néstor E.
Montoya Serna, Brayan S.
Pinzón Velásquez, Edward M.
Rodríguez Galeano, Oscar S.
dc.contributor.author.spa.fl_str_mv Suat Rojas, Néstor E.
Montoya Serna, Brayan S.
Pinzón Velásquez, Edward M.
Rodríguez Galeano, Oscar S.
dc.subject.eng.fl_str_mv Colombian sign language
convolutional neural network
image processing
machine learning
topic Colombian sign language
convolutional neural network
image processing
machine learning
aprendizaje automático
lengua de señas colombiana
procesamiento de imágenes
red neuronal convolucional
aprendizado de máquina
língua de sinais colombiana
processamento de imagem
rede neural convolucional
dc.subject.spa.fl_str_mv aprendizaje automático
lengua de señas colombiana
procesamiento de imágenes
red neuronal convolucional
aprendizado de máquina
língua de sinais colombiana
processamento de imagem
rede neural convolucional
description El lenguaje de señas brinda un sistema para que las personas con discapacidad oral/auditiva se comuniquen efectivamente. Sin embargo, aún falta para que el resto de la sociedad se apropie de este conocimiento. Este trabajo consiste en diseñar un método de visión artificial que identifique las señas estáticas del abecedario de la Lengua de Señas Colombiana (LSC). La metodología consiste en un algoritmo de clasificación que combina una arquitectura de Redes Neuronales Convolucionales (CNN) y técnicas de procesamiento de imágenes. Nuestro enfoque logra reconocer las señas del alfabeto sin movimiento con un 79.2% de exactitud. El sistema es capaz de reconocer las letras según la forma, orientación y posición de los dedos de la mano, usando un conjunto de datos desbalanceado por clase.  
publishDate 2021
dc.date.accessioned.none.fl_str_mv 2021-06-16T00:00:00Z
2024-07-25T18:15:11Z
dc.date.available.none.fl_str_mv 2021-06-16T00:00:00Z
2024-07-25T18:15:11Z
dc.date.issued.none.fl_str_mv 2021-06-16
dc.type.spa.fl_str_mv Artículo de revista
dc.type.coar.fl_str_mv http://purl.org/coar/resource_type/c_2df8fbb1
dc.type.driver.spa.fl_str_mv info:eu-repo/semantics/article
dc.type.local.eng.fl_str_mv Journal article
dc.type.version.spa.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.coar.spa.fl_str_mv http://purl.org/coar/resource_type/c_6501
dc.type.content.spa.fl_str_mv Text
dc.type.coarversion.spa.fl_str_mv http://purl.org/coar/version/c_970fb48d4fbd8a85
format http://purl.org/coar/resource_type/c_6501
status_str publishedVersion
dc.identifier.issn.none.fl_str_mv 0121-3709
dc.identifier.uri.none.fl_str_mv https://repositorio.unillanos.edu.co/handle/001/4004
dc.identifier.doi.none.fl_str_mv 10.22579/20112629.680
dc.identifier.eissn.none.fl_str_mv 2011-2629
dc.identifier.url.none.fl_str_mv https://doi.org/10.22579/20112629.680
identifier_str_mv 0121-3709
10.22579/20112629.680
2011-2629
url https://repositorio.unillanos.edu.co/handle/001/4004
https://doi.org/10.22579/20112629.680
dc.language.iso.spa.fl_str_mv spa
language spa
dc.relation.bitstream.none.fl_str_mv https://orinoquia.unillanos.edu.co/index.php/orinoquia/article/download/680/1218
dc.relation.citationedition.spa.fl_str_mv Núm. 1 , Año 2021 : Suplemento
dc.relation.citationendpage.none.fl_str_mv 30
dc.relation.citationissue.spa.fl_str_mv 1
dc.relation.citationstartpage.none.fl_str_mv 25
dc.relation.citationvolume.spa.fl_str_mv 25
dc.relation.ispartofjournal.spa.fl_str_mv Orinoquia
dc.rights.uri.spa.fl_str_mv http://creativecommons.org/licenses/by-nc/4.0
dc.rights.accessrights.spa.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.creativecommons.spa.fl_str_mv Esta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial 4.0.
dc.rights.coar.spa.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc/4.0
Esta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial 4.0.
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.format.mimetype.spa.fl_str_mv application/pdf
dc.publisher.spa.fl_str_mv Universidad de los Llanos
dc.source.spa.fl_str_mv https://orinoquia.unillanos.edu.co/index.php/orinoquia/article/view/680
institution Universidad de los Llanos
bitstream.url.fl_str_mv https://repositorio.unillanos.edu.co/bitstreams/9638e1d6-3488-4b84-af21-26a74443204d/download
bitstream.checksum.fl_str_mv 627381ad560430a992c1dd8ab4ade57e
bitstream.checksumAlgorithm.fl_str_mv MD5
repository.name.fl_str_mv Repositorio Universidad de Los Llanos
repository.mail.fl_str_mv repositorio@unillanos.edu.co
_version_ 1812104637208068096