Implementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombiana

En este documento se presenta el diseño e implementación de un sistema de bajo costo que permita reconocer el abecedario de la lengua de señas colombiana, empleando algoritmos de Machine Learning en una Raspberry Pi 4. El prototipo resultante consiste en una interfaz gráfica de usuario (GUI por sus...

Full description

Autores:
Abril Cruz, Nicolás
Tipo de recurso:
Trabajo de grado de pregrado
Fecha de publicación:
2021
Institución:
Universidad de los Andes
Repositorio:
Séneca: repositorio Uniandes
Idioma:
spa
OAI Identifier:
oai:repositorio.uniandes.edu.co:1992/55189
Acceso en línea:
http://hdl.handle.net/1992/55189
Palabra clave:
Lengua de señas
Interpretación
Machine lerning
Ingeniería
Rights
openAccess
License
https://repositorio.uniandes.edu.co/static/pdf/aceptacion_uso_es.pdf
id UNIANDES2_ae3997b2f3b696e9efd940267f2752c4
oai_identifier_str oai:repositorio.uniandes.edu.co:1992/55189
network_acronym_str UNIANDES2
network_name_str Séneca: repositorio Uniandes
repository_id_str
spelling Al consultar y hacer uso de este recurso, está aceptando las condiciones de uso establecidas por los autores.https://repositorio.uniandes.edu.co/static/pdf/aceptacion_uso_es.pdfinfo:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Escobar Juzga, Fernando Adolfo1e728d69-26bb-4bda-84c4-7cc87a5c0e23500Segura Quijano, Fredy Enriquevirtual::999-1Abril Cruz, Nicoláse1afe1e7-1629-4452-91d1-7769ca80be87500Giraldo Trujillo, Luis FelipeRocha Pacheco, Nicolás2022-02-22T19:52:36Z2022-02-22T19:52:36Z2021http://hdl.handle.net/1992/5518925474.pdfinstname:Universidad de los Andesreponame:Repositorio Institucional Sénecarepourl:https://repositorio.uniandes.edu.co/En este documento se presenta el diseño e implementación de un sistema de bajo costo que permita reconocer el abecedario de la lengua de señas colombiana, empleando algoritmos de Machine Learning en una Raspberry Pi 4. El prototipo resultante consiste en una interfaz gráfica de usuario (GUI por sus siglas en inglés) que a través de una Raspberry pi camera capta en tiempo real las señas que se están realizando, y mediante un algoritmo de clasificación realiza la inferencia de la letra a la cual pertenece dicha seña. Dentro de este documento se detalla la obtención y etiquetado de la base de datos, los resultados de las distintas soluciones desarrolladas como lo son la implementación de algoritmos de detección y clasificación, empleo de transfer learning parara el entrenamiento de los algoritmos, entrenamiento consiente y no consciente de cuantización y finalmente el diseño de la interfaz de usuario.This work describes the design and implementation of a low-cost system able to recognize the abecedary of the Colombian sign language, using Machine Learning algorithms in a Raspberry Pi 4. The resulting prototype consist in a graphic user interface (GUI), that records in real time the signs using a Raspberry pi camera and analyze the image with a classification algorithm that infers the letter that the user is making. The document details how the dataset was obtained and the labeling of it, the results of the different solutions developed such as detection and classification algorithms, training with transfer learning, quantization aware and unaware training and finally the design of the user interface.Ingeniero ElectrónicoPregrado34 páginasapplication/pdfspaUniversidad de los AndesIngeniería ElectrónicaFacultad de IngenieríaDepartamento de Ingeniería Eléctrica y ElectrónicaImplementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombianaTrabajo de grado - Pregradoinfo:eu-repo/semantics/bachelorThesisinfo:eu-repo/semantics/acceptedVersionhttp://purl.org/coar/resource_type/c_7a1fTexthttp://purl.org/redcol/resource_type/TPLengua de señasInterpretaciónMachine lerningIngeniería201612398Publicationhttps://scholar.google.es/citations?user=xw2k1CIAAAAJvirtual::999-10000-0001-7757-1432virtual::999-1https://scienti.minciencias.gov.co/cvlac/visualizador/generarCurriculoCv.do?cod_rh=0000051497virtual::999-17684cb09-6991-4ac4-aff9-b29fe065439fvirtual::999-17684cb09-6991-4ac4-aff9-b29fe065439fvirtual::999-1THUMBNAIL25474.pdf.jpg25474.pdf.jpgIM Thumbnailimage/jpeg9011https://repositorio.uniandes.edu.co/bitstreams/d4c15317-665f-4ad1-9ba6-27707ecd1f0c/download49104368f94fa0cb805d9db0ee3fcd5dMD53TEXT25474.pdf.txt25474.pdf.txtExtracted texttext/plain79606https://repositorio.uniandes.edu.co/bitstreams/f6bfc694-e254-4234-9e8b-4dc34b5333e6/downloadf4918bdaf1443921bfea2117a7e53308MD52ORIGINAL25474.pdfapplication/pdf1397035https://repositorio.uniandes.edu.co/bitstreams/ea53fe19-2ac8-4038-a812-a72634a6acaa/download33651044c35b03b86211a27b310f6807MD511992/55189oai:repositorio.uniandes.edu.co:1992/551892024-03-13 11:51:34.822https://repositorio.uniandes.edu.co/static/pdf/aceptacion_uso_es.pdfopen.accesshttps://repositorio.uniandes.edu.coRepositorio institucional Sénecaadminrepositorio@uniandes.edu.co
dc.title.spa.fl_str_mv Implementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombiana
title Implementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombiana
spellingShingle Implementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombiana
Lengua de señas
Interpretación
Machine lerning
Ingeniería
title_short Implementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombiana
title_full Implementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombiana
title_fullStr Implementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombiana
title_full_unstemmed Implementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombiana
title_sort Implementación de un sistema de bajo costo para la interpretación del abecedario de lengua de señas colombiana
dc.creator.fl_str_mv Abril Cruz, Nicolás
dc.contributor.advisor.spa.fl_str_mv Escobar Juzga, Fernando Adolfo
dc.contributor.advisor.none.fl_str_mv Segura Quijano, Fredy Enrique
dc.contributor.author.spa.fl_str_mv Abril Cruz, Nicolás
dc.contributor.jury.spa.fl_str_mv Giraldo Trujillo, Luis Felipe
dc.contributor.jury.none.fl_str_mv Rocha Pacheco, Nicolás
dc.subject.keyword.none.fl_str_mv Lengua de señas
Interpretación
Machine lerning
topic Lengua de señas
Interpretación
Machine lerning
Ingeniería
dc.subject.themes.none.fl_str_mv Ingeniería
description En este documento se presenta el diseño e implementación de un sistema de bajo costo que permita reconocer el abecedario de la lengua de señas colombiana, empleando algoritmos de Machine Learning en una Raspberry Pi 4. El prototipo resultante consiste en una interfaz gráfica de usuario (GUI por sus siglas en inglés) que a través de una Raspberry pi camera capta en tiempo real las señas que se están realizando, y mediante un algoritmo de clasificación realiza la inferencia de la letra a la cual pertenece dicha seña. Dentro de este documento se detalla la obtención y etiquetado de la base de datos, los resultados de las distintas soluciones desarrolladas como lo son la implementación de algoritmos de detección y clasificación, empleo de transfer learning parara el entrenamiento de los algoritmos, entrenamiento consiente y no consciente de cuantización y finalmente el diseño de la interfaz de usuario.
publishDate 2021
dc.date.issued.none.fl_str_mv 2021
dc.date.accessioned.none.fl_str_mv 2022-02-22T19:52:36Z
dc.date.available.none.fl_str_mv 2022-02-22T19:52:36Z
dc.type.spa.fl_str_mv Trabajo de grado - Pregrado
dc.type.driver.spa.fl_str_mv info:eu-repo/semantics/bachelorThesis
dc.type.version.spa.fl_str_mv info:eu-repo/semantics/acceptedVersion
dc.type.coar.spa.fl_str_mv http://purl.org/coar/resource_type/c_7a1f
dc.type.content.spa.fl_str_mv Text
dc.type.redcol.spa.fl_str_mv http://purl.org/redcol/resource_type/TP
format http://purl.org/coar/resource_type/c_7a1f
status_str acceptedVersion
dc.identifier.uri.none.fl_str_mv http://hdl.handle.net/1992/55189
dc.identifier.pdf.spa.fl_str_mv 25474.pdf
dc.identifier.instname.spa.fl_str_mv instname:Universidad de los Andes
dc.identifier.reponame.spa.fl_str_mv reponame:Repositorio Institucional Séneca
dc.identifier.repourl.spa.fl_str_mv repourl:https://repositorio.uniandes.edu.co/
url http://hdl.handle.net/1992/55189
identifier_str_mv 25474.pdf
instname:Universidad de los Andes
reponame:Repositorio Institucional Séneca
repourl:https://repositorio.uniandes.edu.co/
dc.language.iso.spa.fl_str_mv spa
language spa
dc.rights.uri.*.fl_str_mv https://repositorio.uniandes.edu.co/static/pdf/aceptacion_uso_es.pdf
dc.rights.accessrights.spa.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.spa.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv https://repositorio.uniandes.edu.co/static/pdf/aceptacion_uso_es.pdf
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.format.extent.spa.fl_str_mv 34 páginas
dc.format.mimetype.spa.fl_str_mv application/pdf
dc.publisher.spa.fl_str_mv Universidad de los Andes
dc.publisher.program.spa.fl_str_mv Ingeniería Electrónica
dc.publisher.faculty.spa.fl_str_mv Facultad de Ingeniería
dc.publisher.department.spa.fl_str_mv Departamento de Ingeniería Eléctrica y Electrónica
institution Universidad de los Andes
bitstream.url.fl_str_mv https://repositorio.uniandes.edu.co/bitstreams/d4c15317-665f-4ad1-9ba6-27707ecd1f0c/download
https://repositorio.uniandes.edu.co/bitstreams/f6bfc694-e254-4234-9e8b-4dc34b5333e6/download
https://repositorio.uniandes.edu.co/bitstreams/ea53fe19-2ac8-4038-a812-a72634a6acaa/download
bitstream.checksum.fl_str_mv 49104368f94fa0cb805d9db0ee3fcd5d
f4918bdaf1443921bfea2117a7e53308
33651044c35b03b86211a27b310f6807
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositorio institucional Séneca
repository.mail.fl_str_mv adminrepositorio@uniandes.edu.co
_version_ 1818111679441928192