Sistema domótico basado en visión artificial para personas con discapacidad auditiva

139 páginas

Autores:
Martinez Palacio, Enrique Alfredo
Escobar Naranjo, Juan Jose
Tipo de recurso:
Trabajo de grado de pregrado
Fecha de publicación:
2024
Institución:
Universidad EIA .
Repositorio:
Repositorio EIA .
Idioma:
spa
OAI Identifier:
oai:repository.eia.edu.co:11190/6930
Acceso en línea:
https://repository.eia.edu.co/handle/11190/6930
Palabra clave:
Sistema domótico
Visión artificial
Discapacidad auditiva
Reconocimiento de señas
Automatización
Home automation system
Computer vision
Hearing impairment
Sign recognition
Automation
Rights
openAccess
License
Derechos Reservados - Universidad EIA, 2024
id REIA2_fdcc76868f03b2e16b257dcc82b9206a
oai_identifier_str oai:repository.eia.edu.co:11190/6930
network_acronym_str REIA2
network_name_str Repositorio EIA .
repository_id_str
dc.title.none.fl_str_mv Sistema domótico basado en visión artificial para personas con discapacidad auditiva
title Sistema domótico basado en visión artificial para personas con discapacidad auditiva
spellingShingle Sistema domótico basado en visión artificial para personas con discapacidad auditiva
Sistema domótico
Visión artificial
Discapacidad auditiva
Reconocimiento de señas
Automatización
Home automation system
Computer vision
Hearing impairment
Sign recognition
Automation
title_short Sistema domótico basado en visión artificial para personas con discapacidad auditiva
title_full Sistema domótico basado en visión artificial para personas con discapacidad auditiva
title_fullStr Sistema domótico basado en visión artificial para personas con discapacidad auditiva
title_full_unstemmed Sistema domótico basado en visión artificial para personas con discapacidad auditiva
title_sort Sistema domótico basado en visión artificial para personas con discapacidad auditiva
dc.creator.fl_str_mv Martinez Palacio, Enrique Alfredo
Escobar Naranjo, Juan Jose
dc.contributor.advisor.none.fl_str_mv Moreno Hincapié, Gustavo Andrés
dc.contributor.author.none.fl_str_mv Martinez Palacio, Enrique Alfredo
Escobar Naranjo, Juan Jose
dc.subject.proposal.spa.fl_str_mv Sistema domótico
Visión artificial
Discapacidad auditiva
Reconocimiento de señas
Automatización
topic Sistema domótico
Visión artificial
Discapacidad auditiva
Reconocimiento de señas
Automatización
Home automation system
Computer vision
Hearing impairment
Sign recognition
Automation
dc.subject.proposal.eng.fl_str_mv Home automation system
Computer vision
Hearing impairment
Sign recognition
Automation
description 139 páginas
publishDate 2024
dc.date.issued.none.fl_str_mv 2024
dc.date.accessioned.none.fl_str_mv 2025-01-29T15:46:05Z
dc.date.available.none.fl_str_mv 2025-01-29T15:46:05Z
dc.type.none.fl_str_mv Trabajo de grado - Pregrado
dc.type.coar.none.fl_str_mv http://purl.org/coar/resource_type/c_7a1f
dc.type.driver.none.fl_str_mv info:eu-repo/semantics/bachelorThesis
dc.type.version.none.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.content.none.fl_str_mv Text
dc.type.redcol.none.fl_str_mv http://purl.org/redcol/resource_type/TP
dc.type.coarversion.none.fl_str_mv http://purl.org/coar/version/c_970fb48d4fbd8a85
format http://purl.org/coar/resource_type/c_7a1f
status_str publishedVersion
dc.identifier.uri.none.fl_str_mv https://repository.eia.edu.co/handle/11190/6930
url https://repository.eia.edu.co/handle/11190/6930
dc.language.iso.none.fl_str_mv spa
language spa
dc.rights.none.fl_str_mv Derechos Reservados - Universidad EIA, 2024
dc.rights.license.none.fl_str_mv Atribución-NoComercial 4.0 Internacional (CC BY-NC 4.0)
dc.rights.accessrights.none.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.none.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv Derechos Reservados - Universidad EIA, 2024
Atribución-NoComercial 4.0 Internacional (CC BY-NC 4.0)
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.format.mimetype.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidad EIA
dc.publisher.program.none.fl_str_mv Ingeniería Mecatrónica
dc.publisher.faculty.none.fl_str_mv Escuela de Ingeniería y Ciencias Básicas
dc.publisher.place.none.fl_str_mv Envigado (Antioquia, Colombia)
publisher.none.fl_str_mv Universidad EIA
institution Universidad EIA .
bitstream.url.fl_str_mv https://repository.eia.edu.co/bitstreams/07f194d9-590f-4914-a999-83290c76aa9a/download
https://repository.eia.edu.co/bitstreams/dce0c7a1-33a0-498f-8cae-fb617e56cd61/download
https://repository.eia.edu.co/bitstreams/fea0ed37-c34e-44de-a147-484f5e20ff3f/download
https://repository.eia.edu.co/bitstreams/490c826e-373f-4837-9ae4-94f4aad8f19e/download
bitstream.checksum.fl_str_mv 2264fce645ac2952653ce3f3b8fa781e
d50ad26d095cfb5eb023f115e3310e54
7201aaa154e852f4c5a4cc8acecc369f
56f152edf1c5cb2b8367b808e9af731a
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositorio Institucional Universidad EIA
repository.mail.fl_str_mv bdigital@metabiblioteca.com
_version_ 1828317409623146496
spelling Moreno Hincapié, Gustavo AndrésMartinez Palacio, Enrique AlfredoEscobar Naranjo, Juan Jose2025-01-29T15:46:05Z2025-01-29T15:46:05Z2024https://repository.eia.edu.co/handle/11190/6930139 páginasRESUMEN: En el presente proyecto se desarrolló un sistema domótico basado en visión artificial, enfocado en personas con discapacidad auditiva en Colombia. En este, se parte de la problemática de la falta de dispositivos accesibles para esta población, quienes enfrentan dificultades a la hora de interactuar con sistemas convencionales, diseñados para personas oyentes. Este proyecto se estructuró en cuatro objetivos basados en la metodología del diseño de Dieter y Schmidt, los cuales marcaron cuatro etapas principales dentro del desarrollo de este: definición de los elementos para el sistema y las señas de comando, la implementación de un algoritmo de visión artificial para clasificación de señas, la construcción de un sistema domótico a escala, y la verificación de su funcionamiento mediante pruebas de usuario. Cada uno de estos objetivos tuvo una etapa previa en la que se estudió, diseñó y preparó cada uno de los pasos a seguir para la consecución de dicho objetivo. A través de este enfoque se construyó finalmente un sistema que permite mejorar la accesibilidad, seguridad e independencia de las personas con discapacidad auditiva, brindándoles una herramienta que les permita interactuar en su propia lengua con un dispositivo domótico. Este sistema emplea inteligencia artificial para el reconocimiento de señas, formando comandos específicos mediante la combinación de estas en una frase final, permitiendo la automatización de tareas como el control de la iluminación o la apertura y cierre de persianas, además de la notificación al usuario acerca de situaciones de fuego, humo, gases o presencia de personas en la puerta del hogar. El sistema finalmente implementado demostró ser funcional y efectivo para las necesidades de las personas con discapacidad auditiva, generando un gran impacto en los usuarios con los que se realizaron las pruebas de usuario, pudiendo decir así que el proyecto concluyó con gran éxito.ABSTRACT: In this project, a home automation system based on computer vision was developed, focusing on the deaf community in Colombia. It addresses the issue of the lack of accessible devices for this population, who face challenges when interacting with conventional systems designed for hearing people. The project was structured around four main objectives based on the Dieter and Schmidt design methodology, marking four key development stages: defining the system elements and command signs, implementing a computer vision algorithm for sign classification, building a scaled home automation system, and verifying its functionality through user testing. Each objective was preceded by a research, design, and preparation phase to ensure its successful achievement. Through this approach, a system was ultimately built, improving accessibility, safety, and independence for the deaf community, providing them with a tool that allows them to interact with a home automation device in their own language. The system uses artificial intelligence for sign recognition, creating specific commands by combining these signs into a final phrase, enabling the automation of tasks like lighting control or opening and closing blinds, as well as notifying users about fire, smoke, gas, or the presence of people at the home’s door. Finally, the implemented system proved to be functional and effective for the deaf people’s needs, having a significant impact on the users who tested the device, making it possible to say that the project concluded in great success.PregradoIngeniero(a) Mecatrónico(a)application/pdfspaUniversidad EIAIngeniería MecatrónicaEscuela de Ingeniería y Ciencias BásicasEnvigado (Antioquia, Colombia)Derechos Reservados - Universidad EIA, 2024Atribución-NoComercial 4.0 Internacional (CC BY-NC 4.0)info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Sistema domótico basado en visión artificial para personas con discapacidad auditivaTrabajo de grado - Pregradohttp://purl.org/coar/resource_type/c_7a1finfo:eu-repo/semantics/bachelorThesisinfo:eu-repo/semantics/publishedVersionTexthttp://purl.org/redcol/resource_type/TPhttp://purl.org/coar/version/c_970fb48d4fbd8a85Sistema domóticoVisión artificialDiscapacidad auditivaReconocimiento de señasAutomatizaciónHome automation systemComputer visionHearing impairmentSign recognitionAutomationPublicationLICENSElicense.txtlicense.txttext/plain; charset=utf-82553https://repository.eia.edu.co/bitstreams/07f194d9-590f-4914-a999-83290c76aa9a/download2264fce645ac2952653ce3f3b8fa781eMD56ORIGINALEscobarJuan_2024_SistemaDomoticoVision.pdfEscobarJuan_2024_SistemaDomoticoVision.pdfTrabajo de gradoapplication/pdf5176602https://repository.eia.edu.co/bitstreams/dce0c7a1-33a0-498f-8cae-fb617e56cd61/downloadd50ad26d095cfb5eb023f115e3310e54MD57TEXTEscobarJuan_2024_SistemaDomoticoVision.pdf.txtEscobarJuan_2024_SistemaDomoticoVision.pdf.txtExtracted texttext/plain101982https://repository.eia.edu.co/bitstreams/fea0ed37-c34e-44de-a147-484f5e20ff3f/download7201aaa154e852f4c5a4cc8acecc369fMD58THUMBNAILEscobarJuan_2024_SistemaDomoticoVision.pdf.jpgEscobarJuan_2024_SistemaDomoticoVision.pdf.jpgGenerated Thumbnailimage/jpeg5716https://repository.eia.edu.co/bitstreams/490c826e-373f-4837-9ae4-94f4aad8f19e/download56f152edf1c5cb2b8367b808e9af731aMD5911190/6930oai:repository.eia.edu.co:11190/69302025-01-29 12:05:23.522open.accesshttps://repository.eia.edu.coRepositorio Institucional Universidad EIAbdigital@metabiblioteca.comCjxjZW50ZXI+PGI+QVZJU08gREUgUFJJVkFDSURBRDwvYj48L2NlbnRlcj4KPGJyPgo8cD5MYSBFc2N1ZWxhIGRlIEluZ2VuaWVyw61hIGRlIEFudGlvcXVpYSBhIHRyYXbDqXMgZGUgZXN0ZSBhdmlzbywgaW5mb3JtYSBhIGxvcyB0aXR1bGFyZXMgZGUgZGF0b3MgcGVyc29uYWxlcyBxdWUgc2UgZW5jdWVudHJlbiBlbiBzdXMgYmFzZXMgZGUgZGF0b3MgcXVlIGxhcyBwb2zDrXRpY2FzIGRlIHRyYXRhbWllbnRvIGRlIGRhdG9zIHBlcnNvbmFsZXMgbGEgRUlBIHNvbjo8L3A+CjxwPkFsIHRpdHVsYXIgZGUgbG9zIGRhdG9zIHBlcnNvbmFsZXMgZW4gdHJhdGFtaWVudG8sIHNlIGxlIHJlc3BldGFyw6FuIHN1cyBkZXJlY2hvcyBhIGNvbm9jZXIgw61udGVncmFtZW50ZSB5IGRlIGZvcm1hIGdyYXR1aXRhIHN1cyBkYXRvcyBwZXJzb25hbGVzLCBhc8OtIGNvbW8gYSBhY3R1YWxpemFybG9zIHkgcmVjdGlmaWNhcmxvcyBmcmVudGUgYSBsYSBFSUEgbyBsb3MgZW5jYXJnYWRvcyBkZWwgdHJhdGFtaWVudG8uPC9wPgo8cD5BbCB0aXR1bGFyIGRlIGxvcyBkYXRvcyBwZXJzb25hbGVzIGVuIHRyYXRhbWllbnRvLCBwb2Ryw6EgY29ub2NlciBlbCB1c28gcXVlIHNlIGxlIGhhIGRhZG8gYSBzdXMgZGF0b3MgcGVyc29uYWxlcywgcHJldmlhIHNvbGljaXR1ZC48L3A+CjxwPkVsIHRpdHVsYXIgZGUgbG9zIGRhdG9zIHBlcnNvbmFsZXMgZW4gdHJhdGFtaWVudG8sIHBvZHLDoSBzb2xpY2l0YXIgcHJ1ZWJhIGRlIGxhIGF1dG9yaXphY2nDs24gb3RvcmdhZGEgYSBsYSBFSUEuIHNhbHZvIGN1YW5kbyBleHByZXNhbWVudGUgc2UgZXhjZXB0w7plIGNvbW8gcmVxdWlzaXRvIHBhcmEgZWwgdHJhdGFtaWVudG8sIGRlIGNvbmZvcm1pZGFkIGNvbiBsYSBsZXkuPC9wPgo8cD5FbCB0aXR1bGFyIGRlIGxvcyBkYXRvcyBwdWVkZSByZXZvY2FyIGxhIGF1dG9yaXphY2nDs24geSBzb2xpY2l0YXIgbGEgc3VwcmVzacOzbiBkZWwgZGF0byBjdWFuZG8gZW4gZWwgdHJhdGFtaWVudG8gbm8gc2UgcmVzcGV0ZW4gbG9zIHByaW5jaXBpb3MsIGRlcmVjaG9zIHkgZ2FyYW50w61hcyBjb25zdGl0dWNpb25hbGVzIHkgbGVnYWxlcy4gTGEgcmV2b2NhdG9yaWEgeSBzdXByZXNpw7NuIHByb2NlZGVyw6EgY3VhbmRvIGxhIFN1cGVyaW50ZW5kZW5jaWEgZGUgSW5kdXN0cmlhIHkgQ29tZXJjaW8gKFNJQykgaGF5YSBkZXRlcm1pbmFkbyBxdWUgZW4gZWwgdHJhdGFtaWVudG8sIGxhIEVTQ1VFTEEgREUgSU5HRU5JRVLDjUEgREUgQU5USU9RVUlBIGhhIGluY3VycmlkbyBlbiBjb25kdWN0YXMgY29udHJhcmlhcyBhIGVzdGEgTGV5IHkgYSBsYSBDb25zdGl0dWNpw7NuIFBvbMOtdGljYS48L3A+CjxwPlBhcmEgZWZlY3RvcyBkZSBlamVyY2VyIHN1cyBkZXJlY2hvcyBkZSBjb25vY2VyLCBhY3R1YWxpemFyLCByZWN0aWZpY2FyIHkgc3VwcmltaXIgaW5mb3JtYWNpw7NuLCByZXZvY2FyIGxhIGF1dG9yaXphY2nDs24sIGVudHJlIG90cm9zOyBlbCB0aXR1bGFyIGRlIGxvcyBkYXRvcyBwb2Ryw6EgYWN1ZGlyIGEgbGEgRVNDVUVMQSBERSBJTkdFTklFUsONQSBERSBBTlRJT1FVSUEsIGNvbW8gcmVzcG9uc2FibGUgZGVsIHRyYXRhbWllbnRvIGRlIGRhdG9zIGFsIMOhcmVhIGRlIGNvbXVuaWNhY2lvbmVzLCBtZWRpYW50ZSBjb3JyZW8gZWxlY3Ryw7NuaWNvIGEgd2VibWFzdGVyQGVpYS5lZHUuY28gLjwvcD4KPHA+RW4gY2FzbyBkZSBpbmZyYWNjaW9uZXMgYSBsYSBsZXkgMTU4MSBkZSAyMDEyLCBlbCB0aXR1bGFyIGRlIGxvcyBkYXRvcyBwb2Ryw6EgcHJlc2VudGFyIHF1ZWphIGFudGUgbGEgU3VwZXJpbnRlbmRlbmNpYSBkZSBJbmR1c3RyaWEgeSBDb21lcmNpbyAoU0lDKS48L3A+CjxwPkVsIHRpdHVsYXIgc2Vyw6EgaW5mb3JtYWRvIGFjZXJjYSBkZSBsYSBubyBvYmxpZ2F0b3JpZWRhZCBkZSBsYXMgcmVzcHVlc3RhcyBhIGxhcyBwcmVndW50YXMgcXVlIGxlIHNlYW4gaGVjaGFzLCBjdWFuZG8gw6lzdGFzIHZlcnNlbiBzb2JyZSBkYXRvcyBzZW5zaWJsZXMsIHRhbGVzIGNvbW8gb3JpZ2VuIHJhY2lhbCBvIMOpdG5pY28sIG9yaWVudGFjacOzbiBwb2zDrXRpY2EsIGNvbnZpY2Npb25lcyByZWxpZ2lvc2FzICwgcGVydGVuZW5jaWEgYSBzaW5kaWNhdG9zLCBvcmdhbml6YWNpb25lcyBzb2NpYWxlcyBkZSBkZXJlY2hvcyBodW1hbm9zLCBkYXRvcyByZWxhdGl2b3MgYSBsYSBzYWx1ZCwgYSBsYSB2aWRhIHNleHVhbCB5IGRhdG9zIGJpb23DqXRyaWNvcyBvIHNvYnJlIGxvcyBkYXRvcyBkZSBsb3MgbmnDsW9zLCBuacOxYXMgeSBhZG9sZXNjZW50ZXMuPC9wPgo8cD5FbCB0aXR1bGFyIHBvZHLDoSBjb25vY2VyIG51ZXN0cmEgcG9sw610aWNhIGRlIHRyYXRhbWllbnRvLCBsb3MgZGF0b3Mgc3VzdGFuY2lhbGVzIHF1ZSBzZSBsbGVndWVuIGEgcHJvZHVjaXIgZW4gZWwgcHJlc2VudGUgYXZpc28gbyBlbiBsYXMgcG9sw610aWNhcyBkZSB0cmF0YW1pZW50bywgc2Vyw6FuIHB1YmxpY2FkYXMgZW4gbnVlc3RybyBzaXRpbyB3ZWIsIG1lZGlvIGVsZWN0csOzbmljbyBoYWJpdHVhbCBkZSBjb250YWN0byBjb24gbG9zIHRpdHVsYXJlcy4K