Implementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEP

A brain-computer interface (BCI) is a system that establishes direct communication between the brain and a computer by recording the electrical activity of the brain. It makes use of Steady State Visual-Evoked Visual Evoked Potentials (SSVEP). The data obtained from the signals with respect to visua...

Full description

Autores:
Rivera Larrañaga, Johnny Esteban
Tipo de recurso:
Trabajo de grado de pregrado
Fecha de publicación:
2023
Institución:
Universidad Antonio Nariño
Repositorio:
Repositorio UAN
Idioma:
spa
OAI Identifier:
oai:repositorio.uan.edu.co:123456789/8406
Acceso en línea:
http://repositorio.uan.edu.co/handle/123456789/8406
Palabra clave:
Interfaz cerebro computador
Silla de ruedas virtual
Inteligencia Artificial
56.23 R621i
Brain Computer Interface
Virtual Wheelchair
Artificial Intelligence
Rights
openAccess
License
Attribution-NonCommercial-NoDerivatives 4.0 International (CC BY-NC-ND 4.0)
id UAntonioN2_eed6fea3e14ae94480e8731665238aee
oai_identifier_str oai:repositorio.uan.edu.co:123456789/8406
network_acronym_str UAntonioN2
network_name_str Repositorio UAN
repository_id_str
dc.title.es_ES.fl_str_mv Implementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEP
title Implementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEP
spellingShingle Implementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEP
Interfaz cerebro computador
Silla de ruedas virtual
Inteligencia Artificial
56.23 R621i
Brain Computer Interface
Virtual Wheelchair
Artificial Intelligence
title_short Implementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEP
title_full Implementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEP
title_fullStr Implementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEP
title_full_unstemmed Implementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEP
title_sort Implementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEP
dc.creator.fl_str_mv Rivera Larrañaga, Johnny Esteban
dc.contributor.advisor.spa.fl_str_mv Pastás Guaitarilla, Iván Andrés
dc.contributor.author.spa.fl_str_mv Rivera Larrañaga, Johnny Esteban
dc.subject.es_ES.fl_str_mv Interfaz cerebro computador
Silla de ruedas virtual
Inteligencia Artificial
topic Interfaz cerebro computador
Silla de ruedas virtual
Inteligencia Artificial
56.23 R621i
Brain Computer Interface
Virtual Wheelchair
Artificial Intelligence
dc.subject.ddc.es_ES.fl_str_mv 56.23 R621i
dc.subject.keyword.es_ES.fl_str_mv Brain Computer Interface
Virtual Wheelchair
Artificial Intelligence
description A brain-computer interface (BCI) is a system that establishes direct communication between the brain and a computer by recording the electrical activity of the brain. It makes use of Steady State Visual-Evoked Visual Evoked Potentials (SSVEP). The data obtained from the signals with respect to visual stimulation are filtered and used to train an artificial intelligence model, which identifies and classifies the user's activity intention, responsible for issuing control commands. The detection of brain neural activity is performed through OpenBCI, making use of the SSVEP protocol, the signals are stored and subsequently processed in Python interpreted programming language. For the acquisition of EEG signals, the user is instrumented by placing electrodes and the OpenBCIsystem, the impedance of the electrodes is determined and it is verified that they are in the required magnitude. They are recorded in 3 channels located in the occipital region: PO3, PO4, and OZ with a sampling frequency of 250 Hz and with a Notch filter to normalize response peaks that change with impedance. The visual stimuli are generated by an application using the Psychtoolbox-3 toolbox, running in the Matlab environment, where the EEG signal processing and command identification is performed by the method of filter bank. At the end of this project, it is expected to validate what has been done in a virtual environment in Unity 3D that simulates an apartment with the furniture where a wheelchair is located so that it can be guided by the user through the classification of EEG signals using the SSVEP mental strategy and the use of the OpenBCI system, As observed later on, where the user sees the stimulus on a screen to which the wheelchair is directed, it will move in that direction. It should be noted that the system due to some interference in the signal acquisition can identify movement towards another direction, such as towards the left and can randomly take it upwards, downwards or to the right. All this is due to errors that may occur when taking the subject’s signal, but in general it can be said that despite the fact that the interface may throw certain errors, it has a percentage of successes above the range considered adequate, thus correctly implementing the interface.
publishDate 2023
dc.date.accessioned.none.fl_str_mv 2023-08-09T15:46:54Z
dc.date.available.none.fl_str_mv 2023-08-09T15:46:54Z
dc.date.issued.spa.fl_str_mv 2023-06-08
dc.type.spa.fl_str_mv Trabajo de grado (Pregrado y/o Especialización)
dc.type.coar.spa.fl_str_mv http://purl.org/coar/resource_type/c_7a1f
dc.type.coarversion.none.fl_str_mv http://purl.org/coar/version/c_970fb48d4fbd8a85
format http://purl.org/coar/resource_type/c_7a1f
dc.identifier.uri.none.fl_str_mv http://repositorio.uan.edu.co/handle/123456789/8406
dc.identifier.bibliographicCitation.spa.fl_str_mv (4) (PDF) Evaluación de la carga de trabajo cognitiva basada en EEG para una máxima eficiencia. (n.d.). Retrieved April 15, 2023, from https://www.researchgate.net/publication/286371237_EEG_Based_Cognitive_Workload_A ssessment_for_Maximum_Efficiency/figures?lo=1
Acharya, J. N., Hani, A., Cheek, J., Thirumala, P., & Tsuchida, T. N. (2016). American Clinical Neurophysiology Society Guideline 2: Guidelines for Standard Electrode Position Nomenclature. Journal of Clinical Neurophysiology : Official Publication of the American Electroencephalographic Society, 33(4), 308–311. https://doi.org/10.1097/WNP.0000000000000316
Albanese, A., Bhatia, K., Bressman, S. B., Delong, M. R., Fahn, S., Fung, V. S. C., Hallett, M., Jankovic, J., Jinnah, H. A., Klein, C., Lang, A. E., Mink, J. W., & Teller, J. K. (2013). Phenomenology and classification of dystonia: A consensus update. Movement Disorders, 28(7), 863–873. https://doi.org/10.1002/MDS.25475
Alexander, J., & Guerrero, R. (n.d.). Simulador para el guiado de una silla de ruedas virtual en Unity 3D a través de señales EMG mediante el brazalete gForce
ANALISIS DE SEÑALES TRIFASICAS MEDIANTE LENGUAJE LABVIEW | Guías, Proyectos, Investigaciones de Centrales Eléctricas | Docsity. (n.d.). Retrieved June 3, 2023, from https://www.docsity.com/es/analisis-de-senales-trifasicas-mediante-lenguajelabview/5419338/
Barrett, & E., K. (2013). Ganong fisiología médica (24a. ed.). 752. https://books.google.com/books/about/Ganong_fisiolog%C3%ADa_m%C3%A9dica_24a_e d.html?hl=es&id=mDuEBgAAQBAJ
Blanco-Díaz, C. F., & Ruiz-Olaya, A. F. (2020a). Caracterización de señales de EEG relacionadas a potenciales evocados visuales en estado estacionario. Revista Ontare, 7, 11– 26. https://doi.org/10.21158/23823399.V7.N0.2019.2459
Blanco-Díaz, C. F., & Ruiz-Olaya, A. F. (2020b). Caracterización de señales de EEG relacionadas a potenciales evocados visuales en estado estacionario. Revista Ontare, 7. https://doi.org/10.21158/23823399.v7.n0.2019.2459
Brain Computer Interfaces: il cervello che si mette in moto. (n.d.). Retrieved May 8, 2023, from https://www.ingegneriabiomedica.org/news/biotech-support/brain-computer-interfacescervello-si-mette-moto/
Cabañero Gómez, L. (2017). Análisis de señales de electroencefalografía (EEG) para evaluar actividad cognitiva durante el uso de videojuegos.
dc.identifier.instname.spa.fl_str_mv instname:Universidad Antonio Nariño
dc.identifier.reponame.spa.fl_str_mv reponame:Repositorio Institucional UAN
dc.identifier.repourl.spa.fl_str_mv repourl:https://repositorio.uan.edu.co/
url http://repositorio.uan.edu.co/handle/123456789/8406
identifier_str_mv (4) (PDF) Evaluación de la carga de trabajo cognitiva basada en EEG para una máxima eficiencia. (n.d.). Retrieved April 15, 2023, from https://www.researchgate.net/publication/286371237_EEG_Based_Cognitive_Workload_A ssessment_for_Maximum_Efficiency/figures?lo=1
Acharya, J. N., Hani, A., Cheek, J., Thirumala, P., & Tsuchida, T. N. (2016). American Clinical Neurophysiology Society Guideline 2: Guidelines for Standard Electrode Position Nomenclature. Journal of Clinical Neurophysiology : Official Publication of the American Electroencephalographic Society, 33(4), 308–311. https://doi.org/10.1097/WNP.0000000000000316
Albanese, A., Bhatia, K., Bressman, S. B., Delong, M. R., Fahn, S., Fung, V. S. C., Hallett, M., Jankovic, J., Jinnah, H. A., Klein, C., Lang, A. E., Mink, J. W., & Teller, J. K. (2013). Phenomenology and classification of dystonia: A consensus update. Movement Disorders, 28(7), 863–873. https://doi.org/10.1002/MDS.25475
Alexander, J., & Guerrero, R. (n.d.). Simulador para el guiado de una silla de ruedas virtual en Unity 3D a través de señales EMG mediante el brazalete gForce
ANALISIS DE SEÑALES TRIFASICAS MEDIANTE LENGUAJE LABVIEW | Guías, Proyectos, Investigaciones de Centrales Eléctricas | Docsity. (n.d.). Retrieved June 3, 2023, from https://www.docsity.com/es/analisis-de-senales-trifasicas-mediante-lenguajelabview/5419338/
Barrett, & E., K. (2013). Ganong fisiología médica (24a. ed.). 752. https://books.google.com/books/about/Ganong_fisiolog%C3%ADa_m%C3%A9dica_24a_e d.html?hl=es&id=mDuEBgAAQBAJ
Blanco-Díaz, C. F., & Ruiz-Olaya, A. F. (2020a). Caracterización de señales de EEG relacionadas a potenciales evocados visuales en estado estacionario. Revista Ontare, 7, 11– 26. https://doi.org/10.21158/23823399.V7.N0.2019.2459
Blanco-Díaz, C. F., & Ruiz-Olaya, A. F. (2020b). Caracterización de señales de EEG relacionadas a potenciales evocados visuales en estado estacionario. Revista Ontare, 7. https://doi.org/10.21158/23823399.v7.n0.2019.2459
Brain Computer Interfaces: il cervello che si mette in moto. (n.d.). Retrieved May 8, 2023, from https://www.ingegneriabiomedica.org/news/biotech-support/brain-computer-interfacescervello-si-mette-moto/
Cabañero Gómez, L. (2017). Análisis de señales de electroencefalografía (EEG) para evaluar actividad cognitiva durante el uso de videojuegos.
instname:Universidad Antonio Nariño
reponame:Repositorio Institucional UAN
repourl:https://repositorio.uan.edu.co/
dc.language.iso.spa.fl_str_mv spa
language spa
dc.rights.none.fl_str_mv Acceso abierto
dc.rights.license.spa.fl_str_mv Attribution-NonCommercial-NoDerivatives 4.0 International (CC BY-NC-ND 4.0)
dc.rights.uri.spa.fl_str_mv https://creativecommons.org/licenses/by-nc-nd/4.0/
dc.rights.accessrights.spa.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.spa.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv Attribution-NonCommercial-NoDerivatives 4.0 International (CC BY-NC-ND 4.0)
Acceso abierto
https://creativecommons.org/licenses/by-nc-nd/4.0/
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.coverage.spatial.spa.fl_str_mv Colombia( Popayán, Cauca)
dc.publisher.spa.fl_str_mv Universidad Antonio Nariño
dc.publisher.program.spa.fl_str_mv Ingeniería Biomédica
dc.publisher.faculty.spa.fl_str_mv Facultad de Ingeniería Mecánica, Electrónica y Biomédica
dc.publisher.campus.spa.fl_str_mv Popayán - Alto Cauca
institution Universidad Antonio Nariño
bitstream.url.fl_str_mv https://repositorio.uan.edu.co/bitstreams/d0b97570-31aa-4e35-b73c-73bd8f42a76a/download
https://repositorio.uan.edu.co/bitstreams/5f4f0bfa-7411-46c6-8259-1e3f2c0c959d/download
https://repositorio.uan.edu.co/bitstreams/f1005953-4e2d-4261-b598-3c75cae97d5c/download
https://repositorio.uan.edu.co/bitstreams/98529556-0414-4be1-802b-9c64233952e5/download
https://repositorio.uan.edu.co/bitstreams/84ee53c7-211a-45c4-98fc-518a96276e40/download
bitstream.checksum.fl_str_mv 9176563753dd1eda46331ca3276182e0
e2f7a68b39c8b57694be940137362de0
ef3851a81b53b7090fb926c9f6ff4fe4
dba333fa747e1f0cadb0afbeb55787f9
9868ccc48a14c8d591352b6eaf7f6239
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositorio Institucional UAN
repository.mail.fl_str_mv alertas.repositorio@uan.edu.co
_version_ 1812928304910434304
spelling Attribution-NonCommercial-NoDerivatives 4.0 International (CC BY-NC-ND 4.0)Acceso abiertohttps://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Pastás Guaitarilla, Iván AndrésRivera Larrañaga, Johnny Esteban2056171835620561613879Colombia( Popayán, Cauca)2023-08-09T15:46:54Z2023-08-09T15:46:54Z2023-06-08http://repositorio.uan.edu.co/handle/123456789/8406(4) (PDF) Evaluación de la carga de trabajo cognitiva basada en EEG para una máxima eficiencia. (n.d.). Retrieved April 15, 2023, from https://www.researchgate.net/publication/286371237_EEG_Based_Cognitive_Workload_A ssessment_for_Maximum_Efficiency/figures?lo=1Acharya, J. N., Hani, A., Cheek, J., Thirumala, P., & Tsuchida, T. N. (2016). American Clinical Neurophysiology Society Guideline 2: Guidelines for Standard Electrode Position Nomenclature. Journal of Clinical Neurophysiology : Official Publication of the American Electroencephalographic Society, 33(4), 308–311. https://doi.org/10.1097/WNP.0000000000000316Albanese, A., Bhatia, K., Bressman, S. B., Delong, M. R., Fahn, S., Fung, V. S. C., Hallett, M., Jankovic, J., Jinnah, H. A., Klein, C., Lang, A. E., Mink, J. W., & Teller, J. K. (2013). Phenomenology and classification of dystonia: A consensus update. Movement Disorders, 28(7), 863–873. https://doi.org/10.1002/MDS.25475Alexander, J., & Guerrero, R. (n.d.). Simulador para el guiado de una silla de ruedas virtual en Unity 3D a través de señales EMG mediante el brazalete gForceANALISIS DE SEÑALES TRIFASICAS MEDIANTE LENGUAJE LABVIEW | Guías, Proyectos, Investigaciones de Centrales Eléctricas | Docsity. (n.d.). Retrieved June 3, 2023, from https://www.docsity.com/es/analisis-de-senales-trifasicas-mediante-lenguajelabview/5419338/Barrett, & E., K. (2013). Ganong fisiología médica (24a. ed.). 752. https://books.google.com/books/about/Ganong_fisiolog%C3%ADa_m%C3%A9dica_24a_e d.html?hl=es&id=mDuEBgAAQBAJBlanco-Díaz, C. F., & Ruiz-Olaya, A. F. (2020a). Caracterización de señales de EEG relacionadas a potenciales evocados visuales en estado estacionario. Revista Ontare, 7, 11– 26. https://doi.org/10.21158/23823399.V7.N0.2019.2459Blanco-Díaz, C. F., & Ruiz-Olaya, A. F. (2020b). Caracterización de señales de EEG relacionadas a potenciales evocados visuales en estado estacionario. Revista Ontare, 7. https://doi.org/10.21158/23823399.v7.n0.2019.2459Brain Computer Interfaces: il cervello che si mette in moto. (n.d.). Retrieved May 8, 2023, from https://www.ingegneriabiomedica.org/news/biotech-support/brain-computer-interfacescervello-si-mette-moto/Cabañero Gómez, L. (2017). Análisis de señales de electroencefalografía (EEG) para evaluar actividad cognitiva durante el uso de videojuegos.instname:Universidad Antonio Nariñoreponame:Repositorio Institucional UANrepourl:https://repositorio.uan.edu.co/A brain-computer interface (BCI) is a system that establishes direct communication between the brain and a computer by recording the electrical activity of the brain. It makes use of Steady State Visual-Evoked Visual Evoked Potentials (SSVEP). The data obtained from the signals with respect to visual stimulation are filtered and used to train an artificial intelligence model, which identifies and classifies the user's activity intention, responsible for issuing control commands. The detection of brain neural activity is performed through OpenBCI, making use of the SSVEP protocol, the signals are stored and subsequently processed in Python interpreted programming language. For the acquisition of EEG signals, the user is instrumented by placing electrodes and the OpenBCIsystem, the impedance of the electrodes is determined and it is verified that they are in the required magnitude. They are recorded in 3 channels located in the occipital region: PO3, PO4, and OZ with a sampling frequency of 250 Hz and with a Notch filter to normalize response peaks that change with impedance. The visual stimuli are generated by an application using the Psychtoolbox-3 toolbox, running in the Matlab environment, where the EEG signal processing and command identification is performed by the method of filter bank. At the end of this project, it is expected to validate what has been done in a virtual environment in Unity 3D that simulates an apartment with the furniture where a wheelchair is located so that it can be guided by the user through the classification of EEG signals using the SSVEP mental strategy and the use of the OpenBCI system, As observed later on, where the user sees the stimulus on a screen to which the wheelchair is directed, it will move in that direction. It should be noted that the system due to some interference in the signal acquisition can identify movement towards another direction, such as towards the left and can randomly take it upwards, downwards or to the right. All this is due to errors that may occur when taking the subject’s signal, but in general it can be said that despite the fact that the interface may throw certain errors, it has a percentage of successes above the range considered adequate, thus correctly implementing the interface.Una interfaz cerebro-computadora BCI (del inglés, Brain Computer Interface), es un sistema que establece comunicación directa entre el cerebro y un ordenador registrando la actividad eléctrica del cerebro. Se hace uso de potenciales evocados visuales en estado estacionario SSVEP (del inglés, Steady State Visual-Evoked). Los datos obtenidos a partir de las señales EEG con respecto a la estimulación visual son filtrados y usados para entrenar un modelo de inteligencia artificial, que identifica y clasifica la intención de actividad del usuario, responsable de emitir comandos de control. La detección de la actividad neuronal cerebral se realiza a través de OpenBCI, haciendo uso del protocolo SSVEP, las señales son almacenadas y posteriormente procesadas en lenguaje de programación interpretado Python. Para la adquisición de las señales EEG se instrumenta el usuario ubicando electrodos y el sistema OpenBCI, se determina la impedancia de los electrodos y se verifica que se encuentran en la magnitud requerida. Se registran en 3 canales ubicados en la región occipital: PO3, PO4 y OZ con una frecuencia de muestreo de 250 Hz y con un filtro Notch para normalizar picos de respuesta que cambian con la impedancia. Los estímulos visuales se generan mediante una aplicación utilizando el Toolbox Psychtoolbox-3, que se ejecuta en el entorno de Matlab, donde posteriormente el procesamiento de las señales EEG y la identificación del comando se realiza mediante el método de banco de filtros. El proyecto ya finalizado valida lo realizado en un entorno virtual en Unity 3D que simula un apartamento con el mobiliario donde se encuentra una silla de ruedas para que pueda ser guiada por el usuario a través de la clasificación de las señales EEG utilizando la estrategia mental SSVEP y el uso del sistema OpenBCI, como se observa más adelante en donde el usuario al ver en una pantalla el estímulo al que se le direccione la silla de ruedas se moverá en esa dirección, cabe aclarar que el sistema por cuestión de alguna interferencia en la toma de las señales puede identificar el movimiento hacia otro lado, como puede ser que se haga con un estímulo hacia la izquierda y lo puede tomar aleatoriamente hacia arriba, abajo o derecha, todo esto debido a los errores que se puedan tener al momento de tomar la señal del sujeto, pero en general se puede decir que a pesar de que la interfaz puede arrojar ciertos errores tiene un porcentaje de aciertos por encima del rango que se considera adecuado siendo así de manera correcta la implementación de la interfaz.Ingeniero(a) Biomédico(a)PregradoPresencialProyectospaUniversidad Antonio NariñoIngeniería BiomédicaFacultad de Ingeniería Mecánica, Electrónica y BiomédicaPopayán - Alto CaucaInterfaz cerebro computadorSilla de ruedas virtualInteligencia Artificial56.23 R621iBrain Computer InterfaceVirtual WheelchairArtificial IntelligenceImplementación de una interfaz cerebro computadora para el control de una silla de ruedas dentro de de un ambiente virtual en UNITY utilizado SSVEPTrabajo de grado (Pregrado y/o Especialización)http://purl.org/coar/resource_type/c_7a1fhttp://purl.org/coar/version/c_970fb48d4fbd8a85GeneralORIGINAL2023_JhonnyPastas2023_JhonnyPastasDocumento TIGapplication/pdf3982787https://repositorio.uan.edu.co/bitstreams/d0b97570-31aa-4e35-b73c-73bd8f42a76a/download9176563753dd1eda46331ca3276182e0MD512023_JhonnyPastas_Acta2023_JhonnyPastas_ActaACTA DE EVALUACIÓN DE TRABAJO DE GRADOapplication/pdf150476https://repositorio.uan.edu.co/bitstreams/5f4f0bfa-7411-46c6-8259-1e3f2c0c959d/downloade2f7a68b39c8b57694be940137362de0MD532023_JhonnyPastas_Autorización2023_JhonnyPastas_AutorizaciónAutorización Autoresapplication/pdf836589https://repositorio.uan.edu.co/bitstreams/f1005953-4e2d-4261-b598-3c75cae97d5c/downloadef3851a81b53b7090fb926c9f6ff4fe4MD522023_JhonnyPastas_TurnitinG.pdf2023_JhonnyPastas_TurnitinG.pdfInforme de similitudapplication/pdf3813366https://repositorio.uan.edu.co/bitstreams/98529556-0414-4be1-802b-9c64233952e5/downloaddba333fa747e1f0cadb0afbeb55787f9MD54CC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-8811https://repositorio.uan.edu.co/bitstreams/84ee53c7-211a-45c4-98fc-518a96276e40/download9868ccc48a14c8d591352b6eaf7f6239MD55123456789/8406oai:repositorio.uan.edu.co:123456789/84062024-10-09 22:39:52.558https://creativecommons.org/licenses/by-nc-nd/4.0/Acceso abiertoopen.accesshttps://repositorio.uan.edu.coRepositorio Institucional UANalertas.repositorio@uan.edu.co