Identificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robot

En este trabajo se presenta una propuesta para detección de emociones a partir de señales multimodales, específicamente expresiones faciales y voz, en el contexto de interacción humano-robot. El problema planteado hace parte de la tendencia actual que busca sistemas que permitan comunicación entre h...

Full description

Autores:
Pérez Hernández, Andrea Katherín
Tipo de recurso:
Fecha de publicación:
2016
Institución:
Universidad de los Andes
Repositorio:
Séneca: repositorio Uniandes
Idioma:
eng
OAI Identifier:
oai:repositorio.uniandes.edu.co:1992/13761
Acceso en línea:
http://hdl.handle.net/1992/13761
Palabra clave:
Emociones - Investigaciones
Robots - Investigaciones
Interacción hombre-máquina - Investigaciones
Aprendizaje automático (Inteligencia artificial) - Investigaciones
Ingeniería
Rights
openAccess
License
http://creativecommons.org/licenses/by-nc-nd/4.0/
id UNIANDES2_4ecab240788a5478e13e11979ceca142
oai_identifier_str oai:repositorio.uniandes.edu.co:1992/13761
network_acronym_str UNIANDES2
network_name_str Séneca: repositorio Uniandes
repository_id_str
spelling Al consultar y hacer uso de este recurso, está aceptando las condiciones de uso establecidas por los autores.http://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Rosa Rosero, Mario Fernando de la45cee1f5-9c43-479c-9d89-b4ef3d535649400Pérez Hernández, Andrea Katherín433a031e-e2a7-4799-8333-74c07c3b506e500Hernández Peñaloza, José TiberioGonzález Osorio, Fabio Augusto2018-09-28T10:53:13Z2018-09-28T10:53:13Z2016http://hdl.handle.net/1992/13761u729256.pdfinstname:Universidad de los Andesreponame:Repositorio Institucional Sénecarepourl:https://repositorio.uniandes.edu.co/En este trabajo se presenta una propuesta para detección de emociones a partir de señales multimodales, específicamente expresiones faciales y voz, en el contexto de interacción humano-robot. El problema planteado hace parte de la tendencia actual que busca sistemas que permitan comunicación entre humanos y robots de forma natural. El sistema propuesto aplica técnicas de aprendizaje de máquina para lograr la detección de emociones en una persona mientras interactúa con un robot. La propuesta está dividida en tres módulos: el primero consiste en una red convolucional (CNN) que clasifica la emoción a partir de una secuencia de imágenes; el segundo módulo es un clasificador multiclase construido a partir de clasificadores SVM One Class para la señal de audio y el tercer módulo se encarga de combinar los resultados de los clasificadores unimodales. Adicionalmente se detallan los resultados obtenidos durante la etapa de construcción de los clasificadores unimodales y la validación del sistema combinado, en el cual se evidencia que para los datos adquiridos para el entrenamiento y posterior prueba el sistema logra detectar de manera correcta la emoción de la persona en todos los casos. Por último se presentan los resultados de la integración del sistema de detección de emociones con un robot humanoide que cumple el rol de asesor de ventas, realizando pruebas con usuarios para determinar la satisfacción y comodidad durante la interacción humano-robot.Magíster en Ingeniería de Sistemas y ComputaciónMaestría106 hojasapplication/pdfengUniandesMaestría en Ingeniería de Sistemas y ComputaciónFacultad de IngenieríaDepartamento de Ingeniería de Sistemas y Computacióninstname:Universidad de los Andesreponame:Repositorio Institucional SénecaIdentificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robotTrabajo de grado - Maestríainfo:eu-repo/semantics/masterThesishttp://purl.org/coar/version/c_970fb48d4fbd8a85Texthttp://purl.org/redcol/resource_type/TMEmociones - InvestigacionesRobots - InvestigacionesInteracción hombre-máquina - InvestigacionesAprendizaje automático (Inteligencia artificial) - InvestigacionesIngenieríaPublicationORIGINALu729256.pdfapplication/pdf12678807https://repositorio.uniandes.edu.co/bitstreams/c321f0a8-9daf-4ba7-b55b-99895b898269/download9194b95db0d0b7cccbdbf5a1ec88aec9MD51THUMBNAILu729256.pdf.jpgu729256.pdf.jpgIM Thumbnailimage/jpeg8661https://repositorio.uniandes.edu.co/bitstreams/fa55ce0d-9331-4f25-9c52-aeb350a8d222/downloadf548200c906123393f99edb32e682eedMD55TEXTu729256.pdf.txtu729256.pdf.txtExtracted texttext/plain169977https://repositorio.uniandes.edu.co/bitstreams/9a601cd6-3094-49d3-ad43-241a0ee879a2/download4734be9431113acf06e9a71f7d957e4cMD541992/13761oai:repositorio.uniandes.edu.co:1992/137612023-10-10 16:22:53.579http://creativecommons.org/licenses/by-nc-nd/4.0/open.accesshttps://repositorio.uniandes.edu.coRepositorio institucional Sénecaadminrepositorio@uniandes.edu.co
dc.title.es_CO.fl_str_mv Identificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robot
title Identificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robot
spellingShingle Identificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robot
Emociones - Investigaciones
Robots - Investigaciones
Interacción hombre-máquina - Investigaciones
Aprendizaje automático (Inteligencia artificial) - Investigaciones
Ingeniería
title_short Identificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robot
title_full Identificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robot
title_fullStr Identificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robot
title_full_unstemmed Identificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robot
title_sort Identificación de señales multimodales para reconocimiento de emociones en el contexto de interacción humano-robot
dc.creator.fl_str_mv Pérez Hernández, Andrea Katherín
dc.contributor.advisor.none.fl_str_mv Rosa Rosero, Mario Fernando de la
dc.contributor.author.none.fl_str_mv Pérez Hernández, Andrea Katherín
dc.contributor.jury.none.fl_str_mv Hernández Peñaloza, José Tiberio
González Osorio, Fabio Augusto
dc.subject.keyword.es_CO.fl_str_mv Emociones - Investigaciones
Robots - Investigaciones
Interacción hombre-máquina - Investigaciones
Aprendizaje automático (Inteligencia artificial) - Investigaciones
topic Emociones - Investigaciones
Robots - Investigaciones
Interacción hombre-máquina - Investigaciones
Aprendizaje automático (Inteligencia artificial) - Investigaciones
Ingeniería
dc.subject.themes.none.fl_str_mv Ingeniería
description En este trabajo se presenta una propuesta para detección de emociones a partir de señales multimodales, específicamente expresiones faciales y voz, en el contexto de interacción humano-robot. El problema planteado hace parte de la tendencia actual que busca sistemas que permitan comunicación entre humanos y robots de forma natural. El sistema propuesto aplica técnicas de aprendizaje de máquina para lograr la detección de emociones en una persona mientras interactúa con un robot. La propuesta está dividida en tres módulos: el primero consiste en una red convolucional (CNN) que clasifica la emoción a partir de una secuencia de imágenes; el segundo módulo es un clasificador multiclase construido a partir de clasificadores SVM One Class para la señal de audio y el tercer módulo se encarga de combinar los resultados de los clasificadores unimodales. Adicionalmente se detallan los resultados obtenidos durante la etapa de construcción de los clasificadores unimodales y la validación del sistema combinado, en el cual se evidencia que para los datos adquiridos para el entrenamiento y posterior prueba el sistema logra detectar de manera correcta la emoción de la persona en todos los casos. Por último se presentan los resultados de la integración del sistema de detección de emociones con un robot humanoide que cumple el rol de asesor de ventas, realizando pruebas con usuarios para determinar la satisfacción y comodidad durante la interacción humano-robot.
publishDate 2016
dc.date.issued.none.fl_str_mv 2016
dc.date.accessioned.none.fl_str_mv 2018-09-28T10:53:13Z
dc.date.available.none.fl_str_mv 2018-09-28T10:53:13Z
dc.type.spa.fl_str_mv Trabajo de grado - Maestría
dc.type.coarversion.fl_str_mv http://purl.org/coar/version/c_970fb48d4fbd8a85
dc.type.driver.spa.fl_str_mv info:eu-repo/semantics/masterThesis
dc.type.content.spa.fl_str_mv Text
dc.type.redcol.spa.fl_str_mv http://purl.org/redcol/resource_type/TM
dc.identifier.uri.none.fl_str_mv http://hdl.handle.net/1992/13761
dc.identifier.pdf.none.fl_str_mv u729256.pdf
dc.identifier.instname.spa.fl_str_mv instname:Universidad de los Andes
dc.identifier.reponame.spa.fl_str_mv reponame:Repositorio Institucional Séneca
dc.identifier.repourl.spa.fl_str_mv repourl:https://repositorio.uniandes.edu.co/
url http://hdl.handle.net/1992/13761
identifier_str_mv u729256.pdf
instname:Universidad de los Andes
reponame:Repositorio Institucional Séneca
repourl:https://repositorio.uniandes.edu.co/
dc.language.iso.es_CO.fl_str_mv eng
language eng
dc.rights.uri.*.fl_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
dc.rights.accessrights.spa.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.spa.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.format.extent.es_CO.fl_str_mv 106 hojas
dc.format.mimetype.es_CO.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Uniandes
dc.publisher.program.es_CO.fl_str_mv Maestría en Ingeniería de Sistemas y Computación
dc.publisher.faculty.es_CO.fl_str_mv Facultad de Ingeniería
dc.publisher.department.es_CO.fl_str_mv Departamento de Ingeniería de Sistemas y Computación
publisher.none.fl_str_mv Uniandes
dc.source.es_CO.fl_str_mv instname:Universidad de los Andes
reponame:Repositorio Institucional Séneca
instname_str Universidad de los Andes
institution Universidad de los Andes
reponame_str Repositorio Institucional Séneca
collection Repositorio Institucional Séneca
bitstream.url.fl_str_mv https://repositorio.uniandes.edu.co/bitstreams/c321f0a8-9daf-4ba7-b55b-99895b898269/download
https://repositorio.uniandes.edu.co/bitstreams/fa55ce0d-9331-4f25-9c52-aeb350a8d222/download
https://repositorio.uniandes.edu.co/bitstreams/9a601cd6-3094-49d3-ad43-241a0ee879a2/download
bitstream.checksum.fl_str_mv 9194b95db0d0b7cccbdbf5a1ec88aec9
f548200c906123393f99edb32e682eed
4734be9431113acf06e9a71f7d957e4c
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositorio institucional Séneca
repository.mail.fl_str_mv adminrepositorio@uniandes.edu.co
_version_ 1812133875664551936