Propuesta de interacción multimodal: caso de estudio navegación en mapas

Este trabajo presenta una propuesta del componente de interacción de usuario multimodal para ser integrado principalmente con aplicaciones de computación visual 2D/3D. El componente considera múltiples canales de entrada de información funcionando simultáneamente. Sobre cada canal de entrada se defi...

Full description

Autores:
De la Rosa, Fernando
Duque, Carlos
Hernández, José Tiberio
Tipo de recurso:
Trabajo de grado de pregrado
Fecha de publicación:
2013
Institución:
Universidad Autónoma de Bucaramanga - UNAB
Repositorio:
Repositorio UNAB
Idioma:
spa
OAI Identifier:
oai:repository.unab.edu.co:20.500.12749/8908
Acceso en línea:
http://hdl.handle.net/20.500.12749/8908
Palabra clave:
Innovaciones tecnológicas
Ciencia de los computadores
Desarrollo de tecnología
Ingeniería de sistemas
Investigaciones
Tecnologías de la información y las comunicaciones
TIC´s
Technological innovations
Computer science
Technology development
Systems engineering
Investigations
Information and communication technologies
ICT's
Man-machine interaction,
Gesture interaction
Voice interaction
Navigation on maps
Multimodal interaction
Innovaciones tecnológicas
Ciencias de la computación
Desarrollo tecnológico
Ingeniería de sistemas
Investigaciones
Tecnologías de la información y la comunicación
Interacción hombre-máquina,
Interacción multimodal
Interacción gestual
Interacción por voz
Navegación en mapas
Rights
License
Derechos de autor 2013 Revista Colombiana de Computación
id UNAB2_d096635f49b98c76f67c562ac7105d02
oai_identifier_str oai:repository.unab.edu.co:20.500.12749/8908
network_acronym_str UNAB2
network_name_str Repositorio UNAB
repository_id_str
dc.title.none.fl_str_mv Propuesta de interacción multimodal: caso de estudio navegación en mapas
dc.title.translated.eng.fl_str_mv Multimodal interaction proposal: navigation map case study
title Propuesta de interacción multimodal: caso de estudio navegación en mapas
spellingShingle Propuesta de interacción multimodal: caso de estudio navegación en mapas
Innovaciones tecnológicas
Ciencia de los computadores
Desarrollo de tecnología
Ingeniería de sistemas
Investigaciones
Tecnologías de la información y las comunicaciones
TIC´s
Technological innovations
Computer science
Technology development
Systems engineering
Investigations
Information and communication technologies
ICT's
Man-machine interaction,
Gesture interaction
Voice interaction
Navigation on maps
Multimodal interaction
Innovaciones tecnológicas
Ciencias de la computación
Desarrollo tecnológico
Ingeniería de sistemas
Investigaciones
Tecnologías de la información y la comunicación
Interacción hombre-máquina,
Interacción multimodal
Interacción gestual
Interacción por voz
Navegación en mapas
title_short Propuesta de interacción multimodal: caso de estudio navegación en mapas
title_full Propuesta de interacción multimodal: caso de estudio navegación en mapas
title_fullStr Propuesta de interacción multimodal: caso de estudio navegación en mapas
title_full_unstemmed Propuesta de interacción multimodal: caso de estudio navegación en mapas
title_sort Propuesta de interacción multimodal: caso de estudio navegación en mapas
dc.creator.fl_str_mv De la Rosa, Fernando
Duque, Carlos
Hernández, José Tiberio
dc.contributor.author.spa.fl_str_mv De la Rosa, Fernando
Duque, Carlos
Hernández, José Tiberio
dc.contributor.googlescholar.spa.fl_str_mv De la Rosa, Fernando [UB6e9ywAAAAJ]
Hernández, José Tiberio [-gUUc7oAAAAJ]
dc.contributor.orcid.spa.fl_str_mv De la Rosa, Fernando [0000-0002-9066-7225]
Hernández, José Tiberio [0000-0002-5035-4363]
dc.contributor.researchgate.spa.fl_str_mv De la Rosa, Fernando [Jose-Hernandez-104]
dc.subject.none.fl_str_mv Innovaciones tecnológicas
Ciencia de los computadores
Desarrollo de tecnología
Ingeniería de sistemas
Investigaciones
Tecnologías de la información y las comunicaciones
TIC´s
topic Innovaciones tecnológicas
Ciencia de los computadores
Desarrollo de tecnología
Ingeniería de sistemas
Investigaciones
Tecnologías de la información y las comunicaciones
TIC´s
Technological innovations
Computer science
Technology development
Systems engineering
Investigations
Information and communication technologies
ICT's
Man-machine interaction,
Gesture interaction
Voice interaction
Navigation on maps
Multimodal interaction
Innovaciones tecnológicas
Ciencias de la computación
Desarrollo tecnológico
Ingeniería de sistemas
Investigaciones
Tecnologías de la información y la comunicación
Interacción hombre-máquina,
Interacción multimodal
Interacción gestual
Interacción por voz
Navegación en mapas
dc.subject.keywords.eng.fl_str_mv Technological innovations
Computer science
Technology development
Systems engineering
Investigations
Information and communication technologies
ICT's
Man-machine interaction,
Gesture interaction
Voice interaction
Navigation on maps
dc.subject.keywords.spa.fl_str_mv Multimodal interaction
dc.subject.lemb.spa.fl_str_mv Innovaciones tecnológicas
Ciencias de la computación
Desarrollo tecnológico
Ingeniería de sistemas
Investigaciones
Tecnologías de la información y la comunicación
dc.subject.proposal.spa.fl_str_mv Interacción hombre-máquina,
Interacción multimodal
Interacción gestual
Interacción por voz
Navegación en mapas
description Este trabajo presenta una propuesta del componente de interacción de usuario multimodal para ser integrado principalmente con aplicaciones de computación visual 2D/3D. El componente considera múltiples canales de entrada de información funcionando simultáneamente. Sobre cada canal de entrada se define un proceso de tratamiento de información que corresponde a una modalidad de interacción disponible al usuario. La información resultante de las diferentes modalidades se integra para definir acciones/comandos conjuntos de interacción hacia la aplicación computacional. La interacción multimodal busca ser más natural para el usuario, lo cual significa una interacción más fácil y agradable. La propuesta fue validada integrando una componente de interacción multimodal basada en gestos manuales y voz con la aplicación Bing-Maps para realizar la tarea de navegación en mapas 2D en un ambiente de visualización de mediano formato. El prototipo de integración fue validado por un conjunto de usuarios y se obtuvieron resultados preliminares de su funcionalidad y de la experiencia de usuario resultante.
publishDate 2013
dc.date.issued.none.fl_str_mv 2013-12-01
dc.date.accessioned.none.fl_str_mv 2020-10-27T00:20:26Z
dc.date.available.none.fl_str_mv 2020-10-27T00:20:26Z
dc.type.coar.fl_str_mv http://purl.org/coar/resource_type/c_2df8fbb1
dc.type.driver.none.fl_str_mv info:eu-repo/semantics/article
dc.type.local.spa.fl_str_mv Artículo
dc.type.coar.none.fl_str_mv http://purl.org/coar/resource_type/c_7a1f
dc.type.redcol.none.fl_str_mv http://purl.org/redcol/resource_type/CJournalArticle
format http://purl.org/coar/resource_type/c_7a1f
dc.identifier.issn.none.fl_str_mv 2539-2115
1657-2831
dc.identifier.uri.none.fl_str_mv http://hdl.handle.net/20.500.12749/8908
dc.identifier.instname.spa.fl_str_mv instname:Universidad Autónoma de Bucaramanga UNAB
dc.identifier.repourl.none.fl_str_mv repourl:https://repository.unab.edu.co
identifier_str_mv 2539-2115
1657-2831
instname:Universidad Autónoma de Bucaramanga UNAB
repourl:https://repository.unab.edu.co
url http://hdl.handle.net/20.500.12749/8908
dc.language.iso.spa.fl_str_mv spa
language spa
dc.relation.none.fl_str_mv https://revistas.unab.edu.co/index.php/rcc/article/view/2019/1804
dc.relation.uri.none.fl_str_mv https://revistas.unab.edu.co/index.php/rcc/article/view/2019
dc.relation.references.none.fl_str_mv S. Oviatt, “Multimodal Interfaces,” Handbook of HumanComputer Interaction, 2002, Capítulo 14, pp. 286-304.
C. Duque, F. De la Rosa, J.T. Hernández. “Multimodal Interaction Architecture applied to Navigation in Maps,” VIII Congreso Colombiano de Computación (8CCC), Armenia, Colombia, 2013.
Microsoft Bing-Maps. (2013, Mar 4). [En línea] Disponible: http://www.bing.com/maps/.
M.J. Egenhofer, “Query processing in spatial-query-by-sketch,” J. Visual Languages and Computing, vol. 8, no. 4, pp. 403-434, 1997.
D. McGee, P. Cohen, L. Wu, “Something from nothing: Augmenting a paper-based work practice via multimodal interaction,” en Proc. ACM Designing Augmented Reality Environments, 2000, pp. 71-80.
J. Florence, K. Hornsby, M.J. Egenhofer, “The GIS WallBoard: Interactions with spatial information on large-scale displays,” en th 7 Int. Symp. on Spatial Data Handling SDH, 1996, pp. 449-463.
M. Johnston, S. Bangalore, G. Vasireddy, “MATCH: Multimodal access to city help,” en Autom. Speech Recognit. and Understand. Works., 2001.
L. B. Larsen, R. B. Jensen, K. L. Jensen, S. Larsen, “Development of an automatic pool trainer,” en Proc. ACM SIGCHI Int. Conf. of Advances in Computer Entertainment Technology ACE, 2005, pp. 83-87.
L.R. Ruiz, F. De la Rosa, J.T. Hernández, “Platform integrating interactive applications with gesture-based interaction,” en XXXVIII Conf. Latinoamericana en Informática CLEI, 2012.
Y. Ying, “A hierarchical approach to continuous gesture analysis for natural multi-modal interaction,” en Proc. 14th ACM Int. Conf. on Multimodal Interaction ICMI, 2012, pp. 357-360.
F. Daiber, S. Gehring, M. Löchtefeld, A. Krüger, “TouchPosing: multi-modal interaction with geospatial data,” en Proc. 11th Int. Conf. on Mobile and Ubiquitous Multimedia (MUM), 2012, Article 8.
Microsoft. “Kinect for Windows SDK”. (2013, Mar 4). [En línea] Disponible: http://msdn.microsoft.com/en-us/library/hh85 5347.aspx.
D. Catuhe, Programming with the Kinect for Windows software development kit. Ed. Microsoft Press, 2012.
Microsoft. “Microsoft Speech Platform”. (2013, Mar 4). [En línea] Disponible: http://msdn.microsoft.com/en-us/library/hh361 572.aspx.
S. Oviatt, A. DeAngeli, K. Kuhn, “Integration and synchronization of input modes during multimodal human-computer interaction,” en Proc. ACM SIGCHI CHI Conference, 1997, pp. 415-422.
J. Chang, M.-L. Bourguet, “Usability framework for the design and nd evaluation of multimodal interaction,” en Proc. of the 22 British HCI Group Annu. Conf. on People and Computers: Culture, Creativity, Interaction BCS-HCI, 2008, pp. 123-126.
M. Turunen, J. Hakulinen, A. Melto, T. Heimonen, T. Laivo, J. Hella, “SUXES-user experience evaluation method for spoken and multimodal interaction,” en Proc. of INTERSPEECH Conf., 2009, pp. 2567-2570.
dc.rights.none.fl_str_mv Derechos de autor 2013 Revista Colombiana de Computación
dc.rights.coar.fl_str_mv http://purl.org/coar/access_right/c_abf2
dc.rights.uri.*.fl_str_mv http://creativecommons.org/licenses/by-nc-sa/4.0/
dc.rights.uri.none.fl_str_mv http://creativecommons.org/licenses/by-nc-nd/2.5/co/
dc.rights.creativecommons.*.fl_str_mv Atribución-NoComercial-SinDerivadas 2.5 Colombia
rights_invalid_str_mv Derechos de autor 2013 Revista Colombiana de Computación
http://creativecommons.org/licenses/by-nc-sa/4.0/
http://creativecommons.org/licenses/by-nc-nd/2.5/co/
Atribución-NoComercial-SinDerivadas 2.5 Colombia
http://purl.org/coar/access_right/c_abf2
dc.format.mimetype.spa.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidad Autónoma de Bucaramanga UNAB
publisher.none.fl_str_mv Universidad Autónoma de Bucaramanga UNAB
dc.source.none.fl_str_mv Revista Colombiana de Computación; Vol. 14 Núm. 2 (2013): Revista Colombiana de Computación; 141-161
institution Universidad Autónoma de Bucaramanga - UNAB
bitstream.url.fl_str_mv https://repository.unab.edu.co/bitstream/20.500.12749/8908/1/2013_Articulo_Propuesta%20de%20interaccion%20multimodal%20caso%20de%20estudio%20navegacion%20en%20mapas.pdf
https://repository.unab.edu.co/bitstream/20.500.12749/8908/2/2013_Articulo_Propuesta%20de%20interaccion%20multimodal%20caso%20de%20estudio%20navegacion%20en%20mapas.pdf.jpg
bitstream.checksum.fl_str_mv ed4c246780d1aa3ef9f0fa97a40df38d
888ad384fbcd3266ce94525bb2f21870
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Repositorio Institucional | Universidad Autónoma de Bucaramanga - UNAB
repository.mail.fl_str_mv repositorio@unab.edu.co
_version_ 1814277631063883776
spelling De la Rosa, Fernando5d43d171-456d-4599-a3c8-0932b7a98572Duque, Carlos93bab498-cb62-4971-aff7-e2beaeab6bf5Hernández, José Tiberio1271d9ff-047c-4e6b-9faf-90286e3d2ba3De la Rosa, Fernando [UB6e9ywAAAAJ]Hernández, José Tiberio [-gUUc7oAAAAJ]De la Rosa, Fernando [0000-0002-9066-7225]Hernández, José Tiberio [0000-0002-5035-4363]De la Rosa, Fernando [Jose-Hernandez-104]2020-10-27T00:20:26Z2020-10-27T00:20:26Z2013-12-012539-21151657-2831http://hdl.handle.net/20.500.12749/8908instname:Universidad Autónoma de Bucaramanga UNABrepourl:https://repository.unab.edu.coEste trabajo presenta una propuesta del componente de interacción de usuario multimodal para ser integrado principalmente con aplicaciones de computación visual 2D/3D. El componente considera múltiples canales de entrada de información funcionando simultáneamente. Sobre cada canal de entrada se define un proceso de tratamiento de información que corresponde a una modalidad de interacción disponible al usuario. La información resultante de las diferentes modalidades se integra para definir acciones/comandos conjuntos de interacción hacia la aplicación computacional. La interacción multimodal busca ser más natural para el usuario, lo cual significa una interacción más fácil y agradable. La propuesta fue validada integrando una componente de interacción multimodal basada en gestos manuales y voz con la aplicación Bing-Maps para realizar la tarea de navegación en mapas 2D en un ambiente de visualización de mediano formato. El prototipo de integración fue validado por un conjunto de usuarios y se obtuvieron resultados preliminares de su funcionalidad y de la experiencia de usuario resultante.This paper presents a proposal for the user interaction component multimodal to be integrated mainly with computer applications 2D/3D view. The component considers multiple input channels of information running simultaneously. On each input channel defines an information processing process that corresponds to a mode of interaction available to the user. The information resulting from the different modalities are integrated to define joint actions/commands of interaction towards the computational application. multimodal interaction seeks to be more natural for the user, which means easier interaction And pleasant. The proposal was validated by integrating a component of multimodal interaction based on manual gestures and voice with the application Bing-Maps to carry out the task of navigation on 2D maps in an environment of medium format display. The integration prototype was validated by a set of users and preliminary results were obtained from their functionality and the resulting user experience.application/pdfspaUniversidad Autónoma de Bucaramanga UNABhttps://revistas.unab.edu.co/index.php/rcc/article/view/2019/1804https://revistas.unab.edu.co/index.php/rcc/article/view/2019S. Oviatt, “Multimodal Interfaces,” Handbook of HumanComputer Interaction, 2002, Capítulo 14, pp. 286-304.C. Duque, F. De la Rosa, J.T. Hernández. “Multimodal Interaction Architecture applied to Navigation in Maps,” VIII Congreso Colombiano de Computación (8CCC), Armenia, Colombia, 2013.Microsoft Bing-Maps. (2013, Mar 4). [En línea] Disponible: http://www.bing.com/maps/.M.J. Egenhofer, “Query processing in spatial-query-by-sketch,” J. Visual Languages and Computing, vol. 8, no. 4, pp. 403-434, 1997.D. McGee, P. Cohen, L. Wu, “Something from nothing: Augmenting a paper-based work practice via multimodal interaction,” en Proc. ACM Designing Augmented Reality Environments, 2000, pp. 71-80.J. Florence, K. Hornsby, M.J. Egenhofer, “The GIS WallBoard: Interactions with spatial information on large-scale displays,” en th 7 Int. Symp. on Spatial Data Handling SDH, 1996, pp. 449-463.M. Johnston, S. Bangalore, G. Vasireddy, “MATCH: Multimodal access to city help,” en Autom. Speech Recognit. and Understand. Works., 2001.L. B. Larsen, R. B. Jensen, K. L. Jensen, S. Larsen, “Development of an automatic pool trainer,” en Proc. ACM SIGCHI Int. Conf. of Advances in Computer Entertainment Technology ACE, 2005, pp. 83-87.L.R. Ruiz, F. De la Rosa, J.T. Hernández, “Platform integrating interactive applications with gesture-based interaction,” en XXXVIII Conf. Latinoamericana en Informática CLEI, 2012.Y. Ying, “A hierarchical approach to continuous gesture analysis for natural multi-modal interaction,” en Proc. 14th ACM Int. Conf. on Multimodal Interaction ICMI, 2012, pp. 357-360.F. Daiber, S. Gehring, M. Löchtefeld, A. Krüger, “TouchPosing: multi-modal interaction with geospatial data,” en Proc. 11th Int. Conf. on Mobile and Ubiquitous Multimedia (MUM), 2012, Article 8.Microsoft. “Kinect for Windows SDK”. (2013, Mar 4). [En línea] Disponible: http://msdn.microsoft.com/en-us/library/hh85 5347.aspx.D. Catuhe, Programming with the Kinect for Windows software development kit. Ed. Microsoft Press, 2012.Microsoft. “Microsoft Speech Platform”. (2013, Mar 4). [En línea] Disponible: http://msdn.microsoft.com/en-us/library/hh361 572.aspx.S. Oviatt, A. DeAngeli, K. Kuhn, “Integration and synchronization of input modes during multimodal human-computer interaction,” en Proc. ACM SIGCHI CHI Conference, 1997, pp. 415-422.J. Chang, M.-L. Bourguet, “Usability framework for the design and nd evaluation of multimodal interaction,” en Proc. of the 22 British HCI Group Annu. Conf. on People and Computers: Culture, Creativity, Interaction BCS-HCI, 2008, pp. 123-126.M. Turunen, J. Hakulinen, A. Melto, T. Heimonen, T. Laivo, J. Hella, “SUXES-user experience evaluation method for spoken and multimodal interaction,” en Proc. of INTERSPEECH Conf., 2009, pp. 2567-2570.Derechos de autor 2013 Revista Colombiana de Computaciónhttp://creativecommons.org/licenses/by-nc-sa/4.0/http://creativecommons.org/licenses/by-nc-nd/2.5/co/Atribución-NoComercial-SinDerivadas 2.5 Colombiahttp://purl.org/coar/access_right/c_abf2Revista Colombiana de Computación; Vol. 14 Núm. 2 (2013): Revista Colombiana de Computación; 141-161Innovaciones tecnológicasCiencia de los computadoresDesarrollo de tecnologíaIngeniería de sistemasInvestigacionesTecnologías de la información y las comunicacionesTIC´sTechnological innovationsComputer scienceTechnology developmentSystems engineeringInvestigationsInformation and communication technologiesICT'sMan-machine interaction,Gesture interactionVoice interactionNavigation on mapsMultimodal interactionInnovaciones tecnológicasCiencias de la computaciónDesarrollo tecnológicoIngeniería de sistemasInvestigacionesTecnologías de la información y la comunicaciónInteracción hombre-máquina,Interacción multimodalInteracción gestualInteracción por vozNavegación en mapasPropuesta de interacción multimodal: caso de estudio navegación en mapasMultimodal interaction proposal: navigation map case studyinfo:eu-repo/semantics/articleArtículohttp://purl.org/coar/resource_type/c_7a1fhttp://purl.org/coar/resource_type/c_2df8fbb1http://purl.org/redcol/resource_type/CJournalArticleORIGINAL2013_Articulo_Propuesta de interaccion multimodal caso de estudio navegacion en mapas.pdf2013_Articulo_Propuesta de interaccion multimodal caso de estudio navegacion en mapas.pdfArtículoapplication/pdf1466722https://repository.unab.edu.co/bitstream/20.500.12749/8908/1/2013_Articulo_Propuesta%20de%20interaccion%20multimodal%20caso%20de%20estudio%20navegacion%20en%20mapas.pdfed4c246780d1aa3ef9f0fa97a40df38dMD51open accessTHUMBNAIL2013_Articulo_Propuesta de interaccion multimodal caso de estudio navegacion en mapas.pdf.jpg2013_Articulo_Propuesta de interaccion multimodal caso de estudio navegacion en mapas.pdf.jpgIM Thumbnailimage/jpeg7717https://repository.unab.edu.co/bitstream/20.500.12749/8908/2/2013_Articulo_Propuesta%20de%20interaccion%20multimodal%20caso%20de%20estudio%20navegacion%20en%20mapas.pdf.jpg888ad384fbcd3266ce94525bb2f21870MD52open access20.500.12749/8908oai:repository.unab.edu.co:20.500.12749/89082022-11-23 13:17:18.529open accessRepositorio Institucional | Universidad Autónoma de Bucaramanga - UNABrepositorio@unab.edu.co

Publicaciones similares