Language-guided instrument segmentation for robot-assisted surgery

La segmentación semántica de escenas quirúrgicas es una tarea fundamental que debe ser resuelta para el desarrollo de asistentes robóticos para cirugías y procedimientos guiados por imágenes médicas. En este trabajo, demostramos como integrar lenguaje natural en la tarea de segmentación semántica me...

Full description

Autores:
Bravo Sánchez, Laura María
Tipo de recurso:
Trabajo de grado de pregrado
Fecha de publicación:
2019
Institución:
Universidad de los Andes
Repositorio:
Séneca: repositorio Uniandes
Idioma:
eng
OAI Identifier:
oai:repositorio.uniandes.edu.co:1992/45438
Acceso en línea:
http://hdl.handle.net/1992/45438
Palabra clave:
Robótica en medicina
Robots quirúrgicos
Segmentación de imagen
Procesamiento de lenguaje natural (Computación)
Aprendizaje automático (Inteligencia artificial)
Ingeniería
Rights
openAccess
License
http://creativecommons.org/licenses/by-nc-nd/4.0/
id UNIANDES2_76c2d359b8e390fe1a4300b735e129db
oai_identifier_str oai:repositorio.uniandes.edu.co:1992/45438
network_acronym_str UNIANDES2
network_name_str Séneca: repositorio Uniandes
repository_id_str
dc.title.es_CO.fl_str_mv Language-guided instrument segmentation for robot-assisted surgery
title Language-guided instrument segmentation for robot-assisted surgery
spellingShingle Language-guided instrument segmentation for robot-assisted surgery
Robótica en medicina
Robots quirúrgicos
Segmentación de imagen
Procesamiento de lenguaje natural (Computación)
Aprendizaje automático (Inteligencia artificial)
Ingeniería
title_short Language-guided instrument segmentation for robot-assisted surgery
title_full Language-guided instrument segmentation for robot-assisted surgery
title_fullStr Language-guided instrument segmentation for robot-assisted surgery
title_full_unstemmed Language-guided instrument segmentation for robot-assisted surgery
title_sort Language-guided instrument segmentation for robot-assisted surgery
dc.creator.fl_str_mv Bravo Sánchez, Laura María
dc.contributor.advisor.none.fl_str_mv Arbeláez Escalante, Pablo Andrés
dc.contributor.author.none.fl_str_mv Bravo Sánchez, Laura María
dc.contributor.jury.none.fl_str_mv Hernández Hoyos, Marcela
Valderrama Manrique, Mario Andrés
dc.subject.armarc.es_CO.fl_str_mv Robótica en medicina
Robots quirúrgicos
Segmentación de imagen
Procesamiento de lenguaje natural (Computación)
Aprendizaje automático (Inteligencia artificial)
topic Robótica en medicina
Robots quirúrgicos
Segmentación de imagen
Procesamiento de lenguaje natural (Computación)
Aprendizaje automático (Inteligencia artificial)
Ingeniería
dc.subject.themes.none.fl_str_mv Ingeniería
description La segmentación semántica de escenas quirúrgicas es una tarea fundamental que debe ser resuelta para el desarrollo de asistentes robóticos para cirugías y procedimientos guiados por imágenes médicas. En este trabajo, demostramos como integrar lenguaje natural en la tarea de segmentación semántica mejora el desempeño de un sistema para cirugías asistidas por robot. Diseñamos la red de selección de categorías según el lenguaje (LCS por sus siglas en inglés), una red neuronal que toma candidatos de un método de detección de objetos y explota el lenguaje para asignar la clase adecuada a cada candidato. Experimentos en la base de datos Endoscopic Vision 2017 Robotic Instrument Segmentation demuestran que nuestro método además de beneficiarse de las predicciones del método de detección, es capaz de corregir predicciones erróneas al considerar la información del lenguaje. La inclusión del lenguaje permite a LCS convertirse en el estado del arte en esta base de datos...
publishDate 2019
dc.date.issued.none.fl_str_mv 2019
dc.date.accessioned.none.fl_str_mv 2020-09-03T15:59:18Z
dc.date.available.none.fl_str_mv 2020-09-03T15:59:18Z
dc.type.spa.fl_str_mv Trabajo de grado - Pregrado
dc.type.coarversion.fl_str_mv http://purl.org/coar/version/c_970fb48d4fbd8a85
dc.type.driver.spa.fl_str_mv info:eu-repo/semantics/bachelorThesis
dc.type.coar.spa.fl_str_mv http://purl.org/coar/resource_type/c_7a1f
dc.type.content.spa.fl_str_mv Text
dc.type.redcol.spa.fl_str_mv http://purl.org/redcol/resource_type/TP
format http://purl.org/coar/resource_type/c_7a1f
dc.identifier.uri.none.fl_str_mv http://hdl.handle.net/1992/45438
dc.identifier.pdf.none.fl_str_mv u827506.pdf
dc.identifier.instname.spa.fl_str_mv instname:Universidad de los Andes
dc.identifier.reponame.spa.fl_str_mv reponame:Repositorio Institucional Séneca
dc.identifier.repourl.spa.fl_str_mv repourl:https://repositorio.uniandes.edu.co/
url http://hdl.handle.net/1992/45438
identifier_str_mv u827506.pdf
instname:Universidad de los Andes
reponame:Repositorio Institucional Séneca
repourl:https://repositorio.uniandes.edu.co/
dc.language.iso.es_CO.fl_str_mv eng
language eng
dc.rights.uri.*.fl_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
dc.rights.accessrights.spa.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.spa.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.format.extent.es_CO.fl_str_mv 14 hojas
dc.format.mimetype.es_CO.fl_str_mv application/pdf
dc.publisher.es_CO.fl_str_mv Universidad de los Andes
dc.publisher.program.es_CO.fl_str_mv Ingeniería Biomédica
dc.publisher.faculty.es_CO.fl_str_mv Facultad de Ingeniería
dc.publisher.department.es_CO.fl_str_mv Departamento de Ingeniería Biomédica
dc.source.es_CO.fl_str_mv instname:Universidad de los Andes
reponame:Repositorio Institucional Séneca
instname_str Universidad de los Andes
institution Universidad de los Andes
reponame_str Repositorio Institucional Séneca
collection Repositorio Institucional Séneca
bitstream.url.fl_str_mv https://repositorio.uniandes.edu.co/bitstreams/1a3b7e38-7165-4b93-98ac-87cb45e3174e/download
https://repositorio.uniandes.edu.co/bitstreams/8d22c5ab-2463-4ddf-95b3-b84f510ad778/download
https://repositorio.uniandes.edu.co/bitstreams/d4420134-954a-4d76-902c-e4e23fdd86e1/download
bitstream.checksum.fl_str_mv 38f271b7ce6c67f807ee5cfce9e0d46a
e16ac88138c3ae8e468a5b80e98a26d1
5fbfe2d7bf07a0ef3d475213c3461e50
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositorio institucional Séneca
repository.mail.fl_str_mv adminrepositorio@uniandes.edu.co
_version_ 1812133973150662656
spelling Al consultar y hacer uso de este recurso, está aceptando las condiciones de uso establecidas por los autores.http://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Arbeláez Escalante, Pablo Andrésvirtual::11042-1Bravo Sánchez, Laura María79c70f87-a6c7-413a-b678-6c76cd3072f2600Hernández Hoyos, MarcelaValderrama Manrique, Mario Andrés2020-09-03T15:59:18Z2020-09-03T15:59:18Z2019http://hdl.handle.net/1992/45438u827506.pdfinstname:Universidad de los Andesreponame:Repositorio Institucional Sénecarepourl:https://repositorio.uniandes.edu.co/La segmentación semántica de escenas quirúrgicas es una tarea fundamental que debe ser resuelta para el desarrollo de asistentes robóticos para cirugías y procedimientos guiados por imágenes médicas. En este trabajo, demostramos como integrar lenguaje natural en la tarea de segmentación semántica mejora el desempeño de un sistema para cirugías asistidas por robot. Diseñamos la red de selección de categorías según el lenguaje (LCS por sus siglas en inglés), una red neuronal que toma candidatos de un método de detección de objetos y explota el lenguaje para asignar la clase adecuada a cada candidato. Experimentos en la base de datos Endoscopic Vision 2017 Robotic Instrument Segmentation demuestran que nuestro método además de beneficiarse de las predicciones del método de detección, es capaz de corregir predicciones erróneas al considerar la información del lenguaje. La inclusión del lenguaje permite a LCS convertirse en el estado del arte en esta base de datos...Semantic segmentation of surgical scenes is a fundamental task that must be solved in the pursuit of autonomous robot-assisted surgeries and image-guided interventions. In this work, we demonstrate how the performance of a semantic segmentation system for robot-assisted surgeries can be improved by the integration of natural language. We design the Language Category Selection network (LCS), a neural network that draws candidates from a language-agnostic object-detection method, and exploits language to appropriately assign a category to each candidate. Experiments on the Endoscopic Vision 2017 Robotic Instrument Segmentation Dataset reveal that our method is not only able to benefit from the predictions of the detection method, but is also capable of correcting such predictions by considering linguistic information. The incluson of language information ultimately allows LCS to obtain state-of-the-art performance in the dataset...Ingeniero BiomédicoPregrado14 hojasapplication/pdfengUniversidad de los AndesIngeniería BiomédicaFacultad de IngenieríaDepartamento de Ingeniería Biomédicainstname:Universidad de los Andesreponame:Repositorio Institucional SénecaLanguage-guided instrument segmentation for robot-assisted surgeryTrabajo de grado - Pregradoinfo:eu-repo/semantics/bachelorThesishttp://purl.org/coar/resource_type/c_7a1fhttp://purl.org/coar/version/c_970fb48d4fbd8a85Texthttp://purl.org/redcol/resource_type/TPRobótica en medicinaRobots quirúrgicosSegmentación de imagenProcesamiento de lenguaje natural (Computación)Aprendizaje automático (Inteligencia artificial)IngenieríaPublicationhttps://scholar.google.es/citations?user=k0nZO90AAAAJvirtual::11042-10000-0001-5244-2407virtual::11042-1https://scienti.minciencias.gov.co/cvlac/visualizador/generarCurriculoCv.do?cod_rh=0001579086virtual::11042-1b4f52d42-ce2a-4e74-a22f-e52a6bfbd48evirtual::11042-1b4f52d42-ce2a-4e74-a22f-e52a6bfbd48evirtual::11042-1ORIGINALu827506.pdfapplication/pdf21208644https://repositorio.uniandes.edu.co/bitstreams/1a3b7e38-7165-4b93-98ac-87cb45e3174e/download38f271b7ce6c67f807ee5cfce9e0d46aMD51THUMBNAILu827506.pdf.jpgu827506.pdf.jpgIM Thumbnailimage/jpeg8252https://repositorio.uniandes.edu.co/bitstreams/8d22c5ab-2463-4ddf-95b3-b84f510ad778/downloade16ac88138c3ae8e468a5b80e98a26d1MD55TEXTu827506.pdf.txtu827506.pdf.txtExtracted texttext/plain59029https://repositorio.uniandes.edu.co/bitstreams/d4420134-954a-4d76-902c-e4e23fdd86e1/download5fbfe2d7bf07a0ef3d475213c3461e50MD541992/45438oai:repositorio.uniandes.edu.co:1992/454382024-03-13 14:20:14.318http://creativecommons.org/licenses/by-nc-nd/4.0/open.accesshttps://repositorio.uniandes.edu.coRepositorio institucional Sénecaadminrepositorio@uniandes.edu.co

Publicaciones similares