MINT : Multi Instance Network, an efficient framework for video object segmentation

Video Object Segmentation consists on segmenting an object along all the frames of a video. The use of temporal and spatial cues are essential signals to bear in mind when dealing with this assignment. This thesis proposes MINT, Multi Instance Network, a method that takes into account shape priors,...

Full description

Autores:
Jeanneret Sanmiguel, Guillaume
Tipo de recurso:
Fecha de publicación:
2019
Institución:
Universidad de los Andes
Repositorio:
Séneca: repositorio Uniandes
Idioma:
eng
OAI Identifier:
oai:repositorio.uniandes.edu.co:1992/43963
Acceso en línea:
http://hdl.handle.net/1992/43963
Palabra clave:
Sistemas multimedia - Investigaciones
Video digital - Investigaciones
Procesamiento de imágenes - Técnicas digitales - Investigaciones
Simulación por computadores - Investigaciones
Ingeniería
Rights
openAccess
License
http://creativecommons.org/licenses/by-nc-nd/4.0/
id UNIANDES2_012bb2d0c6f3e35cad319f98c4951529
oai_identifier_str oai:repositorio.uniandes.edu.co:1992/43963
network_acronym_str UNIANDES2
network_name_str Séneca: repositorio Uniandes
repository_id_str
spelling Al consultar y hacer uso de este recurso, está aceptando las condiciones de uso establecidas por los autores.http://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Arbeláez Escalante, Pablo Andrés7b73426f-f63b-413f-b44b-ddfa70416b65400Jeanneret Sanmiguel, Guillaume13b7ee63-dcdf-4958-87d0-bf638051ec4f500Hernández Peñaloza, José TiberioValderrama Manrique, Mario Andrés2020-09-03T14:19:00Z2020-09-03T14:19:00Z2019http://hdl.handle.net/1992/43963u830500.pdfinstname:Universidad de los Andesreponame:Repositorio Institucional Sénecarepourl:https://repositorio.uniandes.edu.co/Video Object Segmentation consists on segmenting an object along all the frames of a video. The use of temporal and spatial cues are essential signals to bear in mind when dealing with this assignment. This thesis proposes MINT, Multi Instance Network, a method that takes into account shape priors, the location and temporal information to create the segmentation of the object of interest while the inference time per frame is beneath state-of-the-art methods. MINT is able to generate segmentations at 50.51 FPS using the complete model and 81.74 FPS for the Fast version. Furthermore, MINT pushes the task of Video Object Segmentation by processing Multiple Instances in a single forward pass without any post-processing. MINT is trained and tested on the Largest Multi-Instance Video Object Segmentation Dataset, Youtube-VOS, achieving an overall performance of 0.592."La segmentación de objetos en video consiste en segmentar un objecto a lo largo de los fotogramas de un video. El uso de señales espaciales y temporales son escenciales al momento de abordar esta tarea. Esta tésis propone MINT, Multi-Instance Network, un método que utiliza información de forma, de posición e información temporal para crear la segmentación del objecto de interés mientras que procesa cada fotograma a 50.51 FPS. Además, MINT es capaz de procesar múltiples instancias en una única inferencia sin ningún post procesamiento. MINT es entrenado y validado en la base de datos más grande de segmentación de instancias, Youtube-VOS, consiguiendo un desempeño de 0.592."--Tomado del Formato de Documento de Grado.Magíster en Ingeniería BiomédicaMaestría15 hojasapplication/pdfengUniandesMaestría en Ingeniería BiomédicaFacultad de IngenieríaDepartamento de Ingeniería Biomédicainstname:Universidad de los Andesreponame:Repositorio Institucional SénecaMINT : Multi Instance Network, an efficient framework for video object segmentationTrabajo de grado - Maestríainfo:eu-repo/semantics/masterThesishttp://purl.org/coar/version/c_970fb48d4fbd8a85Texthttp://purl.org/redcol/resource_type/TMSistemas multimedia - InvestigacionesVideo digital - InvestigacionesProcesamiento de imágenes - Técnicas digitales - InvestigacionesSimulación por computadores - InvestigacionesIngenieríaPublicationTEXTu830500.pdf.txtu830500.pdf.txtExtracted texttext/plain57693https://repositorio.uniandes.edu.co/bitstreams/8b847cc8-9508-4d16-8141-730e1a640b6d/download49dd5365107021ed2b5c5b471b665b8bMD54THUMBNAILu830500.pdf.jpgu830500.pdf.jpgIM Thumbnailimage/jpeg12012https://repositorio.uniandes.edu.co/bitstreams/359c6853-c3c4-41c9-a413-700bd7d899f9/downloadcb00209ddfdd8044e0c316787da272fbMD55ORIGINALu830500.pdfapplication/pdf5249458https://repositorio.uniandes.edu.co/bitstreams/46025eaf-a5ae-44a6-84e5-9a681816a667/download4c833e1140083ce21e7db975c642d8c8MD511992/43963oai:repositorio.uniandes.edu.co:1992/439632023-10-10 18:01:56.077http://creativecommons.org/licenses/by-nc-nd/4.0/open.accesshttps://repositorio.uniandes.edu.coRepositorio institucional Sénecaadminrepositorio@uniandes.edu.co
dc.title.es_CO.fl_str_mv MINT : Multi Instance Network, an efficient framework for video object segmentation
title MINT : Multi Instance Network, an efficient framework for video object segmentation
spellingShingle MINT : Multi Instance Network, an efficient framework for video object segmentation
Sistemas multimedia - Investigaciones
Video digital - Investigaciones
Procesamiento de imágenes - Técnicas digitales - Investigaciones
Simulación por computadores - Investigaciones
Ingeniería
title_short MINT : Multi Instance Network, an efficient framework for video object segmentation
title_full MINT : Multi Instance Network, an efficient framework for video object segmentation
title_fullStr MINT : Multi Instance Network, an efficient framework for video object segmentation
title_full_unstemmed MINT : Multi Instance Network, an efficient framework for video object segmentation
title_sort MINT : Multi Instance Network, an efficient framework for video object segmentation
dc.creator.fl_str_mv Jeanneret Sanmiguel, Guillaume
dc.contributor.advisor.none.fl_str_mv Arbeláez Escalante, Pablo Andrés
dc.contributor.author.none.fl_str_mv Jeanneret Sanmiguel, Guillaume
dc.contributor.jury.none.fl_str_mv Hernández Peñaloza, José Tiberio
Valderrama Manrique, Mario Andrés
dc.subject.armarc.es_CO.fl_str_mv Sistemas multimedia - Investigaciones
Video digital - Investigaciones
Procesamiento de imágenes - Técnicas digitales - Investigaciones
Simulación por computadores - Investigaciones
topic Sistemas multimedia - Investigaciones
Video digital - Investigaciones
Procesamiento de imágenes - Técnicas digitales - Investigaciones
Simulación por computadores - Investigaciones
Ingeniería
dc.subject.themes.none.fl_str_mv Ingeniería
description Video Object Segmentation consists on segmenting an object along all the frames of a video. The use of temporal and spatial cues are essential signals to bear in mind when dealing with this assignment. This thesis proposes MINT, Multi Instance Network, a method that takes into account shape priors, the location and temporal information to create the segmentation of the object of interest while the inference time per frame is beneath state-of-the-art methods. MINT is able to generate segmentations at 50.51 FPS using the complete model and 81.74 FPS for the Fast version. Furthermore, MINT pushes the task of Video Object Segmentation by processing Multiple Instances in a single forward pass without any post-processing. MINT is trained and tested on the Largest Multi-Instance Video Object Segmentation Dataset, Youtube-VOS, achieving an overall performance of 0.592.
publishDate 2019
dc.date.issued.es_CO.fl_str_mv 2019
dc.date.accessioned.none.fl_str_mv 2020-09-03T14:19:00Z
dc.date.available.none.fl_str_mv 2020-09-03T14:19:00Z
dc.type.spa.fl_str_mv Trabajo de grado - Maestría
dc.type.coarversion.fl_str_mv http://purl.org/coar/version/c_970fb48d4fbd8a85
dc.type.driver.spa.fl_str_mv info:eu-repo/semantics/masterThesis
dc.type.content.spa.fl_str_mv Text
dc.type.redcol.spa.fl_str_mv http://purl.org/redcol/resource_type/TM
dc.identifier.uri.none.fl_str_mv http://hdl.handle.net/1992/43963
dc.identifier.pdf.none.fl_str_mv u830500.pdf
dc.identifier.instname.spa.fl_str_mv instname:Universidad de los Andes
dc.identifier.reponame.spa.fl_str_mv reponame:Repositorio Institucional Séneca
dc.identifier.repourl.spa.fl_str_mv repourl:https://repositorio.uniandes.edu.co/
url http://hdl.handle.net/1992/43963
identifier_str_mv u830500.pdf
instname:Universidad de los Andes
reponame:Repositorio Institucional Séneca
repourl:https://repositorio.uniandes.edu.co/
dc.language.iso.es_CO.fl_str_mv eng
language eng
dc.rights.uri.*.fl_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
dc.rights.accessrights.spa.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.spa.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.format.extent.es_CO.fl_str_mv 15 hojas
dc.format.mimetype.es_CO.fl_str_mv application/pdf
dc.publisher.es_CO.fl_str_mv Uniandes
dc.publisher.program.es_CO.fl_str_mv Maestría en Ingeniería Biomédica
dc.publisher.faculty.es_CO.fl_str_mv Facultad de Ingeniería
dc.publisher.department.es_CO.fl_str_mv Departamento de Ingeniería Biomédica
dc.source.es_CO.fl_str_mv instname:Universidad de los Andes
reponame:Repositorio Institucional Séneca
instname_str Universidad de los Andes
institution Universidad de los Andes
reponame_str Repositorio Institucional Séneca
collection Repositorio Institucional Séneca
bitstream.url.fl_str_mv https://repositorio.uniandes.edu.co/bitstreams/8b847cc8-9508-4d16-8141-730e1a640b6d/download
https://repositorio.uniandes.edu.co/bitstreams/359c6853-c3c4-41c9-a413-700bd7d899f9/download
https://repositorio.uniandes.edu.co/bitstreams/46025eaf-a5ae-44a6-84e5-9a681816a667/download
bitstream.checksum.fl_str_mv 49dd5365107021ed2b5c5b471b665b8b
cb00209ddfdd8044e0c316787da272fb
4c833e1140083ce21e7db975c642d8c8
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositorio institucional Séneca
repository.mail.fl_str_mv adminrepositorio@uniandes.edu.co
_version_ 1812133970778783744