Video Harmonization in the Wild

La armonización de video es la tarea de mejorar el realismo entre los objetos de primer plano que son pegado en los fondos de otro video. Sin embargo, la falta de un marco experimental ha obligado a los trabajos anteriores de armonización de video a basarse en marcos supervisados que utilizan datos...

Full description

Autores:
Valderrama Niño, Diego Felipe
Tipo de recurso:
Fecha de publicación:
2021
Institución:
Universidad de los Andes
Repositorio:
Séneca: repositorio Uniandes
Idioma:
eng
OAI Identifier:
oai:repositorio.uniandes.edu.co:1992/53202
Acceso en línea:
http://hdl.handle.net/1992/53202
Palabra clave:
Procesamiento de imágenes
Ingeniería
Rights
openAccess
License
http://creativecommons.org/licenses/by-nc-nd/4.0/
id UNIANDES2_f273d0985327f19e3403b15ddfbbdd36
oai_identifier_str oai:repositorio.uniandes.edu.co:1992/53202
network_acronym_str UNIANDES2
network_name_str Séneca: repositorio Uniandes
repository_id_str
spelling Al consultar y hacer uso de este recurso, está aceptando las condiciones de uso establecidas por los autores.http://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Arbeláez Escalante, Pablo Andrésvirtual::1052-1Valderrama Niño, Diego Felipe30e6c544-51ed-43f7-a632-ddf379ac93c1600Hernández Peñaloza, José TiberioValderrama Manrique, Mario Andrés2021-11-03T16:14:08Z2021-11-03T16:14:08Z2021http://hdl.handle.net/1992/5320224123.pdfinstname:Universidad de los Andesreponame:Repositorio Institucional Sénecarepourl:https://repositorio.uniandes.edu.co/La armonización de video es la tarea de mejorar el realismo entre los objetos de primer plano que son pegado en los fondos de otro video. Sin embargo, la falta de un marco experimental ha obligado a los trabajos anteriores de armonización de video a basarse en marcos supervisados que utilizan datos sintéticos. En este trabajo, damos un paso más y diseñamos un marco experimental para abordar la armonización de video de una forma más general. Nosotros armonizamos la apariencia de los objetos en primer plano de un video con el fondo de otro video sin supervisión. Como protocolo de evaluación, proponemos un esquema de entrenamiento bien diseñado para adaptar un detector de falsificaciones y usarlo como detector de armonización. Además, proponemos un nuevo método que utiliza una estrategia sin supervisión para proporcionar señales de supervisión útiles durante el entrenamiento. Los experimentos mostraron la efectividad del método propuesto y el potencial del detector para evaluar la tarea de armonización de video.Video harmonization is the task of improving the realism between pasted foreground objects and video backgrounds. However, the lack of an experimental framework has forced previous approaches for video harmonization to rely on supervised frameworks using synthetic data. In this work, we take one step further and design an experimental framework to tackle video harmonization in the wild. We harmonize the foreground objects' appearance from one video into the background of another video in an unsupervised way. As an evaluation protocol, we propose a well-designed training scheme to adapt a forgery splicing detector and use it as a harmonization detector. Furthermore, we propose a new method that uses an unsupervised strategy to provide helpful supervisory signals during training. Experiments show the effectiveness of the proposed method and the detector's potential to evaluate the video harmonization task.Magíster en Ingeniería BiomédicaMaestría13 páginasapplication/pdfengUniversidad de los AndesMaestría en Ingeniería BiomédicaFacultad de IngenieríaDepartamento de Ingeniería BiomédicaVideo Harmonization in the WildTrabajo de grado - Maestríainfo:eu-repo/semantics/masterThesishttp://purl.org/coar/version/c_970fb48d4fbd8a85Texthttp://purl.org/redcol/resource_type/TMProcesamiento de imágenesIngeniería201618070Publicationhttps://scholar.google.es/citations?user=k0nZO90AAAAJvirtual::1052-10000-0001-5244-2407virtual::1052-1https://scienti.minciencias.gov.co/cvlac/visualizador/generarCurriculoCv.do?cod_rh=0001579086virtual::1052-1b4f52d42-ce2a-4e74-a22f-e52a6bfbd48evirtual::1052-1b4f52d42-ce2a-4e74-a22f-e52a6bfbd48evirtual::1052-1TEXT24123.pdf.txt24123.pdf.txtExtracted texttext/plain55711https://repositorio.uniandes.edu.co/bitstreams/8b8ce81d-4198-4147-96b1-732b6d42f3cd/download3aac9b7826bd00e6729744e7e016c405MD54ORIGINAL24123.pdfapplication/pdf5961012https://repositorio.uniandes.edu.co/bitstreams/dae23718-4847-4a06-8ad6-a7fe6fc1f779/download204d6a64c7cd9ea996bbdb27f1534bcaMD51THUMBNAIL24123.pdf.jpg24123.pdf.jpgIM Thumbnailimage/jpeg8140https://repositorio.uniandes.edu.co/bitstreams/9ce486bb-76dd-4df1-9205-74bc7239d863/download09aee48d010db4005bb54ab55a8e0d2fMD551992/53202oai:repositorio.uniandes.edu.co:1992/532022024-03-13 11:52:21.536http://creativecommons.org/licenses/by-nc-nd/4.0/open.accesshttps://repositorio.uniandes.edu.coRepositorio institucional Sénecaadminrepositorio@uniandes.edu.co
dc.title.eng.fl_str_mv Video Harmonization in the Wild
title Video Harmonization in the Wild
spellingShingle Video Harmonization in the Wild
Procesamiento de imágenes
Ingeniería
title_short Video Harmonization in the Wild
title_full Video Harmonization in the Wild
title_fullStr Video Harmonization in the Wild
title_full_unstemmed Video Harmonization in the Wild
title_sort Video Harmonization in the Wild
dc.creator.fl_str_mv Valderrama Niño, Diego Felipe
dc.contributor.advisor.none.fl_str_mv Arbeláez Escalante, Pablo Andrés
dc.contributor.author.none.fl_str_mv Valderrama Niño, Diego Felipe
dc.contributor.jury.none.fl_str_mv Hernández Peñaloza, José Tiberio
Valderrama Manrique, Mario Andrés
dc.subject.armarc.none.fl_str_mv Procesamiento de imágenes
topic Procesamiento de imágenes
Ingeniería
dc.subject.themes.none.fl_str_mv Ingeniería
description La armonización de video es la tarea de mejorar el realismo entre los objetos de primer plano que son pegado en los fondos de otro video. Sin embargo, la falta de un marco experimental ha obligado a los trabajos anteriores de armonización de video a basarse en marcos supervisados que utilizan datos sintéticos. En este trabajo, damos un paso más y diseñamos un marco experimental para abordar la armonización de video de una forma más general. Nosotros armonizamos la apariencia de los objetos en primer plano de un video con el fondo de otro video sin supervisión. Como protocolo de evaluación, proponemos un esquema de entrenamiento bien diseñado para adaptar un detector de falsificaciones y usarlo como detector de armonización. Además, proponemos un nuevo método que utiliza una estrategia sin supervisión para proporcionar señales de supervisión útiles durante el entrenamiento. Los experimentos mostraron la efectividad del método propuesto y el potencial del detector para evaluar la tarea de armonización de video.
publishDate 2021
dc.date.accessioned.none.fl_str_mv 2021-11-03T16:14:08Z
dc.date.available.none.fl_str_mv 2021-11-03T16:14:08Z
dc.date.issued.none.fl_str_mv 2021
dc.type.spa.fl_str_mv Trabajo de grado - Maestría
dc.type.coarversion.fl_str_mv http://purl.org/coar/version/c_970fb48d4fbd8a85
dc.type.driver.spa.fl_str_mv info:eu-repo/semantics/masterThesis
dc.type.content.spa.fl_str_mv Text
dc.type.redcol.spa.fl_str_mv http://purl.org/redcol/resource_type/TM
dc.identifier.uri.none.fl_str_mv http://hdl.handle.net/1992/53202
dc.identifier.pdf.none.fl_str_mv 24123.pdf
dc.identifier.instname.spa.fl_str_mv instname:Universidad de los Andes
dc.identifier.reponame.spa.fl_str_mv reponame:Repositorio Institucional Séneca
dc.identifier.repourl.spa.fl_str_mv repourl:https://repositorio.uniandes.edu.co/
url http://hdl.handle.net/1992/53202
identifier_str_mv 24123.pdf
instname:Universidad de los Andes
reponame:Repositorio Institucional Séneca
repourl:https://repositorio.uniandes.edu.co/
dc.language.iso.none.fl_str_mv eng
language eng
dc.rights.uri.*.fl_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
dc.rights.accessrights.spa.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.spa.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.format.extent.none.fl_str_mv 13 páginas
dc.format.mimetype.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidad de los Andes
dc.publisher.program.none.fl_str_mv Maestría en Ingeniería Biomédica
dc.publisher.faculty.none.fl_str_mv Facultad de Ingeniería
dc.publisher.department.none.fl_str_mv Departamento de Ingeniería Biomédica
publisher.none.fl_str_mv Universidad de los Andes
institution Universidad de los Andes
bitstream.url.fl_str_mv https://repositorio.uniandes.edu.co/bitstreams/8b8ce81d-4198-4147-96b1-732b6d42f3cd/download
https://repositorio.uniandes.edu.co/bitstreams/dae23718-4847-4a06-8ad6-a7fe6fc1f779/download
https://repositorio.uniandes.edu.co/bitstreams/9ce486bb-76dd-4df1-9205-74bc7239d863/download
bitstream.checksum.fl_str_mv 3aac9b7826bd00e6729744e7e016c405
204d6a64c7cd9ea996bbdb27f1534bca
09aee48d010db4005bb54ab55a8e0d2f
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositorio institucional Séneca
repository.mail.fl_str_mv adminrepositorio@uniandes.edu.co
_version_ 1818111680503087104