Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojas

Una de las instituciones que conforma al Ejército y que ha jugado un papel importante en la lucha contra la insurgencia armada ha sido la Fuerza Aérea Colombiana (FAC), institución que busca una mano en instituciones de educación superior, tales como la Universidad de los Andes, para lograr la moder...

Full description

Autores:
Castro del Valle, Julián Humberto
Tipo de recurso:
Trabajo de grado de pregrado
Fecha de publicación:
2025
Institución:
Universidad de los Andes
Repositorio:
Séneca: repositorio Uniandes
Idioma:
spa
OAI Identifier:
oai:repositorio.uniandes.edu.co:1992/76288
Acceso en línea:
https://hdl.handle.net/1992/76288
Palabra clave:
Machine learning
Transferencia de aprendizaje
Redes neuronales
Cuantización
Aumento de datos
Inteligencia artificial
Ingeniería
Rights
openAccess
License
Attribution-NonCommercial-NoDerivatives 4.0 International
id UNIANDES2_ffa2a254f24834b9d78de5ec29fa0f80
oai_identifier_str oai:repositorio.uniandes.edu.co:1992/76288
network_acronym_str UNIANDES2
network_name_str Séneca: repositorio Uniandes
repository_id_str
dc.title.spa.fl_str_mv Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojas
title Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojas
spellingShingle Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojas
Machine learning
Transferencia de aprendizaje
Redes neuronales
Cuantización
Aumento de datos
Inteligencia artificial
Ingeniería
title_short Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojas
title_full Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojas
title_fullStr Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojas
title_full_unstemmed Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojas
title_sort Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojas
dc.creator.fl_str_mv Castro del Valle, Julián Humberto
dc.contributor.advisor.none.fl_str_mv Reyes Gómez, Juan Pablo
dc.contributor.author.none.fl_str_mv Castro del Valle, Julián Humberto
dc.subject.keyword.eng.fl_str_mv Machine learning
topic Machine learning
Transferencia de aprendizaje
Redes neuronales
Cuantización
Aumento de datos
Inteligencia artificial
Ingeniería
dc.subject.keyword.spa.fl_str_mv Transferencia de aprendizaje
Redes neuronales
Cuantización
Aumento de datos
Inteligencia artificial
dc.subject.themes.spa.fl_str_mv Ingeniería
description Una de las instituciones que conforma al Ejército y que ha jugado un papel importante en la lucha contra la insurgencia armada ha sido la Fuerza Aérea Colombiana (FAC), institución que busca una mano en instituciones de educación superior, tales como la Universidad de los Andes, para lograr la modernización y tecnificación constante de sus procesos operativos. En dicha institución educativa, junto con la FAC se realiza de manera conjunta el evento Codefest Ad Astra. Como resultado de esta actividad en el año 2023, se tuvieron en cuenta un conjunto de modelos basados en Deep Learning para detección de entidades tales como carreteras o edificaciones que indiquen la presencia de grupos armados al margen de la ley o de narcotráfico, específicamente en cámaras tipo FLIR (Forward Looking InfraRed, por su traducción al español, infrarrojo de barrido frontal). El presente trabajo tuvo como objetivos refinar y optimizar dichos modelos para la detección precisa de objetos de interés en videos de zonas selváticas capturados mediante el uso de cámaras infrarrojas en aeronaves tripuladas como parte de misiones de reconocimiento y seguridad de la FAC. Particularmente, se mejoraron las métricas de los modelos en términos de reconocimiento de entidades tales como carreteras, ríos, zonas de minería ilegal y construcciones que señalaban la presencia de campamentos insurgentes o de narcotráfico, incluso alcanzando, en uno de los modelos, un f1-score promedio ponderado de 0,84, un aumento de 12 puntos respecto al modelo original. Esta mejora se dio utilizando transferencia de aprendizaje, extendiendo el conjunto de datos mediante técnicas de aumento de datos tales como distorsiones o cambios en brillo y contraste de los fotogramas de los videos originales. Adicionalmente, se exploraron alternativas de despliegue en hardware especializado como la Edge TPU de Google; mediante procesos de cuantización se adaptaron los modelos para ser ejecutados en dicho hardware. Por último, se establecieron tiempos de ejecución y de inferencia como base para futuros trabajos al respecto.
publishDate 2025
dc.date.accessioned.none.fl_str_mv 2025-06-12T15:06:19Z
dc.date.available.none.fl_str_mv 2025-06-12T15:06:19Z
dc.date.issued.none.fl_str_mv 2025-06-11
dc.type.none.fl_str_mv Trabajo de grado - Pregrado
dc.type.driver.none.fl_str_mv info:eu-repo/semantics/bachelorThesis
dc.type.version.none.fl_str_mv info:eu-repo/semantics/acceptedVersion
dc.type.coar.none.fl_str_mv http://purl.org/coar/resource_type/c_7a1f
dc.type.content.none.fl_str_mv Text
dc.type.redcol.none.fl_str_mv http://purl.org/redcol/resource_type/TP
format http://purl.org/coar/resource_type/c_7a1f
status_str acceptedVersion
dc.identifier.uri.none.fl_str_mv https://hdl.handle.net/1992/76288
dc.identifier.instname.none.fl_str_mv instname:Universidad de los Andes
dc.identifier.reponame.none.fl_str_mv reponame:Repositorio Institucional Séneca
dc.identifier.repourl.none.fl_str_mv repourl:https://repositorio.uniandes.edu.co/
url https://hdl.handle.net/1992/76288
identifier_str_mv instname:Universidad de los Andes
reponame:Repositorio Institucional Séneca
repourl:https://repositorio.uniandes.edu.co/
dc.language.iso.none.fl_str_mv spa
language spa
dc.rights.en.fl_str_mv Attribution-NonCommercial-NoDerivatives 4.0 International
dc.rights.uri.none.fl_str_mv http://creativecommons.org/licenses/by-nc-nd/4.0/
dc.rights.accessrights.none.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.none.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv Attribution-NonCommercial-NoDerivatives 4.0 International
http://creativecommons.org/licenses/by-nc-nd/4.0/
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.format.extent.none.fl_str_mv 48 páginas
dc.format.mimetype.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidad de los Andes
dc.publisher.program.none.fl_str_mv Ingeniería de Sistemas y Computación
dc.publisher.faculty.none.fl_str_mv Facultad de Ingeniería
dc.publisher.department.none.fl_str_mv Departamento de Ingeniería de Sistemas y Computación
publisher.none.fl_str_mv Universidad de los Andes
institution Universidad de los Andes
bitstream.url.fl_str_mv https://repositorio.uniandes.edu.co/bitstreams/a5f37887-b7bf-4e4a-9bc2-c842a97e31ca/download
https://repositorio.uniandes.edu.co/bitstreams/d5407d6f-e079-4d50-a33c-db0b6181fdfc/download
https://repositorio.uniandes.edu.co/bitstreams/693dc264-dc5c-4f97-95a1-9b38aab3274e/download
https://repositorio.uniandes.edu.co/bitstreams/d5b44f7e-6ade-439c-ba73-5f08dadf9ed3/download
https://repositorio.uniandes.edu.co/bitstreams/c29205f0-bc81-470a-9841-d8e109ef6482/download
https://repositorio.uniandes.edu.co/bitstreams/27ba465d-e002-4b9c-a2e8-bfeb144fe37a/download
https://repositorio.uniandes.edu.co/bitstreams/02c9de38-288d-4e42-94fe-5443b844cd9b/download
https://repositorio.uniandes.edu.co/bitstreams/7d460477-9190-4f9b-84ae-e8eecd58e8b2/download
bitstream.checksum.fl_str_mv ae9e573a68e7f92501b6913cc846c39f
4460e5956bc1d1639be9ae6146a50347
24b093fc372767fdd226d1f79eb7870f
1c7db49b35c1b26e9bf8c8be6049086e
a5b55759057768b7b73db064c70b4aed
e544487e80a998efd8aae824d46a691b
13a5e718f30c2fb31da9164575d56684
94d8e4825eb762203ac970dd6f30bd4d
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositorio institucional Séneca
repository.mail.fl_str_mv adminrepositorio@uniandes.edu.co
_version_ 1837005195501895680
spelling Reyes Gómez, Juan Pablovirtual::24200-1Castro del Valle, Julián Humberto2025-06-12T15:06:19Z2025-06-12T15:06:19Z2025-06-11https://hdl.handle.net/1992/76288instname:Universidad de los Andesreponame:Repositorio Institucional Sénecarepourl:https://repositorio.uniandes.edu.co/Una de las instituciones que conforma al Ejército y que ha jugado un papel importante en la lucha contra la insurgencia armada ha sido la Fuerza Aérea Colombiana (FAC), institución que busca una mano en instituciones de educación superior, tales como la Universidad de los Andes, para lograr la modernización y tecnificación constante de sus procesos operativos. En dicha institución educativa, junto con la FAC se realiza de manera conjunta el evento Codefest Ad Astra. Como resultado de esta actividad en el año 2023, se tuvieron en cuenta un conjunto de modelos basados en Deep Learning para detección de entidades tales como carreteras o edificaciones que indiquen la presencia de grupos armados al margen de la ley o de narcotráfico, específicamente en cámaras tipo FLIR (Forward Looking InfraRed, por su traducción al español, infrarrojo de barrido frontal). El presente trabajo tuvo como objetivos refinar y optimizar dichos modelos para la detección precisa de objetos de interés en videos de zonas selváticas capturados mediante el uso de cámaras infrarrojas en aeronaves tripuladas como parte de misiones de reconocimiento y seguridad de la FAC. Particularmente, se mejoraron las métricas de los modelos en términos de reconocimiento de entidades tales como carreteras, ríos, zonas de minería ilegal y construcciones que señalaban la presencia de campamentos insurgentes o de narcotráfico, incluso alcanzando, en uno de los modelos, un f1-score promedio ponderado de 0,84, un aumento de 12 puntos respecto al modelo original. Esta mejora se dio utilizando transferencia de aprendizaje, extendiendo el conjunto de datos mediante técnicas de aumento de datos tales como distorsiones o cambios en brillo y contraste de los fotogramas de los videos originales. Adicionalmente, se exploraron alternativas de despliegue en hardware especializado como la Edge TPU de Google; mediante procesos de cuantización se adaptaron los modelos para ser ejecutados en dicho hardware. Por último, se establecieron tiempos de ejecución y de inferencia como base para futuros trabajos al respecto.Pregrado48 páginasapplication/pdfspaUniversidad de los AndesIngeniería de Sistemas y ComputaciónFacultad de IngenieríaDepartamento de Ingeniería de Sistemas y ComputaciónAttribution-NonCommercial-NoDerivatives 4.0 Internationalhttp://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Detección de objetos de interés en zonas selváticas usando modelos de Deep Learning en imágenes de cámaras infrarrojasTrabajo de grado - Pregradoinfo:eu-repo/semantics/bachelorThesisinfo:eu-repo/semantics/acceptedVersionhttp://purl.org/coar/resource_type/c_7a1fTexthttp://purl.org/redcol/resource_type/TPMachine learningTransferencia de aprendizajeRedes neuronalesCuantizaciónAumento de datosInteligencia artificialIngeniería202020847Publicationa50afd39-959f-4beb-a35f-6f387946f795virtual::24200-1a50afd39-959f-4beb-a35f-6f387946f795virtual::24200-1LICENSElicense.txtlicense.txttext/plain; charset=utf-82535https://repositorio.uniandes.edu.co/bitstreams/a5f37887-b7bf-4e4a-9bc2-c842a97e31ca/downloadae9e573a68e7f92501b6913cc846c39fMD51CC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-8805https://repositorio.uniandes.edu.co/bitstreams/d5407d6f-e079-4d50-a33c-db0b6181fdfc/download4460e5956bc1d1639be9ae6146a50347MD52ORIGINALAutorizacionJulian.pdfAutorizacionJulian.pdfHIDEapplication/pdf204790https://repositorio.uniandes.edu.co/bitstreams/693dc264-dc5c-4f97-95a1-9b38aab3274e/download24b093fc372767fdd226d1f79eb7870fMD53Detección de objetos de interés en zonas selváticas.pdfDetección de objetos de interés en zonas selváticas.pdfapplication/pdf2499273https://repositorio.uniandes.edu.co/bitstreams/d5b44f7e-6ade-439c-ba73-5f08dadf9ed3/download1c7db49b35c1b26e9bf8c8be6049086eMD54TEXTAutorizacionJulian.pdf.txtAutorizacionJulian.pdf.txtExtracted texttext/plain1163https://repositorio.uniandes.edu.co/bitstreams/c29205f0-bc81-470a-9841-d8e109ef6482/downloada5b55759057768b7b73db064c70b4aedMD55Detección de objetos de interés en zonas selváticas.pdf.txtDetección de objetos de interés en zonas selváticas.pdf.txtExtracted texttext/plain94455https://repositorio.uniandes.edu.co/bitstreams/27ba465d-e002-4b9c-a2e8-bfeb144fe37a/downloade544487e80a998efd8aae824d46a691bMD57THUMBNAILAutorizacionJulian.pdf.jpgAutorizacionJulian.pdf.jpgIM Thumbnailimage/jpeg16824https://repositorio.uniandes.edu.co/bitstreams/02c9de38-288d-4e42-94fe-5443b844cd9b/download13a5e718f30c2fb31da9164575d56684MD56Detección de objetos de interés en zonas selváticas.pdf.jpgDetección de objetos de interés en zonas selváticas.pdf.jpgIM Thumbnailimage/jpeg8951https://repositorio.uniandes.edu.co/bitstreams/7d460477-9190-4f9b-84ae-e8eecd58e8b2/download94d8e4825eb762203ac970dd6f30bd4dMD581992/76288oai:repositorio.uniandes.edu.co:1992/762882025-06-13 04:04:45.453http://creativecommons.org/licenses/by-nc-nd/4.0/Attribution-NonCommercial-NoDerivatives 4.0 Internationalopen.accesshttps://repositorio.uniandes.edu.coRepositorio institucional Sénecaadminrepositorio@uniandes.edu.coPGgzPjxzdHJvbmc+RGVzY2FyZ28gZGUgUmVzcG9uc2FiaWxpZGFkIC0gTGljZW5jaWEgZGUgQXV0b3JpemFjacOzbjwvc3Ryb25nPjwvaDM+CjxwPjxzdHJvbmc+UG9yIGZhdm9yIGxlZXIgYXRlbnRhbWVudGUgZXN0ZSBkb2N1bWVudG8gcXVlIHBlcm1pdGUgYWwgUmVwb3NpdG9yaW8gSW5zdGl0dWNpb25hbCBTw6luZWNhIHJlcHJvZHVjaXIgeSBkaXN0cmlidWlyIGxvcyByZWN1cnNvcyBkZSBpbmZvcm1hY2nDs24gZGVwb3NpdGFkb3MgbWVkaWFudGUgbGEgYXV0b3JpemFjacOzbiBkZSBsb3Mgc2lndWllbnRlcyB0w6lybWlub3M6PC9zdHJvbmc+PC9wPgo8cD5Db25jZWRhIGxhIGxpY2VuY2lhIGRlIGRlcMOzc2l0byBlc3TDoW5kYXIgc2VsZWNjaW9uYW5kbyBsYSBvcGNpw7NuIDxzdHJvbmc+J0FjZXB0YXIgbG9zIHTDqXJtaW5vcyBhbnRlcmlvcm1lbnRlIGRlc2NyaXRvcyc8L3N0cm9uZz4geSBjb250aW51YXIgZWwgcHJvY2VzbyBkZSBlbnbDrW8gbWVkaWFudGUgZWwgYm90w7NuIDxzdHJvbmc+J1NpZ3VpZW50ZScuPC9zdHJvbmc+PC9wPgo8aHI+CjxwPllvLCBlbiBtaSBjYWxpZGFkIGRlIGF1dG9yIGRlbCB0cmFiYWpvIGRlIHRlc2lzLCBtb25vZ3JhZsOtYSBvIHRyYWJham8gZGUgZ3JhZG8sIGhhZ28gZW50cmVnYSBkZWwgZWplbXBsYXIgcmVzcGVjdGl2byB5IGRlIHN1cyBhbmV4b3MgZGUgc2VyIGVsIGNhc28sIGVuIGZvcm1hdG8gZGlnaXRhbCB5L28gZWxlY3Ryw7NuaWNvIHkgYXV0b3Jpem8gYSBsYSBVbml2ZXJzaWRhZCBkZSBsb3MgQW5kZXMgcGFyYSBxdWUgcmVhbGljZSBsYSBwdWJsaWNhY2nDs24gZW4gZWwgU2lzdGVtYSBkZSBCaWJsaW90ZWNhcyBvIGVuIGN1YWxxdWllciBvdHJvIHNpc3RlbWEgbyBiYXNlIGRlIGRhdG9zIHByb3BpbyBvIGFqZW5vIGEgbGEgVW5pdmVyc2lkYWQgeSBwYXJhIHF1ZSBlbiBsb3MgdMOpcm1pbm9zIGVzdGFibGVjaWRvcyBlbiBsYSBMZXkgMjMgZGUgMTk4MiwgTGV5IDQ0IGRlIDE5OTMsIERlY2lzacOzbiBBbmRpbmEgMzUxIGRlIDE5OTMsIERlY3JldG8gNDYwIGRlIDE5OTUgeSBkZW3DoXMgbm9ybWFzIGdlbmVyYWxlcyBzb2JyZSBsYSBtYXRlcmlhLCB1dGlsaWNlIGVuIHRvZGFzIHN1cyBmb3JtYXMsIGxvcyBkZXJlY2hvcyBwYXRyaW1vbmlhbGVzIGRlIHJlcHJvZHVjY2nDs24sIGNvbXVuaWNhY2nDs24gcMO6YmxpY2EsIHRyYW5zZm9ybWFjacOzbiB5IGRpc3RyaWJ1Y2nDs24gKGFscXVpbGVyLCBwcsOpc3RhbW8gcMO6YmxpY28gZSBpbXBvcnRhY2nDs24pIHF1ZSBtZSBjb3JyZXNwb25kZW4gY29tbyBjcmVhZG9yIGRlIGxhIG9icmEgb2JqZXRvIGRlbCBwcmVzZW50ZSBkb2N1bWVudG8uPC9wPgo8cD5MYSBwcmVzZW50ZSBhdXRvcml6YWNpw7NuIHNlIGVtaXRlIGVuIGNhbGlkYWQgZGUgYXV0b3IgZGUgbGEgb2JyYSBvYmpldG8gZGVsIHByZXNlbnRlIGRvY3VtZW50byB5IG5vIGNvcnJlc3BvbmRlIGEgY2VzacOzbiBkZSBkZXJlY2hvcywgc2lubyBhIGxhIGF1dG9yaXphY2nDs24gZGUgdXNvIGFjYWTDqW1pY28gZGUgY29uZm9ybWlkYWQgY29uIGxvIGFudGVyaW9ybWVudGUgc2XDsWFsYWRvLiBMYSBwcmVzZW50ZSBhdXRvcml6YWNpw7NuIHNlIGhhY2UgZXh0ZW5zaXZhIG5vIHNvbG8gYSBsYXMgZmFjdWx0YWRlcyB5IGRlcmVjaG9zIGRlIHVzbyBzb2JyZSBsYSBvYnJhIGVuIGZvcm1hdG8gbyBzb3BvcnRlIG1hdGVyaWFsLCBzaW5vIHRhbWJpw6luIHBhcmEgZm9ybWF0byBlbGVjdHLDs25pY28sIHkgZW4gZ2VuZXJhbCBwYXJhIGN1YWxxdWllciBmb3JtYXRvIGNvbm9jaWRvIG8gcG9yIGNvbm9jZXIuPC9wPgo8cD5FbCBhdXRvciwgbWFuaWZpZXN0YSBxdWUgbGEgb2JyYSBvYmpldG8gZGUgbGEgcHJlc2VudGUgYXV0b3JpemFjacOzbiBlcyBvcmlnaW5hbCB5IGxhIHJlYWxpesOzIHNpbiB2aW9sYXIgbyB1c3VycGFyIGRlcmVjaG9zIGRlIGF1dG9yIGRlIHRlcmNlcm9zLCBwb3IgbG8gdGFudG8sIGxhIG9icmEgZXMgZGUgc3UgZXhjbHVzaXZhIGF1dG9yw61hIHkgdGllbmUgbGEgdGl0dWxhcmlkYWQgc29icmUgbGEgbWlzbWEuPC9wPgo8cD5FbiBjYXNvIGRlIHByZXNlbnRhcnNlIGN1YWxxdWllciByZWNsYW1hY2nDs24gbyBhY2Npw7NuIHBvciBwYXJ0ZSBkZSB1biB0ZXJjZXJvIGVuIGN1YW50byBhIGxvcyBkZXJlY2hvcyBkZSBhdXRvciBzb2JyZSBsYSBvYnJhIGVuIGN1ZXN0acOzbiwgZWwgYXV0b3IgYXN1bWlyw6EgdG9kYSBsYSByZXNwb25zYWJpbGlkYWQsIHkgc2FsZHLDoSBkZSBkZWZlbnNhIGRlIGxvcyBkZXJlY2hvcyBhcXXDrSBhdXRvcml6YWRvcywgcGFyYSB0b2RvcyBsb3MgZWZlY3RvcyBsYSBVbml2ZXJzaWRhZCBhY3TDumEgY29tbyB1biB0ZXJjZXJvIGRlIGJ1ZW5hIGZlLjwvcD4KPHA+U2kgdGllbmUgYWxndW5hIGR1ZGEgc29icmUgbGEgbGljZW5jaWEsIHBvciBmYXZvciwgY29udGFjdGUgY29uIGVsIDxhIGhyZWY9Im1haWx0bzpiaWJsaW90ZWNhQHVuaWFuZGVzLmVkdS5jbyIgdGFyZ2V0PSJfYmxhbmsiPkFkbWluaXN0cmFkb3IgZGVsIFNpc3RlbWEuPC9hPjwvcD4K