Sistema inteligente de control vehicular en un entorno simulado

La congestión del tráfico es un problema persistente en las zonas urbanas, que provoca retrasos, aumenta la contaminación y reduce la eficiencia del transporte. La gestión óptima de los semáforos desempeña un papel clave en la resolución de este problema. En este proyecto, proponemos utilizar el apr...

Full description

Autores:
Estrada Cardozo, Jose David
Pacheco Forero, Isabella
Tipo de recurso:
Fecha de publicación:
2023
Institución:
Universidad del Norte
Repositorio:
Repositorio Uninorte
Idioma:
spa
OAI Identifier:
oai:manglar.uninorte.edu.co:10584/11548
Acceso en línea:
http://hdl.handle.net/10584/11548
Palabra clave:
Semaforización inteligente
Aprendizaje por refuerzo
Reinforcement learning
Machine Learning
Rights
License
Universidad del Norte
id REPOUNORT2_423eaac1e4d06e9911f3c3f568e07de4
oai_identifier_str oai:manglar.uninorte.edu.co:10584/11548
network_acronym_str REPOUNORT2
network_name_str Repositorio Uninorte
repository_id_str
dc.title.es_ES.fl_str_mv Sistema inteligente de control vehicular en un entorno simulado
Intelligent vehicle control system in a simulated environment
title Sistema inteligente de control vehicular en un entorno simulado
spellingShingle Sistema inteligente de control vehicular en un entorno simulado
Semaforización inteligente
Aprendizaje por refuerzo
Reinforcement learning
Machine Learning
title_short Sistema inteligente de control vehicular en un entorno simulado
title_full Sistema inteligente de control vehicular en un entorno simulado
title_fullStr Sistema inteligente de control vehicular en un entorno simulado
title_full_unstemmed Sistema inteligente de control vehicular en un entorno simulado
title_sort Sistema inteligente de control vehicular en un entorno simulado
dc.creator.fl_str_mv Estrada Cardozo, Jose David
Pacheco Forero, Isabella
dc.contributor.advisor.none.fl_str_mv Quintero Monroy, Christian
dc.contributor.author.none.fl_str_mv Estrada Cardozo, Jose David
Pacheco Forero, Isabella
dc.subject.es_ES.fl_str_mv Semaforización inteligente
Aprendizaje por refuerzo
Reinforcement learning
topic Semaforización inteligente
Aprendizaje por refuerzo
Reinforcement learning
Machine Learning
dc.subject.en_US.fl_str_mv Machine Learning
description La congestión del tráfico es un problema persistente en las zonas urbanas, que provoca retrasos, aumenta la contaminación y reduce la eficiencia del transporte. La gestión óptima de los semáforos desempeña un papel clave en la resolución de este problema. En este proyecto, proponemos utilizar el aprendizaje por refuerzo para mejorar la temporización de los semáforos en tiempo real a partir de las observaciones obtenidas de la simulación del tráfico en SUMO (Simulation of Urban Mobility). En este estudio, nos centraremos en desarrollar y evaluar una solución basada en el aprendizaje por refuerzo en un entorno SUMO simulado. Utilizaremos técnicas de aprendizaje por refuerzo para optimizar la temporización de los semáforos y conseguir un flujo de tráfico más eficiente. El objetivo principal de nuestro proyecto es desarrollar un agente de aprendizaje por refuerzo capaz de aprender a tomar decisiones óptimas sobre la temporización de los semáforos basándose en las condiciones actuales del tráfico. El agente recopilará información en tiempo real sobre las condiciones del tráfico y la utilizará para seleccionar acciones que maximicen el flujo de vehículos y minimicen la congestión. Exploraremos enfoques de aprendizaje por refuerzo, como el uso de algoritmos Q-Learning, para entrenar al agente en el entorno simulado SUMO. Utilizaremos datos de tráfico generados por SUMO para simular diferentes escenarios y entrenar al agente para que aprenda patrones de comportamiento y tome decisiones basadas en observaciones en tiempo real. La evaluación de nuestro enfoque se llevará a cabo comparando el rendimiento del agente de aprendizaje por refuerzo con el cronometraje convencional de los semáforos. Mediremos indicadores clave, como el tiempo de espera, el nivel de flujo de vehículos, la velocidad de los vehículos y la longitud media de las colas, para comparar nuestra propuesta con el método empleado actualmente.
publishDate 2023
dc.date.issued.none.fl_str_mv 2-06-20
dc.date.accessioned.none.fl_str_mv 2023-06-02T21:59:15Z
dc.date.available.none.fl_str_mv 2023-06-02T21:59:15Z
dc.type.es_ES.fl_str_mv article
dc.type.coar.fl_str_mv http://purl.org/coar/resource_type/c_6501
dc.identifier.uri.none.fl_str_mv http://hdl.handle.net/10584/11548
url http://hdl.handle.net/10584/11548
dc.language.iso.es_ES.fl_str_mv spa
language spa
dc.rights.es_ES.fl_str_mv Universidad del Norte
dc.rights.coar.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv Universidad del Norte
http://purl.org/coar/access_right/c_abf2
dc.publisher.es_ES.fl_str_mv Barranquilla, Universidad del Norte, 2023
institution Universidad del Norte
bitstream.url.fl_str_mv https://manglar.uninorte.edu.co/bitstream/10584/11548/1/SICVES.pdf
https://manglar.uninorte.edu.co/bitstream/10584/11548/2/Captura.jpg
https://manglar.uninorte.edu.co/bitstream/10584/11548/3/license.txt
bitstream.checksum.fl_str_mv 062a5b0271c968c2d483a8656afc7ac4
02423fbde2e277ab84db28fe4485504b
8a4605be74aa9ea9d79846c1fba20a33
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositorio Digital de la Universidad del Norte
repository.mail.fl_str_mv mauribe@uninorte.edu.co
_version_ 1812183134340382720
spelling Quintero Monroy, ChristianEstrada Cardozo, Jose DavidPacheco Forero, Isabella2023-06-02T21:59:15Z2023-06-02T21:59:15Z2-06-20http://hdl.handle.net/10584/11548La congestión del tráfico es un problema persistente en las zonas urbanas, que provoca retrasos, aumenta la contaminación y reduce la eficiencia del transporte. La gestión óptima de los semáforos desempeña un papel clave en la resolución de este problema. En este proyecto, proponemos utilizar el aprendizaje por refuerzo para mejorar la temporización de los semáforos en tiempo real a partir de las observaciones obtenidas de la simulación del tráfico en SUMO (Simulation of Urban Mobility). En este estudio, nos centraremos en desarrollar y evaluar una solución basada en el aprendizaje por refuerzo en un entorno SUMO simulado. Utilizaremos técnicas de aprendizaje por refuerzo para optimizar la temporización de los semáforos y conseguir un flujo de tráfico más eficiente. El objetivo principal de nuestro proyecto es desarrollar un agente de aprendizaje por refuerzo capaz de aprender a tomar decisiones óptimas sobre la temporización de los semáforos basándose en las condiciones actuales del tráfico. El agente recopilará información en tiempo real sobre las condiciones del tráfico y la utilizará para seleccionar acciones que maximicen el flujo de vehículos y minimicen la congestión. Exploraremos enfoques de aprendizaje por refuerzo, como el uso de algoritmos Q-Learning, para entrenar al agente en el entorno simulado SUMO. Utilizaremos datos de tráfico generados por SUMO para simular diferentes escenarios y entrenar al agente para que aprenda patrones de comportamiento y tome decisiones basadas en observaciones en tiempo real. La evaluación de nuestro enfoque se llevará a cabo comparando el rendimiento del agente de aprendizaje por refuerzo con el cronometraje convencional de los semáforos. Mediremos indicadores clave, como el tiempo de espera, el nivel de flujo de vehículos, la velocidad de los vehículos y la longitud media de las colas, para comparar nuestra propuesta con el método empleado actualmente.Traffic congestion is a persistent problem in urban areas, causing delays, increasing pollution and reducing transport efficiency. Optimal traffic light management plays a key role in solving this problem. In this project, we propose to use reinforcement learning to improve real-time traffic light timing based on observations obtained from traffic simulation in SUMO (Simulation of Urban Mobility). In this study, we will focus on developing and evaluating a reinforcement learning-based solution in a simulated SUMO environment. We will use reinforcement learning techniques to optimize traffic light timing and achieve a more efficient traffic flow. The main goal of our project is to develop a reinforcement learning agent capable of learning to make optimal traffic light timing decisions based on current traffic conditions. The agent will gather real-time information about traffic conditions and use that information to select actions that maximize vehicle flow and minimize congestion. We will explore reinforcement learning approaches, such as the use of Q-Learning algorithms, to train the agent in the simulated SUMO environment. We will use SUMO-generated traffic data to simulate different scenarios and train the agent to learn behavioral patterns and make decisions based on real-time observations. Evaluation of our approach will be carried out by comparing the performance of the reinforcement learning agent with conventional traffic light timing. We will measure key indicators, such as waiting time, vehicle flow level, vehicle speed and average queue length, to compare our proposal with the currently employed method.spaBarranquilla, Universidad del Norte, 2023Universidad del Nortehttp://purl.org/coar/access_right/c_abf2Semaforización inteligenteAprendizaje por refuerzoReinforcement learningMachine LearningSistema inteligente de control vehicular en un entorno simuladoIntelligent vehicle control system in a simulated environmentarticlehttp://purl.org/coar/resource_type/c_6501ORIGINALSICVES.pdfSICVES.pdfResumen de proyectoapplication/pdf260665https://manglar.uninorte.edu.co/bitstream/10584/11548/1/SICVES.pdf062a5b0271c968c2d483a8656afc7ac4MD51Captura.jpgCaptura.jpgImagen de proyectoimage/jpeg225046https://manglar.uninorte.edu.co/bitstream/10584/11548/2/Captura.jpg02423fbde2e277ab84db28fe4485504bMD52LICENSElicense.txtlicense.txttext/plain; charset=utf-81748https://manglar.uninorte.edu.co/bitstream/10584/11548/3/license.txt8a4605be74aa9ea9d79846c1fba20a33MD5310584/11548oai:manglar.uninorte.edu.co:10584/115482023-06-02 16:59:15.174Repositorio Digital de la Universidad del Nortemauribe@uninorte.edu.coTk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0Cm93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLAp0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZwp0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sCmluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlCnN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yCnB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZQp0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQKdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uCmFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LAp5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZQpjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdApzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkCndpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRApCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUKRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSApDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZQpzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMKbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo=