Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT
Este documento técnico es el resultado de una investigación que involucró el análisis de más de 25 documentos científicos relacionados con redes Ad Hoc, con un enfoque específico en el acceso al espectro. La investigación se llevó a cabo considerando la disponibilidad de tecnología y recursos en la...
- Autores:
-
Guerra Sánchez, Sergio Andrés
- Tipo de recurso:
- Trabajo de grado de pregrado
- Fecha de publicación:
- 2023
- Institución:
- Universidad de los Andes
- Repositorio:
- Séneca: repositorio Uniandes
- Idioma:
- spa
- OAI Identifier:
- oai:repositorio.uniandes.edu.co:1992/73443
- Acceso en línea:
- https://hdl.handle.net/1992/73443
- Palabra clave:
- Aprendizaje
Acceso
Medio
Inalámbrico
Refuerzo
Ingeniería
- Rights
- openAccess
- License
- Attribution-NonCommercial-NoDerivatives 4.0 International
| id |
UNIANDES2_c62e68b5cbc69299cc6ca197e5d4eb6f |
|---|---|
| oai_identifier_str |
oai:repositorio.uniandes.edu.co:1992/73443 |
| network_acronym_str |
UNIANDES2 |
| network_name_str |
Séneca: repositorio Uniandes |
| repository_id_str |
|
| dc.title.spa.fl_str_mv |
Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT |
| title |
Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT |
| spellingShingle |
Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT Aprendizaje Acceso Medio Inalámbrico Refuerzo Ingeniería |
| title_short |
Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT |
| title_full |
Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT |
| title_fullStr |
Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT |
| title_full_unstemmed |
Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT |
| title_sort |
Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT |
| dc.creator.fl_str_mv |
Guerra Sánchez, Sergio Andrés |
| dc.contributor.advisor.none.fl_str_mv |
Forero Rodríguez, Felipe |
| dc.contributor.author.none.fl_str_mv |
Guerra Sánchez, Sergio Andrés |
| dc.contributor.jury.none.fl_str_mv |
Peña Traslaviña, Néstor Misael |
| dc.subject.keyword.none.fl_str_mv |
Aprendizaje Acceso Medio Inalámbrico Refuerzo |
| topic |
Aprendizaje Acceso Medio Inalámbrico Refuerzo Ingeniería |
| dc.subject.themes.none.fl_str_mv |
Ingeniería |
| description |
Este documento técnico es el resultado de una investigación que involucró el análisis de más de 25 documentos científicos relacionados con redes Ad Hoc, con un enfoque específico en el acceso al espectro. La investigación se llevó a cabo considerando la disponibilidad de tecnología y recursos en la Universidad de los Andes, así como el tiempo asignado para la realización del estudio. El objetivo principal de esta investigación fue identificar documentos sólidos, completos y con teorías y resultados sólidos que pudieran ser replicados y utilizados como base para futuros proyectos de investigación. A través de un proceso de revisión y evaluación, se identificaron diez documentos que destacaron por su calidad y relevancia en el ámbito de las redes Ad Hoc y el acceso al espectro. Estos documentos se sometieron a un análisis en colaboración con el asesor de tesis, con el fin de seleccionar los dos temas de investigación. |
| publishDate |
2023 |
| dc.date.issued.none.fl_str_mv |
2023-12-29 |
| dc.date.accessioned.none.fl_str_mv |
2024-01-24T20:39:54Z |
| dc.date.available.none.fl_str_mv |
2024-01-24T20:39:54Z |
| dc.type.none.fl_str_mv |
Trabajo de grado - Pregrado |
| dc.type.driver.none.fl_str_mv |
info:eu-repo/semantics/bachelorThesis |
| dc.type.version.none.fl_str_mv |
info:eu-repo/semantics/acceptedVersion |
| dc.type.coar.none.fl_str_mv |
http://purl.org/coar/resource_type/c_7a1f |
| dc.type.content.none.fl_str_mv |
Text |
| dc.type.redcol.none.fl_str_mv |
http://purl.org/redcol/resource_type/TP |
| format |
http://purl.org/coar/resource_type/c_7a1f |
| status_str |
acceptedVersion |
| dc.identifier.uri.none.fl_str_mv |
https://hdl.handle.net/1992/73443 |
| dc.identifier.instname.none.fl_str_mv |
instname:Universidad de los Andes |
| dc.identifier.reponame.none.fl_str_mv |
reponame:Repositorio Institucional Séneca |
| dc.identifier.repourl.none.fl_str_mv |
repourl:https://repositorio.uniandes.edu.co/ |
| url |
https://hdl.handle.net/1992/73443 |
| identifier_str_mv |
instname:Universidad de los Andes reponame:Repositorio Institucional Séneca repourl:https://repositorio.uniandes.edu.co/ |
| dc.language.iso.none.fl_str_mv |
spa |
| language |
spa |
| dc.relation.references.none.fl_str_mv |
Sun, C., Ding, H., Liu, X. (2020). Multichannel spectrum access based on reinforcement learning in cognitive internet of things. ElSEVIER. Ad Hoc Networks, Volume 106, 102200 https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1570870520302183 Team, D. S. (2021, February 3). Q-learning - aprendizaje autom ́atico. DATA SCIENCE. https://datascience.eu/es/aprendizaje-automatico/q-learning/ Guiñazú, L. (2023, January 23). Introducción a Q-learning: Aprendizaje Por Refuerzo. freeCodeCamp.org. https://www.freecodecamp.org/espanol/news/introduccion-a-q-learning-aprendizaje-por-refuerzo/ Miralles , C. J. (2022, March 27). Grafos: Camino m ́ınimo con algoritmo de bell-man — — UPV. YouTube.https://www.youtube.com/watch?v=Fskv5nHibKE&ab_channel=UniversitatPolit%C3%A8cnicadeVal%C3%A8ncia-UPV The TF-Agents Authors. (n.d.). Introduction to RL and Deep Q Networks: tensorflow agents. TensorFlow.https://www.tensorflow.org/agents/tutorials/0_intro_rl Vanilla policy gradient. Vanilla Policy Gradient - Spinning Up documentation. (n.d.).https://spinningup.openai.com/en/latest/algorithms/vpg.html Karunakaran, D. (2020, June 8). Reinforce-a policy-gradient based reinforcement learning algorithm. Medium. https://medium.com/intro-to-artificial-intelligence/reinforce-a-policy-gradient-based-reinforcement-learning-algorithm-84bde440c816 Karunakaran, D. (2020b, September 30). The actorcritic Reinforcement Learning Algorithm. Medium.https://medium.com/intro-to-artificial-intelligence/the-actor-critic-reinforcement-learning-algorithm-c8095a655c14 Proximal policy optimization. Proximal Policy Optimization - Spinning Up do-cumentation. (n.d.). https://spinningup.openai.com/en/latest/algorithms/ppo.html Universidad de Sevilla. (n.d.). 4. T ́ecnicas de Acceso M ́ultiple. OFDMA y SCFDMA . Sevilla. https://biblus.us.es/bibing/proyectos/abreproy/12081/fichero/OFDMA+y+SC-FDMA+en+la+Interfaz+Radio+de+LTE%252F4.+T%C3%A9cnicas+de+acceso+m%C3%BAltiple.+OFDMA+y+SC-FDMA.pdf Universidad de Sevilla. (n.d.). PDF. Sevilla. https://biblus.us.es/bibing/proyectos/abreproy/11244/fichero/Volumen+1%252F6_CDMA_PRINCIPIOS_BASICOS.pdf Rastogi, A. (2020, June 5). Space division multiple access. YouTube. https://www.youtube.com/watch?v=WlCX469Vmkk&ab_channel=AshutoshRastogi Mora Arroyo, J. E. (2021, September 27). An ́alisis del Estado del Arte de last ́ecnicas de acceso din ́amico Al Espectro aplicadas en Redes Inal ́ambricas deNueva Generaci ́on. Universidad Nacional Abierta y a Distancia UNAD. https://repository.unad.edu.co/handle/10596/42434 ¿Qué es la tecnología wifi? Definición y tipos. Cisco. (2021, October 4). https://www.cisco.com/c/es_mx/products/wireless/what-is-wifi.html Universidad de Sevilla. (n.d.). Cap ́ıtulo 2: Lte O La Cuarta Generaci ́on(4G) de Comunicaciones M ́oviles. https://biblus.us.es/bibing/proyectos/abreproy/11983/fichero/Cap%C3%ADtulo+2+-+LTE.pdf Gebali, F. (2015). Chapter 10: Modeling Medium Access Control Protocols. In Analysis of Computer Networks (2nd ed., pp. 325–350). essay, Springer. Agrawal and N. Goyal, “Analysis of thompson sampling for the multi-armed bandit problem.” in COLT, 2012, pp. 39–1 V. Raj, I. Dias, T. Tholeti and S. Kalyani, ”Spectrum Access In Cognitive Radio Using a Two-Stage Reinforcement Learning Approach, ̈ın IEEE Journal of Selected Topics in Signal Processing, vol. 12, no. 1, pp. 20-34, Feb. 2018, doi: 10.1109/JS-TSP.2018.2798920. Yadav, R. N., Misra, R., Bhagat , S. (2017, July 28). Spectrum access in Cognitive Smart-grid communication system with prioritized traffic. Ad Hoc Networks. https://www.sciencedirect.com/science/article/abs/pii/S1570870517301361 Prem Jacob, T., Pravin, A., Ramachandran, M., Al-Turjman, F. (2021, January 10). Differential spectrum access for next generation data traffic in massive-IOT. Microprocessors and Microsystems. https://www.sciencedirect.com/science/article/abs/pii/S0141933121001307 Salameh , H. B., El Refae, G. (2021, June 22). Price- and rate-aware multi-channel spectrum access for profit enhancement in opportunistic networks with QoS guarantees. ICT Express. https://www.sciencedirect.com/science/article/pii/S2405959521000795 Zhang, S., Wang, H., Zhang, X., Cao, Z. . Optimal Spectrum Access algorithm based on POMDP in Cognitive Networks. AEU - International Journal of Electronics and Communications. https://www.sciencedirect.com/science/article/abs/pii/S143484111500062X Karimi, M., Sajad Sadough, S. M. (2018, February 2). Improved spectrum sensing and achieved throughput of Multiband Cognitive Radio Systems under Probabilistic Spectrum Access. AEU - International Journal of Electronics and Communications. https://www.sciencedirect.com/science/article/abs/pii/S1434841117314371 Elias , J., Martignon , F., Capone , A., Altman, E. (2011, August 2). Noncooperative Spectrum Access in Cognitive Radio Networks: A game theoretical model. Computer Networks. https://www.sciencedirect.com/science/article/abs/pii/S1389128611002829 ZHANG, H. . Performance analysis of opportunistic spectrum access based on partially observable Markov decision process. The Journal of China Universities of Posts and Telecommunications. https://www.sciencedirect.com/science/article/abs/pii/S1005888510601938 Liu, S., Greenstein, L. J. j, Trappe, W., Chen, Y. Detecting anomalous spectrum usage in dynamic spectrum access networks. Ad Hoc Networks. https://www.sciencedirect.com/science/article/abs/pii/S1570870511000801 Yang, L., Cao, L., Zheng, H.. Proactive channel access in Dynamic Spectrum Networks. Physical Communication. https://www.sciencedirect.com/science/article/abs/pii/S1874490708000268 Zhang , S., Lam , K.-Y., Shen , B., Wang, L., Li, F. (2023, July 22). Dynamic Spectrum Access for internet-of-things with Hierarchical Federated Deep Reinforcement Learning. Ad Hoc Networks. https://www.sciencedirect.com/science/article/abs/pii/S1570870523001774 Peng, B., Yao, Z., Liu , X., Zhou, G. (2023, April). Deep Q-learning multiple networks based dynamic spectrum access with energy harvesting for green cognitive radio network. Ad Hoc Networks. https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1389128623000750 Giri, M. K., Majumder, S. (2023, June). Distributed dynamic spectrum access through multi-agent deep recurrent Q-learning in cognitive radio network. Ad Hoc Networks. https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1874490723000575 Chen, L., Fu, K., Zhao, Q., Zhao, X. (2022, December). A multi-channel and multi-user dynamic spectrum access algorithm based on deep reinforcement learning in Cognitive Vehicular Networks with sensing error. Ad Hoc Networks. https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1874490722002038 Ahmed, R., Che, Y., Hassan, B. (2021, December). Deep learning-driven opportunistic spectrum access (OSA) framework for cognitive 5G and beyond 5G (B5G) networks. Ad Hoc Networks. https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1570870521001529 Agrawal, H., Asawa, K. (2022, September). Distributed learning algorithm with synchronized epochs for dynamic spectrum access in unknown environment using multi-user restless multi-armed bandit. Journal of King Saud University - Computer and Information Sciences. |
| dc.rights.en.fl_str_mv |
Attribution-NonCommercial-NoDerivatives 4.0 International |
| dc.rights.uri.none.fl_str_mv |
http://creativecommons.org/licenses/by-nc-nd/4.0/ |
| dc.rights.accessrights.none.fl_str_mv |
info:eu-repo/semantics/openAccess |
| dc.rights.coar.none.fl_str_mv |
http://purl.org/coar/access_right/c_abf2 |
| rights_invalid_str_mv |
Attribution-NonCommercial-NoDerivatives 4.0 International http://creativecommons.org/licenses/by-nc-nd/4.0/ http://purl.org/coar/access_right/c_abf2 |
| eu_rights_str_mv |
openAccess |
| dc.format.extent.none.fl_str_mv |
52 páginas |
| dc.format.mimetype.none.fl_str_mv |
application/pdf |
| dc.publisher.none.fl_str_mv |
Universidad de los Andes |
| dc.publisher.program.none.fl_str_mv |
Ingeniería Electrónica |
| dc.publisher.faculty.none.fl_str_mv |
Facultad de Ingeniería |
| dc.publisher.department.none.fl_str_mv |
Departamento de Ingeniería Eléctrica y Electrónica |
| publisher.none.fl_str_mv |
Universidad de los Andes |
| institution |
Universidad de los Andes |
| bitstream.url.fl_str_mv |
https://repositorio.uniandes.edu.co/bitstreams/ede28162-61f9-41d5-8542-5285710a1621/download https://repositorio.uniandes.edu.co/bitstreams/0ad695f1-b590-48c4-8c0d-118918652731/download https://repositorio.uniandes.edu.co/bitstreams/22e8d460-6765-4399-9ec6-4f49d9869474/download https://repositorio.uniandes.edu.co/bitstreams/6d6b1728-af80-4da1-bf1a-d9f6acc30f38/download https://repositorio.uniandes.edu.co/bitstreams/e14b1488-221c-484b-a610-13193b4dec8e/download https://repositorio.uniandes.edu.co/bitstreams/49b9b136-d7d3-496b-93d6-291443c92124/download https://repositorio.uniandes.edu.co/bitstreams/c0c465fb-4747-4b14-ae47-03c1f395552a/download https://repositorio.uniandes.edu.co/bitstreams/15a70460-75ca-4614-9b32-5b82cb59c519/download |
| bitstream.checksum.fl_str_mv |
ae9e573a68e7f92501b6913cc846c39f f9d0c2b96d8a8d7170e3e1bd622a57f9 31fbed0d1de4b68199849a090a0c2f99 4460e5956bc1d1639be9ae6146a50347 a8aebfce518de009c90e2432c12ce67f fd45ef4f3c433f88eb277c09c90b0cfd 56921fd185265fe7f1e2d3a22964a4a5 1ce8bfbe50873b0c34087a6ff67f9c06 |
| bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 MD5 MD5 MD5 MD5 MD5 MD5 |
| repository.name.fl_str_mv |
Repositorio institucional Séneca |
| repository.mail.fl_str_mv |
adminrepositorio@uniandes.edu.co |
| _version_ |
1812133890111832064 |
| spelling |
Forero Rodríguez, FelipeGuerra Sánchez, Sergio AndrésPeña Traslaviña, Néstor Misael2024-01-24T20:39:54Z2024-01-24T20:39:54Z2023-12-29https://hdl.handle.net/1992/73443instname:Universidad de los Andesreponame:Repositorio Institucional Sénecarepourl:https://repositorio.uniandes.edu.co/Este documento técnico es el resultado de una investigación que involucró el análisis de más de 25 documentos científicos relacionados con redes Ad Hoc, con un enfoque específico en el acceso al espectro. La investigación se llevó a cabo considerando la disponibilidad de tecnología y recursos en la Universidad de los Andes, así como el tiempo asignado para la realización del estudio. El objetivo principal de esta investigación fue identificar documentos sólidos, completos y con teorías y resultados sólidos que pudieran ser replicados y utilizados como base para futuros proyectos de investigación. A través de un proceso de revisión y evaluación, se identificaron diez documentos que destacaron por su calidad y relevancia en el ámbito de las redes Ad Hoc y el acceso al espectro. Estos documentos se sometieron a un análisis en colaboración con el asesor de tesis, con el fin de seleccionar los dos temas de investigación.Ingeniero ElectrónicoPregradoComunicaciones52 páginasapplication/pdfspaUniversidad de los AndesIngeniería ElectrónicaFacultad de IngenieríaDepartamento de Ingeniería Eléctrica y ElectrónicaAttribution-NonCommercial-NoDerivatives 4.0 Internationalhttp://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Evaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoTTrabajo de grado - Pregradoinfo:eu-repo/semantics/bachelorThesisinfo:eu-repo/semantics/acceptedVersionhttp://purl.org/coar/resource_type/c_7a1fTexthttp://purl.org/redcol/resource_type/TPAprendizajeAccesoMedioInalámbricoRefuerzoIngenieríaSun, C., Ding, H., Liu, X. (2020). Multichannel spectrum access based on reinforcement learning in cognitive internet of things. ElSEVIER. Ad Hoc Networks, Volume 106, 102200 https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1570870520302183Team, D. S. (2021, February 3). Q-learning - aprendizaje autom ́atico. DATA SCIENCE. https://datascience.eu/es/aprendizaje-automatico/q-learning/Guiñazú, L. (2023, January 23). Introducción a Q-learning: Aprendizaje Por Refuerzo. freeCodeCamp.org. https://www.freecodecamp.org/espanol/news/introduccion-a-q-learning-aprendizaje-por-refuerzo/Miralles , C. J. (2022, March 27). Grafos: Camino m ́ınimo con algoritmo de bell-man — — UPV. YouTube.https://www.youtube.com/watch?v=Fskv5nHibKE&ab_channel=UniversitatPolit%C3%A8cnicadeVal%C3%A8ncia-UPVThe TF-Agents Authors. (n.d.). Introduction to RL and Deep Q Networks: tensorflow agents. TensorFlow.https://www.tensorflow.org/agents/tutorials/0_intro_rlVanilla policy gradient. Vanilla Policy Gradient - Spinning Up documentation. (n.d.).https://spinningup.openai.com/en/latest/algorithms/vpg.htmlKarunakaran, D. (2020, June 8). Reinforce-a policy-gradient based reinforcement learning algorithm. Medium. https://medium.com/intro-to-artificial-intelligence/reinforce-a-policy-gradient-based-reinforcement-learning-algorithm-84bde440c816Karunakaran, D. (2020b, September 30). The actorcritic Reinforcement Learning Algorithm. Medium.https://medium.com/intro-to-artificial-intelligence/the-actor-critic-reinforcement-learning-algorithm-c8095a655c14Proximal policy optimization. Proximal Policy Optimization - Spinning Up do-cumentation. (n.d.). https://spinningup.openai.com/en/latest/algorithms/ppo.htmlUniversidad de Sevilla. (n.d.). 4. T ́ecnicas de Acceso M ́ultiple. OFDMA y SCFDMA . Sevilla. https://biblus.us.es/bibing/proyectos/abreproy/12081/fichero/OFDMA+y+SC-FDMA+en+la+Interfaz+Radio+de+LTE%252F4.+T%C3%A9cnicas+de+acceso+m%C3%BAltiple.+OFDMA+y+SC-FDMA.pdfUniversidad de Sevilla. (n.d.). PDF. Sevilla. https://biblus.us.es/bibing/proyectos/abreproy/11244/fichero/Volumen+1%252F6_CDMA_PRINCIPIOS_BASICOS.pdfRastogi, A. (2020, June 5). Space division multiple access. YouTube. https://www.youtube.com/watch?v=WlCX469Vmkk&ab_channel=AshutoshRastogiMora Arroyo, J. E. (2021, September 27). An ́alisis del Estado del Arte de last ́ecnicas de acceso din ́amico Al Espectro aplicadas en Redes Inal ́ambricas deNueva Generaci ́on. Universidad Nacional Abierta y a Distancia UNAD. https://repository.unad.edu.co/handle/10596/42434¿Qué es la tecnología wifi? Definición y tipos. Cisco. (2021, October 4). https://www.cisco.com/c/es_mx/products/wireless/what-is-wifi.htmlUniversidad de Sevilla. (n.d.). Cap ́ıtulo 2: Lte O La Cuarta Generaci ́on(4G) de Comunicaciones M ́oviles. https://biblus.us.es/bibing/proyectos/abreproy/11983/fichero/Cap%C3%ADtulo+2+-+LTE.pdfGebali, F. (2015). Chapter 10: Modeling Medium Access Control Protocols. In Analysis of Computer Networks (2nd ed., pp. 325–350). essay, Springer.Agrawal and N. Goyal, “Analysis of thompson sampling for the multi-armed bandit problem.” in COLT, 2012, pp. 39–1V. Raj, I. Dias, T. Tholeti and S. Kalyani, ”Spectrum Access In Cognitive Radio Using a Two-Stage Reinforcement Learning Approach, ̈ın IEEE Journal of Selected Topics in Signal Processing, vol. 12, no. 1, pp. 20-34, Feb. 2018, doi: 10.1109/JS-TSP.2018.2798920.Yadav, R. N., Misra, R., Bhagat , S. (2017, July 28). Spectrum access in Cognitive Smart-grid communication system with prioritized traffic. Ad Hoc Networks. https://www.sciencedirect.com/science/article/abs/pii/S1570870517301361Prem Jacob, T., Pravin, A., Ramachandran, M., Al-Turjman, F. (2021, January 10). Differential spectrum access for next generation data traffic in massive-IOT. Microprocessors and Microsystems. https://www.sciencedirect.com/science/article/abs/pii/S0141933121001307Salameh , H. B., El Refae, G. (2021, June 22). Price- and rate-aware multi-channel spectrum access for profit enhancement in opportunistic networks with QoS guarantees. ICT Express. https://www.sciencedirect.com/science/article/pii/S2405959521000795Zhang, S., Wang, H., Zhang, X., Cao, Z. . Optimal Spectrum Access algorithm based on POMDP in Cognitive Networks. AEU - International Journal of Electronics and Communications. https://www.sciencedirect.com/science/article/abs/pii/S143484111500062XKarimi, M., Sajad Sadough, S. M. (2018, February 2). Improved spectrum sensing and achieved throughput of Multiband Cognitive Radio Systems under Probabilistic Spectrum Access. AEU - International Journal of Electronics and Communications. https://www.sciencedirect.com/science/article/abs/pii/S1434841117314371Elias , J., Martignon , F., Capone , A., Altman, E. (2011, August 2). Noncooperative Spectrum Access in Cognitive Radio Networks: A game theoretical model. Computer Networks. https://www.sciencedirect.com/science/article/abs/pii/S1389128611002829ZHANG, H. . Performance analysis of opportunistic spectrum access based on partially observable Markov decision process. The Journal of China Universities of Posts and Telecommunications. https://www.sciencedirect.com/science/article/abs/pii/S1005888510601938Liu, S., Greenstein, L. J. j, Trappe, W., Chen, Y. Detecting anomalous spectrum usage in dynamic spectrum access networks. Ad Hoc Networks. https://www.sciencedirect.com/science/article/abs/pii/S1570870511000801Yang, L., Cao, L., Zheng, H.. Proactive channel access in Dynamic Spectrum Networks. Physical Communication. https://www.sciencedirect.com/science/article/abs/pii/S1874490708000268Zhang , S., Lam , K.-Y., Shen , B., Wang, L., Li, F. (2023, July 22). Dynamic Spectrum Access for internet-of-things with Hierarchical Federated Deep Reinforcement Learning. Ad Hoc Networks. https://www.sciencedirect.com/science/article/abs/pii/S1570870523001774Peng, B., Yao, Z., Liu , X., Zhou, G. (2023, April). Deep Q-learning multiple networks based dynamic spectrum access with energy harvesting for green cognitive radio network. Ad Hoc Networks. https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1389128623000750Giri, M. K., Majumder, S. (2023, June). Distributed dynamic spectrum access through multi-agent deep recurrent Q-learning in cognitive radio network. Ad Hoc Networks. https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1874490723000575Chen, L., Fu, K., Zhao, Q., Zhao, X. (2022, December). A multi-channel and multi-user dynamic spectrum access algorithm based on deep reinforcement learning in Cognitive Vehicular Networks with sensing error. Ad Hoc Networks. https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1874490722002038Ahmed, R., Che, Y., Hassan, B. (2021, December). Deep learning-driven opportunistic spectrum access (OSA) framework for cognitive 5G and beyond 5G (B5G) networks. Ad Hoc Networks. https://www-sciencedirect-com.ezproxy.uniandes.edu.co/science/article/pii/S1570870521001529Agrawal, H., Asawa, K. (2022, September). Distributed learning algorithm with synchronized epochs for dynamic spectrum access in unknown environment using multi-user restless multi-armed bandit. Journal of King Saud University - Computer and Information Sciences.201821226PublicationLICENSElicense.txtlicense.txttext/plain; charset=utf-82535https://repositorio.uniandes.edu.co/bitstreams/ede28162-61f9-41d5-8542-5285710a1621/downloadae9e573a68e7f92501b6913cc846c39fMD54ORIGINALEvaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT.pdfEvaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT.pdfapplication/pdf1981939https://repositorio.uniandes.edu.co/bitstreams/0ad695f1-b590-48c4-8c0d-118918652731/downloadf9d0c2b96d8a8d7170e3e1bd622a57f9MD58autorizacion tesis SergioGuerra Firmada.pdfautorizacion tesis SergioGuerra Firmada.pdfHIDEapplication/pdf295990https://repositorio.uniandes.edu.co/bitstreams/22e8d460-6765-4399-9ec6-4f49d9869474/download31fbed0d1de4b68199849a090a0c2f99MD55CC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-8805https://repositorio.uniandes.edu.co/bitstreams/6d6b1728-af80-4da1-bf1a-d9f6acc30f38/download4460e5956bc1d1639be9ae6146a50347MD57TEXTEvaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT.pdf.txtEvaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT.pdf.txtExtracted texttext/plain92941https://repositorio.uniandes.edu.co/bitstreams/e14b1488-221c-484b-a610-13193b4dec8e/downloada8aebfce518de009c90e2432c12ce67fMD59autorizacion tesis SergioGuerra Firmada.pdf.txtautorizacion tesis SergioGuerra Firmada.pdf.txtExtracted texttext/plain2073https://repositorio.uniandes.edu.co/bitstreams/49b9b136-d7d3-496b-93d6-291443c92124/downloadfd45ef4f3c433f88eb277c09c90b0cfdMD511THUMBNAILEvaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT.pdf.jpgEvaluación de técnicas de acceso al medio inalámbrico basadas en aprendizaje por refuerzo para IoT.pdf.jpgGenerated Thumbnailimage/jpeg9176https://repositorio.uniandes.edu.co/bitstreams/c0c465fb-4747-4b14-ae47-03c1f395552a/download56921fd185265fe7f1e2d3a22964a4a5MD510autorizacion tesis SergioGuerra Firmada.pdf.jpgautorizacion tesis SergioGuerra Firmada.pdf.jpgGenerated Thumbnailimage/jpeg11121https://repositorio.uniandes.edu.co/bitstreams/15a70460-75ca-4614-9b32-5b82cb59c519/download1ce8bfbe50873b0c34087a6ff67f9c06MD5121992/73443oai:repositorio.uniandes.edu.co:1992/734432024-01-25 03:03:31.558http://creativecommons.org/licenses/by-nc-nd/4.0/Attribution-NonCommercial-NoDerivatives 4.0 Internationalopen.accesshttps://repositorio.uniandes.edu.coRepositorio institucional Sénecaadminrepositorio@uniandes.edu.coPGgzPjxzdHJvbmc+RGVzY2FyZ28gZGUgUmVzcG9uc2FiaWxpZGFkIC0gTGljZW5jaWEgZGUgQXV0b3JpemFjacOzbjwvc3Ryb25nPjwvaDM+CjxwPjxzdHJvbmc+UG9yIGZhdm9yIGxlZXIgYXRlbnRhbWVudGUgZXN0ZSBkb2N1bWVudG8gcXVlIHBlcm1pdGUgYWwgUmVwb3NpdG9yaW8gSW5zdGl0dWNpb25hbCBTw6luZWNhIHJlcHJvZHVjaXIgeSBkaXN0cmlidWlyIGxvcyByZWN1cnNvcyBkZSBpbmZvcm1hY2nDs24gZGVwb3NpdGFkb3MgbWVkaWFudGUgbGEgYXV0b3JpemFjacOzbiBkZSBsb3Mgc2lndWllbnRlcyB0w6lybWlub3M6PC9zdHJvbmc+PC9wPgo8cD5Db25jZWRhIGxhIGxpY2VuY2lhIGRlIGRlcMOzc2l0byBlc3TDoW5kYXIgc2VsZWNjaW9uYW5kbyBsYSBvcGNpw7NuIDxzdHJvbmc+J0FjZXB0YXIgbG9zIHTDqXJtaW5vcyBhbnRlcmlvcm1lbnRlIGRlc2NyaXRvcyc8L3N0cm9uZz4geSBjb250aW51YXIgZWwgcHJvY2VzbyBkZSBlbnbDrW8gbWVkaWFudGUgZWwgYm90w7NuIDxzdHJvbmc+J1NpZ3VpZW50ZScuPC9zdHJvbmc+PC9wPgo8aHI+CjxwPllvLCBlbiBtaSBjYWxpZGFkIGRlIGF1dG9yIGRlbCB0cmFiYWpvIGRlIHRlc2lzLCBtb25vZ3JhZsOtYSBvIHRyYWJham8gZGUgZ3JhZG8sIGhhZ28gZW50cmVnYSBkZWwgZWplbXBsYXIgcmVzcGVjdGl2byB5IGRlIHN1cyBhbmV4b3MgZGUgc2VyIGVsIGNhc28sIGVuIGZvcm1hdG8gZGlnaXRhbCB5L28gZWxlY3Ryw7NuaWNvIHkgYXV0b3Jpem8gYSBsYSBVbml2ZXJzaWRhZCBkZSBsb3MgQW5kZXMgcGFyYSBxdWUgcmVhbGljZSBsYSBwdWJsaWNhY2nDs24gZW4gZWwgU2lzdGVtYSBkZSBCaWJsaW90ZWNhcyBvIGVuIGN1YWxxdWllciBvdHJvIHNpc3RlbWEgbyBiYXNlIGRlIGRhdG9zIHByb3BpbyBvIGFqZW5vIGEgbGEgVW5pdmVyc2lkYWQgeSBwYXJhIHF1ZSBlbiBsb3MgdMOpcm1pbm9zIGVzdGFibGVjaWRvcyBlbiBsYSBMZXkgMjMgZGUgMTk4MiwgTGV5IDQ0IGRlIDE5OTMsIERlY2lzacOzbiBBbmRpbmEgMzUxIGRlIDE5OTMsIERlY3JldG8gNDYwIGRlIDE5OTUgeSBkZW3DoXMgbm9ybWFzIGdlbmVyYWxlcyBzb2JyZSBsYSBtYXRlcmlhLCB1dGlsaWNlIGVuIHRvZGFzIHN1cyBmb3JtYXMsIGxvcyBkZXJlY2hvcyBwYXRyaW1vbmlhbGVzIGRlIHJlcHJvZHVjY2nDs24sIGNvbXVuaWNhY2nDs24gcMO6YmxpY2EsIHRyYW5zZm9ybWFjacOzbiB5IGRpc3RyaWJ1Y2nDs24gKGFscXVpbGVyLCBwcsOpc3RhbW8gcMO6YmxpY28gZSBpbXBvcnRhY2nDs24pIHF1ZSBtZSBjb3JyZXNwb25kZW4gY29tbyBjcmVhZG9yIGRlIGxhIG9icmEgb2JqZXRvIGRlbCBwcmVzZW50ZSBkb2N1bWVudG8uPC9wPgo8cD5MYSBwcmVzZW50ZSBhdXRvcml6YWNpw7NuIHNlIGVtaXRlIGVuIGNhbGlkYWQgZGUgYXV0b3IgZGUgbGEgb2JyYSBvYmpldG8gZGVsIHByZXNlbnRlIGRvY3VtZW50byB5IG5vIGNvcnJlc3BvbmRlIGEgY2VzacOzbiBkZSBkZXJlY2hvcywgc2lubyBhIGxhIGF1dG9yaXphY2nDs24gZGUgdXNvIGFjYWTDqW1pY28gZGUgY29uZm9ybWlkYWQgY29uIGxvIGFudGVyaW9ybWVudGUgc2XDsWFsYWRvLiBMYSBwcmVzZW50ZSBhdXRvcml6YWNpw7NuIHNlIGhhY2UgZXh0ZW5zaXZhIG5vIHNvbG8gYSBsYXMgZmFjdWx0YWRlcyB5IGRlcmVjaG9zIGRlIHVzbyBzb2JyZSBsYSBvYnJhIGVuIGZvcm1hdG8gbyBzb3BvcnRlIG1hdGVyaWFsLCBzaW5vIHRhbWJpw6luIHBhcmEgZm9ybWF0byBlbGVjdHLDs25pY28sIHkgZW4gZ2VuZXJhbCBwYXJhIGN1YWxxdWllciBmb3JtYXRvIGNvbm9jaWRvIG8gcG9yIGNvbm9jZXIuPC9wPgo8cD5FbCBhdXRvciwgbWFuaWZpZXN0YSBxdWUgbGEgb2JyYSBvYmpldG8gZGUgbGEgcHJlc2VudGUgYXV0b3JpemFjacOzbiBlcyBvcmlnaW5hbCB5IGxhIHJlYWxpesOzIHNpbiB2aW9sYXIgbyB1c3VycGFyIGRlcmVjaG9zIGRlIGF1dG9yIGRlIHRlcmNlcm9zLCBwb3IgbG8gdGFudG8sIGxhIG9icmEgZXMgZGUgc3UgZXhjbHVzaXZhIGF1dG9yw61hIHkgdGllbmUgbGEgdGl0dWxhcmlkYWQgc29icmUgbGEgbWlzbWEuPC9wPgo8cD5FbiBjYXNvIGRlIHByZXNlbnRhcnNlIGN1YWxxdWllciByZWNsYW1hY2nDs24gbyBhY2Npw7NuIHBvciBwYXJ0ZSBkZSB1biB0ZXJjZXJvIGVuIGN1YW50byBhIGxvcyBkZXJlY2hvcyBkZSBhdXRvciBzb2JyZSBsYSBvYnJhIGVuIGN1ZXN0acOzbiwgZWwgYXV0b3IgYXN1bWlyw6EgdG9kYSBsYSByZXNwb25zYWJpbGlkYWQsIHkgc2FsZHLDoSBkZSBkZWZlbnNhIGRlIGxvcyBkZXJlY2hvcyBhcXXDrSBhdXRvcml6YWRvcywgcGFyYSB0b2RvcyBsb3MgZWZlY3RvcyBsYSBVbml2ZXJzaWRhZCBhY3TDumEgY29tbyB1biB0ZXJjZXJvIGRlIGJ1ZW5hIGZlLjwvcD4KPHA+U2kgdGllbmUgYWxndW5hIGR1ZGEgc29icmUgbGEgbGljZW5jaWEsIHBvciBmYXZvciwgY29udGFjdGUgY29uIGVsIDxhIGhyZWY9Im1haWx0bzpiaWJsaW90ZWNhQHVuaWFuZGVzLmVkdS5jbyIgdGFyZ2V0PSJfYmxhbmsiPkFkbWluaXN0cmFkb3IgZGVsIFNpc3RlbWEuPC9hPjwvcD4K |