Diseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumo

Detectar de forma temprana desviaciones en los patrones de consumo es una de las actividades críticas del negocio eléctrico y en general de cualquier empresa prestadora de un servicio público. El siguiente proyecto tiene por objetivo desarrollar una herramienta computacional web a través de la cual...

Full description

Autores:
Ahumada Sierra, Loui Alejandro
Tipo de recurso:
Fecha de publicación:
2018
Institución:
Universidad del Norte
Repositorio:
Repositorio Uninorte
Idioma:
spa
OAI Identifier:
oai:manglar.uninorte.edu.co:10584/7894
Acceso en línea:
http://hdl.handle.net/10584/7894
Palabra clave:
Aprendizaje automático
Detección de desviaciones
machine learning
Outlier detection
One Class Support Vector Machines
Isolation Forest
Robust Covariance
Local Outlier Factor
Rights
License
Universidad del Norte
id REPOUNORT2_fb39dc80c8c0bcc05c0fe5b8cedbc8cf
oai_identifier_str oai:manglar.uninorte.edu.co:10584/7894
network_acronym_str REPOUNORT2
network_name_str Repositorio Uninorte
repository_id_str
dc.title.es_ES.fl_str_mv Diseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumo
dc.title.en_US.fl_str_mv Computational tool design based on machine learning for energy consumption outlier detection
title Diseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumo
spellingShingle Diseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumo
Aprendizaje automático
Detección de desviaciones
machine learning
Outlier detection
One Class Support Vector Machines
Isolation Forest
Robust Covariance
Local Outlier Factor
title_short Diseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumo
title_full Diseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumo
title_fullStr Diseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumo
title_full_unstemmed Diseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumo
title_sort Diseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumo
dc.creator.fl_str_mv Ahumada Sierra, Loui Alejandro
dc.contributor.advisor.none.fl_str_mv Yie pinedo, Rubén Pinedo
dc.contributor.author.none.fl_str_mv Ahumada Sierra, Loui Alejandro
dc.subject.es_ES.fl_str_mv Aprendizaje automático
Detección de desviaciones
topic Aprendizaje automático
Detección de desviaciones
machine learning
Outlier detection
One Class Support Vector Machines
Isolation Forest
Robust Covariance
Local Outlier Factor
dc.subject.en_US.fl_str_mv machine learning
Outlier detection
One Class Support Vector Machines
Isolation Forest
Robust Covariance
Local Outlier Factor
description Detectar de forma temprana desviaciones en los patrones de consumo es una de las actividades críticas del negocio eléctrico y en general de cualquier empresa prestadora de un servicio público. El siguiente proyecto tiene por objetivo desarrollar una herramienta computacional web a través de la cual se validen las curvas históricas de consumo de energía eléctrica de clientes no regulados del caribe colombiano a través de métodos especializados de machine learning. Se realizó inicialmente una evaluación completa del proceso de análisis energético a través de métodos y herramientas dentro del espectro del estudio del trabajo. Del levantamiento de la información se logran poner de presente las principales falencias del proceso y se evidencia la falta de información para realizar una evaluación comparativa entre la herramienta VBA actualmente utilizada por la compañía para analizar la energía, y la nueva herramienta propuesta en este proyecto. De manera consecuente, se determina someter a crítica el resultado de cuatro técnicas de machine learning: One Class Support Vector Machines, Isolation Forest, Robust Covariance y Local Outlier Factor; para determinar el mejor modelo a partir de la construcción de la realidad en conjunto con los analistas. A través de la crítica y análisis de resultados de la validación de los métodos se logra medir el rendimiento de cada uno de los modelos, y se determina finalmente que la mejor técnica para detectar desviaciones de consumo dentro del contexto comercial de la compañía es Robust Covariance. La técnica obtuvo la mayor valoración F1-score para modelos de machine learning, evidenciando un equilibrio fundamental entre la ocurrencia de eventos falsos positivos, falsos negativos y verdaderos positivos; así como una reducción del 93% del número de puntos de medida revisados manualmente en comparación con la herramienta VBA.
publishDate 2018
dc.date.accessioned.none.fl_str_mv 2018-05-21T14:52:46Z
dc.date.available.none.fl_str_mv 2018-05-21T14:52:46Z
dc.date.issued.none.fl_str_mv 2018-05-20
dc.type.es_ES.fl_str_mv article
dc.type.coar.fl_str_mv http://purl.org/coar/resource_type/c_6501
dc.identifier.uri.none.fl_str_mv http://hdl.handle.net/10584/7894
url http://hdl.handle.net/10584/7894
dc.language.iso.es_ES.fl_str_mv spa
language spa
dc.rights.es_ES.fl_str_mv Universidad del Norte
dc.rights.coar.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv Universidad del Norte
http://purl.org/coar/access_right/c_abf2
dc.publisher.es_ES.fl_str_mv Barranquilla, Universidad del Norte, 2018
institution Universidad del Norte
bitstream.url.fl_str_mv http://172.16.14.36:8080/bitstream/10584/7894/1/PF%20-%20Loui%20Ahumada.jpg
http://172.16.14.36:8080/bitstream/10584/7894/2/PF%20-%20Loui%20Ahumada.pdf
http://172.16.14.36:8080/bitstream/10584/7894/3/license.txt
bitstream.checksum.fl_str_mv 483a4754f2710390976c90699a0502da
8c8812606534745caa4183cadff6e4a4
8a4605be74aa9ea9d79846c1fba20a33
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositorio Digital de la Universidad del Norte
repository.mail.fl_str_mv mauribe@uninorte.edu.co
_version_ 1812183106927460352
spelling Yie pinedo, Rubén PinedoAhumada Sierra, Loui Alejandro2018-05-21T14:52:46Z2018-05-21T14:52:46Z2018-05-20http://hdl.handle.net/10584/7894Detectar de forma temprana desviaciones en los patrones de consumo es una de las actividades críticas del negocio eléctrico y en general de cualquier empresa prestadora de un servicio público. El siguiente proyecto tiene por objetivo desarrollar una herramienta computacional web a través de la cual se validen las curvas históricas de consumo de energía eléctrica de clientes no regulados del caribe colombiano a través de métodos especializados de machine learning. Se realizó inicialmente una evaluación completa del proceso de análisis energético a través de métodos y herramientas dentro del espectro del estudio del trabajo. Del levantamiento de la información se logran poner de presente las principales falencias del proceso y se evidencia la falta de información para realizar una evaluación comparativa entre la herramienta VBA actualmente utilizada por la compañía para analizar la energía, y la nueva herramienta propuesta en este proyecto. De manera consecuente, se determina someter a crítica el resultado de cuatro técnicas de machine learning: One Class Support Vector Machines, Isolation Forest, Robust Covariance y Local Outlier Factor; para determinar el mejor modelo a partir de la construcción de la realidad en conjunto con los analistas. A través de la crítica y análisis de resultados de la validación de los métodos se logra medir el rendimiento de cada uno de los modelos, y se determina finalmente que la mejor técnica para detectar desviaciones de consumo dentro del contexto comercial de la compañía es Robust Covariance. La técnica obtuvo la mayor valoración F1-score para modelos de machine learning, evidenciando un equilibrio fundamental entre la ocurrencia de eventos falsos positivos, falsos negativos y verdaderos positivos; así como una reducción del 93% del número de puntos de medida revisados manualmente en comparación con la herramienta VBA.Detecting early deviations in consumption patterns is one of the critical activities of the electricity business and critical as well of any company providing a public service. The following project aims to develop a web computing tool through which the historical curves of electric power consumption of unregulated customers of the Colombian Caribbean are validated through specialized methods of machine learning. Initially, a complete evaluation of the energy analysis process was carried out through methods and tools within the spectrum of work study. From the survey of information, the main flaws of the process can be seen and the lack of information for a comparative evaluation between the VBA tool (currently used by the company to analyze energy) and the new tool proposed in this project is evident. Consistently, it is determined to submit to criticism the result of four machine learning techniques: One Class Support Vector Machines, Isolation Forest, Robust Covariance and Local Outlier Factor; to determine the best model from the construction of reality in conjunction with analysts. Through the criticism and analysis of the results of the validation of the methods, it is possible to measure the performance of each of the models, and finally it is determined that the best technique to detect consumption deviations within the commercial context of the company is Robust Covariance. The technique obtained the highest F1-score valuation for machine learning models, evidencing a fundamental balance between the occurrence of false positive, false negative and true positive events; as well as a 93% reduction in the number of manually reviewed customers compared to the VBA tool.spaBarranquilla, Universidad del Norte, 2018Universidad del Nortehttp://purl.org/coar/access_right/c_abf2Aprendizaje automáticoDetección de desviacionesmachine learningOutlier detectionOne Class Support Vector MachinesIsolation ForestRobust CovarianceLocal Outlier FactorDiseño de herramienta computacional basada en machine learning para la detección de desviaciones de consumoComputational tool design based on machine learning for energy consumption outlier detectionarticlehttp://purl.org/coar/resource_type/c_6501ORIGINALPF - Loui Ahumada.jpgPF - Loui Ahumada.jpgVista general de la herramienta de detección de desviaciones de consumo.image/jpeg113047http://172.16.14.36:8080/bitstream/10584/7894/1/PF%20-%20Loui%20Ahumada.jpg483a4754f2710390976c90699a0502daMD51PF - Loui Ahumada.pdfPF - Loui Ahumada.pdfVista general de la herramienta de detección de desviaciones de consumo.application/pdf114176http://172.16.14.36:8080/bitstream/10584/7894/2/PF%20-%20Loui%20Ahumada.pdf8c8812606534745caa4183cadff6e4a4MD52LICENSElicense.txtlicense.txttext/plain; charset=utf-81748http://172.16.14.36:8080/bitstream/10584/7894/3/license.txt8a4605be74aa9ea9d79846c1fba20a33MD5310584/7894oai:172.16.14.36:10584/78942018-05-31 15:26:22.848Repositorio Digital de la Universidad del Nortemauribe@uninorte.edu.co