Data Lake Comfama

RESUMEN : Con el objetivo de establecer a Comfama como una empresa data céntrica, se inicia un proyecto de consolidar toda la información de la empresa en un único lago de datos consolidado. Para esto se decide utilizar las herramientas ofrecidas por Microsoft con su plataforma Azure, un conjunto de...

Full description

Autores:
Orozco Arcila, Diego Armando
Tipo de recurso:
Trabajo de grado de pregrado
Fecha de publicación:
2022
Institución:
Universidad de Antioquia
Repositorio:
Repositorio UdeA
Idioma:
spa
OAI Identifier:
oai:bibliotecadigital.udea.edu.co:10495/31928
Acceso en línea:
https://hdl.handle.net/10495/31928
Palabra clave:
Procesamiento de datos
Data processing
Empresas privadas
Private companies
Procesamiento electronico de datos
Electronic data processing
Sistemas operacionales
Operating systems (computers)
Acceso a la información
Information access
http://vocabularies.unesco.org/thesaurus/concept522
Rights
openAccess
License
http://creativecommons.org/licenses/by-nc-nd/2.5/co/
id UDEA2_970223443a7fad7bc12cfac5884634d3
oai_identifier_str oai:bibliotecadigital.udea.edu.co:10495/31928
network_acronym_str UDEA2
network_name_str Repositorio UdeA
repository_id_str
dc.title.spa.fl_str_mv Data Lake Comfama
title Data Lake Comfama
spellingShingle Data Lake Comfama
Procesamiento de datos
Data processing
Empresas privadas
Private companies
Procesamiento electronico de datos
Electronic data processing
Sistemas operacionales
Operating systems (computers)
Acceso a la información
Information access
http://vocabularies.unesco.org/thesaurus/concept522
title_short Data Lake Comfama
title_full Data Lake Comfama
title_fullStr Data Lake Comfama
title_full_unstemmed Data Lake Comfama
title_sort Data Lake Comfama
dc.creator.fl_str_mv Orozco Arcila, Diego Armando
dc.contributor.advisor.none.fl_str_mv Loaiza Berrio, Deisy
dc.contributor.author.none.fl_str_mv Orozco Arcila, Diego Armando
dc.subject.unesco.none.fl_str_mv Procesamiento de datos
Data processing
topic Procesamiento de datos
Data processing
Empresas privadas
Private companies
Procesamiento electronico de datos
Electronic data processing
Sistemas operacionales
Operating systems (computers)
Acceso a la información
Information access
http://vocabularies.unesco.org/thesaurus/concept522
dc.subject.lemb.none.fl_str_mv Empresas privadas
Private companies
Procesamiento electronico de datos
Electronic data processing
Sistemas operacionales
Operating systems (computers)
Acceso a la información
Information access
dc.subject.unescouri.none.fl_str_mv http://vocabularies.unesco.org/thesaurus/concept522
description RESUMEN : Con el objetivo de establecer a Comfama como una empresa data céntrica, se inicia un proyecto de consolidar toda la información de la empresa en un único lago de datos consolidado. Para esto se decide utilizar las herramientas ofrecidas por Microsoft con su plataforma Azure, un conjunto de herramientas en la nube que ayudan realizar Pipelines, ETLs, procesamiento y analítica de datos. Para este proyecto en especial se va a usar la herramienta Azure Synapse para el transporte de la información en un único Pool de SQL, consolidando así el lago de datos un único lugar, dando el primer paso para facilitar el análisis de los datos para la toma de decisiones.
publishDate 2022
dc.date.accessioned.none.fl_str_mv 2022-11-09T20:37:30Z
dc.date.available.none.fl_str_mv 2022-11-09T20:37:30Z
dc.date.issued.none.fl_str_mv 2022
dc.type.spa.fl_str_mv info:eu-repo/semantics/bachelorThesis
dc.type.coarversion.fl_str_mv http://purl.org/coar/version/c_b1a7d7d4d402bcce
dc.type.hasversion.spa.fl_str_mv info:eu-repo/semantics/draft
dc.type.coar.spa.fl_str_mv http://purl.org/coar/resource_type/c_7a1f
dc.type.redcol.spa.fl_str_mv https://purl.org/redcol/resource_type/TP
dc.type.local.spa.fl_str_mv Tesis/Trabajo de grado - Monografía - Pregrado
format http://purl.org/coar/resource_type/c_7a1f
status_str draft
dc.identifier.uri.none.fl_str_mv https://hdl.handle.net/10495/31928
url https://hdl.handle.net/10495/31928
dc.language.iso.spa.fl_str_mv spa
language spa
dc.rights.spa.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.uri.*.fl_str_mv http://creativecommons.org/licenses/by-nc-nd/2.5/co/
dc.rights.accessrights.spa.fl_str_mv http://purl.org/coar/access_right/c_abf2
dc.rights.creativecommons.spa.fl_str_mv https://creativecommons.org/licenses/by-nc-sa/4.0/
eu_rights_str_mv openAccess
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-nd/2.5/co/
http://purl.org/coar/access_right/c_abf2
https://creativecommons.org/licenses/by-nc-sa/4.0/
dc.format.extent.spa.fl_str_mv 31
dc.format.mimetype.spa.fl_str_mv application/pdf
dc.publisher.place.spa.fl_str_mv Medellín - Colombia
institution Universidad de Antioquia
bitstream.url.fl_str_mv https://bibliotecadigital.udea.edu.co/bitstream/10495/31928/2/license_rdf
https://bibliotecadigital.udea.edu.co/bitstream/10495/31928/3/license.txt
https://bibliotecadigital.udea.edu.co/bitstream/10495/31928/1/OrozcoDiego_2022_DataLakeComfama.pdf
bitstream.checksum.fl_str_mv b88b088d9957e670ce3b3fbe2eedbc13
8a4605be74aa9ea9d79846c1fba20a33
2eb4ec148c2677b920a558a29991c0e9
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositorio Institucional Universidad de Antioquia
repository.mail.fl_str_mv andres.perez@udea.edu.co
_version_ 1812173209165889536
spelling Loaiza Berrio, DeisyOrozco Arcila, Diego Armando2022-11-09T20:37:30Z2022-11-09T20:37:30Z2022https://hdl.handle.net/10495/31928RESUMEN : Con el objetivo de establecer a Comfama como una empresa data céntrica, se inicia un proyecto de consolidar toda la información de la empresa en un único lago de datos consolidado. Para esto se decide utilizar las herramientas ofrecidas por Microsoft con su plataforma Azure, un conjunto de herramientas en la nube que ayudan realizar Pipelines, ETLs, procesamiento y analítica de datos. Para este proyecto en especial se va a usar la herramienta Azure Synapse para el transporte de la información en un único Pool de SQL, consolidando así el lago de datos un único lugar, dando el primer paso para facilitar el análisis de los datos para la toma de decisiones.ABSTRACT : With the aim of establishing Comfama as a data-centric company, a project is initiated to consolidate all the company's information into a single consolidated data lake. It was decided to use the tools offered by Microsoft with its Azure platform, a set of cloud tools that help perform Pipelines, ETLs, data processing and analytics. For this project, the Azure Synapse tool will be used to transport information in a single SQL Pool, thus consolidating the data lake in a single place, taking the first step to facilitate the analysis of data for decision making.31application/pdfspainfo:eu-repo/semantics/draftinfo:eu-repo/semantics/bachelorThesishttp://purl.org/coar/resource_type/c_7a1fhttps://purl.org/redcol/resource_type/TPTesis/Trabajo de grado - Monografía - Pregradohttp://purl.org/coar/version/c_b1a7d7d4d402bcceinfo:eu-repo/semantics/openAccesshttp://creativecommons.org/licenses/by-nc-nd/2.5/co/http://purl.org/coar/access_right/c_abf2https://creativecommons.org/licenses/by-nc-sa/4.0/Data Lake ComfamaMedellín - ColombiaProcesamiento de datosData processingEmpresas privadasPrivate companiesProcesamiento electronico de datosElectronic data processingSistemas operacionalesOperating systems (computers)Acceso a la informaciónInformation accesshttp://vocabularies.unesco.org/thesaurus/concept522Ingeniero de SistemasPregradoFacultad de Ingeniería. Ingeniería de SistemasUniversidad de AntioquiaCC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-8823https://bibliotecadigital.udea.edu.co/bitstream/10495/31928/2/license_rdfb88b088d9957e670ce3b3fbe2eedbc13MD52LICENSElicense.txtlicense.txttext/plain; charset=utf-81748https://bibliotecadigital.udea.edu.co/bitstream/10495/31928/3/license.txt8a4605be74aa9ea9d79846c1fba20a33MD53ORIGINALOrozcoDiego_2022_DataLakeComfama.pdfOrozcoDiego_2022_DataLakeComfama.pdfTrabajo de grado de pregradoapplication/pdf1707393https://bibliotecadigital.udea.edu.co/bitstream/10495/31928/1/OrozcoDiego_2022_DataLakeComfama.pdf2eb4ec148c2677b920a558a29991c0e9MD5110495/31928oai:bibliotecadigital.udea.edu.co:10495/319282022-11-09 15:37:54.831Repositorio Institucional Universidad de Antioquiaandres.perez@udea.edu.coTk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0Cm93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLAp0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZwp0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sCmluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlCnN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yCnB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZQp0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQKdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uCmFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LAp5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZQpjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdApzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkCndpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRApCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUKRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSApDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZQpzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMKbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo=