Dealer Data Integration DDI

RESUMEN : El presente informe tiene como propósito ofrecer un análisis detallado del proceso llevado a cabo en el proyecto Dealer Data Integration para la empresa Inchcape PLC. Este proyecto se plantea con el objetivo de centralizar la información de diversos distribuidores en un solo lugar. Inicial...

Full description

Autores:
Areiza Agudelo, Daniel Fernando
Tipo de recurso:
Trabajo de grado de pregrado
Fecha de publicación:
2023
Institución:
Universidad de Antioquia
Repositorio:
Repositorio UdeA
Idioma:
spa
OAI Identifier:
oai:bibliotecadigital.udea.edu.co:10495/37769
Acceso en línea:
https://hdl.handle.net/10495/37769
Palabra clave:
Automatización
Automation
Redes de tuberías
Pipelines
Tablas estadísticas
Statistical tables
Diseño de proyectos
Project design
Dealer
Data
ETL
http://aims.fao.org/aos/agrovoc/c_1c589b7c
http://aims.fao.org/aos/agrovoc/c_26992
http://vocabularies.unesco.org/thesaurus/concept3401
Rights
openAccess
License
http://creativecommons.org/licenses/by-nc-sa/2.5/co/
id UDEA2_6940439b3ab09f24360106acf8d8adb0
oai_identifier_str oai:bibliotecadigital.udea.edu.co:10495/37769
network_acronym_str UDEA2
network_name_str Repositorio UdeA
repository_id_str
dc.title.spa.fl_str_mv Dealer Data Integration DDI
title Dealer Data Integration DDI
spellingShingle Dealer Data Integration DDI
Automatización
Automation
Redes de tuberías
Pipelines
Tablas estadísticas
Statistical tables
Diseño de proyectos
Project design
Dealer
Data
ETL
http://aims.fao.org/aos/agrovoc/c_1c589b7c
http://aims.fao.org/aos/agrovoc/c_26992
http://vocabularies.unesco.org/thesaurus/concept3401
title_short Dealer Data Integration DDI
title_full Dealer Data Integration DDI
title_fullStr Dealer Data Integration DDI
title_full_unstemmed Dealer Data Integration DDI
title_sort Dealer Data Integration DDI
dc.creator.fl_str_mv Areiza Agudelo, Daniel Fernando
dc.contributor.advisor.none.fl_str_mv Zabala Orrego, Sandra Patricia
dc.contributor.author.none.fl_str_mv Areiza Agudelo, Daniel Fernando
dc.subject.unesco.none.fl_str_mv Automatización
Automation
topic Automatización
Automation
Redes de tuberías
Pipelines
Tablas estadísticas
Statistical tables
Diseño de proyectos
Project design
Dealer
Data
ETL
http://aims.fao.org/aos/agrovoc/c_1c589b7c
http://aims.fao.org/aos/agrovoc/c_26992
http://vocabularies.unesco.org/thesaurus/concept3401
dc.subject.lemb.none.fl_str_mv Redes de tuberías
Pipelines
dc.subject.agrovoc.none.fl_str_mv Tablas estadísticas
Statistical tables
Diseño de proyectos
Project design
dc.subject.proposal.spa.fl_str_mv Dealer
Data
ETL
dc.subject.agrovocuri.none.fl_str_mv http://aims.fao.org/aos/agrovoc/c_1c589b7c
http://aims.fao.org/aos/agrovoc/c_26992
dc.subject.unescouri.none.fl_str_mv http://vocabularies.unesco.org/thesaurus/concept3401
description RESUMEN : El presente informe tiene como propósito ofrecer un análisis detallado del proceso llevado a cabo en el proyecto Dealer Data Integration para la empresa Inchcape PLC. Este proyecto se plantea con el objetivo de centralizar la información de diversos distribuidores en un solo lugar. Inicialmente, la implementación de este proyecto se llevará a cabo en Latinoamérica, comenzando con los distribuidores ubicados en Colombia, y posteriormente se extenderá a otras regiones. El estado actual de recolección de información plantea desafíos, ya que cada concesionario mantiene sus datos de manera independiente, sin un orden ni un estándar definido. Esta situación genera ineficiencias en el proceso de recopilación y gestión de datos. Para abordar esta problemática, se ha iniciado el diseño y desarrollo de una Pipeline [12], que desempeñará un papel fundamental en la recopilación y consolidación de la información en un único repositorio. La implementación de esta solución se llevará a cabo utilizando Azure Data Factory, el servicio de ETL en la nube de Azure, y Databricks. Tras rigurosas pruebas de funcionamiento y desempeño, la Pipeline se desplegará para su uso en producción. La implementación exitosa de esta solución permitirá optimizar la eficiencia en la recopilación y gestión de datos, lo que contribuirá significativamente al logro de los objetivos de Inchcape PLC.
publishDate 2023
dc.date.issued.none.fl_str_mv 2023
dc.date.accessioned.none.fl_str_mv 2024-01-19T19:25:45Z
dc.date.available.none.fl_str_mv 2024-01-19T19:25:45Z
dc.type.spa.fl_str_mv Tesis/Trabajo de grado - Monografía - Pregrado
dc.type.coar.spa.fl_str_mv http://purl.org/coar/resource_type/c_7a1f
dc.type.redcol.spa.fl_str_mv https://purl.org/redcol/resource_type/TP
dc.type.coarversion.spa.fl_str_mv http://purl.org/coar/version/c_b1a7d7d4d402bcce
dc.type.driver.spa.fl_str_mv info:eu-repo/semantics/bachelorThesis
dc.type.version.spa.fl_str_mv info:eu-repo/semantics/draft
format http://purl.org/coar/resource_type/c_7a1f
status_str draft
dc.identifier.uri.none.fl_str_mv https://hdl.handle.net/10495/37769
url https://hdl.handle.net/10495/37769
dc.language.iso.spa.fl_str_mv spa
language spa
dc.rights.uri.*.fl_str_mv http://creativecommons.org/licenses/by-nc-sa/2.5/co/
dc.rights.uri.spa.fl_str_mv https://creativecommons.org/licenses/by-nc-sa/4.0/
dc.rights.accessrights.spa.fl_str_mv info:eu-repo/semantics/openAccess
dc.rights.coar.spa.fl_str_mv http://purl.org/coar/access_right/c_abf2
rights_invalid_str_mv http://creativecommons.org/licenses/by-nc-sa/2.5/co/
https://creativecommons.org/licenses/by-nc-sa/4.0/
http://purl.org/coar/access_right/c_abf2
eu_rights_str_mv openAccess
dc.format.extent.spa.fl_str_mv 18
dc.format.mimetype.spa.fl_str_mv application/pdf
dc.publisher.spa.fl_str_mv Universidad de Antioquia
dc.publisher.place.spa.fl_str_mv Medellín, Colombia
dc.publisher.faculty.spa.fl_str_mv Facultad de Ingeniería. Ingeniería de Sistemas
institution Universidad de Antioquia
bitstream.url.fl_str_mv https://bibliotecadigital.udea.edu.co/bitstreams/1e9bfbb8-fb9b-40e4-9eb2-56f77125f321/download
https://bibliotecadigital.udea.edu.co/bitstreams/f09a7fe8-b131-4730-a342-f64e3a0c88a6/download
https://bibliotecadigital.udea.edu.co/bitstreams/d1a65304-b2c8-4fb3-8efd-92080a7af91e/download
https://bibliotecadigital.udea.edu.co/bitstreams/039d4806-c4ff-4110-89fe-cee1a0d11632/download
https://bibliotecadigital.udea.edu.co/bitstreams/ab1417f0-00c9-42da-9cde-391a92cc8e13/download
bitstream.checksum.fl_str_mv efcbf6bb9e151657cca9df261acbdc5d
e2060682c9c70d4d30c83c51448f4eed
8a4605be74aa9ea9d79846c1fba20a33
e65451902dd9075f170ca296cd637b96
3bd313e387587081ff824e95424d83d2
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositorio Institucional de la Universidad de Antioquia
repository.mail.fl_str_mv aplicacionbibliotecadigitalbiblioteca@udea.edu.co
_version_ 1851052516136976384
spelling Zabala Orrego, Sandra PatriciaAreiza Agudelo, Daniel Fernando2024-01-19T19:25:45Z2024-01-19T19:25:45Z2023https://hdl.handle.net/10495/37769RESUMEN : El presente informe tiene como propósito ofrecer un análisis detallado del proceso llevado a cabo en el proyecto Dealer Data Integration para la empresa Inchcape PLC. Este proyecto se plantea con el objetivo de centralizar la información de diversos distribuidores en un solo lugar. Inicialmente, la implementación de este proyecto se llevará a cabo en Latinoamérica, comenzando con los distribuidores ubicados en Colombia, y posteriormente se extenderá a otras regiones. El estado actual de recolección de información plantea desafíos, ya que cada concesionario mantiene sus datos de manera independiente, sin un orden ni un estándar definido. Esta situación genera ineficiencias en el proceso de recopilación y gestión de datos. Para abordar esta problemática, se ha iniciado el diseño y desarrollo de una Pipeline [12], que desempeñará un papel fundamental en la recopilación y consolidación de la información en un único repositorio. La implementación de esta solución se llevará a cabo utilizando Azure Data Factory, el servicio de ETL en la nube de Azure, y Databricks. Tras rigurosas pruebas de funcionamiento y desempeño, la Pipeline se desplegará para su uso en producción. La implementación exitosa de esta solución permitirá optimizar la eficiencia en la recopilación y gestión de datos, lo que contribuirá significativamente al logro de los objetivos de Inchcape PLC.ABSTRACT : This report aims to provide a detailed analysis of the process carried out in the Dealer Data Integration project for Inchcape PLC. This project is designed with the goal of centralizing information from various dealers in one place. Initially, the implementation of this project will take place in Latin America, starting with dealers located in Colombia, and it will later expand to other regions. The current state of information collection presents challenges, as each dealership maintains its data independently, without a defined order or standard. This situation leads to inefficiencies in the data collection and management process. To address this issue, the design and development of a Pipeline have been initiated, which will play a key role in collecting and consolidating information into a single repository. The implementation of this solution will be carried out using Azure Data Factory, Azure's cloud ETL service, and Databricks. After rigorous testing for functionality and performance, the Pipeline will be deployed for production use. The successful implementation of this solution will optimize the efficiency of data collection and management, significantly contributing to the achievement of Inchcape PLC's objectives.PregradoIngeniero de Sistemas18application/pdfspaUniversidad de AntioquiaMedellín, ColombiaFacultad de Ingeniería. Ingeniería de Sistemashttp://creativecommons.org/licenses/by-nc-sa/2.5/co/https://creativecommons.org/licenses/by-nc-sa/4.0/info:eu-repo/semantics/openAccesshttp://purl.org/coar/access_right/c_abf2Dealer Data Integration DDITesis/Trabajo de grado - Monografía - Pregradohttp://purl.org/coar/resource_type/c_7a1fhttps://purl.org/redcol/resource_type/TPhttp://purl.org/coar/version/c_b1a7d7d4d402bcceinfo:eu-repo/semantics/bachelorThesisinfo:eu-repo/semantics/draftAutomatizaciónAutomationRedes de tuberíasPipelinesTablas estadísticasStatistical tablesDiseño de proyectosProject designDealerDataETLhttp://aims.fao.org/aos/agrovoc/c_1c589b7chttp://aims.fao.org/aos/agrovoc/c_26992http://vocabularies.unesco.org/thesaurus/concept3401PublicationORIGINALAreizaDaniel_2023_DealerDataIntegration.pdfAreizaDaniel_2023_DealerDataIntegration.pdfTrabajo de grado pregradoapplication/pdf351172https://bibliotecadigital.udea.edu.co/bitstreams/1e9bfbb8-fb9b-40e4-9eb2-56f77125f321/downloadefcbf6bb9e151657cca9df261acbdc5dMD51trueAnonymousREADCC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-81051https://bibliotecadigital.udea.edu.co/bitstreams/f09a7fe8-b131-4730-a342-f64e3a0c88a6/downloade2060682c9c70d4d30c83c51448f4eedMD52falseAnonymousREADLICENSElicense.txtlicense.txttext/plain; charset=utf-81748https://bibliotecadigital.udea.edu.co/bitstreams/d1a65304-b2c8-4fb3-8efd-92080a7af91e/download8a4605be74aa9ea9d79846c1fba20a33MD53falseAnonymousREADTEXTAreizaDaniel_2023_DealerDataIntegration.pdf.txtAreizaDaniel_2023_DealerDataIntegration.pdf.txtExtracted texttext/plain20486https://bibliotecadigital.udea.edu.co/bitstreams/039d4806-c4ff-4110-89fe-cee1a0d11632/downloade65451902dd9075f170ca296cd637b96MD54falseAnonymousREADTHUMBNAILAreizaDaniel_2023_DealerDataIntegration.pdf.jpgAreizaDaniel_2023_DealerDataIntegration.pdf.jpgGenerated Thumbnailimage/jpeg6071https://bibliotecadigital.udea.edu.co/bitstreams/ab1417f0-00c9-42da-9cde-391a92cc8e13/download3bd313e387587081ff824e95424d83d2MD55falseAnonymousREAD10495/37769oai:bibliotecadigital.udea.edu.co:10495/377692025-03-26 23:38:28.586http://creativecommons.org/licenses/by-nc-sa/2.5/co/open.accesshttps://bibliotecadigital.udea.edu.coRepositorio Institucional de la Universidad de Antioquiaaplicacionbibliotecadigitalbiblioteca@udea.edu.coTk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0Cm93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLAp0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZwp0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sCmluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlCnN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yCnB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZQp0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQKdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uCmFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LAp5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZQpjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdApzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkCndpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRApCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUKRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSApDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZQpzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMKbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo=