Data Lake Comfama

Abstract

RESUMEN : Con el objetivo de establecer a Comfama como una empresa data céntrica, se inicia un proyecto de consolidar toda la información de la empresa en un único lago de datos consolidado. Para esto se decide utilizar las herramientas ofrecidas por Microsoft con su plataforma Azure, un conjunto de herramientas en la nube que ayudan realizar Pipelines, ETLs, procesamiento y analítica de datos. Para este proyecto en especial se va a usar la herramienta Azure Synapse para el transporte de la información en un único Pool de SQL, consolidando así el lago de datos un único lugar, dando el primer paso para facilitar el análisis de los datos para la toma de decisiones.

ABSTRACT : With the aim of establishing Comfama as a data-centric company, a project is initiated to consolidate all the company's information into a single consolidated data lake. It was decided to use the tools offered by Microsoft with its Azure platform, a set of cloud tools that help perform Pipelines, ETLs, data processing and analytics. For this project, the Azure Synapse tool will be used to transport information in a single SQL Pool, thus consolidating the data lake in a single place, taking the first step to facilitate the analysis of data for decision making.