Ingesta y procesado de inputs de información para la creación de un data lake / warehouse para la optimización de rentabilidad en una empresa de consultoría.

Abstract

Un data lake, almacén de datos, para una empresa de consultoría es una herra- mienta que se utiliza para la ingestión y procesamiento de inputs de información con el objetivo de crear un entorno centralizado y accesible que potencie la optimi- zación de rentabilidad. En esta tesis, se ha investigado y desarrollado un enfoque integral para la implementación de un data lake/warehouse en una empresa de consultoría, con el propósito de mejorar la gestión de datos y facilitar la toma de decisiones estratégicas. El sistema se basa en una arquitectura de microservicios, que ofrece así ventajas de escalabilidad, modularidad y mantenibilidad. A través del análisis de diferentes fuentes de datos y la aplicación de técnicas de extracción, transformación y carga (ETL), se ha logrado consolidar datos en bruto de diversas áreas y departamentos, proporcionando una base sólida para realizar análisis de- tallados y generar informes personalizados. Además, se han explorado casos de uso específicos, como el seguimiento de la rentabilidad de proyectos y la visualización de datos desglosados, y una tabla centralizada con las cargas por usuario y centro de coste, con el fin de demostrar el valor y las capacidades del data lake en el contexto de una empresa de consultoría. Los resultados obtenidos han demostrado que la implementación de un data lake/warehouse puede mejorar significativamen- te la eficiencia operativa, la toma de decisiones informadas y la optimización de la rentabilidad en una empresa de consultoría.

A data lake, a data warehouse, for a consulting company is a tool used for the ingestion and processing of information inputs with the aim of creating a centralized and accessible environment that enhances profitability optimization. In this thesis, a comprehensive approach for implementing a data lake/warehouse in a consulting company has been researched and developed, aiming to improve data management and facilitate strategic decision-making. The system is based on a microservices architecture, offering advantages such as scalability, modularity, and maintainability. Through the analysis of different data sources and the application of extraction, transformation, and loading (ETL) techniques, raw data from various areas and departments have been consolidated, providing a solid foundation for detailed analysis and generating customized reports. Additionally, specific use cases have been explored, such as project profitability tracking and the visualization of disaggregated data, or a centralized table with user loads and cost centers, in order to demonstrate the value and capabilities of the data lake in the context of a consulting company. The obtained results have shown that the implementation of a data lake/warehouse can significantly enhance operational efficiency, informed decision-making, and profitability optimization in a consulting company.