Ingeniería de Calidad de Datos: Pruebas de ETL y Data Warehouse

En una era impulsada por los datos, las organizaciones confían en información precisa para tomar decisiones críticas y entrenar modelos de inteligencia artificial. Los ingenieros de Aseguramiento de Calidad (QA) de Datos garantizan que los pipelines de datos permanezcan confiables, limpios y libres de errores desde el origen hasta el destino. Este curso proporciona una introducción completa a las pruebas de data warehouses y pipelines ETL/ELT. Pasará de comprender la arquitectura de datos central a diseñar, ejecutar y documentar estrategias sólidas de validación de datos que mantengan los pipelines de datos funcionando sin problemas. Lo que aprenderá: - Comprender la arquitectura fundamental de los data warehouses, el modelado dimensional y los esquemas. - Comparar patrones modernos de ETL y ELT, identificando cuándo aplicar cada uno en entornos modernos basados en la nube. - Diseñar casos de prueba completos para pipelines de datos, incluida la validación de Dimensiones de Cambio Lento (SCDs). - Aplicar consultas SQL para realizar reconciliación de datos, verificaciones de duplicados y validación de valores nulos. - Analizar los requisitos de calidad de datos para entrenar modelos de aprendizaje automático y Modelos de Lenguaje Grandes (LLMs) para prevenir sesgos y alucinaciones. - Practicar la implementación de verificaciones estructuradas de calidad de datos utilizando principios de prueba estándar de la industria. Comenzará explorando los conceptos centrales de los data warehouses y los patrones arquitectónicos fundamentales. A partir de ahí, progresará a través de escenarios de prueba prácticos, aprendiendo a escribir scripts de validación SQL y a garantizar la integridad del pipeline en entornos modernos. Este curso está diseñado para aspirantes a ingenieros de QA de datos, probadores de software que transicionan a roles de datos y analistas de datos que desean garantizar la integridad del pipeline. Una comprensión básica de SQL es útil, ya que leerá y escribirá consultas de prueba a lo largo del material. Comience su viaje en la ingeniería de calidad de datos y aprenda hoy mismo a asegurar la integridad de los pipelines de datos modernos.