dbt en Databricks

Resumen

Are you ready to unlock the full potential of your data analytics pipelines? dbt on Databricks is a comprehensive course tailored for data professionals aiming to master data transformation using dbt (data build tool) on the Databricks platform, harnessing the power of Apache Spark for scalable and efficient workflows.

Programa

• Introducción a dbt y Databricks
Visión general de dbt y su papel en la transformación de datos
Introducción a Databricks y Apache Spark
• Configuración de tu entorno
Instalación de dbt en Databricks
Configuración de perfiles de dbt para Databricks
• Fundamentos de dbt
Comprensión del flujo de trabajo de dbt
Escritura de modelos básicos de dbt
Uso de macros y variables
• Técnicas avanzadas de dbt
Implementación de pruebas y documentación
Estrategias para la optimización de modelos
Uso de ganchos y operaciones
• Aprovechamiento de Apache Spark con dbt
Visión general de la arquitectura de Apache Spark
Integración de Spark SQL con modelos de dbt
Gestión de grandes conjuntos de datos con Spark
• Implementación de dbt en Databricks
Ejecución de trabajos de dbt en cuadernos de Databricks
Programación y orquestación de ejecuciones de dbt en Databricks
• Calidad de datos y pruebas
Mejores prácticas para pruebas de datos en dbt
Automatización de pruebas en Databricks
• Depuración y optimización
Identificación y resolución de cuellos de botella de rendimiento
Perfilado y optimización de consultas con dbt y Spark
• Casos de uso y aplicaciones reales
Estudios de caso de implementaciones de dbt en Databricks
Historias de éxito de la industria
• Proyecto del curso
Diseño e implementación de una canalización de transformación de datos usando dbt en Databricks
Presentación y revisión por pares de proyectos
• Conclusión y siguientes pasos
Resumen de conceptos clave
Recursos para aprendizaje y desarrollo continuo

---

Impartido por

Malvik Vaghadia

---

Materias

Business