Base de datos en la nube Snowflake con ELT (Airflow + Python + Talend)

Resumen

En nuestro curso anterior Snowflake Masterclass [Demostraciones en tiempo real + Mejores prácticas + Laboratorios] profundizamos y comprendimos los fundamentos de Snowflake, resolvimos muchos ejercicios y comprendimos las mejores prácticas para cargar y descargar datos.

Programa de estudio

• Introducción a Snowflake y ELT
Descripción general de la arquitectura de Snowflake
Introducción a los conceptos de ELT
Configuración de tu entorno Snowflake
• Carga de Datos con Snowflake
Técnicas de ingesta de datos
Mejores prácticas para la carga de datos
Laboratorio práctico: Cargando datos en Snowflake
• Introducción a Apache Airflow
Comprensión de la arquitectura y componentes de Airflow
Configuración de un entorno de Airflow
Definición y programación de flujos de trabajo
• Integración de Airflow con Snowflake
Escritura y orquestación de DAGs para Snowflake
Monitoreo y mantenimiento de flujos de trabajo
Laboratorio práctico: Creando un DAG de Airflow para el pipeline de Snowflake
• Python para el Procesamiento de Datos
Fundamentos de Python para ETL/ELT
Uso de bibliotecas de Python (Pandas, NumPy) para transformación de datos
Laboratorio práctico: Scripts de transformación de datos con Python
• Talend para la Transformación de Datos
Introducción a Talend Studio
Diseño de flujos de trabajo de transformación de datos con Talend
Mejores prácticas para usar Talend con Snowflake
• Construcción de un Pipeline ELT de Extremo a Extremo
Integración de Airflow, Python y Talend para ELT
Orquestación de flujos de trabajo complejos
Laboratorio práctico: Construcción de un pipeline ELT de extremo a extremo
• Mejores Prácticas y Optimización
Optimización del rendimiento para procesos ELT
Consideraciones de seguridad con Snowflake
Resolución de problemas comunes en ELT
• Proyecto de Culminación
Diseño e implementación de una solución completa de ELT
Presentaciones y revisiones por pares
• Conclusión y Próximos Pasos
Resumen del curso y puntos clave
Recursos adicionales de aprendizaje y certificaciones

Enseñado por

Pradeep H C

Asignaturas

Negocio