IA et data3 jours
Ingénierie des pipelines de données avec Apache Airflow
Concevez et exploitez des workflows de données planifiés, dépendants et observables avec Apache Airflow. Les travaux pratiques couvrent la structuration des DAG, la gestion des erreurs, les reprises et le déploiement de pipelines.
- Architecture et concepts Apache Airflow
- Création et structuration de DAG
- Opérateurs, tâches et dépendances
- Paramètres, connexions et secrets
- Gestion des erreurs, reprises et alertes
- Tests et bonnes pratiques de développement
- Déploiement et supervision d’un pipeline