Data Engineering
Data Engineering — Praticien
Industrialisez vos flux de données avec Azure Data Factory et un Data Warehouse cloud.
Vous construisez des pipelines ETL et ELT alimentant un Data Warehouse sur Azure, orchestrés avec Data Factory. Le fil rouge est un pipeline cloud de bout en bout, de la source au modèle prêt pour l'analyse.
Objectifs
- Concevoir des pipelines ETL et ELT robustes
- Alimenter un Data Warehouse structuré
- Orchestrer des flux avec Azure Data Factory
- Superviser et fiabiliser des traitements planifiés
Programme
ETL et ELT
- Comparaison des approches ETL et ELT
- Transformations et staging
- Gestion des incréments
Data Warehouse
- Modélisation dimensionnelle
- Chargement des faits et dimensions
- Optimisation des requêtes
Azure Data Factory
- Pipelines, activités et déclencheurs
- Connexions aux sources cloud et locales
- Pipeline cloud de bout en bout
Prérequis
Bonnes bases en SQL et Python.