Azure Data Factory – Orchestrer vos flux

Azure Data Factory (ADF) est le service d’intégration de données de Microsoft Azure : il permet de copier, transformer et orchestrer des données entre des dizaines de sources, dans le cloud comme sur site.

Cette formation vous apprend à concevoir des pipelines fiables et paramétrables, à les planifier et à les superviser, avec les bonnes pratiques de nos projets de migration vers Azure et Microsoft Fabric.

Un consultant ADBI alterne démonstrations et travaux pratiques sur un environnement Azure d’entraînement.

Bonne pratique du SQL et notions d’intégration de données (ETL ou ELT). Une première découverte de Microsoft Azure est utile.

• Objectifs pédagogiques
  • Comprendre l’architecture d’Azure Data Factory
  • Concevoir des pipelines de copie et de transformation
  • Paramétrer, planifier et superviser les traitements
  • Industrialiser le déploiement des pipelines
• Objectifs opérationnels
  • Créer des services liés, jeux de données et pipelines
  • Copier des données entre sources cloud et sur site
  • Transformer les données avec les data flows
  • Rendre un pipeline générique grâce aux paramètres et aux expressions
  • Gérer les erreurs, les reprises et les alertes
  • Déployer avec Git et l’intégration continue

PLAN PÉDAGOGIQUE

Jour 1

• Découvrir Azure Data Factory
  • Place d’ADF dans l’écosystème Azure et Microsoft Fabric
  • Concepts : pipelines, activités, jeux de données, services liés, runtimes d’intégration
  • Prise en main du studio ADF
• Copier les données
  • Activité de copie : sources, destinations, formats
  • Runtime d’intégration auto-hébergé pour les sources sur site
  • Chargements incrémentaux : filigrane et capture des changements
  • Travaux pratiques : alimenter un lac de données
• Transformer
  • Data flows : jointures, agrégations, colonnes dérivées
  • Appeler des traitements externes : procédures stockées, notebooks

Jour 2

• Pipelines génériques
  • Paramètres, variables et expressions
  • Boucles et conditions : ForEach, If, Switch
  • Pipelines pilotés par des métadonnées
• Planifier et superviser
  • Déclencheurs : planification, fenêtre bascule, événements
  • Supervision, journaux et alertes
  • Gestion des erreurs et reprises
• Industrialiser
  • Intégration Git, environnements et déploiement continu
  • Sécurité : identités managées et coffre de clés
  • Coûts : comprendre et maîtriser la facturation
  • Atelier de synthèse : chaîne complète d’alimentation d’un entrepôt

À l’issue de chaque module, le formateur évaluera chacun des participants en fonction des cas pratiques et exercices effectués

À la fin de la formation tous les participants recevront une attestation de formation

Les personnes en situation de handicap sont invitées à nous communiquer leurs besoins spécifiques. Nous ferons tout pour les mettre dans les meilleures conditions de suivi de la formation (compensation, accessibilité…)

Sessions inter-entreprises : nous consulter pour les prochaines dates (2 jours).

Cette formation peut être organisée en intra, pour votre seule équipe, en présentiel dans nos locaux. Pour ce faire, merci d’utiliser le formulaire de contact afin que nos équipes organisent avec vous une formation sur mesure selon vos disponibilités et vos besoins.

Délai d’accès : 2 à 4 semaines entre la demande et le début de la formation.

Inscription au plus tard 10 jours avant le début de la session, afin de garantir votre place ainsi qu’une préparation et un accueil de qualité.

Merci de nous contacter au 01 86 95 71 60 ou à l’adresse formation@adbi.fr