Aller au contenu

DAT-200 // NUMÉRIQUE

Fondamentaux de l'ETL et du data engineering

Construire des chaînes d'extraction, de transformation et de chargement fiables : sources, qualité, modélisation, orchestration, tests et documentation des flux de données.
14 h
Durée
Visio
Modalités
Sur devis
Tarif

Ce que vos équipes sauront faire.

  • Concevoir une chaîne de données : sources, transformations, cibles.
  • Extraire et charger des données depuis des fichiers, des bases et des API.
  • Transformer et historiser des données en SQL ou en Python.
  • Mettre en place des contrôles de qualité et une gestion des erreurs.
  • Orchestrer et documenter une chaîne de données.

Programme détaillé

  1. 01

    Concevoir — ETL et ELT

  2. 02

    Concevoir — Entrepôt et lac de données : notions

  3. 03

    Concevoir — Modélisation cible

  4. 04

    Concevoir — Données personnelles dans les flux

  5. 05

    Extraire, transformer, charger — Connexion aux sources

  6. 06

    Extraire, transformer, charger — Transformations SQL et Python

  7. 07

    Extraire, transformer, charger — Historisation

  8. 08

    Extraire, transformer, charger — Chargement incrémental

  9. 09

    Qualité et orchestration — Tests de qualité

  10. 10

    Qualité et orchestration — Gestion des erreurs et reprise

  11. 11

    Qualité et orchestration — Orchestration et planification

  12. 12

    Qualité et orchestration — Alertes

  13. 13

    Documenter et maintenir — Lignage

  14. 14

    Documenter et maintenir — Dictionnaire de données

  15. 15

    Documenter et maintenir — Versionnage

  16. 16

    Documenter et maintenir — Exploitation

PROTOCOLE // APPRENDRE

Méthodes

Démonstrations puis pratique immédiate sur des jeux de données réalistes. Cas fil rouge construit de module en module. Retours individuels par partage d'écran. Fiches mémo remises à chaque participant. Données personnelles : anonymisation, minimisation et droits d'accès rappelés à chaque exercice.

PROTOCOLE // MESURER

Évaluations

Pendant : conception relue, chaîne testée, défaillances détectées. En fin de formation : cas noté et quiz. Questionnaire de satisfaction à chaud.

ACCESSIBILITÉ // ADAPTATION

Une solution construite avec vous.

Les besoins d'aménagement sont étudiés avant la session avec notre référent handicap.

CADRE // INFORMATIONS VÉRIFIABLES

Préparer la formation sans zone d’ombre.

Reconnaissance délivrée

Attestation de fin de formation et certificat de réalisation. Cette formation ne prépare pas à une certification enregistrée au RNCP ou au répertoire spécifique.

Financement

Financement possible par l'entreprise ou son OPCO selon les règles applicables et après accord écrit. Aucune prise en charge n'est garantie avant cet accord.

Positionnement et adaptation

Questionnaire avant la session avec un court exercice : outils utilisés, sources de données, niveau en tableur ou en programmation, cas d'usage. Les jeux de données d'exercice sont choisis selon le secteur des participants.

Déroulement et moyens

Dates, horaires, lieu ou accès à distance sont confirmés dans la convocation. Le livret d'accueil, le règlement et les contacts utiles sont transmis avant la session.

Un ordinateur par participant. Base de données, Python et outil d'orchestration définis au cadrage. En classe virtuelle : connexion stable, webcam et micro ; un second écran est recommandé.

CANAL DIRECT // RAPPEL

Adaptons cette mission à votre entreprise.

Public, objectifs, contraintes et modalités : un échange court suffit pour cadrer la prochaine étape.

Parler de cette formation