Prenez contact avec nous

Plan du cours

Architecture d'entreprise et conception de pipelines

  • Architectures ETL multicouches
  • Conception de composants modulaires et réutilisables
  • Approches hybrides entre les différents systèmes

Ingénierie des performances avancée

  • Optimisation au niveau des étapes
  • Stratégies de parallélisme et de threading
  • Surveillance des pipelines soumis à une forte charge

Automatisation, scripting et extensions personnalisées

  • Scripting au sein des transformations
  • Développement de plugins personnalisés
  • Extension des fonctionnalités de PDI avec Java et JavaScript

Traitement de données complexes et intégrations

  • Intégrations en temps réel et en streaming
  • Travail avec les plateformes de big data
  • Traitement avancé des fichiers et des API

Gouvernance des données, sécurité et conformité

  • Sécurisation des transformations et des identifiants de connexion
  • Lignée et traçabilité des données
  • Considérations réglementaires et de conformité

Orchestration et planification d'entreprise

  • Gestion de grands réseaux de tâches
  • Conception de la récupération d'erreurs et de la bascule (failover)
  • Orchestration au niveau de l'environnement

Dépôt (Repository), contrôle de version et CI/CD

  • Stratégies de dépôt d'entreprise
  • Intégration de PDI avec Git
  • Modèles de déploiement continu

Déploiement, surveillance et opérations de production

  • Promotion des solutions entre les différents environnements
  • Outils opérationnels et tableaux de bord
  • Préparation à la production de bout en bout

Synthèse et prochaines étapes

Pré requis

  • Compréhension des pipelines ETL et de la modélisation des données
  • Expérience avec les transformations PDI de niveau intermédiaire
  • Compétences solides en SQL et en scripting

Public cible

  • Ingénieurs de données seniors
  • Architectes ETL
  • Professionnels gérant des charges d'intégration de données complexes
 21 Heures

Nombre de participants


Prix par participant

Nos clients témoignent (1)

Cours à venir

Catégories Similaires