Prenez contact avec nous
 Durée 21 heures

Plan du cours

Module 1 : Introduction à l'architecture et à la configuration du cluster Confluent Apache Kafka

  • Le rôle de Kafka dans les pipelines de données modernes
  • Différences entre Apache Kafka et Confluent Kafka
  • Composants principaux : producteurs, consommateurs, brokers, sujets (topics), partitions
  • Modèles de déploiement des clusters Kafka et considérations de mise à l'échelle

Module 2 : Configuration du quorum Zookeeper

  • Qu'est-ce que Zookeeper ?
  • Le rôle de Zookeeper dans un cluster Kafka
  • Taille du quorum Zookeeper
  • Configuration de Zookeeper
  • Mise en œuvre de SSH sur nos serveurs
  • Pratique : Configuration de Zookeeper (en tant qu'équipe et en tant que service)
  • Utilisation de l'interface en ligne de commande (CLI) de Zookeeper
  • Pratique : Configuration du quorum Zookeeper
  • Système de fichiers interne de Zookeeper
  • Facteurs de performance affectant Zookeeper
  • Démonstration d'outils de gestion pour Zookeeper et Zoonavigator

Module 3 : Configuration du cluster Kafka

  • Concepts de base de Kafka
  • Configuration de Kafka
  • Pratique : Configuration des brokers Kafka
  • Pratique : Exécution des commandes Kafka
  • Pratique : Configuration d'un cluster Kafka multi-brokers
  • Pratique : Tests du cluster Kafka
  • Puis-je me connecter à mon cluster Kafka ?
  • Configuration des Advertised.listeners : le paramètre le plus important
  • Configuration des sujets (topics)
  • Configuration pour le téléchargement et l'ingestion de messages dans les sujets
  • Pratique : Démonstration de la résilience de Kafka
  • Performances de Kafka : E/S (I/O)
  • Performances de Kafka : Réseau (RED)
  • Performances de Kafka : RAM
  • Performances de Kafka : CPU
  • Performances de Kafka : Système d'exploitation (OS)
  • Performances de Kafka : Autres facteurs
  • Pratique : Comment modifier la configuration des brokers Kafka

Module 4 : Configuration avancée de Kafka

  • Interface utilisateur des sujets Kafka Landoop, configuration de Confluent REST Proxy et de Confluent Schema Registry
  • Envoi et réception de messages (CLI, Java et framework Spring)
  • Métriques de surveillance et outils (Confluent Control Center, Elasticsearch, etc.)
  • Fichiers journaux (logs) et gestion des décalages (offsets)
  • Haute disponibilité et reprise après sinistre
  • Assurance de la haute disponibilité par la réplication
  • Optimisation des performances des producteurs et des consommateurs
  • Stratégies de reprise après sinistre
  • Contrôle de la bascule (failover) et récupération des données
  • Configuration des connecteurs
  • Mise en œuvre de Kafka Connect
  • Fonctionnalités de sécurité de Kafka

Résumé et prochaines étapes

Pré requis

  • Connaissance des systèmes distribués et des concepts de messagerie
  • Expérience de l'utilisation de la ligne de commande Linux
  • Compréhension de base du réseautage et de l'administration système

Public cible

  • Administrateurs système
  • Ingénieurs DevOps
  • Équipes plateforme et infrastructure

Nombre de participants


Prix par participant

Nos clients témoignent (2)

Cours à venir

Catégories Similaires