Prenez contact avec nous
 Durée 16 heures

Plan du cours

Module 1 : Introduction à l'architecture et à la configuration des clusters Confluent Apache Kafka

  • Qu'est-ce qu'Apache Kafka et la plateforme Confluent ?
  • Fondamentaux du broker Kafka, des producteurs, des consommateurs et des sujets (topics)
  • Rôle de Kafka dans les pipelines de streaming de données et de messagerie
  • Extensions Confluent : REST Proxy, Schema Registry, Control Center
  • Architecture du cluster Kafka : brokers, partitions et réplication

Module 2 : Configuration du quorum Zookeeper

  • Qu'est-ce que Zookeeper ?
  • Rôle de Zookeeper dans un cluster Kafka
  • Taille du quorum Zookeeper
  • Configuration de Zookeeper
  • Mise en œuvre de SSH sur nos serveurs
  • Pratique : Configuration de Zookeeper (en tant qu'équipe et en tant que service)
  • Utilisation de l'interface en ligne de commande (CLI) de Zookeeper
  • Pratique : Mise en place du quorum Zookeeper
  • Système de fichiers interne de Zookeeper
  • Facteurs de performance affectant Zookeeper
  • Démo : Outils de gestion Zookeeper et Zoonavigator

Module 3 : Configuration du cluster Kafka

  • Bases de Kafka
  • Configuration de Kafka
  • Pratique : Configuration de Kafka sur un broker unique
  • Pratique : Exécution de commandes Kafka
  • Pratique : Configuration multi-brokers (cluster) de Kafka
  • Pratique : Tests du cluster Kafka
  • Comment se connecter à mon cluster Kafka ?
  • Configuration Advertised.listeners : paramètre clé
  • Configuration des sujets (topics)
  • Configuration de l'ingestion et de la livraison des messages dans les sujets
  • Pratique : Démonstration de la résilience de Kafka
  • Performance de Kafka : E/S, réseau, RAM, CPU, OS
  • Performance de Kafka : autres facteurs
  • Pratique : Comment modifier les configurations du broker

Module 4 : Configuration avancée de Kafka

  • Configuration de Landoop Kafka Topics UI, Confluent REST Proxy et Confluent Schema Registry
  • Envoi et réception de messages (CLI, Java, Spring Framework)
  • Outils de métriques et de surveillance (Confluent Control Center, Elasticsearch, etc.)
  • Fichiers journaux et gestion des offsets
  • Haute disponibilité et reprise sur sinistre
  • Assurer la haute disponibilité par la réplication
  • Ajustement des performances (producteur/consommateur)
  • Stratégies de reprise sur sinistre
  • Contrôle de la bascule (failover) et récupération des données
  • Configuration des connecteurs
  • Implémentation de Kafka Connect
  • Fonctionnalités de sécurité de Kafka

Résumé et prochaines étapes

Pré requis

  • Expérience avec les systèmes basés sur Linux et les outils en ligne de commande
  • Connaissance des concepts de systèmes distribués
  • Compréhension de la configuration réseau de base et des systèmes

Public cible

  • Équipes DevOps et SRE gérant des déploiements Kafka
  • Administrateurs système travaillant avec Confluent et Zookeeper
  • Développeurs et architectes Kafka responsables de systèmes évolutifs

Nombre de participants


Prix par participant

Nos clients témoignent (2)

Cours à venir

Catégories Similaires