Formation Confluent Apache Kafka : Opérations de cluster et configuration

Confluent Apache Kafka est une plateforme de streaming d'événements distribuée conçue pour les pipelines de données à fort débit, tolérants aux pannes, ainsi que pour l'analyse en temps réel.

Cette formation en présentiel ou à distance, animée par un instructeur, s'adresse aux administrateurs système et aux professionnels DevOps de niveau intermédiaire souhaitant installer, configurer, surveiller et dépanner des clusters Confluent Apache Kafka.

À l'issue de cette formation, les participants seront en mesure de :

• Comprendre les composants et l'architecture de Confluent Kafka.
• Déployer et gérer les brokers Kafka, les quorums Zookeeper et les services essentiels.
• Configurer des fonctionnalités avancées incluant la sécurité, la réplication et l'optimisation des performances.
• Utiliser des outils de gestion pour surveiller et maintenir les clusters Kafka.

Format de la formation

• Conférence interactive et discussions.
• Nombreux exercices et mises en pratique.
• Mise en œuvre concrète dans un environnement de laboratoire en direct.

Options de personnalisation du cours

• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter afin d'organiser cela.

Cette formation en présentiel ou en ligne, animée par un formateur expert, s'adresse aux développeurs souhaitant intégrer Apache Kafka à leurs bases de données et applications existantes pour le traitement, l'analyse, etc.

À l'issue de cette formation, les participants seront capables de :

• Utiliser Kafka Connect pour ingérer de grandes quantités de données provenant d'une base de données vers des sujets Kafka.
• Ingérer les données de journal générées par des serveurs d'applications vers des sujets Kafka.
• Rendre toutes les données collectées disponibles pour le traitement en flux continu.
• Exporter des données depuis les sujets Kafka vers des systèmes secondaires pour le stockage et l'analyse.

Cette formation en direct, animée par un instructeur (en ligne ou sur site), s'adresse aux ingénieurs qui souhaitent utiliser Confluent (une distribution de Kafka) pour concevoir et gérer une plateforme de traitement de données en temps réel pour leurs applications.

À l'issue de cette formation, les participants seront capables de :

• Installer et configurer Confluent Platform.
• Utiliser les outils de gestion et les services de Confluent pour faciliter l'exécution de Kafka.
• Stocker et traiter les données en flux entrant.
• Optimiser et gérer des clusters Kafka.
• Sécuriser les flux de données.

Format de la formation

• Cours interactif et discussions.
• Nombreux exercices et mises en pratique.
• Mise en œuvre pratique dans un environnement de laboratoire en direct.

Options de personnalisation de la formation

• Ce cours est basé sur la version open source de Confluent : Confluent Open Source.
• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter afin de l'organiser.

Apache Kafka est une plateforme de streaming distribuée. Elle est devenue le standard de facto pour la construction de pipelines de données et répond à de nombreux cas d’usage en matière de traitement des données : elle peut être utilisée comme file d’attente de messages, journal distribué, processeur de flux, etc.

Nous commencerons par quelques notions théoriques sur les pipelines de données en général, puis nous aborderons les concepts fondamentaux sous-jacents à Kafka. Nous découvrirons également des composants importants tels que Kafka Streams et Kafka Connect.

Lors de cette formation en présentiel ou à distance dans Belgique, animée par un formateur expérimenté, les participants apprendront à configurer et à intégrer différents frameworks de traitement de flux avec les systèmes existants de stockage de données volumineuses (big data), ainsi qu'avec les applications logicielles et les microservices associés.

À l'issue de cette formation, les participants seront en mesure de :

• Installer et configurer différents frameworks de traitement de flux, tels que Spark Streaming et Kafka Streaming.
• Comprendre et sélectionner le framework le plus adapté à chaque besoin.
• Traiter les données de manière continue, concurrente et enregistreament par enregistrement.
• Intégrer des solutions de traitement de flux avec des bases de données, des entrepôts de données, des lacs de données, etc., existants.
• Intégrer la bibliothèque de traitement de flux la plus appropriée aux applications d'entreprise et aux microservices.

Ce cours s'adresse aux architectes d'entreprise, aux développeurs, aux administrateurs système et à toute personne souhaitant comprendre et utiliser un système de messagerie distribué à haut débit. Si vous avez des exigences plus spécifiques (par exemple, uniquement du côté administration système), ce cours peut être adapté à vos besoins.

Cette formation en présentiel ou en ligne, animée par un formateur, dans Belgique s'adresse aux administrateurs système et ingénieurs d'exploitation de niveau débutant / intermédiaire / avancé souhaitant utiliser Apache Kafka pour déployer, sécuriser, surveiller et résoudre les problèmes des clusters Kafka.

À l'issue de cette formation, les participants seront capables d'expliquer l'architecture de Kafka et le mode KRaft, d'exploiter et sécuriser les clusters Kafka, de surveiller les performances et la fiabilité, et de résoudre les problèmes courants en production.

Cette formation en présentiel ou en ligne, dirigée par un formateur, est destinée aux développeurs de niveau intermédiaire qui souhaitent développer des applications Big Data avec Apache Kafka.

À l'issue de cette formation, les participants seront capables de :

• Développer des producteurs et des consommateurs Kafka pour envoyer et lire des données à partir de Kafka.
• Intégrer Kafka avec des systèmes externes en utilisant Kafka Connect.
• Écrire des applications de streaming avec Kafka Streams et ksqlDB.
• Intégrer une application cliente Kafka à Confluent Cloud pour des déploiements Kafka dans le cloud.
• Acquérir une expérience pratique grâce à des exercices pratiques et des cas d'utilisation concrets.

Cette formation en direct dirigée par un instructeur à Belgique (en ligne ou sur site) s'adresse aux ingénieurs des données, aux scientifiques des données et aux programmeurs souhaitant utiliser les fonctionnalités d'Apache Kafka pour le streaming de données avec Python.

À l'issue de cette formation, les participants seront capables d'utiliser Apache Kafka pour surveiller et gérer les conditions dans des flux de données continus à l'aide du langage de programmation Python.

Cette formation en présentiel ou à distance Belgique animée par un formateur s'adresse aux développeurs Java de niveau intermédiaire souhaitant intégrer Apache Kafka dans leurs applications pour un messagerie fiable, évolutive et à haut débit.

À l'issue de cette formation, les participants seront capables de :

• Comprendre l'architecture et les composants principaux de Kafka.
• Mettre en place et configurer un cluster Kafka.
• Produire et consommer des messages avec Java.
• Implémenter Kafka Streams pour le traitement de données en temps réel.
• Assurer la tolérance aux pannes et l'évolutivité des applications Kafka.

Cette formation en direct, encadrée par un formateur à Belgique (en ligne ou sur site), s'adresse aux administrateurs système de niveau intermédiaire qui souhaitent exploiter efficacement les fonctionnalités de file d'attente de messages de Kafka.

À l'issue de cette formation, les participants seront capables de :

• Comprendre les capacités et l'architecture de Kafka en matière de file d'attente de messages.
• Configurer les sujets Kafka pour des scénarios de file d'attente de messages.
• Produire et consommer des messages à l'aide de Kafka.
• Surveiller et gérer Kafka en tant que file d'attente de messages.

Cette formation en direct, animée par un instructeur en Belgique (en ligne ou sur site), s'adresse aux testeurs logiciels souhaitant intégrer des mesures de sécurité réseau dans une application Apache Kafka.

À l'issue de cette formation, les participants seront capables de :

• Déployer Apache Kafka sur un serveur basé sur le cloud.
• Mettre en œuvre le chiffrement SSL pour prévenir les attaques.
• Ajouter l'authentification ACL pour suivre et contrôler l'accès des utilisateurs.
• Garantir que les clients dignes de confiance puissent accéder aux clusters Kafka grâce à l'authentification SSL et SASL.

Cette formation en direct, encadrée par un formateur, à Belgique (en ligne ou en présentiel), s'adresse aux développeurs de niveau intermédiaire souhaitant acquérir les bases de Kafka et l'intégrer avec Spring Boot.

À l'issue de cette formation, les participants seront capables de :

• Comprendre Kafka et son architecture.
• Apprendre à installer, configurer et mettre en place un environnement Kafka de base.
• Intégrer Kafka avec Spring Boot.

Kafka Streams est une bibliothèque côté client permettant de développer des applications et des microservices dont les données transitent par un système de messagerie Kafka. Traditionnellement, Apache Kafka s'appuyait sur Apache Spark ou Apache Storm pour traiter les données entre les producteurs et les consommateurs de messages. En appelant l'API Kafka Streams au sein d'une application, il est possible de traiter les données directement au sein de Kafka, sans avoir à les envoyer vers un cluster dédié au traitement.

Lors de cette formation dirigée par un instructeur, les participants apprendront à intégrer Kafka Streams dans un ensemble d'exemples d'applications Java qui échangent des données avec Apache Kafka pour le traitement de flux.

À l'issue de cette formation, les participants seront capables de :

• Comprendre les fonctionnalités et les avantages de Kafka Streams par rapport à d'autres frameworks de traitement de flux
• Traiter les données de flux directement au sein d'un cluster Kafka
• Développer une application ou un microservice Java ou Scala intégrant Kafka et Kafka Streams
• Rédiger un code concis transformant des sujets Kafka d'entrée en sujets Kafka de sortie
• Construire, conditionner et déployer l'application

Public cible

• Développeurs

Format de la formation

• Alternance de cours théoriques, d'échanges, d'exercices et d'une forte pratique expérimentale

Remarques

• Pour demander une formation personnalisée pour ce cours, veuillez nous contacter afin de l'organiser

Cette formation en direct, dirigée par un formateur, <lieu> (en ligne ou sur site), s'adresse aux administrateurs système de niveau débutant à intermédiaire souhaitant apprendre à gérer efficacement les sujets Kafka pour un streaming et un traitement de données optimaux.

À l'issue de cette formation, les participants seront capables de :

• Comprendre les fondamentaux et l'architecture des sujets Kafka.
• Créer, configurer et gérer les sujets Kafka.
• Surveiller les sujets Kafka en termes de santé, de performance et de disponibilité.
• Mettre en œuvre des mesures de sécurité pour les sujets Kafka.