Prenez contact avec nous
 Durée 16 heures

Plan du cours

Module 1 : Introduction à l'architecture Confluent Apache Kafka et à la configuration du cluster

  • Qu'est-ce qu'Apache Kafka et la plateforme Confluent ?
  • Notions de base sur le broker Kafka, les producteurs, les consommateurs et les sujets (topics)
  • Le rôle de Kafka dans les pipelines de flux de données et de messagerie
  • Extensions Confluent : REST Proxy, Schema Registry, Control Center
  • Architecture du cluster Kafka : brokers, partitions et réplication

Module 2 : Configuration du quorum Zookeeper

  • Qu'est-ce que Zookeeper ?
  • Le rôle de Zookeeper dans un cluster Kafka
  • Taille du quorum Zookeeper
  • Configuration de Zookeeper
  • Mise en œuvre de SSH sur nos serveurs
  • Pratique : Configuration de Zookeeper (en tant qu'équipe et en tant que service)
  • Utilisation de l'interface en ligne de commande (CLI) de Zookeeper
  • Pratique : Mise en place du quorum Zookeeper
  • Système de fichiers interne de Zookeeper
  • Facteurs de performance affectant Zookeeper
  • Démo : Outils de gestion de Zookeeper et Zoonavigator

Module 3 : Configuration du cluster Kafka

  • Notions de base de Kafka
  • Configuration de Kafka
  • Pratique : Configuration de Kafka sur un seul broker
  • Pratique : Exécution des commandes Kafka
  • Pratique : Configuration multi-brokers (cluster) de Kafka
  • Pratique : Tests du cluster Kafka
  • Puis-je me connecter à mon cluster Kafka ?
  • Configuration de Advertised.listeners : paramétrage clé
  • Configuration des sujets (topics)
  • Mise en place de l'ingestion et de la livraison des messages dans les sujets
  • Pratique : Démonstration de la résilience de Kafka
  • Performances de Kafka : E/S, réseau, RAM, CPU, système d'exploitation
  • Performances de Kafka : autres facteurs
  • Pratique : Comment modifier les configurations du broker

Module 4 : Configuration avancée de Kafka

  • Configuration de Landoop Kafka Topics UI, Confluent REST Proxy, Confluent Schema Registry
  • Envoi et réception de messages (CLI, Java, Spring Framework)
  • Outils de métriques et de surveillance (Confluent Control Center, Elasticsearch, etc.)
  • Fichiers journaux et gestion des décalages (offsets)
  • Haute disponibilité et reprise après sinistre
  • Assurer la haute disponibilité par la réplication
  • Ajustement des performances (producteur/consommateur)
  • Stratégies de reprise après sinistre
  • Contrôle de la bascule et récupération des données
  • Mise en place des connecteurs
  • Implémentation de Kafka Connect
  • Fonctionnalités de sécurité de Kafka

Résumé et prochaines étapes

Pré requis

  • Expérience des systèmes basés sur Linux et des outils en ligne de commande
  • Connaissance des concepts des systèmes distribués
  • Compréhension des bases du réseau et de la configuration système

Public cible

  • Équipes DevOps et SRE gérant des déploiements Kafka
  • Administrateurs système travaillant avec Confluent et Zookeeper
  • Développeurs et architectes Kafka responsables de systèmes évolutifs

Nombre de participants


Prix par participant

Nos clients témoignent (2)

Cours à venir

Catégories Similaires