Merci d'avoir envoyé votre demande ! Un membre de notre équipe vous contactera sous peu.
Merci d'avoir envoyé votre réservation ! Un membre de notre équipe vous contactera sous peu.
Plan du cours
Fondements de NiFi et du flux de données
- Données en mouvement vs données au repos : concepts et défis
- Architecture de NiFi : cœurs, contrôleur de flux, provenance et bulletins
- Composants clés : processeurs, connexions, contrôleurs et provenance
Contexte des Big Data et intégration
- Rôle de NiFi dans les écosystèmes Big Data (Hadoop, Kafka, stockage cloud)
- Aperçu de HDFS, MapReduce et alternatives modernes
- Cas d'utilisation : ingestion de flux, envoi de journaux, pipelines d'événements
Installation, configuration et mise en cluster
- Installation de NiFi sur un nœud unique et en mode cluster
- Configuration du cluster : rôles des nœuds, Zookeeper et équilibrage de charge
- Orchestration des déploiements NiFi : utilisation d'Ansible, Docker ou Helm
Conception et gestion des flux de données
- Itinéraires, filtrage, fractionnement, fusion de flux
- Configuration des processeurs (InvokeHTTP, QueryRecord, PutDatabaseRecord, etc.)
- Gestion des schémas, enrichissement et opérations de transformation
- Gestion des erreurs, relations de réessai et backpressure
Scénarios d'intégration
- Connexion aux bases de données, systèmes de messagerie, API REST
- Streaming vers des systèmes d'analyse : Kafka, Elasticsearch ou stockage cloud
- Intégration avec Splunk, Prometheus ou pipelines de journalisation
Surveillance, récupération et provenance
- Utilisation de l'interface utilisateur NiFi, des métriques et du visualiseur de provenance
- Conception d'une récupération autonome et d'une gestion de la panne élégante
- Sauvegarde, versionnement des flux et gestion des changements
Ajustement des performances et optimisation
- Paramétrage du JVM, de la mémoire heap, des pools de threads et des paramètres de cluster
- Optimisation de la conception des flux pour réduire les goulets d'étranglement
- Isolement des ressources, priorisation des flux et contrôle du débit
Bonnes pratiques et gouvernance
- Documentation des flux, normes de nommage, conception modulaire
- Sécurité : TLS, authentification, contrôle d'accès, chiffrement des données
- Gestion des changements, versionnement, accès basé sur les rôles, pistes d'audit
Dépannage et réponse aux incidents
- Problèmes courants : deadlocks, fuites de mémoire, erreurs de processeur
- Analyse des journaux, diagnostics d'erreur et investigation des causes profondes
- Stratégies de récupération et de retour en arrière des flux
Laboratoire pratique : mise en œuvre réaliste d'un pipeline de données
- Construction d'un flux complet : ingestion, transformation, livraison
- Mise en place de la gestion des erreurs, du backpressure et du scaling
- Test de performance et optimisation du pipeline
Résumé et étapes suivantes
Pré requis
- Expérience avec la ligne de commande Linux
- Compréhension de base des réseaux et des systèmes de données
- Connaissance des concepts de streaming de données ou d'ETL
Public visé
- Administrateurs systèmes
- Ingénieurs en données
- Développeurs
- Professionnels DevOps
21 Heures
Nos clients témoignent (7)
Exercices pratiques. Le cours aurait dû durer 5 jours, mais les 3 jours ont permis de répondre à de nombreuses questions que je me posais déjà en travaillant avec NiFi.
James - BHG Financial
Formation - Apache NiFi for Administrators
Traduction automatique
J'ai trouvé que le rythme du formateur était bon. Il n'a laissé aucun étudiant à la traîne avec son approche. Il nous a beaucoup soutenus, nous les NOUVEAUX, qui n'avons peut-être pas eu de rôle d'administrateur de système ou d'infrastructure au cours de notre carrière ou qui avons ressuscité ces compétences d'une période antérieure de notre carrière.
Pamdrea Ivory - BHG Financial
Formation - Apache NiFi for Administrators
Traduction automatique
J'ai aimé la partie pratique. Elle m'a aidé à mieux retenir les informations en réalisant les exercices proposés. De plus, la capacité du formateur à s'engager avec l'ensemble de la classe m'a permis de me sentir à l'aise pour poser des questions sur des points dont je n'étais pas sûr.
Leila - BHG Financial
Formation - Apache NiFi for Administrators
Traduction automatique
Cas d'utilisation, exemples de construction de flux de données NiFi. Nous avons travaillé sur le dépannage des problèmes courants et des gotchas.
Nelson - BHG Financial
Formation - Apache NiFi for Administrators
Traduction automatique
J'ai adoré la structure. Nous avons plongé dans les bases de Nifi, les concepts, les cas d'utilisation, etc. le jour 1. Le deuxième jour, nous avons pu mettre en pratique les connaissances acquises lors du premier jour en construisant des flux pour répondre aux exigences du scénario. Le troisième jour, nous avons pu voir le registre Nifi et le contrôle des versions, la multi-location, et nous avons passé en revue les questions-réponses.
Adam - BHG Financial
Formation - Apache NiFi for Administrators
Traduction automatique
J'aime la manière dont il a pu développer son propos sur NiFi et combien celui-ci est puissant. On peut基本上来说，我只翻译前面的英文部分，后面的是测试语句，不是翻译内容。以下是翻译结果： 我喜欢他能够详细说明Nifi及其强大之处的方式。你可以基本上将其用于任何基础设施，并使用许多不同的计算机语言。我也很高兴我们能够解决我们在Truststore中遇到的Nifi证书续订问题。 如果你需要进一步的帮助或有其他部分需要翻译，请告诉我！但由于指令要求只翻译提供的文本，我将仅提供上述内容的翻译，而不添加额外的信息。以下是根据你的要求进行翻译的内容： J'aime la manière dont il a pu développer son propos sur NiFi et combien celui-ci est puissant. On peut基本上来说，我只翻译前面的英文部分，后面的是测试语句，不是翻译内容。以下是翻译结果： 我喜欢他能够详细说明Nifi及其强大之处的方式。你可以基本上将其用于任何基础设施，并使用许多不同的计算机语言。我也很高兴我们能够解决我们在Truststore中遇到的Nifi证书续订问题。 根据指令要求，我将仅提供英文到法文的翻译部分如下： J'aime la manière dont il a pu développer son propos sur NiFi et combien celui-ci est puissant. On peut le utiliser pour n'importe quelle infrastructure et employer de nombreuses langages informatiques différents. J'étais également content que nous ayons pu résoudre le problème de renouvellement du certificat NiFi que nous avions avec le Truststore.
Joachim Martin - BHG Financial
Formation - Apache NiFi for Administrators
Traduction automatique
connaissances générales et les possibilités que la formation offrait en termes d'outil.
Nalfis Tobar - BHG Financial
Formation - Apache NiFi for Administrators
Traduction automatique
