Formation Kafka - Développement
Public admis
- Salarié en Poste
- Demandeur d'emploi
- Entreprise
- Etudiant
Financements
Eligible CPF Votre OPCO Financement personnel
Objectifs de la formation
À l'issue de cette formation Apache Kafka, vous serez en mesure de :
- Comprendre l’architecture en cluster de Kafka
- Différencier ces différents cas d’utilisation
- Utiliser les APIs Kafka de production/consommation de messages
- Utiliser les APIs Kafka Connect/ Kafka Admin
- Aborder les APIs Kafka Stream et le serveur kSQLDB
- Configurer les topics en fonctions des contraintes de fiabilité et de débit de vos applications
| Tarif |
A partir de 2 100,00 € |
| Durée | 3 jours (21h) |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
| Tarif |
A partir de 2 100,00 € |
| Durée | 3 jours (21h) |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
Description
Apache Kafka est un système de messagerie distribuée construit pour supporter des flux d’évènements liés au Big Data. Développé initialement par LinkedIn, il est dorénavant distribué en Open Source par la fondation Apache et connaît un fort déploiement en entreprise.
Cette formation orientée développeur et architectes a pour vocation de faire comprendre les cas d’utilisation d’Apache Kafka et de proposer de nombreux ateliers pratiques permettant de se familiariser avec les différentes APIs de Kafka, et les principales configurations possibles pour les producteurs et consommateurs de message.
Programme
Introduction à Apache Kafka
Naissance, historique, objectifs du projetLes différents cas d'utilisation de Kafka
Les composants du système : Zookeeper, brokers, topics, consumers, producers
Les différentes APIs
Prise en main d'un cluster Kafka
Ensemble Zookeeper, rôle de l'ensembleConnexion cliente via zkCli.sh
Configuration d'un broker Kafka
Traces d'un broker
Structure de stockage du commit log
Utilitaires fournis par la distributionTravaux Pratiques :Démarrage ensemble zookeeper, connexion Démarrage d'un cluster Kafka 3 noeuds
Création de topic, envoi et réception de messages via les commandes en ligne
Kafka APIs
Producers APIConsumers API
Exemple de frameworks
Connect API
AdminClient API
Introduction à Streams APITravaux Pratiques :Développement d'un producteur de message, puis d'un consommateur, Exemple framework réactif, Connect API avec ELK,
Réplication et fiabilité
Stockage des partitions, segments et rétentionRéplication, leader, followers, ISR
Rôle du contrôleur, Arrêt d’un broker leader, d'un follower
Démarrage d'un nouveau broker
Fiabilité Producteur, Fiabilité consommateur
Sémantiques At Most Once, At Least Once, Exactly Once
Outils de validation d'une garantie de transmissionTravaux Pratiques :Implémentation des différentes sémantiques de transmisssion, tests avec redémarrage de brokers et changement de consommateur
Prérequis
Public
Ces formations pourraient vous intéresser
Objectifs de la formation
À l’issue de cette formation Spring Cloud Stream et Kafka, vous aurez acquis les connaissances et les compétences nécessaires pour :
- Mettre en place l'environnement de développement Spring Cloud Data Stream
- Concevoir une architecture microservices basée sur Kafka et Spring Cloud
- Adopter une programmation fonctionnelle
- Mettre en place une topologie de processeurs Kafka avec SpringBoot
- Surveiller et récolter les métriques d’une telle architecture
| Tarif |
A partir de 1 480,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Décrire l'architecture de Kafka et son mode de fonctionnement dans un contexte multiclients
- Publier et récupérer des données vers un cluster Kafka
- Créer vos propres Consumers et Producers pour envoyer des données vers Kafka et lire des données depuis Kafka
- Ecrire des applications de streaming avec Kafka Streams.
| Tarif |
A partir de 1 520,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
- Pendant la formation, le formateur évalue la progression pédagogique des participants via des QCM, des mises en situation et des travaux pratiques. Les participants passent un test de positionnement avant et après la formation pour valider leurs compétences acquises.
| Tarif |
Contacter l'organisme |
| Durée |
12 jours (84 heures) |
| Modes |
|
Objectifs de la formation
- Cette formation fait l'objet d'une évaluation formative.
| Tarif |
Contacter l'organisme |
| Durée |
3 jours (21 heures) |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation Microservices, vous aurez acquis les connaissances et les compétences nécessaires :
- Comprendre l'intérêt et le fonctionnement d'une architecture microservices
- Avoir une vue d'ensemble de Spring, Spring Data et Spring Cloud dans le cadre des microservices
- Connaître les différentes architectures REST à l'œuvre avec les microservices
- Envisager les microservices dans le cadre d'une base de données NoSQL traditionnelle
- Connaître les méthodes pour router, monitorer, journaliser et déployer des microservices
| Tarif |
Contacter l'organisme |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Décrire l'architecture de NiFi, y compris les configurations autonomes et en cluster
- Naviguer, configurer les flux de données et utiliser les informations sur les flux de données avec l'interface utilisateur NiFi
- Organiser et simplifier les flux de données
- Connecter les flux de données avec d'autres systèmes, tels que Kafka et HDFS.
| Tarif |
A partir de 1 520,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
- Mettre en place un IDE et les outils de développement pour quarkus
- Développer différents types de microservices avec Quarkus (API RestFul, Messagerie réactive, Client Rest)
- Comprendre la compilation AOT et les phases de build d’une application Quarkus
- Déployer et surveiller une architecture micro-services Quarkus vers Kubernetes
| Tarif |
A partir de 1 950,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
- Identifier les principaux composants et avantages de Kafka
- Installer et configurer Apache Kafka
- Utiliser les APIs pour les producers et consumers
- Mettre en œuvre et administrer Apache Kafka
- Utiliser Kafka Connect pour l'intégration de données
- Appliquer les principes fondamentaux de Kafka Streams
- Assurer la sécurité et l'authentification dans Kafka
- Implémenter et gérer Zookeeper
| Tarif |
A partir de 1 500,00 € |
| Durée |
2 jours |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation Talend pour le Big Data, vous aurez acquis les connaissances et compétences nécessaires pour :
- Lister les composants et fonctionnalités de Talend dans un environnement Big Data
- Créer des jobs Talend faisant interagir des fichiers, et base de données Big Data
- Connaître les bonnes pratiques de développements avec Talend
- Lire et écrire des données sur HDFS et dans des bases de données NoSQL avec des Jobs Talend
- Réaliser des Jobs de transformation à l’aide de Pig et Hive
- Utiliser les composants de gestion de qualité de donnée
- Réaliser des Jobs de migration de base de données relationnelles dans Hadoop avec Sqoop
- Créer des traitements ETL (Extraction, Transform and Load) de bout en bout en environnement Big Data
| Tarif |
A partir de 2 100,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation Kafka Flux de données, vous aurez acquis les connaissances et compétences nécessaires pour :
- Comprendre le fonctionnement d’Apache Kafka
- Connaître et mettre en œuvre les bonnes pratiques liées à l’utilisation d’une messagerie distribuée
- Savoir intégrer les flux d’évènements et d’autres données liées au Big Data à Kafka
- Être capable d’interagir avec les APIs de Kafka
- Connaître le fonctionnement et les différences entre KSQL et Kafka Streams
- Savoir intégrer la sécurité au sein d’un projet Apache Kafka
| Tarif |
A partir de 1 995,00 € |
| Durée |
3j / 21h |
| Modes |
|
