Formation Data Streaming : traitement des données en temps réel
Public admis
- Salarié en Poste
- Demandeur d'emploi
- Entreprise
- Etudiant
Financements
Eligible CPF Votre OPCO Financement personnel
Objectifs de la formation
- Comprendre les spécificités du traitement de données en temps réel
- Connaître les différents composants et l'architecture d'un système de data streaming
- Construire des pipelines pour le traitement de données en continu avec Kafka, Airflow ou Spark
| Tarif |
A partir de 3 000,00 € |
| Durée | 4 jours |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
| Tarif |
A partir de 3 000,00 € |
| Durée | 4 jours |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
Description
A l'issue de cette formation, les participants ont acquis les compétences nécessaires pour traiter des données en temps réel grâce à la maîtrise d'outils modernes comme Spark, Kafka, Airflow... 50% du temps de formation est consacré aux cas pratiques, afin de permettre aux apprenants de mettre immédiatement en application les concepts théoriques du data streaming.
Programme
Introduction : principes fondamentaux du data streaming
Les avantages d’une architecture distribuée résiliente pour les systèmes de data streaming
Tolérance aux pannes, callbacks et scalabilité
Acheminement des messages entre les micro-services d’un système
Suivre l’activité, les logs et collecter des mesures
Gérer des flux de données avec Kafka Streams API ou Spark Streaming
Comment les géants de la Tech utilisent le streaming dans leurs activités quotidiennes (Netflix, LinkedIn, Uber…) ?
Architecture
Gérer les sources de données (évènements, messages, logs…)
La problématique de load balacing dynamique
Spark pour les pannes et la récupération
L’unification des analyses par lots (batchs), en streaming et interactives
Analytics avancée avec le Machine Learning et requêtes interactives en SQL
Cas pratiques : intégration de données en temps réel avec Databricks, Spark, Kafka ou Snowflake.
Gestion des pipelines de données Cloud avec Kafka, Airflow et Spark
Producers, consumers et concepts de réplication
Brokers, clusters, topics et partition
Le streaming de données comme moyen pour partager les données
Cas pratiques : gestion d’un data workflow avec les DAGs (Directed Acyclic Graphs) d’Airflow, gestion des brokers kafka avec Zookeeper.
Mise en œuvre d’un pipeline de données temps réel
Data streaming pour une architecture orientée évènements
Data streaming pour échantillons classiques de données
Data streaming pour les industries et l’Internet des Objets (IoT)
Projet final : construction d’un pipeline de données temps réel « from scratch » avec Kafka, Airflow, Spark, Snowflake ou Databricks (au choix des stagiaires, avec les données de leur organisation, si possible et planifié à l’avance).
Prérequis
Public
Ces formations pourraient vous intéresser
Objectifs de la formation
Acquérir les compétences pour développer des programmes PL/SQL pour accéder aux bases Oracle et créer des procédures stockées et des fonctions pour une réuilisation maximale et une maintenance du code minimale et concevoir des applications modulaires avec des packages. Gérer la récupération des données pour les applications frontales et invoquer du SQL Dynamique natif pour créer du code de haut niveau.
| Tarif |
Contacter l'organisme |
| Durée |
3 jour(s) |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation WatchGuard, vous aurez acquis les connaissances et les compétences nécessaires pour :
- Remettre en configuration usine un pare-feu et recharger une sauvegarde de la configuration
- Mettre en place les configurations réseaux adaptées à son entreprise
- Comprendre et modifier les règles et paramètres les plus usuels
- Comprendre et mettre en œuvre les différentes translations d’adresses
- Vérifier le bon fonctionnement du pare-feu au travers des journaux et du suivi temps réel
- Mettre en place et gérer des authentifications
- Choisir et mettre en œuvre les fonctions optionnelles de sécurité (WebBlocker, SpamBlocker, Application Control, RED, IPS, Anti-Virus,DLP,…)
- Mettre en place un VPN Site à Site (BOVPN) simple en IPsec
- Mettre en place un VPN nomade (MUVPN) en IPsec et en SSL
- Gérer des interfaces WAN multiples
- Gérer la bande passante
| Tarif |
A partir de 2 200,00 € |
| Durée |
4j / 28h |
| Modes |
|
Objectifs de la formation
- Identifier les composants de la pile Elastic et leurs rôles au sein d’un pipeline de traitement de données.
- Analyser les données en temps réel à l'aide d'Elasticsearch pour obtenir des informations exploitables.
- Créer des visualisations et des tableaux de bord dans Kibana pour une prise de décision éclairée.
- Concevoir et mettre en œuvre des pipelines de traitement de données robustes avec Logstash.
- Configurer Beats pour une collecte et une gestion optimales des données.
- Appliquer les meilleures pratiques dans la gestion et la mise à l'échelle des déploiements Elastic Stack.
| Tarif |
A partir de 2 250,00 € |
| Durée |
3 jours |
| Modes |
|
Objectifs de la formation
- Maîtriser toutes les fonctionnalités de bases aux commandes avancées
- Progresser dans toutes les thématiques du logiciel (saisie et traitement du texte, gestion des diapositives, ajout d’images et d’objets graphiques, utilisation des masques, animations, projection et diffusion de diaporama…)
| Tarif |
A partir de 290,00 € |
| Durée |
15 heures 49 minutes |
| Modes |
|
Objectifs de la formation
- Utiliser toutes les techniques de paie
- Prendre en compte tous types d'absences maladie et les variations du temps de travail dans la pratique de la paie
- Calculer les cotisations sociales et de retraite
- Intégrer les avantages en nature et frais professionnels
| Tarif |
A partir de 1 950,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
- Définir la structure et mettre en place une base de données
- Créer les tables et définir les relations
- Saisir et gérer les enregistrements
- Créer et personnaliser des requêtes pour regrouper les données de plusieurs tables, les filtrer les trier
- Créer et personnaliser des formulaires pour saisir, visualiser, modifier les données
- Créer et personnaliser et états pour mettre en forme, synthétiser et présenter les données
| Tarif |
A partir de 1 150,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
- Comprendre les objectifs des acheteurs.
- Adapter sa stratégie à chaque type d'acheteur.
- Mener des négociations profitables avec les acheteurs.
| Tarif |
A partir de 1 445,00 € |
| Durée |
2 jours (14 heures) |
| Modes |
|
Objectifs de la formation
- Décrire les mécanismes d’accès aux bases de données avec Python ;
- Développer un module de connexion utilisation la DB-API pour utiliser une base de données ;
- Implémenter des fonctions permettant de manipuler les données en base ;
- Gérer les transactions et les exceptions dans les applications utilisant la DB-API ;
- Mettre en place l’ORM SQLAlchemy dans un projet Python ;
- Réaliser le mapping entre des tables de base de données et des classes Python ;
| Tarif |
Contacter l'organisme |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Analyser et corriger des problèmes de conformité du système à l'aide d'OpenSCAP et de SCAP Workbench
- Utiliser et adapter le contenu de politiques de référence fourni avec Red Hat Enterprise Linux
- Gérer les activités en lien avec la sécurité sur vos systèmes à l'aide de l'infrastructure d'audit du noyau
- Mettre en oeuvre des techniques SELinux avancées pour restreindre l'accès au niveau des utilisateurs, des processus et des machines virtuelles
- Déterminer l'intégrité des fichiers et de leurs permissions avec l'utilitaire AIDE
- Bloquer l'utilisation de périphériques USB non autorisés à l'aide d'USBGuard
- Protéger des données au repos avec déchiffrement automatique sécurisé dès le démarrage avec NBDE
- Identifier des risques et des erreurs de configuration de façon proactive sur les systèmes et correction à l'aide de Red Hat Insights
- Analyser l'état de conformité et corriger à grande échelle à l'aide d'OpenSCAP, de Red Hat Insights, de Red Hat Satellite et de Red Hat Ansible Tower.
| Tarif |
Contacter l'organisme |
| Durée |
5j / 30h |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation Langage Assembleur pour z/OS Codage, vous aurez acquis les connaissances et les compétences nécessaires pour :
- Reconnaître les fonctionnalités d'architecture telles que les formats d'instructions, la représentation des données, l'adressage du stockage, nécessaires au programmeur
- Identier un point d'interruptiondans le programme en utilisant un vidage système formaté et les éléments d'informations telles que Program Status Word (PSW), Instruction Length Code (ILC), les registres de base pour les programmes, etc.
- Identifier les standards appropriés pour les programmes assembleurs en termes d'organisation, les conventions pour les registres, les pratiques pour le codage, et la documentation.
- Coder et débugguer des programmes en langage assembleur comme par exemple:
- Se conformer aux conventions de liaison standard en utilisant la zone de sauvegarde des chaînages
- Définir et utiliser les divers types de définitions de données : fixed point binary, character, hexadecimal et packed decimal
- Employer des macros standards telles que CALL, SAVE, RETURN
- Utiliser divers déclarations assembleur telles que CSECT, EQU, COPY, END
- Utiliser des formes de notations symboliques et explicites pour les instructions, et des "data literals" appropriées
- Expliquer l'utilisation de LTORG pour diriger le positionnement de "literal pool"
- Créer et utiliser des motifs adaptés pour les instructions EDIT
| Tarif |
A partir de 3 990,00 € |
| Durée |
5j / 35h |
| Modes |
|
