Formation - Big Data - Gestion des flux de données avec Apache Nifi
Public admis
- Salarié en Poste
- Demandeur d'emploi
- Entreprise
- Etudiant
Financements
Eligible CPF Votre OPCO Financement personnel
Objectifs de la formation
- Cette formation fait l'objet d'une évaluation formative.
| Tarif |
Contacter l'organisme |
| Durée | 2 jours (14 heures) |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
| Tarif |
Contacter l'organisme |
| Durée | 2 jours (14 heures) |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
Programme
1 - Apache Nifi et la programmation "flow-based"
- Les concepts de programmation "flow-based" et les workflows
- Le projet Open Source Apache Nifi et ses concurrents (Apache Camel, Node-RED, ...)
- L'écosystème Nifi et ses distributions (Hortonworks DataFlow, ...)
- Les fonctionnalités essentielles
- Les pré-requis d'installation et les modes de fonctionnement
- Mise en pratique : installation du produit Apache Nifi et vérification de son fonctionnement
2 - Concepts de base Apache Nifi
- Les cas d'usage d'Apache Nifi : EAI, Big Data, IoT, ...
- Les concepts de FlowFile, de Processor et de Connector
- La prise en main de l'interface Web
- La création d'un flux et son fonctionnement
- Le monitoring
- Mise en pratique: création et exécution d'un flux de manipulation de fichiers avec GetFile, PutFile, ...
3 - Utilisation avancée
- Le format des FlowFiles
- Le langage EL et la gestion de conditions de routage
- Les principaux processeurs et leurs paramètres
- L'utilisation de scripts (Groovy, Python, ...)
- La gestion d'erreurs
- Controller Service, Processor Group et Reporting task
- L'utilisation de templates
- Mise en pratique : réalisation d'un flux conditionnel avec différents systèmes (brokers JMS ou MQTT, BD, ...)
4 - Cluster et Big Data
- Le fonctionnement en cluster avec Zookeeper
- L'intégration dans un environnement Big Data (Hadoop HDFS, Spark)
- Mise en pratique : configuration d'un cluster avec Zookeeper
5 - Extensions
- Les principes de fonctionnement d'un Processor
- Le paramétrage et l'accès aux données d'un flux
- Le packaging d'un Processor dans un NAR
- Mise en pratique : intégration d'un Processor tiers et réalisation d'un nouveau Processor
Prérequis
- Notions en intégration d'applications et architecture logicielle de SI
- Pratique du développement Java
Public
- Architecte, tech lead, développeur souhaitant utiliser Apache Nifi
Ces formations pourraient vous intéresser
Objectifs de la formation
- Comprendre les principes fondamentaux du séquençage haut débit
- Maîtriser les techniques et les étapes clés du séquençage haut débit
- Analyser et interpréter les données générées par le séquençage haut débit
| Tarif |
A partir de 1 740,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Gérer les données de base (fiches articles, fiches fournisseurs, fiches infos-achats)
- Créer des contrats-cadres (contrats en quantité ou en valeur, programmes de livraisons avec ou sans documentation des appels)
- Piloter la détermination des sources d'approvisionnement (répertoire des sources d'approvisionnement, répartition des quotas)
- Traiter des demandes d'achat affectées ou non affectées
- Paramétrer des stratégies de lancement et lancer des demandes d'achat ainsi que des commandes d'achat
- Créer des commandes-cadres (plans de facturation, commandes d'achat avec limites)
- Exécuter un processus de sous-traitance
- Evaluer les fournisseurs
- Configurer la sélection de zones dans les documents d'achat ainsi que les types de documents d'achat.
| Tarif |
A partir de 4 100,00 € |
| Durée |
5j / 35h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Gérer des paramètres dans Power Query
- Créer des Dataflows
- Réaliser des modèles de données complexes
- Créer des Field Parameters dans un modèle de données
- Restreindre l'accès aux données avec une RLS dynamique.
| Tarif |
A partir de 1 220,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation QGIS Initiation vous serez en mesure de :
- Réaliser une étude cartographique à partir de bases de données et du logiciel open source QGis
- Créer, modifier et gérer vos données géographiques
- Mettre en page et représenter vos données sous forme de cartes
| Tarif |
A partir de 1 575,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
- Gérer le contenu d'un site et l'administrer avec Typo3
- Ajouter, supprimer et modifier des pages et des contenus
- Personnaliser le graphique du site
- Intégrer avec une base de données simple
- Administrer les utilisateurs
| Tarif |
A partir de 1 650,00 € |
| Durée |
3 jours |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Gérer l'interface et les préférences de PitStop Serveur
- Gérer les bibliothèques de traitements disponibles
- Créer, activer et suivre un flux de traitement
- Utiliser les flux de traitement dynamique (Smart Preflight).
| Tarif |
Contacter l'organisme |
| Durée |
1j / 7h |
| Modes |
|
Objectifs de la formation
Plus concrètement, à l'issue de cette formation Data Scientist Fondamentaux vous aurez acquis les connaissances et compétences nécessaires pour :
- Découvrir le métier de Data Scientist et les grandes familles de problèmes
- Savoir modéliser un problème de Data Science
- Créer vos premières variables
- Constituer votre boîte à outils de Data Scientist
- Participer à une première compétition.
| Tarif |
A partir de 2 500,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
À la fin de cursus Administrateur SQL, vous aurez acquis les connaissances et compétences nécessaires pour :
- Écrire des requêtes de base
- Utiliser des requêtes pour agréger et grouper des données
- Acquérir de solides bases afin d'effectuer des requêtes de données issues de plusieurs tables
- Utiliser les objets de programmation pour récupérer des données
- Être capable de créer des objets de programmation.
- Savoir comment sauvegarder et restaurer des bases de données SQL Server
- Être en mesure de gérer la sécurité SQL Server
- Connaitre la configuration de la messagerie de la base de données, les alertes et les notifications
- Maitriser l'administration SQL Server avec PowerShell
- Savoir utiliser SQL Server Profiler et SQL Server Utility pour surveiller l'activité du serveur
- Savoir approvisionner un serveur de bases de données
- Mettre à jour SQL Server
- Configurer SQL Server
- Gérer les bases de données et les fichiers (partagés)
- Savoir migrer une base de données locale vers Azure
| Tarif |
Contacter l'organisme |
| Durée |
15j / 105h |
| Modes |
|
Objectifs de la formation
Contrôleurs de gestion, analystes ou toute personne intéressée par la Business Intelligence pour consolider des informations provenant d'Excel, de bases de données ou d'autres sources, et concevoir des tableaux de bord et graphiques interactifs.
À l'issue de la formation, le stagiaire sera capable de :
- Acquérir une méthodologique pour l’exploitation des données
- Apprendre à développer des rapports avec Power BI Desktop
- Publier des rapports vers le service Power BI et construire des tableaux de bord
| Tarif |
A partir de 1 350,00 € |
| Durée |
3 jour(s) |
| Modes |
|
Objectifs de la formation
- Découvrir la Data Science et le métier de Data Scientist
- Comprendre les concepts clés de la Data Science
- Savoir utiliser les outils et méthodologies du Data Scientist
- Pouvoir programmer en R ou en Python
- Avoir des connaissances en machine learning
- Gérer l'apprentissage supervisé, semi-supervisé et non-supervisé
- Pouvoir intégrer la Data Science dans votre organisation
| Tarif |
A partir de 3 500,00 € |
| Durée |
5 jours |
| Modes |
|
