Apache Hadoop – Développer des applications pour le Big Data
Public admis
- Salarié en Poste
- Demandeur d'emploi
- Entreprise
- Etudiant
Financements
Eligible CPF Votre OPCO Financement personnel
Objectifs de la formation
- Développer une application de traitements distribués sur de gros volumes de données ;
- Configurer et optimiser Hadoop pour chaque besoin ;
- Organiser et construire un cluster Hadoop ;
- Prototyper et intégrer rapidement de nouveaux besoins grâce à Hadoop Streaming et Python.
| Tarif |
Contacter l'organisme |
| Durée | 5 jours - 35 h |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
| Tarif |
Contacter l'organisme |
| Durée | 5 jours - 35 h |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
Description
Dans cette formation orientée développement d’applications pour le Big Data avec Apache Hadoop, apprenez à manipuler MapReduce, à comprendre et à utiliser HDFS, et à travailler avec YARN.
Profitez de nos travaux pratiques pour développer votre premier programme WordCount avec MapReduce, manipuler HDFS avec les commandes de base et l’API Java, et recréer un moteur de recherche avec Hadoop.
Acquérir la maîtrise de l’architecture et des concepts Hadoop, ainsi que l’optimisation et le tunning.
Apprenez à utiliser Python avec Hadoop Streaming pour répondre rapidement aux nouveaux besoins.
À l’issue de cette formation, vous serez capable de développer des applications de traitements distribués sur de gros volumes de données.
Programme
MapReduce en pratique
- Le " Hello World " BigData : WordCount
- Concepts
- Jobs, tasks, slots, splits …
- WebUI
- Input et Ouput Format
- Partitionner, Grouper, Trier
- Application, Jobs et Ordonnancement
- Configuration, tunning, optimisations
- Uses cases
- Bonnes pratiques et patterns
- Travaux pratiques :
-
- Développer le WordCount avec MapReduce
HDFS
- Architecture
- Patterns et usages
- Opérations et commandes
- WebHDFS, interfaces
- API Java
- Travaux pratiques :
-
- Manipuler HDFS avec les commandes de base
- Utiliser l'API Java pour lire/écrire des fichiers dans HDFS
YARN
- MRv1 vs YARN
- Architecture et composants
- Abstraction Tez : Pig, Hive, Cascading
- Travaux pratiques :
-
- Recréer un moteur de recherche avec Hadoop - Partie 1
Hadoop Streaming
- Python avec Hadoop Streaming
- Fonctionnement et configuration d'Hadoop Streaming
- Travaux pratiques :
-
- Transformer le WordCount avec Hadoop Streaming
- Recréer un moteur de recherche avec Hadoop - Partie 2
Prérequis
Maîtriser impérativement un langage de programmation orientée objet tel que Java ou Python.
Public
Développeurs backend et architectes SI.
Ces formations pourraient vous intéresser
Objectifs de la formation
- Sélectionner les méthodes appropriées pour diverses tâches de développement Web
- Manipuler les éléments du DOM, gérer les événements et créer des animations
- Incorporer JQuery avec HTML et CSS pour développer des pages web interactives
- Construire des interfaces web efficaces et dynamiques en utilisant JQuery en conjonction avec Ajax pour la récupération asynchrone de données
- Identifier et corriger les erreurs courantes dans le code JQuery afin d'en garantir la fonctionnalité et la fiabilité
| Tarif |
A partir de 1 950,00 € |
| Durée |
3 jours |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Identifier et définir les concepts clés liés aux Intelligences Artificielles Génératives d'images et à Adobe Firefly
- Expliquer le fonctionnement des modèles génératifs d'IA et la façon dont seront interprétés les prompts
- Utiliser les techniques de formulation de prompts pour interagir efficacement avec des modèles d'IA tels que DALL-E, Midjourney, Stable Diffusion et Adobe Firefly
- Examiner les prompts formulés, identifier les erreurs potentielles et proposer des améliorations
- Développer des prompts efficaces pour diverses applications et scénarios en utilisant les modèles d'IA Génératives d'images et Adobe Firefly dans Photoshop et dans Illustrator
- Juger de la qualité et de l'efficacité des prompts formulés en vous basant sur les résultats produits par les modèles d'IA
- Concevoir des prompts créatifs et innovants pour réaliser des tâches spécifiques ou produire des résultats uniques avec les modèles d'IA
- Appliquer les compétences et connaissances acquises lors de la formation à des contextes nouveaux ou différents, tels que le travail individuel ou l'application dans d'autres domaines de l'IA
- Reconnaître les enjeux juridiques des droits aux images générées par des IA.
| Tarif |
A partir de 710,00 € |
| Durée |
1j / 7h |
| Modes |
|
Objectifs de la formation
- Évaluation des compétences acquises via un questionnaire en ligne intégrant des mises en situation.
| Tarif |
A partir de 1 570,00 € |
| Durée |
2 jours (14 heures) |
| Modes |
|
Formation : Référent Handicap en entreprise : les clés pour réussir ses missions
Proposé par COMUNDIObjectifs de la formation
- Comprendre le cadre législatif du handicap
- Établir pleinement son rôle de Référent Handicap pour développer une culture inclusive en matière de handicap
- Développer le maintien dans l’emploi des salariés en situation de handicap par des actions concrètes et personnalisées
| Tarif |
A partir de 1 450,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation Google Cloud Platform - Sécurité sur GCP (SGCP) vous aurez acquis les connaissances et les compétences nécessaires pour :
- Comprendre l'approche Google en matière de sécurité
- Gérer des identités d'administration à l'aide de Cloud Identity
- Implémenter un accès administrateur avec un principe de moindre privilège à l'aide de Google Cloud Resource Manager et Cloud IAM
- Implémenter des contrôles de trafic IP à l'aide de pare-feu VPC et de Cloud Armor
- Implémenter la fonctionnalité Identity-Aware Proxy
- Analyser les modifications apportées à la configuration ou aux métadonnées des ressources à l'aide des journaux d'audit GCP
- Détecter des données sensibles et les masquer à l'aide de l'API Data Loss Prevention
- Analyser un déploiement GCP à l'aide de Forseti
- Résoudre les problèmes liés aux principaux types de faille, et plus particulièrement dans le cas d'un accès public aux données et aux machines virtuelles
| Tarif |
A partir de 2 380,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Développer des applications JSF (JavaServer Faces) avec PrimeFaces.
| Tarif |
Contacter l'organisme |
| Durée |
3j / 21h |
| Modes |
|
Formation Maîtriser Zabbix - Certified Specialist & Professional (cours officiel)
Proposé par PLB CONSULTANTObjectifs de la formation
Concrètement, à l'issue de cette formation Zabbix 6.0, vous serez capable de :
- Appréhender la terminologie de la supervision dans le contexte du logiciel
- Connaître les concepts et les bonnes pratiques autour de la solution
- Installer et administrer Zabbix
- Concevoir et déployer une solution de supervision
- Mettre en place des configurationscomplexes de supervision Zabbix
- Automatiser les configurations de bout en bout grâce au LLD
- Optimiser les performances de votre supervision
| Tarif |
A partir de 4 750,00 € |
| Durée |
8j / 56h |
| Modes |
|
Formation - Développement d'applications mobiles multi plates-formes avec Ionic
Proposé par IB CegosObjectifs de la formation
- Pendant la formation, le formateur évalue la progression pédagogique des participants via des QCM, des mises en situation et des travaux pratiques. Les participants passent un test de positionnement avant et après la formation pour valider leurs compétences acquises.
| Tarif |
Contacter l'organisme |
| Durée |
3 jours (21 heures) |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation Apache, Administrer un Serveur Web, vous aurez acquis les connaissances et les compétences nécessaires pour :
- Connaître les fonctions de base d'Apache
- Maîtriser Apache en complétant par les applications classiques avec lesquels ils communique, la sécurité, l'hébergement de plusieurs sites et le paramétrage de l'ensemble
| Tarif |
A partir de 1 840,00 € |
| Durée |
3j / 21h |
| Modes |
|
Formation Développer des applications pour Apache Spark avec Python ou Scala
Proposé par PLB CONSULTANTObjectifs de la formation
À l'issue de cette formation Développer des applications pour Apache Spark avec Python ou Scala vous aurez acquis les connaissances et les compétences nécessaires pour :
- Identifier et définir les différents composants de l’écosystème Hadoop
- Appréhender le fonctionnement de Spark
- Développer des applications avec Apache Spark
- Optimiser une application Spark
- Utiliser Spark SQL et les dataframes
- Faire de l’analyse en temps réel avec Spark streaming
- Découvrir MLLib pour du machine learning sur Spark
- Explorer, manipuler et visualiser vos données avec Zeppelin.
| Tarif |
A partir de 3 550,00 € |
| Durée |
4j / 28h |
| Modes |
|
