Apache Hadoop – Présentation de l’écosystème
Public admis
- Salarié en Poste
- Demandeur d'emploi
- Entreprise
- Etudiant
Financements
Eligible CPF Votre OPCO Financement personnel
Objectifs de la formation
- Décrire l'architecture et identifier les composants d'Apache Hadoop
- Configurer et superviser les services
- Identifier et manipuler les outils de développement et de supervision Hadoop
- Exploiter et orchestrer les développements
| Tarif |
Contacter l'organisme |
| Durée | 2 jours - 14 h |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
| Tarif |
Contacter l'organisme |
| Durée | 2 jours - 14 h |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
Description
Cette formation approfondie sur Apache Hadoop vous offre des compétences solides en matière de configuration, de supervision et d’exploitation des services Hadoop.
Acquérez une compréhension détaillée de l’écosystème Hadoop, y compris MapReduce, Pig, Hive, Sqoop, et plus encore.
Apprenez à gérer les utilisateurs, la sécurité, et les services généraux Hadoop dans un environnement de cluster.
De plus, familiarisez-vous avec les outils de développement Hadoop et les techniques de monitoring, garantissant un fonctionnement optimal du cluster.
Programme
Le projet et les modules
- Hadoop Common, HDFS, YARN, MapReduce Oozie, Pig, Hive, HBase
- Les fonctionnalités du framework Hadoop
- Les différentes versions
- Les principales distributions et leurs spécificités : Apache, Cloudera, Hortonworks, EMR, MapR
- Architecture et principe de fonctionnement
- Terminologie : NameNode, DataNode, ResourceManager, NodeManager
- Rôle des différents composants
Administration Hadoop
- Etude des fichiers de configuration core-site.xml, hdfs-site.xml, mapred-site.xml, yarn-site.xml et capacity-scheduler.xml
- Gestion des utilisateurs pour les daemons hdfs et yarn
- Droits d'accès sur les exécutables et répertoires
- Architecture et gestion des services généraux Hadoop des utilisateurs pour les daemons hdfs et yarn
- HDFS
- YARN
- MapReduce
- HBase
- Monitoring du cluster Hadoop
- Suivi de charges
- Journaux (jConsole)
- Gestion des nœuds
- Accès JMX
- Mise en œuvre d'un client JMX
- Administration HDFS
- Stockage des fichiers : fsck, dfsadmin
- Gestion centralisée de caches avec Cacheadmin
- Sécurité
- Activation de la sécurité avec Kerberos dans core-site.xml, et hdfs-site.xml pour les NameNode et DataNode
- Gestion de la sécurité avec Apache Sentry
- Exploitation
- Supervision des éléments par le NodeManager
- Monitoring graphique avec Ambari, Kibana, Cloudera Manager
- Visualisation des alertes en cas d'indisponibilité d'un nœud
- Configuration des logs avec log4j
Développement Hadoop
- HDFS
- Architecture
- Commandes SHELL
- MapReduce
- Architecture de MapReduce
- Exécuter un code MapReduce
- Hue
- Introduction
- Fonctionnalités et utilisation
- HBase
- Architecture
- Commandes SHELL de création et d'interrogation de données
- Hive
- Architecture
- Méthodes d'accès à Hive
- HiveQL : création de bases de données/tables/vues, interrogation de données avec HiveQL, manipulation de fonctions définies par l'utilisateur (UDF), partitionner vos données, archivage de vos données
- Pig
- Introduction
- Méthodes d'exécution
- Pig Latin
- Communication entre Pig et Hive
- Sqoop
- Introduction
- Pour quels usages ?
- Méthodes d'utilisation
- Import et export des données
- Oozie
- Introduction
- Planification de workflows avec paramètres
Prérequis
Connaissances générales des systèmes d’information.
Public
- DSI
- Directeur Technique
- Chef de Projet
- Architecte SI
- Administrateur de bases de données
Ces formations pourraient vous intéresser
Objectifs de la formation
- Pendant la formation, le formateur évalue la progression pédagogique des participants via des QCM, des mises en situation et des travaux pratiques. Les participants passent un test de positionnement avant et après la formation pour valider leurs compétences acquises.
| Tarif |
Contacter l'organisme |
| Durée |
2 jours (14 heures) |
| Modes |
|
Objectifs de la formation
Créer une histoire captivante qui embarque le client en faisant appel aux émotions - Raconter son offre commerciale comme la réponse aux besoins des clients et au service de ses objectifs - Maitriser les usages et les clés d’un storytelling efficace - Préparer une présentation avec le storytelling - Prendre la parole et présenter son histoire à un auditoire| Tarif |
A partir de 1 475,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
- Découvrir l'interface de Word, Excel et PowerPoint
- Maîtriser les fonctions de bases des logiciels
- Acquérir les bonnes pratiques sur un traitement de texte avec Word
- Créer rapidement des tableaux de calculs fiables avec Excel
- Créer une présentation simple avec PowerPoint
| Tarif |
A partir de 1 390,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
Maîtriser le développement et le déploiement de services web avec Apache CXF| Tarif |
A partir de 2 395,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
Développeurs Web souhaitant développer des sites Web ou applications avec HTML 5 et CSS3.
À l'issue de la formation, le stagiaire sera capable de :
- Améliorer la présentation et la maintenance des pages web d'un site grâce aux feuilles de style
- Être capable de développer des documents HTML
- Explorer l'ensemble des possibilités offertes par HTML
Formation éligible à l'utilisation du CPF avec possibilité du passage de la certification AVIT by ENI en fin de formation.
| Tarif |
A partir de 1 000,00 € |
| Durée |
2 jour(s) |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Réaliser des travaux d'illustration, de mise en page, de préparation, de présentation ou d'impression de documents.
| Tarif |
Contacter l'organisme |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Concevoir des modèles de documents adaptés aux besoins métiers de l'entreprise
- Mettre en oeuvre différentes techniques de visualisation graphique, de mise en récit et de présentation permettant de valoriser les données.
| Tarif |
A partir de 1 520,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
- Structurer et concevoir des bases de données Cassandra pour garder une longueur d'avance sur vos concurrents - Appliquer des modèles de requêtes pour modéliser les données de vos bases Cassandra - Accéder aux bases de données Cassandra avec CQL et Java - Trouver le juste équilibre entre le débit de lecture / écriture et la cohérence des données - Intégrer Cassandra à Hadoop, Pig et Hive - Mettre en oeuvre les design patterns Cassandra les plus courants| Tarif |
A partir de 2 070,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Préparer efficacement votre intervention en identifiant les objectifs, le format et les participants
- Evaluer les arguments et structurer le discours en utilisant le schéma CAP
- Choisir un plan et organiser les idées de manière cohérente
- Structurer, introduire et conclure la présentation de manière percutante
- Anticiper les objections et préparer des réponses appropriées
- Adapter le message en fonction du type de public ciblé
- Concevoir des supports visuels clairs et attrayants en utilisant une structure efficace
- Compléter le texte avec des exemples, références, échantillons, études, tests et témoignages pour l'enrichir
- Animer la présentation de manière engageante en adaptant le déroulement aux imprévus et en synchronisant visuel et narration
- Gérer l'interactivité en impliquant l'auditoire, en repérant les signes de lassitude et en utilisant des techniques de relance.
| Tarif |
A partir de 1 400,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
- Comprendre l’écosystème Docker
- Créer des conteneurs
- Déployer des applications dans Docker
- Administrer Docker
| Tarif |
A partir de 2 050,00 € |
| Durée |
3j / 21h |
| Modes |
|
