Spark – Mise en oeuvre des traitements Big Data
Public admis
- Salarié en Poste
- Demandeur d'emploi
- Entreprise
- Etudiant
Financements
Eligible CPF Votre OPCO Financement personnel
Objectifs de la formation
- Développer une application s’appuyant sur Spark
- Connaître les différents concepts sous-jacents et les APIs
- Exécuter, tester, optimiser une application utilisant Spark
- Appréhender les problématiques de machine learning avec SparkML
| Tarif |
Contacter l'organisme |
| Durée | 3 jours - 21 h |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
| Tarif |
Contacter l'organisme |
| Durée | 3 jours - 21 h |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
Description
Embarquez pour une formation de 3 jours pour maîtriser le développement d’applications avec Apache Spark, un outil clé du Big Data.
Explorez le modèle in-memory de Spark, les Resilient Distributed Datasets (RDDs), l’utilisation des dataframes, et la mise en oeuvre du machine learning avec SparkML.
Profitez de nos travaux pratiques pour installer votre environnement de développement, effectuer des statistiques sur des données météorologiques, optimiser les RDDs, analyser du texte, exploiter des données en temps réel avec Sqoop et prédire la race d’un chien avec une image.
Vous apprendrez à exécuter, tester et optimiser vos applications Spark.
Programme
Présentation de Spark
- Spark vs MapReduce
- Le modèle in-memory
- Composants : Jobs, Stages, Tasks
- Les différentes interfaces : API Python, shell, etc.
- Travaux pratiques : installation de l'environnement de développement et manipulation Spark
Resilient Distributed Datasets
- Principe des DAG
- Les transformations : Filter, map, reduce, etc.
- Les actions
- Cache et persistance
- Travaux pratiques : effectuer des statistiques sur des données météorologiques
Dataframes
- Les requêtes
- les formats
- Spark SQL
- Travaux pratiques : optimiser les RDD avec les dataframes
Application : exécution et debug
- CStructure d'une application
- Exécuter une application
- WebUI
- Optimisation
- Travaux pratiques : observer et optimiser l'exécution de l'analyse de texte
Streaming
- Présentation de DStream
- Découverte de Sqoop
- Utilisation de Kafka
- Travaux pratiques : exploiter des données via sqoop en temps réel
SparkML
- Présentation de ML et MLlib
- Composants : Estimators, Transformers, Evaluators
- Pipeline
- Utilisation de Kafka
- Travaux pratiques : Prédire la race d'un chien présent dans une image
Prérequis
Connaissances sur Python
Public
Développeurs Backend et Architectes SI
Ces formations pourraient vous intéresser
Objectifs de la formation
- Cette formation fait l'objet d'une évaluation formative.
| Tarif |
Contacter l'organisme |
| Durée |
5 jours (35 heures) |
| Modes |
|
Objectifs de la formation
- Appréhender le concept du Cloud
- Évaluer les apports du Cloud pour l'entreprise
- Identifier les impacts structurels et ceux liés à la sécurité
- Appréhender la classification générique des Clouds : IaaS, PaaS, SaaS, PBaaS, XXaaS
- Appréhender les différents types de déploiement du Cloud : public, privé, hybride, virtuel, communautaire
- Identifier les principales offres Cloud du marché
- Anticiper les impacts directs et indirects du Cloud sur l'entreprise et son SI
- Comprendre comment mener un projet de Cloud Computing
| Tarif |
A partir de 1 590,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
- Maîtriser des fonctionnalités avancées de Tableau Desktop
- Savoir exploiter des sources de données uniques et multiples
- Maîtriser les pratiques avancées de calculs
- Savoir créer et utiliser des paramètres
- Maîtriser les options de géo codification, la cartographie avancée
| Tarif |
A partir de 1 500,00 € |
| Durée |
2 jours |
| Modes |
|
Objectifs de la formation
Maîtriser les processus de sauvegarde et de restauration d'une base de données Oracle 18c| Tarif |
A partir de 3 875,00 € |
| Durée |
5j / 35h |
| Modes |
|
Formation IA pour juristes : intégrer l’AI dans votre pratique quotidienne
Proposé par LEFEBVRE DALLOZ COMPETENCESObjectifs de la formation
- Appréhender la notion d'intelligence artificielle et ses applications dans le domaine juridique
- Évaluer les enjeux de l'utilisation de l'intelligence artificielle dans ses fonctions de juristes
- Analyser les outils et technologies basés sur l'intelligence artificielle utiles au métier de juriste
| Tarif |
Contacter l'organisme |
| Durée |
Nous contacter |
| Modes |
|
Objectifs de la formation
- Réaliser un pilotage de la performance efficace
- Connaître les principes de la stratégie
- Maîtriser les étapes de l'élaboration d'un plan stratégique
- Savoir mettre en oeuvre un plan stratégique
- Piloter la mise en œuvre du plan d’actions
| Tarif |
A partir de 1 300,00 € |
| Durée |
2 jours |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Mettre en oeuvre un réseau privé virtuel sur les réseaux filaires comme sur les réseaux sans-fil
- Identifier les menaces contre vos communications
- Déterminer les coûts, la sécurité et le choix des technologies
- Appliquer les techniques de chiffrement des messages
- Décrire les offres des opérateurs
- Mettre en place une politique de détection, correction des failles et vulnérabilités dans les réseaux.
| Tarif |
A partir de 2 010,00 € |
| Durée |
3j / 21h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Mettre en oeuvre les fonctions logiques et les fonctions de recherche.
| Tarif |
A partir de 300,00 € |
| Durée |
3h00 |
| Modes |
|
Objectifs de la formation
- Comprendre les dernières évolutions législatives et réglementaires en droit de la compliance
- Interpréter la jurisprudence récente en droit français et droit européen
- Anticiper les nouvelles pratiques qui en découlent
| Tarif |
Contacter l'organisme |
| Durée |
3.5 Heures |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Exploiter les bases de l'administration Cognos Analytics 12.x.
| Tarif |
A partir de 1 520,00 € |
| Durée |
2j / 14h |
| Modes |
|
