DataOps - Concevoir et automatiser des pipelines résilients et scalables
Public admis
- Salarié en Poste
- Demandeur d'emploi
- Entreprise
- Etudiant
Financements
Eligible CPF Votre OPCO Financement personnel
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Définir une stratégie Data ambitieuse et réaliste
- Evaluer les priorités Data de l'organisation en fonction de l'état des lieux et de la vision
- Identifier les meilleures technologies disponibles et leur articulation / complémentarité
- Analyser les besoins et attentes des parties prenantes et implémenter une démarche de transformation DataOps robuste (conduite du changement).
| Tarif |
A partir de 3 800,00 € |
| Durée | 5 jours (35h00) |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
| Tarif |
A partir de 3 800,00 € |
| Durée | 5 jours (35h00) |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
Programme
Jour 1
Fondamentaux
- Qu'est-ce qu'une donnée ?
- Evolution des analytiques : des bases relationnelles aux Lakehouses et Data Mesh des pipelines avec la vision
- Stratégie des données, valeur des données, sémantique des données, BPM (Business Process Management)
- Apports des analytiques et du Cloud
- Qu'est-ce qu'une organisation Data Driven ?
- Cycle de vie de la Data, gouvernance et qualité des données
- Lean, Agilité et DevOps appliqués aux données
- Apports du DataOps
- DevOps vs DataOps vs MLOps
- Analytiques et opérations : briser le mur de la confusion
- Constituer et former les Data Teams
- Introduction à Microsoft Azure
Exemple de travaux pratiques (à titre indicatif)
- Mise en pratique : études de cas DataOps
Jour 2
Scoping et définition des éléments des pipelines DataOps
- La stratégie des données, et différence avec les stratégies IT et de gouvernance de données
- Définir la vision
- Déterminer et aligner les objectifs des pipelines avec la vision
- Cartographie de la chaîne de valeur (Value Stream Mapping)
- Processus de développement Agile DataOps : idéation, inception, R&D, transition / production
- Devenir Data Driven
Exemple de travaux pratiques (à titre indicatif)
- Etude de cas : rédiger la stratégie Data d'une entreprise
Jour 3
Produire la valeur
- Planifier les itérations
- Extraire la valeur des données
- Surveiller la qualité avec la MSP (Maîtrise Statistique des Procédés)
- Mesurer les bénéfices
- Animer les rétrospectives et assurer l'amélioration continue
Les technologies DataOps
- Ecosystème des technologies DataOps
- Build vs Buy
- Choisir les bons outils : cartes de Wardley, radar technologique
- Intégration, préparation, traitement et management des données
- Reproductibilité, déploiement, orchestration, et surveillance
- Infrastructure de calcul et moteur d'exécution de requêtes
- Stockage, plateformes et outils d'analytics
- Faire évoluer la pile technologique
Jour 4
Le DataOps Factory
- Importance de la gouvernance des données
- Culture DataOps et conduite du changement
- Centraliser les plateformes
- Tout automatiser
- L'organisation Self-Service
Exemple de travaux pratiques (à titre indicatif)
- Cas pratiques : concevoir la conduite du changement sur des exemples réels
Jour 5
Mise en pratique : construction et amélioration d'un pipeline DataOps
- Conception du workflow
- Création et test des conteneurs
- Automatisation du workflow
- Orchestration des conteneurs avec K8s
- Monitoring des conteneurs
- Résilience et test du pipeline
- Implémentation de GitOps avec Argo CD
Le contenu de ce programme peut faire l'objet d'adaptation selon les niveaux, prérequis et besoins des apprenants.
Modalités d’évaluation des acquis
- En cours de formation, par des études de cas ou des travaux pratiques
- Et, en fin de formation, par un questionnaire d'auto-évaluation
Prérequis
Public
Ces formations pourraient vous intéresser
Objectifs de la formation
Cette formation VBA Programmation Office vous donne les connaissances et compétences nécessaires pour :
- Savoir automatiser des solutions informatiques élaborées basées sur l'intégration des composants Office pilotés par VBA
- Apprendre à développer rapidement une application VBA
- Pouvoir exploiter la synergie des composants de la suite Office dans une application
| Tarif |
A partir de 2 240,00 € |
| Durée |
5j / 35h |
| Modes |
|
Objectifs de la formation
- Comprendre les principes de développement utiles aux ingénieurs data et data scientists pour faciliter le déploiement de leur code en production
- S’approprier les principales fonctionnalités de Kedro (project template, configuration, data catalog et pipeline)
- Mettre en œuvre l’outil dans un workflow pour créer des pipelines de données
| Tarif |
A partir de 750,00 € |
| Durée |
1 jour |
| Modes |
|
Objectifs de la formation
- Concevoir et mettre en œuvre des tables
- Assurer l'intégrité des données via les contraintes
- Décrire les différents types d'index
- Utiliser les outils nécessaires au bon choix d'index
- Concevoir et mettre en œuvre les vues
- Concevoir et mettre en œuvre les procédures stockées
- Concevoir et mettre en œuvre les fonctions
- Concevoir et mettre en œuvre les triggers
- Concevoir et mettre en œuvre les tables " in-memory "
- Mettre en œuvre le code géré (CLR) dans SQL Server
- Effectuer des requêtes sur les données XML
- Travailler avec les données spatiales
- Gérer les verrous et les transactions
| Tarif |
Contacter l'organisme |
| Durée |
5j / 35h |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation Maîtriser Power BI, vous aurez acquis les connaissances et compétences nécessaires pour :
- Savoir obtenir, modéliser et restituer les données
- Créer des tableaux de bord interactifs
- Publier et partager de façon sécurisée ces tableaux de bord dans les espaces de travail Microsoft OneDrive et SharePoint
- Interroger et associer des sources de données hétérogènes
- Concevoir des mesures, des colonnes et des tables avec le langage DAX (Data Analysis Expressions)
- Utiliser des éléments visuels pour concevoir des tableaux de bord
| Tarif |
A partir de 2 695,00 € |
| Durée |
5j / 35h |
| Modes |
|
Objectifs de la formation
Toute personne débutante sur Access, devant utiliser et concevoir ses propres bases de données.
A l'issue de la formation, le stagiaire sera capable de :
- Concevoir sa propre Base de données contenant plusieurs tables
- Élaborer des requêtes, des formulaires, sortir des résultats sous forme d'états
Formation éligible à l'utilisation du CPF avec possibilité du passage de la certification TOSA en fin de formation.
| Tarif |
A partir de 1 140,00 € |
| Durée |
3 jour(s) |
| Modes |
|
Objectifs de la formation
À l'issue de cette formation Nginx, vous aurez acquis les connaissances et compétences nécessaires pour :
- Exploiter Nginx au quotidien, de l'installation à l'administration
- Exploiter au mieux la pile de services Nginx pour concevoir ou revaloriser des solutions serveurs
- Augmenter les performances et la disponibilité de Nginx
- Connaître les neuf clés secrères de NGINX dans une optique de configuration avancée
| Tarif |
A partir de 1 840,00 € |
| Durée |
3j / 21h |
| Modes |
|
Red Hat DevOps Pipelines and Processes - CI/CD with Jenkins, Git, and Test Driven Development
Proposé par M2IObjectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Utiliser les concepts présentés dans ce cours pour simplifier et intégrer plus efficacement le code de votre application
- Créer un code fiable avec le développement par les tests et utiliser des pipelines automatisés pour simplifier les tests
- Créer des pipelines, à concevoir des applications selon une approche qui privilégie les tests en amont et à intégrer le code de votre application à Git
- Illustrer les avantages du modèle DevOps et de présenter les outils nécessaires à sa mise en oeuvre.
| Tarif |
Contacter l'organisme |
| Durée |
5j / 26h |
| Modes |
|
Objectifs de la formation
Savoir maîtriser
Gatling est un outil de développement open source dédié de test de charge et de prerformance des applications web. Il fournit une alternative full dev-ops au vénérable JMeter. Les tests de charge sont scriptés via le langage Scala et s’intègrent aisément dans les pipelines de CI/CD (intégration continue / livraison continue) des approches DevOps. L’architecture asynchrone du produit lui permet de simuler de très nombreux utilisateurs avec un minimum de ressources.
Avec cette formation Gatling, vous apprendrez à :
- Installer et intégrer Gatling dans une chaîne CI/CD
- Développer ses scripts via le DSL fourni
- Bâtir des rapports de performance selon le standard du domaine
- Écrire des tests fonctionnels avec Gatling
| Tarif |
A partir de 1 480,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Configurer et gérer un cluster OpenShift 4.x
- Exécuter des environnements de production à grande échelle
- Configurer des pools de noeuds de cluster avec des configurations spéciales et vérifier que seuls les workloads destinés à ces pools soient planifiés sur ces noeuds
- Configurer l'authentification d'entreprise et la gestion des groupes avec les systèmes de gestion des identités LDAP (Lightweight Directory Access Protocol) et OIDC (OpenID Connect) Cloud-native
- Déployer, gérer et interroger OpenShift Logging, et configurer la transmission des journaux vers des agrégateurs externes et des systèmes de gestion des informations et des événements de sécurité (SIEM)
- Automatiser la configuration du cluster et le déploiement de l'application à l'aide d'OpenShift GitOps
- Résoudre des problèmes de performances et de disponibilité des applications et clusters avec OpenShift Monitoring
- Configurer et automatiser des sauvegardes au niveau de l'application à l'aide de l'opérateur OADP (OpenShift API for Data Protection).
| Tarif |
Contacter l'organisme |
| Durée |
5j / 26h |
| Modes |
|
Objectifs de la formation
Concrètement, à l'issue de cette formation Jenkins, vous aurez acquis les connaissances et compétences nécessaires pour :
- Comprendre les principes et les bénéfices de l’intégration continue
- Savoir installer, configurer et dimensionner un serveur Jenkins
- Être capable d’intégrer Jenkins avec d'autres outils (SCMs, Sonar, Nexus, Gestionnaire de tickets, Docker)
- Savoir définir des pipelines d’intégration ou de déploiement continue via l’interface Jenkins et via des scripts Pipelines
- Comprendre comment exploiter un serveur Jenkins
- Savoir utiliser l’API Rest et la CLI de Jenkins pour automatiser les builds
- Savoir automatiser les tests et les audits de code
- Être capable d’automatiser et de déployer Jenkins sur un projet
| Tarif |
A partir de 1 480,00 € |
| Durée |
2j / 14h |
| Modes |
|
