Formation Le rôle de Data Engineer

Public admis

  • Salarié en Poste
  • Demandeur d'emploi
  • Entreprise
  • Etudiant

Financements

Eligible CPF Votre OPCO Financement personnel

Objectifs de la formation

  • Identifier les principales tâches et responsabilités d'un Data Engineer
  • Comprendre les concepts fondamentaux du traitement et stockage des données
  • Connaître les outils et technologies couramment utilisés en Data Engineering

Sparks


Tout l'IT, vraiment tout
Voir la fiche entreprise

Tarif

Contacter l'organisme

Durée 1 jour
Modes
  • Centre
  • Entreprise
Sessions

Sparks


Tout l'IT, vraiment tout
Voir la fiche

Tarif

Contacter l'organisme

Durée 1 jour
Modes
  • Centre
  • Entreprise
Sessions

Description

Cette formation d'une journée est destinée aux professionnels souhaitant se familiariser avec le rôle et les responsabilités d'un Data Engineer. Les apprenants découvriront les concepts fondamentaux du traitement et du stockage des données, ainsi que les outils et technologies couramment utilisés en Data Engineering.

Programme

Introduction à la formation d’acculturation au rôle de Data Engineer

Présentation du rôle et des responsabilités d’un Data Engineer
Différences entre Data Engineer, Data Scientist et Data Analyst
Contexte et enjeux du Data Engineering dans l’entreprise

Concepts fondamentaux du traitement et stockage des données

Types de données (structurées, semi-structurées, non-structurées)
Bases de données relationnelles et NoSQL
Systèmes de fichiers distribués, Hadoop HDFS
Introduction au Big Data et aux architectures distribuées
Notions de ETL (Extraction, Transformation, Load)

Tâches typiques du Data Engineer

Conception et mise en place d’architectures de données
Développement et maintenance de pipelines de données (ETL/ELT)
Optimisation des performances des systèmes de données
Assurer la qualité et la fiabilité des données
Collaboration avec les Data Scientists et les Data Analysts

Outils et technologies couramment utilisés en Data Engineering

Langages de programmation : Python, Java, Scala
Frameworks de traitement des données : Hadoop, Apache Spark
Outils de stockage et d’analyse des données : Hive, HBase
Plateformes de streaming de données : Kafka, Apache Flink

Prérequis

Des connaissances de base en programmation et en bases de données sont un plus.

Public

Tous

Ces formations pourraient vous intéresser

Objectifs de la formation

A l'issue de cette formation, vous serez capable de :

  • Fournir et gérer un stockage qui répond aux exigences de disponibilité et de performance des applications
  • Déployer Red Hat OpenShift Data Foundation sur un cluster Red Hat OpenShift en utilisant un stockage local ou Cloud
  • Sélectionner et configurer des classes de stockage en fonction des exigences de la charge de travail
  • Surveiller et étendre de manière proactive la capacité de stockage
  • Créer et attacher des snapshots et des clones de volumes persistants.
Tarif

Contacter l'organisme

Durée

5j / 26h

Modes
  • Centre
  • Distance

Déploiement d’un Firewall

Proposé par ENI Service

Objectifs de la formation

  • Décrire les différentes architectures de Firewall
  • Décrire le role d’un Firewall
  • Choisir une architecture et un type de Firewall
  • Intégrer un Firewall à un réseau
  • Mettre en place une politique de sécurité
  • Surveiller un Firewall
Tarif

A partir de 1 590,00 €

Durée

2j / 14h

Modes
  • Centre
  • Entreprise
  • Distance

Objectifs de la formation

  • Découvrir la Data Science et le métier de Data Scientist
  • Comprendre les concepts clés de la Data Science
  • Savoir utiliser les outils et méthodologies du Data Scientist
  • Pouvoir programmer en R ou en Python
  • Avoir des connaissances en machine learning
  • Gérer l'apprentissage supervisé, semi-supervisé et non-supervisé
  • Pouvoir intégrer la Data Science dans votre organisation
Tarif

A partir de 3 500,00 €

Durée

5 jours

Modes
  • Centre
  • Entreprise
  • Distance

Management d'équipe

Proposé par SHURAFORM - FORMAEREM

Objectifs de la formation

La certification Intégrer le management d’équipe dans le développement de son activité professionnelle s’adresse aux professionnels opérationnels qui endossent ou vont endosser un rôle managérial dans le cadre de leur fonction.
Tarif

A partir de 610,00 €

Durée

2j / 19h

Modes
  • Entreprise
  • Distance

Objectifs de la formation

  • Définir le rôle du responsable QHSE dans l'entreprise
  • Acquérir des compétences techniques
  • Utiliser les outils permettant de déployer une démarche de prévention
  • Mettre en oeuvre, gérer et animer des systèmes QHSE
  • Etablir une communication pertinente auprès des parties intéressées
Tarif

A partir de 1 390,00 €

Durée

20j / 140h

Modes
  • Centre
  • Entreprise
  • Distance

Objectifs de la formation

  • Comprendre le périmètre de travail du Business Analyst, son rôle et ses responsabilités
  • Identifier les enjeux métiers et les objectifs des différentes parties prenantes d'une organisation
  • Recueillir les besoins métiers et les traduire en exigences
  • Concevoir des solutions appropriées aux problématiques du métier
  • Connaître les meilleures pratiques de communication
  • S'approprier les techniques et outils utiles au Business Analyst
  • Comprendre l’intérêt de l’innovation et de la conception orientée-utilisateur
Tarif

A partir de 1 500,00 €

Durée

2 jours

Modes
  • Centre
  • Entreprise
  • Distance

Objectifs de la formation

  • Identifier le rôle et la contribution du marketing au sein de l'entreprise.
  • Devenir acteur du processus et de la performance marketing.
  • Imaginer de nouveaux axes de création de valeur.
Tarif

A partir de 1 305,00 €

Durée

2 jours (14 heures)

Modes
  • Centre
  • Entreprise
  • Distance

Objectifs de la formation

A l'issue de cette formation, vous serez capable de :

  • Concevoir une plateforme "Cloud-native" ou hybride pour le Machine Learning et l'IA (Intelligence Artificielle)
  • Consolider les actifs Data de l'organisation data-driven dans une seule plateforme
  • Démocratiser l'accès aux données et permettre aux équipes métier de produire des modèles de ML (Machine Learning) et d'IA en self-service
  • Automatiser la prise de décision dans l'organisation grâce à des pipelines de streaming
  • Ajouter des capabilités prédictives et prescriptives aux capabilités descriptives de la BI (Business Intelligence).
Tarif

A partir de 2 550,00 €

Durée

3j / 21h

Modes
  • Centre
  • Distance

Objectifs de la formation

  • Augmenter son rôle d'intermédiaire et de conseil au sein de sa structure et de son réseau
  • Définir les enjeux clés de la réforme de la santé au travail
  • Appliquer une démarche pluridisciplinaire d'assistant(e) social(e) du travail : expertise sociale, accompagnement individuel des salariés...
Tarif

A partir de 1 450,00 €

Durée

2j / 14h

Modes
  • Centre
  • Entreprise
  • Distance

Objectifs de la formation

  • Explorer les options de calcul et de stockage pour les charges de travail en matière d'ingénierie des données dans Azure
  • Explorer, transformer et charger des données dans l'entrepôt de données à l'aide d'Apache Spark
  • Effectuer l'exploration et la transformation des données dans Azure Databricks
  • Transformer les données avec Azure Data Factory ou Azure Synapse Pipelines
  • Optimiser les performances des requêtes avec des pools SQL dédiés dans Azure Synapse
  • Prendre en charge le traitement analytique transactionnel hybride (HTAP) avec Azure Synapse Link
  • Assurer la sécurité de bout en bout avec Azure Synapse Analytics
  • Effectuez un traitement de flux en temps réel avec Stream Analytics
  • Créer des rapports à l'aide de l'intégration Power BI avec Azure Synpase Analytics
  • Exécuter des processus d'apprentissage automatique intégrés dans Azure Synapse Analytics
Tarif

A partir de 2 590,00 €

Durée

4j / 28h

Modes
  • Centre
  • Entreprise
  • Distance

Je cherche à faire...