Web scraping avec Python
Public admis
- Salarié en Poste
- Demandeur d'emploi
- Entreprise
- Etudiant
Financements
Eligible CPF Votre OPCO Financement personnel
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Réaliser du scraping de données
- Faire les actions d'ingestion nécessaires pour alimenter un Data Lake.
| Tarif |
A partir de 2 010,00 € |
| Durée | 3 jours (21h00) |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
| Tarif |
A partir de 2 010,00 € |
| Durée | 3 jours (21h00) |
| Modes |
|
| Sessions | |
| Lieux | Partout en France |
Programme
Les bases du langage Python
- Les caractéristiques du langage Python
- Pourquoi choisir Python pour l'analyse de données ?
- Types de bases
- Les instructions de bases
- Les procédures et fonctions
L'ingestion avec Python
- Utiliser la librairie Pandas pour manipuler les données
- Introduction du concept de DataFrame
- Les structures :
- Interrogation
- Indexation
- Traitement de "données manquantes"
- Fusion de DataFrames
- Manipulation des dates
- Application de mesures statistiques variées sur les DataFrames
- Bonne compréhension des problèmes d'échelle de mesure, de normalisation
- Création de métriques d'analyse
Scraping de données
- Qu'est-ce que le scraping ?
- Définition du scraping et de ses différents niveaux de difficulté sur plusieurs supports
- Depuis le Web
- Depuis du papier
- Depuis des PDF
- Exemples de projets réalisés grâce au scraping
- L'architecture d'Internet
- Qu'est-ce qu'un "client" ? Qu'est-ce qu'un "serveur" ? Pourquoi est-ce important ?
- Comment HTTP et HTML impactent-t-ils nos scrapers ?
- Qu'est-ce qu'une balise HTML ? Un attribut ?
- Comment identifier certains éléments avec une "class" ou un "id" ?
Python comme solution ETL
- Les formats de données structurées : CSV, flux XML et JSON
- Lecture et écriture de fichiers
- Exploitation des données de fichiers de différentes sources
- Fonctions d'accès et de chargement de données en blocs de lignes
- Outils spécifiquement dédiés au scraping :
- Beautiful Soup
- CSS Select
Mise en oeuvre d'un scraper
- Un scraper simple (requêtes GET, pages séquencées)
- Identifier la stratégie à adopter pour naviguer sur le site
- Coder le scraper
- Un scraper complexe : envoyer des données à un site Internet pour obtenir des résultats plus complexes
- Qu'est ce qu'une requête POST et une requête GET ?
- Parcourir un site pour trouver les données
- Identifier la stratégie à adopter
- Coder le scraper
Le contenu de ce programme peut faire l'objet d'adaptation selon les niveaux, prérequis et besoins des apprenants.
Modalités d’évaluation des acquis
- En cours de formation, par des études de cas ou des travaux pratiques
- Et, en fin de formation, par un questionnaire d'auto-évaluation
Prérequis
Public
Ces formations pourraient vous intéresser
Référencement Mobile d’un site Web - Adopter les bonnes pratiques du Mobile-First Indexing
Proposé par GROUPE ARKESYSObjectifs de la formation
- Comprendre les spécificités du référencement mobile ;
- Réaliser un audit de son référencement mobile ;
- Mettre en place une stratégie de mots clés pour son référencement mobile ;
- Mettre en place une stratégie de deep linking pour son application mobile ;
- Appréhender les outils du référencement mobile.
| Tarif |
A partir de 3 100,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
- Pendant la formation, le formateur évalue la progression pédagogique des participants via des QCM, des mises en situation et des travaux pratiques. Les participants passent un test de positionnement avant et après la formation pour valider leurs compétences acquises.
| Tarif |
Contacter l'organisme |
| Durée |
3 jours (21 heures) |
| Modes |
|
Objectifs de la formation
Apprendre à développer des applications mobiles de type Progressive Web App (PWA)| Tarif |
A partir de 1 575,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
Savoir utiliser les services web avec PHP - Connaitre les principales normes et architectures de services web| Tarif |
A partir de 1 495,00 € |
| Durée |
2j / 14h |
| Modes |
|
Objectifs de la formation
Concevoir des applications web PHP maintenables et réutilisables - Optimiser le code| Tarif |
A partir de 2 475,00 € |
| Durée |
5j / 35h |
| Modes |
|
Objectifs de la formation
Toute personne souhaitant enrichir ses sites Web de boutons, pictogrammes, animations, illustrations photos ou graphiques.
À l'issue de la formation, le stagiaire sera capable de :
- Créer et animer des objets
- Optimiser un site Web
| Tarif |
Contacter l'organisme |
| Durée |
2 jour(s) |
| Modes |
|
Objectifs de la formation
- Découvrir les pratiques de base de l’architecture AWS
- Examiner la mise en place de la sécurité des accounts à l’aide de stratégies
- Identifier les éléments nécessaires pour construire un réseau virtuel (VPC) modulable, sécurisé, qui inclut les sous-réseaux privés et les sous-réseaux publics
- Déterminer des stratégies pour une approche de sécurité en couches pour les sous-réseaux Virtual Private Cloud (VPC)
- Identifier des stratégies pour sélectionner les ressources de calcul appropriées (EC2, Lambda, container, …) en fonction des cas d’utilisation métier
- Créer un VPC et ajouter une instance Elastic Cloud Compute (EC2)
- Installer une instance Amazon Relational Database Service (RDS) et un répartiteur de charge d’application Balancer (ALB) dans le VPC créé
- Comparer les produits et services de stockage AWS
- Créer une couche de base de données hautement disponible et à mise à l’échelle automatique
- Explorer la potentialité des solutions de supervision AWS
- Etudier et échanger sur les outils d’automatisation AWS qui vous aideront à créer, maintenir et faire évoluer votre infrastructure
- Etudier l’appairage de réseaux, des points de terminaison de VPC, des solutions de passerelle et de routage en fonction des cas d’utilisation
- Connaitre les configurations de réseau hybride pour étendre et sécuriser votre infrastructure
- Découvrir les avantages des micro services en tant que stratégie de découplage efficace pour alimenter des applications hautement disponibles à grande échelle
- Explorer les services de conteneurs AWS pour la mise en œuvre rapide d’un environnement d’application portable et indépendant de l’infrastructure
- Identifier les avantages de sécurité des services « serverless » AWS sur la base d’exemples du monde réel
- S’entraîner à créer un déploiement CloudFront avec un backend S3 dans un environnement de laboratoire
- Explorer les solutions de sauvegarde, de récupération et les meilleures pratiques AWS pour assurer la résilience et la continuité des activités
- Créer une architecture cloud hautement disponible et sécurisée basée sur un problème métier, dans un laboratoire guidé par un animateur, basé sur un projet
| Tarif |
A partir de 2 750,00 € |
| Durée |
4j / 28h |
| Modes |
|
Objectifs de la formation
Acquérir les fondamentaux pour mettre en œuvre des prototypes de vos projets web, pour partager "l’expérience utilisateur" et "valider les choix".
À l'issue de la formation, le stagiaire sera capable de :
- Maîtriser les bonnes pratiques de conception d'interfaces
- Créer des interfaces interactives de sites Web et d'applications mobiles
- Réaliser des parcours de navigation répondant aux besoins des utilisateurs
- Partager et tester des prototypes pour réaliser des interfaces fonctionnelles.
| Tarif |
Contacter l'organisme |
| Durée |
2 jour(s) |
| Modes |
|
Objectifs de la formation
Comprendre les concepts de base pour la conception de centres de données - Acquérir la terminologie et les concepts en rapport avec la plate-forme AWS, et navigation dans AWS Management Console - Comprendre les services d'infrastructure fondamentaux, notamment Amazon Virtual Private Cloud (VPC), Amazon Elastic Compute Cloud (EC2), Amazon Elastic Block Store (EBS), Amazon Simple Storage Service (S3), Auto Scaling et Elastic Load Balancing (ELB) - Comprendre les mesures de sécurité proposés par AWS et les concepts clés d'AWS Identity and Access Management (IAM) - Comprendre les services de bases de données AWS, notamment Amazon DynamoDB et Amazon Relational Database Service (RDS) - Comprendre les outils de gestion AWS| Tarif |
A partir de 775,00 € |
| Durée |
1j / 7h |
| Modes |
|
Objectifs de la formation
A l'issue de cette formation, vous serez capable de :
- Décrire les différents points de fragilité d'un site Web et d'un hébergement au niveau de la sécurité
- Mesurer les implications juridiques et d'exploitation
- Installer WordPress avec les règles de sécurité de base
- Installer et paramétrer des plug-ins complémentaires gratuits et payants à WordPress afin de le sécuriser
- Mettre en place une politique de sauvegarde de l'hébergement et des éléments WordPress
- Adapter le niveau de sécurisation du site en fonction des données qui y sont stockées et qui y transitent.
| Tarif |
Contacter l'organisme |
| Durée |
1j / 7h |
| Modes |
|
