Dans ce tutoriel de web scraping en Python, j'utilise Python 3 et le package Python requests pour extraire une liste d'utilisateurs en ligne d'une application de chat. Dans ma prochaine vidéo, je vous montrerai comment scraper Amazon, alors assurez-vous de vous abonner pour rester informé.
Pour suivre ce tutoriel, vous devez avoir installé ce qui suit :
Je démontre l'utilisation des sessions et des cookies, en utilisant le package Python requests, et je vous montre à quel point il est facile de faire des requêtes vers des applications nécessitant une connexion. Je montre également brièvement comment analyser les données retournées en utilisant JSON.
Si vous aimez cette vidéo et souhaitez voir plus de vidéos et de tutoriels sur le web scraping, merci de me soutenir en mettant un pouce en l'air et en vous abonnant. Laissez un commentaire avec vos questions ou vos demandes pour de futures vidéos.
Qu'est-ce que le Web scraping ?
Le web scraping, la collecte de données web ou l'extraction de données web est une technique utilisée pour extraire des données de sites web. Les logiciels de web scraping peuvent accéder au World Wide Web directement via le protocole HTTP, ou à travers un navigateur web. Bien que le web scraping puisse être effectué manuellement par un utilisateur de logiciel, le terme fait généralement référence à des processus automatisés mis en œuvre à l'aide d'un bot ou d'un crawler web. C'est une forme de copie, dans laquelle des données spécifiques sont rassemblées et copiées depuis le web, généralement dans une base de données locale centrale ou un tableur, pour une récupération ou une analyse ultérieure.
Playlist Web Scraping :
Autres vidéos de Web Scraping :
Web Scraping : Web Scraping avec Python par BangPypers
Web Scraping : Web Scraping avec Python par M.Yasoob Khalid
Web Scraping : Web Scraping avec Python par Nikola Milojica
Web Scraping : Web Scraping puissant et recherche avec Python par Michael Ruegg
Web Scraping : Étapes pour effectuer du Web Scraping avec Python
Web Scraping : Outils de Web Scraping Python par le Singapore Python User Group
Web Scraping : Sessions, Requêtes, Cookies & JSON
Web Scraping : utiliser des requêtes pour passer des paramètres de recherche à craigslist
Web Scraping : utiliser des requêtes pour scraper un site web pour des données
Web Scraping : Web scraping avec Python en utilisant Requests et LXML
Web Scraping : Vidéo de bases Python Async (100 millions de requêtes HTTP)
Web Scraping : Comment scraper derrière une page d'authentification avec Python Requests
Web Scraping : Comment télécharger tous les médias WordPress
Web Scraping : Web scraping rapide et sale avec Python
Web Scraping : Utiliser Python pour acheter des billets Avengers en premier !
Web Scraping : Écrire un scraper d'adresses e-mail en Python
CURL :
Web Scraping : Requêtes URL avec cURL et Console Chrome
Web Scraping : Scraping Flickr avec cURL pour un tutoriel amusant
Celery :
Web Scraping : Scraping avec Celery
Scrapy :
Web Scraping : Introduction au Web Scraping avec Scrapy
Web Crawler :
Web Scraping : Crawler Web Python
Pandas :
Web Scraping : Python Pandas : stocker des données dans un DataFrame Pandas
Web Scraping : Extraire facilement des tableaux de sites web avec pandas et python
Web Scraping : Extraire des données tabulaires d'un PDF avec Python - Tabula, Camelot, PyPDF2
XPATH :
Web Scraping : Python + XPath = Puissance d'analyse supplémentaire
Re Module :
Web Scraping : utiliser le module re de python pour traiter des fichiers texte partie 1
Web Scraping : utiliser le module re de python pour traiter des fichiers texte partie 2
API :
Web Scraping : Calcul de la moyenne mobile avec Python