Erstellen Sie ein Konto, um KI zu nutzen

Erstellen Sie ein kostenloses Konto, um alle Funktionen freizuschalten:

Stellen Sie Fragen zu Videos mit KI
Nutzen Sie die intelligente Suche (KI)
Speichern Sie Ihre Lieblingsvideos
Markieren Sie Ihre Lieblingskategorien
Organisieren Sie Ihre Lieblingsunterkategorien
Greifen Sie auf Ihre personalisierte Favoritenseite zu
Greifen Sie auf Ihren Gesprächsverlauf zu
Personalisieren Sie Ihre Startseite mit Ihren Favoriten

Konto erstellen

Haben Sie bereits ein Konto? Anmelden

Scraping-Geheimrezept: Reverse Engineering API

Geraldus Wilsen

In diesem Video werden wir tiefer in das Scraping mit der Reverse Engineering API eintauchen.

00:00:00 - Einführung

00:01:05 - Scraping-Szenario (Fallstudie)

00:02:11 - Erklärung, wie Daten auf einer Website angezeigt werden (Front-End und Back-End)

00:04:21 - Größter Fehler beim Scraping

00:05:49 - Code-Übersicht

00:06:15 - Scraping-Ethische Grundsätze

00:06:45 - Finden der versteckten API

00:08:57 - Abrufen von Daten mit der Basic Request Library

00:09:46 - TLS-Fingerprinting

00:10:46 - Einstellen der Request-Header

00:12:41 - Verarbeitung von Daten mit Pydantic

00:14:38 - Einführung in Camoufox

00:15:59 - Erstellen eines synchronen Scrapers

00:22:27 - Erklärung: Sync vs Async

00:23:57 - I/O-bound vs CPU-bound

00:25:06 - Optimierung des Scrapers mit Async und paralleler Verarbeitung

00:28:26 - Outro

Github: https://github.com/projectwilsen/scraping

#scraping #python #daten

Scraping-Geheimrezept: Reverse Engineering API | Knoovi