Hola, ¿qué tal chicos? Juntos hemos pasado por numerosos tutoriales de web scraping y dominado las bibliotecas Requests + Beautiful Soup junto con el framework Scrapy, pero hoy me gustaría profundizar un poco más en el proceso de web scraping y desglosarlo en dos partes principales: hacer solicitudes HTTP y analizar contenido. Este video cubre la primera parte: terminaremos creando métodos get() y post() para invocar las respectivas solicitudes HTTP y poder proporcionar la carga de datos junto con encabezados personalizados.
No lo tomen demasiado en serio, está hecho más con fines educativos que para uso en producción)
Código fuente
Proyecto completo
Próxima parte (implementando el analizador HTML)