Parte 2 de nuestro último proyecto de Scrapy / Tutorial de Web Scraping. Creando la Araña.
Web Scraping de un sitio grande con "scroll infinito" también conocido como "carga más con AJAX".
(Esto se basa en un proyecto real de Upwork).
*** PARTE 2 de 7 ***
Esto cubre la configuración del código de la araña, creando la clase de la araña, nombre, configuraciones personalizadas, URLs de inicio, encabezados, os.remove de archivos de prueba, y luego pasa a ver las 2 funciones principales: parse y parse_detail.
Como siempre, escribo la araña para ser ejecutada usando la sintaxis: "python3 spidername.py
Así que ahora puedes ver cómo ejecutar Scrapy como un Script de Python.
Por favor, comenta, suscríbete, da like, ya que esto requiere mucho esfuerzo y cuantas más opiniones/comentarios tengamos, mejor podremos adaptar futuros videos para ti.
Código en GitHub
Saludos,
Dr. Pi.
#scrapy #scrollinfinito #cargarmás