Programar tu propio rastreador es casi un rito de iniciación al usar Python para SEO, pero el mantenimiento es una de las cosas más difíciles de conceptualizar e implementar. En este video, creo una lista de no visitados y visitados en formato pickle, actualizando el objeto en pickle en el almacenamiento con cada lectura y escritura, de modo que incluso si el (pequeño) rastreo se interrumpe, puede retomar desde donde lo dejó. Aún no he implementado la capacidad de reanudar, pero está listo para ello.