O Curso para Iniciantes em Scrapy ensinará tudo o que você precisa saber para começar a fazer scraping de sites em grande escala usando Python Scrapy.
O curso abrange:
- Criando sua primeira aranha Scrapy
- Raspando sites e coletando dados de cada página
- Limpando dados com Itens e Pipelines de Itens
- Salvando dados em arquivos CSV, bancos de dados MySQL e Postgres
- Usando user-agents e cabeçalhos falsos para evitar bloqueios
- Usando proxies para escalar seu web scraping sem ser banido
- Implantando seu scraper na nuvem e agendando para rodar periodicamente
✏️ Curso criado por Joe Kearney.
⭐️ Recursos ⭐️
Recursos do Curso
Ambientes na Nuvem
Proxies
⭐️ Conteúdos ⭐️
⌨️ (0:00:00) Parte 1 - Introdução ao Scrapy e ao Curso
⌨️ (0:08:22) Parte 2 - Configurando o Ambiente Virtual e o Scrapy
⌨️ (0:16:28) Parte 3 - Criando um Projeto Scrapy
⌨️ (0:28:17) Parte 4 - Construa sua Primeira Aranha Scrapy
⌨️ (0:55:09) Parte 5 - Construa uma Aranha de Descoberta e Extração
⌨️ (1:20:11) Parte 6 - Limpando Dados com Pipelines de Itens
⌨️ (1:44:19) Parte 7 - Salvando Dados em Arquivos e Bancos de Dados
⌨️ (2:04:33) Parte 8 - User-Agents Falsos e Cabeçalhos de Navegador
⌨️ (2:40:12) Parte 9 - Rotacionando Proxies e APIs de Proxy
⌨️ (3:18:12) Parte 10 - Executando Aranhas na Nuvem com Scrapyd
⌨️ (4:03:46) Parte 11 - Executando Aranhas na Nuvem com ScrapeOps
⌨️ (4:20:04) Parte 12 - Executando Aranhas na Nuvem com Scrapy Cloud
⌨️ (4:30:36) Parte 13 - Conclusão e Próximos Passos
🎉 Agradecimentos aos nossos apoiadores Campeões e Patrocinadores:
👾 davthecoder
👾 jedi-or-sith
👾 南宮千影
👾 Agustín Kussrow
👾 Nattira Maneerat
👾 Heather Wcislo
👾 Serhiy Kalinets
👾 Justin Hual
👾 Otis Morgan
--