Gravado durante o Algolia Search Party - Edição de Crawling - Junho de 2019, Paris
Escrevendo uma arquitetura de crawler distribuído - Nenad Tičarić, TNT Studio
Embora à primeira vista escrever um crawler possa parecer uma simples travessia do gráfico da web, na prática isso se complica pelas muitas demandas do sistema. Ele precisa ser distribuído, escalável, educado, robusto e extensível, mas ainda assim performático. Esta palestra abordará uma solução baseada em PHP para alguns desses problemas.