O pipeline de dados interno da Netflix processa centenas de bilhões de mensagens por dia e foi recentemente atualizado para usar Apache Kafka na coleta de dados de todos os seus aplicativos. Jonathan Bond (Engenheiro de Software Sênior na Netflix) explicará os desafios de construir um pipeline para lidar com um trilhão de mensagens por dia e como os usuários finais podem configurá-lo para enviar os dados para as equipes certas no momento certo. A entrega de mensagens é crítica para um pipeline bem-sucedido; Jonathan mostrará como o pipeline da Netflix é monitorado e como as falhas são tratadas para superar a disponibilidade de quatro noves.
Bio
Jonathan Bond é Engenheiro de Software Sênior na Netflix, onde utiliza Apache Kafka para implementar sistemas de pipeline de dados e mensagens. Antes da Netflix, ele foi engenheiro na IBM, onde trabalhou em processamento de transações, mensagens, barramento de serviços corporativos, processamento de eventos complexos e regras de negócios.