Crie uma conta para usar a IA

Crie uma conta gratuita para desbloquear todos os recursos:

Faça perguntas sobre vídeos com IA
Use a busca inteligente (IA)
Salve seus vídeos favoritos
Marque suas categorias favoritas
Organize suas subcategorias favoritas
Acesse sua página de favoritos personalizada
Acesse o histórico das suas conversas
Personalize sua página inicial com seus favoritos

Já tem uma conta? Entrar

Apache Kafka e ksqlDB em Ação: Vamos Construir um Pipeline de Dados em Streaming!

Name: Apache Kafka e ksqlDB em Ação: Vamos Construir um Pipeline de Dados em Streaming!
Uploaded: 2020-09-08T21:54:55+00:00
Duration: 28 min 43 s

Robin Moffatt

Você já pensou que precisava ser um programador para fazer processamento de stream e construir pipelines de dados em streaming? Pense novamente! Apache Kafka é uma plataforma de streaming distribuída, escalável e tolerante a falhas, que oferece mensagens pub-sub de baixa latência, juntamente com armazenamento nativo e capacidades de processamento de stream. Integrar Kafka com RDBMS, NoSQL e armazenamentos de objetos é simples com o Kafka Connect, que faz parte do Apache Kafka. ksqlDB é o banco de dados de streaming de eventos para o Apache Kafka, e possibilita construir aplicações de processamento de stream em escala, escritas usando uma interface SQL familiar.

Nesta palestra, vamos explicar o raciocínio arquitetônico por trás do Apache Kafka e os benefícios da integração em tempo real, e vamos construir um pipeline de dados em streaming usando apenas nossas próprias mãos, Kafka Connect e ksqlDB.

Fique maravilhado enquanto filtramos eventos em tempo real! Fique impressionado com como podemos enriquecer streams de dados com dados de RDBMS! Fique atônito com o poder de agregados em streaming para detecção de anomalias!

👾 Experimente você mesmo: https://github.com/confluentinc/demo-scene/tree/master/build-a-streaming-pipeline

🎓 Recursos

👾 Experimente você mesmo: https://github.com/confluentinc/demo-scene/tree/master/build-a-streaming-pipeline

📔 Apresentação: http://talks.rmoff.net/tkl4a1/apache-kafka-and-ksqldb-in-action-lets-build-a-streaming-data-pipeline

🎥 Introdução ao ksqlDB: https://rmoff.dev/ksqldb-introduction

🎥 Streaming de dados do Kafka para Elasticsearch: https://rmoff.dev/kafka-elasticsearch-video

☁️ Confluent Cloud ☁️

Confluent Cloud é um serviço gerenciado de Apache Kafka e Confluent Platform. Ele escala para zero e permite que você comece a usar o Apache Kafka com um clique do mouse. Você pode se inscrever em https://confluent.cloud/signup?utm_source=youtube&utm_medium=rmoff&utm_campaign=ty.community.con.rmoff_youtube_2fUOi9wJPhk&utm_term=rmoff-devx e usar o código 60DEVADV para $60 de desconto na sua fatura (letra miúda: https://www.confluent.io/confluent-cloud-promo-disclaimer/)