Apache Kafka y ksqlDB en Acción: ¡Construyamos un Pipeline de Datos en Streaming!

¿Alguna vez has pensado que necesitabas ser programador para hacer procesamiento de streams y construir pipelines de datos en streaming? ¡Piensa de nuevo! Apache Kafka es una plataforma de streaming distribuida, escalable y tolerante a fallos, que proporciona mensajería pub-sub de baja latencia junto con capacidades nativas de almacenamiento y procesamiento de streams. Integrar Kafka con RDBMS, NoSQL y almacenes de objetos es sencillo con Kafka Connect, que es parte de Apache Kafka. ksqlDB es la base de datos de streaming de eventos para Apache Kafka, y hace posible construir aplicaciones de procesamiento de streams a gran escala, escritas utilizando una interfaz SQL familiar.

En esta charla, explicaremos el razonamiento arquitectónico detrás de Apache Kafka y los beneficios de la integración en tiempo real, y construiremos un pipeline de datos en streaming utilizando solo nuestras manos, Kafka Connect y ksqlDB.

¡Asómbrate mientras filtramos eventos en tiempo real! ¡Queda maravillado de cómo podemos enriquecer flujos de datos con datos de RDBMS! ¡Queda asombrado por el poder de los agregados en streaming para la detección de anomalías!

👾 Pruébalo tú mismo: https://github.com/confluentinc/demo-scene/tree/master/build-a-streaming-pipeline

--

🎓 Recursos

👾 Pruébalo tú mismo: https://github.com/confluentinc/demo-scene/tree/master/build-a-streaming-pipeline

📔 Presentaciones: http://talks.rmoff.net/tkl4a1/apache-kafka-and-ksqldb-in-action-lets-build-a-streaming-data-pipeline

🎥 Introducción a ksqlDB: https://rmoff.dev/ksqldb-introduction

🎥 Transmitiendo datos de Kafka a Elasticsearch: https://rmoff.dev/kafka-elasticsearch-video

--

☁️ Confluent Cloud ☁️

Confluent Cloud es un servicio gestionado de Apache Kafka y Confluent Platform. Escala a cero y te permite comenzar con Apache Kafka con un clic del ratón. Puedes registrarte en https://confluent.cloud/signup?utm_source=youtube&utm_medium=rmoff&utm_campaign=ty.community.con.rmoff_youtube_2fUOi9wJPhk&utm_term=rmoff-devx y usar el código 60DEVADV para $60 de descuento en tu factura (letra pequeña: https://www.confluent.io/confluent-cloud-promo-disclaimer/)