Como parte de este tema, veremos cómo ingerir datos en tiempo real utilizando el ecosistema de Kafka y procesarlos usando Spark Structured Streaming sobre Databricks.
## Agenda
Aquí está la agenda para este módulo o sección. Veremos un pipeline de análisis de streaming de extremo a extremo utilizando Kafka y Spark con Scala como Lenguaje de Programación sobre la Plataforma Databricks.
* Definir Declaración del Problema
* Configurar Instancia EC2
* Simular Registros de Servidor Web
* Configurar y Iniciar Kafka Broker
* Crear Tema de Kafka y Validar
* Ingerir Registros de Servidor Web en el Tema de Kafka
* Configurar Clúster de Databricks
* Integrar y Validar con Spark Structured Streaming
* Procesamiento de Datos en Streaming usando APIs de Data Frame
* Realizar Análisis de Datos usando Spark SQL