Este es un proyecto práctico de ingeniería de datos de extremo a extremo en AWS.
En este proyecto hemos demostrado cómo puedes construir un pipeline de transmisión de datos en tiempo real en AWS utilizando Apache Kafka.
Aprende a aprovechar el poder de Kafka y AWS para construir potentes pipelines de datos en tiempo real.
Hemos utilizado servicios de AWS como RDS, MSK, S3 para construir este pipeline. Los siguientes temas se cubren en este video:
1. Visión general de la arquitectura del pipeline
2. Explicación de Kafka Connect
3. Cómo crear un clúster MSK
4. Cómo crear conectores de origen y destino de Kafka Connect
Este puede ser un muy buen proyecto para personas que quieren construir algo utilizando Apache Kafka y entender los conceptos básicos de Ingeniería de Datos y Pipelines de Ingesta de Datos.
#apachekafka #ingenieríadedatos #proyectosaws