Crea una cuenta para usar la IA

Crea una cuenta gratuita para desbloquear todas las funciones:

Haz preguntas sobre los vídeos con IA
Usa la búsqueda inteligente (IA)
Guarda tus vídeos favoritos
Marca tus categorías preferidas
Organiza tus subcategorías favoritas
Accede a tu página de favoritos personalizada
Accede al historial de tus conversaciones
Personaliza tu página de inicio con tus favoritos

Crear una cuenta

¿Ya tienes una cuenta? Iniciar sesión

Dagster - Orquestación de Datos y Pipelines con Python y DAGs

BugBytes

🙏 Únete a nuestro canal para acceder a beneficios:

https://www.youtube.com/channel/UCTwxaBjziKfy6y_uWu30orA/join

☕️ 𝗖𝗼𝗺𝗽𝗿𝗮 𝗺𝗲 𝗮 𝗰𝗼𝗳𝗳𝗲𝗲:

Para apoyar el canal y fomentar nuevos videos, considera comprar un café aquí:

https://ko-fi.com/bugbytes

En este video, profundizaremos en Dagster para la orquestación de tareas en Python y la ingeniería de datos. Veremos conceptos clave de Dagster, incluyendo Activos, Definiciones, la interfaz de usuario de Dagster, Programaciones y Trabajos.

📌 𝗖𝗮𝗽𝗶𝘁𝘂𝗹𝗼𝘀:

00:00 Introducción

01:11 Visión general de Pipeline de Datos y DAG

01:52 Instalando Dagster con uv

03:41 Definiendo Activo de Dagster

05:10 Objeto de Definiciones

07:59 Ejemplo del mundo real con Polars y DuckDB

08:58 Conjunto de datos de coches

09:41 Activo de Dagster para descargar archivo CSV

13:24 Cargando datos agregados en la base de datos DuckDB

20:10 Programando trabajos en Dagster

26:20 Sensores en Dagster

𝗠𝗲𝗱𝗶𝗼𝘀 𝗦𝗼𝗰𝗶𝗮𝗹𝗲𝘀:

📖 Blog: https://bugbytes.io/posts/

👾 Github: https://github.com/bugbytes-io/

📚 𝗟𝗲𝗰𝘁𝘂𝗿𝗮 𝗱𝗲 𝗳𝗼𝗿𝗺𝗮 𝗮𝗻𝗮𝗹𝗼𝗴𝗮 𝘆 𝗶𝗻𝗳𝗼𝗿𝗺𝗮𝗰𝗶𝗼𝗻:

Docker: https://www.docker.com/

Postgres DockerHub: https://hub.docker.com/_/postgres

#dagster #ingenieríadedatos #python

Dagster - Orquestación de Datos y Pipelines con Python y DAGs | Knoovi