Dagster é um orquestrador declarativo, baseado em ativos, que redefine a maneira como pensamos sobre a gestão de fluxos de trabalho. Neste vídeo, aprenderemos sobre os recursos do Dagster, incluindo Ativos, Recursos, Jobs, Agendas, Partições e mais. Faremos isso criando um projeto de ponta a ponta do zero usando Dagster, a ferramenta de carregamento de dados (dlt) e Snowflake. Estou super empolgado com este! Espero que você aprenda algo novo!
Marcos ⏰
0:00 - Introdução
1:45 - Design do Sistema
6:30 - Configuração do Dagster e da ferramenta de carregamento de dados (dlt)
21:40 - Como definir Ativos
40:08 - Recursos, refatoração de código
43:22 - Agendas e Jobs
48:42 - Backfill de DAGs usando Partições
54:39 - Sensores e política de Automaterialização
1:09:31 - Considerações finais
Quem sou eu? 🙋🏻♂️
Sou Jay, adoro fazer vídeos sobre viagens, autoajuda e tecnologia. Atualmente trabalho na cidade de Nova York como engenheiro de dados, mas cresci na Malásia e vivi no Reino Unido quando tinha 19 anos. Naquela época, eu não tinha ideia do que era a vida, mudando para tantos lugares, navegando na carreira em Tecnologia. Hoje, aprendi muito e quero compartilhar minha perspectiva através da filmagem.
Redes sociais 📱
Contagem de Inscritos: 11.390