O objetivo deste breve tutorial é fazer com que o espectador comece a usar o Conector do Snowflake para Kafka.
A documentação do Snowflake faz um bom trabalho ao explicar o conceito e o funcionamento deste conector. Este vídeo pode ser usado em conjunto com a documentação.
Pré-requisitos:
--------------------
Instalar e executar o Apache Kafka e a integração com Python usando kafka-python
Construindo um pipeline de dados sem servidor usando Kinesis Data Streams e Firehose para Snowflake
Autenticação por Par de Chaves no Snowflake para máquinas Linux do zero
Introdução ao Kafka Connect
Nota:
---------
Como este é um POC, o Kafka Connect está rodando no mesmo cluster onde nosso broker está rodando, mas em ambiente de produção, o cluster do Kafka Connect roda em um ambiente diferente, não no mesmo cluster onde nossos brokers Kafka estão rodando.
Integração Kafka Snowflake:
--------------------------------------------------------
Confira esta playlist para mais vídeos relacionados a Engenharia de Dados:
Curso Completo de Snowflake do zero com Projeto de ponta a ponta e explicação detalhada--
🙏🙏🙏🙏🙏🙏🙏🙏
VOCÊ SÓ PRECISA FAZER
3 COISAS para apoiar meu canal
CURTIR
COMPARTILHAR
&
SE INSCREVER
NO MEU CANAL DO YOUTUBE