@@DataLakers vc poderia falar um pouco sobre a arquitetura para processamento distribuido, por favor? se eu mandar rodar meu job com 10 executores (acredito q seja kubernetes), como ele faz o gerenciamento do dado para garantir que um executor n está processando o mesmo dado do outro executor? por exemplo, no caso do spark em um cluster hadoop o yarn sobe um driver p gerenciar quem está fazendo o que, como seria no caso do dataflow c kubernetes? desculpa a pergunta boba, espero ter sido claro tb rsrs, agradeco desde ja!
O Conteúdo exibido, requer que quem assista ele tenha uma conhecimento prévio de vários tópicos abordados e o uso de diversas siglas, não facilita o entendimento para usuários iniciantes, este video apesar de ser over view é bem complexo!
![[Airflow] gerenciado na Google Cloud Platform - [Composer]](/img/1.gif)
Ótimo conteúdo, direto ao ponto sem enrolação! Abraço
Obrigado Marcelo! Estamos disponíveis para qualquer dúvida. Abraço
Obrigado pelo feedback, Marcelo!
@@DataLakers vc poderia falar um pouco sobre a arquitetura para processamento distribuido, por favor? se eu mandar rodar meu job com 10 executores (acredito q seja kubernetes), como ele faz o gerenciamento do dado para garantir que um executor n está processando o mesmo dado do outro executor? por exemplo, no caso do spark em um cluster hadoop o yarn sobe um driver p gerenciar quem está fazendo o que, como seria no caso do dataflow c kubernetes? desculpa a pergunta boba, espero ter sido claro tb rsrs, agradeco desde ja!
Muito bom! bem objetivo. parabéns pelo vídeo.
Excelente conteúdo sem Mi Mi Mi..Obrigado por repassar
O Conteúdo exibido, requer que quem assista ele tenha uma conhecimento prévio de vários tópicos abordados e o uso de diversas siglas, não facilita o entendimento para usuários iniciantes, este video apesar de ser over view é bem complexo!