Uma dúvida, quando desliga a maquina no EC2 no caso perde todas as configurações? Digo isso pq ontem eu desliguei a instância e hoje ao ligar tive que repetir as instalações do docker/airbyte.. mudou tbm os IPs
Bom vídeo, já revi algumas vezes, kkkkkk masssssss.... tô precisando de ajuda. todos os conectores do airbyte dão erro informando que não existe. eu atualizo a imagem. com sudo: OK. sem sudo: NOK. será que o airbyte está sem permissões sudo?
Bom dia, eu teria que ver o erro para poder ajudar melhor, o difícil é arrumar tempo para isso, se tiver mais alguma coisa relevante e falar por exemplo em qual parte do vídeo você travou.
@@bifastsolutions Acabei removendo Docker e reinstalando Docker e imagem. Provavelmente tenha sido permissão ou o compose (já tinha instalado Docker antes de chegar aqui). Obrigado pela resposta :)
@@PessoalizeProjetos Acho que estou no mesmo erro.. vc diz que quando tenta realizar a configuração de algum conector no airbyte e ao executar ele dá um erro e na mensagem de log diz que nao foi possivel localizar a imagem do SO do airbyte... vou reinstalar o docker e airbyte novamente para ver se resolve
Realizei o procedimento e continua com o mesmo erro. Apos verificar com o comando no terminal ec2 "docker search airbyte/destination-s3" verifiquei que não há nenhuma imagem correspondente ao nome airbyte/destination-s3 disponível no registro de contêineres. Isso confirma que a imagem não está disponível no registro público do Docker Hub. Preciso verificar se ela está disponível em outro registro de contêineres
Qual a vantagem de usar ele na AWS e usar ele na Claud. No caso para uma empresa, que ainda está começando na engenharia de dados e não tem um volume igual do Big Data
Dificil avaliar so com o que você escreveu, ferramentas são somente parte do processo, para entender melhor o seu momento teria que entender a dor, volumetria entre outras coisas da empresa.
Muito bom, parabéns pela objetividade e explicação... funcionou certinho
Valeu Lucas, abraço!!
Uma dúvida, quando desliga a maquina no EC2 no caso perde todas as configurações? Digo isso pq ontem eu desliguei a instância e hoje ao ligar tive que repetir as instalações do docker/airbyte.. mudou tbm os IPs
Aproveitando o gancho.. existe soluções que vc consegue salvar os conectores para evitar perder quando o container é desligado?
Não perde não, no maximo que pecisa é iniciar o container, e sobre os IPs tem o Elastic IP que mantem um IP fixo.
Tente usar a função de Hibernate behavior da instancia EC2, assim, a instancia sera reiniciado no estado que ela parou da ultima vez.
Raphael, crie um tutorial para usar o airbyte em maquina local no windows.
Anotado, irei criar em breve, abraço!
Bom vídeo, já revi algumas vezes, kkkkkk
masssssss.... tô precisando de ajuda. todos os conectores do airbyte dão erro informando que não existe.
eu atualizo a imagem. com sudo: OK. sem sudo: NOK.
será que o airbyte está sem permissões sudo?
Bom dia, eu teria que ver o erro para poder ajudar melhor, o difícil é arrumar tempo para isso, se tiver mais alguma coisa relevante e falar por exemplo em qual parte do vídeo você travou.
@@bifastsolutions Acabei removendo Docker e reinstalando Docker e imagem.
Provavelmente tenha sido permissão ou o compose (já tinha instalado Docker antes de chegar aqui). Obrigado pela resposta :)
@@PessoalizeProjetos Acho que estou no mesmo erro.. vc diz que quando tenta realizar a configuração de algum conector no airbyte e ao executar ele dá um erro e na mensagem de log diz que nao foi possivel localizar a imagem do SO do airbyte... vou reinstalar o docker e airbyte novamente para ver se resolve
Realizei o procedimento e continua com o mesmo erro. Apos verificar com o comando no terminal ec2 "docker search airbyte/destination-s3" verifiquei que não há nenhuma imagem correspondente ao nome airbyte/destination-s3 disponível no registro de contêineres. Isso confirma que a imagem não está disponível no registro público do Docker Hub. Preciso verificar se ela está disponível em outro registro de contêineres
Qual a vantagem de usar ele na AWS e usar ele na Claud. No caso para uma empresa, que ainda está começando na engenharia de dados e não tem um volume igual do Big Data
Dificil avaliar so com o que você escreveu, ferramentas são somente parte do processo, para entender melhor o seu momento teria que entender a dor, volumetria entre outras coisas da empresa.