Caso esteja dando erro, fiz um tutorial para evitar esse erro. drive.google.com/file/d/1MjMUUh2pLlILp9D9N3XwztM1b0YlaUvI/view?usp=drivesdk Explicação do erro: Alguns links não abrirão por que normalmente o site puxa as informações pelo nome do CNPJ após a barra(na url). Alguns desses nomes não são os mesmos que contém na URL e por isso apresenta o erro. Com esse tutorial, eu faço com que o Automa simplesmente ignore esses sites que apresentam erro, mas para funcionar vc precisa fazer exatamente oq eu passei no vídeo. Só observar, se o final da url tiver algo como _/{{empresa}}_, o erro não foi o meu tutorial, mas sim algo que vc esqueceu de fazer Caso ainda esteja dando erro, no bloco do tutorial tem um "timer" que está em 500 (milissegundos) Altere de 500 para 3000 ou 5000 ⚠Aprenda a criar seu próprio aplicativo de iptv e filmes usando o kodular, por apenas R$47 Acesse: pay.cakto.com.br/6b2rL6m ⚠ Se você quer desenvolver algum aplicativo para você ou sua empresa, me contate por whatsapp: wa.me/+5521998577283
@@odairpanoinko1790 opa meu amigo segue esse e vê se da certo pelo menos pra mim funcionou pra quem está tendo problema faz o seguinte, quando baixar aquele arquivo excel ou bloco de notas com o nome de 'dados' vocês abram o bloco de notas e na primeira linha escrevam empresas e a partir da segunda linha fica os dados dos clientes, e ai é só seguir o restante do tutorial na parte do automa, espero ter ajudado
Pessoal pra quem está tendo problema faz o seguinte, quando baixar aquele arquivo excel ou bloco de notas com o nome de 'dados' vocês abram o bloco de notas e na primeira linha escrevam empresas e a partir da segunda linha fica os dados dos clientes, e ai é só seguir o restante do tutorial na parte do automa, espero ter ajudado, resolvi o meu assim
puma dica pessoal, fiz e funcionou: se der erro em qualquer parte do fluxo, seja no começo ou no final, é só usar a função SE (verdadeiro ou falso) que ele deixou no drive. so colocar anterior a caixa de texto q esta apresentando erro com as instruções do video. a logica é a mesma
Só me surgiu uma dúvida agora o script de cima que captura os dados. Quando refaço o processo com um novo filtro e baixo em CSV ele vem a nova busca+as buscas passadas tem como limpar?
@vamosvivendo vc precisa apagar o arquivo que foi gerado no navegador, para isso é só pressionar F12 e ir até a sessão de arquivos e excluir o csv que tem lá
@@ThiagoLowCode Thiago, no meu deu um problema, após dar Start só carrega a primeira empresa da lista, e para aí, ja fiz e refiz e nada... poderia me dizer o que pode resolver isso?
Amigo, funcionou perfeitamente! parabéns pelo Vídeo. A única coisa que eu reparei, quando eu dou start para iniciar a primeira extração, as informações da primeira tela não são baixadas, o código joga para a segunda tela e começa a salvar.
@@joaovwctor Eu pensei em uma forma melhor de extrair, "só não consegui executar no Automa." Me ajuda ai e veja se a ideia dará certo.. " Eu fiz da extração inicial da casa dos dados e formei um link Html pronto de acesso a pagina dentro do Google Sheets, ou seja a unica ação que o automa faria é acessar cada link da planilha e depois fazer o mesmo mecanismo de mineração a qual você mencionou no video" Me ajuda ai
Putzzzzzzzzzzzzzz é o primeiro a "hackear" kkkk o site que eu tanto precisava/queria!!! P A R A B É N S muuitoooo obrigaduuuuuuuuuuuuuuuuuuuuuuuuu...valeu mesmo!
o casa dos dados tem pagina randomica. tipo as vezes os dados se repetem, ficam mudando . se vc esta na pagina 1 e ve um dado, ao ir para a 2 e voltar para a 1, aquele dado nem sempre está naquela pagina. sera que a automacao vai pegar separado? pela primeira vez a automacao deu certo. mas ao pegar o dado.csv eu abri ele no google sheets e coloquei a primeira linha como empresa e exportei como csv. e para evitar o erro do link fui em "localizar e substituir" dai mudei o "&" para and pois na razao de algumas tem & e no link é and. depois baixei o csv. da pra fazer no notas. mas preferi gerar tabela.
Showww demais!!! Parabéns pelo conteúdo!!! 👏👏 Tem uma forma de limitar a quantidade de dados (empresas) para extraír? Se sim, é feito no Automa ou na Casa de Dados? Pois, a casa de Dados traz em torno de 50 páginas, então queria limitar lra Extrair somente as 200 primeiras empresas.
Pelo que eu usei no script, ele não puxa todas as 50 páginas. Mas no automa você consegue limitar sim quantas empresas vc quer, só precisa criar essa regra
Está ocorrendo muito de não abrir alguns porque dá "cnpj inválido" A minha dúvida é: Na página de busca no casa dos dados, não dá pra fazer um script que pega o link de destino ao invés de tentar adivinhar a url ? De todo modo obrigado pelo vídeo
Amigo... muito obrigado pelo conteúdo. Top demais. Fiz a extração mas o CSV retornou somente com 1.000 linhas, sabe me dizer como proceder para extrair 100% da pesquisa??
Estou quase desistindo... Tudo muito bom, mas muito bugado. Agora que eu consegui corrigir algumas panes com o vídeo fixado, o código está rodando bonito, liso, extraindo dados, aí do nada para de puxar! Sem cair a internet, sem eu mexer em outras coisas, sem apresentar erros no "Logs", simplesmente para. Coloquei um "Element exists" para cada "Get text", e o último mandando pro "Loop data", não tinha porque parar mais. Estou tentando puxar 500 linhas (empresas) e da última vez parou na 133.
Ele só para quando chega no final da lista, não quer dizer que ele vá ler os 500 itens, pode acontecer dele não conseguir ler 1 item e já pular para o próximo
@@ThiagoLowCode Entendo amigo, o problema é que ele para geral! Bem antes de correr todos os itens da lista, mesmo que pulando caso não encontre algum dado, não chega nem perto dos 500. Me falaram que pode ser Pop-up na página, "atrasando" o processo, e excedendo o tempo limite dos comandos. Faz algum sentido?
@@user-ts2gt3jo1c vc conseguiu corrigir esse problema do automa parar de correr a lista do nada, o meu esta assim também, ele só pega 12 linhas e para, ja verifiquei tudo e instalei bloqueador de publicidade mas não adiantou.
Consegue fazer, agora deu certo, porém, quando vou puxar nova lista e vou lá em inspecionar, mesmo depois de limpar, ele puxa a primeira lista que fiz novamente, sempre repete
tem um bug nesse CSV. o codigo gera um arquivo que se vc coloca "empresa" só na primeira linha , ele nao entende que eh pra todas. quando importa no loopdata ele vai criar soh a primeira empresa
Trabalhoso mas útil. Eu só fiquei em dúvida... Supondo que escolho mais filtros "manutenção elétrica pelo CNAE" vai filtrar um tanto de contatos. Agora se eu quero mudar pra "barbeiros MEI" vou ter que criar outra automação? O bom seria criar todos campos. Pq depoiis de ir pro Excel ja filtra por qualquer campo ne?
Bom dia meu amigo, primeiramente parabéns pelo video e os codigos, ajudou bastante, porém o meu quando da aquele erro de página igual o seu ele trava, começei a excluir as que davam erropra seguir o barco, porém esta dando um de timeout , consegue me ajudar?
Olá Thiago tudo bem, infelizmente comigo não deu certo, mais creio que deva ser alguma configuração que está faltando no video, vi o video que você deixou no drive e mesmo assim trava no primeiro contato extraido. você poderia fazer um video atualizado?,, você está ajudando muita gente com os seus videos.. Deus o abençoe, você vai longe.
Pega o que está escrito no erro traduz o meu estava escrito que eu precisava primeiro escrever permitir colar aí eu escrevi permitir colar em inglês e depois ele colou normal
Quando não permite o erro vai dizer para você digitar um texto. Normalmente é "allow pasting", mas aí é só ler o erro que lá vai dizer a palavra que tem que ser digitada no console
Amigo, não daria para ter o primeiro código já puxando telefone e e-mail? Porque o segundo aqui já está jogando numa planilha do Excel nome e CNPJ e não Bloco de Notas, assim o processo ficaria indo ainda mais rápido mandando tudo direto. Muito obrigado pelo conteúdo!
O primeiro script serve só para puxar o nome+cnpj da empresa, ele não puxa outras informações. Ele salva em .csv e pode ser que o seu computador tenha identificado que . cvs é arquivo de planilha. Para abrir com bloco de notas é só clicar com botão direito, ir em "abrir com" e selecionar o bloco de notas
Amigo, você precisa corrigir uma informação. Não importa se a pesquisa dá 100 mil, 1 milhão. A casa dos dados só mostra 20 resultados por página. O export do arquivo virá somente com 1000 dados. Ele não pega os 38 mil, conforme você falou no vídeo.
O erro diz que vc precisa digitar uma palavra para desbloquear, exemplo: Digite _liberar_ para desbloquear o console. Só vc ver qual palavra eles pedem e digitar
Até estava utilizando, mas quando mandei mensagem para uma empresa, ela me informou que eu não tinha consentimento e disse que eu estava infligindo a LGPD. Alguém sabe me dizer se ele está certo? Se os dados são públicos, pensei que não teria nenhum problema
Os dados de qualquer empresa são públicos, vc encontra o CNPJ de uma empresa só de pesquisar o nome dela. Então não, você não está infringindo nenhuma LGPD
Resolvi arrumando o bloco de notas (coloquei na primeira linha empresas) e também no Automa colocando o arquivo certo no loop data, exemplo: *empresas nome das empresas que extraiu ----------------------------------------------------- Normalmente sempre o problema será no Loop Data confirma sempre se está colocando o certo.
@@fabioaleixo o meu ta dando Warning: Don’t paste code into the DevTools Console that you don’t understand or haven’t reviewed yourself. This could allow attackers to steal your identity or take control of your computer. Please type ‘allow pasting’ below and hit Enter to allow pasting. como vc resolveu?
Fala amigo, ótimo vídeo!! Trabalho com prospecção e isso pode me ajudar muito. Porém quando vou fazer a lista novamente (parte do script no site), gera um Excel com os dados do script anterior, e isso dificulta o entendimento da qual é qual. É normal ou estou fazendo algo errado ??
Gente estava analisando os dados coletados, porem verifiquei que quando tem um "&", aparece o erro de CNPJ invalido, tem alguma solução no codigo para que esse "&"
Tem como eu colocar pra automatizar e quando o sistema não achar por exemplo o contato 2, ele continuar raspando os outros leads na sequência? O meu está funcionando mas quando ele tem algum campo que não acha em determinado lead, ele para de funcionar :(
Opa estou com um problema, fiz o tutorial pra testar se existe o css lá, porém num caso especifico ele nao retorna pro Loop data, no caso ele trava numa página com page not found
O que fazer quando ele busca um elemento na página e não encontra? Por ex: eu quero puxar o nome do proprietário também e em algumas páginas não existe essa informação. Faz sentido usar o "Element Exist" em cada "Get Text"? Além disso, tem alguma forma de configurar para puxar as informações mais rapidamente em cada aba aberta?
Então, não tem como puxar mais rápido, pq a pagina precisa carregar as informações primeiro. Em relação ao Get Text, seria interessante sim usar o Element Exists, caso não existir o elemento, você pula para o próximo *get text*
@@ThiagoLowCode Show, eu consegui aqui resolver os erros adicionando varios Element Exists e também configurando a caixa de New Tab para continuar o flow caso algum erro surja
Alguém com problema do automa parar de correr a lista? O meu pega apenas 15 ou 30 linhas e para do nada, ja verifiquei e esta tudo ok instalei bloqueador de PupUp tbm mas não adiantou, aguardo a colaboração, abraço a todos
Coisas que você pode tentar: diminuir o número de textos raspados da página; configurar todos os blocos da automação para em caso de erro o fluxo continue. Você pode fazer isso em cada bloco, clicando na engrenagem e indo na aba de erro. Clique em Enable e selecione continue flow
Pessoal eu estou tendo um problema quando eu inicio o processo. Eu segui passo a passo ao tutorial e só adicionei mais um get text para Email. So que ao começar a fazer pesquisa, alem de duplicar alguns nomes, ele não faz a lista toda e da erro de time out, alguém sabe como corrigir? Eu já aumentei o timer (Wait for select) de cada coleta de resposta, coloquei para 7000ms mas continua dando esse erro.
@thiagoLowCode me da um help quando eu vou lá dar um ctrl V do código no console vem um warning de erro Observei que no seu aparece sempre >> e no meu só aparece > tem alguma dica para passar para que eu possa evoluir nisso?
Bom dia @ThiagoLowCode Consegui e rodou bem, porém, quando vou fazer de novo, ele puxa a mesma pesquisa que fiz primeiro. O que estou fazendo de errado?
Tiago, aqui também não deu certo. Eu pensei em uma forma melhor de extrair, "só não consegui executar no Automa." Me ajuda ai e veja se a ideia dará certo.. " Eu fiz da extração inicial da casa dos dados e formei um link Html pronto de acesso a pagina dentro do Google Sheets, ou seja a unica ação que o automa faria é acessar cada link da planilha e depois fazer o mesmo mecanismo de mineração a qual você mencionou no video" Me ajuda ai
A primeira vez que eu fiz deu certo,agora estou tentando extrair dados de outro filtro que eu fiz na casa dos dados,mas agora quando eu colo o código csv no console,ele puxa o primeiro filtro que eu fiz e não o atual. O que devo fazer???
Ja fiz isso e o meu continua parando... Ja refiz rudo , se coloco uma losta de 200 por exemplo ele puxa 40 e prra. Ai excluo esses que ja fiz e dou play denovo e vai. Entao nao é bem um erro ele só para 😢😢 alguem com o mesmo problema?
Quando isso acontece, aparece uma mensagem em vermelho dizendo para você digitar alguma palavra. Só ler qual palavra e digitar antes de colar, pq você precisa liberar o console primeiro
Amigo, quando configuro e começo a extrair, ele interrompe a extração na metade na página de erro e preciso ou recomeçar ela ou abrir o documento e apagar tudo que veio antes para iniciar de novo. Ambas são ruins pq as vezes pode acontecer a casa 50 dados ou a cada 2. Tem alguma forma dele pular da página de erro direto para a próxima extração sem precisar dar algum reset?
Ja revi varias vezes o video porem o meu depois que configuro tudo e dou o play para iniciar a extração dos dados aparece Codigo de Status:404 - CNPJ Invalido sabe o que pode ser Thiago?
As vezes o CNPJ que o script salvou não é o mesmo que fica no link da empresa, então o site não encontra. Tem uma solução para isso no comentário fixado, dá uma olhadinha lá
Pode ser que no seu computador, você definiu que o excel abra arquivos CSV Isso é normal, não afeta em muita coisa, só abrir o arquivo com o bloco de notas
Buenas! Já refiz várias vezes o processo, inclusive com o element exists... Sempre dá erro no CNPJ. Código do Status: 404 - Mensagem: CNPJ Inválido. Aparece o botão Voltar para página principal... Como teste até removi o CNPJ dos Get Text e mesmo sem ele o erro permanece o mesmo. Alguém passando pelo mesmo?
@@Causticgreeneye eu consegui mano vai no csv insere uma linha em cima escrito empresa e da um enter, depois salva e joga no automa dnv. Deve funcionar
ola, obrigado pelo video, estou enfrentando o seguinte erro quando ele abre o site Código do Status: 404 Mensagem: CNPJ Inválido, quando vou no logs aparece o erro> Trigger 14:18:05 (0s) Loop data 14:18:05 (4s) New tab 14:18:09 (0s) Element exists 14:18:09 (0s) Get text 14:18:09 (5s) Get text Can't find an element with the selector ".columns:nth-child(1) > .column:nth-child(2) > p:nth-child(2)"
@@ThiagoLowCode Muito brigado pelo retorno, sim escrevi, quando insiro o arquivo o arquivo no LoopData ele ja aparece empresa em vermelho na frente de todos os nomes de empresa, eu realmente estou muito muito intrigado por nao estar conseguindo obter o resultado. alguma outra alternativa que posso verificar?
eu conferi manualmente o primeiro dado da empresa e ele esta correto quando insiro no link, realmente nao consigo entender porque nao esta funcionando.
Como fica a URL? Pq se na URL estiver como {{empresa}} provavelmente vc errou no automa. Lembrando que o id que eu falo para você usar, não é oq está no meu vídeo, é o id do seu projeto.
Resolvi arrumando o bloco de notas (coloquei na primeira linha empresas) e também no Automa colocando o arquivo certo no loop data, exemplo: *empresas nome das empresas que extraiu ----------------------------------------------------- Normalmente sempre o problema será no Loop Data confirma sempre se está colocando o certo.
![ARGENTINA vs. CHILE [3-0] | RESUMEN | ELIMINATORIAS SUDAMERICANAS | FECHA 7](http://i.ytimg.com/vi/De3AWmXzhuA/mqdefault.jpg)
Caso esteja dando erro, fiz um tutorial para evitar esse erro.
drive.google.com/file/d/1MjMUUh2pLlILp9D9N3XwztM1b0YlaUvI/view?usp=drivesdk
Explicação do erro:
Alguns links não abrirão por que normalmente o site puxa as informações pelo nome do CNPJ após a barra(na url).
Alguns desses nomes não são os mesmos que contém na URL e por isso apresenta o erro.
Com esse tutorial, eu faço com que o Automa simplesmente ignore esses sites que apresentam erro, mas para funcionar vc precisa fazer exatamente oq eu passei no vídeo.
Só observar, se o final da url tiver algo como _/{{empresa}}_, o erro não foi o meu tutorial, mas sim algo que vc esqueceu de fazer
Caso ainda esteja dando erro, no bloco do tutorial tem um "timer" que está em 500 (milissegundos)
Altere de 500 para 3000 ou 5000
⚠Aprenda a criar seu próprio aplicativo de iptv e filmes usando o kodular, por apenas R$47 Acesse:
pay.cakto.com.br/6b2rL6m
⚠ Se você quer desenvolver algum aplicativo para você ou sua empresa, me contate por whatsapp:
wa.me/+5521998577283
revisei todo video e o tutorial de apoio mas ainda persiste o erro _/{{empresa}}_, na url
@@odairpanoinko1790 opa meu amigo segue esse e vê se da certo pelo menos pra mim funcionou
pra quem está tendo problema faz o seguinte, quando baixar aquele arquivo excel ou bloco de notas com o nome de 'dados' vocês abram o bloco de notas e na primeira linha escrevam empresas e a partir da segunda linha fica os dados dos clientes, e ai é só seguir o restante do tutorial na parte do automa, espero ter ajudado
Thiago, meu caro, tudo certo? Alguma solução para esse erro de não encontar o CNPJ que acho que é no link?
@joaovwctor rapaz, vou gravar um vídeo ensinando a corrigir isso
@@ThiagoLowCode Po felicidades imensa isso é um job maravilhoso! Nunca pensou em comercializar?
Pessoal pra quem está tendo problema faz o seguinte, quando baixar aquele arquivo excel ou bloco de notas com o nome de 'dados' vocês abram o bloco de notas e na primeira linha escrevam empresas e a partir da segunda linha fica os dados dos clientes, e ai é só seguir o restante do tutorial na parte do automa, espero ter ajudado, resolvi o meu assim
Douglas, obrigado pela mensagem, eu fiz esse procedimento e incrivelmente ainda persiste o erro! voce tem alguma outra sugestao ? muito obrigado
cara, economizei semanas de trabalho!!! muito obrigado, trabalho com telefonia b2b, e o pessoal da area sabe como esses leads são importantes
Estou aqui pois trabalho na mesma área hahaha
Fantástico. Que Luz que você me deu....você não tem ideia de como ajudou
Parabéns Irmão deu super certo.🎉 Você conseguiu me fazer economizar hora e horas de trabalho. Shooow
poderia manter atencao ao video (estudar e criar ferramenta certinha) e comentarios. é um dos mais importantes do canal kkk
Que aula sensacional. simples e direta. parabéns!
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
puma dica pessoal, fiz e funcionou: se der erro em qualquer parte do fluxo, seja no começo ou no final, é só usar a função SE (verdadeiro ou falso) que ele deixou no drive. so colocar anterior a caixa de texto q esta apresentando erro com as instruções do video. a logica é a mesma
Voltando pra agradecer mais uma vez!
Parabéns pelo video!
esse conteúdo vale ouro, você é gigantee
Resolvido! Comprei o Gleads... Esperar por vídeo no canal não deu kkkk
Muito obrigado pelo conteúdo mano, aqui funcionou, sou front-end junior 😁
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Aqui deu certinho, muito obrigado jovem. Poucos compartilham esse conhecimento de graça assim. Obrigadão mesmo
Só me surgiu uma dúvida agora o script de cima que captura os dados. Quando refaço o processo com um novo filtro e baixo em CSV ele vem a nova busca+as buscas passadas tem como limpar?
@vamosvivendo vc precisa apagar o arquivo que foi gerado no navegador, para isso é só pressionar F12 e ir até a sessão de arquivos e excluir o csv que tem lá
@@ThiagoLowCode Thiago, no meu deu um problema, após dar Start só carrega a primeira empresa da lista, e para aí, ja fiz e refiz e nada... poderia me dizer o que pode resolver isso?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Parabéns, Excelente explicação, obrigado pela passagem de conhecimento
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
simples e bem completo! OBRIGADO!!!
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Parabéns, mano. Gostei demais, agora só falta um vídeo fazendo uma automação chamando 1 número por vez Hahaha, tamo junto cara
Eu tenho
@@Guizaocf Rlx, eu já fiz um usando o BotCity em python e criei um web scraping em python.
Eu tenho tbm... wa sender. Faz disparos em massa no WhatsApp. Tenho o botmaster tbm. Se quiser eu te mando
@@loucosporcomida1810 manda aí pfv
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Deu certo aqui irmão, muito obrigado deus te abençoe vc é 10!
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
🙏🏼Deus abençoe ricamente, brother.
Seu LTV é garantido💥. TMJ.
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Amigo, funcionou perfeitamente! parabéns pelo Vídeo. A única coisa que eu reparei, quando eu dou start para iniciar a primeira extração, as informações da primeira tela não são baixadas, o código joga para a segunda tela e começa a salvar.
Mano se conseguiu resolver o problema da URL?
@@joaovwctor qual problema cara? aqui deu certinho, só a primeira pagina da busca no casa dos dados que o código não baixa.
Cara o meu da error 404 na URL, eu já tentei mudar diversas vezes mas não vai😢
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
@@joaovwctor
Eu pensei em uma forma melhor de extrair, "só não consegui executar no Automa."
Me ajuda ai e veja se a ideia dará certo..
" Eu fiz da extração inicial da casa dos dados e formei um link Html pronto de acesso a pagina dentro do Google Sheets, ou seja a unica ação que o automa faria é acessar cada link da planilha e depois fazer o mesmo mecanismo de mineração a qual você mencionou no video"
Me ajuda ai
Putzzzzzzzzzzzzzz é o primeiro a "hackear" kkkk o site que eu tanto precisava/queria!!! P A R A B É N S muuitoooo obrigaduuuuuuuuuuuuuuuuuuuuuuuuu...valeu mesmo!
Haha, fico feliz que tenha conseguido 👏🏻
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
o casa dos dados tem pagina randomica. tipo as vezes os dados se repetem, ficam mudando . se vc esta na pagina 1 e ve um dado, ao ir para a 2 e voltar para a 1, aquele dado nem sempre está naquela pagina. sera que a automacao vai pegar separado? pela primeira vez a automacao deu certo. mas ao pegar o dado.csv eu abri ele no google sheets e coloquei a primeira linha como empresa e exportei como csv. e para evitar o erro do link fui em "localizar e substituir" dai mudei o "&" para and pois na razao de algumas tem & e no link é and.
depois baixei o csv. da pra fazer no notas. mas preferi gerar tabela.
Que voz linda.
Cara, você ajudou demaais , obrigadooo
Showww demais!!! Parabéns pelo conteúdo!!! 👏👏
Tem uma forma de limitar a quantidade de dados (empresas) para extraír? Se sim, é feito no Automa ou na Casa de Dados?
Pois, a casa de Dados traz em torno de 50 páginas, então queria limitar lra Extrair somente as 200 primeiras empresas.
Pelo que eu usei no script, ele não puxa todas as 50 páginas.
Mas no automa você consegue limitar sim quantas empresas vc quer, só precisa criar essa regra
Olá!
Como faço para extrair todos os resultados, não apenas os 1.000 primeiros?
Amei o conteúdo, muito claro e objetivo. Parabéns!!
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Está ocorrendo muito de não abrir alguns porque dá "cnpj inválido"
A minha dúvida é: Na página de busca no casa dos dados, não dá pra fazer um script que pega o link de destino ao invés de tentar adivinhar a url ?
De todo modo obrigado pelo vídeo
realmente o link exato esta nas paginas. tem que ter um modo de abrir certo.
Amigo... muito obrigado pelo conteúdo. Top demais.
Fiz a extração mas o CSV retornou somente com 1.000 linhas, sabe me dizer como proceder para extrair 100% da pesquisa??
Estou com esse problema, fiz como esta no tutorial porem so da esse erro
Código do Status: 404
Mensagem: CNPJ Inválido
Também estou com mesmo erro
Estou quase desistindo... Tudo muito bom, mas muito bugado. Agora que eu consegui corrigir algumas panes com o vídeo fixado, o código está rodando bonito, liso, extraindo dados, aí do nada para de puxar! Sem cair a internet, sem eu mexer em outras coisas, sem apresentar erros no "Logs", simplesmente para. Coloquei um "Element exists" para cada "Get text", e o último mandando pro "Loop data", não tinha porque parar mais. Estou tentando puxar 500 linhas (empresas) e da última vez parou na 133.
Ele só para quando chega no final da lista, não quer dizer que ele vá ler os 500 itens, pode acontecer dele não conseguir ler 1 item e já pular para o próximo
@@ThiagoLowCode Entendo amigo, o problema é que ele para geral! Bem antes de correr todos os itens da lista, mesmo que pulando caso não encontre algum dado, não chega nem perto dos 500. Me falaram que pode ser Pop-up na página, "atrasando" o processo, e excedendo o tempo limite dos comandos. Faz algum sentido?
@user-ts2gt3jo1c nunca vi popup nas páginas, então não sei informar. Aqui está funcionando corretamente para mim
@@user-ts2gt3jo1c vc conseguiu corrigir esse problema do automa parar de correr a lista do nada, o meu esta assim também, ele só pega 12 linhas e para, ja verifiquei tudo e instalei bloqueador de publicidade mas não adiantou.
Consegue fazer, agora deu certo, porém, quando vou puxar nova lista e vou lá em inspecionar, mesmo depois de limpar, ele puxa a primeira lista que fiz novamente, sempre repete
Como apaga a memória das listas anteriores. Eu excluo, mas sempre volta. Estou tendo que fazer todo o processo sempre que atualizo uma nova lista
tem um bug nesse CSV.
o codigo gera um arquivo que se vc coloca "empresa" só na primeira linha , ele nao entende que eh pra todas. quando importa no loopdata ele vai criar soh a primeira empresa
Trabalhoso mas útil. Eu só fiquei em dúvida... Supondo que escolho mais filtros "manutenção elétrica pelo CNAE" vai filtrar um tanto de contatos.
Agora se eu quero mudar pra "barbeiros MEI" vou ter que criar outra automação?
O bom seria criar todos campos. Pq depoiis de ir pro Excel ja filtra por qualquer campo ne?
Não exatamente, você pode fazer duas pesquisas e juntar em um texto só (csv) e usar o automa para fazer a automação
Bom dia meu amigo, primeiramente parabéns pelo video e os codigos, ajudou bastante, porém o meu quando da aquele erro de página igual o seu ele trava, começei a excluir as que davam erropra seguir o barco, porém esta dando um de timeout , consegue me ajudar?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
@@moshe370 Quanto custa? Ele salva as 50 páginas do resultado da pesquisa?
Olá Thiago tudo bem, infelizmente comigo não deu certo, mais creio que deva ser alguma configuração que está faltando no video, vi o video que você deixou no drive e mesmo assim trava no primeiro contato extraido. você poderia fazer um video atualizado?,, você está ajudando muita gente com os seus videos.. Deus o abençoe, você vai longe.
Posta aqui o nome do erro.
Sofri com Time out e depois com erro no get text. Mas funcionou. Desiste não. Vai pra cima que vai dar certo!
@@thaaraposo como voce solucionou erro no get text?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
@@moshe370
Eu tenho
Mano o meu está dando erro, e eu já fui no link da outra aula que tu mandou no drive, pode me ajudar?
Pega o que está escrito no erro traduz o meu estava escrito que eu precisava primeiro escrever permitir colar aí eu escrevi permitir colar em inglês e depois ele colou normal
essa parte de captação de informações, deve travar em pc mais fraco né? de carregar varias urls de vez. Aula top!
Não sei dizer se trava, pq capta só em 1 aba do navegador
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Não consegui colocar esse código.
Aula fantásticas Thiago.. Meu sistema começou bem.. mas travou, e no log o erro está "Timeout".. o que é isso?
Timeout seria tempo finalizado, ou encerrado.
Pode ser que passou os segundos e ele não identificou o texto e por isso encerrou
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Fala irmão quando eu abro o inspecionar e vou colar o codigo para extrair a lista ele não permimite eu colar o seu código, como resolver?
Quando não permite o erro vai dizer para você digitar um texto.
Normalmente é "allow pasting", mas aí é só ler o erro que lá vai dizer a palavra que tem que ser digitada no console
O meu CNPJ diz inválido
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
O MEU ESTÁ ABRINDO SÓ 7 A 8 PAGINA AI ELE PARA, ONDE EU ESTOU ERRADO
Amigo, não daria para ter o primeiro código já puxando telefone e e-mail? Porque o segundo aqui já está jogando numa planilha do Excel nome e CNPJ e não Bloco de Notas, assim o processo ficaria indo ainda mais rápido mandando tudo direto. Muito obrigado pelo conteúdo!
O primeiro script serve só para puxar o nome+cnpj da empresa, ele não puxa outras informações.
Ele salva em .csv e pode ser que o seu computador tenha identificado que . cvs é arquivo de planilha. Para abrir com bloco de notas é só clicar com botão direito, ir em "abrir com" e selecionar o bloco de notas
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Aqui está aparecendo: "Este item está inativo". Clico em "Ativar" e não ativa. Alguém sabe como resolver isso?
Não estou conseguindo. Esta dando erro no get text, mas o passo a passo esta certinho
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
No meu caso não puxou tudo , puxou apenas os 10 da primeira página da pesquisa
No filtro selecionei "com email" porem na extração não aparece email de nem um lead, alguém sabe corrigir isso? Sera um problema no código?
Amigo, você precisa corrigir uma informação.
Não importa se a pesquisa dá 100 mil, 1 milhão.
A casa dos dados só mostra 20 resultados por página.
O export do arquivo virá somente com 1000 dados.
Ele não pega os 38 mil, conforme você falou no vídeo.
Existe alguma maneira de conseguir as pesquisas completas?
Não estou conseguindo jogar o código no console... Dá um erro de segurança e não me deixa nem colar...
O erro diz que vc precisa digitar uma palavra para desbloquear, exemplo:
Digite _liberar_ para desbloquear o console.
Só vc ver qual palavra eles pedem e digitar
@@ThiagoLowCode E eu estava aqui quebrando a cabeça achando que estava fazendo algo de errado. kkkk Obrigado.
coloquei um filtro amplo e tudo da apenas 10 paginas? errado ne?
bom dia amigo! Obrigada pelo seu video! Porem acredito que API esteja bloqueando o acesso, nao esta dando certo, e tem mensagem de bloqueio no console
Mensagem de bloqueio no console diz que é só vc digitar uma palavra específica que desbloqueia
@@ThiagoLowCode Não funciona mais
Até estava utilizando, mas quando mandei mensagem para uma empresa, ela me informou que eu não tinha consentimento e disse que eu estava infligindo a LGPD. Alguém sabe me dizer se ele está certo? Se os dados são públicos, pensei que não teria nenhum problema
Os dados de qualquer empresa são públicos, vc encontra o CNPJ de uma empresa só de pesquisar o nome dela.
Então não, você não está infringindo nenhuma LGPD
O SITE CARREGA MUITA PROPAGANDA, E TRAVA DEMAIS... AFF. O QUE FAÇO, UM BLOQUEADOR TRAVA ELE.
o meo diz CNPJ INVALIDO. EROO 404
COMO RESOLVER?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
@@moshe370 quanto mestre?
Resolvi arrumando o bloco de notas (coloquei na primeira linha empresas) e também no Automa colocando o arquivo certo no loop data, exemplo:
*empresas
nome das empresas que extraiu
-----------------------------------------------------
Normalmente sempre o problema será no Loop Data confirma sempre se está colocando o certo.
como faço calculos ? lido com variaveis globais, faço loop for e loop while ?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Quando tento colar o código no console o navegador não permite.
Alguém consegue me dar uma luz de como conseguir resolver?
Quando o navegador não permite, ele vai dizer que vc precisa digitar um texto para liberar.
Só ler a mensagem que aparece
@@ThiagoLowCode Consegui encontrar. precisei desativar uma opção nas configurações. Obrigado!
@@fabioaleixo o meu ta dando Warning: Don’t paste code into the DevTools Console that you don’t understand or haven’t reviewed yourself. This could allow attackers to steal your identity or take control of your computer. Please type ‘allow pasting’ below and hit Enter to allow pasting.
como vc resolveu?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Fala amigo, ótimo vídeo!!
Trabalho com prospecção e isso pode me ajudar muito. Porém quando vou fazer a lista novamente (parte do script no site), gera um Excel com os dados do script anterior, e isso dificulta o entendimento da qual é qual.
É normal ou estou fazendo algo errado ??
É bug do script mesmo, a única forma que achei foi acessando o arquivo que fica salvo no navegador e excluir ele manualmente
Ei procurei como limpar o storage
@@ThiagoLowCode e como faz isso?
Gente estava analisando os dados coletados, porem verifiquei que quando tem um "&", aparece o erro de CNPJ invalido, tem alguma solução no codigo para que esse "&"
Ele tem que ser and. O que eu fiz foi ao baixar o csv vai no excel ou outro Meio e localizar e substituir & por and
Tem como eu colocar pra automatizar e quando o sistema não achar por exemplo o contato 2, ele continuar raspando os outros leads na sequência? O meu está funcionando mas quando ele tem algum campo que não acha em determinado lead, ele para de funcionar :(
Sim, no comentário fixado eu ensino a fazer exatamente isso
Boa tarde, a primeira parte do video ate baixar o csv nao esta mais funcionando correto? Ou estou fazendo algo errado?
Ei tá funcionando amore fiz hj e deu certo
Bom dia, a parte se colar o código no console para pegar os cnpjs está bloqueada. Onde vc colou ?
Não consigo fazer outra busca no casa dos dados, so baixa a mesma listagem (a primeira que puxei) como arrumar?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Opa estou com um problema, fiz o tutorial pra testar se existe o css lá, porém num caso especifico ele nao retorna pro Loop data, no caso ele trava numa página com page not found
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Ainda funciona? tentei e da erro na parte de colar o código. alguém está conseguindo??
Só digitar _allow pasting_ no console e dar enter, que vai liberar o console pra você
O meu não foi por nada dando erro toda vida, ainda segui o vídeo lá que eu vi que vc enviou pelos comentários
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
O que fazer quando ele busca um elemento na página e não encontra? Por ex: eu quero puxar o nome do proprietário também e em algumas páginas não existe essa informação. Faz sentido usar o "Element Exist" em cada "Get Text"? Além disso, tem alguma forma de configurar para puxar as informações mais rapidamente em cada aba aberta?
Então, não tem como puxar mais rápido, pq a pagina precisa carregar as informações primeiro.
Em relação ao Get Text, seria interessante sim usar o Element Exists, caso não existir o elemento, você pula para o próximo *get text*
@@ThiagoLowCode Show, eu consegui aqui resolver os erros adicionando varios Element Exists e também configurando a caixa de New Tab para continuar o flow caso algum erro surja
Alguém com problema do automa parar de correr a lista? O meu pega apenas 15 ou 30 linhas e para do nada, ja verifiquei e esta tudo ok instalei bloqueador de PupUp tbm mas não adiantou, aguardo a colaboração, abraço a todos
Coisas que você pode tentar: diminuir o número de textos raspados da página; configurar todos os blocos da automação para em caso de erro o fluxo continue. Você pode fazer isso em cada bloco, clicando na engrenagem e indo na aba de erro. Clique em Enable e selecione continue flow
Pessoal eu estou tendo um problema quando eu inicio o processo. Eu segui passo a passo ao tutorial e só adicionei mais um get text para Email. So que ao começar a fazer pesquisa, alem de duplicar alguns nomes, ele não faz a lista toda e da erro de time out, alguém sabe como corrigir? Eu já aumentei o timer (Wait for select) de cada coleta de resposta, coloquei para 7000ms mas continua dando esse erro.
Mano o sue não dá problema na URL?
Bom dia. Preciso da base de dados da minha cidade. QUem consegue? $$$$. ?Tentei fazer mas os dados se repetem e geram mais de 50 arquivos diferentes.
olá eu consigo
Thiagão boa tarde, no meu só puxa os dados do primeiro contato da busca, o que fazer?
Tem que verificar o Log para saber o que está acontecendo
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Na aba "Console" não aparece a lixeira pra mim limpar os dados o que faço? Alguém pode me ajudar por favor?
Tem q abrir no firefox
Deu erro, a página carrega errado
pse, aqui também 😢
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Uau.
@thiagoLowCode me da um help quando eu vou lá dar um ctrl V do código no console vem um warning de erro
Observei que no seu aparece sempre >> e no meu só aparece > tem alguma dica para passar para que eu possa evoluir nisso?
No erro diz que vc precisa digitar um texto para liberar o console.
Só digitar e dar enter
o meu so pesquisa o primeiro e para. COmo resolvo?
Meu tambem ta assim conseguiu resolver?
Bom dia @ThiagoLowCode
Consegui e rodou bem, porém, quando vou fazer de novo, ele puxa a mesma pesquisa que fiz primeiro. O que estou fazendo de errado?
nao ta limpando o dados do codigo.
Tiago, aqui também não deu certo.
Eu pensei em uma forma melhor de extrair, "só não consegui executar no Automa."
Me ajuda ai e veja se a ideia dará certo..
" Eu fiz da extração inicial da casa dos dados e formei um link Html pronto de acesso a pagina dentro do Google Sheets, ou seja a unica ação que o automa faria é acessar cada link da planilha e depois fazer o mesmo mecanismo de mineração a qual você mencionou no video"
Me ajuda ai
Vídeo esquecido pelo cara do canal...
O meu está rodando, porém, não puxa nenhuma informação
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Aqui esta dando um erro.
Está abrindo sempre a mesma leitura, com os mesmos nomes e cnpj sempre.
Como proceder?
Pode acontecer de o script que pega os cnpjs do site não excluir o arquivo anterior, para isso você teria que dar F12 e excluir esse arquivo
fiz e refiz e mesmo assim a tabela aparece vazia
Quando vou fazer de novo ele extrai os mesmos dados do que fiz na primeira fez, o que faço?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
CONSEGUIIIIIIIIIIIIIII
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
A primeira vez que eu fiz deu certo,agora estou tentando extrair dados de outro filtro que eu fiz na casa dos dados,mas agora quando eu colo o código csv no console,ele puxa o primeiro filtro que eu fiz e não o atual. O que devo fazer???
Tambem estou com esse problema
descobriram como resolver?@@midiaway_
Fiz tudo do tuto, mas o automa abre so o primeiro link e depois não faz mais. Alguem sabe resolver ?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Ja fiz isso e o meu continua parando... Ja refiz rudo , se coloco uma losta de 200 por exemplo ele puxa 40 e prra. Ai excluo esses que ja fiz e dou play denovo e vai. Entao nao é bem um erro ele só para 😢😢 alguem com o mesmo problema?
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Pensa em fazer algo pra captar do Google Maps
Posso trazer um vídeo sobre
Alguem resolveu esse problema da URL??
Não funciona, tem um email de contato para e ou um whatsapp para falarmos sobre uma demanda?
Funciona amigo
Não consigo colar o código lá no inspecionar
Quando isso acontece, aparece uma mensagem em vermelho dizendo para você digitar alguma palavra.
Só ler qual palavra e digitar antes de colar, pq você precisa liberar o console primeiro
Não está funcionando mais !!
Então. O meu não sei se é pq o Chrome tá lento mas ele não troca as páginas. Já teve vez que trocou. Na verdade ele pars e o log não fala nada
Dados só de empresas não tem pra pessoa física?
Somente empresas
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
Amigo, quando configuro e começo a extrair, ele interrompe a extração na metade na página de erro e preciso ou recomeçar ela ou abrir o documento e apagar tudo que veio antes para iniciar de novo. Ambas são ruins pq as vezes pode acontecer a casa 50 dados ou a cada 2. Tem alguma forma dele pular da página de erro direto para a próxima extração sem precisar dar algum reset?
Fiz um tutorial para evitar esse erro.
drive.google.com/file/d/1MjMUUh2pLlILp9D9N3XwztM1b0YlaUvI/view?usp=drivesdk
@@ThiagoLowCode Vlw meu mano, ajudou muito! Conteúdo excelente, se puder trazer mais coisas sobre o automa vai ser bom demais.
@@slymorning eu fiz tudo e ainda da erro no meu
@@frostyeff3045 Cara, aqui eu consegui resolver seguindo os passos que o Thiago passou, não sei o que pode ser
Eu tenho um software que salva a sua pesquisa feita na casa dos dados em excel, tem interesse?
O meu não está pesquisando direito
Fiz um tutorial para evitar esse erro.
drive.google.com/file/d/1MjMUUh2pLlILp9D9N3XwztM1b0YlaUvI/view?usp=drivesdk
Ja revi varias vezes o video porem o meu depois que configuro tudo e dou o play para iniciar a extração dos dados aparece Codigo de Status:404 - CNPJ Invalido sabe o que pode ser Thiago?
As vezes o CNPJ que o script salvou não é o mesmo que fica no link da empresa, então o site não encontra.
Tem uma solução para isso no comentário fixado, dá uma olhadinha lá
@@ThiagoLowCode Boa noite mestre a solucao nao resolveu nao... mesma coisa
O meu arquivo baixou automaticamente para Excel
Pode ser que no seu computador, você definiu que o excel abra arquivos CSV
Isso é normal, não afeta em muita coisa, só abrir o arquivo com o bloco de notas
esse site automasite nao encontra na internet, tem outro q eu possa usar
É só clicar no link:
www.automa.site/
Buenas! Já refiz várias vezes o processo, inclusive com o element exists... Sempre dá erro no CNPJ. Código do Status: 404 - Mensagem: CNPJ Inválido. Aparece o botão Voltar para página principal...
Como teste até removi o CNPJ dos Get Text e mesmo sem ele o erro permanece o mesmo.
Alguém passando pelo mesmo?
No bloco Element Exists tem uma caixinha chamada "Timeout" que está em 500, altere para 3000 ou 5000
Mestre, aumentei para 3.000 e depois para 5.000 e não passa, infelizmente@@ThiagoLowCode
@@emersondazzi Código do Status: 404
Mensagem: CNPJ inválido odio viu
mesmo erro aqui. conseguiu resolver?
@@Causticgreeneye eu consegui mano vai no csv insere uma linha em cima escrito empresa e da um enter, depois salva e joga no automa dnv. Deve funcionar
ola, obrigado pelo video, estou enfrentando o seguinte erro quando ele abre o site Código do Status: 404 Mensagem: CNPJ Inválido, quando vou no logs aparece o erro>
Trigger
14:18:05 (0s)
Loop data
14:18:05 (4s)
New tab
14:18:09 (0s)
Element exists
14:18:09 (0s)
Get text
14:18:09 (5s)
Get text
Can't find an element with the selector ".columns:nth-child(1) > .column:nth-child(2) > p:nth-child(2)"
Você chegou a abrir o arquivo e escrever "empresa" na primeira linha?
@@ThiagoLowCode Muito brigado pelo retorno, sim escrevi, quando insiro o arquivo o arquivo no LoopData ele ja aparece empresa em vermelho na frente de todos os nomes de empresa, eu realmente estou muito muito intrigado por nao estar conseguindo obter o resultado. alguma outra alternativa que posso verificar?
eu conferi manualmente o primeiro dado da empresa e ele esta correto quando insiro no link, realmente nao consigo entender porque nao esta funcionando.
Como fica a URL?
Pq se na URL estiver como {{empresa}} provavelmente vc errou no automa.
Lembrando que o id que eu falo para você usar, não é oq está no meu vídeo, é o id do seu projeto.
Resolvi arrumando o bloco de notas (coloquei na primeira linha empresas) e também no Automa colocando o arquivo certo no loop data, exemplo:
*empresas
nome das empresas que extraiu
-----------------------------------------------------
Normalmente sempre o problema será no Loop Data confirma sempre se está colocando o certo.
Quando clico para executar aparece logo este erro. Isso ainda funciona?
Sim, tem um vídeo ensinando a corrigir, só dar uma olhada nos comentários
@@ThiagoLowCode não deu certo ainda mesmo com a atualização do vídeo
@@frostyeff3045 voce conseuiu? ainda estou com mesmo problema
O audio esta muito dificil de entender !!