Eu fico vendo vídeos antigos e novos de vocês de acordo com minhas necessidades e é incrível como vocês melhoram muito e conseguiram manter a excelência em todos os vídeos ❤
Realmente venho acompanhando esse canal, já faz algum tempo. Primeiro que esse casal, é muito simpático. E os assuntos, são muito bem explicados.... Muito legal.... Sucesso para vocês.
Não conhecia o termo web scraping porém faço muito isso para extrair dados de sites de empresas que não fornecem dados via web services mesmo que você implore ou até mesmo monte um servidor para eles. Eu implementei em Java, mas adorei a maneira como vocês fizeram usando Python.
Já tinha até me esquecido mas tenho um projeto bem simples que fiz para extrair dados do site da loteria federal: github.com/tiagoadmstz/SearchLoteriaFederal
estou simplesmente encantado com python e com o conteúdo de vcs. estou aprendendo de forma autodidata porem tenho 44 anos e nao tenho muita expectativa. quero aprender pq amo aprender sobre tecnologia e quero automatizar algumas trivialidades em meu trabalho. obrigado. vcs sao top
Eu já fiz vários códigos de web Scrapping com Selenium, e hoje eu aprendi uma coisa importante: eu não sei nada de web Scrapping 😂. Parabéns, pessoal. Vídeo fantástico!
Muito bom o vídeo, super didático. Uma ideia legal seria fazer uma parte 2 usando esses dados pra gerar alguns gráficos e explorar as libs de Data Visualization do Python.
Amooo Python Selenium. Comecei utilizando o Selenium junto ao VBA para umas automações simples. Mas quando comecei ver junto do Python, amei a interação.
Encontrei o vídeo de vocês pesquisando acidentalmente algumas palavras chave, eu encontrei a solução do meu problema tipo 100% esse vídeo é literalmente a solução que eu precisava. Muito obrigado.
Muito bom, finalmente um assunto que amo ... Dependendo do Parser da pra fazer muita coisa e até virar tcc da faculdade,automação com django,pegar preços de lojas super baratos...
4 anos depois e olha eu assistindo à mais um vídeo do canal, super didático e explicativo! Eu tenho uma dúvida, e quando eu tenho que extraír os dados de uma janela que abriu, após eu clicar em um botão de uma outra página? (Ela está dentro de um )
Aaaah, minha cabeça vai explodir!!! Muuuito obrigado Gabriel!!! Vou fazer isso logo mais kkkkkk... Vídeo maravilhoso juntando coisas maravilhosas com pessoas maravilhosas... E eu tô nitidamente emocionado
@@gyovanesouzza4710 Foi durante um curso técnico que fiz, fazia parte da matéria que continha na grade. Ou seja, eram somente atividades de sala de aula
Muito bom pessoal, só uma dica. o pandas já possui um método chamado "to_json" para salvar o DataFrame direto em arquivo. Assim vocês já podem economizar umas 5 linhas de código.
Parabéns pelo conteúdo! Fica aqui uma dica rápida para quem for executar o script em outras páginas, que vale a pena colocar um sleep também após o click para dar tempo da página carregar. Eu estava usando em uma página onde esse click me redirecionava e sem o sleep o código acabava retornando um contentPlaceHolder e não o conteúdo da tabela em si.
Que vídeo sensacional, vocês são incríveis 😍😍, a didática de vocês e sensacional...é tão bom saber que tão perto(Sou de São José do vale do rio preto) tem programadores desse nível, estou ingressando agora na programação e desenvolvi esse msm projeto junto com esse vídeo ... Parabéns pra vocês ♥️😍 muito fã
Preciso de um orçamento de alguém que pegue os numeros sortiados na bet 365 e coloque em uma planilha de forma altomatico, alguém tem alguma noção desse serviço? me chama no whatss (33)987620198
Para min uma das maiores qualidades do python e sua sintax simples e legível torna o debug menos desesperador PS: NÃO ESTOU TRAUMATIZADO POR CAUSA DE DUAS MADRUGADAS EM CLARO PARA DEBUGAR UMA APLICAÇÃO JAVA, GENTE COMETA O SEU CÓDIGO POR FAVOR.
uma opção boa é usar a biblioteca urllib, com ela economiza muito tempo. Consegue abrir e receber o conteudo html da pagina sem precisar abrir o navegador
Só um detalhe, a melhor maneira de esperar que um conteúdo carregue, sem usar sleep, é usando WebDriverWait(driver).until(condition). Valeu pelo ótimo vídeo! Abraços
Eu como analista de BI, tive resistência ao python por muito tempo. Mas quando comecei a estudar, achei SENSACIONAL. Tenho milhões de ideias pra fazer. Parabéns pelo vídeo.
Uma coisa legal é que você pode clicar em inspecionar elemento, clicar com o botão direito na aba de desenvolvedor e pegar a cópia do xpath feito direto pelo chrome.
Um tempo atrás eu dava uma ajuda no fórum do Clube do Hardware, na parte onde ficavam as promoções, era um único tópico e eu usava web scrapping para atualizar os preços dos produtos, pra cada produto ia visitando um link pra cada loja vendendo ele (cadastrado previamente) e salvava num banco de dados. Depois clicava num link e gerava o post pra copiar e colar no fórum. Usei Java, Grails, Jsoup, HSQLDB, foi divertido fazer ele funcionar, mas acho que perdi o código :P
@Samuel H tente usar a biblioteca pyautogui. Use o método press() para pressionar apenas uma tecla e use o método hotkeys() para pressionar teclas combinadas. Abraços. Espero ter ajudado. pyautogui.readthedocs.io/en/latest/keyboard.html
Alguém saberia dizer se teria alguma forma, utilizando o selenium, de trocar esse time.sleep() por uma função async, para aguardar o load da page? Ótimo vídeo!
Eu usava muito estas funções no Visual Basic 6 (anos 90) para parsear o Google, Alta Vista e Yahoo e alimentar automaticamente os sites de buscas nacionais que fazia para os meus clientes. O PYTHON herdou muita coisa do VB6.
Muito bacana o vídeo, ficou Showwwww! Gostaria de sugerir a produção de um vídeo utilizando python, excel e obtendo como resultado uma imagem. Exemplo: Um script que verifique numa planilha de Excel dados como nome do aluno, curso realizado, carga horária, início e fim do curso para poder escrever num modelo de certificado previamente existente, gerando uma imagem final para poder ser impressa ou enviada. Vlw Casal, vocês são demais!
Código Fonte TV Muito bom o video. Parabéns. Uma duvida, no começo do video voces comentam que da para fazer o scraping com o headless=true. Nesse caso o mouse e teclado ficam livres para o uso durante a execuçao ?
Estou querendo usar os dados que extraio do site em um cálculo, porém não consigo por estar em string, como consigo fazer a conversão ou extrair diretamente como int?
Olá, amigo. Tem algum curso que indica para iniciantes. O que eu quero é levantar dados e estatísticas de futebol de um site específico. Preciso filtrar quais as ligas mais empatam e os times que mais empatam nessas ligas. Teoricamente é isso.
Eu fico vendo vídeos antigos e novos de vocês de acordo com minhas necessidades e é incrível como vocês melhoram muito e conseguiram manter a excelência em todos os vídeos ❤
Realmente venho acompanhando esse canal, já faz algum tempo.
Primeiro que esse casal, é muito simpático.
E os assuntos, são muito bem explicados....
Muito legal....
Sucesso para vocês.
verdade, são sensacionais!
Python é muito legal. Dá para fazer muitas coisas com pouquissimas linhas. Esse quadro é sensacional.
Não conhecia o termo web scraping porém faço muito isso para extrair dados de sites de empresas que não fornecem dados via web services mesmo que você implore ou até mesmo monte um servidor para eles. Eu implementei em Java, mas adorei a maneira como vocês fizeram usando Python.
Já tinha até me esquecido mas tenho um projeto bem simples que fiz para extrair dados do site da loteria federal: github.com/tiagoadmstz/SearchLoteriaFederal
Oi com gentileza vc pode me explicar , isso é o que?
@@mayara7442 Desculpe mas eu não entendi sobre o que você deseja explicação.
Exatamente o que eu precisava, inclusive tentei por uma API antes, e esse método é bem mais rápido. Vocês são fera!
estou simplesmente encantado com python e com o conteúdo de vcs. estou aprendendo de forma autodidata porem tenho 44 anos e nao tenho muita expectativa. quero aprender pq amo aprender sobre tecnologia e quero automatizar algumas trivialidades em meu trabalho. obrigado. vcs sao top
Simplesmente sensacional!!! WebScrapping em outras soluções tb porfavor!. Abraços. Anderson Sales
Esse é o casal que adoro tanto. Show de bola.
Estou começando com Python agora, amei esse desafio que vocês fizeram.
Parabéns....
Deu certo o prendizado em python, Thiago?
@@Vitor-hd3whSim, mas tive que para por conta do serviço. 😅
Didática e sintonia no nível mais ideal. Claro que ganharam mais um inscrito. Parabéns!
Muito obrigado! Seja bem vindo Andre. 🤓
Excelente! Ja estou usando na automacao de tarefas de busca de dados para minha planilha Excel
Fantástico. Para mim que estou começando e tenho entendimento médio, consegui captar perfeitamente o conteúdo passado. Parabéns!!
Eu já fiz vários códigos de web Scrapping com Selenium, e hoje eu aprendi uma coisa importante: eu não sei nada de web Scrapping 😂. Parabéns, pessoal. Vídeo fantástico!
Agora que iniciei os estudos em python já consigo entender melhor o que o Sr. e a Sra. fizeram.👍👏
Muito bom o vídeo, super didático. Uma ideia legal seria fazer uma parte 2 usando esses dados pra gerar alguns gráficos e explorar as libs de Data Visualization do Python.
Excelente ideia!
@@codigofontetv olá, seria possível fazer um trabalho de web scraping?
Puxa, muito legal. Eu comecei a estudar o Phyton há poucos dias e estou achando muito bom. Parabéns pelo vídeo e pela excelente explicação! Valeu!
Aha! Foi verdade mesmo kkkkk acertei o vídeo antes de sair !
Muito bom !
Vocês são demais !
Pra quem não entendeu é só ler meu comentário nesse vídeo
ruclips.net/video/3LDknWxVw7Y/видео.html
Amooo Python Selenium. Comecei utilizando o Selenium junto ao VBA para umas automações simples. Mas quando comecei ver junto do Python, amei a interação.
Encontrei o vídeo de vocês pesquisando acidentalmente algumas palavras chave, eu encontrei a solução do meu problema tipo 100%
esse vídeo é literalmente a solução que eu precisava. Muito obrigado.
Muito bom...Eu faço isso no R e agora tô migrando para o Python
Muito bom, finalmente um assunto que amo ... Dependendo do Parser da pra fazer muita coisa e até virar tcc da faculdade,automação com django,pegar preços de lojas super baratos...
Olá você sabe fazer web scraping?
Muito legal, vocês fazem parecer tão fácil.
Python é realmente uma linguagem fantástica, curti muito o conteúdo do vídeo, vcs estão de parabéns !!!
Fantástico é C, Assembly, Rust. Python tem várias bibliotecas, o que facilita. Mas qualquer linguagem poderia ter também.
Web Scraping é algo sensacional. Obrigado!
iniciante em py adorei o video muito explicativo parabens
Consegui acompanhar até 06:06 depois continuo... Parabéns pelo vídeo e o canal!!!
Muito bom. Gostaria de ver mais vídeos de python aqui no canal! Parabéns.
Então fique ligado no canal na semana q vem. 😉
@@codigofontetv Com certeza estarei ligado!
Faz algum tempo que eu olho os conteúdos de vocês, já gostava muito do conteúdo. Mas esse vídeo me fez me inscrever e curtir. Parabéns fantástico.
Seja bem vindo Ciro! 🤓
Seu vídeo me ajudou muito. Obrigado por compartilharem!
Sem palavras, incrível como sempre, parabéns 👏🏾👏🏾👏🏾👏🏾👏🏾
4 anos depois e olha eu assistindo à mais um vídeo do canal, super didático e explicativo!
Eu tenho uma dúvida, e quando eu tenho que extraír os dados de uma janela que abriu, após eu clicar em um botão de uma outra página? (Ela está dentro de um )
Aaaah, minha cabeça vai explodir!!! Muuuito obrigado Gabriel!!! Vou fazer isso logo mais kkkkkk... Vídeo maravilhoso juntando coisas maravilhosas com pessoas maravilhosas... E eu tô nitidamente emocionado
Ficamos muito felizes que você gostou Matheus!
An impressive video that has served as an inspiration for our new members. Your generosity is much appreciated!
O Gabriel sempre teve um copiloto, e nós mortais estamos conseguindo essas tecnologias só agora.😁😁
Caramba!!!
Muito Show!!!
Conteúdo de Altíssimo Nível
Peguei esse vídeo na hora certa, valeu galera!!
video de web scrapping justamente no primeiro dia q conheço a técnica :)
Eu sou muuuito fã do seu Canal,
Eu tento não perder nenhum vídeo.
Já fiz alguns scraping, só que usando Java+Selenium, e com python é absurdamente mais simples e mais rápido.
Parabéns pelo vídeo, muito bom ;)
sou novo ainda, quais os beneficio ou caso que voce precisou para fazer scraping ?
@@gyovanesouzza4710 Foi durante um curso técnico que fiz, fazia parte da matéria que continha na grade. Ou seja, eram somente atividades de sala de aula
A sim
Muito bom, tive um desafio na faculdade de WS e penei um pouco em realizar. Vou treinar mais com esse tutorial 💪🏽😊
Muito bom pessoal, só uma dica. o pandas já possui um método chamado "to_json" para salvar o DataFrame direto em arquivo. Assim vocês já podem economizar umas 5 linhas de código.
Parabéns pelo conteúdo! Fica aqui uma dica rápida para quem for executar o script em outras páginas, que vale a pena colocar um sleep também após o click para dar tempo da página carregar. Eu estava usando em uma página onde esse click me redirecionava e sem o sleep o código acabava retornando um contentPlaceHolder e não o conteúdo da tabela em si.
its amazing to bring data scraping and nba stats together in an example. i wish there were other languages options as subtitles
Do you haven't any content in your language?
Que vídeo sensacional, vocês são incríveis 😍😍, a didática de vocês e sensacional...é tão bom saber que tão perto(Sou de São José do vale do rio preto) tem programadores desse nível, estou ingressando agora na programação e desenvolvi esse msm projeto junto com esse vídeo ... Parabéns pra vocês ♥️😍 muito fã
Simplesmente Fantástico!!!
Muitooooo BOM!!!! Isso vai me ajudar muito nos estudos de Python e no meu objetivo com a linguagem. Meu amor por vocês foi pra ^10 kkkkkk. Parabéns!!!
Eu acho muito massa essa técnica (selenium + beautifulsoup4), é o meu martelo. Parabéns pelo vídeo, muito show.
Preciso de um orçamento de alguém que pegue os numeros sortiados na bet 365 e coloque em uma planilha de forma altomatico, alguém tem alguma noção desse serviço? me chama no whatss (33)987620198
Simplesmente demais. Obrigado gente.
Obrigado e parabéns pelo excelente vídeo. Faz outro vídeo de Web Scraping com dados de ações, extraídos do site da CVM.
to apaixonado pelo python, to aprendendo aos pouquinhos a programar com ela
fantástico ! Python + Libs são demais
Parabéns! O canal de vocês é maravilhoso!!
Excelente vídeo! 👏🏻👏🏻👏🏻
Que código lindo de se ver em! Sensacional! 👏👏👏
Muito obrigado. 😍
Para min uma das maiores qualidades do python e sua sintax simples e legível torna o debug menos desesperador PS: NÃO ESTOU TRAUMATIZADO POR CAUSA DE DUAS MADRUGADAS EM CLARO PARA DEBUGAR UMA APLICAÇÃO JAVA, GENTE COMETA O SEU CÓDIGO POR FAVOR.
uma opção boa é usar a biblioteca urllib, com ela economiza muito tempo. Consegue abrir e receber o conteudo html da pagina sem precisar abrir o navegador
Que massa esse código. Ótima aula. Muito obrigado!!!
Cara que show! Top demais! Parabens
Python no quadro mão no código é like antes de ver o vídeo, aí quando acabo de ver tenho vontade de dar mais like hahahah
Só um detalhe, a melhor maneira de esperar que um conteúdo carregue, sem usar sleep, é usando WebDriverWait(driver).until(condition). Valeu pelo ótimo vídeo! Abraços
Tem também o implicity_wait do driver
TheuzzLivee verdade 😉
@Human Exploit o código pode dar erro se o componente em que será realizado o scrape não tiver sido renderizado, por exemplo
Tou flipando!!! Me sinto agora mesmo como se fosse un gusano!!!
Voces sao muito bons!
Voces tem algun video mostrando como dominar VSCode?
Boa dinâmica do vídeo, sem enrolação, é direto ao ponto. Obs.: não é "scrap", é "scrape" (skreyp).
Eu como analista de BI, tive resistência ao python por muito tempo. Mas quando comecei a estudar, achei SENSACIONAL. Tenho milhões de ideias pra fazer. Parabéns pelo vídeo.
Olá, você sabe fazer web scraping?
@@anasousa7718 Sim
@@o_comentador_aleatorio pode-me dar um contacto para eu lhe pedir um trabalho?
@@anasousa7718 @alves.19xx
Insta
@@o_comentador_aleatorio mandei-te um pedido agora. Fisioterapia for life
Legal. E como fazer pra percorrer as linhas de paginação?
imagino que vc não vai ter muita diferença, desde que não seja uma ali interna que faça o Scroll
Muito bacana! Parabéns pelo conteúdo útil e de qualidade!
Esse canal vale ouro
Otimamente explicado!! 🤘🏻🤘🏻🤘🏻👏🏻👏🏻👏🏻
Uma coisa legal é que você pode clicar em inspecionar elemento, clicar com o botão direito na aba de desenvolvedor e pegar a cópia do xpath feito direto pelo chrome.
Ficou bem massa o vídeo
Python é mágico, incrível é quem sabe programar nele.
Estou estudando esse conteúdo em Dart e é impressionante como muitas coisas são similares independente da linguagem.
Um tempo atrás eu dava uma ajuda no fórum do Clube do Hardware, na parte onde ficavam as promoções, era um único tópico e eu usava web scrapping para atualizar os preços dos produtos, pra cada produto ia visitando um link pra cada loja vendendo ele (cadastrado previamente) e salvava num banco de dados. Depois clicava num link e gerava o post pra copiar e colar no fórum. Usei Java, Grails, Jsoup, HSQLDB, foi divertido fazer ele funcionar, mas acho que perdi o código :P
Haha muito bom! eu faço bots pra whatsapp, instagram, etc. usando o python com selenium. Muito bom o conteúdo, sucesso!
Ensina fi😬
Eu tava atrás disso mas não sei usar o selenium
Vc tem repositório no github?
@Samuel H tente usar a biblioteca pyautogui. Use o método press() para pressionar apenas uma tecla e use o método hotkeys() para pressionar teclas combinadas. Abraços. Espero ter ajudado.
pyautogui.readthedocs.io/en/latest/keyboard.html
@Samuel H cara acho que vai ser melhor vc pegar o link do endereço da imagem e fazer uma função com request.get nessa url e salvar a imagem
Nossa, tá de Parabéns, muito bom mesmo, vou criar um json de futebol.
amei! Vcs são os melhores!
Qual versão do firefox utilizado ? Não consegui com a versão mais nova.
Alguém saberia dizer se teria alguma forma, utilizando o selenium, de trocar esse time.sleep() por uma função async, para aguardar o load da page?
Ótimo vídeo!
Que da hora. Parabens, Video Muito Bom !!!!
Incrível! Parabéns pela aula.
Muito bom o vídeo, tenho uma duvida como tem intellisense no vscode e que eu ja tive a ver no stackoverflow e nada resolve o meu problema
Muito shoow, parabéns pessoal !!!
Gostei do vídeo e também gosto de basquete massa, parabéns ao casal show.
Eu usava muito estas funções no Visual Basic 6 (anos 90) para parsear o Google, Alta Vista e Yahoo e alimentar automaticamente os sites de buscas nacionais que fazia para os meus clientes. O PYTHON herdou muita coisa do VB6.
Muito bacana o vídeo, ficou Showwwww!
Gostaria de sugerir a produção de um vídeo utilizando python, excel e obtendo como resultado uma imagem.
Exemplo:
Um script que verifique numa planilha de Excel dados como nome do aluno, curso realizado, carga horária, início e fim do curso para poder escrever num modelo de certificado previamente existente, gerando uma imagem final para poder ser impressa ou enviada.
Vlw Casal, vocês são demais!
Legal, qual é a extensão que vocês usaram para ver o JSON no VSCODE?
pra mim quando abre o robô, da uma msg de aceitar os cookies, e por causa disso da erro, eu aceito manualmente e da certo o clique
Código Fonte TV
Muito bom o video. Parabéns.
Uma duvida, no começo do video voces comentam que da para fazer o scraping com o headless=true.
Nesse caso o mouse e teclado ficam livres para o uso durante a execuçao ?
Show de bola! Bola de basquete, mas show igual! hahaha
ótimo vídeo!!! Vcs poderia fazer WebScraping do site de aposta da blaze?
FANTÁSTICO! Mas que mágica foi aquela aos 14:47? 😆
Como faz agora que eles botaram uma proteção contra o selenium?
com a atualização do Selenium da para usar esta estrutura?
Excelente vídeo!
Muito obrigado Kyrian. 😃
@@codigofontetv Gostei tanto, que vocês me incentivaram a começar a estudar Python!
Estou querendo usar os dados que extraio do site em um cálculo, porém não consigo por estar em string, como consigo fazer a conversão ou extrair diretamente como int?
Vocês poderiam fazer um vídeo extraindo dados de um Visual do Power BI? Hospedados em algum site.
Excelente, encantado!
Vcs são os melhores me ajudaram muito com esse video
Muito obrigado Emerson! Ficamos felizes por ter te ajudado. 🤓
posso usar o mesmo processo para ações
Show de bola!
Olá, amigo.
Tem algum curso que indica para iniciantes.
O que eu quero é levantar dados e estatísticas de futebol de um site específico.
Preciso filtrar quais as ligas mais empatam e os times que mais empatam nessas ligas.
Teoricamente é isso.
Show!! Gostei do jazz ao fundo.
Muuuuuuuito bom.