사람이 직접 일일이 검색하고 사이트를 찾아 들어가서 수동으로 정보를 수집하는 건 오래 걸리기 때문이죠. 그리고, 크롤링 기술이 있어야 검색 엔진도 작동을 하고 챗gpt에 사용되는 인공지능 모델도 크롤링으로 정보를 수집해서 학습 시킵니다. 그 밖에도 크롤링을 사용하는 곳은 엄청 많습니다. 예를 들어서, 쿠팡에서 판매 중인 모든 노트북 정보가 필요한 회사가 있습니다. 만약 사람이 직접 모든 제품 페이지에 들어가서 정보를 하나하나 수집해야 한다면 몇 날 며칠 엄청난 시간이 걸릴 겁니다. 하지만, 크롤링 프로그램을 만들어서 수집하면 비교도 안되는 짧은 시간에 원하는 정보를 수집할 수 있습니다.
영상 항상 잘 보고 있습니다. 얼마전 선생님이 하셨던 말씀중에 크롤링 만으론 돈버는데 한계가 명확하고 크롤링한거 가지고 웹, 기타 프로그램 개발 등을 하면 더 큰 돈을 벌 수 있다셨는데, 파이썬 만으로 할 수 있는 것들 중 크롤링 말고 좀 더 고급 기술로 더 큰 돈 버는 방법 알고있는거 혹시라도 있으신가요? 예를 들면 데이터 분석, 전처리, 시각화 같은 데이터 엔지니어링 영역 같은거 말입니다.
말씀하신 분야는 제 전문이 아니지만 제 생각을 한번 말씀드려보자면 취업과 창업이 아니라면 돈 버는 방법 중에 외주 또는 강의를 생각해 볼 수 있겠죠. 물론 이게 다는 아닙니다. 그리고, 이 영상의 핵심은 자신을 알리는 것입니다. 웹 크롤링을 예시로 설명했을 뿐 다른 분야도 마찬가지입니다. 그러나 제 생각에, 데이터 엔지니어링 영역으로 외주는 웹 크롤링에 비해 개인이 따내기 힘들 거라고 봅니다. 아무래도 회사 대 회사로 일을 하거나 회사에서 전문가를 직원으로 채용하겠죠. 개인이 불가능 하다는건 아닙니다. 그렇다면, 데이터 엔지니어링이 필요한 회사에 유료 자문을 해주는 것도 돈 버는 하나의 방법이 아닐까 합니다. 하지만 이것도 자신을 잘 포장할 수 있는 포트폴리오 격의 블로그, 웹사이트 등 무언가 있어야 좋을 겁니다. 그리고 이런걸 잘 만들어 놓는다면 뭘 하시더라도 도움이 될겁니다. 하지만 결국, 보통은 혼자가 아닌 회사가 되어야 큰돈을 벌기 수월하지 않을까요? 물론, 큰돈이란 게 얼마를 기준으로 봐야 하는가에 따라서 다르겠지만요. 글로 쓰다보니 머릿속 생각이 잘 표현이 안되네요.
실습으로 끝장내는 파이썬 웹 크롤링과 웹 페이지 자동화 강의 : inf.run/jX3V
강의고민중인데 혹시 예를들면 쇼핑몰에서 tv라고 검색해서 나오는 제품들중에 하나씩 상세들어가서 볼수있는 키워드 예를들면 220v 이런거 있는것만 크롤링도 되나요 배우고 싶은데 아예 파이썬을 모릅니다 설명이 너무좋으셔서 문의드려요😊
좋은 정보 감사합니다!!!
저도 감사합니다!!
비개발자인데 코딩의 사업성 가능성이 무한대임을 알게 되어서 가슴이 벅차 오네요. 좋은 영상 감사합니다. 👏👏
감사합니다~😀
크몽에 전문가 등록은 마쳤지만, 어떻게 해야할지 참 막막했는데, 좋은 가이드라인을 알려주셔서 감사합니다.
구독,좋아요 눌렀습니다. 앞으로도 좋은 컨텐츠 많이 올려 주십시오.
감사합니다.!
저도 감사합니다~!
감사합니다 개발영역에 취미로 관심을 가지고자 했는데 너무 좋은 강의 감사해요🎉🎉
좋게 봐주셔서 감사합니다~!
상세한 설명이 들어간 영상 감사합니다.
기술 블로그부터 개설해야겠네요.
감사합니다!
화이팅입니다!
원하는 크롤링코딩을 챗지피티에게 물어보니 3초만에 무슨 요청이던지 다 짜주던데....과연 크롤링으로 돈을 벌수있을까요?
그렇게 생각되시면 안하면 되는거죠 ?
잘보았습니다.
감사합니다~
이건 그냥 웹크롤링으로 돈 버는 법을 넘어서 온라인에서 비즈니스 하는 법을 축약해서 알려주신 거네요. 단순한 개발자가 아니라 사업가적 마인드와 내공이 상당한 분이신것 같습니다. 잘 봤습니다~ ^^
감사합니다~!
크롤링이 왜 수요가 있는건가요?
사람이 직접 일일이 검색하고 사이트를 찾아 들어가서 수동으로 정보를 수집하는 건 오래 걸리기 때문이죠.
그리고,
크롤링 기술이 있어야 검색 엔진도 작동을 하고
챗gpt에 사용되는 인공지능 모델도 크롤링으로 정보를 수집해서 학습 시킵니다.
그 밖에도 크롤링을 사용하는 곳은 엄청 많습니다.
예를 들어서,
쿠팡에서 판매 중인 모든 노트북 정보가 필요한 회사가 있습니다.
만약 사람이 직접 모든 제품 페이지에 들어가서 정보를 하나하나 수집해야 한다면 몇 날 며칠 엄청난 시간이 걸릴 겁니다.
하지만, 크롤링 프로그램을 만들어서 수집하면 비교도 안되는 짧은 시간에 원하는 정보를 수집할 수 있습니다.
@@kimfl 만약그게 마케팅 팀이라면, 그냥 그걸 할수있는 개발자를 고용하면 되지않나요? 그분께 시스템화 시키도록 요청하고 앞으로 계속 관리만 하도록 하면 되는 거 아닌가요? 제가 잘 몰라서요..
외주로 소모되는 비용이 월급 이상이라면 개발자를 고용하는게 좋겠죠.
감사합니다! 꼭 실천할께요!
응원하겠습니다!
웹크롤링을 부업으로 시작해 본업프리랜서로 활동할 수도 있을까요?
영상 항상 잘 보고 있습니다. 얼마전 선생님이 하셨던 말씀중에 크롤링 만으론 돈버는데 한계가 명확하고 크롤링한거 가지고 웹, 기타 프로그램 개발 등을 하면 더 큰 돈을 벌 수 있다셨는데,
파이썬 만으로 할 수 있는 것들 중 크롤링 말고 좀 더 고급 기술로 더 큰 돈 버는 방법 알고있는거 혹시라도 있으신가요? 예를 들면 데이터 분석, 전처리, 시각화 같은 데이터 엔지니어링 영역 같은거 말입니다.
말씀하신 분야는 제 전문이 아니지만 제 생각을 한번 말씀드려보자면
취업과 창업이 아니라면 돈 버는 방법 중에 외주 또는 강의를 생각해 볼 수 있겠죠. 물론 이게 다는 아닙니다.
그리고, 이 영상의 핵심은 자신을 알리는 것입니다.
웹 크롤링을 예시로 설명했을 뿐 다른 분야도 마찬가지입니다.
그러나 제 생각에,
데이터 엔지니어링 영역으로 외주는 웹 크롤링에 비해 개인이 따내기 힘들 거라고 봅니다. 아무래도 회사 대 회사로 일을 하거나 회사에서 전문가를 직원으로 채용하겠죠. 개인이 불가능 하다는건 아닙니다.
그렇다면,
데이터 엔지니어링이 필요한 회사에 유료 자문을 해주는 것도 돈 버는 하나의 방법이 아닐까 합니다. 하지만 이것도 자신을 잘 포장할 수 있는 포트폴리오 격의 블로그, 웹사이트 등 무언가 있어야 좋을 겁니다. 그리고 이런걸 잘 만들어 놓는다면 뭘 하시더라도 도움이 될겁니다.
하지만 결국,
보통은 혼자가 아닌 회사가 되어야 큰돈을 벌기 수월하지 않을까요?
물론, 큰돈이란 게 얼마를 기준으로 봐야 하는가에 따라서 다르겠지만요.
글로 쓰다보니 머릿속 생각이 잘 표현이 안되네요.
@@kimfl 충분히 표현 잘 해주셨어요.좋은 말씀 감사합니닺
크롬이 자동화된 테스트 소프트웨어에 의해 제한되었다고 왼쪽상단에 뜨면서 사이트까지는들어가지는데 클릭이나 글자입력이 안되는데 혹시막힌걸까요?...
크롬이 자동화된 테스트 소프트웨어에 의해 제어되고 있습니다. 메세지때문에 막히지는 않습니다.
댓글만으로는 제가 알수있는게 없지만 아마도 코드가 잘못되었을거라고 생각됩니다.
@@kimfl 코드는 다른
유튜버분 코드도 쳐보고 김플님 코드도 똑같이 쳤는데 안되네요ㅜㅜ 혹시 우회문제인가요?
확실하게 똑같이 했고 사이트에 들어가졌는데 안된다면 제가 영상을 찍었을 시점과 다르게 사이트가 바뀐경우일겁니다.
@@kimfl 그렇군요 답변감사합니다!
네이버 댓글과 대댓글 크롤링도 가능할까요?
난이도의 차이는 있겠지만 웬만하면 뭐든 가능합니다.