原來抓網頁資料已經變得那麼簡單了?一行程式都不用寫,連小學生都能輕鬆上手喔!

Поделиться
HTML-код
  • Опубликовано: 10 дек 2024

Комментарии • 198

  • @小翰翰-z5w
    @小翰翰-z5w 6 месяцев назад +327

    我覺得要這影片我要跪著看才可以表達我的讚嘆

    • @boicelu620
      @boicelu620 6 месяцев назад +8

      ?? 這程式也不是他寫的 為啥要跪

    • @小翰翰-z5w
      @小翰翰-z5w 6 месяцев назад

      @@boicelu620 程式被寫出來會不會運用就差很多,EXCEL大家電腦都有 ,但真正會活用的不算多,能深入淺出教大家如何活用我覺得很厲害

    • @xsleo2104
      @xsleo2104 5 месяцев назад +27

      ​@@boicelu620但能把這麼多程序用易通的語言講給大部分人聽這不是一件小事情

    • @yojaychang
      @yojaychang 4 месяца назад +5

      那對寫程式的人,你要用什麼姿勢看?

    • @tz5379
      @tz5379 3 месяца назад +1

      那我们一起跪吧 哈哈哈哈哈哈

  • @VincentCheng1658
    @VincentCheng1658 6 месяцев назад +33

    東西到您的手裡就能夠變得簡單易懂,真的是本事,感謝您!

  • @leiZhang-ww3ir
    @leiZhang-ww3ir 6 месяцев назад +16

    是我见过讲解教授电脑知识最清晰明了简介易懂的一位博主了,赞!

  • @user-beautifulsoup
    @user-beautifulsoup 6 месяцев назад +20

    每次都是愉快地开启和关闭PAPAYA的视频,开心学习就是这么简单。大赞!

  • @shih-tingchen5329
    @shih-tingchen5329 6 месяцев назад +6

    謝謝PAPAYA老師!! 還順便複習了超實用Excel功能!! 之前一直想找,卻不知道用什麼關鍵字來搜尋Trim跟Substitute!!

  • @J1136Yijia
    @J1136Yijia 6 месяцев назад +17

    好強大的東東,總是會有人發明的,我們等著用~~謝謝

  • @fengarcanine2606
    @fengarcanine2606 6 месяцев назад +9

    試了一下 還是蠻容易有Bug的
    但感謝分享這個方法

  • @mia.2862
    @mia.2862 6 месяцев назад +4

    同事說裝爬蟲自動找資料,終於一年後PAPAYA老師來教學了❤🎉

  • @xyz19791225
    @xyz19791225 6 месяцев назад +12

    滿滿的尊敬,感謝分享

  • @LindaHuang-j5c
    @LindaHuang-j5c Месяц назад

    好震驚 居然有這麼方便的擴充套件 非常感謝!

  • @陳秉謙-z9p
    @陳秉謙-z9p 6 месяцев назад +4

    謝謝!

  • @ouo9454
    @ouo9454 6 месяцев назад +8

    發明這類工具的人好天才,如此高效請求也難怪網頁要驗機器人😂

    • @oscarlin3555
      @oscarlin3555 3 месяца назад

      現在網頁驗證已經沒有用了 AI做的比人類好

  • @severinewang1930
    @severinewang1930 6 месяцев назад +6

    已經不知道要怎麼形容papaya 頻道的厲害及重要性了👍👍👍👍

  • @Function_range
    @Function_range 6 месяцев назад +37

    當我前幾天好不容易學好爬蟲時...
    這部影片就出現了,我...好吧,至少我知道原理
    如果遇到比較複雜的頁面還是要自己寫w

    • @阿公-x2j
      @阿公-x2j 6 месяцев назад +1

      😂我也有好幾次這樣的感受,
      好不容易找到成就感,影片就出現了

    • @colin1016
      @colin1016 6 месяцев назад +11

      用過Web Scraper 與 Instant Data Scraper, 這些工具是蠻方便的, 但很多時候抓取結果不如預期, 翻頁的時候抓不到資料, 自動翻頁時跳頁, 翻頁失敗, 資料沒有對齊等, 必須事後下很大的功夫整理, 我認為還是要自己學習編程來抓取, 這些工具當成輔助..

    • @kuku4629
      @kuku4629 5 месяцев назад

      自己做可以复用,这个每次 还要重新设置一遍。 大部分需要抓的资料都是经常更新的,不可能只抓一遍。

  • @natsumealice
    @natsumealice 6 месяцев назад +77

    終於來到這種資訊科技的時代了,以前論文爬蟲對文組來說好痛苦QQ

    • @hkywscl
      @hkywscl 6 месяцев назад

      收集信息方便

    • @Unrequired
      @Unrequired 6 месяцев назад +14

      說實話跟文理組沒啥關係,只是有沒有必要要多學而已;
      Beautiful Soup, Scrapy, Selenium, HTTP requests這些基本上你只要一步一步照著做而已

    • @Terry0319
      @Terry0319 6 месяцев назад +11

      @@Unrequired ==你要確定捏,不懂一點html不是略懂PYTHON就算有CHATGPT也很難爬好ㄇ,這個東西超方便的,就算我會爬我知道這個也懶得花時間去研究網頁架構了,浪費時間

    • @morries1234
      @morries1234 5 месяцев назад

      語言類本來就是文組的...

  • @3cblog
    @3cblog 6 месяцев назад +5

    爬蟲難得其實是分析他的架構,決定怎麼抓比較有效率。

  • @Gosiya
    @Gosiya 6 месяцев назад +4

    太實用了!謝謝PAPAYA

  • @mugen8219
    @mugen8219 6 месяцев назад +2

    精闢的講解!!請收下我的膝蓋...

  • @lightlydo
    @lightlydo 6 месяцев назад +2

    昨天還在煩惱怎麼抓資料~今天就看這部,感謝PAPAYA

  • @fukaichang2328
    @fukaichang2328 6 месяцев назад +2

    太神了!感謝分享及講解❤❤

  • @Hugohabor7799
    @Hugohabor7799 6 месяцев назад +5

    比較明著來的網頁適合用這類的工具

  • @lionsherkh
    @lionsherkh 6 месяцев назад +8

    謝謝師傅 !

  • @regularshow8958
    @regularshow8958 6 месяцев назад +4

    太神了!我把我淘寶購物清單爬下來加總,14年來買了120幾萬台幣,呵呵!

    • @papayaclass
      @papayaclass  6 месяцев назад +3

      你買真多 ~~~~ !厲害厲害 👍👍👍

    • @劉睿麟-d3z
      @劉睿麟-d3z 5 месяцев назад

      我蝦皮想抓資料,但是蝦皮似乎阻擋了爬蟲軟體,淘寶沒有阻擋嗎!?

    • @regularshow8958
      @regularshow8958 5 месяцев назад

      @@劉睿麟-d3z 爬購物紀錄沒有問題

  • @guangfumike
    @guangfumike 6 месяцев назад +2

    簡單又實用!超強!

  • @ChengCheYu
    @ChengCheYu 6 месяцев назад +6

    現在爬蟲困難是一堆驗證機器人:

  • @wanxinli6974
    @wanxinli6974 3 месяца назад

    讲解得好清晰优雅!

  • @eatbananaing
    @eatbananaing 6 месяцев назад +1

    太實用了! 如果能夠做到 Zepier 連接上 Google Sheet 就不得了

  • @n1xpen703
    @n1xpen703 6 месяцев назад

    感谢!刚好工作中需要用到爬虫,这个教程超级实用

  • @kevinhuang6952
    @kevinhuang6952 4 месяца назад

    「感恩讚嘆」尚不足以形容的強大!

  • @hansom283
    @hansom283 5 месяцев назад

    真的太神了!免除自己寫python程式碼了~

  • @SamCG-f2b
    @SamCG-f2b 3 месяца назад

    感謝分享~ 想請教如何可定時抓網頁資料及自動儲存下來用作分析(google sheet/excel/csv等儲存都可以), 例如想分析網站指定貨品價格走勢, 謝謝

  • @dinayogi
    @dinayogi 4 месяца назад

    超棒的謝謝🎉🎉🎉

  • @jasminchen6829
    @jasminchen6829 6 месяцев назад +9

    老師好,我用影片的方法用在全國法規資料庫最新消息,擴充判斷’下一頁‘按鈕一直判斷成‘最後一頁’,即便我按影片步驟教導‘下一頁’才是正確的按鈕,開始爬蟲時還是會變成去按‘最後一頁’導致爬蟲資料只有第一頁及最後一頁,想請問有建議的解決方法嗎?謝謝。

    • @777-o6l
      @777-o6l 4 месяца назад

      我也是遇到問題

  • @簡士凱-j6r
    @簡士凱-j6r 6 месяцев назад +1

    厲害~ 感謝分享

  • @maygi4918
    @maygi4918 6 месяцев назад

    非常感謝老師,太有幫助了!

  • @Invisible_troll
    @Invisible_troll 5 месяцев назад +2

    看了一下,基本上整合了简单的爬虫功能,但如果目标页面十分复杂,还是需要自己写代码

  • @peter-you
    @peter-you 6 месяцев назад +1

    這個好實用阿阿阿❤❤❤

  • @kafans
    @kafans 2 месяца назад +1

    谢谢您的分享 请问Firefox浏览器有类似的插件吗

  • @goodday5482
    @goodday5482 6 месяцев назад +1

    感謝大師!!! 前天看到影片,今天就用上了! 省下超多力氣🙏

  • @pplan
    @pplan 6 месяцев назад +2

    請問有沒有 一次搜尋多網站的爬蟲工具

  • @shengkai0209
    @shengkai0209 5 месяцев назад

    很棒的教學

  • @MikewasG
    @MikewasG 6 месяцев назад

    太優質了✨

  • @darenme
    @darenme 2 месяца назад

    大感謝,正好需要啊

  • @breezeana06
    @breezeana06 6 месяцев назад +1

    讚嘆 ! 正好用上 !

  • @jin88ism
    @jin88ism 3 месяца назад

    谢谢老师 ,聪明还会教

  • @samwu8070
    @samwu8070 6 месяцев назад

    實用的功能,馬上來試試看

  • @ZTHUANG
    @ZTHUANG 6 месяцев назад +1

    哇!這個工具很實用,感謝分享

  • @YY-hl7hl
    @YY-hl7hl 5 месяцев назад

    如果又有一個可以偽裝成chrome等瀏覽器的擴充插件出現 那是真的不用寫code也可以應付絕大多數的爬蟲了

  • @katev1212
    @katev1212 22 дня назад

    感謝分享~請問如果想要抓的網頁資料是在內頁中ZIP檔案裡的WORD檔的話,可行嗎?

  • @briantu8728
    @briantu8728 6 месяцев назад +3

    這個方法只有一個缺點: 太強了!

  • @Envy_Alvin
    @Envy_Alvin 6 месяцев назад +4

    直接用Excel Import Data From Web就可阿

  • @rex52036888
    @rex52036888 6 месяцев назад

    希望可以教學變成自動爬蟲的方式
    不再需要手動爬資料🙏

  • @stevenlo9915
    @stevenlo9915 Месяц назад

    如果單純想要抓網頁的文字與圖片但是有很多頁呢?不需要做成表格

  • @christinalai3485
    @christinalai3485 3 месяца назад

    好犀利

  • @Quet_Weilan
    @Quet_Weilan 6 месяцев назад +1

    老师有了解过影刀吗

  • @yichaohsieh
    @yichaohsieh 6 месяцев назад

    真心佩服

  • @hm.l8763
    @hm.l8763 6 месяцев назад

    太方便了🎉🎉🎉

  • @玄德-y5y
    @玄德-y5y 7 дней назад

    如果沒有按鈕 是要用一個一個點擊的怎辦?

  • @linfrank8417
    @linfrank8417 6 месяцев назад

    滿滿的敬配

  • @sugarban
    @sugarban 6 месяцев назад +4

    實際上就是搜出網頁中寫死的大區塊然後再對內容分類而已
    所以只要遇到有進階篩選功能的,就會因為商品區塊改成個別呈現,導致只能抓到一團寂寞

  • @jessiej8652
    @jessiej8652 6 месяцев назад

    天啊 好方便!

  • @pj94213
    @pj94213 6 месяцев назад

    感謝大神!!!

  • @DukehsuPh
    @DukehsuPh 6 месяцев назад +1

    谢谢papaya , 我想到要抓取的数据了

  • @doge7562
    @doge7562 5 месяцев назад

    如果我需要爬取的資料
    需要點擊資料才會像選單一樣向下拉開
    我該怎麼做
    例如原價屋的硬碟資訊

  • @amitaka
    @amitaka 6 месяцев назад

    為什麼我跪著看, 這太方便了

  • @yungshenchen258
    @yungshenchen258 6 месяцев назад +1

    請問大師,爛番茄網頁結構,如果要全部一次抓完所有影片資訊,但是找不到NEXT BUTTON,按下LOAD MORE功能鍵,就只停在現行網頁上,並沒有持續向下抓取資訊,應如何處理?

  • @丁鴻銘-o8f
    @丁鴻銘-o8f 3 месяца назад

    真神人也!

  • @妖仔在台灣
    @妖仔在台灣 2 месяца назад

    太強了

  • @dwarfking8585
    @dwarfking8585 2 месяца назад

    老師您應該拿師鐸獎

  • @Fores71au
    @Fores71au Месяц назад

    如果網站有cookie怎麽辦 Octoparse那邊要怎樣設定呢?

  • @bryantliu1355
    @bryantliu1355 6 месяцев назад

    真滴方便

  • @shangchen7370
    @shangchen7370 6 месяцев назад +1

    還好還沒開始花時間學爬蟲....❤

  • @Chase-Mainland
    @Chase-Mainland 6 месяцев назад

    請問有什麼軟體可以快速抓取pdf內容部分資料,重複動作,將大量抓取的資料轉換成excel😅

  • @chengchetao4503
    @chengchetao4503 6 месяцев назад

    跪著看完了

  • @rogerhsu8583
    @rogerhsu8583 6 месяцев назад

    跪著感謝

  • @ryanwutw
    @ryanwutw 5 месяцев назад

    請問PaPaya, 如果遇到的按鈕是 1, 2, 3, 4 ,5. 有方法解?

  • @yungshenchen258
    @yungshenchen258 6 месяцев назад +1

    Octoparse的試用只有14天?

  • @痕
    @痕 6 месяцев назад

    這集有料

  • @hkywscl
    @hkywscl 6 месяцев назад +2

    视频不错

  • @燦爛の煙花
    @燦爛の煙花 6 месяцев назад

    老師你好
    我想詢問用photoshop
    如何把黑色人物剪影→正常圖片
    例如:神奇寶的猜猜我是誰
    還原成原本的樣子
    請問有沒有相關教學?
    感謝老師!!
    原本我是用魔術棒選黑色隱藏的部分
    再用曝光度調亮
    再來就自己亂搞,雖然看得出輪廓
    但不是很自然。。
    請告訴我正常的步驟,
    謝謝

    • @papayaclass
      @papayaclass  6 месяцев назад +1

      嗨,如果沒有原始檔或原始圖層,要把一個非常暗的圖片還原成原來的樣子會有點困難喔,
      因為在調暗的過程中圖像會失去一些色彩資訊和細節。
      所以要做猜猜我是誰這種效果的話,保留一份原始影像還是最理想的。

  • @fanyang1972
    @fanyang1972 4 месяца назад

    如何解决Authentication?

  • @phonedr.1013
    @phonedr.1013 6 месяцев назад

    我太早出生了😢😢 謝謝老師 每一部都好棒

  • @doubimok
    @doubimok Месяц назад

    那如何要抓取圖片呢??😅

  • @ArtDeepFind
    @ArtDeepFind Месяц назад

    請問,假如我第一頁的網站想要選擇的目標只有2行,但是其他網站想要選擇的目標有5行,該怎麼做呢?

  • @aids92027
    @aids92027 6 месяцев назад

    謝謝老師 下跪中

  • @王弟弟-e4p
    @王弟弟-e4p 6 месяцев назад

    太猛惹吧!!!!!!!!!!!!!!

  • @tsaiyungchien1053
    @tsaiyungchien1053 6 месяцев назад

    請問如果要下載下面網頁所查詢到的csv檔案,如何變成每天自動爬文下載檔案

  • @BnLee
    @BnLee 6 месяцев назад

    我的膝蓋在親地板

  • @edyu7871
    @edyu7871 6 месяцев назад

    有辦法將此擴充套件再進行自動化嗎?

  • @jackwongbmw
    @jackwongbmw 6 месяцев назад +6

    但有些網頁用javascript 出的dynamic content應該不行吧

    • @gqqnbig
      @gqqnbig 6 месяцев назад

      這不是主要問題。第一個瀏覽器擴充工具和第二個工具都內建瀏覽器,可以執行javascript。反而python scrapy之類的編程方法一般不支持javascript。

    • @ccheyhey
      @ccheyhey 5 месяцев назад

      ​@@gqqnbig應該是說最基本的python 方法是不支援,但只要再加些lib就可以支援

  • @劉睿麟-d3z
    @劉睿麟-d3z 5 месяцев назад

    使用上我有一個問題,我想抓自己的會員資料,無法使用帳號密碼登入,自然無法抓內部資料,請問如何解決,謝謝。

  • @Mr.Dorameow
    @Mr.Dorameow 6 месяцев назад

    太狂拉

  • @yijunwang5703
    @yijunwang5703 6 месяцев назад

    Octoparse是做什么的呀

  • @strolltimes
    @strolltimes 4 месяца назад

    這個程式的爬蟲不知道會不會被擋,我之前自己寫的爬蟲去爬政府機關的活動資訊,好像連線太頻繁就被擋了,會有一小段時間不能再上

  • @Grass-c7r
    @Grass-c7r 6 месяцев назад

    神啊!!

  • @winnieshoney84
    @winnieshoney84 6 месяцев назад

    只能跪著看影片了

  • @WongStephen-zd5qs
    @WongStephen-zd5qs 6 месяцев назад

    這App已加入了Chrome, Edge, 但卻說不能用,何解?

  • @JIM-k4d6v
    @JIM-k4d6v 5 месяцев назад

    太神

  • @drccr
    @drccr 6 месяцев назад

    Octoparse要收費了。 有沒有可取代的免費工具。 謝謝老師

  • @shunruzhang4237
    @shunruzhang4237 6 месяцев назад

    能关联照片一起下载吗?