昨天攻略完 Dcard 之後,突然在散步的時候想到還有兩種方法還沒有嘗試,今天就來把這兩種方式補上,建議大家先看上一篇再來看這一篇的內容分享哦!
【Day 17】Manus 爬蟲,攻略 Dcard - PartI:https://ithelp.ithome.com.tw/articles/10419659
之前有分享一篇蝦皮訊息的讀取與回覆,就是使用這一種方法,昨天竟然把這招忘記了,想要看細節操作的朋友們可以點下方的連結,嘗試了一下發現可以成功抓取🎉🎉🎉
【Day 10】Manus 讀取並回覆蝦皮留言:https://ithelp.ithome.com.tw/articles/10416482

昨天有提到,基本上使用 Playwright 加上自己登入過後的 chrome profile 可以 95% 爬到所有想爬的資料,但缺點就是要在電腦上面執行(電腦需要開著),不過後來發現 Manus 提供一種叫做雲端瀏覽器的服務,可以在 Manus 裡面開啟一個有 UI 介面的瀏覽器(免費方案竟然也能用,超佛心!),你只要請他開啟雲端瀏覽器,接著你按接管,就可以跑到裡面操作

也可以在瀏覽器裡面登入自己的 FB 等個人帳號,就可以請他爬取裡面的文章,而不需要電腦一直開啟,但要注意要在同一個 Agent 底下的雲端瀏覽器,個人登入資訊才會保留哦!

以下依靠 Cookie 爬取到的 Dcard 貼文成果

還有使用 Manus 爬取臉書社團貼文的成果

順便幫這個粉絲專業分享一下,這個是 AI 界的大神,很常在自己的粉絲專業分享很有料的內容,大家可以去追蹤他哦,會非常有收穫!
Will 保哥的技術交流中心:https://www.facebook.com/will.fans?locale=zh_TW