各位好
因為GOOGLE不給直接爬 Google Search HTML,會被阻擋,
我試過Google Custom Search API,結果與chrome完全不同,
請問各位大大,您的作法是?
謝謝您!
補充 :
這是以前做法的結果
https://www.archi.net.tw/tw/yelpage/keywordlist-order.asp
補充 :
Google 搜尋可用的「&num=100」參數,在2025年9月移除,
https://www.google.com.tw/search?q=kwd&num=100,
也阻止爬蟲抓取結果,我的方式也被阻擋了;
想請教為大大,您們抓取前100名的資料的方法是?
謝謝!
已邀請的邦友 {{ invite_list.length }}/5
用RPA软件模拟人工点击爬取。
你要去找你們資料庫建立的部分
我看網站fetch 是沒有呼叫外部api
所以我推論 asp畫面渲染時就有資料
你們內部肯定有灌資料的地方
那邊有寫如何取得資料的部分
請去查到這部分 你應該就不用問我們了
您好
Google 搜尋可用的「&num=100」參數,在2025年9月移除,
https://www.google.com.tw/search?q=kwd&num=100,
也阻止爬蟲抓取結果,我的方式也被阻擋了;
想請教各位大大,您們抓取前100名的資料的方法是?
謝謝!
爬蟲進階這種事情還是要靠自己+AI
這個參數只是單頁多筆顯示被移除而已
重點是你要去查你們後端 爬蟲資料的部分 修復總比從頭開始簡單
而且看網站還有自己的關鍵字分類 還有排名定義
iThome鐵人賽
看影片追技術