如題
求問這是怎麼偵測到的,怎麼破解......
謝謝大家
封鎖的方式非常多種。
我本身也可以做到偵測開vpn、proxy就不給進的處理。
只有cdn的我無法判斷。
記錄ip只是最後一招。
一般還可以記錄的東西很多。
如序號記錄、網卡記錄。
如果是需要開權限的,可以記錄的東西會更多。
你目前被封的那台。可以先設看看清理暫存資料跟cookie後。再開無痕進入試試。
請記得要一次性的移除後才開。
有可能是對方封鎖你的外部IP
你更換再多內部虛擬IP,
對外IP都相同的話就連不到~~~
有的會封你15分鐘~1天,永久封...應該不會
網管如果有再清理的話,
一個月半年之前的黑名單應該會刪掉吧?
(不是網管不負責任留言)
如果爬蟲可以爬到一半暫停的話,
換不同家網咖看看~XD
(禍害別人? XD)
你是不是遇到了 HTTP error 429 Too many requests 了?
不是,那個網站不給訪問就會顯示它在暫時維修中
不知道你用什麼做爬蟲的,selenium ? curl ? html agility pack ? ......
可以試試偽造user agent看看
我用python的bs4爬,不過我現在沒開程式,自己用瀏覽器也打不開了
求問這是怎麼偵測到的
「短時間」內「同一IP」「大量」HTTP request
怎麼破解......
大量 HTTP request 沒辦法改
同一 IP 麻煩改
最好改的就是「短時間」
把每次 HTTP request 的時隔加大一點(例:每隔 50-70 秒)
慢慢爬總有一天會爬完
總比現在被封來得好...
很多熱門VPN,特別是在VPN排行上靠前的VPN,比如ExpressVPN,因為用戶眾多,所以不管是換成那個國家的Server,IP都是可以被許多網站識別和封鎖的。解決的辦法可以考慮自己搭建VPN Server,這樣IP地址可能不會被Ban。