前言:呼叫端要知道「這個網址該用哪個爬蟲」嗎? 「呼叫端傳個網址進來,判斷一下網域是哪個站台,new 對應的爬蟲就好了吧?」 問題是:這個判斷邏輯只寫一次,很快...
前言:多支援一個來源站,就要多寫一份爬蟲嗎? 「反正每個網站長得不一樣,乾脆一個網站寫一支獨立的爬蟲程式,簡單暴力。」 這個想法短期最快,長期最痛。如果每個來源...
IT邦幫忙