Re: [請益] 大家爬蟲都爬什麼好玩？

alihue02/04 21:00幹嘛寫 難道人家會為了你去申請這個 ip 列白名單嗎

knives02/04 21:04寫什麼，太閒

DarkIllusion02/04 21:35告知後直接進黑名單

mercurycgt6802/04 21:58小夫我要進來了

EPGo02/04 22:01怕的話也可以買 IP

vi00024602/04 23:04你可以反制他的反制啊 寫爬蟲就是這樣 見不得光

kurtsgm02/05 00:30XD 金勾追

Virness02/05 00:47XD 怪盜基德嗎 我晚上9點要進來囉

viper970902/05 00:53推三樓

pumapupa02/05 01:05可能就看一下robots.txt吧?

taipoo02/05 02:23定時間換ip就可以解決這個問題了

aidansky098902/05 06:55先爬500個代理ip之後隨便你玩

gs861378902/05 07:02爬蟲的樂趣不就是攻防嗎

spfy02/05 07:51現在還能看到請謝謝對不起的有禮鄉民真的少見

oncemore02/05 09:44寫了你直接被吉

devilkool02/05 09:46怪盜基德www

mychiux41302/05 10:02我通常request前都sleep一下，不要造成人家主機負擔

mychiux41302/05 10:02，當個友善的網路公民

yam27602/05 10:32從此在暗網的角落，流傳著現代怪盜基德的傳說……

liujh02/05 11:07不會在黑名單太久，防火牆記憶體有限

liujh02/05 11:11不要同時平行跑太多工作，對方都沒什麼感覺

liujh02/05 11:13最暴力的爬蟲是 Google Bot，你很難像他那麼兇狠

rahit02/05 13:00把爬的速度放慢到跟user差不多然後放著做別的事

Bujo02/05 13:02你直接請他給你database 帳密比較快

wahaha27902/05 13:15發個request 睡個五秒，然後你去睡一覺

ian9091102/05 14:34fb的我覺得也很兇...

Darkword198702/05 15:47太溫良恭儉讓了吧

andrew510602/05 16:41寫個random sleep阿，防止ban ip也有很多方法吧

jimmily02/05 17:16大哥你也太可愛了吧XD

accessdenied02/05 18:55目前爬蟲遇到無法克服的障礙就是captcha, 有人知道

accessdenied02/05 18:55有什麼工具嗎？

james85202/05 20:53回樓上 OCR

vi00024602/05 21:39captcha是大坑喔 要學openCV ML 看圖片難易度

OrzOGC02/05 21:48V3現在不用了不是?

aidansky098902/05 22:32現在不都是滑塊？還有驗證碼喔

accessdenied02/06 02:31ocr無用，我試過很多 ocr 方案，他們都只能對印刷字

accessdenied02/06 02:31體有辨識力，手寫字和扭曲的captcha無法辨識

art102/06 07:41看過有人寫程式產生資料集然後訓練一個 ocr model 來解決

TheOneisNEO02/06 10:45自幹的OCR應該也很難堪用吧

new12285102/06 12:34笑死 你有聽過小偷偷東西前還先告知屋主我要偷了哦？

new12285102/06 12:35被黑單掛個vpn再戰

chkea38002/06 20:53captcha隨便套個cnn model就可以了

LittleYueh02/06 22:59怪盜基德超好笑哈哈哈哈

sarsman02/07 06:09有禮貌爬蟲

b8504031202/07 15:29你應該有長鬍子

uncleben00602/08 19:38推有禮貌蟲蟲

pringles2702/15 23:13爬ptt股版即時資訊，並透過line來通知