鍍金池/ 問答/網(wǎng)絡(luò)安全/ 多線程采集咨詢

多線程采集咨詢

現(xiàn)在很多網(wǎng)站如果發(fā)現(xiàn) 短時(shí)間大量請(qǐng)求會(huì)封你ip
你這個(gè)多線程是不是用了就會(huì)這樣的https://doc.querylist.cc/site...
如果有一個(gè)自動(dòng)換ip代理的插件是不是可以解決這個(gè)問題?

回答
編輯回答
夢(mèng)一場(chǎng)

爬蟲使用代理池是基本需求

2017年6月11日 06:28
編輯回答
愛是癌

目前還并沒有人貢獻(xiàn)自動(dòng)換IP插件,這種問題目前解決方法只能盡量降低線程數(shù),或者單線程

2017年8月1日 09:39