爬虫-IP屏蔽2 No Attempt


一个被大规模爬取的网站,往往会出现IP误伤的情况。你使用的IP,如果之前被别人使用过,也会被封禁。

所以反爬策略继续升级: 每个IP,包括别人用过的,只能访问一次,之后就会被封禁。

悄悄地告诉你,为了增加难度,我们把很多代理池的IP录入进去了~

这里有一个网站,分了1000页,求所有数字的和。