众所周知,做爬虫的时候,需要不停地切换ip。有以下几种方案:
1、网上爬免费的ip,这个方法行不通,因为这些ip很多有期限,几分钟就没有了,而且大部分不可用。
2、买一些第三方代理,例如阿布云。但是阿布云很多人用多了,ip也逐渐被污染,例如我们爬工商总局的数据,就很多ip不能用了。
3、买adsl代理服务器。某包买。
什么是adsl服务器?
通俗的来说,就是每次拨号,都会重新分配一个ip。适合用来做爬虫。
具体的实现:
写个脚本,定时去拨号就可以了。
众所周知,做爬虫的时候,需要不停地切换ip。有以下几种方案:
1、网上爬免费的ip,这个方法行不通,因为这些ip很多有期限,几分钟就没有了,而且大部分不可用。
2、买一些第三方代理,例如阿布云。但是阿布云很多人用多了,ip也逐渐被污染,例如我们爬工商总局的数据,就很多ip不能用了。
3、买adsl代理服务器。某包买。
什么是adsl服务器?
通俗的来说,就是每次拨号,都会重新分配一个ip。适合用来做爬虫。
具体的实现:
写个脚本,定时去拨号就可以了。