服务器怎么解决反爬和IP被封问题 如果网站封禁了本机爬虫的ip,该如何处理

文章摘要：服务器怎么解决反爬和IP被封问题 如果网站封禁了本机爬虫的ip,该如何处理

服务器解决反爬和IP被封的方法：1、减慢网站爬取速率，能减小目标网站的压力；2、用动态拨号vps服务器设置变换 […]

服务器解决反爬和IP被封的方法：1、减慢网站爬取速率，能减小目标网站的压力；2、用动态拨号vps服务器设置变换IP，能解决反爬和IP被封的问题，但会降低获取速度。

建站教程网归纳如下：

1、减慢爬取速率

那样目标网站的压力就会相对性减小，可是这么做的话，单位时间之内的爬取量就会相对的减少。

2、用动态拨号vps服务器设置变换IP

攻克反爬虫体制进行高频率抓取，这样就需要多个稳定的IP。普通的基于ADSL拨号的解决方案。通常，在抓取过程中遇到禁止访问，可以重新进行拨号，获取新的IP，从而可以继续抓取。但是这样在多网站多线程抓取的时候，如果某一个网站的抓取被禁止了，同时也危害到了其他网站的抓取，总体来说也会降低获取速度。