设置代理

内容提要:采集网站过于频繁时,网站有可能会封IP,下面介绍解决的办法

当遇到IP限制的时候,可以准备一批有效的代理IP,然后按照浏览器设置代理中的代理格式设置。

一.代理设置

浏览器设置

选择启用,按照IP的代理类型选择格式,比如http代理,如果有用户名密码就将 http://user:pass@ip:port 中的user:pass 替换成相应的内容,如果没有用户密码就省略不填,写成如此格式 http://:@ip:port ,其余代理类型也是相同原理。

这里也可以选择变量,可以将IP地址存放在变量中,然后调用该变量。

二.使用场景

(1)IP代理地址存放在文本中

如果IP代理地址存放在文本中,可以使用文本读取,读取IP地址保存至list变量,然后循环遍历list变量保存至文本型变量,再调用该文本型变量用于设置浏览器代理,这里需要注意代理的格式需要处理成火车浏览器的格式哦。下面是使用到的步骤:

浏览器设置

 

(2)IP代理是API的形式,可以使用http请求,具体的操作可以参照视频:

视频地址 :