IP模拟器
很多人想使用免费的代理IP。 毕竟不花钱，但是免费代理IP的费率大家应该都知道吧。 所以，即使你不想花钱，现实也不允许。 对于需要使用爬虫爬取数据的人来说，时间比购买代理IP要贵很多。 那么谁在使用免费代理IP？
一般来说，营销推广需要少量IP的人，以及刚开始爬行的人，那么如何获得免费代理IP呢？ 获取免费代理IP后，爬虫如何设置代理IP？
如何获得免费代理IP
1.找几个提供免费IP代理的网站，获取IP数据源。
2.验证对应的IP代理访问出口IP是否与机器的出口IP一致，得到不一致的IP代理列表。
3.根据您要访问的网站，过滤掉无效的代理IP。 因为不是所有的代理都可以使用，可能的原因是我们的网络连接不上这个代理，或者这个代理连接不上我们的目标网址，所以我们踢掉了无效的代理。
4.根据自己的实验目的验证IP代理的响应速度，排序，选择最好的。
爬虫设置代理IP的方法
1.使用Python3，先导入urllib的请求，然后调用ProxyHandler，可以接收代理IP的参数。
动态 IP 模拟器
2.将IP地址以字典的形式放入其中，设置代理类型、IP地址和端口。 例如：
动态 IP 模拟器
3. 使用 build_opener() 构建一个 opener 对象。
动态IP模拟器
4.调用构造的opener对象中的open方法发出请求。 其实urlopen类似于使用内部定义的opener.open()，相当于我们自己重写。
动态IP模拟器
5.如果我们使用install_opener()，我们可以将之前自定义的opener设置为全局。
动态 IP 模拟器
]
6。 设置为global后，使用urlopen发送请求，这样发送请求的IP地址就是代理IP，而不是本机的IP地址。
动态IP模拟器
注意如果在使用代理时遇到错误提示目标电脑主动拒绝无法连接，说明可能是代理IP无效或端口 号码错了。 替换有效的代理IP。
以上就是爬虫设置代理IP的方法。 图文介绍比较清楚，设置也不难。 对于使用Python爬虫的人来说，这可以说是一项基础工作，但也是必要的。 由于爬虫采集数据，通常会遇到IP限制的问题，在保证速度的情况下，使用代理IP是目前最有效的方法。
