在网络工作中,有很多地方需要使用HTTP代理,比如效果补充、数据抓取工具等。没有HTTP代理的支持,我们的工作很难继续下去,那么我们从哪里得到HTTP代理呢。
1. 收集闲置的代理IP:互联网上有很多免费的代理IP,不需要钱。虽然效率不高,但对于一些预算较低的工人来说,牺牲时间节约成本还是可以接受的。如何收集大量的免费代理IP。手动复制和粘贴肯定不行,效率太低了。有两种方法:一种是通过编写代码来抓取免费的代理IP,另一种是利用工具来吸收免费的代理IP。
2. ADSL拨号:ADSL拨号也叫VPS拨号。拨号后可以更改IP地址,相对比较稳定。你可以自己控制拨号时间,这比免费代理IP好得多。也可以编写软件或代码来自动控制拨号工作,但对于一些工作量较大的任务来说,有点繁琐,效率也不高。
3.第三方工具:互联网上有很多集成的工具,其中有很多代理IP,可以一键切换IP。虽然效率比较低,用户也比较多,速度也比较快,但还是勉强能胜任一些手工操作或者单线程挂起的业务。对于一些多线程任务,没有办法支持它们,比如爬虫任务。