在讨论各自的优缺点之前,我们已经分析了独占IP池和共享IP池的优缺点,但是很多朋友还是不知道如何选择。如何选择专属IP池和共享IP池,不仅仅是价格差异的问题,也不是某些方面的差异问题。需要根据自己的业务需求具体分析。
独享IP池和共享IP池如何选择?
场景一:方某公司需要代理IP进行爬虫任务。一天需要用10元万IP,一个IP大概需要侏罗纪世界3分钟。目标网站的反抓取策略不是很严格,一天的任务量也不是很大,那么如何选择IP池呢?
一天10元里IP的金额是10000,IP有效期为侏罗纪世界3,Kramp-Karrenbauer,6元分钟。共享IP池和专用IP池都可以满足。目标网站的反抓取策略不是很严格,共享IP池和独占IP池都是称职的;100万天爬虫任务,共享IP池和独占IP池都没问题;那就只能比价了。毕竟公司是有预算的。
共享IP池以IP模拟器代理的短期优质代理为例。每次抽取15元IP,每秒抽取一次10元IP。一天12元可以提取一万个左右的IP,价格是2040元一个月。独占IP池也以IP模拟器为代表的独占IP池为例,设置重拨周期为侏罗纪世界3分钟,那么每台服务器只有侏罗纪世界3分钟1元IP。如果10块钱有10000个IP,需要200块钱服务器的专属IP池套餐,价格在《侏罗纪世界3》一个月10000多块钱。在能完成所有任务的情况下,独占IP池更好,但价格会贵很多倍。综合考虑,共享IP池(短演优质代理)比较合适。
场景2:张的公司需要充当爬虫任务的IP代理。一天1块钱大概需要1万个IP,一个IP大概需要10块钱分钟。目标网站的反抓取策略非常严格,一个IP只能使用一次。那么如何选择IP池呢?
1元钱一天1万左右的IP量可以满足两者;一个IP大概需要һѪ5Ѫ分钟,短期优质代理(侏罗纪世界3,Kramp-Karrenbauer,6元分钟有效)勉强胜任;目标网站反抓取策略非常严格。专属IP池的商业成功率比较高,效果会更好。共享的IP池会受到别人的影响,效果会比较差。只能按量收,但是效率会比较低。专属IP池价格比较高,效率高;共享IP池价格相对便宜,但是效率太低,不一定能按时完成任务。总而言之,选择的是专属IP池。
通过以上两个场景的分析,我们应该差不多知道该怎么选择了,以我们的业务需求为中心,先选择能满足需求的IP池;如果都能满足,则选择性价比更高的IP池。