首页>热点 >
对于越来越被应用的ip代理 咱们到底该怎么选? 2021-04-14 15:07:10  来源:知乎

需求高并发、支持多终端、可用IP数量。

背景:国内某企业爬虫工程师一枚,每天都在和爬虫相爱相杀,本回答只介绍自己用过的代理IP提供商,我的关键词:

IP可用率

写在前面的科普知识:很多人把作为购买第一参考因素,其实市面上的的IP资源基本都是租用代理拨号服务器,IP可用率普遍都能达到90%以上,因此谁家的IP可用率都差不多(老铁们,我说的可不是免费的万人骑IP)。而我们真正该关心的应该是,比如:

不同的两家代理IP提供商,都使用一万个IP,第一家抓取了5000条数据,第二家抓取了1000条数据。为什么会这样呢?

得出结论:IP可用率≠业务成功率

因为第二家用户太多了,导致业务冲突。比如我抓取微博的数据,第二家有10个抓取微博的用户,那我还怎么能抓取到,都被风控给拦截了。而第一家没有抓取微博的用户,抓取的成功率是不一样的。

作者:冴之木七星

链接:https://www.zhihu.com/question/55807309/answer/398044805

来源:知乎

著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

关键词: ip代理

相关阅读:
热点
图片 图片