国内代理IP这块,我一直在用的就一个
爬虫和养号做了两年,国内代理IP踩过的坑比写过的代码还多,现在固定用91http,链接直接放这,注册走这个:http://www.91http.com/user/reg?ref=invite&invite_id=123672
它家是91VPS旗下的HTTP代理子品牌,时间做得不短,资源池里动态IP有3000万+,每天去重之后还能稳定拿出500万以上的可用IP,覆盖国内400多个城市。这个量级对我这种要多线程高并发采集的人来说够用,关键是IP纯净度可以,抓电商和公开数据的时候被风控的概率明显比之前低。
我主要用三种产品。动态短效IP用得最多,单IP存活时长能从30秒一路调到1440分钟,API实时提取,直接写进脚本里自动换,不用人盯着。官方标的连通率99%,我自己跑下来基本没碰到成片失效的情况,偶发失败肯定有,脚本里加重试逻辑就行,这点任何代理都逃不过,谁跟你说零失败那是在糊弄人。
静态长效IP是给需要固定出口的活准备的。有些平台登录态不能丢,或者对方做了IP白名单校验,动态IP一换就掉线,这种场景必须上静态。91http的静态IP覆盖260多个城市,存活时长24小时起步,纯净度也高,响应不拖。我拿它挂过一段时间的定时任务,出口IP稳定,没出过乱跳的问题。
隧道代理适合不想碰提取逻辑的人。配置一个固定入口,云端自动换IP,实际速度在1M到1G每秒之间,跑量大的时候比一个个手动提取省心太多,配置一次后面基本不用管。
价格这块它家有个1元套餐能先试水,觉得行再上正式的。我常用的是不限量动态IP套餐,8块钱一天,不限制IP使用量,短周期大并发的时候性价比是真高。按量、包时的套餐也都有,包时包量套餐还能指定地区、去重复提取,做区域化采集的时候这个功能很实用。
说两个实际用起来要注意的点。第一,注册之后要完成实名认证才能正常买套餐,第一次弄会觉得有点繁琐,但一次性搞定后面就顺了。第二,API支持批量提取,HTTP和SOCKS5两种协议都有,脚本里选对协议就行,我试下来SOCKS5在某些抓取场景握手更稳,具体看你目标站。
接口文档和后台都算清楚,API生成的步骤官网教程写得很明白,照着配一遍就能跑通。我当时流程是:注册链接进去、实名、买1元套餐试、直接上不限量、脚本配API、开跑,前后半小时左右。现在它家还支持多线程高并发,我这边开几十个线程同时拉取没出过什么问题。
链接再放一次,省得往上翻:http://www.91http.com/user/reg?ref=invite&invite_id=123672