1、什么是API代理
API就是url链接,用户的程序需要支持API的读取,定期从url中获取代理IP的相关信息,其文本格式如下:
该格式是最常见的文本方式,通过网页请求获取代理信息,通过回车换行的方式,将代理信息按照IP:PORT的方式进行读取和使用。大部分的爬虫软件、程序都支持直接读取。
2、协议不匹配
要注意区分爬虫软件、程序与代理IP的协议是否相同,一般分成两种协议HTTP和SOCKS5,如果协议错误会导致代理使用失败。如果爬虫软件、程序是购买的,需要提前与作者确认协议要求,购买代理IP的时候向厂家要求进行测试。
3、IP白名单错误
为了保证代理IP的质量和带宽,优质代理厂家都会要求对代理IP进行IP白名单绑定,避免代理IP被盗用、扫描,因此必须确保提取和使用代理的服务器,其IP白名单都添加到后台,限制提取和使用代理IP的机器和线路,这种情况下,对于提取和使用需要分开部署的情况,可以要求代理厂家增加IP白名单数量解决。同时由于移动、手机热点、铁通、鹏博士、长宽是互联网多出口动态分配特性,导致出口IP随机变化,也会出现代理提取失败或访问失败,需要具备电信、联通、各类云服务器或固定IP等网络。