“黑名单”会告诉代理工具，黑名单（国外）里面的网站要使用代理；“白名单”会告诉代理工具，白名单（大陆网站）里面的网站直接连接，其余使用代理。黑名单PAC!(https://oscimg.oschina.net/oscnet/b4958bbb544e4103998484b934018f4fa4f.png)!(https://i

IP用户画像系统的研究内容，包含采集IP用户的网络行为数据、对IP知识库进行特征提取等。那么我们如何形成用户画像？如图1所示，以在线广告领域的应用为例，介绍IP用户画像的形成流程，一共分为四步。!image.png(https://oscimg.oschina.net/oscnet/up1b0a82a7ce8647ce500b822e4bc8731

前言　　在GitHub上维护了一个代理池(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fgithub.com%2Fjhao104%2Fproxy_pool)的项目，代理来源是抓取一些免费的代理发布网站。上午有个小哥告诉我说有个代理抓取接口不能用了，返回状态521。抱着帮人解决

在之前的博文《simpleRpc解析客户端(https://my.oschina.net/u/1474131/blog/1834165)》中，提到了客户端通过JDK动态代理获取Service的代理类，然后通过代理类去执行Service中定义的方法。在动态代理类创建的过程中，使用的是InvocationHandler的匿名类。一开始，我只是简单的从代

public static String getIpAddr(HttpServletRequest request) {        String ip  request.getHeader("xforwardedfor");        if(ip  null || ip.length()  0 || "unk

设计蜂巢IP地址查询接口：http://www.hujuntao.com/api/ip/ip.php腾讯IP地址查询接口：http://fw.qq.com/ipaddress新浪IP地址查询接口：http://int.dpool.sina.com.cn/iplookup/iplookup.php?formatjs搜狐I

首先获取IP////获得本地真实IPfunctionget_onlineip(){$ip_json@file_get_contents("http://ip.taobao.com/service/getIpInfo.php?ipmyip");$ip_arrjson_decode(stripsl

Nginx是一个高性能的HTTP和反向代理服务器，也是一个IMAP/POP3/SMTP服务器。反向代理方式是指以代理服务器来接受internet上的连接请求，然后将请求转发给内部网络上的服务器，并将从服务器上得到的结果返回给internet上请求连接的客户端，此时代理服务器对外就表现为一个反向代理服务器。比如我

在互联网上进行自动数据采集已是互联网从业者的常规操作，爬虫程序想要长期稳定地进行数据采集，都会使用到爬虫代理来避免目标网站的IP访问限制。在数据采集过程中难免会遇到各种各样的问题，若想要想要快速分析数据采集过程中的问题，我们该怎么做呢？其实可以通过HTTP

1.IP地址会有变更，程序配置IP地址，所有涉及到此IP的地方都需要改变，对运维和研发都不友好2.IP不容易被记住引入域名来替换IP，这样业务使用唯一标识域名，域名可以通过DNS服务器解析成IP供业务三层通信使用。通过域名解耦了业务和IP，如果域名对应的IP有变动，修改域名解析即可，不用业务做调整。