温馨提醒本项目使用MITLicense协议，仅适用于学习交流，并且不提供无偿的、不提供无偿的、不提供无偿的维护修改服务（但可提issue）。若直接将本项目用于商用，因本项目带来的所有后果由使用者自行承担。如需商用升级版，请联系我微信，微信二维码在本博客页面右上角在此奉劝某些人，请尊重作者的劳动成果，做人积点德吧！最近发现有人拿我的源码进行二次分

爬虫什么是爬虫使用编程语言所编写的一个用于爬取web或app数据的应用程序怎么爬取数据1.找到要爬取的目标网站、发起请求2.分析URL是如何变化的和提取有用的URL3.提取有用的数据爬虫数据能随便爬取吗？遵守robots.txt协议爬虫的分类通用网络爬虫百度，Google等搜索引擎，从一些初识的URL扩展到整个网站，主要为门户站点搜索引擎和大型网站服务采

我们在解决一个问题的时候应该先去了解这个问题是如何产生的，为什么会有跨域的存在呢？其实，最终的罪魁祸首都是浏览器的同源策略，浏览器的同源策略限制我们只能在相同的协议、IP地址、端口号相同，如果有任何一个不通，都不能相互的获取数据。并且，http和https之间也存在跨域，因为https一般采用的是443端口，http采用的是80端口或者其他。同源策略是一种约

作为网易数帆开源的高性能、高可用、高可靠的新一代分布式存储系统，Curve对于多副本数据同步、负载均衡、容灾恢复方面都有较高的要求。网易数帆存储团队选用Raft算法作为Curve底层一致性协议，并基于Raft的特性，实现了异常情况下的数据迁移和自动恢复。本文首先简要介绍一下Raft算法的一些基本概念和术语，再详细介绍其在Curve中的实践。Raft一致性

以太网链路聚合以太网链路聚合一、以太网的链路聚合是Ethtrunk多链路汇聚，将多条物理链路变为一条Etrunk的逻辑链路，从而实现增加链路带宽的目的。链路聚合分为手工模式和LACP模式。1.手工模式手工模式下，EthTrunk的建立、成员接口的加入由手工配置，没有链路聚合控制协议LACP的参与。当需要在两个直连设备间提供一个较大的链路带宽而设备又不支

前言本文将演示一个iOS客户端程序，通过UDP协议与两个典型的NIO框架服务端，实现跨平台双向通信的完整Demo。服务端将分别用MINA2和Netty4进行实现，而通信时服务端你只需选其一就行了。同时用MINA2和Netty4分别实现服务端的目的，是因为很多人都在纠结到底是用MINA还是Netty来实现高并发的Java网络通信服务端

这里的“日志”和我们日常生活中的理解大有不同。什么是日志？简单的说，日志就是计算机系统、设备、软件等在某种情况下记录的信息。具体内容取决于日志的来源。例如：unix操作系统会记录用户登录和注销等信息的日志防火墙会记录访问控制协议acl通过和拒绝等消息的日志有些系统在用户登录时或者在系统本身认为会发生一些故障时发出带有告警信息的日志有些产品会在本身存储不足时发

内核中的连接调度算法IPVS在内核中的负载均衡调度是以连接为粒度的。在HTTP协议（非持久中），每个对象从WEB服务器上获取都需要建立一个TCP连接，同一用户的不同请求会被调度到不同服务器上，所以这种细粒度的调度在一定程度上可以避免单个用户访问的突发性引起服务器间的负载不平衡。在内核中的连接调度算法上，IPVS已实现了以下八种调

柿饼派上市已经有一个多月了，在这段时间里，社区小伙伴们做了很多极具创意的小DEMO：有做网络收音机播放网络音频的；有利用MQTT协议做医疗冷柜数据采集显示并上传给服务器远端监控的；甚至还有小伙伴给自己小孩儿开发吃豆子游戏的。看到大家能把之前很复杂的应用用柿饼派简单实现，我们真的很开心。为了回馈社区，618年中大促期间“6.12—6.1

现实工作中经常可以听到这样的说法：框架的升级带来协议性能的提升、编程模式的变革带来业务的飞跃......姑且不论这些表述是否有问题，实际上如果系统地看待事物整体，可能会有不一样的发现。以LINUX为例，尽管其内核大获成功，但如果不是遵循POSIX、并成为一个开源、精简的UNIX实现，很难想象其最终会有何种发展。因此，对事物进行全局和一定深入的探究有时会有更