写之前稍微说一下我对爬与反爬关系的理解一、什么是爬虫   爬虫英文是splider，也就是蜘蛛的意思，web网络爬虫系统的功能是下载网页数据，进行所需数据的采集。主体也就是根据开始的超链接，下载解析目标页面，这时有两件事，一是把相关超链接继续往容器内添加，二是解析页面目标数据，不断循环，直到没有url解析为止。举个栗子：我现在要爬取苏宁手机价

正文我们今天将说明以下14种模式：1．滑动窗口2．二指针或迭代器3．快速和慢速指针或迭代器4．合并区间5．循环排序6．原地反转链表7．树的宽度优先搜索（TreeBFS）8．树的深度优先搜索（TreeDFS）9．TwoHeaps10．子集11．经过修改的二叉搜索12．前K个元素13．K路合并14．拓扑排序我们开始吧！1．滑动窗口滑动窗口模式

列表的局限前面我们说通过队列的rpush和lpop可以实现消息队列（队尾进队头出），但是消费者需要不停地调用lpop查看List中是否有等待处理的消息（比如写一个while循环）。为了减少通信的消耗，可以sleep()一段时间再消费，但是会有两个问题：1、如果生产者生产消息的速度远大于消费者消费消息的速度，List会占用大量的内存。2、

1importpymongopipinstallpymongo安装python操作mongodb的模块2myclientpymongo.MongoClient(host'127.0.0.1',port27017)指定主机和端口号创建客户端34dblistmyclient

异步的底层原理：单线程事件队列。js的代码执行时单线程的，所谓单线程：就是js代码时从上到下按顺序依次执行的，一次只能做一件事情。事件队列可以看作一个容器，这个容器存储着js的回调函数，只有js代码执行结束后，才会去事件队列中调用这些回调函数。例：1//以下的代码先执行for循环，再输出sum值，然后输出正常代码执行，最后

Mitm配置二次代理主要是最近要抓取一些国外的app数据，配合python,所以需要代理mitmproxy的官方文档usage:mitmproxyoptionsoptionalarguments:h,helpshowthishelpmessagean

翻译自 PythonWebServerGatewayInterfacev1.0 PEP333PythonWebServerGatewayInterfacev1.0(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fwww.python.org%2F

一直在用JDK8，却从未用过Stream，为了对数组或集合进行一些排序、过滤或数据处理，只会写for循环或者foreach，这就是我曾经的一个写照。刚开始写写是打基础，但写的多了，各种乏味，非过来人不能感同身受。今天，我就要分享一篇如何解决上述问题的新方法StreamAPI。但学习Stream之前却不得不学一下Lambda表达式。说实话，网上介

一、如何判断对象时候需要回收1.引用计数法        给对象添加一个引用计数器，每当有一个地方引用它，计数器加1；引用失效时，计数器减1。计数器为0的对象就表示不可用。      优点：效率高，实现简单。      缺点：对象间如果存在循环引用的情况，就会导致计数器不可能为0，计数器无法通知GC进行回收。2.可达性分析算法

Python中什么是配置文件，配置文件如何使用，有哪些支持的配置文件等内容，话不多说，让我们一起看看吧~