一、背景介绍大家好，我是皮皮。对于不同的数据我们使用的抓取方式不一样,图片,视频,音频,文本,都有所不同,由于网站图片素材过多,所以今天我们使用多线程的方式采集某站4K高清壁纸。二、页面分析目标网站：http://www.bizhi88.com/3840x2160/如图所示，有278个页面,这里我们爬取前100页的壁纸图片，保存到本地；解析页面如图所示所哟

前言我知道在接口api项目中，频繁的调用接口获取数据，查询数据库是非常耗费资源的，于是就有了缓存技术，可以把一些不常更新，或者经常使用的数据，缓存起来，然后下次再请求时候，就直接从缓存中获取，不需要再去查询数据，这样可以提供程序性能，增加用户体验，也节省服务资源浪费开销，在springboot帮你我们做好了整合，有对应的场景启动器start，我们之间引入使用

最近在测试kafka性能的时候特别对kafka的producer端进行了一些扩展，本想着针对多个业务开发多个producer进行并行的生产数据，并通过统一的线程池进行管理，结果在用jconsole进行观察的时候，发现线程数一路飙升。本以为一个简单的发送端程序却花了不少精力。造成线程上涨的主要原因是有两个线程对象不断的被创建，并且暂时无法销毁。一个叫sen

介绍NPM是随同NodeJS一起安装的包管理工具，能解决NodeJS代码部署上的很多问题，常见的使用场景有以下几种：允许用户从NPM服务器下载别人编写的第三方包到本地使用。允许用户从NPM服务器下载并安装别人编写的命令行程序到本地使用。允许用户将自己编写的包或命令行程序上传到NPM服务器供别人使用。

全局traceId关于链路追踪，在微服务的趋势下，一次调用的日志信息分布在不同的机器上或目录下，当需要看一条链路调用所有的日志信息时，这是个比较困难的地方，我们虽然有ELK,Sentry等日志异常收集分析工具，但是如何把信息串起来也是一个关键的问题。我们一般的做法是在系统调用开始时生成一个traceId，并且它伴随着一

写在前面为什么要写这些呢？接触java已经有三年多了，感触颇多，比如从0到60，只要勤实践、勤思考，很快就可以入门，从60分到满分极致，则单单不是凭借工作年限或者什么就可以。曾经也有过一段迷茫时期，将javaee的常用框架用的再熟，遇到非正常问题时候就很难解决，此时靠百度靠谷歌的零碎知识，只会让知识体系更混乱，而且有种潜意识

春节假期响应号召原地过年，抽空看了看一些优秀的工具，选择了一两个进行了更深入的使用，其中一个很重要的就是draw.io画图工具，之前用的是网页版的，现在用的Macdesktop版本。顺便说一句，现在这个工具的网页版有了新名字，叫diagrams.net，但是桌面版用的还是老名字，目前好像没有中文名，团队起名字就是域名，也挺有意思。

随着开源软件被大量引用，线上运行的代码中超过80%的部分是开源代码。软件安全的重点已经从内部代码转移到所引用开源部分上。DevOps安全需要关注内部研发团队的自研代码以及外部第三方开源软件的安全，对于内部代码，所使用的依赖必须清楚，如果底层依赖有风险，还必须快速反向分析哪些其他软件受到同样的威胁；目前DevOps安全团队和持续交付团队往往独立运行，信息交

_马蜂窝技术原创内容，更多干货请订阅公众号：mfwtech_广告是互联网变现的重要手段之一。以马蜂窝旅游App为例，当用户打开我们的应用时，有可能会在首屏或是信息流、商品列表中看到推送的广告。如果刚好对广告内容感兴趣，用户就可能会点击广告了解更多信息，进而完成这条广告希望完成的后续操作，如下载广告推荐的App等。广告监测平台的任务就是

此文不同于官方文档给出的方案，之所以如此，基于以下考虑几点考虑：我们之所以拿源码进行增量开发，一般而言，不是为了整个工程，而是为了其中某个特定的模块，比如说Contacts，Luancher等；其次，官方方案有一个巨大的缺陷——优化后的模块打包成apk很有可能无法在其他系统上安装，因为它有系统权限，并且一直签rom的签名，而这个签名在其他系统上是拿不到的。