经常有小伙伴需要将互联网上的数据保存的本地，而又不想自己一篇一篇的复制，我们第一个想到的就是爬虫，爬虫可以说是组成了我们精彩的互联网世界。网络搜索引擎和其他一些网站使用网络爬虫或蜘蛛软件来更新他们的网络内容或其他网站的网络内容索引。网络爬虫复制页面以供搜索引擎处理，搜索引擎对下载的页面进行索引，以便用户可以更有效地搜索。这都是爬虫数据采集的功劳。这篇文章我总

mysql知识2存储引擎1.InnoDB和MYISAM存储引擎的区别？索引1.什么是索引？你知道Mysql有哪些索引？分别介绍一下2.索引的优缺点？那些情况适合建索引那些情况不适合建索引？事务1.什么是事务，它有哪些特性？说一说事务的隔离级别，分别解决了什么问题？

今天用Ajax异步添加评论，加载Freemarker模板引擎，生成模板模块1.新建Freemarker模板<liid"${comment.oId}"<div<divclass"avatartooltippedtooltippedn"ariala

Spark是一个大规模的数据处理引擎，集成了SQL查询分析，该引擎是用Scala写的，所以一些高级的实现了的算法都是用它进行描述。已知支持的第三方语言有：C【https://github.com/Microsoft/Mobius，Java,Scala,Python,R【http://spark.apache.org】一般性理解：Spark

1、类的Diagram!(https://oscimg.oschina.net/oscnet/896a4590f74827afad5a6bc6865dfd4275f.png) 2、代码实现2.1、Node类，每个Node代表集群里面的一个节点或者具体说是某一台物理机器；packageconsistencyhash

TiDB由三部分组成：tidb（SQL解析引擎）、tikv（存储引擎）、pd（placementdriver，提供时间戳服务和系统拓扑维护）。其中tidb和pd用go语言开发，tikv用rust语言开发。 官方要求TiDB在CentOS7中使用，但有时确实需要在CentOS6及以下部署，此时可根据如下方式编译：1\.配置编译环境为了提

数据的增删改查：增：insertinto表名values();删：物理删除:deletefrom表名where条件;逻辑删除;改：update表名set列1值1，列2值2...where条件;查：全查:select\from数据表名;指定条件查:select\fr

Nginx防爬虫优化Robots协议（也称为爬虫协议，机器人协议等）的全称是“网络爬虫排除标准”(RobotsExclusionProtocol),网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。我理解的是robots.txt是通过代码控制搜索引擎蜘蛛索引的一个手段，以便减轻网站服务器的带宽使用率，从

关系数据库依赖于主键，它是数据库物理模式的基石。主键在物理层面上只有两个用途：惟一地标识一行。作为一个可以被外键有效引用的对象。索引是一种特殊的文件(InnoDB数据表上的索引是表空间的一个组成部分)，它们包含着对数据表里所有记录的引用指针。下面是主键和索引的一些区别与联系。1\.主键一定是唯一性索引，唯一性索引并不一定就是主

鸿蒙开发能力HarmonyOSSDK应用服务鸿蒙游戏类应用（游戏一、前言LayaAir引擎是国内最强大的全平台引擎之一，当年H5小游戏火的时候，腾讯入股了腊鸭。我还在游戏公司的时候，17年曾经开发使用腊鸭的H5小游戏，很怀念当年和腊鸭同事一起解决问题的时光