本文章为原创文章，转载请注明，欢迎评论和改正。一，分析　　之前所用的直接通过HTML中的元素值来爬取一些网页上的数据，但是一些比较敏感的数据，很多正规网站都是通过json数据存储，这些数据通过HTML元素是爬取不到的，所以只能通过json数据的api接口来爬取数据。二，网站处理　　1，打开去哪儿网的网站https://train.qu

victoriametrics是一个时序数据库，可以用来作为prometheus的longterm远端存储特性支持promtheus查询api，同时实现了一个metricsql查询语言支持全局查询视图，好处多prometheus实例写数据到victoriametrics，然后提供一个统一的查询同时也提供

SpringBoot对常用的数据库支持外，对NoSQL数据库也进行了封装自动化。这一篇主要讲springboot与mongo多数据源相关的配置1、mongo的介绍MongoDB是一个高性能，开源，无模式的文档型数据库，是当前NoSql数据库中比较热门的一种。它在许多场景下可用于替代传统的关系型数据库或键/值存储方式,这里不再多做说明

一、Hadoop压缩简介1、hadoop的3个阶段（1）分布式文件系统HDFS（2）分布式编程框架MapReduce（3）yarn框架2、Hadoop数据压缩MR操作过程中进行大量数据传输。压缩技术能够有效的减少底层存储（HDFS）读写字

Cookie问题：HTTP协议是没有记忆功能的，一次请求结束后，相关数据会被销毁。如果第二次的请求需要使用相同的请求数据怎么办呢？难道是让用户再次请求书写吗?为了解决这个问题，引入了Cookie技术；Cookie技术其实就是浏览器端实现的数据临时存储技术，保存一些必要的数据，当访问某些网页需要这些数据时，浏览器自动将数据加到HTTP请求

01\.列举常见的关系型数据库和非关系型都有那些？1.关系型数据库通过外键关联来建立表与表之间的关系，常见的有：SQLite、Oracle、mysql2.非关系型数据库通常指数据以对象的形式存储在数据库中，而对象之间的关系通过每个对象自身的属性来决定常见的有：MongoDb、redis02\.MySQL常见数据库引擎

Redis 的读写都是在内存中，所以它的性能较高，但在内存中的数据会随着服务器的重启而丢失，为了保证数据不丢失，我们需要将内存中的数据存储到磁盘，以便Redis重启时能够从磁盘中恢复原有的数据，而整个过程就叫做Redis持久化。!image.png(https://oscimg.oschina.net/oscnet/232e657dae2

在数据库层面，各个数据库对序列的支持是不一样的。大多数数据库可以为表指定一个自增的字段，但这种自增字段却很不利于数据的迁移。类似Oracle的数据库有专门的序列对象，但这种方式太独特，也不利于在产品层面的多数据库适配。基于这样的考虑，FoxnicSQL单独实现了基于存储过程的序列。

本文目标是：了解查询的核心原理，对比SQL查询优化技巧在h2database中的落地实现。前提：为了贴近实际应用，本文CodeInsight基于BTree存储引擎。数据查询核心原理数据库实现查询的原理：遍历表/索引，判断是否满足where筛选条件，添加到结

云审计和大数据审计都是信息技术在审计领域应用的产物。云审计主要利用云计算技术的优势，实现审计数据的集中存储、处理和分析；而大数据审计则侧重于利用大数据技术的能力，对海量数据进行挖掘和分析，以发现潜在的风险和问题。虽然两者在某些方面有相似之处，但它们在数据结构、处理方式、技术应用等方面存在明显的区别。