在进行抓包测试的时候，发现了很多类型的数据包，除了常见的三次握手外，还有一些PSH，FIN类型的类型。借此机会，常见数据包的类型给大家科普一下。SYN：同步标志同步序列编号(SynchronizeSequenceNumbers)栏有效。该标志仅在三次握手建立TCP连接时有效。它提示TCP连接的服务端检查序列编号，该序列编号为TCP连接初始端(一般是客户端

MQ引言什么是MQMQ：messageQueue翻译为消息队列，通过典型的生产者和消费者模型不断向消息队列中生产消息，消费者不断从队列中获取消息。因为消息的生产和消费都是一部的，而且只关心消息的发送和接收，没有业务逻辑的侵入，轻松的实现了系统之间的解耦。别名是消息中间件，通过利用高效的消息传递机制进行与平台无关的数据交流，并基于数据通信来进行分布式系

前言：大家都知道redis单台的默认内存大小一般是10M.如果现在需要我们将1G的数据保存到内存中。这该如何做到呢？比如我们就用单台redis，但是一味的扩大单台redis内存则直接影响执行的效率，会有一种得不偿失的感觉。于是呢，我们就得采用分片策略实现数据保存，通过多台redis共同为用户提供内存得支持，实现内存扩容，提高执行效率！！

HDFS设计前提与目标1.硬件错误是常态而不是异常。HDFS被设计为运行在普通硬件上，所以硬件故障时正常的，HDFS可能由成百上千的服务器节点构成，每个服务器节点上都存储着文件系统的部分数据，而HDFS的每个组件随时都有可能出现故障。因此，错误检测并快速自动恢复是HDFS的最核心的设计目标。2.流式数据访问。运行在HDFS上的应用主要是

在日常项目的开发中，我们经常会使用配置文件来保存项目的基本元数据，配置文件的类型有很多，如：JSON、xml、yaml、甚至可能是个纯文本格式的文件。不管是什么类型的配置数据，在某些场景下，我们可会有热更新当前配置文件内容的需求，比如：使用Go运行的一个常驻进程，运行了一个WebServer服务进程。此时，如果配置文件发生变化，我们

应用中需要实现一个功能：需要将数据上传到远程存储服务，同时在返回处理成功情况下做其他操作。这个功能不复杂，分为两个步骤：第一步调用远程的Rest服务上传数据后对返回的结果进行处理；第二步拿到第一步结果或者捕捉异常，如果出现错误或异常实现重试上传逻辑，否则继续接下来的功能业务操作。常规解决方案trycatchredo简单重试

语法join用于根据两个或多个表中的列之间的关系，从这些表中查询数据。Join和Key有时为了得到完整的结果，我们需要从两个或更多的表中获取结果。我们就需要执行join。数据库中的表可通过键将彼此联系起来。主键（PrimaryKey）是一个列，在这个列中的每一行的值都是唯一的。在表中，每个主键的值都是唯一的。这

SQL语句需要先编译然后执行，而存储过程（StoredProcedure）是一组为了完成特定功能的SQL语句集，经编译后存储在数据库中，用户通过指定存储过程的名字并给定参数（如果该存储过程带有参数）来调用执行它。存储过程是可编程的函数，在数据库中创建并保存，可以由SQL语句和控制结构组成。当想要在不同的应用程序或平台上执行相同的函数，或者封装特定功能时

Redis分区分区是分割数据到多个Redis实例的处理过程，因此每个实例只保存key的一个子集。分区的优势通过利用多台计算机内存的和值，允许我们构造更大的数据库。通过多核和多台计算机，允许我们扩展计算能力；通过多台计算机和网络适配器，允许我们扩展网络带宽。分区的不足redis的一些特性在分区方面表现的不是很好：

大家都知道亚马逊是全球最大的购物平台很多商品信息、用户评价等等都是最丰富的。但是对于爬虫来说，亚马逊的反爬机制应该也是数一数二的，想要获取亚马逊数据的人很多，但是真的能成功的确是少数，所以今天小编就手把手带大家，越过亚马逊的各种反爬机制爬取你想要的商品、评论等等有用信息。这里我们可以通过以下一些步骤去实现亚马逊数据的获取。一、使用requests的get请求