前言这次咱们来玩一个在Python中很牛叉的爬虫框架——Scrapy。scrapy介绍标准介绍Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架，非常出名，非常强悍。所谓的框架就是一个已经被集成了各种功能（高性能异步下载，队列，分布式，解析，持久化等）的具有很强通用性的项目模板。对于框架的学习，重点是要学习其框架的特性、各个功能的

1关于接口协作平台的畅想软件界发展至今，API（接口）的重要性日益凸显——不同的端，不同的模块都在通过API交互，不同角色的成员也都在围绕着接口展开工作。在这个前提下，一款集文档、接口调试、Mock、接口自动化测试一体的接口协作平台变得尤为必须。市面上优秀的接口调试工具如Postman、JMeter如雨后春笋般涌现，各大厂也在自研接口协作平台。那么问题来了

项目背景，之前在上家东家接触到golang，自学到项目上线，也是摸着石头过河，中间也遇到了一些小bug（生产环境出现内存泄露问题，导致业务占用内存，居高不下，实际是因为项目的service层部分应用没有应用到redis或数据库，但是也进行了实例化，最后没有释放资源导致，排查方法也是比较笨，就是一些流程在本地跑，看哪些环节导致内存居高不下，最后追查到的结果），

hive是基于Hadoop的一个数据仓库工具，用来进行数据的ETL，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能。HiveSQL是一种类SQL语言，与关系型数据库所支持的SQL语法存在微小的差异。本文对比MySQL和Hive所支持的SQL语法，发现相同的SQL语句在

本节的目的是逐步描述ActivitiCore和ActivitiCloud发行版需要涵盖的场景。这些测试是自动化的，以确保在未来的版本中我们不会引入可能破坏这些场景的情景。本文档被分成不同的部分，重点讨论本地和分布式环境执行的不同方面。这意味着测试应该涵盖执行和状态如何保存在执行过程中涉及的每个不同服务中。这些场景还需要从消费者的角度定义发送的数据

 Kafka是一种高吞吐量的分布式发布订阅消息系统，有如下特性：通过O(1)的磁盘数据结构提供消息的持久化，这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能。高吞吐量：即使是非常普通的硬件Kafka也可以支持每秒数百万的消息。支持通过Kafka服务器和消费机集群来分区消息。支持Hadoop并行数据加载。Springboot的基本搭建和配置我

Docker是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的镜像中，然后发布到任何流行的Linux或Windows机器上，也可以实现虚拟化。容器是完全使用沙箱机制，相互之间不会有任何接口。这次首先说一下docker的三个重要内容：仓库：注册服务器是一个存放仓库的地方，在里面可以存放多个仓库。每个仓库集中存放同

私有化部署，支持多个终端，还有功能点播，直播，题库，考试等，有前后台源码，开发文档，数据字典，源码可二次开发。用来搭建成人技能学习系统挺不错的！1、点播：在线点播视频，可上传图文资料，习题，课件等2、直播：对接七牛云端口，弹性带宽，直播可转存为点播课程3、题库：可批量管理上传的题库，随时随地刷题4、考试：多场景考试设置，高并发、强制交卷、考试防作弊、成绩导

有前后台源码，开发文档，数据字典，源码可二次开发。私有化部署，可局域网部署，内部使用，支持多个终端，功能有点播，直播，考试等，可以搭建成人高考学习平台。1、点播视频：在线点播视频，可上传图文资料，习题，课件等2、刷题题库：可批量管理上传的题库，随时随地刷题3、直播中心：对接七牛云端口，弹性带宽，直播可转存为点播课程4、考试中心：多场景考试设置，高并发、强制

​随着低代码开发逐步进入到人们的视野，企业对低代码的认识也在不断发生着变化，尤其对于企业数字化转型来说，低代码开发将降本增效做到了极致。然而，传统的开发模式是当下企业的主流应用，从传统模式进行转变需要一个过程。那么，相比于传统开发模式，低代码开发有哪些优势呢？传统IT开发与低代码开发两者之间又有何区别？传统IT开发是什么？传统IT开发是专业IT技术人员根据