介绍：　　mysql是目前世界上最流行的关系型数据库，在国内大的互联网公司都在使用mysql数据库，mysql经常被我们这样概述，“mysql是轻量级关系型数据库”，其实轻量级并不是说mysql是中小型数据库，在项目开发中，存储数据的量往往是一个架构问题，如果配合架构，mysql也是可以存储海量数据的。并且海量数据并没有一个明确的标准。说mysq

前言这次咱们来玩一个在Python中很牛叉的爬虫框架——Scrapy。scrapy介绍标准介绍Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架，非常出名，非常强悍。所谓的框架就是一个已经被集成了各种功能（高性能异步下载，队列，分布式，解析，持久化等）的具有很强通用性的项目模板。对于框架的学习，重点是要学习其框架的特性、各个功能的

云计算这几年是越来越火了，随之企业上云趋势的飞速发展，不仅各大互联网巨头在布局云计算。传统的IT厂商如IBM、Oracle、VMware也在大力发展云计算。其中当属AWS的云计算体系发展最早，实力最强。AWS的很多产品也成为了业内标准。当然，其认证体系也是十分的科学。包含：运维、架构、开发、AI、大数据、安全这几个领域。目前，AWS在全球云计算市场仍占有最高

摘自：https://www.jianshu.com/p/8def04b34b3c首先，了解状态机是什么，我们为什么需要状态机！举个最简单例子，请假，作为一个最底层程序员，每次请假都要领导层层审批，而假有分为很多种，事假，病假，婚假，年休假等等，当然选择请的假不同，审批标准也不同，不同的假单需要走的审批链也不一样，比如年休假，可能只需要领导审批扣掉

最近开发一个WEB的ETL工具需要用到不同的数据源。第一次用POSTGRESQL发现一个双引号引发的问题：标准的SQL是不区分大小写的。但是PostgreSQL对于数据库中对象的名字允许使用支持大小写区分的定义和引用方法。方式就是在DDL中用双引号把希望支持大小的对象名括起来。比如希望创建一个叫AAA的表。如果用CREATETABLEAAA（

随着大数据和AI业务的不断融合，大数据分析和处理过程中，通过深度学习技术对非结构化数据（如图片、音频、文本）进行大数据处理的业务场景越来越多。本文会介绍Spark如何与深度学习框架进行协同工作，在大数据的处理过程利用深度学习框架对非结构化数据进行处理。Spark介绍Spark是大规模数据处理的事实标准，包括机器学习的操

最近测试系统的时候，发现上传的字段时间不对，而且时差是8小时，因此研究了一段时间！原来是系统默认是UTC时间，系统时钟会自动添加8小时，因此时钟是正确的，但是系统上传的，是按照UTC去记录的，因此必须把这个修改为CST（中国标准时）网上很多方法都是过时的，特意做过测试！因为配置文件已经变化，废话不多说，直接上操作！1.修改配置文件sudo

匿名函数在编程语言中出现的比较早，最早出现在Lisp语言中，随后很多的编程语言都开始有这个功能了，目前使用比较广泛的Javascript以及C，PHP直到5.3才开始真正支持匿名函数，C的新标准C0x也开始支持了。匿名函数是一类不需要指定标示符，而又可以被调用的函数或子例程，匿名函数可以方便的作为参数传递给其他函数，最常见应用是作为回调函数

匿名函数在编程语言中出现的比较早，最早出现在Lisp语言中，随后很多的编程语言都开始有这个功能了，目前使用比较广泛的JavaScript以及C，PHP直到5.3才开始真正支持匿名函数，C的新标准C0x也开始支持了。匿名函数是一类不需要指定标示符，而又可以被调用的函数或子例程，匿名函数可以方便的作为参数传递给其他函数，最常见应

_摘要：_ 在阿里巴巴，“柔性事务”已经是重构分布式事务的标准方法，覆盖了商品、交易、支付各个大规模应用场景，并且经受了双十一的考验。DRDS 是阿里云提供的一款分布式数据库产品，它的原型是在阿里内部使用了10年的数据库中间件TDDL。DRDS在TDDL提供的数据切分和SQL路由能力上，强化了分布式查询，事务和水平扩容能力。