当数据库中数据量特别大的时候，查询的速度就比较慢，这时候需要添加索引，来提高查询速度。索引的优点1通过创建唯一索引，可以保证数据库表中每行数据的唯一性。2加快数据查询速度3在使用分组和排序进行数据查询时，可以显著的减少查询中分组和排序的时间索引的缺点1维护索引需要消耗数据库资源2索引需要占用磁盘空间，索引文件可能会比数据

!(https://oscimg.oschina.net/oscnet/ab9229f53a474ef5ac0c98ed9c5fd500.png)前言：近段时间想要使用mongo存一些文本数据，正好前段时间学习了docker技术，当时只是草草的配置了下就直接去使用了。后来在使用中发现了一些问题，比如想要修改配置文件每

Hikaricp替换现有的数据库连接池也是很方便的没有时间去测试 现贴出简单的配置 如果使用spring，只需要简单的替换<beanid"hikariDataSource"class"com.zaxxer.hikari.HikariDataSource"destroymethod"s

Kudu的时间戳类型，在Impala建表上用的是timestamp，有2个与众不同的地方。1\.在Kudu里它存的时间戳是纳秒级别，所以你普通的时间戳存进去需要\1000。2\.另外，Kudu的时间戳里面存的是，UTC时间。所以存进去的时间需要自己转换时区。2\.Impala在读取时间戳的时候，会根据配置项，使用系统的本地时区。配置

优化目标1.减少IO次数IO永远是数据库最容易瓶颈的地方，这是由数据库的职责所决定的，大部分数据库操作中超过90%的时间都是IO操作所占用的，减少IO次数是SQL优化中需要第一优先考虑，当然，也是收效最明显的优化手段。2.降低CPU计算除了IO瓶颈

1、默认生产者消息是持久的:会存数据库\消费者的持久：createDurableSubscriber是指消费者能收到所有它订阅时间点之后的消息，即使消费者注册后关闭，当它重启就能收到注册时间点之后所有的消息;即当此消费用户ID(AAA)在producer发送之前就已经注册，那么此id能收到producer发送的所有消息，如果是在produce

该小工具的粗略设计实现结构图如下所示：!(https://static.oschina.net/uploads/img/201704/22171125_paOy.jpg)由于该服务的头文件使用了gzip对数据进行了数据压缩，在这个版本处理的策略是，把压缩的数据放在一个压缩文件中。压缩文件按时间进行存储在目录inputJson中。上图中是运行时

数据类型：对数据进行统一的分类，从系统的角度出发，为了能够使用统一的方式进行管理，更好的利用有限的空间。SQL中将数据类型分成了三大类：数值类型、字符串类型、时间日期类型。!(https://oscimg.oschina.net/oscnet/d5b4d65c1647af4e2a9a46457621338dc53.png)数

本文分享自天翼云开发者社区《》，作者：石泽涛超速数据清洗算法：1）针对同一用户，顺次选取两条记录（第n条、第n1条），根据第n条记录的停留时间TSn（两停留点时间差），以及与第n1条记录的距离Dn（两记录点经纬度距离），计算第n条记录的穿越速度（Dn/