本文整理于github上各大star大神仓库。并根据自己的理解重新进行了整理本文已经收录于https://github.com/fengdongdongwsn/architectjava一、计算机基础1、数据结构（1）基本数据结构数据结构基本概念（时间复杂度和空间复杂度的计算方法）

1.有序列表逻辑结构和存储结构!image(https://imghelloworld.osscnbeijing.aliyuncs.com/imgs/f08fe88e8457bac682c1ae8f33817873.png)四种逻辑结构

虽然hive中的表没有主键一说，但是实际数据开发中经常需要将hive中计算好的表导出到mysql库中供业务使用或开发调用，而mysql表是需要有主键的，在hive中我们可以使用row\_number()over()窗口函数来生成一个自增序列的字段，在将表导出到mysql库中的时候就可以指定该字段为主键，使用起来还是挺方便的。select

相信很多人的项目都有这种需求，就是查询近7天的记录，但是这7天总有那么几天是没数据的，所以缺失的只能补0 下面的代码不知道能不能看懂，我简单的说一下思路1）先查询红色字体的近7天，再转换成日期2）我的字段使用的是时间戳的方式去保存，只能是先数据库字段先转日期2.1）先查询自己想要的数据，用每天分组，计算好总数后2.2）时间戳字段先转日期

3.CSV文件存储CSV全称CommaSeparatedValues中文叫做逗号分隔值或者字符分隔值，文件以纯文本形式存储表格数据。文件是一个字符序列可以由任意数目的记录组成相当于一个结构化表的纯文本形式，它比Excel更加简洁，XLS文本是电子表格，包含文本，数值，公式和格式等内容，CSV都没有就是特定的字符分隔纯文本，结构简

Mysql分库分表方案1.为什么要分表：当一张表的数据达到几千万时，你查询一次所花的时间会变多，如果有联合查询的话，我想有可能会死在那儿了。分表的目的就在于此，减小数据库的负担，缩短查询时间。mysql中有一种机制是表锁定和行锁定，是为了保证数据的完整性。表锁定表示你们都不能对这张表进行操作，必须等我对表操作完才行。行锁定也一样，别的sql必须等

一、开关机sync：把内存中的数据写到磁盘中（关机、重启前都需先执行sync）shutdownrnow或reboot：立刻重启shutdownhnow：立刻关机shutdownh19:00：预定时间关闭系统（晚上7点关机，如果现在超过8点则第二天）shutdownh10：预定时间关闭系统（10分钟后关机）

jdbc(javadatabaseconnectivity，java数据库连接)的api中的主要的四个类之一的java.sql.statement要求开发者付出大量的时间和精力。在使用statement获取jdbc访问时所具有的一个共通的问题是输入适当格式的日期和时间戳：2002020520:56或者02/05/028:56pm。通过使

明明加了唯一索引，为什么还是产生了重复数据？前言前段时间我踩过一个坑：在mysql8的一张innodb引擎的表中，加了唯一索引，但最后发现数据竟然还是重复了。到底怎么回事呢？本文通过一次踩坑经历，聊聊唯一索引，一些有意思的知识点。1.还原问题现场前段时间，为了防止商品组产生重复的数据，我专门加了一张防重表。如果大家对防重表，比较感兴趣，可以看看