今天在将一个hive数仓表导出到mysql数据库时出现进度条一直维持在95%一段时间后提示失败的情况，搞了好久才解决。使用的环境是HUE中的Oozie的workflow任何调用sqoop命令，该死的oozie的日志和异常提示功能太辣鸡了，最后发现是重复数据导致数据进入mysql表时出现主键冲突进而导致数据同步失败。（1）众所周知hive表是没有主键与索引

选择哪个？AmazonWebServices(AWS)是世界上最大的云平台，拥有200多项功能。在本文中，我们分解了10种至少支持某些SQL语法的AWS服务，讨论它们的用例，并举例说明如何编写查询。服务描述SQL支持用例RDSPostgres、MySQL等满的中小型网络应用极光无服务器数据库满的无服务器应用红移数

HuTool工具类使用之Excel文档的导入导出前言在日常的工作开发中，Excel的导入和导出是必不可少的，如果自己写相应的导入导出方法，会显得十分繁琐，本文采用Hutool工具类实现的Excel导入导出功能，可以大幅度减少今后开发中Excel的导入导出的相关操作。

由于客户的CentOS服务器没有安装yum工具，只能通过下载tar.gz包安装mysql，于是跟着万能的百度开启了漫漫踩坑之旅：1、下载mysql5.6.33linuxglibc2.5x86\_64.tar.gz2、解压到/usr/local/文件夹下，并改名为mysql3、添加mysql用户组和mysql用户groupadd

以下内容是依据《MySQL性能调优与架构设计》来做的知识点总结，感兴趣的朋友可以看一下这本书，毕竟按照书来学习比较系统。能够整体的把握知识脉络。一、MySQL逻辑模块组成mysql可以看成是二层架构，第一层叫SQLLayer，这一部分主要功能是完成mysql数据库系统处理底层数据之前的所有的准备工作，包括权限判断、sql解析、执行计划优化、qu

（1）连接数据库mysqlurootp（2）输入密码（3）切换数据库usemysql;（4）修改root用户hostupdateusersethost'%'whereuser'root';（5）修改mysqld配置文件vi/etc/mysql/mysql.co

1.MySQL默认采用的是MyISAM。2.MyISAM不支持事务，而InnoDB支持。InnoDB的AUTOCOMMIT默认是打开的，即每条SQL语句会默认被封装成一个事务，自动提交，这样会影响速度，所以最好是把多条SQL语句显示放在begin和commit之间，组成一个事务去提交。3.InnoDB支持数据行锁定，MyISAM不支持行锁定，

前言这里采用了tpch一个数据库的数据量来进行查询计划的对比。并借助tpch中的22条查询语句进行执行计划分析。mysql采用的是标准安装，TiDB采用的是单机测试版，这里的性能结果不能说明其性能差异本文章主要目的是对比Mysql与TiDB在执行sql查询时的差异。mysql版本5.7  TiDB版本v2.0.0rc.4准备

缺少hashjoin和parallel这种工具，MYSQL注定不是个合适的数据仓库工具。无论是是myisam还是innodb，在处理一个复杂的SQL查询的时候，并不能发挥多核CPU的性能。只会有一个CPU正在满负荷地运转。所以对于一个分析性数据库而言，MYSQL多核实际上是极大的浪费。MYSQL做查询优化的时候，一个是注意在g

首先我们带着下边三个问题来认识存储引擎存储引擎在MySQL中的作用是什么？MySQL都有哪些存储引擎SQL又与存储引擎有什么关系？存储引擎在MySQL中的作用是什么？顾名思义，存储引擎就是用于存储我们的数据的。在关系型数据库中我们一般将数据库存放在表中（Table）。我们可以把这个表理解成Excel电子表格