Easter79 Easter79
3年前
sqoop从hive导入数据到mysql时出现主键冲突
今天在将一个hive数仓表导出到mysql数据库时出现进度条一直维持在95%一段时间后提示失败的情况,搞了好久才解决。使用的环境是HUE中的Oozie的workflow任何调用sqoop命令,该死的oozie的日志和异常提示功能太辣鸡了,最后发现是重复数据导致数据进入mysql表时出现主键冲突进而导致数据同步失败。(1)众所周知hive表是没有主键与索引
Souleigh ✨ Souleigh ✨
4年前
Python 带你来一次说走就走的环球旅行
1、目标场景十一长假,相信大部分的朋友这会应该是在全国各地浪或者是在浪的路上,朋友圈成为你们表演的场所。当然,也有一小戳朋友是
Gloria36 Gloria36
4年前
MySQL数据类型详解和存储机制
1.1数据类型概览数据类型算是一种字段约束,它限制每个字段能存储什么样的数据、能存储多少数据、能存储的格式等。MySQL/MariaDB大致有5类数据类型,分别是:整形、浮点型、字符串类型、日期时间型以及特殊的ENUM和SE
Wesley13 Wesley13
3年前
13000字!最常问的MySQL面试题集合
公众号关注“杰哥的IT之旅”,选择“星标”,重磅干货,第一时间送达!!(https://oscimg.oschina.net/oscnet/f62c742809f147fcac77961cb9f95f37.png)除了基础题部分,本文还收集整理的MySQL面试题还包括如下知识点或题型:
Stella981 Stella981
3年前
Centos7二进制安装Mysql8.0.14
准备工作下载mysql二进制包,以及安装mysql依赖包安装mysql所需依赖包yuminstalllibaioy下载mysql二进制安装包wgethttp://mirrors.163.com/mysql/Downloads/MySQL8.0/mysql8.0.14linuxglibc2.
Wesley13 Wesley13
3年前
mysql分组统计按照字段排序方法(分组之后保留最新时间、最大id...)
sql示例如下:selectsuccess_time,query_time,order_nofrompro_return_plantwheret.success_timein(SELECTmax(success_time)FROMpro_return_planWHERE11ANDbill_
Wesley13 Wesley13
3年前
mysql维护日志
Can’topenandlockprivilegetables:Incorrectfileformat‘db’ubuntu16.04LTS,mysql5.7.23sudovi/etc/mysql/mysql.conf.d/mysqld.cnf,在\mysql\行后增加skipgranttables,让mysql服
Wesley13 Wesley13
3年前
MySQL MHA环境搭建
MHA功能:从故障的mysql保存二进制日志时间(binlogevents);识别含有最新更新的slave;应用差异的中继日志(relaylog)到其他的slave;应用从master保存的二进制日志文事件;提升一个slave为新的master;是其他的slave连接新的mast
Stella981 Stella981
3年前
Redis命令总结
连接操作相关的命令quit:关闭连接(connection)auth:简单密码认证持久化save:将数据同步保存到磁盘bgsave:将数据异步保存到磁盘lastsave:返回上次成功将数据保存到磁盘的Unix时戳shun
Wesley13 Wesley13
3年前
MYSQL表分区支持的函数清单
Mysql5.1支持的partition函数1.数学函数ABS(x)    返回x的绝对值CEILING(x)/CEIL(x)返回大于或等于x的最小整数FLOOR(x)    返回小于或等于x的最大整数MOD(x,y)    返回x除以y以后的余数2.日期时间函数EXTRACT(typeFROMd)    从