Easter79 Easter79
4年前
sqoop从hive导入数据到mysql时出现主键冲突
今天在将一个hive数仓表导出到mysql数据库时出现进度条一直维持在95%一段时间后提示失败的情况,搞了好久才解决。使用的环境是HUE中的Oozie的workflow任何调用sqoop命令,该死的oozie的日志和异常提示功能太辣鸡了,最后发现是重复数据导致数据进入mysql表时出现主键冲突进而导致数据同步失败。(1)众所周知hive表是没有主键与索引
Aidan075 Aidan075
4年前
Pandas案例精进 | 自动分割汇总表写入到子表
(https://imghelloworld.osscnbeijing.aliyuncs.com/f5b70d401be96176067dfe8304143ead.png)大家好!欢迎来到「Pandas案例精进」专栏今天分享的是一个之前的案例,里面涉及的方法可能有些过时,但处理思想仍有较高的参考价值。Pandas案例需求
徐小夕 徐小夕
5年前
前端进阶之从零到一实现单向 & 双向链表
前言前端工程师对于算法和数据结构这块的知识的掌握程度,是进阶高级工程师的非常重要的标志之一,为了总结一下数据结构和算法方面的知识,笔者今天继续把链表这一块的知识补上,也作为自己知识体系的一个梳理,笔者早在去年就写过一篇关于使用javascript实现二叉树和二叉搜索树的文章,如果感兴趣或者想进阶高级的朋友们可以参考学习一下:JavaScript中的二
Easter79 Easter79
4年前
SwiftUI 实战:从 0 到 1 研发一个 App
心得感悟起初看到WWDC上的演示SwiftUI时,我就觉得SwiftUI有种陌生的熟悉感(声明式语法),所以体验下,看看有没有什么启发。先说下整体项目完成下来的感受:用SwiftSwiftUI开发iOS项目效率很高,本人之前没有接触过Swift语言,这次是从0开始学swift语言以及swi
Stella981 Stella981
4年前
Flutter从入门到进阶实战携程网App_汇总贴
视频地址:https://coding.imooc.com/class/321.html?mc\_marking60e5294c605a87b2af7257d06f70505e&mc\_channelsyb7(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fcoding.imooc.
Easter79 Easter79
4年前
SpringCloud consul 微服务(注册到主机名的问题)
目前项目在使用consul做服务注册与发现,做SpringSecurityOAuth2权限认证的authorization\_code模式的时候发现一个异常坑爹的问题这是开始的服务注册代码块bootstrap.yml:spring:cloud:consul:port:8500
Wesley13 Wesley13
4年前
JDK 从老版本升级到 1.8的问题总结
!(https://oscimg.oschina.net/oscnet/fcd31648309f48f190b88f02b92fa027.png)JDK8升级常见问题JDK8发布很久了,它提供了许多吸引人的新特性,能够提高编程效率。如果是新的项目,使用JDK8当然是最好的选择。但
Stella981 Stella981
4年前
Git 技巧:恢复到前一次提交 (图示分析)
对这篇文章的试验:http://www.oschina.net/translate/gittipsrevertwithnewcommit(http://www.oschina.net/translate/gittipsrevertwithnewcommit), FYIprerequisites:gitinitt
Wesley13 Wesley13
4年前
MySQL5.7升级到8.0过程详解
前言:不知不觉,MySQL8.0已经发布好多个GA小版本了。目前互联网上也有很多关于MySQL8.0的内容了,MySQL8.0版本基本已到稳定期,相信很多小伙伴已经在接触8.0了。本篇文章主要介绍从5.7升级到8.0版本的过程及注意事项,有想做版本升级的小伙伴可以参考下。1.升级前准备及注意事项首先
Stella981 Stella981
4年前
Redis从入门到放弃系列(七) 过期、内存淘汰策略
Redis从入门到放弃系列(七)过期、内存淘汰策略本文例子基于:5.0.4过期策略Redis对于设置了过期时间的key的过期策略有两种惰性删除定时随机删除惰性删除惰性删除的时机在于当你要获取该key的时候再去做判断.这里我以String类型