今天在将一个hive数仓表导出到mysql数据库时出现进度条一直维持在95%一段时间后提示失败的情况，搞了好久才解决。使用的环境是HUE中的Oozie的workflow任何调用sqoop命令，该死的oozie的日志和异常提示功能太辣鸡了，最后发现是重复数据导致数据进入mysql表时出现主键冲突进而导致数据同步失败。（1）众所周知hive表是没有主键与索引

最近在学习和工作中linux时，安装了CentOS7的最小系统，发现最小系统没有一些常用的命令等。在此，写一篇博文，记录一下Linux系统从新建虚拟机到最终可以上网的步骤，供自己复习使用，同时也共大家前来指正。一、创建新的虚拟机打开wmware，新建一个虚拟机，选择典型安装!Linux虚拟机CentOS最小系统安装(https://s4

sql注入作为安全攻防中最重要的一个部分，可以说是所有渗透测试注入中最为重要的一个注入，不管是预防还是测试，都需要扎实的基础才能明白sql注入。温馨提示：此文章仅限于学习记录与讨论，不得随意测试或者注入，互联网不是法外之地，任何除学习之外的事情与作者无关。sql注入顾名思义就是执行sql命令原理：执行的用户能使用sql注入绕过认证机制

操作系统及MySQL数据库的实时性能状态数据尤为重要，特别是在有性能抖动的时候，这些实时的性能数据可以快速帮助你定位系统或MySQL数据库的性能瓶颈，就像你在Linux系统上使用「top，sar，iostat」等命令工具一样，可以立刻定位OS的性能瓶颈是在IO还是CPU上，所以收集/展示这些性能数据就更为重要，那都有哪些重要的实时性能状态指标可以反应出系统和

　　之前介绍了使用官方脚本自动化启动一个Fabric网络，并且所有的证书都是通过官方的命令行工具cryptogen直接生成网络中的所有节点的证书。在开发环境可以这么简单进行，但是生成环境下还是需要我们自定义对网络中的节点的证书进行配置。　　　　所以在本文中，将会详细介绍一个从手动生成证书一直到启动网络的整体步骤。本文只交代整体的搭建步骤。对于Fa

Git介绍分布式:Git版本控制系统是一个分布式的系统,是用来保存工程源代码历史状态的命令行工具;保存点:Git的保存点可以追踪源码中的文件,并能得到某一个时间点上的整个工程项目额状态;可以在该保存点将多人提交的源码合并,也可以会退到某一个保存点上;Git离线操作性:Git可以离线进行代码提交,因此它称得上是完全的

Linux系统用着用着突然发现电脑上的WiFi图标不见了，电脑无法连接到无线网。这可急坏了，找遍设置也没找到哪里可以重新打开无线网，感觉就像是凭空消失了一样。折腾了一天，终于把无线网络恢复正常了。这篇文章就来梳理一下在Linux上修复无线网络的一些简单常用的操作。首先，我们可以使用rfkill命令查看无线设备的状态。$

一、并发编程模型的两个关键问题1\.线程之间如何通信通信是指线程之间以何种机制来交换信息。在命令式编程中，线程之间的通信机制有两种：共享内存和消息传递。在共享内存的并发模型里，线程之间共享程序的公共状态，通过写读内存中的公共状态进行隐式通信。在消息传递的并发模型里，线程之间没有公共状态，线程之间必须通过发送消息来显式

从开始接触Linux，界面很是吸引人。纯命令行的界面，黑色底板，黑客的即视感，英文水平也不会差，另外最重要的一点，敲的过程中的卡顿可以忽视，也是被这种Linux的“个性”所吸引，而并不是觉得它可以用来跑游戏、跑音乐、跑图片，甚至是银行中个人账户的数据或是游戏中个人的数据以及对信息安全的保护，我和Linux(https://www.oschina.net/

零.前言本篇主要介绍Linux下文本编辑器vim的使用方法，以及sudo命令的实现。我使用3A服务器远程连接的centos71.什么是vim在windows系统下，我们使用VS来编写代码，编译代码，调试代码，运行代码等，甚至还可以进行发布代码并进行代码关系的维护。这是因为微软已经将实现这些功能的工具全部都打包放入VS编译器中了。而在Linux系统中，并没有这