今天在将一个hive数仓表导出到mysql数据库时出现进度条一直维持在95%一段时间后提示失败的情况，搞了好久才解决。使用的环境是HUE中的Oozie的workflow任何调用sqoop命令，该死的oozie的日志和异常提示功能太辣鸡了，最后发现是重复数据导致数据进入mysql表时出现主键冲突进而导致数据同步失败。（1）众所周知hive表是没有主键与索引

sshkeygen用来生成ssh公钥认证所需的公钥和私钥文件。ssh秘钥登录特点：1.安全；2.免输密码。对于安全级别较高的服务器，建议配好ssh登录后禁掉密码登录。缺点：略繁琐。如果你的只是临时登录一次，那么还是密码吧。一、生成秘钥秘钥对需要在你自己的机器上生成，然后把公钥放到服务器相应用户的~/.ssh目录执行下面命令,默认

一、redis分布式锁的简易实现用redis实现分布式锁是一个老生常谈的问题了。因为redis单条命令执行的原子性和高性能，当多个客户端执行setnx(相同key)时，最多只有一个获得成功。因此在对可用性要求不是特别高的场景下，redis分布式锁方案不失为一个性价比高的实现。1.多个客户端执行setnxlock

操作系统简答题合集(一)操作系统引论1.简述操作系统的功能？答：操作系统是计算机资源的管理者。主要有处理机管理、存储管理、设备管理、文件管理。此外，操作系统还为用户提供使用操作系统硬件系统的接口，分别是命令接口、程序接口、图形接口。操作系统的四个基本特征是并发、共享、异步、虚拟。2.解释以下术语：资源、多道程序

最近在学习和工作中linux时，安装了CentOS7的最小系统，发现最小系统没有一些常用的命令等。在此，写一篇博文，记录一下Linux系统从新建虚拟机到最终可以上网的步骤，供自己复习使用，同时也共大家前来指正。一、创建新的虚拟机打开wmware，新建一个虚拟机，选择典型安装!Linux虚拟机CentOS最小系统安装(https://s4

sql注入作为安全攻防中最重要的一个部分，可以说是所有渗透测试注入中最为重要的一个注入，不管是预防还是测试，都需要扎实的基础才能明白sql注入。温馨提示：此文章仅限于学习记录与讨论，不得随意测试或者注入，互联网不是法外之地，任何除学习之外的事情与作者无关。sql注入顾名思义就是执行sql命令原理：执行的用户能使用sql注入绕过认证机制

　　之前介绍了使用官方脚本自动化启动一个Fabric网络，并且所有的证书都是通过官方的命令行工具cryptogen直接生成网络中的所有节点的证书。在开发环境可以这么简单进行，但是生成环境下还是需要我们自定义对网络中的节点的证书进行配置。　　　　所以在本文中，将会详细介绍一个从手动生成证书一直到启动网络的整体步骤。本文只交代整体的搭建步骤。对于Fa

表在数据库中主要用来实现存储数据记录，其基本操作包括创建表、查看表、删除表和修改表。表中的数据库对象包括：1.列（COLUMNS）：也称属性列，在具体创建表时，必须指定列的名字和它的数据类型。2.索引（INDEXES）：根据指定的数据库建立起来的顺序，提供了快速访问数据的途径。3.触发器（TRIGGERS）：指用户定义的事务命令集合，当对一个

Linux系统用着用着突然发现电脑上的WiFi图标不见了，电脑无法连接到无线网。这可急坏了，找遍设置也没找到哪里可以重新打开无线网，感觉就像是凭空消失了一样。折腾了一天，终于把无线网络恢复正常了。这篇文章就来梳理一下在Linux上修复无线网络的一些简单常用的操作。首先，我们可以使用rfkill命令查看无线设备的状态。$

从开始接触Linux，界面很是吸引人。纯命令行的界面，黑色底板，黑客的即视感，英文水平也不会差，另外最重要的一点，敲的过程中的卡顿可以忽视，也是被这种Linux的“个性”所吸引，而并不是觉得它可以用来跑游戏、跑音乐、跑图片，甚至是银行中个人账户的数据或是游戏中个人的数据以及对信息安全的保护，我和Linux(https://www.oschina.net/