今天在将一个hive数仓表导出到mysql数据库时出现进度条一直维持在95%一段时间后提示失败的情况，搞了好久才解决。使用的环境是HUE中的Oozie的workflow任何调用sqoop命令，该死的oozie的日志和异常提示功能太辣鸡了，最后发现是重复数据导致数据进入mysql表时出现主键冲突进而导致数据同步失败。（1）众所周知hive表是没有主键与索引

sshkeygen用来生成ssh公钥认证所需的公钥和私钥文件。ssh秘钥登录特点：1.安全；2.免输密码。对于安全级别较高的服务器，建议配好ssh登录后禁掉密码登录。缺点：略繁琐。如果你的只是临时登录一次，那么还是密码吧。一、生成秘钥秘钥对需要在你自己的机器上生成，然后把公钥放到服务器相应用户的~/.ssh目录执行下面命令,默认

一、redis分布式锁的简易实现用redis实现分布式锁是一个老生常谈的问题了。因为redis单条命令执行的原子性和高性能，当多个客户端执行setnx(相同key)时，最多只有一个获得成功。因此在对可用性要求不是特别高的场景下，redis分布式锁方案不失为一个性价比高的实现。1.多个客户端执行setnxlock

操作系统简答题合集(一)操作系统引论1.简述操作系统的功能？答：操作系统是计算机资源的管理者。主要有处理机管理、存储管理、设备管理、文件管理。此外，操作系统还为用户提供使用操作系统硬件系统的接口，分别是命令接口、程序接口、图形接口。操作系统的四个基本特征是并发、共享、异步、虚拟。2.解释以下术语：资源、多道程序

sql注入作为安全攻防中最重要的一个部分，可以说是所有渗透测试注入中最为重要的一个注入，不管是预防还是测试，都需要扎实的基础才能明白sql注入。温馨提示：此文章仅限于学习记录与讨论，不得随意测试或者注入，互联网不是法外之地，任何除学习之外的事情与作者无关。sql注入顾名思义就是执行sql命令原理：执行的用户能使用sql注入绕过认证机制

　　之前介绍了使用官方脚本自动化启动一个Fabric网络，并且所有的证书都是通过官方的命令行工具cryptogen直接生成网络中的所有节点的证书。在开发环境可以这么简单进行，但是生成环境下还是需要我们自定义对网络中的节点的证书进行配置。　　　　所以在本文中，将会详细介绍一个从手动生成证书一直到启动网络的整体步骤。本文只交代整体的搭建步骤。对于Fa

Git介绍分布式:Git版本控制系统是一个分布式的系统,是用来保存工程源代码历史状态的命令行工具;保存点:Git的保存点可以追踪源码中的文件,并能得到某一个时间点上的整个工程项目额状态;可以在该保存点将多人提交的源码合并,也可以会退到某一个保存点上;Git离线操作性:Git可以离线进行代码提交,因此它称得上是完全的

我们在接收或是传送CAD文件的时候，由于CAD文件过大，有时传送会比较浪费时间或是接收时会出现不完整的情况，那么对此我们该怎么办？第一种方法：将图形完稿后，执行清理：使用PURGE（PU）命令清除掉多余的数据，要是定义了但并没用使用的块、图层、线型、文字样式、标注样式等。就需要在清理的时候勾选“清除嵌套项目”。在图形绘制的过程中也是能够进行清理的

表在数据库中主要用来实现存储数据记录，其基本操作包括创建表、查看表、删除表和修改表。表中的数据库对象包括：1.列（COLUMNS）：也称属性列，在具体创建表时，必须指定列的名字和它的数据类型。2.索引（INDEXES）：根据指定的数据库建立起来的顺序，提供了快速访问数据的途径。3.触发器（TRIGGERS）：指用户定义的事务命令集合，当对一个

一、并发编程模型的两个关键问题1\.线程之间如何通信通信是指线程之间以何种机制来交换信息。在命令式编程中，线程之间的通信机制有两种：共享内存和消息传递。在共享内存的并发模型里，线程之间共享程序的公共状态，通过写读内存中的公共状态进行隐式通信。在消息传递的并发模型里，线程之间没有公共状态，线程之间必须通过发送消息来显式