在上篇《hive(01)、基于hadoop集群的数据仓库Hive搭建实践(https://my.oschina.net/zss1993/blog/1602402)》一文中我们搭建了分布式的数据仓库Hive服务，本文主要是在上文的基础上结合Hadoop分布式文件系统，将结构化的数据文件映射为一张数据库表，将sql语句转换为MapRedu

Kubernetes是一个开源的，用于管理云平台中多个主机上的容器化的应用，Kubernetes的目标是让部署容器化的应用简单并且高效，Kubernetes提供了应用部署，规划，更新，维护的一种机制。<br/Kubernetes在设计结构上定义了一系列的构建模块，其目的是为了提供一个可以部署、维护和扩展应用程序的机制，组成Kubernetes

第1章课程导学本章主要介绍学习react的重要性，课程的知识大纲，学习前提，讲授方式及预期收获。11课程导学第2章React初探本章主要讲解React项目的开发环境搭建，工程代码结构及React中最基础的语法内容，同时对前端组件化思想进行介绍。21React简介22React开发环境准备23工程目录

      在Java开发中，到处可见Exception或者它的子类。如何在一个已有的框架中或者自己的项目中利用好异常，而不让异常漫天飞，需要开发的积累和总结，这篇日志就为这个目的总结几年来的开发对异常使用总结吧。      首先认识Java异常体系结构，Java中使用Throwable作为所有的异常父类，下面有两大子类Error和Excepti

Scrapy笔记01入门篇　　Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。可以应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中。其最初是为了页面抓取(更确切来说,网络抓取)所设计的，也可以应用在获取API所返回的数据(比如WebServices)或者通用的网络爬虫。　　Scr

Structuralpatterns结构型模式1.适配器模式（Adaptor）目的：将某个类/接口转换为client期望的其他形式。适配器让类可以协同工作，否则就会因为不兼容的接口而无法工作。通过增加一个接口，将已存在的子类封装起来，client面向接口编程，从而隐藏了具体子类。假设我们有一个MediaPlayer接口和一个实现了

架构介绍Engine:引擎,处理整个系统的数据流处理,触发事物,是整个框架的核心Item:项目,他定义了爬取结果的数据结构,爬取的数据会被赋值成该Item对象Scheduler:调度器,接受引擎发过来的请求并将其加入到队列中,在引擎再次请求的时候将请求提供给引擎Downloader:下载器,下载网页内容,并将网页内容返回给spider

前言之前介绍了使用devTools进行索引库数据的crud，这里使用的是java程序，使用中间件activeMQ进行数据库和索引库数据的同步。主要是用来完成对数据库的修改来完成对索引库的同步。正文前提准备：1\.索引信息：结构化的索引，在索引的setting中，使用的是ik分词器，级别是ikmaxwo

ECMAscript说明文档对这门语言的定义是“一门适于在宿主环境中执行计算及操作计算对象的面向对象的编程语言”。简单的说，JavaScript是一门面向对象（OO）的语言。面向对象讲究的是专注于对象本身——它们的结构，它们互相间是如何影响的。本文是@堂主对《ProJavaScriptwithMootools》一书的第三章Object

!(https://oscimg.oschina.net/oscnet/fce6a916371ff12e208a168eb4c27e665ca.jpg)前言说到分布式缓存，可能大多数人脑海浮现的就是redis了，为什么redis能够在竞争激烈的缓存大战中脱颖而出呢？原因无非有一下几点：性能好，丰富的特性跟数据结构，api操作简单。但是用的