java爬虫入门
通用网络爬虫又称全网爬虫（ScalableWebCrawler），爬行对象从一些种子URL扩充到整个Web，主要为门户站点搜索引擎和大型Web服务提供商采集数据。今天我写的主要是一些皮毛入门现在来看下我们的pom依赖<projectxmlns"http://maven.apache.org/POM/4.0.0"xmln
ElasticSearch（增put、删delete、改（本质是先删除后添加）post、查get、post）
一、ElasticSearch简介1.1什么是ElasticSearchElasticSearch，简称es，es是一个开源的高扩展的分布式全文搜索引擎，可以近乎实时的存储、检索数据；本身扩展性很好，可以扩展到上百台服务器，处理pb级别的数据。es也使用java开发并使用Lucene作为其核心来实现所有索
Hadoop是一种开源的适合大数据的分布式存储和处理的平台
“Hadoop能做什么？”，概括如下： 1）搜索引擎：这也正是DougCutting设计Hadoop的初衷，为了针对大规模的网页快速建立索引； 2）大数据存储：利用Hadoop的分布式存储能力，例如数据备份、数据仓库等； 3）大数据处理：利用Hadoop的分布式处理能力，例如数据挖掘、数据分析等； 4）
4. 安装ingress
ingressnginx安装这里假设你已经了解了ingressnginx，如果你还没了解请询问搜索引擎。这篇文章只能让你快速的部署他们。安装之前安装之前需要确保你的集群正常运行或主节点再运行：如果集群正常运行：你可以开始安装了。如果只有master节点在运行：则
ElasticSearch的Gateway及存储原理
ES里有一个叫做gateway的东西，今天抽空理一下，前面翻译ES的一篇博文叫做“搜索引擎与时间机器(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2Flog.medcl.net%2Fitem%2F2010%2F09%2Ftranslationsearchengineandthet
Elasticsearch 5.5 入门必会（一）
前言安装搜索引擎过程中，我遇到了很多坑！发出来让各位绕道而行，后面都是用ES关键字来代替Elasticsearch，后面的搭建和使用都是在centos6.8环境下，本人使用的ES是5.5.0的版本，JDK使用1.8版本。相关文章： Elasticsearch5.5入门必会之Javaclien
Centos7安装Mesos
ApacheMesos官方文档只提供了源码安装方式，然而我尝试了几次，总是在某些阶段报错。而通过搜索引擎搜到的其他办法，也多少会遇到一些莫名其妙的错误。所以根据自己尝试的结果，整理了一个简单的方法。1，添加yum仓库rpmUvhhttp://repos.mesosphere.io/el/7/noarch/RPMS/mesosphere
ElasticSearch集群灾难：别放弃，也许能再抢救一下 | 京东云技术团队
1前言Elasticsearch作为一个分布式搜索引擎，自身是高可用的；但也架不住一些特殊情况的发生，如：集群超过半数的master节点丢失，ES的节点无法形成一个集群，进而导致集群不可用；索引shard的文件损坏，分片无法被正常恢复，进而导致索引无法正常