Consul

Stella981
• 阅读 782

概述

官方网站https://www.consul.io/

架构

Consul

https://technologyconversations.files.wordpress.com/2015/09/etcd-registrator-confd2.png

通过这张架构图,可以看出来使用Consul实现应用外服务注册和发现主要依靠三个重要的组件:

  • Consul:注册中心的服务端,实现服务注册信息的存储,并提供注册和发现服务。

  • Registrator:一个开源的第三方服务管理器项目,它通过监听服务部署的Docker实例是否存活,来负责服务提供者的注册和销毁。

  • Consul Template:定时从注册中心服务端获取最新的服务提供者节点列表并刷新LB配置(比如Nginx的upstream),这样服务消费者就通过访问Nginx就可以获取最新的服务提供者信息。

功能

  • 服务发现 /service discovery:通过 DNS 或 HTTP 的方式获取服务信息。
  • 健康检查/health checking:可以提供与给定服务相关联的任何数量的健康检查。防止服务转发到故障的服务上面
  • 键值对存储 /key/value storage:存储动态配置。
  • 多数据中心 multi-datacenter:无需复杂的配置,即可支持任意数量的区域。

优势:

  • 使用 Raft 算法来保证一致性, 比复杂的 Paxos 算法更直接. 相比较而言, zookeeper 采用的是 Paxos, 而 etcd 使用的则是 Raft。
  • 支持多数据中心,内外网的服务采用不同的端口进行监听。 多数据中心集群可以避免单数据中心的单点故障,而其部署则需要考虑网络延迟, 分片等情况等。 zookeeper 和 etcd 均不提供多数据中心功能的支持。
  • 支持健康检查。 etcd 不提供此功能。
  • 支持 http 和 dns 协议接口。 zookeeper 的集成较为复杂, etcd 只支持 http 协议。
  • 官方提供 web 管理界面, etcd 无此功能。

角色

Consul

consu主要有server和client两种组件组成。每个数据中心官方建议需要3或5个server节点以保证数据安全,server只有一个实例是leader实例,就是主节点,主节点是自动选举产生的,主节点负责处理数据的写入处理,同时将数据同步至其他server节点。

client负责跟server通信,处理转发服务注册、服务发现请求到server节点,client还负责服务的健康检查,client节点也可以部署多个实例,甚至每个微服务节点都部署一个client实例。

工作原理

Consul

producer

/health

post

Consul

GET/api/address

temp

table

consumer

  • 1、当 Producer 启动的时候,会向 Consul 发送一个 post 请求,告诉 Consul 自己的 IP 和 Port
  • 2、Consul 接收到 Producer 的注册后,每隔10s(默认)会向 Producer 发送一个健康检查的请求,检验Producer是否健康
  • 3、当 Consumer 发送 GET 方式请求 /api/address 到 Producer 时,会先从 Consul 中拿到一个存储服务 IP 和 Port 的临时表,从表中拿到 Producer 的 IP 和 Port 后再发送 GET 方式请求 /api/address
  • 4、该临时表每隔10s会更新,只包含有通过了健康检查的 Producer

安装

二进制安装

下载地址https://www.consul.io/downloads.html

Consul

DownloadConsul

JUMPTOSECTION

helatestversionofConsul(1.7.2).Pleedownloadtheproprpackage

foryouroperatingsystemandarchitecture

ucanfindtheSHA256checksumsforConsul1.7.2nlineandyoca

whichhasbeensigneduingHahcopeclso

releasesservice.

eckoutthev1.7.2CHANGELOGFoRinfoRAtIONNtHeLAteTe

macos

32-bit/64-bit

FreeBSD

32-bit/64-bit

Linux

32-bit|64-bitlArm64|Armelv5lArmhfv6

根据安装主机的系统版本和位数选择安装

查看安装版本

docker安装

查看第一个server节点的ip地址(注意:这种方式下容器重启后ip可能会发生改变)

启动第二

启动三

指定 data 数据的创建方式

配置参数

官方参数说明地址:https://www.consul.io/docs/agent/options.html#command-line-options

  1. -server:定义agent运行在server模式,每个数据中心的Server建议在3~5个避免失败情况下数据的丢失
  2. -client:定义agent运行在client模式
  3. bootstrap-expect:server模式下,集群要求的最低数量,当低于这个数量,集群失效
  4. -bootstrap-expect:在一个datacenter中期望提供的server节点数目,当该值提供的时候,consul一直等到达到指定sever数目的时候才会引导整个集群
  5. -bind:节点的ip地址一般是0.0.0.0或云服务内网地址,用于被集群中的其他节点所访问
  6. -node:指定节点在集群中的唯一名称,默认为机器的hostname
  7. -config-dir:配置文件目录,里面所有以.json结尾的文件都会被加载
  8. data-dir:data存放的目录,consul数据同步机制,(该目录必须已存在)
  9. -serf-lan-bind绑定地址,用于内网集群通信,缺省使用 -bind 地址
  10. -serf-wan-bind绑定地址,用于跨机房通信,缺省使用 -bind 地址
  11. -advertise通告地址,通告给集群中其他节点,缺省使用 -bind 地址
  12. -advertise-wan通告地址,通告给其他机房的服务节点,缺省使用 -advertise 地址
  13. -join -retry-join加入集群的目标地址
  14. -join-wan -retry-join-wan跨机房邦联的目标地址
  15. -recursor上游DNS地址

开发模式

执行下面命令,启动开发模式,开发模式会快速启动一个单节点的Consul。但是需要注意的是开发模式不能数据持久化,因此,不能用于生产环境

  • Node name:代理的唯一名称,默认是机器的hostname,可以通过-node标志自定义,例如:consul agent -dev -node myNode
  • Datacenter:数据中心,Consul支持多个数据中心,为了有效的工作,每个节点必须被配置且上报到数据中心,-datacenter标志用来设置数据中心,对于单一的DC配置,这个代理默认为dc1
  • Server:表示代理是以服务器还是客户端的模式来运行。
  • Client Addr:用于代理的客户端接口地址。
  • Cluster Addr:用于集群中的Consul代理之间通信的地址和端口集,改地址必须可供其它节点访问。

集群搭建

创建第一台设备

consul agent -server -bootstrap-expect 1 -data-dir /data/consul -node=n1 -bind=0.0.0.0 -ui -config-dir /etc/consul.d  -client 0.0.0.0

加入机器

创建数据和配置目录

前台启动

后台启动

多数据中心搭建

关键在于要在每个数据中心选择一个边界节点,并配好-advertise-wan=参数,

再执行consul join -wan $other_wlan_ip

docker-compose

创建 vim docker-compose.yaml

执行命令 启动命令

查看结果

操作命令

查看命令

在consul命令中,无论server还是client都叫做agent,通过命令参数区分,我们运行的是server还是client。

集群成员(Members)

通过http方式查看

通过DNS 查看

停止服务

历史日志

consul monitor显示最近历史日志,默认显示的日志级别为info可以根据-log-level进行设置

  • -log-level: debug,还有"debug","info", "warn", "error"

服务注册

创建目录,默认推荐目录文件名称是consul.d

注册服务

在配置中启用脚本检查可能会引入远程执行漏洞,这是已知的恶意软件的目标。在生产环境中,我们强烈建议使用-enable-local-script-check。重新启动服务

通过dns 查看服务

http 查看服务

查看所有可用的服务

重新刷新注册信息

查看新服务

数据存储

存储

获取数据

获取所有的数据

删除数据

删除所有已redis前缀的数据

修改数据

UI

http://localhost:8500/ui

参考

https://learn.hashicorp.com/consul/getting-started/install

https://www.jianshu.com/p/067154800683

consul 整合多个数据节点

https://book-consul-guide.vnzmi.com/

使用Consul做服务发现的若干姿势

http://lhyd.top/?p=139151

本文同步分享在 博客“羊羽”(other)。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

点赞
收藏
评论区
推荐文章
blmius blmius
3年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
待兔 待兔
3个月前
手写Java HashMap源码
HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程HashMap的使用教程22
Jacquelyn38 Jacquelyn38
3年前
2020年前端实用代码段,为你的工作保驾护航
有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )
Wesley13 Wesley13
3年前
Java获得今日零时零分零秒的时间(Date型)
publicDatezeroTime()throwsParseException{    DatetimenewDate();    SimpleDateFormatsimpnewSimpleDateFormat("yyyyMMdd00:00:00");    SimpleDateFormatsimp2newS
Wesley13 Wesley13
3年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Wesley13 Wesley13
3年前
00:Java简单了解
浅谈Java之概述Java是SUN(StanfordUniversityNetwork),斯坦福大学网络公司)1995年推出的一门高级编程语言。Java是一种面向Internet的编程语言。随着Java技术在web方面的不断成熟,已经成为Web应用程序的首选开发语言。Java是简单易学,完全面向对象,安全可靠,与平台无关的编程语言。
Stella981 Stella981
3年前
Django中Admin中的一些参数配置
设置在列表中显示的字段,id为django模型默认的主键list_display('id','name','sex','profession','email','qq','phone','status','create_time')设置在列表可编辑字段list_editable
Stella981 Stella981
3年前
Google地球出现“无法连接到登录服务器(错误代码:c00a0194)”解决方法
Google地球出现“无法连接到登录服务器(错误代码:c00a0194)”解决方法参考文章:(1)Google地球出现“无法连接到登录服务器(错误代码:c00a0194)”解决方法(https://www.oschina.net/action/GoToLink?urlhttps%3A%2F%2Fwww.codeprj.com%2Fblo
Wesley13 Wesley13
3年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
Python进阶者 Python进阶者
9个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这