谷歌SRE理论读书札记:SLI、SLO与SLA

Johnny21
• 阅读 1588

趁着这被人扫地出门,无地可去的日子,多学习学习别人的理论知识。
书籍名 《Site Reliability Engineering》网络运维工程,编者Betsy Beyer, Chris Jones, Jennifer Petoff, Niall Richard Murphy

第二部分 规则(Principles)

第四章 Service Level Objects

如果你不知道哪些行为对服务有关键影响(无论积极还是消极),那么你就不可能正确地去管理好这个应用。那么为了衡量行为的程度,我们的服务需要一些指标,如果有人调用我们的服务,那他们也应该熟悉这些指标。
这里我的理解是,比如别人调用我的接口去操作一台网络设备,执行了某个命令。这就是一个行为,但是我们对于这个行为,应该有一些具体的数字进行描述

谷歌SRE在这里定义了三个名词,分别是:
SLIs、SLOs、SLAs,这里SL是 srvice level,服务级别,而I O A分别是 indicator、object与agreement
这些名词和指标建模、选择、分析息息相关。(这里的指标,就是metric,就是我们现在监控系统所采集的对象),SRE中有个原则是“简单”,所以在监控系统中选择要关注哪些指标是非常重要的,我们既需要这些指标能比较全面、客观地反馈服务的状况,又必须尽可能压缩监控指标的数目(特别接触了对几千台物理设备的监控系统后,我深有体会,每多一个指标,在生产环境是需要multiply几千的)
SLI就是服务状况体现最直观的数字,比如:
request latency 请求延迟(提一嘴,latency这个常见指标,很多时候是从服务端测获取到的,其实不见得能反应服务的真实延迟状况)
error rate 错误率(SRE说,别只统计成功的request数)
system throughput(这个有点意思,按照字面意思,是系统生产力。如果目前系统在服务1000个人,能说系统的生产力很高吗?或许但不一定,因为很可能虽然在服务1000个人,创建了2000个连接,但却没做什么事情。而如果从反馈数据的带宽,是否比前面的连接数更能说明系统的“生产力”呢?)
当然还有一种SLI对于SRE很重要,那就是 n个9 的服务可用性

SLO
SLO是一组值的范围,这个值就是由SLI定义的服务级别数值。自然的SLO定义就是,某SLI在正常情况下需要小于某值或者处于某个大小值之间。
选择一个合适的SLO并不是一件容易的事情,当然你并不需要一开始就设定好这个范围,比如说QPS,这个指标取决于你的用户,而你是无法预先做出判断的。(比如运维平台上线了某个服务,你可能预测这服务最后每天的使用量能达到100次,但实际并没人用,因为可能用户都不知道有这么一项功能)
确定一个SLO,和服务怎样运行也有关系(how service to perform)

SLA
服务级别的协议,可能是明确的协议,也可能是不明确的(implicit,比如约定俗成的、没有纸面协定)
这种协定可能是,如果服务失效、或者达不到预期的效果,该怎样做。一般是赔偿、退款,当然也有其他形式。一般来说,SRE是不参与SLA的制定,因为SLA更靠近商务层面或者产品设计层面。
比如谷歌搜素这项服务,并没有暴露给用户的SLI,但是却有和全世界都签订协议,也就是SLA。(你注册谷歌账号时,一大堆的文字)

SLI实践

了解你的用户关心什么

你不需要把监控系统中每个metric都视为SLI,选择尽可能少的SLI,但这些SLI却能说明服务是否健康。这些SLI应该:
用户侧系统(user-facing serving systems):可用性(a)延迟(latency)服务生产力(throughput)。换句话说:服务能响应用户的请求吗?响应要耗时多久?我们能处理多少请求?(个人心得:很多时候,我们喜欢在监控系统的dashboard上把agent获取到的数据全都摆上去,看起来很高大上,但却连服务“能”处理多少请求都无法了解,这里能处理多少请求从另外一个角度讲就是服务的饱和度)
存储系统(storage systems):延迟,可用性和持久性。换句话说:成功写数据需要多久?是否能正确获取到想要的数据?当我们需要这个数据时它是否还在那儿(这应该指的是缓存)
大数据系统(big data systems):对于数据处理管道(data processing pipeline),就需要去关注生产力与端对端的延迟(end-to-end latency)换句话说:有多少数据被处理?从获取数据到处理完成耗时多少?
对于所有系统,还需要关注正确度(correctness):服务返回的是否是正确的数据?正确度是关注服务健康的重要的SLI

收集indicators

我们绝大多数情况都是从服务侧收集的,比如使用borgmon或prometheus,但是我们也应该关注用户侧的指标收集。

聚合

本文转自 https://www.jianshu.com/p/a9e0cd4c55b4,如有侵权,请联系删除。

点赞
收藏
评论区
推荐文章
blmius blmius
3年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
Jacquelyn38 Jacquelyn38
3年前
2020年前端实用代码段,为你的工作保驾护航
有空的时候,自己总结了几个代码段,在开发中也经常使用,谢谢。1、使用解构获取json数据let jsonData  id: 1,status: "OK",data: 'a', 'b';let  id, status, data: number   jsonData;console.log(id, status, number )
Wesley13 Wesley13
3年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Stella981 Stella981
3年前
DOIS 2019 DevOps国际峰会北京站来袭~
DevOps国际峰会是国内唯一的国际性DevOps技术峰会,由OSCAR 联盟指导、DevOps时代社区与高效运维社区联合主办,共邀全球80余名顶级专家畅谈DevOps体系与方法、过程与实践、工具与技术。会议召开时间:2019070508:00至2019070618:00结束会议召开地点:北京主办单位:DevOps
Wesley13 Wesley13
3年前
00:Java简单了解
浅谈Java之概述Java是SUN(StanfordUniversityNetwork),斯坦福大学网络公司)1995年推出的一门高级编程语言。Java是一种面向Internet的编程语言。随着Java技术在web方面的不断成熟,已经成为Web应用程序的首选开发语言。Java是简单易学,完全面向对象,安全可靠,与平台无关的编程语言。
Stella981 Stella981
3年前
Android蓝牙连接汽车OBD设备
//设备连接public class BluetoothConnect implements Runnable {    private static final UUID CONNECT_UUID  UUID.fromString("0000110100001000800000805F9B34FB");
Stella981 Stella981
3年前
Django中Admin中的一些参数配置
设置在列表中显示的字段,id为django模型默认的主键list_display('id','name','sex','profession','email','qq','phone','status','create_time')设置在列表可编辑字段list_editable
Wesley13 Wesley13
3年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
Python进阶者 Python进阶者
10个月前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这