Knative Autoscaler 自定义弹性伸缩

天翼云开发者社区
• 阅读 520

本文分享自天翼云开发者社区@《Knative Autoscaler 自定义弹性伸缩》,作者: 我是小朋友

背景 如今各大云厂商都开始提供 Serverless Kubernetes 服务,简化集群管理,降低运维管理负担,让 Kubernetes 更加简单。那么问题来了,一个系统到底需要具备怎样的能力才能更好地支撑 Serverless 应用呢? Serverless 应用需要的是面向应用的管理功能,比如:升级、回滚、灰度发布、流量管理以及弹性伸缩等功能。 Knative 就是建立在 Kubernetes 之上的 Serverless 应用编排框架。Knative 的主要功能之一是自动缩放应用程序的副本,包括在没有收到流量时将应用程序缩放为 0。默认 Autoscaler 组件监视流向应用程序的流量,并根据配置的指标向上或向下扩展副本。本期主要讲解 Knative Autoscaler 的原理和使用。 说明: 如需实践 Knative Autoscaler 的使用,您可以先了解以下内容。 Kubernetes:需要准备一个 Kubernetes 的集群,并学习相关的命令。 Knative Serving:您可以按照入门指南安装 Knative 。 Autoscaler 原理 Autoscaler 根据监控到的指标(concurrency、rps、cpu等),并根据配置的指标来放大或缩小副本,从而实现自动扩缩容。

(来源:Kubernetes Autoscaler) KPA VS HPA Knative Serving 支持 Knative Pod Autoscaler(KPA)和 Kubernetes 的 Horizontal Pod Autoscaler(HPA)。以下是不同 scaler 的功能和局限性。 KPA Knative Serving 核心的一部分,并且在安装 Knative Serving 后默认启用; 支持从 0 扩展功能; 不支持基于 CPU 的自动缩放。 HPA 不是 Knative Serving 核心的一部分,安装 Kubernetes 后默认启动; 不支持从 0 扩展功能; 支持基于 CPU 的自动缩放。 scaling 配置 通过以上介绍,我们初步了解了Autoscaler执行原理,接下来介绍如何配置KPA或HPA。 scaling 配置用于指定放大和缩小的行为,可以为两个方向指定一个稳定窗口,以防止缩放目标中的副本数量波动。类似地,指定扩展策略可以控制扩展时副本的变化率。 可以使用 annotations 配置 Autoscaler 实现的类型(KPA 或 HPA); Global settings key:pod-autoscaler-class; Per-revision annotation key:autoscaling.knative.dev/class; Possible values:“kpa.autoscaling.knative.dev” or “hpa.autoscaling.knative.dev”; Default:“kpa.autoscaling.knative.dev”;

配置示例: apiVersion: serving.knative.dev/v1 kind: Service metadata: name: helloworld-go namespace: default spec: template: metadata: annotations: autoscaling.knative.dev/class: "kpa.autoscaling.knative.dev" spec: containers:

  • image: gcr.io/knative-samples/helloworld-go

配置指标说明 度量标准配置定义自动定标器监视哪种度量标准类型,配置参数说明如下: Setting metrics per revision: 对于 per-revision 配置,这是使用 autoscaling.knative.dev/metric 注解确定的。可以 per-revision 配置的可能的度量标准类型取决于使用的 Autoscaler 实现的类型: 默认的 KPA Autoscaler 支持并发和 rps 指标; HPA Autoscaler 支持 cpu 指标。 Targets:配置 Targets 会为 Autoscaler 提供一个值,它会尝试为 revision 的配置指标维护该值。 Configuring scale to zero:只有在使用 Knative Pod Autoscaler(KPA) 时才能启用缩放为零,并且只能全局配置。 Enable scale to zero:scale to zero 值控制 Knative 是否允许副本缩小到零(如果设置为 true),或者如果设置为 false 则停止在 1 个副本。 Scale to zero grace period:指定一个上限时间限制,系统将在内部等待从零开始缩放的机器在删除最后一个副本之前就位。 Configuring concurrency:并发性决定了应用程序的每个副本在任何给定时间可以处理的并发请求数。 Soft versus hard concurrency limits:可以设置软或硬并发限制。如果同时指定了软限制和硬限制,则将使用两个值中较小的一个。这可以防止 Autoscaler 具有硬限制值不允许的目标值。 Target utilization:指定 Autoscaler 实际应针对的先前指定目标的百分比。这也称为指定副本运行的热度,这会导致 Autoscaler 在达到定义的硬限制之前扩展。 Configuring scale bounds:配置上限和下限以控制自动缩放行为。还可以指定在创建后立即将 revision 缩放到的初始比例。 Lower bound:每个修订版应具有的最小副本数。 Upper bound:每个修订版应具有的最大副本数。 Initial scale:revision 在创建后必须立即达到的初始目标比例,然后再将其标记为就绪。 Scale Down Delay:缩减延迟指定了一个时间窗口,在应用缩减决策之前,该时间窗口必须以降低的并发性通过。

配置示例 在使用默认配置情况下的 Knative Serving (KPA)。 创建一个 demo 服务。 cat <<-EOF | kubectl apply -f - apiVersion: serving.knative.dev/v1 kind: Service metadata: name: test spec: template: metadata: annotations: initial-scale: "1" allow-zero-initial-scale: "false" enable-scale-to-zero: "false" spec: containers:

  • image: wentevill/demo:latest EOF

查看 pod 状态,在一段时间没有流量的情况下,scale 到 0。 kubectl get pods

NAME READY STATUS RESTARTS AGE test-00001-deployment-c4546964-mjwqm 2/2 Running 0 15s

查看 ksvc 状态。 kubectl get ksvc

NAME URL LATESTCREATED LATESTREADY READY REASON test http://test.default.172.31.162.220.sslip.io test-00001 test-00001 True

说明: 这里使用的是 magicDNS,使用其他的地址可能会不一样,请以实际使用为准。 访问 service 。 curl http://test.default.172.31.162.220.sslip.io

a. pod 存在:执行并返回结果。 b. pod 不存在:autoscaler 扩容(冷启动)到 1,然后执行并返回结果。 说明: 冷启动时长从毫秒到分钟级别,第一批流量可能会超时。

总结 以上就是 Knative Autoscale 的内容,通过 KPA 技术实现真正意义上的 Severless。

引用链接 [1] Knavtive Serving:https://knative.dev/docs/serving [2] Horizontal Pod Autoscaler:https://kubernetes.io/docs/tasks/run-application/horizontal-pod-autoscale [3] Kubernete Autoscaler:https://v1-17.docs.kubernetes.io/docs/tasks/run-application/horizontal-pod-autoscale/

版权声明:本文为CSDN博主「青云技术社区」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。 原文链接:https://blog.csdn.net/Qingcloudedu/article/details/120292685

点赞
收藏
评论区
推荐文章
Springfox与SpringDoc——swagger如何选择(SpringDoc入门)
本文分享自天翼云开发者社区@《》,作者:才开始学技术的小白0.引言之前写过一篇关于swagger(实际上是springfox)的使用指南(https://www.ctyun.cn/developer/article/371704742199365),涵盖了
Stella981 Stella981
3年前
Serverless Kubernetes 容器服务介绍
作者|张维阿里巴巴高级技术专家导读:ServerlessKubernetes是以容器和kubernetes为基础的Serverless服务,它提供了一种简单易用、极致弹性、最优成本和按需付费的Kubernetes容器服务,其无需节点管理和运维,无需容量规划,让用户更关注应用而非基础设施的管理。我们可以把Serverless
Stella981 Stella981
3年前
Serverless Kubernetes 入门:对 Kubernetes 做减法
作者|贤维 阿里巴巴高级技术专家导读:ServerlessKubernetes是阿里云容器服务团队对未来Kubernetes演进方向的一种探索,通过对Kubernetes做减法,降低运维管理负担,简化集群管理,让Kubernetes从复杂到简单。背景Kubernetes作为通用的容器编排系统,承载了广泛的
使用element-ui 的上传组件upload完成自定义上传到天翼云oss云服务器
本文分享自天翼云开发者社区@《》,作者:我是小朋友首先配置天翼云,如下操作1、要求在使用OOS之前,首先需要在www.ctyun.cn注册一个账号(Account)。创建AccessKeyId和AccessSecretKey。AccessKeyId和Acc
无服务器Serverless总结
本文分享自天翼云开发者社区@《》,作者:我是小朋友背景随着AWSLambda的诞生,无服务器与FaaS一起出现在舞台中,Serverless也开始进入人们的视野。全球各大云服务厂商都纷纷推出各自的Serverless平台。先了解下什么是云计算云计算是通过I
云计算之-弹性伸缩
本文分享自天翼云开发者社区@《》,作者:AE86上山了弹性伸缩弹性伸缩为用户提供高效管理计算资源的策略。用户可设定时间周期性地执行管理策略或创建实时监控策略,来管理VM实例数量,并完成对实例的环境部署,保证业务平稳顺利运行。在需求高峰时,弹性伸缩自动增加V
通通透透看无服务器计算:由来、场景和问题
本文分享自天翼云开发者社区@《》,作者:我是小朋友一、无服务器(Serverless)计算是什么云计算涌现出很多改变传统IT架构和运维方式的新技术,比如虚拟机、容器、微服务,无论这些技术应用在哪些场景,降低成本、提升效率是云服务永恒的主题。过去十年来,我们
数字先锋 | 双十一来了,零售企业如何备战?
在搭建统一云管平台方面,天翼云将多云并行的异云迁移、整合到天翼云平台中,实现统一运维管理,有效降低了大商集团云中台的运维负担。在安全能力打造方面,天翼云提供Web应用防火墙、服务安全卫士等丰富产品,可满足企业合规安全要求,护航企业平稳健康发展。
如何将物理机Windows系统迁移到VMware虚拟机?
本文分享自天翼云开发者社区@《》,作者:我是小朋友如何将物理机上的Windows系统迁移到VMware虚拟机?本文详细介绍如何使用DiskGenius免费版将物理电脑上的Windows操作系统转移至VMware虚拟机。关于迁移物理系统到VMware虚拟机V
PostgreSQL:内存结构
本文分享自天翼云开发者社区@《》,作者:我是小朋友在Postgresql中,内存大概被分为两块Localmemoryarea:为每一个backendprocess分配的内存Sharedmemoryarea:PostgreSQLserver所有的backgr
天翼云开发者社区
天翼云开发者社区
Lv1
天翼云是中国电信倾力打造的云服务品牌,致力于成为领先的云计算服务提供商。提供云主机、CDN、云电脑、大数据及AI等全线产品和场景化解决方案。
文章
696
粉丝
15
获赞
40