Kubernetes 弃用策略

    Kubernetes 是一个组件众多、贡献者人数众多的大系统。 就像很多类似的软件,所提供的功能特性集合会随着时间推移而自然发生变化, 而且有时候某个功能特性可能需要被去除。被去除的可能是一个 API、 一个参数标志或者甚至某整个功能特性。为了避免影响到现有用户, Kubernetes 对于其中渐次移除的各个方面规定了一种弃用策略并遵从此策略。

    由于 Kubernetes 是一个 API 驱动的系统,API 会随着时间推移而演化, 以反映人们对问题空间的认识的变化。Kubernetes API 实际上是一个 API 集合, 其中每个成员称作“API 组(API Group)”,并且每个 API 组都是独立管理版本的。 会有三类, 每类有不同的废弃策略:

    给定的 Kubernetes 发布版本中可以支持任意数量的 API 组,且每组可以包含任意个数的版本。

    下面的规则负责指导 API 元素的弃用,具体元素包括:

    • REST 资源(也即 API 对象)
    • REST 资源的字段
    • REST 资源的注解,包含“beta”类注解但不包含“alpha”类注解
    • 枚举值或者常数值
    • 组件配置结构

    以下是跨正式发布版本时要实施的规则,不适用于对 master 或发布分支上不同提交之间的变化。

    规则 #1:只能在增加 API 组版本号时删除 API 元素。

    一旦在某个特定 API 组版本中添加了 API 元素,则该元素不可从该版本中删除, 且其行为也不能大幅度地变化,无论属于哪一类(GA、Alpha 或 Beta)。

    说明: 由于历史原因,Kubernetes 中存在两个“单体式(Monolithic)”API 组 - “core”(无组名)和“extensions”。这两个遗留 API 组中的资源会被逐渐迁移到更为特定领域的 API 组中。

    规则 #2:在给定的发布版本中,API 对象必须能够在不同的 API 版本之间来回转换且不造成信息丢失,除非整个 REST 资源在某些版本中完全不存在。

    例如,一个对象可被用 v1 来写入之后用 v2 来读出并转换为 v1,所得到的 v1 必须与原来的 v1 对象完全相同。v2 中的表现形式可能与 v1 不同,但系统知道如何在两个版本之间执行双向转换。 此外,v2 中添加的所有新字段都必须能够转换为 v1 再转换回来。这意味着 v1 必须添加一个新的等效字段或者将其表现为一个注解。

    规则 #3:给定类别的 API 版本不可被弃用以支持稳定性更差的 API 版本。

    • 一个正式发布的(GA)API 版本可替换 Beta 或 Alpha API 版本。
    • Alpha API 版本可以替换早期的 Alpha API 版本,但 不可以 替换 Beta 或正式的 API 版本。

    规则 #4a:API 生命周期由 API 稳定性级别决定

    • GA API 版本可以被标记为已弃用,但不得在 Kubernetes 的主要版本中删除
    • Beta API 版本在引入后不超过 9 个月或 3 个次要版本(以较长者为准)将被弃用, 并且在弃用后 9 个月或 3 个次要版本(以较长者为准)不再提供服务
    • Alpha API 版本可能会在任何版本中被删除,不另行通知

    这确保了 Beta API 支持涵盖了最多 2 个版本的支持版本偏差, 并且这些 API 不会在不稳定的 Beta 版本上停滞不前,积累的生产使用数据将在对 Beta API 的支持结束时中断。

    说明:

    目前没有删除正式版本 API 的 Kubernetes 主要版本修订计划。

    说明: 在 被解决之前, 已经被保存到持久性存储中的 API 版本都不可以被去除。 你可以禁止这些版本所对应的 REST 末端(在符合本文中弃用时间线的前提下), 但是 API 服务器必须仍能解析和转换存储中以前写入的数据。

    规则 #4b:标记为“preferred(优选的)” API 版本和给定 API 组的 “storage version(存储版本)”在既支持老版本也支持新版本的 Kubernetes 发布版本出来以前不可以提升其版本号。

    以上所有规则最好通过例子来说明。假定现有 Kubernetes 发行版本为 X,其中引入了新的 API 组。 大约每隔 4 个月会有一个新的 Kubernetes 版本被发布(每年 3 个版本)。 下面的表格描述了在一系列后续的发布版本中哪些 API 版本是受支持的。

    发布版本API 版本优选/存储版本注释
    Xv1alpha1v1alpha1
    X+1v1alpha2v1alpha2
    • v1alpha1 被去除,发布说明中会包含 “action required(采取行动)” 说明
    X+2v1beta1v1beta1
    • v1alpha2 被去除,发布说明中包含对应的 “action required(采取行动)” 说明
    X+3v1beta2、v1beta1(已弃用)v1beta1
    • v1beta1 被弃用,发布说明中包含对应的 “action required(采取行动)” 说明
    X+4v1beta2、v1beta1(已弃用)v1beta2
    X+5v1、v1beta1(已弃用)、v1beta2(已弃用)v1beta2
    • v1beta2 被弃用,发布说明中包含对应的 “action required(采取行动)” 说明
    X+6v1、v1beta2(已弃用)v1
    • v1beta1 被去除,发布说明中包含对应的 “action required(采取行动)” 说明
    X+7v1、v1beta2(已弃用)v1
    X+8v2alpha1、v1v1
    • v1beta2 被去除,发布说明中包含对应的 “action required(采取行动)” 说明
    X+9v2alpha2、v1v1
    • v2alpha1 被删除,发布说明中包含对应的 “action required(采取行动)” 说明
    X+10v2beta1、v1v1
    • v2alpha2 被删除,发布说明中包含对应的 “action required(采取行动)” 说明
    X+11v2beta2、v2beta1(已弃用)、v1v1
    • v2beta1 被弃用,发布说明中包含对应的 “action required(采取行动)” 说明
    X+12v2、v2beta2(已弃用)、v2beta1(已弃用)、v1(已弃用)v1
    • v2beta2 已被弃用,发布说明中包含对应的 “action required(采取行动)” 说明
    • v1 已被弃用,取而代之的是 v2,但不会被删除
    X+13v2、v2beta1(已弃用)、v2beta2(已弃用)、v1(已弃用)v2
    X+14v2、v2beta2(已弃用)、v1(已弃用)v2
    • v2beta1 被删除,发布说明中包含对应的 “action required(采取行动)” 说明
    X+15v2、v1(已弃用)v2
    • v2beta2 被删除,发布说明中包含对应的 “action required(采取行动)” 说明

    考虑一个假想的名为 Widget 的 REST 资源,在上述时间线中位于 API v1,而现在打算将其弃用。 我们会在文档和中与 X+1 版本的发布同步记述此弃用决定。 Wdiget 资源仍会在 API 版本 v1(已弃用)中存在,但不会出现在 v2alpha1 中。 Widget 资源会 X+8 发布版本之前(含 X+8)一直存在并可用。 只有在发布版本 X+9 中,API v1 寿终正寝时,Widget 才彻底消失,相应的资源行为也被移除。

    从 Kubernetes v1.19 开始,当 API 请求被发送到一个已弃用的 REST API 末端时:

    1. 该请求会导致对应的审计事件中会增加一个注解 "k8s.io/deprecated":"true"

    2. kube-apiserver 进程的 apiserver_requested_deprecated_apis 度量值会被设置为 1。 该度量值还附带 、versionresourcesubresource 标签 (可供添加到度量值 apiserver_request_total 上), 和一个 标签,标明该 API 将消失的 Kubernetes 发布版本。 下面的 Prometheus 查询会返回对 v1.22 中将移除的、已弃用的 API 的请求的信息:

    REST 资源的字段

    就像整个 REST 资源一样,在 API v1 中曾经存在的各个字段在 API v1 被移除之前必须一直存在且起作用。 与整个资源上的规定不同,v2 API 可以选择为字段提供不同的表示方式, 只要对应的资源对象可在不同版本之间来回转换即可。 例如,v1 版本中一个名为 “magnitude” 的已弃用字段可能在 API v2 中被命名为 “deprecatedMagnitude”。 当 v1 最终被移除时,废弃的字段也可以从 v2 中移除。

    就像前文讲述的 REST 资源及其中的单个字段一样,API v1 中所支持的常数值必须在 API v1 被移除之前一直存在且起作用。

    组件配置结构

    组件的配置也是有版本的,并且按 REST 资源的方式来管理。

    随着时间推移,Kubernetes 会引入粒度更细的 API 版本。 到那时,这里的规则会根据需要进行调整。

    Kubernetes 系统中包含若干不同的、相互协作的程序。 有时,Kubernetes 可能会删除这些程序的某些标志或 CLI 命令(统称“命令行元素”)。 这些程序可以天然地划分到两个大组中:面向用户的和面向管理员的程序。 二者之间的弃用策略略有不同。 除非某个标志显示地通过前缀或文档来标明其为“alpha”或“beta”, 该标志要被视作正式发布的(GA)。

    命令行元素相当于系统的 API 的一部分,不过因为它们并没有采用 REST API 一样的方式来管理版本,其弃用规则规定如下:

    规则 #5a:面向用户的命令行元素(例如,kubectl)必须在其宣布被弃用其在以下时长内仍能使用:

    • GA:12 个月或者 2 个发布版本(取其较长者)
    • Beta:3 个月或者 1 个发布版本(取其较长者)
    • Alpha:0 发布版本

    规则 #5b:面向管理员的命令行元素(例如,kubelet)必须在其被宣布弃用之后以下时长内保持可用:

    • GA:6 个月或 1 个发行版本(取其较长者)
    • Beta: 3 个月或 1 个发行版本(取其较长者)
    • Alpha: 0 个发布版本

    规则 #6:被弃用的 CLI 元素在被用到时必须能够产生警告,而警告的产生是可以被禁止的。

    在一些较偶然的情形下,某 Kubernetes 发行版本需要弃用系统的某项功能特性或者行为, 而对应的功能特性或行为并不受 API 或 CLI 控制。在这种情况下,其弃用规则如下:

    规则 #7:被弃用的行为必须在被宣布弃用之后至少 1 年时间内必须保持能用。

    上述规则的一个例外是 特性门控(Feature Gate)。特性门控是一些键值偶对, 允许用户启用或禁用一些试验性的功能特性。

    特性门控意在覆盖功能特性的整个开发周期,它们无意成为长期的 API。 因此,它们会在某功能特性正式发布或被抛弃之后被弃用和删除。

    随着一个功能特性经过不同的成熟阶段,相关的特性门控也会演化。 与功能特性生命周期对应的特性门控状态为:

    • Alpha:特性门控默认被禁用,只能由用户显式启用。
    • Beta:特性门控默认被弃用,可被用户显式禁用。
    • GA: 特性门控被弃用(参见),并且不再起作用。
    • GA,弃用窗口期结束:特性门控被删除,不再接受调用。

    弃用

    功能特性在正式发布之前的生命周期内任何时间点都可被移除。 当未正式发布的功能特性被移除时,它们对应的特性门控也被弃用。

    当尝试禁用一个不再起作用的特性门控时,该调用会失败,这样可以避免毫无迹象地执行一些不受支持的场景。

    在某些场合,移除一个即将正式发布的功能特性需要很长时间。 特性门控可以保持其功能,直到对应的功能特性被彻底去除,直到那时特性门控自身才可被弃用。

    由于移除一个已经正式发布的功能特性对应的特性门控也需要一定时间,对特性门控的调用可能一直被允许, 前提是特性门控对功能本身无影响且特性门控不会引发任何错误。

    意在允许用户禁用的功能特性应该包含一个在相关联的特性门控中禁用该功能的机制。

    特性门控的版本管理与之前讨论的组件版本管理不同,因此其对应的弃用策略如下:

    规则 #8:特性门控所对应的功能特性经历下面所列的成熟性阶段转换时,特性门控必须被弃用。 特性门控弃用时必须在以下时长内保持其功能可用:

    • Beta 特性转为 GA:6 个月或者 2 个发布版本(取其较长者)
    • Beta 特性转为丢弃:3 个月或者 1 个发布版本(取其较长者)
    • Alpha 特性转为丢弃:0 个发布版本

    规则 #9:已弃用的特色门控再被使用时必须给出警告回应。当特性门控被弃用时, 必须在发布说明和对应的 CLI 帮助信息中通过文档宣布。 警告信息和文档都要标明是否某特性门控不再起作用。

    Kubernetes 控制平面的每个组件都公开度量值(通常是 /metrics 端点),它们通常由集群管理员使用。 并不是所有的度量值都是同样重要的:一些度量值通常用作 SLIs 或被使用来确定 SLOs,这些往往比较重要。 其他度量值在本质上带有实验性,或者主要用于 Kubernetes 开发过程。

    因此,度量值分为两个稳定性类别(ALPHASTABLE); 此分类会影响在 Kubernetes 发布版本中移除某度量值。 所对应的分类取决于对该度量值重要性的预期。 弃用和移除度量值的规则如下:

    规则 #9a: 对于相应的稳定性类别,度量值起作用的周期必须不小于:

    • STABLE: 4 个发布版本或者 12 个月 (取其较长者)
    • ALPHA: 0 个发布版本

    规则 #9b: 在度量值被宣布启用之后,它起作用的周期必须不小于:

    • ALPHA: 0 个发布版本

    已弃用的度量值将在其描述文本前加上一个已弃用通知字符串 ‘(Deprecated from x.y)’, 并将在度量值被记录期间发出警告日志。就像稳定的、未被弃用的度量指标一样, 被弃用的度量值将自动注册到 metrics 端点,因此被弃用的度量值也是可见的。

    在随后的版本中(当度量值 deprecatedVersion 等于 当前 Kubernetes 版本 - 3), 被弃用的度量值将变成 隐藏(Hidden) metric 度量值。 与被弃用的度量值不同,隐藏的度量值将不再被自动注册到 metrics 端点(因此被隐藏)。 但是,它们可以通过可执行文件的命令行标志显式启用 ()。 如果集群管理员不能对早期的弃用警告作出反应,这一设计就为他们提供了抓紧迁移弃用度量值的途径。 隐藏的度量值应该在再过一个发行版本后被删除。