kubeadm init

    运行此命令以安装 Kubernetes 控制平面。

    运行此命令来搭建 Kubernetes 控制平面节点。

    “init” 命令执行以下阶段：

    选项

    从父命令继承的选项

    Init 命令的工作流程

    kubeadm init 命令通过执行下列步骤来启动一个 Kubernetes 控制平面节点。

    1. 在做出变更前运行一系列的预检项来验证系统状态。一些检查项目仅仅触发警告， 其它的则会被视为错误并且退出 kubeadm，除非问题得到解决或者用户指定了 --ignore-preflight-errors=<错误列表> 参数。

    2. 生成一个自签名的 CA 证书来为集群中的每一个组件建立身份标识。 用户可以通过将其放入 --cert-dir 配置的证书目录中（默认为 /etc/kubernetes/pki） 来提供他们自己的 CA 证书以及/或者密钥。 APIServer 证书将为任何 --apiserver-cert-extra-sans 参数值提供附加的 SAN 条目，必要时将其小写。

    3. 将 kubeconfig 文件写入 /etc/kubernetes/ 目录以便 kubelet、控制器管理器和调度器用来连接到 API 服务器，它们每一个都有自己的身份标识，同时生成一个名为 admin.conf 的独立的 kubeconfig 文件，用于管理操作。

    4. 为 API 服务器、控制器管理器和调度器生成静态 Pod 的清单文件。假使没有提供一个外部的 etcd 服务的话，也会为 etcd 生成一份额外的静态 Pod 清单文件。

      静态 Pod 的清单文件被写入到 /etc/kubernetes/manifests 目录； kubelet 会监视这个目录以便在系统启动的时候创建 Pod。

    5. 对控制平面节点应用标签和污点标记以便不会在它上面运行其它的工作负载。

    6. 生成令牌，将来其他节点可使用该令牌向控制平面注册自己。 如 kubeadm token 文档所述， 用户可以选择通过 --token 提供令牌。

    7. 为了使得节点能够遵照和 TLS 启动引导 这两份文档中描述的机制加入到集群中，kubeadm 会执行所有的必要配置：

      • 创建一个 ConfigMap 提供添加集群节点所需的信息，并为该 ConfigMap 设置相关的 RBAC 访问规则。

      • 允许启动引导令牌访问 CSR 签名 API。

      • 配置自动签发新的 CSR 请求。

      更多相关信息，请查看 。

    8. 通过 API 服务器安装一个 DNS 服务器 (CoreDNS) 和 kube-proxy 附加组件。 在 Kubernetes 版本 1.11 和更高版本中，CoreDNS 是默认的 DNS 服务器。 请注意，尽管已部署 DNS 服务器，但直到安装 CNI 时才调度它。

      警告：

      从 v1.18 开始，在 kubeadm 中使用 kube-dns 的支持已被废弃，并已在 v1.21 版本中移除。

    在 kubeadm 中使用 init 阶段

    Kubeadm 允许你使用 kubeadm init phase 命令分阶段创建控制平面节点。

    要查看阶段和子阶段的有序列表，可以调用 kubeadm init --help。 该列表将位于帮助屏幕的顶部，每个阶段旁边都有一个描述。 注意，通过调用 kubeadm init，所有阶段和子阶段都将按照此确切顺序执行。

    某些阶段具有唯一的标志，因此，如果要查看可用选项的列表，请添加 --help，例如：

    1. sudo kubeadm init phase control-plane controller-manager --help

    你也可以使用 --help 查看特定父阶段的子阶段列表：

    kubeadm init 还公开了一个名为 --skip-phases 的参数，该参数可用于跳过某些阶段。 参数接受阶段名称列表，并且这些名称可以从上面的有序列表中获取。

    例如：

    1. sudo kubeadm init phase control-plane all --config=configfile.yaml
    2. sudo kubeadm init phase etcd local --config=configfile.yaml
    3. # 你现在可以修改控制平面和 etcd 清单文件
    4. sudo kubeadm init --skip-phases=control-plane,etcd --config=configfile.yaml

    该示例将执行的操作是基于 configfile.yaml 中的配置在 /etc/kubernetes/manifests 中写入控制平面和 etcd 的清单文件。 这允许你修改文件，然后使用 --skip-phases 跳过这些阶段。 通过调用最后一个命令，你将使用自定义清单文件创建一个控制平面节点。

    特性状态： Kubernetes v1.22 [beta]

    或者，你可以使用 InitConfiguration 下的 skipPhases 字段。

    注意：

    配置文件的功能仍然处于 alpha 状态并且在将来的版本中可能会改变。

    通过一份配置文件而不是使用命令行参数来配置 kubeadm init 命令是可能的， 但是一些更加高级的功能只能够通过配置文件设定。 这份配置文件通过 --config 选项参数指定的， 它必须包含 ClusterConfiguration 结构，并可能包含更多由 ---\n 分隔的结构。 在某些情况下，可能不允许将 --config 与其他标志混合使用。

    可以使用 kubeadm config print 命令打印出默认配置。

    如果你的配置没有使用最新版本， 推荐使用 命令进行迁移。

    关于配置的字段和用法的更多信息，你可以访问 API 参考页面。

    使用 kubeadm init 时设置特性门控

    Kubeadm 支持一组独有的特性门控，只能在 kubeadm init 创建集群期间使用。 这些特性可以控制集群的行为。特性门控会在毕业到 GA 后被移除。

    你可以使用 --feature-gates 标志来为 kubeadm init 设置特性门控， 或者你可以在用 --config 传递配置文件时添加条目到 featureGates 字段中。

    直接传递 给 kubeadm 是不支持的。 相反，可以通过使用 kubeadm API 的自定义组件来传递。

    特性门控的列表：

    说明：

    一旦特性门控变成了 GA，它的值会被默认锁定为 true。

    特性门控的描述：

    PublicKeysECDSA

    RootlessControlPlane

    设置此标志来配置 kubeadm 所部署的控制平面组件中的静态 Pod 容器 kube-apiserver、kube-controller-manager、kube-scheduler 和 etcd 以非 root 用户身份运行。 如果未设置该标志，则这些组件以 root 身份运行。 你可以在升级到更新版本的 Kubernetes 之前更改此特性门控的值。

    UnversionedKubeletConfigMap

    此标志控制 kubeadm 存储 kubelet 配置数据的 的名称。 在未指定此标志或设置为 true 的情况下，此 ConfigMap 被命名为 kubelet-config。 如果将此标志设置为 false，则此 ConfigMap 的名称会包括 Kubernetes 的主要版本和次要版本（例如：kubelet-config-1.25）。 Kubeadm 会确保用于读写 ConfigMap 的 RBAC 规则适合你设置的值。 当 kubeadm 写入此 ConfigMap 时（在 kubeadm init 或 kubeadm upgrade apply 期间）， kubeadm 根据 UnversionedKubeletConfigMap 的设置值来执行操作。 当读取此 ConfigMap 时（在 kubeadm join、kubeadm reset、kubeadm upgrade ... 期间）， kubeadm 尝试首先使用无版本（后缀）的 ConfigMap 名称； 如果不成功，kubeadm 将回退到使用该 ConfigMap 的旧（带版本号的）名称。

    添加 kube-proxy 参数

    kubeadm 配置中有关 kube-proxy 的说明请查看：

    使用 kubeadm 启用 IPVS 模式的说明请查看：

    向控制平面组件传递自定义的命令行参数

    有关向控制平面组件传递命令行参数的说明请查看：

    在没有互联网连接的情况下运行 kubeadm

    要在没有互联网连接的情况下运行 kubeadm，你必须提前拉取所需的控制平面镜像。

    你可以使用 kubeadm config images 子命令列出并拉取镜像：

    1. kubeadm config images list
    2. kubeadm config images pull

    你可以通过 --config 把 传递给上述命令来控制 kubernetesVersion 和 imageRepository 字段。

    kubeadm 需要的所有默认 registry.k8s.io 镜像都支持多种硬件体系结构。

    默认情况下，kubeadm 会从 registry.k8s.io 仓库拉取镜像。如果请求的 Kubernetes 版本是 CI 标签 （例如 ci/latest），则使用 gcr.io/k8s-staging-ci-images。

    你可以通过使用 来重写此操作。 允许的自定义功能有：

    • 提供影响镜像版本的 kubernetesVersion。
    • 使用其他的 imageRepository 来代替 registry.k8s.io。
    • 为 etcd 或 CoreDNS 提供特定的 imageRepository 和 imageTag。

    由于向后兼容的原因，使用 imageRepository 所指定的定制镜像库可能与默认的 镜像路径不同。例如，某镜像的子路径可能是 registry.k8s.io/subpath/image， 但使用自定义仓库时默认为 my.customrepository.io/image。

    确保将镜像推送到 kubeadm 可以使用的自定义仓库的路径中，你必须：

    • 使用 kubeadm config images {list|pull} 从 registry.k8s.io 的默认路径中拉取镜像。
    • 将镜像推送到 kubeadm config images list --config=config.yaml 的路径， 其中 config.yaml 包含自定义的 imageRepository 和/或用于 etcd 和 CoreDNS 的 imageTag。
    • 将相同的 config.yaml 传递给 kubeadm init。

    定制沙箱（pause）镜像

    如果需要为这些组件设置定制的镜像， 你需要在你的中完成一些配置。 参阅你的容器运行时的文档以了解如何改变此设置。 对于某些容器运行时而言， 你可以在容器运行时主题下找到一些建议。

    将控制平面证书上传到集群

    通过将参数 --upload-certs 添加到 kubeadm init，你可以将控制平面证书临时上传到集群中的 Secret。 请注意，此 Secret 将在 2 小时后自动过期。这些证书使用 32 字节密钥加密，可以使用 --certificate-key 指定该密钥。 通过将 --control-plane 和 --certificate-key 传递给 kubeadm join， 可以在添加其他控制平面节点时使用相同的密钥下载证书。

    以下阶段命令可用于证书到期后重新上传证书：

    如果未将参数 --certificate-key 传递给 kubeadm init 和 kubeadm init phase upload-certs， 则会自动生成一个新密钥。

    以下命令可用于按需生成新密钥：

    1. kubeadm certs certificate-key

    使用 kubeadm 管理证书

    有关使用 kubeadm 进行证书管理的详细信息， 请参阅。 该文档包括有关使用外部 CA、自定义证书和证书续订的信息。

    管理 kubeadm 为 kubelet 提供的 systemd 配置文件

    kubeadm 包自带了关于 systemd 如何运行 kubelet 的配置文件。 请注意 kubeadm 客户端命令行工具永远不会修改这份 systemd 配置文件。 这份 systemd 配置文件属于 kubeadm DEB/RPM 包。

    有关更多信息，请阅读。

    结合 CRI 运行时使用 kubeadm

    默认情况下，kubeadm 尝试检测你的容器运行环境。有关此检测的更多详细信息，请参见 。

    默认情况下，kubeadm 基于机器的主机地址分配一个节点名称。你可以使用 --node-name 参数覆盖此设置。 此标识将合适的 值传递给 kubelet。

    要注意，重载主机名可能会与云驱动发生冲突。

    kubeadm 自动化

    除了像文档 kubeadm 基础教程中所描述的那样， 将从 kubeadm init 取得的令牌复制到每个节点，你还可以并行地分发令牌以实现更简单的自动化。 要实现自动化，你必须知道控制平面节点启动后将拥有的 IP 地址，或使用 DNS 名称或负载均衡器的地址。

    1. 生成一个令牌。这个令牌必须采用的格式为：<6 个字符的字符串>.<16 个字符的字符串>。 更加正式的说法是，它必须符合正则表达式：[a-z0-9]{6}\.[a-z0-9]{16}。

      kubeadm 可以为你生成一个令牌：

      1. kubeadm token generate

    2. 使用这个令牌同时启动控制平面节点和工作节点。这些节点一旦运行起来应该就会互相寻找对方并且形成集群。 同样的 --token 参数可以同时用于 kubeadm init 和 kubeadm join 命令。

    3. 当接入其他控制平面节点时，可以对 --certificate-key 执行类似的操作。可以使用以下方式生成密钥：

    一旦集群启动起来，你就可以从控制平面节点的 /etc/kubernetes/admin.conf 文件获取管理凭证， 并使用这个凭证同集群通信。

    注意这种搭建集群的方式在安全保证上会有一些宽松，因为这种方式不允许使用 --discovery-token-ca-cert-hash 来验证根 CA 的哈希值 （因为当配置节点的时候，它还没有被生成）。 更多信息请参阅 文档。

    • 进一步阅读了解
    • kubeadm join 启动一个 Kubernetes 工作节点并且将其加入到集群
    • 将 Kubernetes 集群升级到新版本
    • kubeadm reset 恢复 kubeadm init 或 命令对节点所作的变更