多集群使用 Kubeprober
Master 端仅有一个 probe-master 组件,其依赖于 Kubernetes 的 Webhook 进行资源的前置校验工作。使用 cert-manager 服务进行 Webhook 证书的自动签发前,需先部署 cert-manager 服务,待 cert-manager 的 Pod 全部成功启动后再安装后续组件。
```shell script kubectl apply -f https://github.com/jetstack/cert-manager/releases/download/v1.3.1/cert-manager.yaml
Agent 端包含 probe-agent 与 probe-tunnel 组件,probe-tunnel 通过 WebSocket 与 probe-master 建立连接,提供从 probe-master 到被管理集群的控制通道,即 probe-agent 管理诊断项的生命周期,包括创建、执行、删除等。
由于 Kubernetes 本身没有集群名的概念,因此 Agent 端中加入该项,结合上文提及的 Secret-key,需在 Agent 端配置 Master 地址、 集群名、Secret-key 等内容。
```shell script vim deployment/probe-agent.yaml
apiVersion: v1 kind: ConfigMap metadata: name: probeagent namespace: system data: probe-conf.yaml: | probe_master_addr: cluster_name: erda-cloud secret_key: your-token-here
### 部署 Agent 组件
```shell script
APP=probe-agent make deploy
Kubeprober 对诊断项采用中心管理的方式,通过为 Cluster 添加 probe label 将诊断项关联至某一个集群中。
在 probe-master 所在的集群创建 Probe 资源(位于 Default 的 Namespace 下)。
apiVersion: kubeprober.erda.cloud/v1
kind: Probe
metadata:
name: k8s
spec:
# unit: minute
runInterval: 30
template:
containers:
- env:
valueFrom:
fieldRef:
fieldPath: spec.nodeName
name: k8s
image: kubeprober/probe-k8s:v0.1.5
resources:
requests:
cpu: 10m
memory: 50Mi
restartPolicy: Never
configs:
env:
- name: PRIVATE_DOMAIN
- name: DNS_CHECK_NAMESPACE
value: "kube-system"
- name: DNS_NODE_SELECTOR
value: "k8s-app=kube-dns"
- name: PUBLIC_DOMAIN
value: "www.baidu.com"
上述 Probe 已指定运行策略,即每隔 30 分钟运行一次 K8s 诊断。
```shell script kubectl apply -f probe.yaml
![](http://terminus-paas.oss-cn-hangzhou.aliyuncs.com/paas-doc/2021/10/08/2ac2c3fb-d011-48c8-aee4-7321f763f297.png)
### 关联集群
通过 kubectl label 关联 Probe 和 Cluster,例如将 K8s 的 Probe 关联至 erda-cloud 集群。
```shell script
kubectl label cluster erda-cloud probe/k8s=true
创建 kubectl probe 所需配置文件,若无则 kubectl probe 自动将 ws://probe-master.kubeprober.svc.cluster.local:8088/clusterdialer 作为 Master 地址,其他情况下可自行修改该配置文件。
```shell script vi ~/.kubeprober/config
{ “masterAddr”: “ws://probe-master.kubeprober.svc.cluster.local:8088/clusterdialer” }
除定时诊断外, Kubeprober 同样支持一次性诊断,常用于在系统变更后查看系统各功能是否可正常使用,默认诊断当前集群关联的 Probe,也可指定 Probe 进行诊断。
```shell script kubectl probe once -c erda-cloud #诊断已经 attatch 了的 probe kubectl probe once -c erda-cloud -p k8s,host #诊断特定 probe
![](http://terminus-paas.oss-cn-hangzhou.aliyuncs.com/paas-doc/2021/10/08/51d83f8f-cc53-466d-a6ca-444a8ac63b7d.png)
一次性诊断的历史记录将保存下来,可通过如下命令查看:
通过如下命令可查看历史某一次一次性诊断的诊断结果:
kubectl probe oncestatus -c erda-cloud -i 1630566675 ```