#如何为导入的标准 Kubernetes 集群配置审计收集？

#场景描述

将标准 Kubernetes 集群导入平台后，必须先在集群上启用 Kubernetes API server 审计日志记录，平台才能从该集群收集审计数据。

对于控制平面节点由您管理的标准 Kubernetes 集群，请使用此操作步骤，例如基于 kubeadm 的集群。此操作步骤不适用于由云服务提供商管理的 Kubernetes 服务，因为您无法登录或修改其控制平面节点。

#前提条件

• 标准 Kubernetes 集群已导入平台。
• 您可以登录集群中的每个控制平面节点。
• 集群使用标准 kubeadm 风格的 API server 静态 Pod 清单路径：/etc/kubernetes/manifests/kube-apiserver.yaml。

#操作步骤

1. 创建一个本地 policy.yaml 文件作为审计策略。

   根据 Kubernetes 版本设置 apiVersion：

   • 早于 Kubernetes 1.24：audit.k8s.io/v1beta1
   • Kubernetes 1.24 及更高版本：audit.k8s.io/v1

   使用以下内容：

   apiVersion: audit.k8s.io/v1
   kind: Policy
   omitStages:
     - "RequestReceived"
   rules:
     - level: None
       users:
         - system:kube-controller-manager
         - system:kube-scheduler
         - system:serviceaccount:kube-system:endpoint-controller
       verbs: ["get", "update"]
       namespaces: ["kube-system"]
       resources:
         - group: ""
           resources: ["endpoints"]
     - level: None
       nonResourceURLs:
         - /healthz*
         - /version
         - /swagger*
     - level: None
       resources:
         - group: ""
           resources: ["events"]
     - level: None
       resources:
         - group: "devops.alauda.io"
     - level: None
       verbs: ["get", "list", "watch"]
     - level: None
       namespaces:
         - kube-system
         - cpaas-system
         - alauda-system
         - istio-system
         - kube-node-lease
       resources:
         - group: "coordination.k8s.io"
           resources: ["leases"]
     - level: None
       resources:
         - group: "authorization.k8s.io"
           resources: ["subjectaccessreviews", "selfsubjectaccessreviews"]
         - group: "authentication.k8s.io"
           resources: ["tokenreviews"]
     - level: Metadata
       resources:
         - group: ""
           resources: ["secrets", "configmaps"]
     - level: RequestResponse
       resources:
         - group: ""
         - group: "aiops.alauda.io"
         - group: "apps"
         - group: "app.k8s.io"
         - group: "authentication.istio.io"
         - group: "auth.alauda.io"
         - group: "autoscaling"
         - group: "asm.alauda.io"
         - group: "clusterregistry.k8s.io"
         - group: "crd.alauda.io"
         - group: "infrastructure.alauda.io"
         - group: "monitoring.coreos.com"
         - group: "networking.istio.io"
         - group: "networking.k8s.io"
         - group: "portal.alauda.io"
         - group: "rbac.authorization.k8s.io"
         - group: "storage.k8s.io"
         - group: "tke.cloud.tencent.com"
         - group: "devopsx.alauda.io"
         - group: "core.katanomi.dev"
         - group: "deliveries.katanomi.dev"
         - group: "integrations.katanomi.dev"
         - group: "builds.katanomi.dev"
         - group: "operators.katanomi.dev"
         - group: "tekton.dev"
         - group: "operator.tekton.dev"
         - group: "eventing.knative.dev"
         - group: "flows.knative.dev"
         - group: "messaging.knative.dev"
         - group: "operator.knative.dev"
         - group: "sources.knative.dev"
         - group: "operator.devops.alauda.io"
     - level: Metadata
   TIP

   如果集群版本早于 1.24，则仅将 apiVersion 字段更改为 audit.k8s.io/v1beta1。策略内容的其余部分保持不变。

2. 将 policy.yaml 上传到每个控制平面节点上的 /etc/kubernetes/audit/。

   WARNING

   • 如果集群包含多个控制平面节点，请将文件上传到每个节点。
   • 如果目录不存在，请手动创建：/etc/kubernetes/audit/

3. 在每个控制平面节点上更新 /etc/kubernetes/manifests/kube-apiserver.yaml。

   在 spec.containers[].command 中添加或更新以下与审计相关的标志：

   标志	必需	描述
   --audit-policy-file	是	必须设置为 /etc/kubernetes/audit/policy.yaml。
   --audit-log-format	是	必须设置为 json。
   --audit-log-path	是	必须设置为 /etc/kubernetes/audit/audit.log。
   --audit-log-mode	否	建议值：batch。
   --audit-log-maxsize	否	审计日志文件的最大大小，单位为 MiB。建议值：200。
   --audit-log-maxbackup	否	保留的审计日志文件数量。建议值：2。

   示例：

   - --audit-log-format=json
   - --audit-log-maxbackup=2
   - --audit-log-maxsize=200
   - --audit-log-mode=batch
   - --audit-log-path=/etc/kubernetes/audit/audit.log
   - --audit-policy-file=/etc/kubernetes/audit/policy.yaml

4. 将审计目录挂载配置添加到同一个 kube-apiserver.yaml 文件中。

   在 spec.containers[].volumeMounts 下添加以下项目：

   - mountPath: /etc/kubernetes/audit
     name: k8s-audit

   在 spec.volumes 下添加以下项目：

   - hostPath:
       path: /etc/kubernetes/audit
       type: DirectoryOrCreate
     name: k8s-audit
   WARNING

   • 如果集群包含多个控制平面节点，请在每个控制平面节点上更新清单。
   • volumeMounts[].name 值必须与对应的 volumes[].name 值一致。
   • 请勿更改挂载路径 /etc/kubernetes/audit。

5. 保存文件并验证配置是否生效。

   检查每个控制平面节点上是否生成了 /etc/kubernetes/audit/audit.log。如果文件存在且包含审计记录，则表示配置已生效。

   ls -l /etc/kubernetes/audit/audit.log
   tail -n 20 /etc/kubernetes/audit/audit.log