Kubernetes 初始化容器安全审查:镜像、权限与准入策略验证

枫少@KillBoy
枫少@KillBoy
枫少@KillBoy
管理员
456
文章
0
粉丝
云原生安全420阅读模式
AI智能摘要
初始化容器虽只运行几秒,却掌握着主应用启动闸门,镜像、权限、Secret 与共享卷的疏漏都可能让 Pod 卡在 Init 阶段并扩大风险。文章按准备、实施、验证和复盘四阶段,审查镜像摘要、运行身份、capabilities 及准入策略覆盖,重点排查只遍历 spec.containers、例外过宽等逻辑缺口,如何建立真正覆盖初始化容器的安全闭环?
— AI 生成的文章内容摘要

初始化容器在 Pod 中先于主应用容器运行,只有按顺序执行的初始化容器全部成功退出后,主应用容器才会启动。因此,安全审查如果只检查 spec.containers,就可能漏掉镜像来源、权限、Secret 访问和启动阻断条件。本文以“主应用容器已经有审查流程,但初始化容器未被完整纳入”为常见场景,按准备、实施、验证和复盘四个阶段,检查 Kubernetes 初始化容器的镜像安全、权限审查与准入策略覆盖范围。

初始化容器与主应用容器的安全审查覆盖示意

准备:先明确审查边界

识别初始化容器的启动影响

初始化容器位于 Pod 规范的 spec.initContainers 中。kubelet 会按照声明顺序运行它们,每个初始化容器都必须成功退出,后续初始化容器以及主应用容器才会继续启动。这个行为使初始化容器同时具备两种属性:

  • 它们是运行前置任务,例如生成配置、迁移数据、等待依赖服务或准备共享卷。
  • 它们是启动闸门,镜像拉取失败、权限不匹配、脚本异常或依赖不可用,都可能使整个 Pod 长时间停留在初始化阶段。

审查时应把以下两个范围分别列出,再合并判断:

审查对象重点检查失败影响
初始化容器镜像来源、标签与摘要、运行身份、linux capabilities、文件系统写入、Secret 和共享卷访问、资源限制主应用尚未启动,Pod 可能处于 Init:*/* 或反复重启状态
主应用容器镜像来源、运行身份、端口、能力、挂载、探针、网络和运行时行为应用容器启动失败、服务不可用或运行时风险增加

Kubernetes 官方的 Init Containers 文档说明,初始化容器完成后主应用容器才会启动;官方 Pod Security Standards 文档也分别列出了 spec.containers、spec.initContainers 和临时容器的安全字段。由此可以确认:初始化容器不是主应用容器的隐含属性,而是需要显式纳入策略匹配的独立容器集合。

建立对象清单和例外清单

先从实际集群中盘点工作负载,而不是只检查部署模板。可以使用以下命令查看命名空间和 Pod:

kubectl get pods -A \
  -o custom-columns='NAMESPACE:.metadata.namespace,NAME:.metadata.name,PHASE:.status.phase'

检查某个 Pod 是否包含初始化容器:

kubectl get pod <pod-name> -n <namespace> \
  -o jsonpath='{range .spec.initContainers[*]}init: {.name}{"\t"}{.image}{"\n"}{end}{range .spec.containers[*]}app: {.name}{"\t"}{.image}{"\n"}{end}'

查看初始化容器的实际状态、退出码和重启信息:

kubectl get pod <pod-name> -n <namespace> \
  -o jsonpath='{range .status.initContainerStatuses[*]}{.name}{"\tready="}{.ready}{"\trestarts="}{.restartCount}{"\treason="}{.state.waiting.reason}{"\texit="}{.state.terminated.exitCode}{"\n"}{end}'

还应记录以下内容:

  • 初始化容器使用的镜像仓库、镜像摘要或标签。
  • 是否使用 latest 或其他可变标签。
  • 是否以 root 身份运行,是否允许权限提升。
  • 是否添加了额外 capability,是否使用特权模式或主机命名空间。
  • 是否挂载 Secret、ServiceAccount Token、主机路径或可写共享卷。
  • 是否使用共享卷修改主应用将读取的文件。
  • 初始化容器失败时,是否有明确的告警、人工处置和回滚路径。
  • 哪些初始化容器确实需要例外,例外由谁审批、何时到期、怎样复核。

确认策略覆盖范围

在使用 Pod Security Admission、ValidatingAdmissionPolicy、Kyverno、Gatekeeper 或其他准入系统时,不能只看策略是否存在,还要确认策略表达式是否访问了初始化容器字段。

一个简单的覆盖检查思路是搜索策略清单:

kubectl get validatingadmissionpolicy,validatingadmissionpolicybinding -A -o yaml
kubectl get clusterpolicy,policy -A -o yaml
kubectl get constrainttemplate,constraint -A -o yaml

重点查找以下字段是否同时出现:

spec.containers
spec.initContainers
securityContext
allowPrivilegeEscalation
runAsNonRoot
capabilities.add
privileged
hostPath

如果组织使用自定义策略,应特别检查以下逻辑错误:

  • 只遍历 spec.containers,完全没有遍历 spec.initContainers。
  • 只检查 Pod 级 securityContext,但没有处理容器级覆盖值。
  • 只验证镜像仓库,未验证初始化容器的镜像。
  • 只阻断新建资源,更新 Deployment 或 StatefulSet 时没有同等验证。
  • 只检查模板,未验证由控制器实际创建的 Pod。
  • 例外匹配使用过宽的命名空间、服务账号或标签条件。

实施:统一检查镜像和权限

使用固定且可追溯的镜像

初始化容器通常会使用包含 shell、网络工具、迁移工具或文件操作工具的镜像。这类镜像可能比主应用镜像包含更多组件,因此不能因为它只运行几秒就降低审查要求。

建议至少执行以下检查:

  1. 只允许来自组织批准的镜像仓库。
  2. 发布清单使用不可变摘要,例如 image@sha256:...。
  3. 在进入集群前完成漏洞扫描、来源确认和软件清单记录。
  4. 初始化容器与主应用容器使用相同的镜像审批流程。
  5. 对临时调试镜像、公共仓库镜像和无人维护的工具镜像单独审批。

示例:

spec:
  initContainers:
    - name: config-init
      image: registry.example.com/platform/config-init@sha256:REPLACE_WITH_DIGEST
      imagePullPolicy: IfNotPresent
      command: ["/bin/config-init"]

镜像摘要不能代替漏洞评估,也不能证明镜像中的程序一定适合当前任务。审查记录应同时保留镜像摘要、扫描时间、扫描结果和部署对象版本。

为两类容器分别设置安全上下文

可以先从一个尽可能低权限的基线开始,再根据初始化任务的实际需要增加权限。下面的示例同时设置 Pod 级和容器级安全属性,避免只保护主应用容器:

apiVersion: apps/v1
kind: Deployment
metadata:
  name: example-app
  namespace: example
spec:
  replicas: 2
  selector:
    matchLabels:
      app: example-app
  template:
    metadata:
      labels:
        app: example-app
    spec:
      automountServiceAccountToken: false
      securityContext:
        runAsNonRoot: true
        seccompProfile:
          type: RuntimeDefault
      initContainers:
        - name: prepare-config
          image: registry.example.com/platform/config-init@sha256:REPLACE_WITH_DIGEST
          command: ["/bin/config-init"]
          securityContext:
            allowPrivilegeEscalation: false
            readOnlyRootFilesystem: true
            capabilities:
              drop: ["ALL"]
          resources:
            requests:
              cpu: "10m"
              memory: "32Mi"
            limits:
              cpu: "100m"
              memory: "128Mi"
          volumeMounts:
            - name: generated-config
              mountPath: /work
      containers:
        - name: app
          image: registry.example.com/apps/example-app@sha256:REPLACE_WITH_DIGEST
          securityContext:
            allowPrivilegeEscalation: false
            readOnlyRootFilesystem: true
            capabilities:
              drop: ["ALL"]
          resources:
            requests:
              cpu: "100m"
              memory: "128Mi"
            limits:
              cpu: "500m"
              memory: "512Mi"
          volumeMounts:
            - name: generated-config
              mountPath: /etc/example
              readOnly: true
      volumes:
        - name: generated-config
          emptyDir: {}

这个示例不代表所有初始化任务都能以非 root 身份运行。比如,某些文件权限修复任务可能需要写入特定目录。遇到这种情况,应先判断能否通过调整目录属主、镜像入口程序或共享卷权限解决,而不是直接将初始化容器改为特权模式。

需要逐项验证:

  • runAsNonRoot: true 是否适用于镜像实际用户。
  • runAsUser 和 runAsGroup 是否与文件权限及应用需求一致。
  • allowPrivilegeEscalation: false 是否会影响初始化程序。
  • capabilities.add 是否确实必要,能否仅保留 NET_BIND_SERVICE 等最小能力。
  • readOnlyRootFilesystem: true 是否需要通过独立的 emptyDir 提供临时写入目录。
  • 初始化容器是否误挂载了主应用不需要的 Secret。
  • ServiceAccount Token 是否被自动挂载。
  • 资源限制是否能够阻止异常脚本消耗节点资源。

限制共享卷和 Secret 范围

初始化容器经常通过共享卷向主应用传递配置或证书。这里需要区分“初始化容器能够读取的内容”和“主应用容器能够读取的内容”。

例如,初始化容器可以读取一个专用 Secret,生成应用只需要的配置文件,再将生成结果写入共享卷。主应用容器不应因此自动获得原始 Secret 的挂载权限。共享卷本身也应限制为必要路径,并尽量让主应用以只读方式挂载。

volumes:
  - name: init-credentials
    secret:
      secretName: config-init-credentials
      defaultMode: 0400
  - name: generated-config
    emptyDir: {}

initContainers:
  - name: render-config
    image: registry.example.com/platform/config-init@sha256:REPLACE_WITH_DIGEST
    volumeMounts:
      - name: init-credentials
        mountPath: /var/run/init-credentials
        readOnly: true
      - name: generated-config
        mountPath: /work

containers:
  - name: app
    image: registry.example.com/apps/example-app@sha256:REPLACE_WITH_DIGEST
    volumeMounts:
      - name: generated-config
        mountPath: /etc/example
        readOnly: true

还要审查初始化程序是否会把 Secret 写入日志、错误输出、临时文件或生成的配置文件。策略允许访问某个 Secret,并不意味着所有生成结果都可以长期保留。

把资源与失败行为纳入策略

初始化容器没有合理的 CPU 和内存限制时,异常脚本或依赖重试可能影响节点和其他工作负载。建议为其设置 requests 和 limits,并为网络等待、迁移任务和文件处理分别定义合理的超时。

此外,应避免使用无限重试的初始化脚本。一个可审查的初始化任务应具备:

  • 明确的失败退出码。
  • 可识别的错误日志。
  • 有限的重试次数或超时。
  • 不会重复执行造成不可逆数据修改的操作。
  • 失败后可以重新部署、修复配置或回滚。

验证:用允许和阻断测试确认策略生效

先检查渲染后的最终对象

在提交到集群前,检查模板渲染结果,而不是只检查源文件:

kubectl apply --dry-run=server -f deployment.yaml
kubectl diff -f deployment.yaml

如果使用 Helm:

helm template example-app ./chart \
  --namespace example \
  --values values-prod.yaml > rendered.yaml

kubectl apply --dry-run=server -f rendered.yaml

确认最终对象中同时存在 spec.initContainers[*] 和 spec.containers[*] 的安全字段。模板中定义了安全上下文,但被 Helm 条件、Jsonnet 变换或其他渲染步骤删除,同样属于审查失败。

允许测试

允许测试用于证明符合基线的初始化容器和主应用容器能够正常通过准入并启动。测试对象可以包含:

  • 受批准仓库中的固定摘要镜像。
  • runAsNonRoot: true。
  • allowPrivilegeEscalation: false。
  • capabilities.drop: ["ALL"]。
  • 默认 seccompProfile。
  • 明确的资源请求和限制。
  • 只挂载必需的共享卷。
  • 不自动挂载不需要的 ServiceAccount Token。

部署后查看事件和初始化状态:

kubectl apply -f allowed-deployment.yaml

kubectl get pod -n example -w
kubectl describe pod <pod-name> -n example
kubectl logs <pod-name> -n example -c prepare-config
kubectl logs <pod-name> -n example -c app

验证重点不是“对象创建成功”这一项,而是:

  1. 准入系统记录了初始化容器和主应用容器的检查结果。
  2. 初始化容器成功退出。
  3. 主应用容器随后进入运行状态。
  4. 生成配置的权限和内容符合预期。
  5. 审计日志中没有暴露 Secret 或敏感参数。

阻断测试

阻断测试应逐项修改一个变量,确认策略确实覆盖初始化容器。常见测试项包括:

initContainers:
  - name: invalid-init
    image: registry.example.com/unapproved/tool:latest
    securityContext:
      privileged: true
      allowPrivilegeEscalation: true
      runAsUser: 0

可以分别测试:

  • 初始化容器使用未批准仓库。
  • 初始化容器使用可变标签。
  • 初始化容器设置 privileged: true。
  • 初始化容器设置 allowPrivilegeEscalation: true。
  • 初始化容器设置 runAsUser: 0。
  • 初始化容器添加未批准 capability。
  • 初始化容器挂载未授权 Secret 或主机路径。
  • 初始化容器缺少资源限制。
  • 主应用容器符合基线,但初始化容器不符合基线。

最后一项尤其重要:如果主应用容器完全合规,而初始化容器不合规,准入请求也应被阻断。Kubernetes Pod Security Standards 的字段表明确包含 spec.initContainers[].securityContext;策略实现若只检查主应用容器,就没有达到相同的覆盖效果。

记录每次阻断测试的四类信息:

项目应记录内容
输入使用的资源清单、命名空间和服务账号
结果是否被拒绝、拒绝发生在哪个阶段
证据API 错误、准入日志、审计事件
影响是否产生了部分资源、是否影响现有 Pod

验证启动失败和恢复路径

策略变更可能导致新版本 Deployment 无法创建,或滚动更新过程中产生新的 Pod 无法通过准入。即使策略本身正确,也可能暴露历史模板中未被审查的初始化容器配置。

验证时应观察:

kubectl rollout status deployment/example-app -n example
kubectl get events -n example --sort-by=.lastTimestamp
kubectl get rs -n example
kubectl get pods -n example -o wide

如果初始化容器本身通过准入,但运行阶段失败,可进一步查看:

kubectl describe pod <pod-name> -n example
kubectl logs <pod-name> -n example -c <init-container-name> --previous

这两类故障需要区分:

  • 准入阻断:对象在 API 服务器阶段被拒绝,通常需要修正清单或处理有记录的例外。
  • 运行失败:对象已经创建,但初始化程序退出失败、镜像拉取失败、挂载失败或依赖不可用,需要检查 Pod 事件和初始化容器日志。

复盘:处理例外、观察窗口和回滚

例外必须绑定具体对象和期限

确实需要更高权限的初始化任务,应使用最小范围例外,而不是降低整个命名空间的策略级别。例外申请至少应说明:

  • 哪个命名空间、工作负载和初始化容器需要例外。
  • 需要哪个具体字段,例如某个 capability、root 用户或特定 Secret。
  • 该权限解决什么技术限制。
  • 为什么不能通过调整镜像、目录属主或任务设计消除。
  • 例外的起止时间和审批人。
  • 如何监控使用情况。
  • 何时重新评估并移除例外。

不要使用“所有带有某个通用标签的 Pod 都允许”这类宽泛匹配作为长期方案。服务账号、命名空间和工作负载名称通常更适合用于精确约束,但仍应防止名称复用导致权限意外继承。

分阶段发布策略变更

准入策略从审计模式切换到阻断模式时,应先在低风险命名空间或测试集群中验证。逐步推进时,观察以下指标:

  • 被拒绝的资源数量和拒绝原因。
  • 初始化容器失败或重启次数。
  • Pod 处于 Init 状态的持续时间。
  • Deployment 滚动更新进度。
  • 镜像拉取失败和仓库访问错误。
  • 应用启动延迟及依赖服务超时。
  • 例外规则命中次数。

策略扩展的影响不只体现在安全告警中。一个需要 root 身份修复共享卷的初始化容器,可能在 runAsNonRoot 规则启用后无法启动;一个依赖额外 capability 的网络初始化任务,可能在 capability 限制后返回权限错误;一个依赖 Secret 的配置生成任务,可能因挂载范围收紧而导致应用启动失败。

准备可验证的回滚方式

回滚前需要先判断问题来自策略、工作负载清单还是初始化程序本身。建议保留:

  • 策略变更前后的版本化清单。
  • 经过渲染的 Deployment、StatefulSet 或 Job 清单。
  • 例外审批记录。
  • 允许和阻断测试结果。
  • 策略控制器的审计日志。
  • 旧版本镜像摘要和应用发布版本。

应用发布出现问题时,可以先暂停滚动更新:

kubectl rollout pause deployment/example-app -n example

确认上一版本仍可用后回滚:

kubectl rollout undo deployment/example-app -n example
kubectl rollout status deployment/example-app -n example

如果问题来自准入策略,应优先修正策略匹配或工作负载配置。只有在已有审批和明确时间边界的情况下,才考虑临时例外或恢复到上一版策略。回滚策略本身可能让新的不合规对象重新进入集群,因此回滚后仍需运行阻断测试和现有工作负载复核。

最终检查清单

在将初始化容器纳入正式安全基线前,可以用下面的清单收尾:

  • [ ] 已盘点所有包含 spec.initContainers 的工作负载。
  • [ ] 初始化容器和主应用容器使用相同的镜像来源审查流程。
  • [ ] 镜像仓库经过批准,生产部署尽量使用不可变摘要。
  • [ ] 策略同时覆盖 spec.initContainers 和 spec.containers。
  • [ ] 已检查非 root、权限提升、特权模式、capability 和 seccomp 设置。
  • [ ] ServiceAccount Token、Secret、主机路径和共享卷均按最小范围配置。
  • [ ] 初始化容器设置了合理的资源请求和限制。
  • [ ] 初始化脚本具有明确的超时、失败退出和重试行为。
  • [ ] 已完成符合基线的允许测试。
  • [ ] 已完成仅修改初始化容器配置的阻断测试。
  • [ ] 已验证策略变更对 Pod 启动、滚动更新和应用可用性的影响。
  • [ ] 例外具备具体对象、技术理由、审批人和过期时间。
  • [ ] 已保存策略、工作负载和镜像版本的回滚材料。
  • [ ] 已定义初始化失败、准入拒绝和应用启动异常的监控与处置流程。

初始化容器的风险不在于它们运行时间短,而在于它们位于应用启动链路的前端,常常拥有修改共享文件、读取配置或影响主应用启动的能力。将它们与主应用容器分开盘点、分别验证,再用统一准入策略覆盖,才能避免“主容器合规但 Pod 仍由未审查初始化任务启动”的盲区。

 
枫少@KillBoy
评论  4  访客  4
    • VelvetSky
      VelvetSky 0

      初始化容器确实不能被忽略

      • 夜行灵使
        夜行灵使 0

        只检查主容器容易留下盲区

        • 云朵小屋
          云朵小屋 0

          镜像摘要和漏洞扫描都要保留

          • 暮色沉吟
            暮色沉吟 1

            共享卷权限这块很容易配过头

          匿名

          发表评论

          匿名网友

          拖动滑块以完成验证