阿里云安全从零到实战(八):ACK 里的特权 Pod,容器不是边界
容器里能看见宿主机的文件
有一次在测试集群里排查问题,kubectl exec 进一个 Pod,顺手 ls /host/etc,宿主机的 /etc 全在眼前。不是什么漏洞利用——YAML 里写了一句 hostPath: /,把宿主机根目录挂进来了。
写这段配置的人只想着”要读宿主机上一个日志文件”,没想到这一行同时把整个根文件系统交了出去。如果容器里的应用有命令执行问题,或者镜像本身不可信,宿主机就没有边界了。
容器隔离是 namespace 和 cgroup 提供的,不是牢不可破的墙。特权开关一开,这层墙就形同虚设。这篇讲怎么在 ACK 里把这些开关找出来、收回去。
集群里要看哪几样
| 检查项 | 怎么查 | 出问题时的样子 |
|---|---|---|
| 镜像来源 | 工作负载 YAML 的 image 字段 | 来自个人仓库、用 latest 标签 |
| 镜像漏洞 | ACR 扫描或 trivy image | 基础镜像带着一堆已知 CVE |
| 工作负载权限 | securityContext | privileged: true、hostPath、hostNetwork |
| RBAC | ClusterRoleBinding | 普通服务账号绑了 cluster-admin |
| 应用身份 | RAM for ACK(RRSA) | 把长期 AK 塞进 Secret |
| 网络策略 | NetworkPolicy | 一个 Namespace 都没有,Pod 之间随便通 |
| 准入拦截 | Gatekeeper / Pod Security | 谁能建特权 Pod 全靠自觉 |
最难的一点在于:这些配置分散在不同资源里,光看工作负载不够,还得看谁有权创建这类工作负载。
排查按六步:
特权开关打开之后,隔离还剩什么
有人觉得”容器只是进程,能看宿主机文件也没什么”。差别见下图:
动手实验:找一个特权 Pod,再把它拦住
在实验集群里做,别拿生产练。
1. 列集群和命名空间
aliyun cs DescribeClustersV1 --profile sec-lab --RegionId cn-hangzhou
拿到集群 ID 后,把 kubeconfig 配好,然后:
kubectl get ns
kubectl get pods -A -o wide
2. 看谁有资格建特权 Pod
kubectl get clusterrolebindings -o wide
kubectl auth can-i --list --as=system:serviceaccount:<ns>:<sa>
第二条会告诉你某个服务账号实际上能做什么。绑了 cluster-admin 的普通服务账号,先记下来。
3. 故意建一个特权 Pod
在实验 Namespace 里存成 privileged-demo.yaml,重点是 securityContext.privileged: true 和 hostPath 这两个字段:
apiVersion: v1
kind: Pod
metadata:
name: sec-lab-privileged
namespace: sec-lab
spec:
hostNetwork: true
containers:
- name: demo
image: busybox:1.36
command: ["sleep", "3600"]
securityContext:
privileged: true
volumeMounts:
- name: host-root
mountPath: /host
volumes:
- name: host-root
hostPath:
path: /
镜像换成你能拉到的那个。应用:
kubectl apply -f privileged-demo.yaml
4. 把它筛出来
kubectl get pods -A -o json | \
jq -r '.items[] | select(.spec.containers[].securityContext.privileged==true) | .metadata.namespace + "/" + .metadata.name'
输出里有 sec-lab/sec-lab-privileged,说明筛出来了。再看看网络策略:
kubectl get networkpolicy -A
一个都没有的话,Pod 之间默认随便通——这本身就是发现。
5. 加准入拦截,再试一次
控制台路线:ACK 控制台 → 集群 → 安全与审计 → Pod Security / 策略管理,开启基线拦截。如果用 Gatekeeper,写一条 ConstraintTemplate 拒绝 privileged: true。
集群基线先跑一遍:
kube-bench
然后删掉刚才的 Pod,重新 kubectl apply 同一个 YAML。这次应该被拒绝,提示里写着违反策略。如果能建成功,说明准入没生效,回去看策略作用范围是否覆盖 sec-lab 这个 Namespace。
6. 镜像也看一眼
trivy image busybox:1.36
换成你实际用的镜像。ACR 控制台里也能开镜像扫描,结果比手动跑更便于长期看。
准入策略上线前,先当一周旁观者
有个团队把”拒绝 privileged”直接设成拦截模式,第二天早会就被业务堵了——一个日志采集 DaemonSet 起不来,告警全断。
后来他们改成先设审计模式,只看不拦,跑一周。一周里收上来十几条命中,逐条看下来,三条是真需要特权的,其余都是复制模板时带过来的多余字段。
那三条写进例外清单,注明用途和负责人。模板里的多余字段清掉。一周后再切拦截,没出问题。
重点不是 Gatekeeper 怎么配,是节奏。直接上拦截等于把”谁能改集群”这个权力从人手里收回来,但没先看清会碰到什么。审计模式就是先看清楚。
例外清单还得有人管。见过一份清单三年没更新,里面一半服务早下线了,特权配置还留着。每季度过一遍,比搞一次大清理管用。
优先级
- cluster-admin 绑给普通服务账号,先处理。
- 特权 Pod + 宿主机根目录挂载,先处理。
- 镜像来自不可信仓库、用
latest,先处理。 - 没有 NetworkPolicy,本周处理。
- 长期 AK 写在 Secret 里,换 RAM for ACK(RRSA)。RRSA 在 ACK 控制台 → 集群信息 → 服务账号令牌 Issuer 里配置,应用侧改一行配置就能用临时凭据。
第 6 篇讲过 GetCallerIdentity 那个教训——在 Kubernetes 里等价的动作是 kubectl config current-context,确认你说的是这个集群,不是另一个。
验收清单
- 账号里的 ACK 集群都列过,没有漏掉小集群
- ClusterRoleBinding 查过,通配符权限已记录
- 特权 Pod 用 jq 筛过,结果留档
- NetworkPolicy 查过,默认拒绝策略已规划
- 准入策略用测试 YAML 验证过确实能拦
- 镜像固定版本,扫描结果看过
- 实验 Pod 已删除,清理清单更新
常见问题(FAQ)
Q:我们的日志采集 Pod 就必须特权,怎么办? 那就把它列为例外,写清楚为什么需要、访问哪些宿主机路径,并把它的账号权限收到最小。例外可以有,但不能是默认值。
Q:开了准入策略会不会把现有业务打挂? 先设成告警 / 审计模式跑一周,看会拦哪些,确认清单里的都是该拦的,再切拦截。直接上拦截最容易出事故。
Q:kubectl 那些命令在 ACK 上能用吗? 能,ACK 就是标准 Kubernetes。托管版的控制面不用你管,工作负载侧的 API 都一样。
Q:RAM for ACK 配置复杂吗? 比想象中简单:集群开 RRSA,服务账号注解一下,应用里的 SDK 自动换临时凭据。值得做,因为它把长期 AK 从 Secret 里彻底拿掉了。
Q:镜像扫描报一堆 CVE,都要修吗? 先修高危且实际会被触发的。基础镜像升级能一次解决一大片,比逐个应用改快。别为了清零所有低危把项目拖住。
Q:实验要花钱吗? ACK 集群本身有管理费,按量实例也计费。如果实验账号里还没建集群,可以先只做只读部分(列集群、看 RBAC、查 NetworkPolicy),等第 9 篇配告警时再决定要不要建。
相关工具与下一篇
- 云安全助手:K8s 的检查点、命令与加固清单
- 应急响应工具箱:第 10 篇云上事件处置会接回这里
- 系列第 9 篇:ActionTrail、SLS 与检测告警:前面查出来的问题,怎么在发生时被发现
- 系列第 6 篇:ECS 与实例元数据,本机才看得见的边界
八篇模块到这里,下一篇进入检测响应——先把「怎么发现」补齐,最后一篇再把十篇串成一套应急体系。