今日学到 nsenter
Ali Mehraji
Ali Mehraji
securitainment
2026年11月17日 14:50
中国香港
去阅读
在 K8S 节点上使用特权容器执行宿主机级操作。
注解
设置一个名为 command 的注解,并使用 YAML 锚点 &cmd,以便稍后使用它。
在 YAML 中,&cmd 会创建一个名为 cmd 的锚点。之后可以用 \*cmd 引用它。
Kubernetes 注解文档
你可以使用 Kubernetes 注解把任意非标识性元数据附加到对象上。工具和库这类客户端可以检索到这些元数据。
标签和注解都可以用来给 Kubernetes 对象附加元数据。标签可用于选择对象,也可用于查找满足特定条件的对象集合。相比之下,注解不用于标识和选择对象。注解中的元数据可大可小,可以是结构化的,也可以是非结构化的,还可以包含标签不允许的字符。同一个对象的元数据中可以同时使用标签和注解。
但是等一下,&cmd 这个 YAML 锚点与这个注解毫无关系,所以我还在等讨论的结论。
[问题] 安装要求清单中的 command 注解?
[更新]:讨论答复
Longhorn NFS 安装
apiVersion: apps/v1
kind: DaemonSet
metadata:
name: longhorn-nfs-installation
namespace: longhorn-system
labels:
app: longhorn-nfs-installation
annotations:
command: &cmd OS=$(grep -E \"^ID_LIKE=\" /etc/os-release | cut -d '=' -f 2); if [[ -z \"${OS}\" ]]; then OS=$(grep -E \"^ID=\" /etc/os-release | cut -d '=' -f 2); fi; if [[ \"${OS}\" == *\"debian\"* ]]; then sudo apt-get update -q -y && sudo apt-get install -q -y nfs-common && sudo modprobe nfs; elif [[ \"${OS}\" == *\"suse\"* ]]; then sudo zypper --gpg-auto-import-keys -q refresh && sudo zypper --gpg-auto-import-keys -q install -y nfs-client && sudo modprobe nfs; else sudo yum makecache -q -y && sudo yum --setopt=tsflags=noscripts install -q -y nfs-utils && sudo modprobe nfs; fi && if [ $? -eq 0 ]; then echo \"nfs install successfully\"; else echo \"nfs install failed error code $?\"; fi
spec:
selector:
matchLabels:
app: longhorn-nfs-installation
template:
metadata:
labels:
app: longhorn-nfs-installation
spec:
hostNetwork: true
hostPID: true
initContainers:
- name: nfs-installation
command:
- nsenter
- --mount=/proc/1/ns/mnt
- --
- bash
- -c
- *cmd
image: alpine:3.12
securityContext:
privileged: true
containers:
- name: sleep
image: registry.k8s.io/pause:3.1
updateStrategy:
type: RollingUpdate
在容器内对 K8S 节点执行宿主机级操作
一直在想,容器是如何安装软件包或执行宿主机级命令的!?
spec:
hostNetwork: true
hostPID: true
initContainers:
- name: nfs-installation
command:
- nsenter
- --mount=/proc/1/ns/mnt
- --
- bash
- -c
- *cmd
image: alpine:3.12
securityContext:
privileged: true
command 拆解
nsenter
nsenter是 Linux 的一个工具,用于进入其他进程的不同命名空间——例如网络、挂载、PID、UTS 等。当你希望从容器内部在另一个进程 (例如宿主机) 的上下文里操作时,它很有用。
--mount=/proc/1/ns/mnt
进入进程 1 的挂载命名空间 (通常是节点内宿主机的 init 进程)。
/proc/1/ns/mnt是表示 PID 1 (宿主机) 挂载命名空间的特殊文件。
-- bash -c *cmd
分隔符;
--之后的所有内容都会传递给新的 shell。新的 shell 执行该 cmd,它定义在 DaemonSet 的注解中;正如 K8S 注解文档所述,容器可以访问
command注解。
对于宿主机 (节点) 级操作,nsenter 需要特权
hostNetwork: true
作用:
- 使 Pod (及其中的所有容器) 使用宿主机的网络命名空间。
- 也就是说,它共享宿主机的网络栈——相同的 IP 地址、路由表等。
为什么需要:
- 如果 init 容器内的命令需要:
- 访问仅在宿主机网络上可用的网络服务 (例如某些 NFS 服务器或内部路由),
- 或者像宿主机那样解析主机名,这就为它提供了直接访问。
kubectl explain ds.spec.template.spec.hostNetwork
hostNetwork <boolean>
Host networking requested for this pod. Use the host's network namespace. If
this option is set, the ports that will be used must be specified. Default
to false.
hostPID: true
作用:
- 使 Pod 共享宿主机的 PID 命名空间。
- 因此容器可以看到宿主机进程并与之交互,包括 PID 1。
为什么需要:
- 使用
--mount=/proc/1/ns/mnt时,路径指向 PID 1 的挂载命名空间——它通常是宿主机的 root 进程 (init/systemd)。 - 如果未启用 hostPID: true,容器内的 PID 1 就不是宿主机的 PID 1——nsenter 会失败,因为此时 /proc/1/ns/mnt 指向的是容器自身的命名空间,与宿主机的命名空间无关。
kubectl explain ds.spec.template.spec.hostPID
hostPID <boolean>
Use the host's pid namespace. Optional: Default to false.
initContainers.securityContext.privileged: true
kubectl explain ds.spec.template.spec.initContainers.securityContext.privileged
Run container in privileged mode. Processes in privileged containers are essentially equivalent to root on the host.
来自 ChatGPT 的补充说明
🧠 使用它时会发生什么?
使用 nsenter --mount=/proc/1/ns/mnt 时,你是在告诉你的容器
“嘿,别再使用你自己隔离的挂载命名空间了。进入宿主机的挂载命名空间。”
这样一来,你的进程 (位于容器内) 就能像在宿主机上一样执行文件系统操作。
例如:
nsenter --mount=/proc/1/ns/mnt -- bash -c 'mount -t nfs ...'
🔒 所需的权限
要访问 /proc/1/ns/mnt:
- 你必须拥有
CAP_SYS_ADMIN。 - 在 Kubernetes 中,这通常意味着容器必须以
privileged: true运行。 - 你还需要
hostPID: true,以确保PID 1是宿主机的PID 1,而不是容器自身的 init。
Resources
- Kubernetes Annotations
- longhorn-nfs-installation
- container vs pods
- Namespaces
- lsns
- proc
— — —
原文链接:https://dev.to/cod3mason/til-may-28-2025-5547
免责声明:本文为原文的中文翻译,仅供学习交流,版权归原作者所有。如译文与原文存在出入,以原文为准。如有侵权,请联系删除。
版权声明
本站仅做备份收录,仅供研究与教学参考之用。
读者将信息用于其他用途的,全部法律及连带责任由读者自行承担,本站不承担任何责任。








评论