今日学到nsenter

admin 2026-11-18 01:47:47 网络安全文章 来源:ZONE.CI 全球网 0 阅读模式

今日学到 nsenter

Ali Mehraji
Ali Mehraji

securitainment

2026年11月17日 14:50
中国香港

去阅读

在 K8S 节点上使用特权容器执行宿主机级操作。

注解

设置一个名为 command 的注解,并使用 YAML 锚点 &cmd,以便稍后使用它。

在 YAML 中,&cmd 会创建一个名为 cmd 的锚点。之后可以用 \*cmd 引用它。

Kubernetes 注解文档

你可以使用 Kubernetes 注解把任意非标识性元数据附加到对象上。工具和库这类客户端可以检索到这些元数据。

标签和注解都可以用来给 Kubernetes 对象附加元数据。标签可用于选择对象,也可用于查找满足特定条件的对象集合。相比之下,注解不用于标识和选择对象。注解中的元数据可大可小,可以是结构化的,也可以是非结构化的,还可以包含标签不允许的字符。同一个对象的元数据中可以同时使用标签和注解。

但是等一下,&cmd 这个 YAML 锚点与这个注解毫无关系,所以我还在等讨论的结论。

[问题] 安装要求清单中的 command 注解?

[更新]:讨论答复

Longhorn NFS 安装

apiVersion: apps/v1
kind: DaemonSet
metadata:
  name: longhorn-nfs-installation
  namespace: longhorn-system
  labels:
    app: longhorn-nfs-installation
  annotations:
    command: &cmd OS=$(grep -E \"^ID_LIKE=\" /etc/os-release | cut -d '=' -f 2); if [[ -z \"${OS}\" ]]; then OS=$(grep -E \"^ID=\" /etc/os-release | cut -d '=' -f 2); fi; if [[ \"${OS}\" == *\"debian\"* ]]; then sudo apt-get update -q -y && sudo apt-get install -q -y nfs-common && sudo modprobe nfs; elif [[ \"${OS}\" == *\"suse\"* ]]; then sudo zypper --gpg-auto-import-keys -q refresh && sudo zypper --gpg-auto-import-keys -q install -y nfs-client && sudo modprobe nfs; else sudo yum makecache -q -y && sudo yum --setopt=tsflags=noscripts install -q -y nfs-utils && sudo modprobe nfs; fi && if [ $? -eq 0 ]; then echo \"nfs install successfully\"; else echo \"nfs install failed error code $?\"; fi
spec:
  selector:
    matchLabels:
      app: longhorn-nfs-installation
  template:
    metadata:
      labels:
        app: longhorn-nfs-installation
    spec:
      hostNetwork: true
      hostPID: true
      initContainers:
      - name: nfs-installation
        command:
          - nsenter
          - --mount=/proc/1/ns/mnt
          - --
          - bash
          - -c
          - *cmd
        image: alpine:3.12
        securityContext:
          privileged: true
      containers:
      - name: sleep
        image: registry.k8s.io/pause:3.1
  updateStrategy:
    type: RollingUpdate

在容器内对 K8S 节点执行宿主机级操作

一直在想,容器是如何安装软件包或执行宿主机级命令的!?

spec:
      hostNetwork: true
      hostPID: true
      initContainers:
      - name: nfs-installation
        command:
          - nsenter
          - --mount=/proc/1/ns/mnt
          - --
          - bash
          - -c
          - *cmd
        image: alpine:3.12
        securityContext:
          privileged: true

command 拆解

  • nsenter

nsenter 是 Linux 的一个工具,用于进入其他进程的不同命名空间——例如网络、挂载、PID、UTS 等。当你希望从容器内部在另一个进程 (例如宿主机) 的上下文里操作时,它很有用。

  • --mount=/proc/1/ns/mnt

进入进程 1 的挂载命名空间 (通常是节点内宿主机的 init 进程)。

/proc/1/ns/mnt 是表示 PID 1 (宿主机) 挂载命名空间的特殊文件。

  • -- bash -c *cmd

分隔符;-- 之后的所有内容都会传递给新的 shell。

新的 shell 执行该 cmd,它定义在 DaemonSet 的注解中;正如 K8S 注解文档所述,容器可以访问 command 注解。

对于宿主机 (节点) 级操作,nsenter 需要特权

  • hostNetwork: true

作用:

  • 使 Pod (及其中的所有容器) 使用宿主机的网络命名空间。
  • 也就是说,它共享宿主机的网络栈——相同的 IP 地址、路由表等。

为什么需要:

  • 如果 init 容器内的命令需要:
  • 访问仅在宿主机网络上可用的网络服务 (例如某些 NFS 服务器或内部路由),
  • 或者像宿主机那样解析主机名,这就为它提供了直接访问。
  kubectl explain ds.spec.template.spec.hostNetwork
  hostNetwork   <boolean>
    Host networking requested for this pod. Use the host's network namespace. If
    this option is set, the ports that will be used must be specified. Default
    to false.
  • hostPID: true

作用:

  • 使 Pod 共享宿主机的 PID 命名空间。
  • 因此容器可以看到宿主机进程并与之交互,包括 PID 1。

为什么需要:

  • 使用 --mount=/proc/1/ns/mnt 时,路径指向 PID 1 的挂载命名空间——它通常是宿主机的 root 进程 (init/systemd)。
  • 如果未启用 hostPID: true,容器内的 PID 1 就不是宿主机的 PID 1——nsenter 会失败,因为此时 /proc/1/ns/mnt 指向的是容器自身的命名空间,与宿主机的命名空间无关。
  kubectl explain ds.spec.template.spec.hostPID
    hostPID <boolean>
    Use the host's pid namespace. Optional: Default to false.
  • initContainers.securityContext.privileged: true
  kubectl explain ds.spec.template.spec.initContainers.securityContext.privileged
  Run container in privileged mode. Processes in privileged containers are essentially equivalent to root on the host.

来自 ChatGPT 的补充说明

🧠 使用它时会发生什么?

使用 nsenter --mount=/proc/1/ns/mnt 时,你是在告诉你的容器

“嘿,别再使用你自己隔离的挂载命名空间了。进入宿主机的挂载命名空间。”

这样一来,你的进程 (位于容器内) 就能像在宿主机上一样执行文件系统操作。

例如:

nsenter --mount=/proc/1/ns/mnt -- bash -c 'mount -t nfs ...'

🔒 所需的权限

要访问 /proc/1/ns/mnt:

  • 你必须拥有 CAP_SYS_ADMIN。
  • 在 Kubernetes 中,这通常意味着容器必须以 privileged: true 运行。
  • 你还需要 hostPID: true,以确保 PID 1 是宿主机的 PID 1,而不是容器自身的 init。

Resources

  • Kubernetes Annotations
  • longhorn-nfs-installation
  • container vs pods
  • Namespaces
  • lsns
  • proc

— — —

原文链接:https://dev.to/cod3mason/til-may-28-2025-5547

免责声明:本文为原文的中文翻译,仅供学习交流,版权归原作者所有。如译文与原文存在出入,以原文为准。如有侵权,请联系删除。

今日学到nsenter 网络安全文章

今日学到nsenter

本文介绍了在K8S节点上使用特权容器执行宿主机级操作的方法,包括使用nsenter工具进入宿主机挂载命名空间,并解释了相关配置和权限要求。
评论:0   参与:  0