跳转至

Kubernetes 架构:控制面与工作节点

Kubernetes 集群由一个控制平面和一组用于运行容器化应用的工作机器组成,这些工作机器称作节点(Node)。每个集群至少需要一个工作节点来运行 Pod。

工作节点托管着组成应用负载的 Pod。控制平面管理集群中的工作节点和 Pod。在生产环境中,控制平面通常跨多台计算机运行,而一个集群通常运行多个节点,以提供容错和高可用。

下图展示了控制平面、工作节点与网络、存储、设备扩展组件之间的主要关系。

Kubernetes 集群架构:控制平面的 API Server、etcd、Controller Manager 和 Scheduler,以及工作节点的 Kubelet、containerd、CNI、CSI、Device Plugin、Service 数据面与 Pod

图:控制平面通过 API Server 交换对象状态,工作节点协调容器运行时、网络、存储和设备。

Control Plane 组件

API Server

API Server 对外提供 Kubernetes API。kubectl、Controller、Scheduler、Kubelet 和 Operator 通过它读写对象。API Server 处理认证、授权、准入、版本转换和校验,并通过存储层将对象持久化到 etcd。

etcd

etcd 保存 Kubernetes 的持久状态。API Server 将资源对象转换为存储版本,再写入 etcd。etcd 使用 revision 标识修改,并提供一致性读写和 Watch;API Server 通过这些能力读取对象并发送变更事件。

Controller Manager

kube-controller-manager 运行多种 Controller。每个 Controller 关注一类对象,比较期望状态与当前状态,再通过 API Server 创建、更新或删除相关对象。

常见的 Controller 包括:

  • Deployment Controller:根据 Deployment 创建和更新 ReplicaSet,推进应用发布。
  • ReplicaSet Controller:创建或删除 Pod,使实际副本数符合 ReplicaSet 的要求。
  • StatefulSet Controller:维护 Pod 的固定身份、启动顺序和存储声明。
  • DaemonSet Controller:确保符合条件的 Node 各自运行一个 Pod。
  • Job Controller:创建并管理执行一次性任务的 Pod,直到达到完成条件。
  • Node Controller:监控 Node 状态,并处理节点失联等情况。
  • EndpointSlice Controller:根据 Service 和 Pod 更新 EndpointSlice。
  • PersistentVolume Controller:处理 PV 与 PVC 的绑定和回收流程。

Scheduler

Scheduler 负责为尚未分配节点的 Pod 选择合适的工作节点。它根据 Pod 的资源请求、节点亲和性、污点与容忍度、卷拓扑等条件筛选候选节点,再通过打分确定目标节点,并将绑定结果写回 API Server。Kubernetes 默认使用 kube-scheduler 执行调度。

Worker 组件

Kubelet

Kubelet 是运行在每个节点上的代理,负责让分配到该节点的 Pod 按照声明的配置运行。它通过 API Server 获取 Pod 配置,协调容器运行时、存储和设备插件完成容器的创建与维护,并持续检查运行状态,将 Pod 和节点的状态上报 API Server。

Container Runtime

容器运行时负责在节点上拉取镜像、创建和启动容器,并管理容器的生命周期。Kubelet 通过 CRI(Container Runtime Interface,容器运行时接口)调用运行时,完成 Pod Sandbox 和容器的创建、停止与删除等操作。常见的容器运行时包括 containerd 和 CRI-O。

CNI

CNI(Container Network Interface,容器网络接口)为容器运行时配置 Pod 网络提供统一的调用规范。运行时通过 CNI 插件为 Pod 分配 IP、创建网络接口并配置路由,使 Pod 能够在集群中通信。常见的网络插件包括 Flannel、Calico 和 Cilium,其中 Calico 和 Cilium 还支持 NetworkPolicy,用于控制 Pod 的入站和出站流量。

CSI

CSI(Container Storage Interface,容器存储接口)让 Kubernetes 能够通过统一接口使用不同存储系统提供的卷。Kubernetes 通过 CSI 驱动完成卷的创建、删除等操作,Kubelet 则调用节点侧插件,将卷挂载到 Pod 所在节点。常见驱动包括 Ceph CSI 和 AWS EBS CSI Driver,分别用于接入 Ceph 存储和 AWS EBS 卷。

Device Plugin

Device Plugin 是 Kubernetes 接入 GPU 等专用硬件的扩展机制。插件向 Kubelet 报告设备数量和健康状态,Kubelet 将可用设备作为节点资源上报,供 Scheduler 为申请这些资源的 Pod 选择节点。Pod 分配到节点后,Kubelet 调用插件获取设备分配结果,并交给容器运行时配置容器的设备访问。例如,NVIDIA Device Plugin 将 NVIDIA GPU 暴露为 nvidia.com/gpu 资源。

Service 数据面

Service 数据面负责将发往 Service 虚拟 IP(ClusterIP)的流量转发到后端 Pod。节点上的数据面组件读取 Service 和 EndpointSlice,维护虚拟 IP 到后端地址的映射,并随 Pod 的变化更新转发规则。常见实现是 kube-proxy,它通过 iptables、IPVS 或 nftables 配置转发;Calico 和 Cilium 也可以使用 eBPF 实现 Service 转发。