KubeEdge零信任节点安全:策略即服务架构与可靠性评估

《Future Generation Computer Systems》:Zero-trust node security for KubeEdge: A policy-as-service architecture and reliability evaluation

【字体: 大 中 小 】 时间:2026年09月21日 来源:Future Generation Computer Systems 6.2

编辑推荐:

   # 摘要 工业数字孪生(DT)越来越多地运行在边缘节点上,这些节点负责摄取传感器数据、更新物理资产状态,并在云–边边界之间中继控制或联邦学习(FL)更新。如果其中某个主机被攻陷,DT仍可能继续显示为"健康",同时破坏状态同步、注入伪造读数,或泄露专有的FL梯度。容器化的DT

  

# 摘要

工业数字孪生(DT)越来越多地运行在边缘节点上,这些节点负责摄取传感器数据、更新物理资产状态,并在云–边边界之间中继控制或联邦学习(FL)更新。如果其中某个主机被攻陷,DT仍可能继续显示为"健康",同时破坏状态同步、注入伪造读数,或泄露专有的FL梯度。容器化的DT工作负载通常通过云–边编排栈进行部署,而KubeEdge是一个已毕业的云原生计算基金会(CNCF)框架,用于将Kubernetes扩展到间歇性连接的边缘环境。然而,其安全模型仍然继承了Kubernetes"一次信任、永久准入"的假设:一旦边缘节点加入集群,就不需要基于硬件的证据来持续证明其可信性,而且在云–边链路断开时,云端的策略变更也无法被强制执行。我们为DT边缘部署推导了四项节点完整性要求:对长期运行工作负载的持续证明、在分区期间的故障关闭强制执行、FL流量的工作负载级隔离,以及跨多个信任域的策略执行。随后,我们实现了KubeEdge的双环零信任架构,利用基于Linux完整性度量架构(IMA)的Keylime虚拟TPM(vTPM)远程证明、Kyverno策略即代码准入控制,以及Cilium eBPF网络微分段。主要新增组件是一个边缘端强制执行守护进程,它通过双向TLS(mTLS)轮询Keylime验证器,并在证明失败或验证器不可达时安装iptables FORWARD DROP规则,为云–边分区期间经过FORWARD路径的Pod流量提供本地强制执行路径。我们通过自动化的900次运行矩阵(3种配置 × 6种威胁场景 × 每格50次重复)对该架构进行评估,并分别报告两个结果维度。(i)在所测试的威胁模型内,当相应机制被启用时,未观察到任何安全机制被绕过。所测试的机制包括vTPM/IMA证明(仅在提议方案中启用)、Kyverno准入(基线B和提议方案)以及Cilium默认拒绝策略(基线B和提议方案)。在提议方案中,没有任何不受信任的工作负载被准入,没有任何Keylime检测到的完整性违规未被发现,也没有任何被禁止的横向连接成功建立;基线A/B在S2/S4场景中的结果反映的是缺乏证明而非证明成功。(ii)端到端场景完成率为91.33%(822/900)。在7次S2-提议方案运行中,云环网络撤销链(CiliumNetworkPolicy删除)未在场景时间预算内完成,留下了瞬态的POST-FAIL连通性窗口。其余71次未完成运行集中在S5重连后的调度收敛。这两类失败均归因于KubeEdge平台限制,包括两个此前未记录的缺陷。IMA篡改隔离延迟中位数为3.19秒,正常路径准入开销相较于无保护基线低于1%。这些结果表明,基于硬件根、感知证明的策略执行可以在中高端工业边缘节点上支持DT运行时和去中心化智能流水线,而不会实质性增加正常路径的准入延迟。

# 引言

物联网(IoT)设备和边缘计算范式的普及,已将数据处理从集中式云迁移到地理分布式的节点上[1][2]。边缘节点如工业网关、本地服务器和现场控制器,代表云托管的控制平面执行低延迟推理、数据过滤和本地控制操作。在工业信息物理系统(ICPS)中,这些节点越来越多地充当数字孪生工作负载和去中心化智能流水线的执行基础,其中单个被攻陷的节点可以将错误的控制信号传播到安全关键工艺中[3][4]。因此,保护这些边缘节点是工业边缘可信数字孪生部署和去中心化智能的先决条件:没有持续的节点完整性保证,既无法保证DT状态同步的保真度,也无法保证穿越边缘的联邦学习更新的机密性。

这种信任依赖对数字孪生部署尤为关键。运行在边缘节点上的DT实例持续摄取传感器遥测数据、更新其物理资产模型,并将控制建议反馈给执行器或云端决策引擎。如果托管的边缘节点被攻陷——其运行时二进制文件被篡改或启动链被修改——DT可能传播伪造的工艺变量、触发错误的控制动作,或在云端控制平面看来一切正常运行时静默外泄专有工艺模型[1]。因此,确保DT的可信性不仅需要应用层认证,还需要对每个执行DT工作负载的边缘节点进行平台级、基于硬件根的信任验证。

Kubernetes及其轻量级边缘扩展(包括K3s、K0s、KubeEdge和OpenYurt)已成为容器化边缘工作负载的默认编排层[5]。其中,KubeEdge[6][7]是CNCF毕业项目,将控制平面拆分为云端cloudcore和边缘端edgecore,提供边缘自治、间歇性连接容忍和设备管理。作为CNCF毕业项目,KubeEdge面向生产级企业级边缘部署,如工业网关、本地服务器和加固型现场控制器。在这些部署中,多核CPU、4–8 GB RAM和TPM 2.0硬件是标配。本文假设的即是这一资源配置。然而,一旦边缘节点完成初始证书签名请求(CSR)并获得有效的kubelet证书,该凭据在整个生命周期内都隐式被视为可信。KubeEdge及任何主流轻量级发行版均未将基于硬件的节点完整性验证纳入其加入或心跳路径[5][8]。

这种"一次信任、永久准入"模型与NIST SP 800-207[9]正式规范的零信任安全范式相冲突,其核心原则是"永不信任,持续验证"。零信任架构(ZTA)要求无论网络位置如何,每个访问请求都必须经过认证、以最小权限进行授权,并持续监控。SP 800-207A[10]将这些原则扩展到云原生微服务环境,要求为每个工作负载提供身份标识和细粒度策略执行。近期调查确认了在IoT和边缘场景中应用ZTA的紧迫性,在这些场景中,设备异构性、物理暴露和间歇性连接使得基于边界的防御措施失效[11][12]。

本文面向中高端边缘节点,如工业PC网关、本地微型服务器和加固型边缘设备。这些节点满足三个前提条件:(i)能够运行Linux容器运行时(containerd、CRI-O)的多核x86_64 CPU;(ii)≥4 GB RAM以同时托管KubeEdge EdgeCore、Cilium代理和至少一个应用工作负载;(iii)TPM 2.0信任根,无论是离散的(dTPM)、固件的(fTPM)还是基于虚拟机的虚拟TPM(vTPM)。这类硬件是CNCF级边缘部署的代表[5][13],覆盖了搭载Intel平台信任技术(PTT)fTPM或专用dTPM模块出厂的工业边缘计算平台[14]。超受限的微控制器类IoT感知节点(例如Cortex-M、RISC-V MCU,RAM <1 MB)明确不在范围内;此类设备通常作为叶子外设由本文所考虑的边缘节点进行管理。

以下两点澄清界定了本文对IoT环境的适用范围。第一,保护对象是边缘服务器层,而非IoT终端设备本身。因此,上述三个前提条件是由该部署类别运行的节点栈决定的,即KubeEdge EdgeCore与Linux容器运行时、CNI网络代理以及至少一个容器化应用工作负载的组合[5][7],而非由ZT-EdgeGuard新增的组件决定;即使在评估中的无安全基线配置中也运行此完整技术栈(第4.2节)。ZT-EdgeGuard本身在边缘节点上新增的组件——Keylime代理和edge_enforcer守护进程——在评估测试台上仅在此平台基线之上施加了较小的稳态开销(第4.12节),而TPM 2.0前提条件是硬件根证明的固有要求,而非此特定设计的专属条件。第二,受限IoT设备是间接受保护而非被排除。在KubeEdge的设备管理模型中,感知和执行设备并不作为节点加入集群;它们通过协议特定的mapper驱动程序(如Modbus、OPC UA、蓝牙)附加到边缘节点上,并在云端以设备孪生的形式表示[7]。在此模型下,从这类设备摄取的每条遥测数据和发出的每条执行命令都经过本文所靶向的边缘服务器中转。按照NIST SP 800-207的术语[9],已证明的边缘服务器作为策略执行点,代表那些无法自行托管策略执行点的叶子设备进行决策,对于上述KubeEdge中介的设备流而言。当节点的证明状态失效时,通过标签、污点和网络策略撤销进行隔离,边缘环的故障关闭规则还会在证明失败或验证器不可达时切断覆盖的Pod CIDR FORWARD路径流量,其数据路径覆盖范围在第4.11节中进行了考察。因此,ZT-EdgeGuard是对MCU级硬件轻量设备级证明方案的补充而非替代[11][15]:那些方案验证IoT拓扑的叶子节点,而本文通过保护汇聚其流量的编排边缘服务器层来实现安全。

KubeEdge缺乏持续的、基于硬件根的节点验证,造成了三个具体的安全缺口。第一,被物理攻陷的边缘节点(其启动链或运行时二进制文件被篡改)可以继续在未被检测的情况下调度和执行工作负载,因为在初始CSR之后不需要提供证明证据。第二,原生Kubernetes安全原语(RBAC、NetworkPolicy)在工作负载层操作,无法以节点粒度撤销信任;攻击者在某个边缘节点上获得root权限后,可以横向移动到同主机上的Pod或通过kubelet API扩展到整个集群[16]。第三,KubeEdge的边缘自治设计意味着在网络分区期间,云控制平面无法将策略更新(如标签、污点或CiliumNetworkPolicy变更)推送到断连的节点,导致故障开放态势,在潜在被攻陷的节点上留下不受限制的工作负载。

为弥补这些缺口,本文提出了面向KubeEdge边缘节点的双环零信任架构。该框架实现了三个互补的强制执行层:(i) 证明:Keylime[17][18]结合虚拟TPM(vTPM)持续验证每个边缘节点的启动链(PCR banks)和运行时文件完整性(Linux IMA[19]);(ii) 准入控制:Kyverno[20]策略强制工作负载只能被调度到携带有效attested=true标签的节点上,并拒绝特权或宿主路径容器;(iii) 网络微分段:基于eBPF的Cilium[21] CiliumNetworkPolicy实现默认拒绝的东西向流量规则,根据证明状态动态切换。这三个层由双环控制架构进行编排:一个云环,通过云端证明控制器将Keylime验证器状态映射为Kubernetes标签、污点和网络策略;一个边缘环,由节点上的edge_enforcer守护进程驱动,通过mTLS直接轮询Keylime验证器,在证明失败或验证器不可达时在Pod CIDR上插入iptables FORWARD DROP规则。边缘环在网络分区期间自主运行,为经过Pod CIDR FORWARD钩子的流量提供本地故障关闭路径;此回退机制在Cilium eBPF替代(无kube-proxy)数据路径下的覆盖范围在第4.11节进行了考察,其中Pod到Service的流量通常不经过FORWARD路径,这被识别为一个局限性而非普遍保证。

选择这三个层及其之间的双环协调并非通用的边缘安全决策,而是源自四项节点完整性要求,这些要求将工业DT工作负载与通用容器化应用区分开来。(R1) DT实例是长期运行的有状态工作负载,跟踪物理资产长达数月至数年,因此一次性准入检查仅覆盖了工作负载暴露窗口的极小比例,需要持续证明。(R2) DT向物理资产暴露双向控制回路;分区状态下证明失败的节点必须停止向执行器发送流量,而不仅仅是变得不可调度,这要求不依赖云控制平面的故障关闭强制执行。(R3) 许多DT流水线在多个边缘站点间进行联邦学习(FL),因此梯度流完整性本身就是一个安全属性。这要求工作负载级隔离而非仅节点级隔离,以防止被攻陷的对等节点投毒收敛模型,进而通过该模型毒害所有后续消费它的DT副本。(R4) 工业DT部署通常跨越多个信任域(OEM、运营方、集成商),需要可按域编写、版本控制和审计的准入规则,而非编码在静态集群RBAC角色中。这四项要求在第3.1节中详细推导;论文其余部分展示每个设计层如何满足其中一项或多项要求,第2.5节则将该贡献置于现有面向DT的零信任文献中,包括近期的IDETwin/CCNC和FGCS特刊工作。

先前的原型研究[22]展示了一种单环、云中心的设计,在物理硬件上使用Keylime fTPM证明。本文从四个方向扩展了该原型:

1. 面向已证明边缘节点的双环强制执行架构。我们引入了一种双环控制架构,集成了Keylime vTPM证明、Kyverno策略即代码准入和Cilium网络微分段。

边缘侧执行循环通过在网络分区期间插入本地 Pod CIDR 的前向丢弃规则,解决了先前仅依赖云侧设计所暴露的失败开放(fail-open)缺陷;在 Cilium 的 eBPF 替代(无需 kube-proxy)数据路径下,其覆盖范围被识别为一项局限性,而非通用的失败关闭(fail-close)保证。

**2. 大样本评估,共900次运行。** 评估涵盖3种配置(无安全、仅策略基线、完整零信任)、6种威胁场景(正常部署、IMA 文件篡改、恶意工作负载准入、引导链变异、网络分区、横向移动),每种组合重复50次,共产生900次端到端实验运行,并对延迟和通过/失败情况进行测量。

**3. 双指标可靠性与时延结果。** 评估将机制层面的安全观察与端到端场景完成情况分开报告。在机制层面,当相关机制处于激活状态时,未观察到任何绕过:S3 准入控制在基线-B和提案方案中均达到50/50;S2/S4 Keylime 检测在提案方案中达到50/50;S6 微隔离在基线-B和提案方案中均达到50/50。在场景层面,完成率为91.33%(822/900)。78次未完成的运行集中在网络分区恢复(S5,所有配置中共71次失败)以及7次 S2-提案运行中,其中在检测到威胁后云环 CiliumNetworkPolicy 删除操作未能完成。这些案例被追溯到 KubeEdge 平台层行为,而非证明事件遗漏。延迟特征显示准入开销低于1%,在43次云环撤销操作完成的运行中,S2 隔离时延中位数为3.19秒,边缘执行器在云链路丢失后10秒内完成失败关闭规则的插入。

**4. 平台故障分析与缺陷记录。** 本研究识别出两个此前未记录的 KubeEdge 缺陷:(1)edgecore 协调器竞争条件,会周期性终止非静态的边缘 Pod(包括 Cilium Agent),从而造成瞬态策略执行缺口,导致上述7次 S2 失败;(2)MetaServer CRD List 响应返回错误的 kind 大小写,阻止依赖 CRD 的 Agent 启动。S5 失败被归因于 KubeEdge 重连后的调度收敛延迟,在提案方案配置中因额外的证明标签约束而被放大。两个缺陷均已在上游问题报告 [23] 中记录。

本文其余部分组织如下:第2节回顾零信任架构、远程证明、Kubernetes 安全和 KubeEdge 的相关工作。第3节介绍系统设计,包括双环架构、节点信任状态机和威胁模型。第4节描述实验设置并报告全部900次运行的定量结果。第5节总结全文并展望未来工作。

**各节摘要**

**相关工作** 本节回顾四个相互关联的领域:零信任架构、远程证明、Kubernetes 安全和边缘编排,然后识别出促成本研究的空白。

**系统设计** 本节描述用于 KubeEdge 边缘节点的零信任框架。设计遵循 NIST SP 800-207 零信任原则"永不信任,始终验证",围绕三个执行层组织:证明、准入控制和网络微隔离。这些层与双环控制架构耦合,旨在即使在网络分区期间也能实现失败关闭行为。边缘侧执行器在 Cilium 的 eBPF 替代数据路径下的具体覆盖范围为……

**实验评估** 本节报告所提出零信任架构的定量评估。我们描述测试平台设置(第4.1节),定义三种实验配置和威胁场景(第4.2节实验配置、第4.3节威胁场景),报告全部900次运行矩阵的通过/失败结果(第4.4节),分析 S1–S4 的场景级延迟指标(第4.5至4.8节),网络分区弹性(第4.9节),横向移动遏制(第4.10节)……

**结论** 部署在边缘节点上的数字孪生工作负载依赖宿主机的完整性,该宿主机负责接收传感器遥测数据、更新物理资产状态,并与云侧分析系统或执行器通信。本文在 KubeEdge 环境中研究了这一宿主机完整性问题,其中默认的节点信任模型仍与准入时凭据和云侧策略传播绑定。所提出的架构结合了基于 Keylime vTPM 的远程证明、Kyverno 策略即代码准入控制以及 Cilium eBPF……

**关于写作过程中使用生成式人工智能及AI辅助技术的声明** 在本文准备过程中,作者使用了 GitHub Copilot(GPT-5.4、Claude Opus 4.6)、Google Antigravity(Gemini 3 Pro、Gemini 3.1 Pro、Claude Opus 4.6)以及 OpenAI Codex CLI(GPT-5.3-Codex)辅助稿件撰写、语言润色、代码开发及数据分析。在使用这些工具后,作者对所有生成内容进行了审查和编辑,并对已发表文章的内容承担全部责任。

**利益冲突声明** 作者声明不存在可能影响本文所报告工作的已知竞争性经济利益或个人关系。

**HengJun Lu**
台湾嘉义县,国立中正大学计算机科学与资讯工程系
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号