虚拟关节镜模拟器中无裂纹GPU曲面细分的实时视觉骨钻方法

《Computers》：Crack-Free GPU Tessellation for Real-Time Visual Bone Drilling in Virtual Arthroscopic Simulators

　　

背景/目标：模拟器中的实时关节镜下骨钻需要在骨骼视觉变形的同时保持高图形和高触觉更新率。研究人员提出了一种用于虚拟肩袖关节镜技能训练器（ViRCAST）的全GPU驻留、基于着色器的管线，该管线避免了网格再生。方法：该方法不改变几何形状，而是更新矢量位移贴图和细分数量贴图。该管线使用六个GPU通道：绘制矢量计算、位移贴图生成、通过Sobel边缘检测的细分贴图生成、mipmap细分采样、顶点位移和片元级法线校正。一种图案化绘制方案减少了拉伸三角形伪影，并且一种边对称UV规则为共享边分配相同的细分因子。结果：在一台配备Intel Core Ultra 9、NVIDIA GeForce RTX 5090、32 GB VRAM、128 GB RAM和Windows 11的Dell台式机上，1000帧GPU计时显示，4K纹理更新平均完成时间为0.292 ms，完整钻孔更新平均完成时间为0.397 ms。这远低于60 Hz渲染的16.7 ms预算。该管线在多对象场景中保持120 fps，并且与均匀细分相比，帧率提升高达24%，深度输出的结构相似性指数（Structural Similarity Index Measure, SSIM）≈0.99992。结论：该方法提供了表面变形，补充了体积钻孔模块，并支持手术训练的连续反馈。

本文解读虚拟肩袖关节镜训练器ViRCAST中实时视觉骨钻的着色器管线方法。关节镜下肩袖修复（Arthroscopic Rotator Cuff, ARC）是一种治疗肩袖肌腱撕裂的微创手术，要求以约45°角在肱骨头上钻孔，以便置入缝合锚钉。锚钉位置精度直接影响修复完整性和失败率。ARC手术量近年快速上升，但传统训练主要依赖尸体、模型和学徒制，受成本、真实性及患者安全限制，且培训时间受值班制度压缩。虚拟现实（virtual reality, VR）模拟器能提供可重复、无风险的练习，并已有随机对照研究表明其技能可迁移至真实手术。研究人员正在开发的虚拟肩袖关节镜技能训练器（Virtual Rotator Cuff Arthroscopic Skill Trainer, ViRCAST）结合了逼真渲染和力反馈，其中骨钻削模块要求骨骼表面变形必须在≤16.7 ms内完成视觉更新，并支持≥700 Hz的触觉更新。然而，传统的体积方法（如Marching Cubes和自适应网格细化Adaptive Mesh Refinement, AMR）在交互时需重复更新体积和提取网格，计算成本随分辨率提高而显著上升，且可能出现裂缝。因此，需要一种避免网格再生的GPU着色器方法以满足实时性和无裂纹要求。

研究人员提出了一种完全GPU驻留的六遍着色器管线。该管线的核心是不修改骨网格本身，而是每帧更新两个GPU纹理：矢量位移贴图编码钻孔导致的表面偏移，细分数量贴图控制各三角形应细分的程度。在NVIDIA GeForce RTX 5090桌面平台上，4K纹理更新平均耗时0.292 ms，完整钻孔更新仅0.397 ms，远低于60 Hz渲染的16.7 ms预算；多对象场景下可达120 fps，并比均匀细分提升最多24%的帧率。图案化绘制方案消除了钻孔边缘的拉伸三角形伪影；边对称UV规则为共享边分配相同的细分因子，保证无裂缝。该方法实现表面变形，补充体积钻孔模块，支持训练所需的连续视觉反馈。

关键技术方法可概括为：全GPU驻留的六遍着色器管线。第一遍通过射线投射计算绘制矢量；第二遍用复制-更新模式更新位移贴图，并使用圆柱形图案化画笔混合位移，以抑制拉伸三角形；第三遍用Sobel边缘检测从位移纹理生成细分数量贴图，并通过最大值池化构建mipmap金字塔；第四遍通过边对称UV规则为每条共享边选择相同的mipmap级和细分因子；第五遍在Domain Shader中按位移贴图偏移顶点；第六遍在片元级用有限差分重建法线。评估采用生产级ViRCAST解剖网格（右肱骨R_Humerus，1536顶点、2896三角形）及临床相关钻孔路径。

研究结果如下：

4.1 曲率估计器比较：在统一条件下对比隐式曲率、斜率曲率、导数曲率、圆形曲率和Sobel滤波器五种估计器，以均匀细分为高保真参考。Sobel在深度输出上获得最高SSIM（0.99992）和最低均方误差MSE（0.004），因此被选为默认估计器。

4.2 每遍执行时间