沉浸式虚拟、增强与混合现实创作工具:内容创建平台、新兴技术及其局限性的系统综述

《Computers & Graphics》:Authoring tools for immersive virtual, augmented and mixed reality: A systematic review of content creation platforms, emerging technologies, and their limitations

【字体: 大 中 小 】 时间:2026年09月22日 来源:Computers & Graphics 2.7

编辑推荐:

  专业翻译摘要:创作工具正朝着模块化、领域特定的平台方向发展,自动化技术逐渐涌现以简化内容创建流程。沉浸式创作正通过便携式硬件、简化架构和无代码工作流变得更加易于使用。多模态交互正在兴起,以弥合精确性与自然用户体验之间的鸿沟。人工智能(AI)、数字孪生(Digi

  
专业翻译摘要:创作工具正朝着模块化、领域特定的平台方向发展,自动化技术逐渐涌现以简化内容创建流程。沉浸式创作正通过便携式硬件、简化架构和无代码工作流变得更加易于使用。多模态交互正在兴起,以弥合精确性与自然用户体验之间的鸿沟。人工智能(AI)、数字孪生(Digital Twins)和WebXR正推动虚拟现实(VR)创作系统向自动化、互联化和网页可访问方向转变。VR创作工具在交互可用性、人体工学约束、功能可扩展性有限以及评估实践不成熟等方面面临采用障碍。
论文解读文章

**1. 研究背景与问题**

虚拟现实(Virtual Reality, VR)作为一种变革性技术,通过头戴式显示器(Head-Mounted Display, HMD)为用户提供完全模拟的数字环境,已从新奇事物转变为医疗、教育、工业、娱乐等领域的关键工具。增强现实(Augmented Reality, AR)和扩展现实(Extended Reality, XR)因其现代创作平台常支持跨平台交付也被纳入研究范围。尽管VR具有可视化抽象数据、模拟复杂场景和突破物理限制等优势,但当前文献普遍指出,漫长的开发周期和对专业技术的依赖是阻碍其广泛采用的主要障碍。大多数现有内容创作工具面向熟悉Unreal Engine或Unity等复杂开发环境的技术专家,这导致对“所见即所得”(What You See Is What You Get, WYSIWYG)解决方案的需求日益增长,以使非技术用户能够通过可视化、动手操作的方式创建沉浸式体验。然而,高度灵活的系统使新手难以完成有趣任务(“图灵泥潭”困境),而过度专业化的系统虽易于使用却缺乏创造复杂内容的能力。已有综述分别分析了VR创作工具、非程序员创作工具和AR教育工具包,但均未系统研究新兴技术(如AI、数字孪生)的整合、完全沉浸式VR头显的内容约束,以及复杂工业培训场景中的具体采用障碍。因此,本研究旨在通过系统综述,绘制当前沉浸式VR创作工具的全景,分析可访问性与功能保真度的交汇点,并确定关键研究空白,以指导新型沉浸式创作模型的设计。

**2. 研究内容与方法**

为回答五项研究问题(RQ1应用领域与功能、RQ2技术要求与编程专长、RQ3交互模态、RQ4新兴技术整合、RQ5挑战与障碍),研究人员遵循PRISMA指南,于2026年2月2日在Scopus、IEEE Xplore、ACM Digital Library和Web of Science四个主要数据库中进行文献检索。检索式通过布尔运算符组合三大主题簇:虚拟/扩展现实、沉浸式硬件、创作/内容创建。共获得1768条记录,经去重后剩余1113篇,经标题、摘要筛除653篇,再经全文筛选排除325篇,最终纳入135篇同行评审期刊论文和会议论文。数据提取采用标准化表格,涵盖研究元数据、应用领域、功能特性、硬件平台、软件依赖、所需编程专长、交互模态、新兴技术整合,以及作者明确报告的限制和用户反馈。基于归纳分析,提炼出四大障碍类别:交互与可用性、硬件/技术、表达力、初步研究。关键技术方法包括:采用PRISMA框架确保综述透明度;基于布尔逻辑的多数据库系统检索;双人独立摘要筛选与全文确认;标准化数据提取与归纳分类。

**3. 研究结果**

**3.1 主要特征、功能和应用领域(RQ1)**:定量分析显示,通用目的与原型制作(36项研究)是最普遍的类别,表明“一刀切”式工具正变得不再可行,模块化框架成为趋势。领域特定解决方案中,娱乐与媒体(29项)侧重叙事控制和创意表达,教育与文化遗产(24项)强调降低非专家用户的技术负担,培训与仿真(20项)需要过程化逻辑以模拟安全关键任务,工业与制造(16项)聚焦车间流程,设计与建筑(10项)为专业利基领域。功能上,场景合成与直接操作(59项)是基准功能,验证了空间排列问题已基本由无代码界面解决;视觉逻辑与脚本(24项)仍对非程序员构成认知负担;自动化/AI(18项)正在兴起;360°视频(14项)、多模态设计(12项)和数字孪生与数据集成(8项)相对较少。

**3.2 技术要求和所需编程专长(RQ2)**:PC-VR(77项)仍是主导硬件平台,表明高性能计算在创作阶段的关键性;独立VR(33项)、AR/MR头显(13项)和Web/移动平台(12项)显示出对便携性和可访问性的需求。软件依赖性方面,100项工具为自包含应用,无需用户管理外部库;21项依赖外部API,14项依赖外部SDK。编程专长方面,116项工具无需编程知识,13项需要基础逻辑,仅6项要求高级编程,凸显了全行业范围内的民主化趋势。

**3.3 交互模态(RQ3)**:控制器交互(83项)仍是主流,因其在精细操作中提供更高精度;手部追踪与手势(41项)作为替代方案提供直接操纵;语音命令(7项)和凝视/头部追踪(4项)比重较小。多模态整合中,语音/手势组合(22项)是最常见策略,可简化复杂菜单层级;混合界面(12项)结合头显与传统桌面外设;有形实体交互(8项)利用物理道具提供被动触觉反馈。

**3.4 新兴技术整合(RQ4)**:AI(28项)是最常用的新兴技术,多采用生成式模型自动填充场景或生成资产,但会降低用户对最终输出的拥有感。WebXR(11项)和数字孪生(11项)各占较小比例。WebXR主要通过浏览器实现创作与交付,减少软件安装障碍。数字孪生的整合存在“保真度缺口”——多数工具支持高保真3D模型导入,但缺乏实时数据同步的原生基础设施,需手动设计MQTT等通信协议,且对延迟问题缺乏缓解策略。

**3.5 挑战、局限与障碍(RQ5)**:交互与可用性(91项)是最普遍障碍,包括文本输入困难、精细操纵精度不足和视觉杂乱。表达力限制(84项)体现在工具难以支持复杂逻辑、高级工作流或定制行为。硬件/技术问题(37项)涵盖人体工学疲劳、追踪遮挡和性能瓶颈。初步研究(35项,占26%)表明大量文献仍处于探索性阶段,培训与仿真领域比例最高(40%),其效度难以推广至工业规模环境。

**4. 总结讨论与结论**

讨论部分指出,出版时间线显示研究热点约在2016年后随消费级硬件兴起而增长,2020–2025年因独立头显和AI工具出现而激增。通用工具与教育、培训和工业领域的分化表明单一工具无法满足所有需求,未来的创作系统应向模块化、领域特定方向发展。技术架构上,自包含工具和WebXR的开发有效降低了安装门槛,但可访问性与表达力之间的取舍(即“图灵泥潭”困境)依然突出。多模态交互被视为平衡精度与自然性的关键路径。AI的整合使作者角色从显式手动构建转向高层编排,需通过“混合主动性”界面模式保留用户主导权。数字孪生和WebXR虽前景广阔,但仍需解决实时数据绑定和浏览器渲染性能等基础问题。

研究结论明确指出:135项工具中,36项为通用目的,其余分布于娱乐与媒体(29)、教育与文化遗产(24)、培训与仿真(20)、工业与制造(16)及设计与建筑(10)。场景合成是最常用功能(59项),视觉逻辑(24项)和自动化(18项)表明无代码定义机制仍是主要开发焦点。技术民主化趋势明显,116项工具无需编程知识,92项为自包含应用,PC-VR仍占主导(77项),但独立VR、AR/MR和Web平台显示出多元化生态。控制器交互(83项)占优,手部追踪(41项)和语音/手势组合(22项)作为补充。AI(28项)、WebXR(11项)和数字孪生(11项)正在重塑创作格局,但数字孪生的实时数据连接仍需手动工程。主要挑战包括35项初步研究限制了结论推广,以及84项工具在表达力上的功能约束。未来研究方向应聚焦于从空间布局到行为逻辑的过渡、工业数字孪生的原生数据绑定,以及混合主动性AI与用户代理权之间的平衡。
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号