现实建筑环境中的双向多模态作业员与无人机通信

《AUTOMATION IN CONSTRUCTION》:Bidirectional multimodal worker-drone communication in a real-world construction environment

【字体: 大 中 小 】 时间:2026年08月01日 来源:AUTOMATION IN CONSTRUCTION 12.6

编辑推荐:

  •在真实的建筑环境中评估了工人与无人机之间的安全通信方式。•这种通信提升了工人的控制感,并提高了他们对自身表现的自我评价。•参与者更倾向于使用手势指令。•大多数指令是在4至12英尺的近距离范围内发出的。引言随着劳动力短缺问题日益严重以及生产效率提升需求的增加,建筑行业对机器人的应

  •在真实的建筑环境中评估了工人与无人机之间的安全通信方式。•这种通信提升了工人的控制感,并提高了他们对自身表现的自我评价。•参与者更倾向于使用手势指令。•大多数指令是在4至12英尺的近距离范围内发出的。引言随着劳动力短缺问题日益严重以及生产效率提升需求的增加,建筑行业对机器人的应用不断增多,未来这一趋势还将持续[1]。在建筑领域的机器人技术中,无人机最为突出,它们在建筑生命周期的不同阶段发挥着重要作用,包括建筑检查[2]、损坏评估[3]、现场测量与绘图[4]、进度监控[5]、安全检查[6]以及建筑组装[7]。在所有行业中,建筑行业是无人机应用第二广泛的领域,预计到2030年,其市场价值将以4.5%的复合年增长率增长至62亿美元[8]。目前大多数在建筑行业使用无人机的人认为,未来无人机将会更加普及[9]。然而,随着无人机在建筑工地的使用越来越频繁,无人机与人类之间的互动增加了新的安全隐患。由于建筑作业仍然高度依赖人工,无人机常常在工人附近飞行,而这些工人大多并不直接参与无人机的操作,也无法控制无人机的飞行(以下简称非操作人员)。这些工人仍需在原本就每年有超过1000人死亡的建筑行业里,从事高空作业、操作危险工具或在重型设备附近工作等高风险任务[10],而现在又面临着无人机带来的新挑战。这些挑战包括意外与无人机发生身体接触[11]、[12],因头顶上的无人机似乎在记录自己的活动而产生的心理压力[11]、[13],以及对无人机整体的负面看法[14]、[15]。建筑工地上这类不安全或不良的无人机互动可能会让非操作人员将无人机视为威胁,进而增加他们的压力、焦虑感、认知负担和疲劳程度[16]、[17]。与此同时,无人机的应用正在快速发展,从远离操作人员的远程作业,逐渐转向在空间有限、视野受阻的情况下更频繁地近距离作业。随着无人机在建筑工地上的应用越来越常态化,工人与无人机共享空间的情况也会增多,因此,制定以工人为中心的主动安全与通信策略显得愈发重要。鉴于无人机在建筑行业中的快速普及及其所带来的安全风险,亟需制定相应策略,以减少这些挑战,确保建筑工地上人类与无人机能够安全互动。目前的无人机控制方法往往非操作人员无法使用,这限制了他们在不安全情况下进行干预的能力[18]。此外,这些工人通常也不了解无人机即将执行的操作,难以预判其动向或为潜在危险做好准备[19]。这就产生了两方面的需求:首先,需要一些机制,让工人在不安全情况下能够与无人机沟通并施加有限的控制;其次,无人机也需要主动告知自己计划执行的操作,以便工人能够做出恰当反应[20]。诸如现场测量与绘图之类的无人机辅助任务,已经通过无人机摄影测量技术和激光雷达技术被用于建筑规划工作[4],同时也有研究对无人机测量的准确性进行了评估[21]。一项针对建筑从业者的调查还记录了这些以及其他常见的无人机应用场景[22]。相关研究还提出了用于建筑表面检查[23]和进度监控[5]的方法,而图像到BIM模型的转换则有助于建筑立面检查[2]。无人机与深度学习技术也被用于安全和健康监测领域[6],还有研究探讨了无人机在安全监测中的作用[24]。这些应用可能发生在有人工作的区域及其周边。先前的研究已经报告了建筑行业使用无人机所带来的安全风险[11]、工地上的人类与无人机之间的安全问题[25],以及高空作业时无人机存在所带来的影响[26]。现有研究证据表明,通信是解决这一问题的有效途径。建筑领域的研究指出,有效的团队沟通对于提升安全行为、安全氛围和信任度至关重要,从而进一步提高整体职业安全水平[27]、[28]。同样,有效的人类与机器人沟通也能通过促进信息交流[29]、建立合作关系[20]以及支持团队协作[29]、[30]来降低安全风险。在建筑行业之外,已有研究探索了通过多种媒介实现信息交流和指令传递的自然沟通机制。例如,有些研究利用自然手势和语音来控制无人机[31],还开发了用户自定义的手势和语音指令用于无人机控制[32]、[33]。另有研究则探讨了无人机如何通过飞行路径[34]和灯光信号[35]来传达自己的意图。然而,现有研究主要聚焦于无人机操作人员以及直接与无人机操作相关的信息,而在理解并开发无人机与非操作人员之间高效、安全的通信策略方面,还存在很大不足。为了解决这一问题,此前有一项基于虚拟现实的协议开发与评估研究[36]提出了一种双向的工人-无人机通信协议,该协议能够让非操作人员通过自然的方式发出与安全相关的指令,并接收无人机发送给他们的信号。该协议旨在支持工人在无人机作业过程中的自主性、距离管理以及情境感知能力。不过,仍需要进一步验证该协议在受控的建筑环境中的实际效果,以及工人在近距离互动时如何使用这些通信方式。为了研究那些在模拟环境中难以完全呈现的感官和空间条件,有必要进行实地测试。这些条件包括无人机实际存在于现场、真实的空间距离与规模、旋翼产生的噪音、气流,以及高空作业所要求的身体姿态与平衡能力。本研究通过解决两个研究需求,进一步丰富了现有知识体系。第一个需求是在受控的多感官建筑训练环境下,评估该协议在保障安全方面的作用。第二个需求则是观察工人在实际与无人机互动时的沟通行为。这两个需求直接决定了本研究要解决的两个问题。首先,以往的人类与机器人研究已经发现,虚拟现实环境与真实环境在舒适度[37]、[38]、焦虑感[39]、生理反应[40]、共情能力[41]以及人们偏好的距离方面存在差异[37]、[38]。这些差异通常归因于沉浸感的缺失[40]、视觉线索的变化[37]、[42]、听觉线索的改变[38],以及缺乏某些背景因素[43]。对于工人与无人机之间的通信而言,实地测试可以让参与者接触到无人机的真实大小[39]、准确的尺寸感知[42],以及旋翼噪音[38]等其他可能被工人视为具有危险性的因素。这些多感官和背景因素可能会显著影响工人在互动过程中的安全感知、压力反应以及认知负荷。因此,接下来应该在一个受控的建筑训练环境中,使用真实的无人机来评估该协议的实施效果,以此考察其在真实的多感官互动环境中的表现。这就引出了本研究的首个研究问题:•RQ#1(侧重安全影响):在真实的建筑环境中,工人-无人机通信协议如何影响工人在与无人机互动时的安全感知、态度、急性压力水平以及认知负荷?其次,除了要在真实环境中验证该协议的安全效果外,其能否得到成功应用还取决于该协议是否符合建筑工人的实际需求、偏好以及自然的互动方式。在人类与无人机的互动中,距离是一个关键因素,因为不同的空间距离会带来不同的安全风险、舒适度感知以及通信需求[37]、[38]。然而,在建筑领域,关于距离对通信方式选择的影晌,目前还缺乏系统研究。现有的评估并未充分揭示建筑工人在实际与无人机互动时,其通信偏好是如何随距离变化的。这一空白非常重要,因为现实环境中的各种感官和背景因素,如旋翼噪音的变化、周围环境的噪音水平、空间尺度以及任务要求等,都可能影响通信方式的选择以及所发出的安全指令类型。此外,工人发出的指令背后的具体安全意图,比如是要求无人机因为不适而停止飞行、保持更大距离,还是离开当前工作区域,也尚未得到全面分析。了解工人如何表达这些安全意图,对于明确技术要求、优化系统设计,以及确保该协议能够实现自然、高效的互动至关重要。因此,有必要在实地条件下研究距离与通信方式之间的关系,从而了解工人的需求与偏好、明确技术要求,并优化系统设计,以确保其在实际应用中的可行性,这也就引出了本研究的第二个研究问题:•RQ#2(侧重通信偏好):当工人通过工人-无人机通信协议发出指令时,他们在距离、通信方式以及指令意图方面有哪些偏好?为了解答这两个研究问题并进一步探索真实环境下的情况,本研究采用了“奥兹魔法师”方法,这是一种在人类与机器人互动研究中广泛使用的技巧,它能够在完全实现自主操作之前,让参与者体验到看似自主运行的机器人[45]。这种方法能够收集到与实际通信系统互动极为相似的数据,从而为未来的人类与无人机互动场景提供有价值的参考。通过将这项研究置于受控的真实建筑工地环境中,本研究不仅深化了对建筑领域中人类与无人机通信方式的理解,还填补了目前文献中以虚拟现实实验为主所存在的空白。此外,它还提供了许多在以人为中心的研究中常被忽视的用户行为方面的见解,并将这些见解转化为设计要求,为未来技术系统的开发以及现场应用提供指导。相关研究先前在建筑领域开展的人类与无人机互动研究涉及无人机应用、工人安全以及通信方式等方面(第2.1节),同时还探讨了距离在这些互动中的作用(第2.2节)。相关研究指出了基于虚拟现实的人类与机器人互动实验存在的局限性(第2.3节),并介绍了在人类与无人机互动研究中使用的“奥兹魔法师”方法(第2.4节)。研究方法为了解答RQ#1和RQ#2,本研究分三个连续的阶段进行(见图1)。1. 协议整合与实地适配:在这一阶段,该工人-无人机通信协议被调整为适用于真实的建筑环境。这包括为实际应用配置合适的通信方式,同时运用“奥兹魔法师”方法来模拟无人机的自主响应,同时保持实验的可控性。2. 实验场景设计:在第二阶段……结果共有35名参与者完成了这项研究(见表1)。这些参与者以男性为主(74.3%),且均为右利手(85.7%)。大约一半的参与者(54.3%)在建筑工地的工作经验不足一年,而其余参与者则拥有1年至10年以上的经验,属于经验丰富的建筑专业人士。在了解无人机技术的程度上,大多数参与者(94.3%)表示只有有限或基本的了解,只有少数人表示自己有较深入的了解。讨论本研究旨在探讨一种双向、多模态的通信协议是否会影响非操作人员在真实环境中的近距离无人机作业体验。在本研究中,尽管在不同条件下,参与者对安全的整体感知仍处于中性或略偏积极的水平,但通信确实增强了他们的控制感,且这种改善具有统计学显著性(p = 0.021)。在人类与无人机互动的场景中,控制感由两个相互关联的因素决定:研究局限尽管这项探索性研究具有重要的价值,但其本身也存在一些固有的局限性,这些都需要加以重视。“奥兹魔法师”方法依赖于模拟互动,其中的无人机实际上是由人类操作员控制的,这种控制方式可能会与完全自主的无人机运行方式对参与者行为的影响有所不同。虽然采用了“奥兹魔法师”方法来模拟无人机的自主行为,且在整个实验过程中“魔法师”始终不在参与者的视线范围内,也没有参与者表示察觉到其存在……未来方向在真实环境中的实验表明,这种多模态的双向通信协议显著提升了参与者的控制感(p = 0.021),同时还导致了他们在皮肤电反应和皮肤温度方面的显著差异(皮肤电反应p = 0.003;皮肤温度p < 0.001),并且提升了他们对自己任务完成情况的自我评价(p = 0.008)。不过,在这项短期实验中,未观察到在整体感知、态度或认知负荷方面存在其他显著变化。结论通过在受控的真实建筑环境中对一种双向多模态的工人-无人机通信协议进行实际应用与评估,本研究进一步深化了对建筑领域中人类与无人机通信方式的理解。随着无人机在建筑作业中的重要性日益凸显,它们在非操作人员附近出现的频率越来越高,这也带来了新的安全挑战,而目前的相关研究尚未充分解决这些问题。此前的研究已经……手稿准备过程中生成式人工智能及人工智能辅助技术的声明在撰写本文的过程中,作者们使用了OpenAI工具来优化句子结构、提高文本的清晰度以及增强语言的表现力和可读性。在使用该工具之后,作者们对内容进行了必要的审阅和修改,并对最终发表的文章内容负全责。CRediT作者贡献说明朱子贤:写作——审阅与编辑,写作——初稿撰写,可视化,验证,方法论,研究设计,正式分析,数据整理,概念构建。阿吉特·德夫科塔:写作——审阅与编辑,写作——初稿撰写,可视化,验证,研究设计,正式分析。伊德里斯·吉拉尼:写作——审阅与编辑、验证、监督、资源管理、项目行政、方法论、资金获取、正式分析、数据整理、概念构建。马苏德

利益冲突声明
作者们声明存在以下可能被视为潜在利益冲突的财务利益/个人关系:朱子贤表示获得了美国国家科学基金会的财政支持;阿吉特·德夫科塔也表示获得了美国国家科学基金会的财政支持。其他作者则声明自己没有已知的可能影响本文所述工作的财务利益或个人关系。

致谢
本研究成果是在美国国家科学基金会资助项目编号2024656的支持下完成的。研究团队特别感谢佛罗里达大学无人机/无人航空系统部门主任兼环境健康与安全协调员约翰·劳斯先生,他对我们的数据收集工作给予了大力支持。

朱子贤|阿吉特·德夫科塔|伊德里斯·吉拉尼|马苏德·盖萨里
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号