《AUTOMATION IN CONSTRUCTION》：Integrating vision-language model and point cloud processing for automated precast connection inspection and assembly optimization
编辑推荐：
•提出了一种从点云数据到兼容性优化的分解-组合-分解架构。•结合基于PCA的切片与RANSAC-ODR方法，以92.82%的精度重建小直径钢筋。•整合少样本视觉语言模型与局部点云分析，将标准构件几何信息检索并加载至竣工模型中。•建立约束优化模型，在保持间距均匀性的前提下最小化
- •
提出了一种从点云数据到兼容性优化的分解-组合-分解架构。
- •
结合基于PCA的切片与RANSAC-ODR方法，以92.82%的精度重建小直径钢筋。
- •
整合少样本视觉语言模型与局部点云分析，将标准构件几何信息检索并加载至竣工模型中。
- •
建立约束优化模型，在保持间距均匀性的前提下最小化返工量。
- •
通过湿连接和干连接场景下的虚拟试组装验证预拌柱的可行性。
引言
与现浇施工相比，预制施工在施工生产效率、质量控制和工期可预测性方面具有显著优势[[1]，[2]]。预制连接接口的几何精度是确保预制施工结构完整性和装配兼容性的最重要方面之一[3]。预制结构由预制墙体、梁、柱、板等构件以及各种连接件组成[4]。为简化施工流程并减少现场劳动力需求，这些构件在工厂预制后运输至施工现场进行装配[[5]，[6]]。一般来说，预制连接分为三大类：干连接[7]、湿连接[8]和混合连接[9]。干连接利用焊接、螺栓连接或后张法等机械设备，无需现场浇筑或灌浆[[10]，[11]]；湿连接则采用现浇混凝土，通过专用连接件或搭接方式对突出的钢筋进行连接[12]。在这些连接类型中，灌浆套筒和柱脚连接由于具有优越的抗结构性能和施工便捷性，已成为预制施工实践中保证钢筋连续性的常用方法[[13]，[14]]。图1展示了典型的预制施工流程，其中工厂制造的预制混凝土（PC）柱通过不同类型的连接件（如此处的灌浆套筒）直接组装，从而无需大规模的现场混凝土浇筑和模板系统。预制构件的尺寸偏差可能源于制造公差以及竣工构件与设计连接件之间的搬运变形，从而导致装配缺陷或结构缺陷。此类偏差会引发昂贵的现场返工、维修和更换，直接抵消了预制的生产效益，其中返工成本占项目总成本的5%[15]。
在此背景下，预制连接接口的自动化质量保证成为预制施工成功的重要任务。在实际应用中，激光扫描已被用于采集预制构件的全面几何数据，但其在重建预制构件几何形状及钢筋等连接细节方面的应用仍面临挑战[[16]，[17]]。这是因为检测小直径圆柱形钢筋面临多重困难，包括特征尺度有限[18]、重叠构件之间的遮挡、表面反射率变化以及点云覆盖不完整等综合影响。连接区域还包含密集排列且相互遮挡的构件，其几何复杂度往往超出仅基于点云的重建能力。虽然现有的扫描至BIM方法在孤立或分离良好的钢筋场景中表现出良好的性能，但在应用于具有密集钢筋布局、间距较近的构件、部分可见性和复杂预制连接几何形状时，其可靠性显著降低[19]。计算机视觉领域的最新进展为施工质量检测提供了新的能力[20]。例如，视觉语言模型（VLMs）通过整合视觉模式识别与语义推理，展现出卓越的图案识别能力[21]。然而，这些模型缺乏尺寸验证和空间对齐评估所需的几何精度[22]。相反，纯基于点云的几何算法能够提供精确的测量结果，但在点云数据碎片化、含噪或模糊时难以实现构件分类[[23]，[24]]。因此，一种结合视觉识别与点云几何分析互补优势的集成方法，有望实现稳健的自动化检测。装配兼容性评估还需要分析配对钢筋与套筒之间的空间关系，以定位超出连接公差的几何错位。多个钢筋构件累积的制造偏差引入了额外的不确定性，因此需要建立结构化机制并进行系统性的成对兼容性分析，以确保装配可行性和结构完整性。
本研究解决了预制混凝土施工中的一个根本性挑战：如何在现场装配前实现连接接口的自动化几何质量保证和装配兼容性。具体而言，本文探讨了以下问题：(1) 在噪声、部分遮挡和碎片化表面数据条件下，如何准确检测和重建小直径圆柱形钢筋及连接构件？(2) 在纯几何方法或纯视觉方法失效的情况下，如何可靠识别几何复杂且部分嵌入的连接构件？(3) 如何评估预制构件之间的空间兼容性，并确定在保持结构质量的前提下最小化返工量的最优修改策略？总之，本文针对以下具体目标开展研究：(1) 开发在噪声、遮挡和碎片化点云数据条件下适用于小直径钢筋的鲁棒圆柱特征提取方法。(2) 在纯几何方法失效的情况下，整合VLM与几何分析以可靠识别连接构件，以及(3) 将装配兼容性评估建模为约束优化问题，确定在保持结构间距均匀性前提下最小化返工量的修改策略。
本文的贡献与上述三个研究问题相一致：(1) 该框架引入了针对小直径钢筋的鲁棒几何特征提取方法。(2) 它整合了VLM启用的语义-几何参照方法来识别几何复杂且部分嵌入的连接构件，然后将标准几何信息加载至竣工模型中。(3) 它将装配兼容性评估建模为约束优化问题。这三项贡献共同推动该领域超越以精度为导向的检测研究，迈向完整的预装配决策支持框架。该框架实现了一种分解-组合-分解架构，其概念概览如图2所示，详细流程如图4所示。在第一分解阶段，三维点云被切割为薄二维平面，将复杂的三维检测问题转化为可处理的二维圆拟合任务。在组合阶段，这些检测结果通过跨切片轨迹跟踪被重新组装为三维圆柱形构件，同时通过VLM语义识别连接构件，并基于点云几何进行位置精化。在最后分解阶段，组装完成的模型被划分为各个钢筋-连接配对单元，将对齐问题建模为约束优化，在保持结构间距均匀性前提下确定最小修改方案。
本文其余部分组织如下：第2节回顾了预制连接类型、虚拟试组装及其局限性、用于圆柱特征提取的点云处理方法以及VLM等相关文献，建立技术基础。第3节介绍了方法细节。第4节在预制柱连接上验证该方法，第5节讨论了关键实现要点。第6节总结全文并讨论未来工作。
章节摘要
文献综述
本节回顾了所提框架的技术基础。探讨了预制连接系统及装配挑战、用于几何重建的点云方法以及用于语义理解的视觉-语言模型。
方法论
所提框架遵循分层三阶段架构——分解-组合-分解，如图4所示。初始几何分解阶段利用主成分分析（PCA）圆柱轴估计结合自适应垂直切片，将三维点云转换为二维横截面。每个横截面切片先经过基于密度的噪声过滤，随后通过分层方式进行鲁棒的圆形特征提取
案例研究
本节通过两个预制柱连接案例研究验证所提框架，包括湿连接（灌浆套筒）和干连接（柱脚），每个案例均评估几何重建、连接构件识别、装配兼容性和修改优化。
讨论
本节讨论了所提框架的性能、适用性和局限性。讨论重点围绕钢筋尺寸分析、VLM启用的构件识别和装配兼容性优化展开，同时涉及影响实施和推广的实际考量。
结论
本文提出了一种集成框架，通过系统性的分解-组合-分解框架推进预制混凝土连接的自动化质量保证：将复杂几何分解为可测量特征，通过VLM和点云重建连接构件，并通过约束优化将装配构型分解为可优化的空间关系。本研究做出了三项主要创新：(1) 自适应圆柱形
CRediT作者贡献声明
Maggie Y. Gao：撰写–审阅与编辑，撰写–初稿，验证，方法，调查，形式分析，数据整理，概念构思。Qian Wang：资源，可视化。Chengjia Han：可视化。Jianping Li：资源，可视化。Gaoming Zhu：撰写–审阅与编辑，撰写–初稿，方法，调查，形式分析，概念构思，数据整理，项目管理，可视化。
利益冲突声明
作者声明，他们不存在可能影响本文所述工作的已知的竞争性经济利益或个人关系。
致谢
作者声明在准备和提交本研究过程中不存在利益冲突。本研究未获得公共、商业或非营利机构中任何资助机构的特定拨款。
Maggie Y. Gao|Qian Wang|Chengjia Han|Jianping Li|Gaoming Zhu
