精准牛表型分析:三维点云感知、处理与农场应用

《Agriculture》:Precision Bovine Phenotyping: 3D Point-Cloud Sensing, Processing, and On-Farm Applications

【字体: 大 中 小 】 时间:2026年11月04日 来源:Agriculture 4.5

编辑推荐:

  牛体尺寸支撑生长监测、体型评定、健康管理、遗传评估和育种决策。传统接触式测量劳动强度大,受操作者和姿态影响,并可能诱发抓握应激。三维(3D)点云能够对线性尺寸、周径、体积及相关表型进行非接触、可重复估计。研究人员于2026年9月30日检索Web of Scie

  
牛体尺寸支撑生长监测、体型评定、健康管理、遗传评估和育种决策。传统接触式测量劳动强度大,受操作者和姿态影响,并可能诱发抓握应激。三维(3D)点云能够对线性尺寸、周径、体积及相关表型进行非接触、可重复估计。研究人员于2026年9月30日检索Web of Science核心合集、IEEE Xplore和CNKI,纳入2010年1月至2026年9月的出版物,并综合了93项研究。在牛研究中,受控或半受控条件下报告的相对误差通常约为2–6%,但估计值依赖于性状、品种、传感器、姿态和方案,因此并非合并效应量。多视图重建提高了表面完整性;深度分割与关键点模型提高了自动化程度;二维–三维(2D–3D)融合常降低对密集三维标注的依赖。与单点位精度相比,关于重复性、系统偏倚、跨品种迁移和长期商业农场性能的证据仍较弱。部署的主要障碍包括动态遮挡、非刚性变形、环境变异性、标注成本、计算、维护以及与农场工作流程的集成。因此,本综述建议统一解剖标志(anatomical landmarks)和参考协议(reference protocols),报告偏倚(bias)、重复性(repeatability)、重现性(reproducibility)、不确定性(uncertainty)和Bland–Altman一致性(Bland–Altman agreement),并开展跨品种和跨农场的外部验证(external validation)。在评估育种和生产应用就绪度时,应将经过牛体测试的方法与可迁移的计算机视觉(computer vision)方法区分开来。新兴的四维(4D)时序点云、自监督学习(self-supervised learning)、多模态融合(multimodal fusion)、基础模型(foundation models)和数字孪生(digital twins)仍具有前景,但需要直接的牛体测量验证。
1 引言
该综述指出牛体尺寸测量对生长监测、体型评定、健康与福利管理、生产计划和遗传改良具有重要意义;传统卷尺、测杖和卡尺劳动密集、受姿态与操作者影响,并可能造成应激。文章梳理从单目RGB、双目立体视觉到深度相机、LiDAR、结构光和multi-view 3D sensing的发展,并强调二维(2D)与三维(3D)方法比较应基于具体研究而非直接基准。测量链包括传感器部署、点云预处理、目标分割、缺失区域补全、关键点定位、姿态校正、几何计算和统计一致性评估;现有证据在受控或半受控采集较强,跨品种、姿态、光照和商业农场仍需评估。

2 材料与方法
2.1 文献检索与筛选
检索Web of Science、IEEE Xplore和CNKI,时间2010年1月至2026年9月,聚焦3D点云、深度相机、RGB-D、LiDAR、3D重建、点云配准/分割/去噪、姿态估计和关键点检测等,与cattle/cow/dairy cow/beef cattle/bovine及body measurement/body size/body dimension/morphometric measurement/phenotyping/weight estimation组合;经标题、摘要和全文三阶段筛选,最终纳入93项研究,并设定纳入排除标准。
2.2 文献信息提取与主题分类
提取第一作者与年份、对象与品种、传感器、部署、采集场景、预处理、目标提取、体部分割、关键点与姿态估计、体尺计算、体重/表型估计、评价指标、精度、数据集规模与局限;按技术流程分为数据采集与设备部署、点云预处理、牛目标提取与体部分割、关键点检测与姿态估计、体尺测量与表型计算、模型评价与工程应用六个主题模块。
2.3 代表性研究选择
依据主题相关性、牛体直接性、方法创新、实验完整性、样本与参考测量报告、数据/代码可用性和应用价值选择代表性研究,优先报告传感器配置、品种与样本背景、算法流程、人工或仪器参考测量和误差或一致性评价;通用点云方法仅作为可迁移参考,不作为牛体验证。

3 基于3D点云技术的数据采集
该节强调数据采集与设备部署是系统工程,需整合传感器、动物行为、牧场工程和计算机视觉。
3.1 数据采集
深度相机和LiDAR是主流,设备选择需平衡精度、速度、鲁棒性和成本;文章比较了工作原理、优势和局限及牛测量场景应用,但遮挡、姿态、量程、光照和标定会影响稳定性,商业农场可靠性需验证。
3.2 设备部署
3.2.1 设备部署构型
区分单深度相机、双目立体相机对和两个独立深度相机,以及三台以上深度相机融合;需区分硬件与3D几何来源。
3.2.2 设备部署场景
分静态固定采集(通道式、龙门式)和动态移动采集;通道式可约束姿态、减少遮挡但投资高、灵活性低;龙门式对设施改动小、通量高但个体分割和姿态稳定特征提取难;移动采集灵活、可多角度但复杂农场可靠性、能量、天气和图像稳定限制,通量低。动物因素如限制应激、灰尘、湿度、阳光、毛色、栏杆和邻近动物均影响数据质量;奶牛与肉牛系统需求不同。

4 数据预处理
4.1 点云配准
估计空间变换将多视局部点云统一坐标并融合;海豚回声定位优化用于非线性回归参数优化,改进算法降低配准误差27%、时间28%;MMLG-Point无监督预训练用于分割与体尺测量;RANSAC、PCA和坐标变换用于姿态归一化与参考统一。
4.2 点云去噪
去噪影响信噪比和精度上限;比较滤波与重采样,PointFilterNet学习滤波系数,点集重采样梯度场,PointCleanNet去噪和离群点;但平滑、离群点去除和重采样可能移动体表边界、改变周径/体积或解剖标志,应以下游牛性状和重复性验证。
4.3 点云坐标系对齐与空间参考统一
消除传感器安装姿态、采集位置和局部参考系差异;单视点云按重力、地面或主轴定义参考,多视点云估计旋转矩阵和平移向量;RANSAC+ICP生成完整点云并用质心平移和最大范数缩放归一化;Deep Closest Point、RPM-Net、SpinNet、PREDATOR、CoFiNet、GeoTransformer、PointDSC用于刚性配准,但多在通用数据集验证,作为牛测量可迁移方法。
4.4 点云下采样与归一化
下采样在保留几何轮廓和局部形态下简化点云,体素网格、均匀采样、FPS;过度稀疏会丢失解剖标志、肢界、背轮廓或周径剖面点;归一化统一位置、坐标范围和尺度表示,PointNet单位球、DUOS–PointNet++质心平移和最大范数归一化至[?1, 1];需记录尺度因子和平移参数,逆归一化恢复物理尺度。
4.5 牛目标提取
从复杂场景分离个体点云,去除地面、围栏、饲槽、墙、粪污和邻近动物;典型空间约束—背景去除—实例聚类;RANSAC拟合平面去除规则背景,欧氏聚类提取个体;RGB-D融合和深度学习前景检测,改进Mask2Former提取前景轮廓再映射到3D。
4.6 孔洞填充与缺失区域补全
修复局部缺失边界,点插值、局部曲面拟合、网格修补或2D–3D融合;缺失区域补全面向遮挡、镜面反射、视点受限和采样不足,强调整体几何恢复;牛舍RGB-D深度图可因白斑反射和自然光照大量缺失;移动最小二乘修复单侧点云,支持向量机和Bézier曲线校正周径损失与变形;应服务于体尺提取准确性和稳定性。
4.7 牛体部分割
从目标点云分割关键解剖区域,为关键点、体尺和姿态分析提供输入;PointNet++处理非均匀密度;FGPointKAN++引入FGE和KAN模块,mIoU 82.92%和83.24%;Mask2Former统一掩码分类,改进Mask2Former提取前景轮廓并用曲率分析定位关键测量点。

5 牛关键点检测与姿态估计
5.1 牛关键点定义与3D点云关系
关键点是基于稳定解剖标志、任务需求和可重复定位的语义离散点集;2D关键点检测+深度映射常用,改进Mask2Former检测2D测量点并经相机内外参映射到3D;结合双目立体匹配与改进YOLOv8n-Pose可实现关键点驱动3D测量。
5.2 基于形态学的关键点提取
利用轮廓极值、曲率变化、连续切片、截面跨度和主轴骨架自动定位关键区域;分轮廓—曲率分析、切片—截面形态、骨架—主轴拓扑;优点解剖意义明确、可解释、标注依赖低、工程成本低;局限为对目标提取完整性、姿态标准化、切片厚度、点云密度和边界质量敏感。
5.3 基于深度学习的牛姿态估计
关键点热图回归、坐标回归和联合检测—姿态建模;早期牛姿态数据集2134幅图,比较CPM、Stacked Hourglass和卷积热图回归;改进RTMPose优化精度、速度和复杂场景适应性;2D姿态缺绝对尺度和深度,常作语义前端,将2D关键点经相机内外参对齐深度图映射到3D;顶向下框架适合多动物和遮挡,改进YOLOv8n+RTMPose mAP 95.8%并用于跛行识别;Lite-HRNet+单目深度估计自动测量体高、斜体长、胸深;姿态参数可用于几何测量校正和表型预测,12个微姿态特征PMA模型校正不同姿态体尺;T-LEAP检测17个关键点PCKh 89%,背关键点仅59%,遮挡、不可见和非标准姿态仍是瓶颈。
5.4 姿态鲁棒性与非标准姿态校正
姿态变化导致测量点位移和体尺变异;统计形状模型标准化活牛姿态;12微姿态特征体尺校正模型;多视、多模态和学习型校正,多视融合+支持向量机+Bézier曲线校正周径损失和变形;单侧深度成像下非标准姿态仍影响关键点定位;目标不是视觉“直立”,而是提高跨个体、时间点和采集条件的可比性与测量保真度。

6 基于3D点云技术的牛体尺测量
6.1 多视图重建支持的集成体尺测量
多视图重建是数据采集和3D建模策略,提高点云完整性,非独立体尺参数方法;通过外参标定、坐标变换、点云配准和全局融合重建更完整3D牛模型,用于线性尺寸和闭合胸腹截面周径;分固定多深度相机重建、多视RGB-D融合、双目或航拍多视重建;三台Kinect v2非刚性3D形状恢复、五深度相机龙门式实时采集、多ZED2全姿态测量、CREStereo+改进YOLOv8n-Pose最大平均相对误差4.19%、无人机多视重建体高、体长、胸围平均相对误差3.87%、4.16%、5.06%;多视仍面临设备与标定成本、同步误差、运动牛跨视对应和非刚性变形。
6.2 基于几何特征的体尺计算
利用分割、去噪和姿态归一化后点云的空间结构,以背脊、肩、臀和远端肢体极值、曲率特征和区域边界计算体高、臀高、斜体长和胸深;遵循“关键点—距离”范式;分层测量与峰值检测、改进U弦长曲率、移动最小二乘修复单侧点云、CattlePartNet先识别关键测量区域再结合轮廓、平均曲率和高斯曲率定位;适合受控环境,局限为姿态偏差、局部遮挡和关键点可见性。
6.3 基于截面拟合的周径测量
胸围和腹围为曲面尺寸,需从目标截面点集恢复连续闭合轮廓并计算周长;包括截面定位、离散轮廓提取、缺失区域补全和闭合曲线长度计算;凸包、局部曲率和改进三次B样条拟合腹围,CattlePartNet用切片截取和三次B样条测胸腹围,Bézier曲线校正周径损失和局部变形;对截面定位、轮廓完整性、拟合参数和姿态敏感。
6.4 测量误差来源与精度评价指标
误差来源包括采集与标定、姿态与遮挡、点云处理、参考测量误差;精度由采集—重建—定位—拟合—计算全链决定;最大平均相对误差4.19%、体高胸围腹围肩高MAPE 2.38%、3.05%、1.32%、1.69%、总体平均相对误差3.7%;常用MAE、MAPE、RMSE、R2,并应报告平均有符号偏倚、Bland–Altman一致性和限、重复性和重现性;R2高不能排除系统偏倚。
6.5 高精度测量的标准化基准与几何评价框架
高精度视觉测量需超越深度传感器物理噪声极限,从稀疏噪声非结构点云稳健重建细尺度表面几何,并建立标准化评价;当前多以人工物理测量为真值,存在厘米级系统偏差和噪声点云导致关键点提取失败或局部最优;需大规模3D基准数据集和统计形状先验;Morpho3D工业线激光3D扫描系统以人工体尺为几何参考评价一致性、重复性和重现性,平均重现性变异系数约2.8%;标准化基准需减少低效标注,采用高精度同步多相机扫描阵列或工业视觉舱,并用Chamfer Distance、法向一致性和截面完整性等3D几何指标评价。
6.6 高通量边缘—云协同计算架构分析
应从完整测量流程评估农场就绪度,报告传感器触发到有效结果的端到端时间、常规牛流下持续吞吐、首次扫描成功与重试率、系统正常运行时间、缺失数据频率、标定漂移及电耗、存储和网络需求;边缘设备执行采集、预处理和特征压缩,云端执行重建和分析;10台RealSense D435i、Jetson Nano节点和Jetson Orin主机系统每轮优化约11 s,25轮后点云到模型平均误差由7.5 mm降至5.5 mm,但迭代时间不等于端到端时间,且未报告正常运行时间、扫描失败率、日吞吐、维护和成本;多传感器ToF牛扫描原型在保定架测试中从采集到网格体积和表面积测量平均10.96 s;云可用于训练更新、纵向生长曲线分析和群体级分析;奶牛固定路线可频繁监测,肉牛可结合计划处理或称重,放牧需便携、防风雨和离网供电;离线算法验证、农场技术可行性和商业生产持续运行应区分。

7 未来趋势与挑战
7.1 当前主要挑战
非刚性变形和动态遮挡是核心瓶颈;主流算法基于刚性配准假设,行走、扭体、呼吸运动产生非线性变形;农场设施和邻近动物遮挡导致关键区域缺失,补全在大量缺失或极端姿态下缺乏生物真实性;环境鲁棒性与算法泛化冲突,灰尘、强光照变化和水雾对LiDAR和深度相机成像产生离群点,滤波难以兼顾去噪和保留牛体细边界;深度学习模型依赖特定品种或场景标注,存在域偏倚,从Holstein奶牛到肌肉特征不同的肉牛或从室内到放牧精度下降;3D点云标注成本限制监督学习快速迭代和大规模部署。
7.2 未来研究建议
优先多模态感知和时序分析,并区分牛体测量直接证据与相关任务或跨领域迁移方法;直接牛证据包括高精度3D扫描体积和表面积估计、纵向3D成像估体重和追踪泌乳期体成分变化、牛体尺或关键点测量系统;EdgeBCS-YOLO和Dairy DigiD分别支持边缘体况评分和生物识别/健康分类,但不能作为常规商业条件下集成3D点云体尺测量系统的验证;热与可见光图像可在温度或外观提供对比时改善前景分割,CORF3D未证明改善体尺精度;形状和纹理线索可辅助点云配准,需验证是否改善对齐并降低体长和周径误差;时序点云分析可恢复短暂遮挡区域并支持姿态感知测量,但牛运动含非刚性变形,时序融合可能模糊解剖边界或偏倚周径和体长;Flow4D、主动查询规划、QCTF、绵羊点云分割和SPARE等跨领域候选需直接牛体验证;3D Gaussian Splatting、点云Transformer、视觉预训练和LingBot-Depth等应作为待检验假设,比较高精度参考并报告下游体高、体长、周径误差和系统偏倚;数字孪生需可靠个体识别、一致标定和解剖定义及纵向验证;商业就绪声明需多农场和多季节验证,报告偏倚、一致性、重复性、重现性、扫描失败率、吞吐、正常运行时间、维护和成本,奶牛与肉牛系统应分别评估。

8 结论
该综述梳理了3D点云牛体尺测量从数据采集与传感器部署到配准、去噪、目标提取、缺失区域补全、关键点定位、姿态估计、体尺计算和结果验证的主要阶段;技术从人工几何特征发展到多视3D重建、深度学习点云网络和2D–3D融合,提高3D表示完整性和自动化程度并处理姿态变化;3D点云为无接触、客观、自动测量提供基础;但动态遮挡、非刚性变形、复杂环境干扰、局部点云缺失和跨品种/采集设置泛化有限,测量标准和评价协议不统一;未来应标准化数据采集和几何测量参考,加强端到端鲁棒性、重复性和可验证性评估。
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号