基于多摄像头与自监督学习的荷斯坦奶牛重识别技术及其在农场管理中的应用

【字体: 时间:2025年06月16日 来源:Computers and Electronics in Agriculture 7.7

编辑推荐:

  本研究针对奶牛个体识别中人工标注成本高、单摄像头视角有限等问题,开发了MultiCamCows2024多摄像头数据集,结合自监督学习框架(Self-Supervised Learning)实现96.36%的奶牛重识别(Re-ID)准确率。通过融合三台摄像头数据与NTXentLoss对比学习,显著提升跨视角识别性能,为畜牧智能化管理提供了无需人工标注的解决方案。

  

研究背景与意义
在现代化畜牧业中,荷斯坦奶牛(Holstein-Friesian)的个体识别是精准养殖的核心需求,涉及健康监测、发情期判断和产奶管理等关键环节。传统方法依赖耳标或人工观察,效率低下且易干扰动物福利。尽管计算机视觉(CV)技术已应用于奶牛识别,但现有研究多基于单摄像头系统,存在视角单一、人工标注成本高(如Cows2021数据集需数周标注)和跨场景泛化性差等问题。更棘手的是,农场环境要求系统能适应多摄像头覆盖、动态光照和密集遮挡等复杂条件,而此前缺乏真实农场场景下的多视角数据集和高效算法框架。

研究设计与方法
由国内某研究团队领衔的研究在《Computers and Electronics in Agriculture》发表论文,提出MultiCamCows2024数据集——首个覆盖7天、90头奶牛、101,329张图像的农场多摄像头数据集。研究通过三台天花板安装的HikVision摄像头(2560×1440分辨率,25FPS)采集奶牛行走轨迹,结合ResNet-152骨干网络训练物种检测器(mAP达99.01%),生成标准化轨迹片段(Tracklet)。关键技术创新包括:

  1. 多摄像头数据融合:整合三个摄像头视角(含重叠区域)提升特征多样性;
  2. 自监督学习框架:采用NTXentLoss对比学习,以轨迹片段为伪标签替代人工标注;
  3. 双路径验证:对比监督学习(Cross-Entropy Loss)与自监督学习性能。

研究结果

  1. 多摄像头提升识别性能
    融合三摄像头数据的自监督模型达到96.36%准确率,较单摄像头最高提升39.67%(Camera 3)。监督学习在Camera 1单独测试中表现最佳(96.78%),但多摄像头融合后稳定性更优(KFCV均值99.63±0.22%)。

  2. 自监督学习的优势
    自监督框架在隐藏层维度32D时表现最优,其UMAP可视化显示特征空间聚类明显(图7)。尽管Camera 3因奶牛静止导致性能下降(56.69%),多数据源仍显著缓解了单一视角的局限性。

  3. 实际应用潜力
    混淆矩阵分析(图6)显示主要错误源于图案相似个体(如编号035与031奶牛),但系统在跨日期验证中保持91.70%准确率,证实其对时间变化的鲁棒性。

结论与展望
该研究首次证明多摄像头数据融合与自监督学习的协同效应能实现农场级奶牛高精度识别,且无需个体标注。未来可扩展至开放集(Open-Set)识别以应对新引入奶牛,并探索Transformer架构(如ViT)在复杂场景中的应用。数据集与代码已开源(https://tinyurl.com/MultiCamCows2024),为智慧农业提供了可复用的技术范式。

相关新闻
生物通微信公众号
微信
新浪微博
  • 急聘职位
  • 高薪职位

知名企业招聘

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号