CN115226650A - 基于交互特征的母猪发情状态自动检测系统 - Google Patents
基于交互特征的母猪发情状态自动检测系统 Download PDFInfo
- Publication number
- CN115226650A CN115226650A CN202210627637.8A CN202210627637A CN115226650A CN 115226650 A CN115226650 A CN 115226650A CN 202210627637 A CN202210627637 A CN 202210627637A CN 115226650 A CN115226650 A CN 115226650A
- Authority
- CN
- China
- Prior art keywords
- module
- boar
- bionic
- model
- sow
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000012173 estrus Effects 0.000 title claims abstract description 79
- 238000001514 detection method Methods 0.000 title claims abstract description 37
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 35
- 239000011664 nicotinic acid Substances 0.000 claims abstract description 74
- 238000012360 testing method Methods 0.000 claims abstract description 40
- 230000005540 biological transmission Effects 0.000 claims abstract description 20
- 238000012545 processing Methods 0.000 claims abstract description 20
- 241000282887 Suidae Species 0.000 claims abstract description 13
- 230000003993 interaction Effects 0.000 claims description 30
- 238000012549 training Methods 0.000 claims description 19
- 238000004364 calculation method Methods 0.000 claims description 15
- 238000000034 method Methods 0.000 claims description 13
- 238000013138 pruning Methods 0.000 claims description 10
- 230000001629 suppression Effects 0.000 claims description 10
- 230000008569 process Effects 0.000 claims description 9
- 238000011156 evaluation Methods 0.000 claims description 7
- 230000001939 inductive effect Effects 0.000 claims description 5
- 238000005457 optimization Methods 0.000 claims description 5
- 238000005507 spraying Methods 0.000 claims description 5
- 238000013528 artificial neural network Methods 0.000 claims description 4
- 239000003205 fragrance Substances 0.000 claims description 4
- 230000006870 function Effects 0.000 claims description 4
- 230000001965 increasing effect Effects 0.000 claims description 4
- 238000009826 distribution Methods 0.000 claims description 3
- 238000002372 labelling Methods 0.000 claims description 3
- 230000001105 regulatory effect Effects 0.000 claims description 3
- 238000004659 sterilization and disinfection Methods 0.000 claims description 3
- 230000007704 transition Effects 0.000 claims description 3
- 238000013519 translation Methods 0.000 claims description 3
- 230000000007 visual effect Effects 0.000 claims description 3
- 238000010606 normalization Methods 0.000 claims description 2
- 238000012795 verification Methods 0.000 claims description 2
- 230000002401 inhibitory effect Effects 0.000 claims 1
- 239000013585 weight reducing agent Substances 0.000 claims 1
- 230000006399 behavior Effects 0.000 abstract description 28
- 230000006698 induction Effects 0.000 abstract description 6
- 201000010099 disease Diseases 0.000 abstract description 3
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 abstract description 3
- 238000009395 breeding Methods 0.000 description 9
- 230000001488 breeding effect Effects 0.000 description 9
- 230000007246 mechanism Effects 0.000 description 9
- 238000007726 management method Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000002159 abnormal effect Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000013461 design Methods 0.000 description 4
- 230000035945 sensitivity Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000018109 developmental process Effects 0.000 description 3
- 230000005764 inhibitory process Effects 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 239000007921 spray Substances 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000009396 hybridization Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000000638 stimulation Effects 0.000 description 2
- 230000003187 abdominal effect Effects 0.000 description 1
- 238000007792 addition Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- QTCANKDTWWSCMR-UHFFFAOYSA-N costic aldehyde Natural products C1CCC(=C)C2CC(C(=C)C=O)CCC21C QTCANKDTWWSCMR-UHFFFAOYSA-N 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013079 data visualisation Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- ISTFUJWTQAMRGA-UHFFFAOYSA-N iso-beta-costal Natural products C1C(C(=C)C=O)CCC2(C)CCCC(C)=C21 ISTFUJWTQAMRGA-UHFFFAOYSA-N 0.000 description 1
- 244000144972 livestock Species 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000013011 mating Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000035764 nutrition Effects 0.000 description 1
- 235000016709 nutrition Nutrition 0.000 description 1
- 239000003016 pheromone Substances 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000011897 real-time detection Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000003892 spreading Methods 0.000 description 1
- 229910001220 stainless steel Inorganic materials 0.000 description 1
- 239000010935 stainless steel Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000004936 stimulating effect Effects 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 230000033772 system development Effects 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01K—ANIMAL HUSBANDRY; AVICULTURE; APICULTURE; PISCICULTURE; FISHING; REARING OR BREEDING ANIMALS, NOT OTHERWISE PROVIDED FOR; NEW BREEDS OF ANIMALS
- A01K29/00—Other apparatus for animal husbandry
- A01K29/005—Monitoring or measuring activity, e.g. detecting heat or mating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
- G06N3/082—Learning methods modifying the architecture, e.g. adding, deleting or silencing nodes or connections
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/94—Hardware or software architectures specially adapted for image or video understanding
- G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P60/00—Technologies relating to agriculture, livestock or agroalimentary industries
- Y02P60/80—Food processing, e.g. use of renewable energies or variable speed drives in handling, conveying or stacking
- Y02P60/87—Re-use of by-products of food processing for fodder production
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Biophysics (AREA)
- Environmental Sciences (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Computational Linguistics (AREA)
- Animal Husbandry (AREA)
- Biodiversity & Conservation Biology (AREA)
- Medical Informatics (AREA)
- Social Psychology (AREA)
- Biomedical Technology (AREA)
- Psychiatry (AREA)
- Data Mining & Analysis (AREA)
- Molecular Biology (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Catching Or Destruction (AREA)
Abstract
本发明公开了一种基于交互特征的母猪发情状态自动检测系统。利用建立的母猪交互行为检测模型，对空怀母猪与仿生公猪的交互行为实时识别，实现对限位栏内母猪发情状态自动检测的功能。系统由履带式驱动模块、仿生公猪试情模块、数据采集与处理模块、无线数据传输模块、云服务器、数据展示模块六部分组成。本系统采用母猪发情状态检测系统自动查情，能够实现发情母猪的快速检测，且无需人工和公猪参与，可减少因公猪参与诱情和人工参与查情引起的疫病传播风险。
Description
技术领域
本发明涉及畜禽养殖、本发明涉及母猪管理技术、计算机技术、图像处理技术、边缘计算技术、自动控制技术领域，具体地讲是一种基于交互特征的母猪发情状态自动检测系统。
背景技术
能繁母猪的存栏量直接关系到我国生猪养殖产业的发展，发情检测是能繁母猪繁殖工作的重要技术环节。提高发情检测的及时性和准确性，确保发情母猪能够适时配种，减少空怀母猪数量，提高经产母猪的利用率，是提升猪场生产效益的关键。目前，母猪发情检测主要采取人工试情法，通过刺激母猪肋部、腹部、外阴部，对母猪的“静立反应”状态进行人工判断，该方法费时费力，并且严重依赖于配种人员的查情经验，难以满足规模化养殖对母猪发情状态实时检测的需求。
发明内容
本发明基于背景技术中存在的问题，采用仿生公猪进行试情，模拟公猪在嗅觉、视觉和触觉上对母猪产生的刺激作用，利用机器视觉技术识别发情母猪与仿生公猪的交互行为，可自动检测母猪的发情状态，提高经产母猪的利用率，提升猪场的生产管理效率。
技术方案：
一种基于交互特征的母猪发情状态自动检测系统，它包括：驱动模块、仿生公猪试情模块、数据采集与处理模块、无线数据传输模块、云服务器和数据展示模块，其中：
仿生公猪试情模块固定于驱动模块上方，驱动模块作为行进装置带动仿生公猪试情模块巡航；
数据采集与处理模块包括第一图像采集节点、第二图像采集节点、第一边缘节点、第二边缘节点，第一图像采集节点用于采集目标区域的图像数据；第二图像采集节点用于采集母猪与仿生公猪的交互数据；第一边缘节点与第一图像采集节点相连，用于检测视野内是否存在猪鼻目标；第二边缘节点与第二图像采集节点相连，用于识别母猪与仿生公猪的交互行为，并将识别结果通过无线数据传输模块存储于云服务器的数据库中；
数据展示模块用于展示检测结果。
优选的，所述驱动模块为履带式驱动模块。
优选的，所述仿生公猪试情模块装置于仿生公猪模型的内部，仿生公猪试情模块包括：
摇臂，用于改变电机产生扭矩的方向，一端与电机相连，另一端通过行程定位螺栓与连杆相连；
电机为直流减速电机，转速为20rpm，为仿生公猪试情模块运行提供动力，固定于底座；
轴承，用于固定往复推杆，与往复推杆采用过渡配合；
底座与电机的机座相连，起固定电机作用，电机轴穿过底座与摇臂相连，带动摇臂做圆周运动，摇臂与连杆相连，连杆与往复推杆相连，带动往复推杆做往复直线运动，往复推杆与头部固定支架相连，上述构件实现将电机轴的旋转运动转换为往复推杆的往复直线运动；
头部固定支架，用于将仿生公猪试情模块前端固定于仿生公猪模型头部区域；
往复推杆，往复推杆与头部固定支架相连接，确保仿生公猪模型的头部可以循环摆动；
连杆，用于连接往复推杆和摇臂；
行程定位螺栓，用于定级调节行程；
颈部固定支架，用于将仿生公猪试情模块后端固定于仿生公猪模型颈部区域。
优选的，仿生公猪试情模块还包括设置于仿生公猪模型头部区域的公猪诱情气味素喷洒模块和模拟公猪声播放模块。
优选的，第二边缘节点、第三边缘节点、无线数据传输模块均设置于支架的顶端，俯视采集图像数据并上传；第一边缘节点与第一图像采集节点设置于支架的中部，水平采集图像数据并处理。
优选的，数据采集与处理模块中，母猪交互行为识别基于母猪交互行为检测模型实现，母猪交互行为检测模型的构建步骤为：
S1-1、数据集制作；
S1-2、数据集扩充，采用Mosaic数据增强方式将原始图片进行数据扩充；
S1-3、数据集标准化并标注，将标注好的数据随机分配至训练集，测试集和验证集中；
S1-4、模型轻量化，在YOLO v5s基准网络的基础上，对模型进行结构化剪枝；
S1-5、非极大值抑制优化；
S1-6、模型训练；
S1-7、模型部署，将母猪交互行为识别模型部署至第二边缘节点上，当边缘节点检测到母猪与仿生公猪的交互图像后，通过无线信息传输模块将结果存储与数据库中。
优选的，S1-4模型轻量化的具体过程为：
在YOLO v5s基准网络的BN层加入超参数γ和ρ，采用缩放与平移两种操作对通道数据进行归一化处理，以学习神经网络的特征分布，其计算方法如下所示：
式中，Sin为BN层的输入，Sout为BN层的输出，A为每次调整参数前所选取样本的mini-batch，μA为样本数据的均值，σA为样本数据的标准差，p是为了避免除数为0时所使用的微小正数；
在BN层的各通道加入尺寸因子，同时在损失函数中引入惩罚项，与网络权重联合训练得到稀疏网络的尺寸因子γ，其计算方法如下所示：
式中，第一项为网络预测的正常损失值计算，(x,y)为训练的输入与输出，W为网络权重；第二项为L1正则化，用于降低模型的复杂度。
优选的，S1-5非极大值抑制优化：采用距离交并比非极大值抑制DIoU-NMS代替交并比非极大值抑制IoU-NMS，在预测框与真实框重叠区域的判定基础上，增加对目标框中心点欧式距离的计算；当仿生公猪与母猪目标框出现IoU较大、中心距离也较大时，判定为两个目标，以提升模型的检测精度；其中，DIoU计算方法如下所示：
式中：IoU为目标框交并比，d为目标框之间的中心距，c为目标框最小外接矩形的对角距离，DIoU_NMS的处理逻辑为如下所示
式中，si为分类评价得分，ε为非极大值抑制阈值。
优选的，系统包含供电模块，设置于驱动模块内部，负责向驱动模块、仿生公猪试情模块、数据采集与处理模块、无线数据传输模块供电。
优选的，驱动模块巡查完毕后，当供电模块电压低于设定低压阈值时，自动前往充电桩充电；高于设定电压阈值时，前往指定区域执行消毒。
本发明的有益效果
(1)本系统采用母猪发情状态检测系统自动查情，能够实现发情母猪的快速检测，且无需人工和公猪参与，可减少因公猪参与诱情和人工参与查情引起的疫病传播风险。
(2)系统能够自动分析母猪与仿生公猪的交互特征，较为准确地将发情母猪和乏情母猪识别出来。
(3)通过现场测试，采用本系统，可显著提升母猪的发情率和受胎率，减少因刺激不足而导致母猪出现隐形发情的几率，提高母猪产仔率、仔猪窝均重及健仔数。
附图说明
图1为本发明的系统框图
图2为本发明的系统工作流程图
图3为本发明的系统机械结构示意图
图4为仿生公猪头转动机构设计图
图5为母猪交互行为识别模型的模型通道剪枝流程图
图6为实施例中三类母猪的交互频率折线图
图7为本发明的结构框图
具体实施方式
下面结合实施例对本发明作进一步说明，但本发明的保护范围不限于此：
本发明结合母猪实际养殖环境中的需求，发明了一种基于交互特征的母猪发情状态自动检测系统。利用建立的母猪交互行为检测模型，对空怀母猪与仿生公猪的交互行为实时识别，实现对限位栏内母猪发情状态自动检测的功能。系统由履带式驱动模块、仿生公猪试情模块、数据采集与处理模块、无线数据传输模块、云服务器、数据展示模块六部分组成，系统工作示意图如图1和图7所示。履带式驱动模块搭载仿生公猪试情模块以0.1m/s的速度行进，到达单个母猪栏位中部并识别到猪鼻目标，同时释放诱情素、播放模拟公猪声、运行仿生公猪头部转动机构，数据采集与处理模块实时识别母猪与仿生公猪的交互行为，无线数据传输模块将当前猪只的编号信息、交互数据等上传至云服务器的数据库中，云服务器根据预先设定的阈值实时判别当前母猪的发情状态并存储，数据展示模块通过无线传输接受云服务器发送的发情信息，通过用户终端提醒管理员为发情母猪配种。
通过实地考察养殖舍环境，选择履带式驱动模块作为仿生公猪试情模块的载体，在经产母猪断奶后1-7天采集仿生公猪试情的视频数据。系统每天于喂料后开始工作，到达限位栏中部后，安装在仿生公猪头部的第一图像采集节点实时采集当前限位栏区域图像数据并传输至第一边缘节点，当第一边缘节点检测到图像中存在猪鼻目标，系统启动诱情模块，同时安装在距离地面2.2m处的第二图像采集节点开始采集仿生公猪与母猪的交互图像数据并传输至第一边缘节点，第二边缘节点检测图像中的仿生公猪目标与当前母猪是否交互，并将三分钟内的交互时间与交互次数通过无线数据传输模块传输至云服务器的数据库中，云服务器的中间件管理平台根据发情判定模型，将猪只位置、交互频率、发情状态等信息下发至管理员手机APP终端和Web网页端，系统工作流程图如图2所示。
系统研制步骤如下：
第一步：研制仿生公猪试情模块，主要包括公猪诱情气味素喷洒模块、模拟公猪声播放模块、仿生公猪头转动机构，三个部分采用STM32F103芯片集中控制。
第二步：仿生公猪试情模块由履带式驱动模块搭载，履带式驱动模块采用多线激光雷达导航，采用模糊偏好行为的控制算法实现配怀舍环境下的避障控制，采用蒙特卡洛算法与 A*实现行走模块的定位与路径规划。
第三步：研制数据数据采集与处理模块，本模块主要包括：第一图像采集节点、第一边缘节点、第二图像采集节点、第二边缘节点。其中，第一图像采集节点与第一边缘节点相连，第二图像采集节点与第二边缘节点相连，边缘节点每隔1s从图像采集节点读入一次数据。
第四步：制备数据集，主要包括图片获取、数据清洗、图片标注、Mosaic数据增强、数据集格式化等过程。数据清洗阶段剔除质量较差的图片，同时删除相似度过高的图片，按8:1:1将标注好的数据随机分配至训练集，测试集和验证集中。
第五步：在YOLO v5s基准网络的基础上，对模型先进行结构化剪枝，以充分降低模型的复杂度，保证在边缘节点上的检测速度，模型剪枝操作主要包括稀疏训练、通道剪枝、模型微调三个过程。然后对剪枝后进行非极大值抑制优化，以提升模型的检测精度。。
第六步：对模型进行训练，并在模型训练前，统一各个网络模型的参数，选取最优的模型作为猪鼻目标识别模型和母猪与仿生公猪的交互行为识别模型。
第七步：根据检测模型输出的各个时刻的交互状态，对经产母猪的交互频率进行分析。统计每头母猪发情期与非发情期交互时长，以错误率、灵敏度、特异性、准确率作为评价指标，确定发情的判定时间阈值，并将代码部署至中间件管理平台。
第八步：选取包括乏情母猪、持续发情的母猪的图像数据，对其交互频率进行分析，确定异常发情的母猪的交互时间特征，并将代码部署至中间件管理平台。
第九步：将交互行为识别模型部署至第二边缘节点上，并将模型检测结果传入云服务器进行存储，中间件管理平台将对应空怀母猪的交互频率、发情状态信息下发至管理员手机 APP端和Web网页端。
第十步：将猪鼻目标识别模型部署至第一边缘节点，模型识别到猪鼻目标后，发送信号至STM32F103单片机控制板，控制板控制诱情模块的启动，公猪诱情气味素喷洒模块工作 3秒后停止，模拟公猪声播放模块、仿生公猪头转动机构工作3分钟后停止。
第十一步：供电模块位于履带式驱动模块内部，为24V直流电源，负责向履带式驱动模块、仿生公猪试情模块、数据采集与处理模块、无线数据传输模块供电。当供电模块电压低于设定低压阈值时，自动前往充电桩充电，高于设定电压阈值时，前往指定区域执行消毒任务，然后由1号位开始执行查情任务。
各模块方案的具体设计包括：
(1)仿生公猪试情模块的研制
为实现限位栏场景下的空怀母猪的发情自动化检测，本发明设计了一个仿生公猪试情模块，可实现规模化猪场的自动诱情，无需人工和公猪参与，可减少因公猪参与诱情和人工参与查情引起的疫病传播风险，本发明总体结构示意图如图3所示。
其中1为无线数据传输模块，与第二边缘节点相连，负责将边缘节点处理的数据结果传输至云服务器；2为第二边缘节点，用于识别母猪与仿生公猪的交互行为，并将识别结果存储于云服务器的数据库中；3为第二图像采集节点，距离地面高度为2.2m，用于采集母猪与仿生公猪的交互数据；4为支架，用于搭载无线信号收发模块、第一图像采集节点、第一边缘节点、第二图像采集节点、第二图像采集节点；5为第一边缘节点，与第一图像采集节点相连，用于检测视野内是否存在猪鼻目标，并发送信息至STM32F103单片机控制板；6为第一图像采集节点，用于采集目标区域的图像数据；7为仿生公猪头转动机构，用以模拟公猪查情时的行为，转动速度为20rpm；8为公猪诱情气味素喷洒模块，用于将信息素喷洒至猪鼻区域；9为模拟公猪声播放模块，内置公猪声音播放素材；10为履带式驱动模块，用于搭载上述各个模块。
仿生公猪头转动机构位于仿生公猪模型内部，采用M6不锈钢内六角螺栓固定于仿生模型上，整个机构与公猪诱情气味素喷洒模块、模拟公猪声播放模块连接至STM32F103单片机控制板，仿生公猪头转动机构设计图如图4所示：
摇臂11，用于改变电机12产生扭矩的方向，一端与电机12相连，另一端通过行程定位螺栓18与连杆17相连；
电机12为直流减速电机，转速为20rpm，为仿生公猪试情模块运行提供动力，固定于底座14；
轴承13，用于固定往复推杆16，与往复推杆16采用过渡配合；
底座14与电机12的机座相连，起固定电机作用，电机轴穿过底座14与摇臂11相连，带动摇臂11做圆周运动，摇臂11与连杆17相连，连杆17与往复推杆16相连，带动往复推杆16做往复直线运动，往复推杆16与头部固定支架15相连，上述构件实现将电机轴的旋转运动转换为往复推杆16的往复直线运动。
头部固定支架15，用于将仿生公猪试情模块前端固定于仿生公猪模型7头部区域；
往复推杆16，往复推杆16与头部固定支架15相连接，确保仿生公猪模型的头部可以循环摆动；
连杆17，用于连接往复推杆16和摇臂11；
行程定位螺栓18，用于定级调节行程；
颈部固定支架19，用于将仿生公猪试情模块后端固定于仿生公猪模型7颈部区域。
(2)母猪交互行为识别
本设计对母猪与仿生公猪交互图像的处理包括：
S1-1、数据集制作：第二边缘节点每隔1s抓取第二图像采集节点的RTSP格式的视频流数据，无线信号收发模块将数据传输至云服务器上，用户调用云服务器接口获取图像数据，剔除质量较差的图片，同时删除相似度过高的图片，使用开源软件labelImg软件对目标区域进行人工标注。
S1-2、数据集扩充：根据母猪与仿生公猪交互行为在图像中出现位置的不确定性以及交互区域光照变化的特点。为减轻过拟合，扩大模型的应用场景，增强模型鲁棒性，采用 Mosaic数据增强方式将原始图片进行数据扩充，本发明采用几何变形、随机剪接、光照与色彩调节等扩充方式，并随机添加边缘空白。
S1-3、数据集格式化：以PASCAL VOC标准格式对数据集进行格式化，将原图置于images目录下，将相应的标签文件置于labels文件夹下，运行voc-YOLOv5.py脚本文件在文件夹Main目录下生成包含图片名称的train.txt、test.txt文件，按8:1:1将标注好的数据随机分配至训练集，测试集和验证集中。
S1-4、模型轻量化
考虑到猪场实际生产条件的限制，为便于经产母猪发情行为识别所需的软硬件部署。本发明在YOLO v5s基准网络的基础上，对模型进行结构化剪枝，以充分降低模型的复杂度，在保证模型识别精度的同时，提高模型的识别速度。模型剪枝过程如图5所示，主要包括稀疏训练、通道剪枝、模型微调三个过程。
为了缩短卷积神经网络的训练时间，在较短的时间内得到最佳模型，本发明在YOLO v5s基准网络的BN层加入超参数γ和ρ，采用缩放与平移两种操作对通道数据进行归一化处理，以学习神经网络的特征分布，其计算方法如下所示。
式中，Sin为BN层的输入，Sout为BN层的输出，A为每次调整参数前所选取样本的mini-batch，μA为样本数据的均值，σA为样本数据的标准差，p是为了避免除数为0时所使用的微小正数。
在BN层的各通道加入尺寸因子，同时在损失函数中引入惩罚项，与网络权重联合训练得到稀疏网络的尺寸因子γ，其计算方法如下所示。
式中，第一项为网络预测的正常损失值计算，(x,y)为训练的输入与输出，W为网络权重。第二项为L1正则化，用于降低模型的复杂度。当网络中的W接近0时，即得到稀疏网络，最后进行模型微调，目的是挖掘神经网络的潜在性能。
S1-5、非极大值抑制优化：在仿生公猪试情场景下，当母猪接近仿生公猪时或母猪部分遮挡公猪时，由于IoU值较大，经过非极大抑制处理后，只剩下单一检测框，在一定程度上增加了漏检概率。针对以上问题，本发明采用DIoU-NMS代替GIoU-NMS，在预测框与真实框重叠区域的判定基础上，增加对目标框中心点欧式距离的计算。当仿生公猪与母猪目标框出现IoU较大、中心距离也较大时，判定为两个目标，以提升模型的检测精度。其中， DIoU计算方法如下所示。
式中：IoU为目标框交并比，d为目标框之间的中心距，c为目标框最小外接矩形的对角距离，DIoU_NMS的处理逻辑为如下所示。
式中，si为分类评价得分，ε为非极大值抑制阈值，DIoU_NMS能够将重叠面积与目标预测框中心距综合考虑，可较为精确地筛选目标框。
S1-6、模型训练：模型依赖于Pytorch1.6深度学习框架，试验平台处理器型号为
CoreTM i7-11700k，显卡型号为NVIDIA GTX3090，显卡内存为24G，在Ubuntu18.04操作系统上配置Python3.8、CUDA11.4、Opencv4.5.1等深度学习环境。
在模型训练前，统一各个网络模型的参数，其中Epochs设置为160，Batchsize设置为 16，初始学习率lr0设置为0.01，循环学习率lrf设置为0.1，学习率动量momentum设置为0.98，权重衰减系数为0.0005，每个Epoch保存一次模型，选取最优的模型作为交互行为识别模型。
S1-7、模型部署：将母猪交互行为识别模型部署至第二边缘节点上，当边缘节点检测到母猪与仿生公猪的交互图像后，通过无线信息传输模块将结果存储与数据库中。
重复S1-1至S1-6，可得到猪鼻目标识别模型，将猪鼻目标识别模型部署至第一边缘节点上，当模型识别到猪鼻目标后，发送信号至STM32F103单片机控制板，控制板控制诱情模块的启动，公猪诱情气味素喷洒模块工作3秒后停止，模拟公猪声播放模块、仿生公猪头转动机构工作3分钟后停止。
(3)母猪发情判定
选取500组母猪行为数据，每组90张图像，其中包含250组非发情期母猪行为数据和 250组发情期母猪行为数据进行测试。根据测试结果，分别以11s、14s、17s、20s、23s作为是否发情的判定阈值，计算发情识别结果，以错误率、灵敏度、特异性、准确率作为评价指标，各评价指标的计算方法如下所示。本发明综合以上评价指标，以20s作为发情检测阈值，其发情检测错误率为10％，灵敏度为90％，特异性为89.1％、准确率为89.6％。
式中,ER为发情检测的错误率，SE为发情检测的灵敏度，SP为发情检测的特异性，P为发情检测的准确率，TP是指样本为正样本，预测结果为正样本的数量，FP是指样本为负样本，预测结果为正样本的数量，FN是指样本为正样本，预测结果为负样本的数量，TN是指样本为负样本，预测结果为负样本的数量。
(4)异常发情判定
根据云服务端数据库中存储的母猪与仿生公猪的交互时间及交互次数数据，中间件管理平台自动绘制猪只七天内的交互频率图，结合当前季节、配怀舍温湿度、舍内空气质量等数据，将猪只划分为正常发情母猪、异常发情母猪，异常发情母猪包括乏情母猪与持续发情母猪，相较于正常发情的母猪，乏情母猪的交互频率持续处于较低水平，持续发情的母猪交互时长和频率会出现多个峰值，7日内总交互时长可达到正常发情母猪的3倍以上，图6为三类母猪的交互频率折线图。对于异常发情母猪，系统将建议管理员保证饲料的营养全面平衡、及时查看当前母猪膘情状况。
基于以上方案实施，本系统获得效果如下：
(1)仿生公猪试情
仿生公猪试情模块按照指定路线在配怀舍完成自动诱情与查情，可根据图像采集设备判定目标区域是否有猪鼻目标，减少诱情素浪费。
(2)交互行为识别
边缘节点完成交互行为识别，并通过无线传输模型将交互行为识别结果上传至云服务器。
(3)数据分析
云服务器根据母猪发情判定阈值，判定当前母猪是否发情，将当前母猪编号同发情状态、交互时间、交互次数等存储至数据库，并将发情判定结果下发至用户终端，并根据交互特征，将乏情母猪与持续发情的母猪检测出来。
(4)数据可视化
管理员可根据系统下发的空怀母猪发情判定信息前往配种，根据异常发情信息对异常母猪进行及时处理。
本文中所描述的具体实施例仅仅是对本发明精神做举例说明。本发明所属技术领域的技术人员可以对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，但并不会偏离本发明的精神或者超越所附权利要求书所定义的范围。
Claims (10)
1.一种基于交互特征的母猪发情状态自动检测系统，其特征在于它包括：驱动模块、仿生公猪试情模块、数据采集与处理模块、无线数据传输模块、云服务器和数据展示模块，其中：
仿生公猪试情模块固定于驱动模块上方，驱动模块作为行进装置带动仿生公猪试情模块巡航；
数据采集与处理模块包括第一图像采集节点(6)、第二图像采集节点(3)、第一边缘节点(5)、第二边缘节点(2)，第一图像采集节点(6)用于采集目标区域的图像数据；第二图像采集节点(3)用于采集母猪与仿生公猪的交互数据；第一边缘节点(5)与第一图像采集节点(6)相连，用于检测视野内是否存在猪鼻目标；第二边缘节点(2)与第二图像采集节点(3)相连，用于识别母猪与仿生公猪的交互行为，并将识别结果通过无线数据传输模块(1)存储于云服务器的数据库中；
数据展示模块用于展示检测结果。
2.根据权利要求1所述的系统，其特征在于所述驱动模块为履带式驱动模块。
3.根据权利要求1所述的系统，其特征在于所述仿生公猪试情模块装置于仿生公猪模型(7)的内部，仿生公猪试情模块包括：
摇臂(11)，用于改变电机(12)产生扭矩的方向，一端与电机(12)相连，另一端通过行程定位螺栓(18)与连杆(17)相连；
电机(12)为直流减速电机，转速为20rpm，为仿生公猪试情模块运行提供动力，固定于底座(14)；
轴承(13)，用于固定往复推杆(16)，与往复推杆(16)采用过渡配合；
底座(14)与电机(12)的机座相连，起固定电机作用，电机轴穿过底座(14)与摇臂(11)相连，带动摇臂(11)做圆周运动，摇臂(11)与连杆(17)相连，连杆(17)与往复推杆(16)相连，带动往复推杆(16)做往复直线运动，往复推杆(16)与头部固定支架(15)相连，上述构件实现将电机轴的旋转运动转换为往复推杆(16)的往复直线运动；
头部固定支架(15)，用于将仿生公猪试情模块前端固定于仿生公猪模型(7)头部区域；
往复推杆(16)，往复推杆(16)与头部固定支架(15)相连接，确保仿生公猪模型的头部可以循环摆动；
连杆(17)，用于连接往复推杆(16)和摇臂(11)；
行程定位螺栓(18)，用于定级调节行程；
颈部固定支架(19)，用于将仿生公猪试情模块后端固定于仿生公猪模型(7)颈部区域。
4.根据权利要求1所述的系统，其特征在于仿生公猪试情模块还包括设置于仿生公猪模型(7)头部区域的公猪诱情气味素喷洒模块(8)和模拟公猪声播放模块(9)。
5.根据权利要求1所述的系统，其特征在于第二边缘节点(2)、第三边缘节点(3)、无线数据传输模块(1)均设置于支架(4)的顶端，俯视采集图像数据并上传；第一边缘节点(5)与第一图像采集节点(6)设置于支架(4)的中部，水平采集图像数据并处理。
6.根据权利要求1所述的系统，其特征在于数据采集与处理模块中，母猪交互行为识别基于母猪交互行为检测模型实现，母猪交互行为检测模型的构建步骤为：
S1-1、数据集制作；
S1-2、数据集扩充，采用Mosaic数据增强方式将原始图片进行数据扩充；
S1-3、数据集标准化并标注，将标注好的数据随机分配至训练集，测试集和验证集中；
S1-4、模型轻量化，在YOLO v5s基准网络的基础上，对模型进行结构化剪枝；
S1-5、非极大值抑制优化；
S1-6、模型训练；
S1-7、模型部署，将母猪交互行为识别模型部署至第二边缘节点上，当边缘节点检测到母猪与仿生公猪的交互图像后，通过无线信息传输模块将结果存储与数据库中。
7.根据权利要求6所述的系统，其特征在于S1-4模型轻量化的具体过程为：
在YOLO v5s基准网络的BN层加入超参数γ和ρ，采用缩放与平移两种操作对通道数据进行归一化处理，以学习神经网络的特征分布，其计算方法如下所示：
式中，Sin为BN层的输入，Sout为BN层的输出，A为每次调整参数前所选取样本的mini-batch，μA为样本数据的均值，σA为样本数据的标准差，p是为了避免除数为0时所使用的微小正数；
在BN层的各通道加入尺寸因子，同时在损失函数中引入惩罚项，与网络权重联合训练得到稀疏网络的尺寸因子γ，其计算方法如下所示：
式中，第一项为网络预测的正常损失值计算，(x,y)为训练的输入与输出，W为网络权重；第二项为L1正则化，用于降低模型的复杂度。
8.根据权利要求6所述的系统，其特征在于S1-5非极大值抑制优化：采用距离交并比非极大值抑制DIoU-NMS代替交并比非极大值抑制IoU-NMS，在预测框与真实框重叠区域的判定基础上，增加对目标框中心点欧式距离的计算；当仿生公猪与母猪目标框出现IoU较大、中心距离也较大时，判定为两个目标，以提升模型的检测精度；其中，DIoU计算方法如下所示：
式中：IoU为目标框交并比，d为目标框之间的中心距，c为目标框最小外接矩形的对角距离，DIoU_NMS的处理逻辑为如下所示
式中，si为分类评价得分，ε为非极大值抑制阈值。
9.根据权利要求1所述的系统，其特征在于系统包含供电模块，设置于驱动模块内部，负责向驱动模块、仿生公猪试情模块、数据采集与处理模块、无线数据传输模块供电。
10.根据权利要求9所述的系统，其特征在于驱动模块巡查完毕后，当供电模块电压低于设定低压阈值时，自动前往充电桩充电；高于设定电压阈值时，前往指定区域执行消毒。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210627637.8A CN115226650B (zh) | 2022-06-02 | 2022-06-02 | 基于交互特征的母猪发情状态自动检测系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210627637.8A CN115226650B (zh) | 2022-06-02 | 2022-06-02 | 基于交互特征的母猪发情状态自动检测系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115226650A true CN115226650A (zh) | 2022-10-25 |
| CN115226650B CN115226650B (zh) | 2023-08-08 |
Family
ID=83669379
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210627637.8A Active CN115226650B (zh) | 2022-06-02 | 2022-06-02 | 基于交互特征的母猪发情状态自动检测系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115226650B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115943908A (zh) * | 2022-12-05 | 2023-04-11 | 中国农业科学院北京畜牧兽医研究所 | 基于自适应导航的母猪发情检测方法及相关设备 |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106719066A (zh) * | 2017-03-27 | 2017-05-31 | 南京农业大学 | 一种仿生学母羊查情/诱情装置及查情/诱情方法 |
| CN206297718U (zh) * | 2016-11-08 | 2017-07-04 | 山东科技大学 | 一种仿生机械鱼尾部推进机构 |
| CN108633774A (zh) * | 2018-05-09 | 2018-10-12 | 中国农业科学院北京畜牧兽医研究所 | 一种用于母猪发情识别的机器公猪 |
| CN110147771A (zh) * | 2019-05-23 | 2019-08-20 | 南京农业大学 | 基于母猪关键部位与环境联合分区的母猪侧卧姿态实时检测系统 |
| CN110934659A (zh) * | 2019-12-11 | 2020-03-31 | 江苏姜曲海种猪场 | 一种智能试情机器公猪 |
| CN211266661U (zh) * | 2020-01-13 | 2020-08-14 | 东莞市秦艺电机有限公司 | 直线往复推杆结构 |
| CN211407239U (zh) * | 2019-09-30 | 2020-09-04 | 温氏食品集团股份有限公司 | 一种母猪查情装置 |
| CN112101434A (zh) * | 2020-09-04 | 2020-12-18 | 河南大学 | 基于改进YOLO v3的红外图像弱小目标检测方法 |
| CN112640809A (zh) * | 2020-12-18 | 2021-04-13 | 中国农业大学 | 母猪发情检测方法和装置 |
| CN113428330A (zh) * | 2021-08-10 | 2021-09-24 | 北京理工大学 | 一种柔性仿生机器鱼 |
| CN113705478A (zh) * | 2021-08-31 | 2021-11-26 | 中国林业科学研究院资源信息研究所 | 一种基于改进YOLOv5的红树林单木目标检测方法 |
| CN114255357A (zh) * | 2021-12-23 | 2022-03-29 | 东北大学 | 一种基于计算机视觉的群养生猪身份识别与健康监测方法 |
| CN114529806A (zh) * | 2022-02-21 | 2022-05-24 | 沈阳理工大学 | 一种基于压缩ssd的低空飞行物检测方法 |
-
2022
- 2022-06-02 CN CN202210627637.8A patent/CN115226650B/zh active Active
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN206297718U (zh) * | 2016-11-08 | 2017-07-04 | 山东科技大学 | 一种仿生机械鱼尾部推进机构 |
| CN106719066A (zh) * | 2017-03-27 | 2017-05-31 | 南京农业大学 | 一种仿生学母羊查情/诱情装置及查情/诱情方法 |
| CN108633774A (zh) * | 2018-05-09 | 2018-10-12 | 中国农业科学院北京畜牧兽医研究所 | 一种用于母猪发情识别的机器公猪 |
| CN110147771A (zh) * | 2019-05-23 | 2019-08-20 | 南京农业大学 | 基于母猪关键部位与环境联合分区的母猪侧卧姿态实时检测系统 |
| CN211407239U (zh) * | 2019-09-30 | 2020-09-04 | 温氏食品集团股份有限公司 | 一种母猪查情装置 |
| CN110934659A (zh) * | 2019-12-11 | 2020-03-31 | 江苏姜曲海种猪场 | 一种智能试情机器公猪 |
| CN211266661U (zh) * | 2020-01-13 | 2020-08-14 | 东莞市秦艺电机有限公司 | 直线往复推杆结构 |
| CN112101434A (zh) * | 2020-09-04 | 2020-12-18 | 河南大学 | 基于改进YOLO v3的红外图像弱小目标检测方法 |
| CN112640809A (zh) * | 2020-12-18 | 2021-04-13 | 中国农业大学 | 母猪发情检测方法和装置 |
| CN113428330A (zh) * | 2021-08-10 | 2021-09-24 | 北京理工大学 | 一种柔性仿生机器鱼 |
| CN113705478A (zh) * | 2021-08-31 | 2021-11-26 | 中国林业科学研究院资源信息研究所 | 一种基于改进YOLOv5的红树林单木目标检测方法 |
| CN114255357A (zh) * | 2021-12-23 | 2022-03-29 | 东北大学 | 一种基于计算机视觉的群养生猪身份识别与健康监测方法 |
| CN114529806A (zh) * | 2022-02-21 | 2022-05-24 | 沈阳理工大学 | 一种基于压缩ssd的低空飞行物检测方法 |
Non-Patent Citations (2)
| Title |
|---|
| 邱博;刘翔;石蕴玉;尚岩峰;: "一种轻量化的多目标实时检测模型" * |
| 邱博;刘翔;石蕴玉;尚岩峰;: "一种轻量化的多目标实时检测模型", 北京航空航天大学学报, no. 09 * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115943908A (zh) * | 2022-12-05 | 2023-04-11 | 中国农业科学院北京畜牧兽医研究所 | 基于自适应导航的母猪发情检测方法及相关设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN115226650B (zh) | 2023-08-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110547210B (zh) | 饲料供给方法及系统、计算机系统、存储介质 | |
| CN108985293A (zh) | 一种基于深度学习的图像自动化标注方法及系统 | |
| CN108597053A (zh) | 基于图像数据和神经网络的杆塔和通道目标识别与缺陷诊断方法 | |
| CN111709333B (zh) | 基于笼养鸡异常粪便的溯源预警系统及健康监测方法 | |
| ZA202300610B (en) | System and method for crop monitoring | |
| CN109543679A (zh) | 一种基于深度卷积神经网络的死鱼识别方法及预警系统 | |
| CN112131927B (zh) | 基于妊娠后期姿态转化特性的母猪分娩时间预测系统 | |
| CN104850832B (zh) | 一种基于分级迭代的大规模图像样本标注方法及系统 | |
| CN115226650B (zh) | 基于交互特征的母猪发情状态自动检测系统 | |
| Wu et al. | Improved ResNet-50 deep learning algorithm for identifying chicken gender | |
| CN113095441A (zh) | 一种猪群扎堆检测方法、装置、设备及可读存储介质 | |
| CN113762113A (zh) | 一种牲畜分娩行为监控方法及装置 | |
| CN112613438A (zh) | 一种便携式柑橘在线测产仪 | |
| CN114092699A (zh) | 基于迁移学习的群猪图像分割的方法及系统 | |
| US20230401896A1 (en) | Intelligent analysis system applied to ethology of various kinds of high-density minimal polypides | |
| CN114428556B (zh) | 影像广告互动控制方法及系统 | |
| CN116824626A (zh) | 一种动物异常状态人工智能识别的方法 | |
| Du et al. | A novel automatic detection method for breeding behavior of broodstock based on improved YOLOv5 | |
| CN114187584A (zh) | 一种生猪估重系统、方法及存储介质 | |
| CN108765577B (zh) | 一种实时点云数据驱动的四肢畜牧动物骨架增强现实跟踪方法 | |
| CN116596167B (zh) | 一种基于数据深度融合处理的牲畜养殖方案优化方法 | |
| CN112633535B (zh) | 一种基于无人机图像的光伏电站智能巡检方法及系统 | |
| WO2024085339A1 (ko) | 인공지능 기반의 배양액 오염 탐지 방법 및 장치 | |
| CN116258405B (zh) | 一种基于双路网络的母猪体况自动评分系统 | |
| CN112653988B (zh) | 实验动物行为学研究辅助系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |