CN103488148A - 一种基于物联网和计算机视觉的家畜行为智能监控系统 - Google Patents

一种基于物联网和计算机视觉的家畜行为智能监控系统 Download PDF

Info

Publication number
CN103488148A
CN103488148A CN201310435506.0A CN201310435506A CN103488148A CN 103488148 A CN103488148 A CN 103488148A CN 201310435506 A CN201310435506 A CN 201310435506A CN 103488148 A CN103488148 A CN 103488148A
Authority
CN
China
Prior art keywords
data
domestic animal
animal
behavior
sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310435506.0A
Other languages
English (en)
Other versions
CN103488148B (zh
Inventor
高韬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
North China Electric Power University
Original Assignee
North China Electric Power University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by North China Electric Power University filed Critical North China Electric Power University
Priority to CN201310435506.0A priority Critical patent/CN103488148B/zh
Publication of CN103488148A publication Critical patent/CN103488148A/zh
Application granted granted Critical
Publication of CN103488148B publication Critical patent/CN103488148B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Alarm Systems (AREA)

Abstract

本发明首次通过融合物联网和计算机视觉技术实现对真实养殖场景的家畜的行为进行监测分析,首次构建基于无线WiFi技术的视频监控及传感器网络软硬件系统,克服传统电缆安装成本高、耗时长、扩展困难的问题,通过融合物联网和计算机视觉技术实现对真实养殖场景的奶牛的行为进行监测分析,实现对几大类日常行为的监测分析,包括采食、饮水、反刍、排泄、运动、休息、探究等行为,同时监测异常事件的发生,对异常行为进行自动报警。

Description

一种基于物联网和计算机视觉的家畜行为智能监控系统
技术领域
本发明涉及智慧农业技术领域,特别涉及一种利用物联网和计算机视觉技术对家畜行为进行监控的系统。
背景技术
在家畜的生长过程中,采食、饮水、反刍、排泄、探究、应激等行为贯穿整个过程,并可以反映出生长发育过程中的不同阶段和不同生理状态。这些行为又可表现为正常行为和异常行为。其中,正常行为是遗传、本能以及后天对环境适应的反映,是家畜自我维护福利和健康成长的表现;而异常行为通常是在接受不良刺激或者生活在恶劣条件下所表现出的有悖于其生物学习性的行为及事件,如病态行为、应激行为等事件是家畜福利下降的一个重要表现。因此,在饲养家畜的生产活动中及时、主动的诊断各种异常行为及事件,对于提高养殖生产效率,维护家畜的福利、提高奶牛等家畜的牛奶的营养水平都有十分重要的经济意义,这也是当前农业信息化及精准化研究的主要方向。
现阶段国内主要采用传统的人工观察方法对家畜的行为进行观察判断,由于人的时间、精力限制,养殖效率不高,且由于奶牛等家畜的养殖对环境的要求较高,工作人员无法频繁的进入养殖区域,因而很容易忽视养殖过程中的一些异常行为及事件,从而造成严重的经济损失。有些养殖场虽然安装有摄像装置,但也只是用于事后查验,未发挥预警监督的作用。随着智能视频分析与自动识别技术的发展,视频感知将成为最重要的感知技术,成为物联网信息感知层最重要的技术之一,视频物联网技术将成为最重要的物联网感知技术,而物联网也将因其智能、灵活、易于扩展和管理等优点而引起视频监控系统的重大变革。通过物联网技术及智能视频分析技术应用于家畜养殖领域,可以自动发现监控场景中的异常情况,及时发出警报并提供有用信息,从而更加有效地协助工作人员处理异常,提高家畜养殖的智能化、自动化水平。
发明内容
本发明首次通过融合物联网和计算机视觉技术实现对真实养殖场景的家畜的行为进行监测分析,首次构建基于无线WiFi技术的视频监控及传感器网络软硬件系统,克服传统电缆安装成本高、耗时长、扩展困难的问题,通过融合物联网和计算机视觉技术实现对真实养殖场景的奶牛的行为进行监测分析,实现对几大类日常行为的监测分析,包括采食、饮水、反刍、排泄、运动、休息、探究等行为,并在此基础上通过统计模型对上述日常行为进行统计分析,监测异常事件的发生,对异常行为进行自动报警。
本发明提供了一种家畜行为智能监控系统,包括:家畜数据采集装置、无线传输模块、远程监控中心和信息中心数据库;其中,家畜数据采集装置将采样得到的数据通过无线传输模块传送到远程监控中心,远程监控中心对采样数据进行分析处理,信息中心数据库用于存储采集到的数据。
更进一步的,所述无线传输模块为WIFI传输模块;所述家畜数据采集装置包括多台摄像机、多个传感器、多台非接触式红外测温仪和无源RFID标签;所述多台摄像机之间间隔30度角并呈圆周布置,架设于畜舍的顶部,所述每台摄像机配置有WIFI通信单元,从而使多台摄像机之间构成高速无线局域网,所述多台摄像机的WIFI通信单元分别与智能监控系统的WIFI传输模块链接,从而使每台摄像机构成一个WIFI网络节点,并向远程监控中心传输视频数据;所述多个传感器包括布置于家畜身体特定部位的运动传感器、地磁传感器、声音传感器,以及布置于畜舍的温湿度传感器,系统通过运动传感器定时采集家畜的运动数据,通过地磁传感器定时采集家畜站立或爬卧的姿态数据,通过声音传感器检测家畜咳嗽的音频信号以进行感冒症状的报警,通过温湿度传感器采集畜舍的环境数据;所述每个传感器配置有WIFI通信单元,并与智能监控系统的WIFI传输模块链接,从而使每个传感器构成一个WIFI网络节点,传感器之间构成高速无线局域网;所述多台非接触式红外测温仪被分别固定在每台摄像机上,并与摄像机共享WIFI通信,以实现在视频监控的同时检测家畜的体温;所述无源RFID标签位于项圈上并安装于家畜颈部,该无源RFID标签与家畜食槽上的RFID识别终端相对应,RFID识别终端读取标签数据后通过WIFI网络将该家畜的饮食数据信息传送到远程监控中心,提供给工作人员进行判断。
更进一步的,当非接触式红外测温仪测量到家畜身体部位体温达到或超过正常值时,非接触式红外测温仪上的报警器自动发出报警信息,远程监控中心接收报警信息并通过所述摄像机保存测温时的当前视频图片,报警信息和视频图片信息由无线WIFI网络传输到信息中心数据库,工作人员可通过视频图片上家畜的身份标识确定具体个体。
更进一步的,所述声音传感器采用项圈式声音传感器,其与无源RFID标签设置于同一项圈上。
本发明还提供了一种对家畜行为进行监控的方法,包括如下步骤:步骤一:通过所述多台摄像机、多个传感器、多台非接触式红外测温仪和无源RFID标签定时采集家畜的运动数据、姿态数据、体温数据、声音数据、环境数据、饮食数据和视频信息,并将上述采集到的数据信息通过WIFI网络传送到远程监控中心;步骤二:远程监控中心对上述采集到的运动数据、姿态数据、体温数据、声音数据、环境数据、饮食数据和视频信息进行数据融合,并建立视频信息和运动数据、姿态数据、体温数据、声音数据、环境数据、饮食数据之间的对应关系,对家畜的静态行为特征和动态行为特征进行识别;步骤三:远程监控中心根据识别出的家畜的静态行为特征和动态行为特征,来确定家畜的日常行为特征;步骤四:远程监控中心在家畜的日常行为特征的基础上,通过提取家畜的某一行为特征的频率和传感器获取的运动数据、姿态数据、体温数据、声音数据、来获得家畜的异常行为特征,并对异常行为特征进行实时的监控,及时发出报警信息,提供给工作人员参考。
更进一步的,步骤二还包括:通过对视频中家畜的外形边缘轮廓、个体外部形状、颜色进行匹配判断,识别家畜的静态行为特征;通过提取视频内容中的关键场景对象和提取运动传感器、地磁传感器采集数据中的时域特征、频域特征来识别动态行为特征。
附图说明:
图1是系统硬件架构图;
图2监控摄像机及非接触式红外测温仪布置示意图;
图3系统传感器示意图;
图4是智能监控方法流程图。
具体实施方式
以下具体实施例中的家畜以奶牛为例,但不限于奶牛。
智能监控系统主要包括搭建面向真实养殖场景的行为监测系统及开发软件平台。智能分析系统硬件部分如图1所示,具体如下:
(1)通过架设在牛舍项部的无线高清摄像机采集实时录制的监控视频资源,获得视觉信息,通过控制高清摄像机的摆放位置,获得最佳的可视效果,每台摄像机上安装高性能无线通信单元,优选为WIFI通信单元,使每台摄像机作为一个WIFI网络节点与系统的WIFI传输模块相连,从而构成高速无线局域监控网,在牛舍中的任何地方都可以建立连接,便于快速安装使用。同时通过无线访问节点与信息中心网络无缝链接,实现视频信息的双向传播,达到无线网和有线网的互联。优选的是,若将牛场表示成360度圆,则每隔30度架设一个无线摄像头,对奶牛进行全方位监控,此时监控死角最小,目标识别效果最佳(如图2所示);
(2)将非接触红外测温仪固定在每台摄像机上,并与摄像机共享WIFI通信单元以减少成本。在视频监控的同时检测奶牛的体温,当测量到奶牛身体部位体温达到或超过正常值时,非接触红外测温仪上的报警器发出报警信息,系统则会认为奶牛在发烧或者身体某部位有炎症病变,并通过高清摄像机保存测温时的当前视频图片。报警和图片信息由无线WIFI网络传输到信息中心,工作人员可通过高清图片上奶牛的身份标识确定具体个体;实践中,通过该方式对奶牛乳腺炎检测效果良好。
(3)通过在牛颈上安装RFID标签,优选为无源RFID标签,若将该无源RFID标签制作为项圈式,则使用拆卸方便且不易脱落,效果最佳。该RFID标签与奶牛食槽上的RFID识别终端相对应,从而对每头牛进行身份识别,以便跟踪每头牛的饮食情况和规律,当某头奶牛饮食过于频繁或者长期不来饮食时,可推断该牛可能发生异常情况,RFID识别终端通过无线网络将该奶牛的饮食数据信息传送到监控中心,并进行报警,提供给工作人员进行二次判断;通过采用RFID技术识别牛的饮食状况,从而判断牛的肠胃疾病。
(3)通过安装于牛体或牛舍附近的各类传感器,包括运动传感器、地磁传感器、声音传感器、温湿度传感器,其布放位置可以根据家畜身体特征或养殖环境而具体确定,其中运动传感器用于监测奶牛的运动;地磁传感器用于监测奶牛站立或爬卧的姿态;声音传感器优选的采用项圈式声音传感器,其可与RFID挂在同一项圈上,声音传感器可检测奶牛咳嗽声音,进行感冒症状报警;在牛舍安装温湿度传感器采集奶牛生活环境数据,获取环境信息;此外,上述各类传感器配置有WIFI无线通信单元用于传输传感器数据或报警信息,同时也使每个传感器成为一个WIFI网络节点。各类传感器如图3所示。
(4)配备无线WiFi传输模块,用来传输摄像机和传感器采集到的数据,由于WiFi具有更好的可扩展性和安全性,因而能够实现电信级的多媒体通信服务。
(5)开发基于计算机视觉和微传感器信息的日常行为识别分析及异常事件的自动预警技术,在监控中心通过对各摄像机传回来的视频及各类传感器回传的个体信息进行定时的目标检测、行为识别等智能分析技术,对可能发生的异常行为或事件进行报警。监控中心可将感知到的多媒体信息自动存储到后台信息中心数据库,并可与信息中心交互操作,既减轻存储空间压力,也可保证数据的实时保存。
智能监控方法如图4所示,具体如下:
(1)面向行为识别的特征提取和选择
构造牛舍的背景模型,实现对奶牛个体的检测、跟踪和识别。针对奶牛的不同行为其行为表现和特征不同,开发针对不同类型行为识别的关键特征的选择和提取方法。
基于传感器信息的幅值、方差等时域特征,采用类平均距离算法对时域特征进行分类,以两类样本距离的最大值与最小值作为划分静态和动态行为的阈值,并以此阈值将行为初步分为静态和动态两大类。
对于一些静态行为,如休息、反刍等由于其不属于运动状态,从视觉角度出发,本系统选择和提取包括奶牛个体的外形边缘轮廓、个体外部形状、颜色等图像特征进行匹配判断,用于静态行为的监测分析。
为了得到足够稳定的特征点,需要提取在较大程度投影变换、光照变化、图像模糊以及噪声存在情况下仍然稳定的特征点。因此通过计算三个尺度上的Laplacian算子的极大值方法对基准图像Io进行特征点提取后,需要对提取的关键点进一步处筛选,以使最终得到的关键点k在上述干扰存在的情况下仍然具有较高的被检测概率P(k)。
当摄像头距离目标较远时,目标上的局部区域可被视为平面,则通过对当前视角下的目标图像进行仿射变换能够模拟目标在其他视角条件下的情况,设仿射变换矩阵为A,可被分解为如下形式:
A = R θ R φ - 1 SR φ - - - ( 1 )
式中Rθ和R是两个角度参数分别为θ和的旋转矩阵,S=diag[λ1,λ2]为尺度矩阵。分别在[-π,+π]范围内随机选取θ和,在[0.6,1.5]范围内随机选取λ1和λ2即可构造出随机的仿射变换矩阵Arand,则与基准图像Io具有随机的图像尺度、旋转角和视角差异的模拟图像Irand为:
Irand=ArandIo   (2)
对于经过上述变换得到的模拟图像同样利用快速关键点检测方法进行关键点提取,设
Figure BSA0000095415670000073
为在模拟图像Ii中求得的关键点,根据Arand对其做逆仿射变换,可求得该特征点在基准图像Io中对应的特征点k′的位置:
k ' = A rand - 1 k ~ - - - ( 3 )
因此,随机产生Ntotal幅模拟图像,通过对是否在当前模拟图像Ii中提取到关键点k所对应的关键点进行计数,即可求得特征点k的被检测概率为:
P ( k ) = N det cted N total - - - ( 4 )
式中Ndetected为在Ntotal幅模拟图像中成功提取到与特征点k所对应的特征点
Figure BSA0000095415670000087
的总图像数。对图片集的每个图片类ai(i=1,2,…,A)中的每张图片分别作上述处理,对每张图片取被检测概率P(k)最高的H个特征点作为下一节分类器的初始类进行训练。假设共有A个图片类,每个图片类中有Ao张图片,则每个图片类提取出AoH个特征区域,各特征区域所属的类ci,j(i=1,2,…,A;j=1,2,…,AoH)即对应于分类器的初始类。
而对于动态行为,针对采食、饮水、排泄等行为的发生区域固定,采用基于SIFT特征粒子滤波跟踪算法和粗糙集分析算法提取视频内容中的关键场景对象作为语义知识特征,如食盆、饮水器、排泄区、围栏等,对于运动传感器和地磁传感器输出的信息,提取时域的信号幅值、方差等特征,同时通过小波变换技术提取频域特征。
(2)融合计算机视觉和传感器信息的奶牛日常行为自动识别模块。
针对奶牛的几类常见日常行为,如采食、饮水、反刍、排泄、运动、休息、探究等。采用融合视觉和无线传感器信息的分析理解,通过采用贝叶斯推理框架统一自下而上的图像特征组合和自上而下的基于规则和统计的知识引导方法,对各类行为的特征进行分类识别,实现对奶牛几类日常行为的自动分析识别。在求得训练集合Btrain和分类器初始类ci,j之后,对所有关键点在L×L范围内,按照均匀分布随机选取M×S对像素
Figure BSA0000095415670000083
Figure BSA0000095415670000084
的位置。
对于某行为类ai中的特征点类ci,j,将对应这M×S对像素位置上的灰度值
Figure BSA0000095415670000086
Figure BSA0000095415670000085
分别做如下计算:
f o = 1 if I ( d o 1 ) < I ( d o 2 ) 0 othreis o = 1,2 , . . . , M &times; S - - - ( 5 )
设组合特征为:Fk=(f1,f2,…fM×S)。为降低存储量,并保证fi之间具有足够的相关性,将求得的M×S个二元特征随机分为M组,每组包含S=N/M个二元特征,并假设不同组的二元特征之间相互独立,组内二元特征之间具有相关性,将这些组定义为初始行为特征集F。
计算类ci,j的M个F特征中的S个二元特征的值,记一个F特征为Fk,m=[fo(m,1),fo(m,2),…fo(m,s)],m=1,2,…,M,表示当前关键点的第m个蕨,σ(m,s)(s=1,…,S)表示范围是1,2,…,S的随机数。则F特征可表示为:Fk=(Fk,1,Fk,2,…,Fk,M)。据此对每个随机F特征Fk,m和类ci,j的类条件概率P(Fk,m/ci,j)进行估计。
设Fk,m中二元特征序列转化为十进制数的值为x,则Fk,m能取到的最大值为Xmax=2s,将P(Fk,m/ci,j)记为:
P x , c i , j = P ( F k , m | c i , j ) - - - ( 6 )
则可以采用(7)式为约束条件对每个
Figure BSA0000095415670000092
(x=1,2,…,xmax)进行估计,估计公式为:
P x , c i , j = N x , c i , j + N r N c i , j + x max N r - - - ( 7 )
式中
Figure BSA0000095415670000094
为类ci,j的训练样本中Fk,m取值为x的样本数,
Figure BSA0000095415670000095
为类ci,j的总样本数,Nr为常数项。
这样就得到贝叶斯推理分类器,即特征分类器,从而进行不同行为识别。
(3)基于统计的异常行为自动报警模块。
针对奶牛养殖中的几类常见异常行为,如踩踏、爬跨、病态、发情、应激等,研发位于总控系统端的异常行为报警子系统。该系统通过视频智能分析为这几类行为建立AdaBoost样本统计模型,在奶牛个体的检日常行为识别的基础上,提取其行为频率及微传感器获取的运动等特征作为异常行为分析的基础,确定输入AdaBoost判别器的各参数,并对模型进行训练识别。首先通过SIFT点检测得到关键点:{k1,k2,…,kN},然后利用AdaBoost训练框架得到N个强分类器{C1,C2,…,CN}用于分别检测关键样本点。在建模和多目标跟踪的基础上,用层次结构语法表示监控场景中不同区域的语义和时空关联性,通过自动学习和因果推理实现对动态场景的高层语义理解和语义融合实现对几类异常行为的检测和预警,并结合非接触红外测温仪、声音传感器、RFID饮食数据等信息及时为工作人员提供牛舍的异常情况。
设获取的信息随机向量集合
Figure BSA0000095415670000105
,及相应图G=(V,E)。集合V带有针对任意两个节点υ和u定义的常见图解指标d(u,v)。
从虚假设Ho得到基准数据
Figure BSA0000095415670000106
Ho:x~f0(x)   (8)
把异常行为分布看成是具体位置和标度条件下的异常似然函数混合模型。考虑固定标度s条件下的具体位置混合模型,同时可以推广到各种标度(H1:x~∑sυ∈VPυ,sfυ,s(x),其中,Pυ,s,fυ,s(x)是位置v和标度s条件下的似然函数和先验概率)。为此,设fυ(x),Pυ分别是位置υ和标度s条件下的似然函数和先验概率。于是,
H 1 : x ~ &Sigma; &upsi; &Element; V P &upsi; f &upsi; ( x ) - - - ( 9 )
引入一些数学符号来描述局部模型。设ωυ,s是以υ为圆心、s为半径的球体:ωυ□ωυ,s={u|d(u,υ)≤s}进一步假设ωυ表示以υ为圆心、s为固定半径的球体。用ωυ,ε表示ωυ半径ε范围内所有点的集合,即:ωυ,ε={u∈V|d(u,υ)≤ε,υ∈ωυ}
子集上的f0,fυ边缘分布表示为f0(xω)。如果分布f0和fυ满足以下Markovian和Mask假设,则认为异常具有局部结构。
1)Markov假设:如果观察值x形成Markov随机域,则认为f0和fυ满足Markov假设。假设存在ε-领域,于是,当有圆环域
Figure BSA0000095415670000102
时,xv,υ∈ωυ与xu
Figure BSA0000095415670000104
有条件独立。
2)Mask假设:f0和fυ
Figure BSA0000095415670000111
上的边缘分布相同:
Figure BSA0000095415670000112
Markov表明,当有圆环域时,区域ωυ,s内的随机变量与
Figure BSA0000095415670000113
内的随机变量相互独立。Mask假设表明,在ωυ区域外,异常和正常密度相同。
因此,有给定的图G=(V,E)和关联特征xv且υ∈V。异常检测器就是将观测量x=(x)υ∈V映射为{0,1}的决策规则π,其中0表示无异常,1表示异常。设最优异常检测器π可以实现“贝叶斯”Neyman-Pearson目标函数最小化。
贝叶斯:
max &pi; &Integral; &Omega; &pi; &Sigma; &upsi; &Element; V P &upsi; f &upsi; ( x ) dx - - - ( 10 )
其中,
Figure BSA0000095415670000115
最优决策规则可被描述为:
Figure BSA0000095415670000116
其中,似然比函数Lυ定义为Lυ=fυ(x)/f0(x),选择ξ使虚警概率小于α。
本发明提供的智能系统和智能分析方法有效的解决了人工观察的低效和主观性,提高家畜养殖管理的自动化、科学化水平,并以此促进家畜精准养殖业的信息化技术发展,从而推动家畜产品生产效率的提高。此外,本发明的系统采用物联网架构,即采用无线网络结合多类传感器和摄像机终端,即省去了传统的布线和线路维护费用,降低了安装成本,也使得监控系统易于扩展,不受时间、地点限制,实现即插即用即看的便携的按需监控。
基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

Claims (6)

1.一种家畜行为智能监控系统,包括:家畜数据采集装置、无线传输模块、远程监控中心和信息中心数据库;其中,家畜数据采集装置将采样得到的数据通过无线传输模块传送到远程监控中心,远程监控中心对采样数据进行分析处理,信息中心数据库用于存储采集到的数据。
2.如权利要求1所述的一种家畜行为智能监控系统,其特征在于:
所述无线传输模块为WIFI传输模块;
所述家畜数据采集装置包括多台摄像机、多个传感器、多台非接触式红外测温仪和无源RFID标签;
所述多台摄像机之间间隔30度角并呈圆周布置,架设于畜舍的顶部,所述每台摄像机配置有WIFI通信单元,从而使多台摄像机之间构成高速无线局域网,所述多台摄像机的WIFI通信单元分别与智能监控系统的WIFI传输模块链接,从而使每台摄像机构成一个WIFI网络节点,并向远程监控中心传输视频数据;
所述多个传感器包括布置于家畜身体特定部位的运动传感器、地磁传感器、声音传感器,以及布置于畜舍的温湿度传感器,系统通过运动传感器定时采集家畜的运动数据,通过地磁传感器定时采集家畜站立或爬卧的姿态数据,通过声音传感器检测家畜咳嗽的音频信号以进行感冒症状的报警,通过温湿度传感器采集畜舍的环境数据;所述每个传感器配置有WIFI通信单元,并与智能监控系统的WIFI传输模块链接,从而使每个传感器构成一个WIFI网络节点,传感器之间构成高速无线局域网;
所述多台非接触式红外测温仪被分别固定在每台摄像机上,并与摄像机共享WIFI通信,以实现在视频监控的同时检测家畜的体温;
所述无源RFID标签位于项圈上并安装于家畜颈部,该无源RFID标签与家畜食槽上的RFID识别终端相对应,RFID识别终端读取标签数据后通过WIFI网络将该家畜的饮食数据信息传送到远程监控中心,提供给工作人员进行判断。
3.如权利要求2所述的一种家畜行为智能监控系统,其特征在于:
当非接触式红外测温仪测量到家畜身体部位体温达到或超过正常值时,非接触式红外测温仪上的报警器自动发出报警信息,远程监控中心接收报警信息并通过所述摄像机保存测温时的当前视频图片,报警信息和视频图片信息由无线WIFI网络传输到信息中心数据库,工作人员可通过视频图片上家畜的身份标识确定具体个体。
4.如权利要求2所述的一种家畜行为智能监控系统,其特征在于:
所述声音传感器采用项圈式声音传感器,其与无源RFID标签设置于同一项圈上。
5.一种利用权利要求1-4任意一项所述的家畜行为智能监控系统对家畜行为进行监控的方法,包括如下步骤:
步骤一:通过所述多台摄像机、多个传感器、多台非接触式红外测温仪和无源RFID标签定时采集家畜的运动数据、姿态数据、体温数据、声音数据、环境数据、饮食数据和视频信息,并将上述采集到的数据信息通过WIFI网络传送到远程监控中心;
步骤二:远程监控中心对上述采集到的运动数据、姿态数据、体温数据、声音数据、环境数据、饮食数据和视频信息进行数据融合,并建立视频信息和运动数据、姿态数据、体温数据、声音数据、环境数据、饮食数据之间的对应关系,对家畜的静态行为特征和动态行为特征进行识别;
步骤三:远程监控中心根据识别出的家畜的静态行为特征和动态行为特征,来确定家畜的日常行为特征;
步骤四:远程监控中心在家畜的日常行为特征的基础上,通过提取家畜的某一行为特征的频率和传感器获取的运动数据、姿态数据、体温数据、声音数据、来获得家畜的异常行为特征,并对异常行为特征进行实时的监控,及时发出报警信息,提供给工作人员参考。
6.如权利要求5所述的对家畜行为进行监控的方法,其特征在于,步骤二还包括:
通过对视频中家畜的外形边缘轮廓、个体外部形状、颜色进行匹配判断,识别家畜的静态行为特征;
通过提取视频内容中的关键场景对象和提取运动传感器、地磁传感器采集数据中的时域特征、频域特征来识别动态行为特征。
CN201310435506.0A 2013-09-24 2013-09-24 一种基于物联网和计算机视觉的家畜行为智能监控系统 Expired - Fee Related CN103488148B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310435506.0A CN103488148B (zh) 2013-09-24 2013-09-24 一种基于物联网和计算机视觉的家畜行为智能监控系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310435506.0A CN103488148B (zh) 2013-09-24 2013-09-24 一种基于物联网和计算机视觉的家畜行为智能监控系统

Publications (2)

Publication Number Publication Date
CN103488148A true CN103488148A (zh) 2014-01-01
CN103488148B CN103488148B (zh) 2016-03-09

Family

ID=49828460

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310435506.0A Expired - Fee Related CN103488148B (zh) 2013-09-24 2013-09-24 一种基于物联网和计算机视觉的家畜行为智能监控系统

Country Status (1)

Country Link
CN (1) CN103488148B (zh)

Cited By (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103475736A (zh) * 2013-09-26 2013-12-25 河北烽联信息技术有限公司 一种传感器通信系统及其利用该系统进行监控的方法
CN103713616A (zh) * 2014-01-09 2014-04-09 国家电网公司 变电站现场安全监控系统
CN103815983A (zh) * 2014-03-07 2014-05-28 东北农业大学 奶牛个体反刍行为检测设备
CN103905558A (zh) * 2014-04-11 2014-07-02 中国农业科学院农业信息研究所 基于物联网的奶牛场无线监测系统
CN103914732A (zh) * 2014-03-17 2014-07-09 东华大学 一种反刍动物反刍与吞咽次数的音频识别算法
CN104008367A (zh) * 2014-05-08 2014-08-27 中国农业大学 基于计算机视觉的育肥猪的自动行为分析系统及方法
CN104064011A (zh) * 2014-07-02 2014-09-24 江苏大学 基于无线传输的种猪产房监控系统及方法
CN104077550A (zh) * 2014-06-18 2014-10-01 胡月明 一种实现动物行为监测的健康指数评价的方法及系统
CN104320618A (zh) * 2014-10-23 2015-01-28 西北农林科技大学 一种基于行为特征谱联动的犊牛状态监测的装置和方法
CN104381205A (zh) * 2014-10-29 2015-03-04 内蒙古德辰信息网络科技有限责任公司 一种基于物联网的羊生长监测和信息服务云平台综合系统
CN105091938A (zh) * 2015-07-09 2015-11-25 北京农业信息技术研究中心 畜禽健康状况监测方法及系统
CN105137901A (zh) * 2015-09-18 2015-12-09 广西南宁派腾科技有限公司 一种太阳能养猪房三维建模监控系统
CN105427279A (zh) * 2015-11-02 2016-03-23 中国农业大学 一种基于计算机视觉及物联网的草原旱情监测系统和方法
CN105488714A (zh) * 2015-12-04 2016-04-13 青岛工学院 一种基于物联网的家畜养殖销售平台
CN105657338A (zh) * 2014-12-02 2016-06-08 深圳大学 一种基于互联网的远程移动终端控制系统及控制方法
CN106056106A (zh) * 2016-07-22 2016-10-26 内蒙古农业大学 一种草原放牧绵羊牧食行为检测系统及其检测方法
CN106383537A (zh) * 2016-11-24 2017-02-08 李慧杰 一种家畜养殖智能系统
CN106386560A (zh) * 2016-08-25 2017-02-15 张选琪 智能家畜保安器
CN106472324A (zh) * 2016-09-29 2017-03-08 安顺市平坝区九九生态农业发展有限公司 一种多功能山羊养殖舍
CN106472405A (zh) * 2016-09-28 2017-03-08 安顺市平坝区九九生态农业发展有限公司 一种大数据养羊的方法
CN106651326A (zh) * 2016-12-30 2017-05-10 傲网信息科技(厦门)有限公司 一种猪场数据信息化系统及方法
CN106719066A (zh) * 2017-03-27 2017-05-31 南京农业大学 一种仿生学母羊查情/诱情装置及查情/诱情方法
CN106815603A (zh) * 2017-01-11 2017-06-09 中山大学 基于多传感网络的室内活动检测识别方法及系统
CN106909954A (zh) * 2017-04-24 2017-06-30 郑州中道智联云科技有限公司 养殖场动物疾病预警系统
CN107996449A (zh) * 2017-05-24 2018-05-08 合肥万合科技信息服务有限公司 一种基于物联网的蛋鸡养殖系统
CN108090841A (zh) * 2017-12-18 2018-05-29 翔创科技(北京)有限公司 牲畜资产监管方法、计算机程序、存储介质及电子设备
CN108157222A (zh) * 2018-02-13 2018-06-15 福建思特电子有限公司 一种人工智能畜类监管终端
CN108207700A (zh) * 2018-01-15 2018-06-29 内蒙古大学 奶牛信息监测方法及系统
CN110070051A (zh) * 2019-04-24 2019-07-30 卿胜奎 基于计算机视觉技术的牛发情监测方法及系统
CN110119712A (zh) * 2019-05-14 2019-08-13 上海阿刻忒科技有限公司 一种基于深度学习的家畜行为智能监控方法及其系统
CN110199945A (zh) * 2019-06-05 2019-09-06 辽宁科技大学 一种以远程监控的多场地林蛙智能养殖的管理装置
CN110866559A (zh) * 2019-11-14 2020-03-06 上海中信信息发展股份有限公司 一种家禽的行为分析方法及装置
CN111034643A (zh) * 2019-12-11 2020-04-21 华北水利水电大学 一种家畜养殖的生理特征检测系统和检测方法
CN111066679A (zh) * 2020-01-15 2020-04-28 山东农业大学 一种基于振动信号的奶牛个体行为监测装置及方法
CN111183916A (zh) * 2018-11-15 2020-05-22 西南大学 一种山羊个体信息收集与控管装置
CN111614703A (zh) * 2019-02-25 2020-09-01 南京爱体智能科技有限公司 一种物联网传感器与视频分析结合的方法
CN111916096A (zh) * 2019-05-09 2020-11-10 南京农业大学 一种基于树莓派的藏羊牧食行为监测方法
CN112082628A (zh) * 2020-09-11 2020-12-15 锐马(福建)电气制造有限公司 一种家畜养殖物联网数据采集系统
CN112468766A (zh) * 2020-03-31 2021-03-09 丰疆智能软件科技(南京)有限公司 牛只状态监控系统和监控方法
EP3866056A1 (en) 2020-02-17 2021-08-18 Touchless Animal Metrics, SL Method, system and computer programs for traceability of living specimens
EP3764780A4 (en) * 2018-03-13 2021-09-08 Growsafe Systems Ltd. SYSTEM AND METHOD FOR DETERMINING BEHAVIORAL PHENOTYPES OF AN ANIMAL
CN113792702A (zh) * 2021-09-26 2021-12-14 中国农业科学院草原研究所 一种基于计算机视觉的视频流家畜监测方法及系统
CN115004212A (zh) * 2020-01-21 2022-09-02 艾酷帕克株式会社 畜产信息管理系统、畜产信息管理服务器、畜产信息管理方法、以及畜产信息管理程序
CN115359050A (zh) * 2022-10-19 2022-11-18 正大农业科学研究有限公司 家畜采食量异常检测方法及装置
WO2023062265A1 (es) * 2021-10-15 2023-04-20 GONZÁLEZ AHIJADO, Jesús Sistema y método para monitorear en forma continua el comportamiento de animales estabulados evitando el contacto directo con los animales
CN118536047A (zh) * 2024-07-24 2024-08-23 绵阳梓兴食品科技有限公司 一种智能猪行为异常监测方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070175406A1 (en) * 2000-11-24 2007-08-02 Clever Sys, Inc. Unified system and method for animal behavior characterization in home cages using video analysis
CN101894220A (zh) * 2010-07-28 2010-11-24 江南大学 一种畜禽健康状况数据采集系统
US20100302004A1 (en) * 2009-06-02 2010-12-02 Utah State University Device and Method for Remotely Monitoring Animal Behavior
US20120089340A1 (en) * 2010-10-07 2012-04-12 Growsafe Systems Ltd. Animal identification, measurement, monitoring and management system
CN102647475A (zh) * 2012-04-18 2012-08-22 浙江大学 一种畜禽场智能化的物联网系统及物联网方法
CN103248703A (zh) * 2013-05-16 2013-08-14 中国农业大学 生猪行为自动监测系统及方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070175406A1 (en) * 2000-11-24 2007-08-02 Clever Sys, Inc. Unified system and method for animal behavior characterization in home cages using video analysis
US20100302004A1 (en) * 2009-06-02 2010-12-02 Utah State University Device and Method for Remotely Monitoring Animal Behavior
CN101894220A (zh) * 2010-07-28 2010-11-24 江南大学 一种畜禽健康状况数据采集系统
US20120089340A1 (en) * 2010-10-07 2012-04-12 Growsafe Systems Ltd. Animal identification, measurement, monitoring and management system
CN102647475A (zh) * 2012-04-18 2012-08-22 浙江大学 一种畜禽场智能化的物联网系统及物联网方法
CN103248703A (zh) * 2013-05-16 2013-08-14 中国农业大学 生猪行为自动监测系统及方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
钟昌乐 等: "基于室内精确定位的疑似病猪行为监测系统", 《现代计算机》, 30 November 2011 (2011-11-30), pages 58 - 60 *
钟芳葵: "基于RFID和ARM嵌入式技术的猪行为自动监测系统设计", 《中国优秀硕士学位论文全文数据库 信息科技辑》, no. 8, 15 August 2010 (2010-08-15), pages 140 - 467 *

Cited By (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103475736B (zh) * 2013-09-26 2017-02-01 河北烽联信息技术有限公司 一种传感器通信系统及其利用该系统进行监控的方法
CN103475736A (zh) * 2013-09-26 2013-12-25 河北烽联信息技术有限公司 一种传感器通信系统及其利用该系统进行监控的方法
CN103713616A (zh) * 2014-01-09 2014-04-09 国家电网公司 变电站现场安全监控系统
CN103815983A (zh) * 2014-03-07 2014-05-28 东北农业大学 奶牛个体反刍行为检测设备
CN103914732A (zh) * 2014-03-17 2014-07-09 东华大学 一种反刍动物反刍与吞咽次数的音频识别算法
CN103914732B (zh) * 2014-03-17 2017-02-15 东华大学 一种反刍动物反刍与吞咽次数的音频识别算法
CN103905558A (zh) * 2014-04-11 2014-07-02 中国农业科学院农业信息研究所 基于物联网的奶牛场无线监测系统
CN104008367A (zh) * 2014-05-08 2014-08-27 中国农业大学 基于计算机视觉的育肥猪的自动行为分析系统及方法
CN104008367B (zh) * 2014-05-08 2018-05-01 中国农业大学 基于计算机视觉的育肥猪的自动行为分析系统及方法
CN104077550B (zh) * 2014-06-18 2017-06-06 胡月明 一种实现动物行为监测的健康指数评价的方法及系统
CN104077550A (zh) * 2014-06-18 2014-10-01 胡月明 一种实现动物行为监测的健康指数评价的方法及系统
CN104064011A (zh) * 2014-07-02 2014-09-24 江苏大学 基于无线传输的种猪产房监控系统及方法
CN104320618A (zh) * 2014-10-23 2015-01-28 西北农林科技大学 一种基于行为特征谱联动的犊牛状态监测的装置和方法
CN104320618B (zh) * 2014-10-23 2018-04-03 西北农林科技大学 一种基于行为特征谱联动的犊牛状态监测的装置和方法
CN104381205A (zh) * 2014-10-29 2015-03-04 内蒙古德辰信息网络科技有限责任公司 一种基于物联网的羊生长监测和信息服务云平台综合系统
CN105657338A (zh) * 2014-12-02 2016-06-08 深圳大学 一种基于互联网的远程移动终端控制系统及控制方法
CN105091938A (zh) * 2015-07-09 2015-11-25 北京农业信息技术研究中心 畜禽健康状况监测方法及系统
CN105091938B (zh) * 2015-07-09 2018-05-18 北京农业信息技术研究中心 畜禽健康状况监测方法及系统
CN105137901A (zh) * 2015-09-18 2015-12-09 广西南宁派腾科技有限公司 一种太阳能养猪房三维建模监控系统
CN105427279A (zh) * 2015-11-02 2016-03-23 中国农业大学 一种基于计算机视觉及物联网的草原旱情监测系统和方法
CN105427279B (zh) * 2015-11-02 2018-06-26 中国农业大学 一种基于计算机视觉及物联网的草原旱情监测系统和方法
CN105488714A (zh) * 2015-12-04 2016-04-13 青岛工学院 一种基于物联网的家畜养殖销售平台
CN106056106A (zh) * 2016-07-22 2016-10-26 内蒙古农业大学 一种草原放牧绵羊牧食行为检测系统及其检测方法
CN106056106B (zh) * 2016-07-22 2021-10-26 内蒙古农业大学 一种草原放牧绵羊牧食行为检测系统及其检测方法
CN106386560A (zh) * 2016-08-25 2017-02-15 张选琪 智能家畜保安器
CN106472405A (zh) * 2016-09-28 2017-03-08 安顺市平坝区九九生态农业发展有限公司 一种大数据养羊的方法
CN106472324A (zh) * 2016-09-29 2017-03-08 安顺市平坝区九九生态农业发展有限公司 一种多功能山羊养殖舍
CN106383537A (zh) * 2016-11-24 2017-02-08 李慧杰 一种家畜养殖智能系统
CN106651326A (zh) * 2016-12-30 2017-05-10 傲网信息科技(厦门)有限公司 一种猪场数据信息化系统及方法
CN106815603A (zh) * 2017-01-11 2017-06-09 中山大学 基于多传感网络的室内活动检测识别方法及系统
CN106815603B (zh) * 2017-01-11 2020-04-14 中山大学 基于多传感网络的室内活动检测识别方法及系统
CN106719066A (zh) * 2017-03-27 2017-05-31 南京农业大学 一种仿生学母羊查情/诱情装置及查情/诱情方法
CN106909954A (zh) * 2017-04-24 2017-06-30 郑州中道智联云科技有限公司 养殖场动物疾病预警系统
CN107996449A (zh) * 2017-05-24 2018-05-08 合肥万合科技信息服务有限公司 一种基于物联网的蛋鸡养殖系统
CN108090841A (zh) * 2017-12-18 2018-05-29 翔创科技(北京)有限公司 牲畜资产监管方法、计算机程序、存储介质及电子设备
CN108207700A (zh) * 2018-01-15 2018-06-29 内蒙古大学 奶牛信息监测方法及系统
CN108157222A (zh) * 2018-02-13 2018-06-15 福建思特电子有限公司 一种人工智能畜类监管终端
EP3764780A4 (en) * 2018-03-13 2021-09-08 Growsafe Systems Ltd. SYSTEM AND METHOD FOR DETERMINING BEHAVIORAL PHENOTYPES OF AN ANIMAL
CN111183916A (zh) * 2018-11-15 2020-05-22 西南大学 一种山羊个体信息收集与控管装置
CN111614703A (zh) * 2019-02-25 2020-09-01 南京爱体智能科技有限公司 一种物联网传感器与视频分析结合的方法
CN110070051A (zh) * 2019-04-24 2019-07-30 卿胜奎 基于计算机视觉技术的牛发情监测方法及系统
CN111916096B (zh) * 2019-05-09 2021-04-27 南京农业大学 一种基于树莓派的藏羊牧食行为监测方法
CN111916096A (zh) * 2019-05-09 2020-11-10 南京农业大学 一种基于树莓派的藏羊牧食行为监测方法
CN110119712A (zh) * 2019-05-14 2019-08-13 上海阿刻忒科技有限公司 一种基于深度学习的家畜行为智能监控方法及其系统
CN110199945A (zh) * 2019-06-05 2019-09-06 辽宁科技大学 一种以远程监控的多场地林蛙智能养殖的管理装置
CN110199945B (zh) * 2019-06-05 2021-07-09 辽宁科技大学 一种以远程监控的多场地林蛙智能养殖的管理装置
CN110866559A (zh) * 2019-11-14 2020-03-06 上海中信信息发展股份有限公司 一种家禽的行为分析方法及装置
CN111034643A (zh) * 2019-12-11 2020-04-21 华北水利水电大学 一种家畜养殖的生理特征检测系统和检测方法
CN111066679A (zh) * 2020-01-15 2020-04-28 山东农业大学 一种基于振动信号的奶牛个体行为监测装置及方法
CN115004212A (zh) * 2020-01-21 2022-09-02 艾酷帕克株式会社 畜产信息管理系统、畜产信息管理服务器、畜产信息管理方法、以及畜产信息管理程序
EP3866056A1 (en) 2020-02-17 2021-08-18 Touchless Animal Metrics, SL Method, system and computer programs for traceability of living specimens
WO2021164972A1 (en) 2020-02-17 2021-08-26 Touchless Animal Metrics, Sl Method, system and computer programs for traceability of living specimens
CN112468766A (zh) * 2020-03-31 2021-03-09 丰疆智能软件科技(南京)有限公司 牛只状态监控系统和监控方法
CN112082628A (zh) * 2020-09-11 2020-12-15 锐马(福建)电气制造有限公司 一种家畜养殖物联网数据采集系统
CN112082628B (zh) * 2020-09-11 2021-12-14 锐马(福建)电气制造有限公司 一种家畜养殖物联网数据采集系统
CN113792702A (zh) * 2021-09-26 2021-12-14 中国农业科学院草原研究所 一种基于计算机视觉的视频流家畜监测方法及系统
WO2023062265A1 (es) * 2021-10-15 2023-04-20 GONZÁLEZ AHIJADO, Jesús Sistema y método para monitorear en forma continua el comportamiento de animales estabulados evitando el contacto directo con los animales
CN115359050A (zh) * 2022-10-19 2022-11-18 正大农业科学研究有限公司 家畜采食量异常检测方法及装置
CN115359050B (zh) * 2022-10-19 2023-02-28 正大农业科学研究有限公司 家畜采食量异常检测方法及装置
CN118536047A (zh) * 2024-07-24 2024-08-23 绵阳梓兴食品科技有限公司 一种智能猪行为异常监测方法及系统

Also Published As

Publication number Publication date
CN103488148B (zh) 2016-03-09

Similar Documents

Publication Publication Date Title
CN103488148A (zh) 一种基于物联网和计算机视觉的家畜行为智能监控系统
CN103475736A (zh) 一种传感器通信系统及其利用该系统进行监控的方法
Mahmud et al. A systematic literature review on deep learning applications for precision cattle farming
Wu et al. Using a CNN-LSTM for basic behaviors detection of a single dairy cow in a complex environment
Browning et al. Predicting animal behaviour using deep learning: GPS data alone accurately predict diving in seabirds
Arulmozhi et al. The application of cameras in precision pig farming: An overview for swine-keeping professionals
Dohmen et al. Computer vision-based weight estimation of livestock: a systematic literature review
Kröschel et al. Remote monitoring of vigilance behavior in large herbivores using acceleration data
Ma et al. Development of noncontact body temperature monitoring and prediction system for livestock cattle
US10993417B2 (en) Detection and management of disease outbreaks in livestock using health graph networks
KR102165891B1 (ko) 축산 데이터 분석 기반 농가 상태 진단 시스템
Feiyang et al. Monitoring behavior of poultry based on RFID radio frequency network
Mancuso et al. Cow Behavioural Activities in Extensive Farms: Challenges of Adopting Automatic Monitoring Systems
Arablouei et al. Multimodal sensor data fusion for in-situ classification of animal behavior using accelerometry and GNSS data
Xu et al. Automatic quantification and assessment of grouped pig movement using the XGBoost and YOLOv5s models
Yaseer et al. A review of sensors and Machine Learning in animal farming
Nleya et al. Smart dairy farming overview: innovation, algorithms and challenges
Hu et al. Grazing sheep behaviour recognition based on improved yolov5
CN113221776B (zh) 一种基于人工智能对反刍动物一般行为识别的方法
Koskela et al. Deep learning image recognition of cow behavior and an open data set acquired near an automatic milking robot
Yang et al. Monitoring activity index and behaviors of cage-free hens with advanced deep learning technologies
Tiwari et al. Computer vision and deep learningbased framework for cattle monitoring
Bati et al. SHEEPFEARNET: Sheep fear test behaviors classification approach from video data based on optical flow and convolutional neural networks
Gupta et al. Artificial intelligence in agriculture
Chelotti et al. Livestock feeding behavior: A tutorial review on automated techniques for ruminant monitoring

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160309

Termination date: 20160924

CF01 Termination of patent right due to non-payment of annual fee