CN109686032B - 一种水产养殖生物防盗监测方法及系统 - Google Patents

一种水产养殖生物防盗监测方法及系统 Download PDF

Info

Publication number
CN109686032B
CN109686032B CN201910043012.5A CN201910043012A CN109686032B CN 109686032 B CN109686032 B CN 109686032B CN 201910043012 A CN201910043012 A CN 201910043012A CN 109686032 B CN109686032 B CN 109686032B
Authority
CN
China
Prior art keywords
signal sequence
sound signal
human body
sequence
spectral density
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910043012.5A
Other languages
English (en)
Other versions
CN109686032A (zh
Inventor
袁飞
胡欢
林佼
程恩
林聪仁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiamen University
Original Assignee
Xiamen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiamen University filed Critical Xiamen University
Priority to CN201910043012.5A priority Critical patent/CN109686032B/zh
Publication of CN109686032A publication Critical patent/CN109686032A/zh
Application granted granted Critical
Publication of CN109686032B publication Critical patent/CN109686032B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/08Alarms for ensuring the safety of persons responsive to the presence of persons in a body of water, e.g. a swimming pool; responsive to an abnormal condition of a body of water
    • G08B21/082Alarms for ensuring the safety of persons responsive to the presence of persons in a body of water, e.g. a swimming pool; responsive to an abnormal condition of a body of water by monitoring electrical characteristics of the water

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Image Analysis (AREA)
  • Burglar Alarm Systems (AREA)

Abstract

本发明公开一种水产养殖生物防盗监测方法及系统。该方法包括:获取红外摄像机采集到的监控视频;对监控视频的各幅图像进行人体识别,得到可疑人员图像;对可疑人员图像进行人体姿态检测,确定可疑人员正在进行偷盗行为的第一嫌疑度;获取声学传感器实时采集到的环境声音信号序列;从环境声音信号序列中滤出水波浪声音序列;将水波浪声音序列与波浪声阈值进行对比,得到存在偷盗行为的第二嫌疑度;结合第一嫌疑度和第二嫌疑度确定是否发生盗窃,并在发生盗窃时进行预警。本发明的水产养殖生物防盗监测方法及系统,能够实现水产养殖生物防盗的实时监测。

Description

一种水产养殖生物防盗监测方法及系统
技术领域
本发明涉及声学、计算机视觉和信息科学领域,特别是涉及一种水产养殖生物防盗监测方法及系统。
背景技术
水产养殖是当前水产品的主要供给模式,也是重要的农业经济来源。为了确保水产养殖产量稳定,防盗是水产养殖日常管理中的一项重要工作。水产养殖中出现鱼虾类被盗情况,严重影响了人们的养殖积极性,对养殖户造成了一定的损失。传统的养殖防盗系统包括养狗看护,建立一定的鱼塘围网或者围栏阻拦外人,起到了一定的防盗效果。但是当盗窃者通过取投毒药和破坏防盗设施等手段进行盗窃时,无法起到防范作用,无法进行实时监测。
发明内容
本发明的目的是提供一种水产养殖生物防盗监测方法及系统,实现水产养殖生物防盗的实时监测。
为实现上述目的,本发明提供了如下方案:
一种水产养殖生物防盗监测方法,包括:
获取红外摄像机采集到的监控视频;
对所述监控视频的各幅图像进行人体识别,得到可疑人员图像;
对所述可疑人员图像进行人体姿态检测,确定所述可疑人员正在进行偷盗行为的第一嫌疑度;
获取声学传感器实时采集到的环境声音信号序列;
从所述环境声音信号序列中滤出水波浪声音序列;
将所述水波浪声音序列与波浪声阈值进行对比,得到存在偷盗行为的第二嫌疑度;
结合所述第一嫌疑度和所述第二嫌疑度确定是否发生盗窃,并在发生盗窃时进行预警。
可选的,所述对所述监控视频的各幅图像进行人体识别,得到可疑人员图像,具体包括:
将所述监控视频转化为多幅图像帧;
将多幅所述图像帧输入训练好的人体识别网络模型中进行人体和背景的识别,得到可疑人员图像;
所述人体识别网络模型的训练过程为:
将包含人体与背景的图像样本数据集输入训练模型进行训练,得到训练好的人体识别网络模型。
可选的,所述对所述可疑人员图像进行人体姿态检测,确定所述可疑人员正在进行偷盗行为的第一嫌疑度,具体包括:
利用卷积神经网络确定所述可疑人员图像中任意一个像素点为人体各关节点的概率以及各关节点对应的像素点相连组成肢体的概率,初步确定各肢体的位置和方向;
根据任意一个像素点为人体各关节点的概率确定各关节点的候选像素点集合;
根据肢体的位置和方向将各关节点所对应的候选像素点集合进行连接,使相连的肢体的连接处共用同一个像素点,计算连接后肢体匹配的总体权重,确定使所述总体权重最大的各关节点的位置,得到各关节点的实际位置;
根据各关节点的实际位置沿肢体的位置和方向将各关节点依次连接,得到人体姿态;
根据所述人体姿态确定所述可疑人员正在进行偷盗行为的第一嫌疑度。
可选的,所述从所述环境声音信号序列中滤出水波浪声音序列,具体包括:
获取声学传感器在未发生偷盗行为时采集的背景声音信号序列;
计算所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度;
对所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度进行对比,得到对比结果;
当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异小于预设阈值时确定环境声音信号序列中未包含水波浪声音序列;
当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异大于或等于预设阈值时,利用数字滤波器从所述环境声音信号序列中滤除所述背景声音信号序列,得到水波浪声音序列。
可选的,所述将所述水波浪声音序列与波浪声阈值进行对比,得到存在偷盗行为的第二嫌疑度,具体包括:
对所述水波浪声音序列进行时频分析,得到水波浪声音序列的功率谱密度;
判断所述水波浪声音序列的功率谱密度的能量集中值对应的频率是否落在波浪声频率阈值范围内,得到判断结果;
根据所述判断结果计算存在偷盗行为的第二嫌疑度。
一种水产养殖生物防盗监测系统,包括:
视频获取模块,用于获取红外摄像机采集到的监控视频;
人体识别模块,用于对所述监控视频的各幅图像进行人体识别,得到可疑人员图像;
姿态检测模块,用于对所述可疑人员图像进行人体姿态检测,确定所述可疑人员正在进行偷盗行为的第一嫌疑度;
声音获取模块,用于获取声学传感器实时采集到的环境声音信号序列;
滤波模块,用于从所述环境声音信号序列中滤出水波浪声音序列;
声音对比模块,用于将所述水波浪声音序列与波浪声阈值进行对比,得到存在偷盗行为的第二嫌疑度;
预警模块,用于结合所述第一嫌疑度和所述第二嫌疑度确定是否发生盗窃,并在发生盗窃时进行预警。
可选的,所述人体识别模块包括:
图像转化单元,用于将所述监控视频转化为多幅图像帧;
训练单元,用于将包含人体与背景的图像样本数据集输入训练模型进行训练,得到训练好的人体识别网络模型;
模型识别单元,用于将多幅所述图像帧输入训练好的人体识别网络模型中进行人体和背景的识别,得到可疑人员图像。
可选的,所述姿态检测模块包括:
肢体关节初步确定单元,用于利用卷积神经网络确定所述可疑人员图像中任意一个像素点为人体各关节点的概率以及各关节点对应的像素点相连组成肢体的概率,初步确定各肢体的位置和方向;
候选像素确定单元,用于根据任意一个像素点为人体各关节点的概率确定各关节点的候选像素点集合;
实际位置确定单元,用于根据肢体的位置和方向将各关节点所对应的候选像素点集合进行连接,使相连的肢体的连接处共用同一个像素点,计算连接后肢体匹配的总体权重,确定使所述总体权重最大的各关节点的位置,得到各关节点的实际位置;
关节点连接单元,用于根据各关节点的实际位置沿肢体的位置和方向将各关节点依次连接,得到人体姿态;
第一嫌疑度计算单元,用于根据所述人体姿态确定所述可疑人员正在进行偷盗行为的第一嫌疑度。
可选的,所述滤波模块包括:
背景声音获取单元,用于获取声学传感器在未发生偷盗行为时采集的背景声音信号序列;
功率谱计算单元,用于计算所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度;
对比单元,用于对所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度进行对比,得到对比结果;
未含水波浪声音确定单元,用于当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异小于预设阈值时确定环境声音信号序列中未包含水波浪声音序列;
滤波单元,用于当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异大于或等于预设阈值时,利用数字滤波器从所述环境声音信号序列中滤除所述背景声音信号序列,得到水波浪声音序列。
可选的,所述声音对比模块包括:
时频分析单元,用于对所述水波浪声音序列进行时频分析,得到水波浪声音序列的功率谱密度;
判断单元,用于判断所述水波浪声音序列的功率谱密度的能量集中值对应的频率是否落在波浪声频率阈值范围内,得到判断结果;
第二嫌疑度计算单元,用于根据所述判断结果计算存在偷盗行为的第二嫌疑度。
根据本发明提供的具体实施例,本发明公开了以下技术效果:本发明所公开的一种水产养殖生物防盗监测方法及系统,采用声音监测对水波浪声音进行监测,利用视频监测识别可疑人员的姿态,从而实现防盗监测、判断和报警,实现水产养殖生物防盗的实时监测。同时这两种监测方式结合进行监测,使监测结果相对单一监测手段的准确度更高。并且,这两种监测方式都是被动监测方式,避免对水中生物进行声波和光波刺激,从而能够避免对水中生物的辐射伤害。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例1的水产养殖生物防盗监测方法的方法流程图;
图2为本发明实施例1的水产养殖生物防盗监测方法中卷积神经网络图;
图3为本发明实施例2中的人体检测结果图;
图4为本发明实施例2中对各个关节进行标记的示意图;
图5为本发明实施例2中关节连接结果图;
图6为无偷窃行为时环境背景噪声信号序列图;
图7为存在波浪时含水面波浪的声音信号序列图;
图8为声学监测结果图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的目的是提供一种水产养殖生物防盗监测方法及系统,实现水产养殖生物防盗的实时监测。
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
实施例1:
图1为本发明实施例1的水产养殖生物防盗监测方法的方法流程图。
参见图1,该水产养殖生物防盗监测方法,包括:
步骤101:获取红外摄像机采集到的监控视频;红外摄像机安装于水产养殖基地的高处。
步骤102:对所述监控视频的各幅图像进行人体识别,得到可疑人员图像;
步骤103:对所述可疑人员图像进行人体姿态检测,确定所述可疑人员正在进行偷盗行为的第一嫌疑度;
步骤104:获取声学传感器实时采集到的环境声音信号序列;声学传感器安装于水池上方。
步骤105:从所述环境声音信号序列中滤出水波浪声音序列;
步骤106:将所述水波浪声音序列与波浪声阈值进行对比,得到存在偷盗行为的第二嫌疑度;
步骤107:结合所述第一嫌疑度和所述第二嫌疑度确定是否发生盗窃,并在发生盗窃时进行预警。
其中,步骤102具体包括:
将所述监控视频转化为多幅图像帧Frame(i,NumberFrames),其中i表示当前帧数,NumberFrames代表总的视频帧数;
将多幅所述图像帧Frame(i,NumberFrames)输入训练好的人体识别网络模型中进行人体和背景的识别,得到可疑人员图像,同时分析出对应的特征映射F;
所述人体识别网络模型的训练过程为:
将包含人体与背景的图像样本数据集输入训练模型进行训练,得到训练好的人体识别网络模型。作为一种可选的实施方式,图像样本数据集可以选用PascalVOS数据集,训练模型选用Yolo-v3网络模型。
其中,步骤103具体包括:
STEP1:利用卷积神经网络确定所述可疑人员图像中任意一个像素点为人体各关节点的概率以及各关节点对应的像素点相连组成肢体的概率,初步确定各肢体的位置和方向。
该步骤中,卷积神经网络CNN为两个。
图2为本发明实施例1的水产养殖生物防盗监测方法中卷积神经网络图。
参见图2,其中一路CNN(Branch 1)预测身体各关节点的二维置信度图St,另一路CNN(Branch 2)预测各关节点之间的亲和区域Lt。每个置信度图是身体相关节点出现在每个像素位置可能性的2D表示,即代表相应位置(某个像素)出现某个关节点的概率;亲和区域则表示各个关节点之间的一种关联程度,即各关节点对应的像素点相连组成肢体的概率,并记录肢体的位置和方向。
其中ρ1和φ1是第一阶段的预测结果,在随后的第t阶段中,来自前一阶段两个分支的预测结果以及原始输入图像Input Image的特征映射F将被输入到每个分支中并产生更精确的预测结果,最终得到输出集合:
S=(S1,S2,…,Sj),j∈{1,…,J}
L=(L1,L2,...,Lc),c∈{1,...,C}
j表示人身上的第j个关节点,S为相应位置出现第j个关节点的概率,用置信度图表示;c表示第c个肢体,即人身体的第c个连接,例如膝关节和踝关节的连接,输出L是对关节点之间相连组成肢体的概率,用相应连接方向上的单位向量或零向量表示。
STEP2:根据任意一个像素点为人体各关节点的概率确定各关节点的候选像素点集合。
任意一组关节点的候选位置集合为
Figure BDA0001948211760000081
其中Nj是关节点j的候选数量,即
Figure BDA0001948211760000082
是关节点j的第m次被检测到时的候选位置。
STEP3:根据肢体的位置和方向将各关节点所对应的候选像素点集合进行连接,使相连的肢体的连接处共用同一个像素点,计算连接后肢体匹配的总体权重,确定使所述总体权重最大的各关节点的位置,得到各关节点的实际位置。该步骤的实质为为所有可能的连接集合
Figure BDA0001948211760000083
找到最优匹配,判断出关节点的最佳连接,其中j1和j2表示一个肢体的两个关节点,变量
Figure BDA0001948211760000084
表示候选位置
Figure BDA0001948211760000085
Figure BDA0001948211760000086
是否存在连接,1为构成连接,0为不构成连接。
具体过程为:
将与单个肢体c相对应的关节对j1和j2,进行分集,得到关节点的候选位置
Figure BDA0001948211760000091
Figure BDA0001948211760000092
来自
Figure BDA0001948211760000093
的点和
Figure BDA0001948211760000094
的点之间的连线代表关节对之间可能的连接,对每条连线进行亲和区域积分得到权重E:
Figure BDA0001948211760000095
其中
Figure BDA0001948211760000096
分别为
Figure BDA0001948211760000097
指向同一点o的向量,p(u)表示内插于关节点
Figure BDA0001948211760000098
之间的位置;
得到各关节点连线的权重E之后,找到一组最大匹配的连线,使得目标函数值最大,此时能够保证连线两个点分别在两个候选位置集合中,且这两个集合中的任意两条边均未连接到这两个点,同时能到使总体权重达到最大,目标函数如下;
Figure BDA0001948211760000099
其中,Ec是肢体c匹配的总体权重,Zc是对应于肢体c的所有连接集合Z的子集;
对各个肢体c进行最大匹配,找到各自对应的关节点。
STEP4:根据各关节点的实际位置沿肢体的位置和方向将各关节点依次连接,得到人体姿态;
STEP5:根据所述人体姿态确定所述可疑人员正在进行偷盗行为的第一嫌疑度K1。当人体姿态为预设姿态时,则确定所述第一嫌疑度为对应的预设值。基本原则为,当人体姿态出现匍匐、异常弯腰、异常下蹲等行为时,增大第一嫌疑度的值。
其中步骤105具体包括:
获取声学传感器在未发生偷盗行为时采集的背景信号序列;所述声学传感器为水听器,水听器安装在靠近水面的位置。作为一种可选的实施方式,启动记录仪,测定K分钟内的环境背景噪声,得到无偷窃行为时的背景声音信号序列Raw_noise。所述环境声音信号序列也为K分钟内的环境声音信号序列Raw_sound。
计算所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度,得到得到对应信号Raw_noise_PSD=PSD{Raw_noise}和Raw_sound_PSD=PSD{Raw_Sound},其中PSD{·}算子表示求信号功率谱密度运算。
对所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度进行对比,得到对比结果;
当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异小于预设阈值时确定环境声音信号序列中未包含水波浪声音序列,此时可以直接确定第二嫌疑度为0。
当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异大于或等于预设阈值时,利用数字滤波器从所述环境声音信号序列中滤除所述背景声音信号序列,并得到水波浪声音序列Ref_Sound。
其中,步骤106具体包括:
对所述水波浪声音序列进行时频分析,得到水波浪声音序列的功率谱密度Ref_Sound_PSD=PSD{Ref_Sound};时频分析使用的方法包括傅里叶变换法、小波变换法、短时傅里叶变换等。
判断所述水波浪声音序列的功率谱密度的能量集中值对应的频率是否落在波浪声频率阈值范围Ref_sound_band内,得到判断结果;
根据所述判断结果计算存在偷盗行为的第二嫌疑度K2。
在步骤106之前,还包括确定波浪声频率阈值范围Ref_sound_band的方法,具体包括:
利用渔网进行水面扰动,模拟偷窃行为,启动记录仪并记录从扰动开始到结束的K分钟内的模拟声学信号序列;
利用数字滤波器从模拟声学信号序列中滤除背景信号序列,得到模拟波浪声音序列;
对所述模拟波浪声音序列进行时频分析得到模拟波浪功率谱密度图,得到波浪声频率阈值范围Ref_sound_band。
步骤107具体包括:
利用公式
Figure BDA0001948211760000101
计算是否存在盗窃行为的概率值;其中K为存在盗窃行为的概率值,K1为第一嫌疑度,K2为第二嫌疑度。
当概率值K超过设定偷窃阈值K0,确定发生盗窃行为,发出实时防盗预警。
实施例2:
该实施例2以厦门市五缘湾海滩的养殖基地为具体实施方式进行说明。
视频监测:
图3为本发明实施例2中的人体检测结果图。
参见图3,获取养殖环境的监控视频,利用已经训练好的Yolo-v3网络模型进行人体与环境背景的检测,该检测方式能够检测出所有的人体(即图中标注person的对象),并能够对汽车等物体进行识别。
图4为本发明实施例2中对各个关节进行标记的示意图。
图5为本发明实施例2中关节连接结果图。
参见图4和图5,应用本发明的基于亲和区域的人体姿态估计网络,找到关节点的置信度图和关节点之间的亲和区域,连接关节点,提取人体骨架输出姿态识别结果,可以准确对各个关节进行标记并识别人体的姿态。姿态识别结果为并非正常的站立,出现异常下蹲或跌倒的行为,从而确定存在偷窃行为的概率值K1为70%。
声学监测:
在厦门市五缘湾海滩模拟水产生物养殖环境,将水听器放置在靠近水边的位置,首先启动记录仪测定10分钟内的环境背景噪声,得到无偷窃行为时的声音信号序列Raw_noise。图6为无偷窃行为时环境背景噪声信号序列图。启动记录仪并记录从扰动开始到结束的10分钟内的声学信号数据序列Raw_sound,图7为存在波浪时含水面波浪的声音信号序列图。分别计算声信号序列Raw_noise和Raw_sound的功率谱密度,得到对应信号Raw_noise_PSD=PSD{Raw_noise}和Raw_sound_PSD=PSD{Raw_Sound},其中PSD{·}算子表示求信号功率谱密度运算,经运算发现二者功率谱存在较大区别,需进行滤波以提取水波浪信号;利用数字滤波器(具体的,滤波器用来滤除环境背景噪声)滤出水波浪信号序列Ref_Sound,对应的频域信号为Ref_Sound_PSD=PSD{Ref_Sound}。对波浪信号序列进行短时傅里叶变换,得到功率谱密度图,找到功率值较大的信号频段,存在信号频段10-15khz的水面波浪声,对是否存在偷窃行为做出预判断,经判断存在偷窃行为的概率值K2为80%。图8为声学监测结果图。10-15khz为波浪声频率阈值范围Ref_sound_band。
预警:
K2=80%,K1=70%,则K=75%。预设的K0=60%此时K>K0,表明养殖场可能存在偷盗行为,发出报警。
实施例3:
一种水产养殖生物防盗监测系统,包括:
视频获取模块,用于获取红外摄像机采集到的监控视频;
人体识别模块,用于对所述监控视频的各幅图像进行人体识别,得到可疑人员图像;
姿态检测模块,用于对所述可疑人员图像进行人体姿态检测,确定所述可疑人员正在进行偷盗行为的第一嫌疑度;
声音获取模块,用于获取声学传感器实时采集到的环境声音信号序列;
滤波模块,用于从所述环境声音信号序列中滤出水波浪声音序列;
声音对比模块,用于将所述水波浪声音序列与波浪声阈值进行对比,得到存在偷盗行为的第二嫌疑度;
预警模块,用于结合所述第一嫌疑度和所述第二嫌疑度确定是否发生盗窃,并在发生盗窃时进行预警。
可选的,所述人体识别模块包括:
图像转化单元,用于将所述监控视频转化为多幅图像帧;
训练单元,用于将包含人体与背景的图像样本数据集输入训练模型进行训练,得到训练好的人体识别网络模型;
模型识别单元,用于将多幅所述图像帧输入训练好的人体识别网络模型中进行人体和背景的识别,得到可疑人员图像。
可选的,所述姿态检测模块包括:
肢体关节初步确定单元,用于利用卷积神经网络确定所述可疑人员图像中任意一个像素点为人体各关节点的概率以及各关节点对应的像素点相连组成肢体的概率,初步确定各肢体的位置和方向;
候选像素确定单元,用于根据任意一个像素点为人体各关节点的概率确定各关节点的候选像素点集合;
实际位置确定单元,用于根据肢体的位置和方向将各关节点所对应的候选像素点集合进行连接,使相连的肢体的连接处共用同一个像素点,计算连接后肢体匹配的总体权重,确定使所述总体权重最大的各关节点的位置,得到各关节点的实际位置;
关节点连接单元,用于根据各关节点的实际位置沿肢体的位置和方向将各关节点依次连接,得到人体姿态;
第一嫌疑度计算单元,用于根据所述人体姿态确定所述可疑人员正在进行偷盗行为的第一嫌疑度。
可选的,所述滤波模块包括:
背景声音获取单元,用于获取声学传感器在未发生偷盗行为时采集的背景声音信号序列;
功率谱计算单元,用于计算所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度;
对比单元,用于对所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度进行对比,得到对比结果;
未含水波浪声音确定单元,用于当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异小于预设阈值时确定环境声音信号序列中未包含水波浪声音序列;
滤波单元,用于当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异大于或等于预设阈值时,利用数字滤波器从所述环境声音信号序列中滤除所述背景声音信号序列,得到水波浪声音序列。
可选的,所述声音对比模块包括:
时频分析单元,用于对所述水波浪声音序列进行时频分析,得到水波浪声音序列的功率谱密度;
判断单元,用于判断所述水波浪声音序列的功率谱密度的能量集中值对应的频率是否落在波浪声频率阈值范围内,得到判断结果;
第二嫌疑度计算单元,用于根据所述判断结果计算存在偷盗行为的第二嫌疑度。
根据本发明提供的具体实施例,本发明公开了以下技术效果:本发明所公开的一种水产养殖生物防盗监测方法及系统,采用声音监测对水波浪声音进行监测,利用视频监测识别可疑人员的姿态,从而实现防盗监测、判断和报警,实现水产养殖生物防盗的实时监测。同时这两种监测方式结合进行监测,使监测结果相对单一监测手段的准确度更高。并且,这两种监测方式都是被动监测方式,避免对水中生物进行声波和光波刺激,从而能够避免对水中生物的辐射伤害。
对于实施例公开的系统而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处。综上所述,本说明书内容不应理解为对本发明的限制。

Claims (5)

1.一种水产养殖生物防盗监测方法,其特征在于,包括:
获取红外摄像机采集到的监控视频;
对所述监控视频的各幅图像进行人体识别,得到可疑人员图像;
对所述可疑人员图像进行人体姿态检测,确定所述可疑人员正在进行偷盗行为的第一嫌疑度;
获取声学传感器实时采集到的环境声音信号序列;
从所述环境声音信号序列中滤出水波浪声音序列;
将所述水波浪声音序列与波浪声阈值进行对比,得到存在偷盗行为的第二嫌疑度;
结合所述第一嫌疑度和所述第二嫌疑度确定是否发生盗窃,并在发生盗窃时进行预警;
所述对所述可疑人员图像进行人体姿态检测,确定所述可疑人员正在进行偷盗行为的第一嫌疑度,具体包括:
利用卷积神经网络确定所述可疑人员图像中任意一个像素点为人体各关节点的概率以及各关节点对应的像素点相连组成肢体的概率,初步确定各肢体的位置和方向;
根据任意一个像素点为人体各关节点的概率确定各关节点的候选像素点集合;
根据肢体的位置和方向将各关节点所对应的候选像素点集合进行连接,使相连的肢体的连接处共用同一个像素点,计算连接后肢体匹配的总体权重,确定使所述总体权重最大的各关节点的位置,得到各关节点的实际位置;
根据各关节点的实际位置沿肢体的位置和方向将各关节点依次连接,得到人体姿态;
根据所述人体姿态确定所述可疑人员正在进行偷盗行为的第一嫌疑度;
所述从所述环境声音信号序列中滤出水波浪声音序列,具体包括:
获取声学传感器在未发生偷盗行为时采集的背景声音信号序列;
计算所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度;
对所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度进行对比,得到对比结果;
当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异小于预设阈值时确定环境声音信号序列中未包含水波浪声音序列;
当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异大于或等于预设阈值时,利用数字滤波器从所述环境声音信号序列中滤除所述背景声音信号序列,得到水波浪声音序列;
所述将所述水波浪声音序列与波浪声阈值进行对比,得到存在偷盗行为的第二嫌疑度,具体包括:
对所述水波浪声音序列进行时频分析,得到水波浪声音序列的功率谱密度;
判断所述水波浪声音序列的功率谱密度的能量集中值对应的频率是否落在波浪声频率阈值范围内,得到判断结果;
根据所述判断结果计算存在偷盗行为的第二嫌疑度。
2.根据权利要求1所述的水产养殖生物防盗监测方法,其特征在于,所述对所述监控视频的各幅图像进行人体识别,得到可疑人员图像,具体包括:
将所述监控视频转化为多幅图像帧;
将多幅所述图像帧输入训练好的人体识别网络模型中进行人体和背景的识别,得到可疑人员图像;
所述人体识别网络模型的训练过程为:
将包含人体与背景的图像样本数据集输入训练模型进行训练,得到训练好的人体识别网络模型。
3.一种水产养殖生物防盗监测系统,其特征在于,包括:
视频获取模块,用于获取红外摄像机采集到的监控视频;
人体识别模块,用于对所述监控视频的各幅图像进行人体识别,得到可疑人员图像;
姿态检测模块,用于对所述可疑人员图像进行人体姿态检测,确定所述可疑人员正在进行偷盗行为的第一嫌疑度;
声音获取模块,用于获取声学传感器实时采集到的环境声音信号序列;
滤波模块,用于从所述环境声音信号序列中滤出水波浪声音序列;
声音对比模块,用于将所述水波浪声音序列与波浪声阈值进行对比,得到存在偷盗行为的第二嫌疑度;
预警模块,用于结合所述第一嫌疑度和所述第二嫌疑度确定是否发生盗窃,并在发生盗窃时进行预警;
所述滤波模块包括:
背景声音获取单元,用于获取声学传感器在未发生偷盗行为时采集的背景声音信号序列;
功率谱计算单元,用于计算所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度;
对比单元,用于对所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度进行对比,得到对比结果;
未含水波浪声音确定单元,用于当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异小于预设阈值时确定环境声音信号序列中未包含水波浪声音序列;
滤波单元,用于当所述对比结果表示所述环境声音信号序列的功率谱密度和所述背景声音信号序列的功率谱密度的差异大于或等于预设阈值时,利用数字滤波器从所述环境声音信号序列中滤除所述背景声音信号序列,得到水波浪声音序列;
所述声音对比模块包括:
时频分析单元,用于对所述水波浪声音序列进行时频分析,得到水波浪声音序列的功率谱密度;
判断单元,用于判断所述水波浪声音序列的功率谱密度的能量集中值对应的频率是否落在波浪声频率阈值范围内,得到判断结果;
第二嫌疑度计算单元,用于根据所述判断结果计算存在偷盗行为的第二嫌疑度。
4.根据权利要求3所述的水产养殖生物防盗监测系统,其特征在于,所述人体识别模块包括:
图像转化单元,用于将所述监控视频转化为多幅图像帧;
训练单元,用于将包含人体与背景的图像样本数据集输入训练模型进行训练,得到训练好的人体识别网络模型;
模型识别单元,用于将多幅所述图像帧输入训练好的人体识别网络模型中进行人体和背景的识别,得到可疑人员图像。
5.根据权利要求3所述的水产养殖生物防盗监测系统,其特征在于,所述姿态检测模块包括:
肢体关节初步确定单元,用于利用卷积神经网络确定所述可疑人员图像中任意一个像素点为人体各关节点的概率以及各关节点对应的像素点相连组成肢体的概率,初步确定各肢体的位置和方向;
候选像素确定单元,用于根据任意一个像素点为人体各关节点的概率确定各关节点的候选像素点集合;
实际位置确定单元,用于根据肢体的位置和方向将各关节点所对应的候选像素点集合进行连接,使相连的肢体的连接处共用同一个像素点,计算连接后肢体匹配的总体权重,确定使所述总体权重最大的各关节点的位置,得到各关节点的实际位置;
关节点连接单元,用于根据各关节点的实际位置沿肢体的位置和方向将各关节点依次连接,得到人体姿态;
第一嫌疑度计算单元,用于根据所述人体姿态确定所述可疑人员正在进行偷盗行为的第一嫌疑度。
CN201910043012.5A 2019-01-17 2019-01-17 一种水产养殖生物防盗监测方法及系统 Active CN109686032B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910043012.5A CN109686032B (zh) 2019-01-17 2019-01-17 一种水产养殖生物防盗监测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910043012.5A CN109686032B (zh) 2019-01-17 2019-01-17 一种水产养殖生物防盗监测方法及系统

Publications (2)

Publication Number Publication Date
CN109686032A CN109686032A (zh) 2019-04-26
CN109686032B true CN109686032B (zh) 2021-03-02

Family

ID=66193363

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910043012.5A Active CN109686032B (zh) 2019-01-17 2019-01-17 一种水产养殖生物防盗监测方法及系统

Country Status (1)

Country Link
CN (1) CN109686032B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112562241A (zh) * 2020-12-03 2021-03-26 苏州工业园区测绘地理信息有限公司 一种用于驱离夜间捕鱼人员的系统
CN113283286B (zh) * 2021-03-24 2023-11-21 上海高德威智能交通系统有限公司 一种驾驶员异常行为检测方法和装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1993025874A1 (en) * 1992-06-08 1993-12-23 Erickson Jon W Optical lever acoustic and ultrasound sensor
CN1825803A (zh) * 2006-03-14 2006-08-30 山东康威通信技术有限公司 影像与信息实时交互控制的绿色庄园
CN101251941A (zh) * 2007-04-06 2008-08-27 江苏金智科技股份有限公司 一种用于安全监控的人体运动目标视频检测新方法及装置
CN101464952A (zh) * 2007-12-19 2009-06-24 中国科学院自动化研究所 基于轮廓的异常行为识别方法
CN101635834A (zh) * 2008-07-21 2010-01-27 侯荣琴 类神经控制自动追踪识别系统
CN201766663U (zh) * 2010-03-30 2011-03-16 苏州市职业大学 一种小区物业监控系统
CN103051389A (zh) * 2013-01-05 2013-04-17 河海大学常州校区 一种用于水下对讲机的水声语音实时传输系统
CN203799459U (zh) * 2014-02-26 2014-08-27 浙江海洋学院 深水网箱养殖防盗警示系统
CN207948625U (zh) * 2018-01-30 2018-10-12 绵阳市稻田科技有限公司 一种水产养殖系统
CN108909964A (zh) * 2018-04-25 2018-11-30 哈尔滨工程大学 一种多航态下的船舶减摇控制器切换控制方法
CN109090009A (zh) * 2018-09-12 2018-12-28 湖州日晨生态农业开发有限公司 一种淡水鱼养殖管理系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB8819097D0 (en) * 1988-08-11 1988-09-14 Jones R Security system
IL125357A0 (en) * 1998-07-15 1999-03-12 Eco Fish Ltd Fish feeding control in aquaculture on the basis of sound emitted by fish
JP3476768B2 (ja) * 2000-12-14 2003-12-10 日本電信電話株式会社 盗難防止装置
WO2012127424A1 (en) * 2011-03-23 2012-09-27 Morad Eran Threat control system for fish ponds

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1993025874A1 (en) * 1992-06-08 1993-12-23 Erickson Jon W Optical lever acoustic and ultrasound sensor
CN1825803A (zh) * 2006-03-14 2006-08-30 山东康威通信技术有限公司 影像与信息实时交互控制的绿色庄园
CN101251941A (zh) * 2007-04-06 2008-08-27 江苏金智科技股份有限公司 一种用于安全监控的人体运动目标视频检测新方法及装置
CN101464952A (zh) * 2007-12-19 2009-06-24 中国科学院自动化研究所 基于轮廓的异常行为识别方法
CN101635834A (zh) * 2008-07-21 2010-01-27 侯荣琴 类神经控制自动追踪识别系统
CN201766663U (zh) * 2010-03-30 2011-03-16 苏州市职业大学 一种小区物业监控系统
CN103051389A (zh) * 2013-01-05 2013-04-17 河海大学常州校区 一种用于水下对讲机的水声语音实时传输系统
CN203799459U (zh) * 2014-02-26 2014-08-27 浙江海洋学院 深水网箱养殖防盗警示系统
CN207948625U (zh) * 2018-01-30 2018-10-12 绵阳市稻田科技有限公司 一种水产养殖系统
CN108909964A (zh) * 2018-04-25 2018-11-30 哈尔滨工程大学 一种多航态下的船舶减摇控制器切换控制方法
CN109090009A (zh) * 2018-09-12 2018-12-28 湖州日晨生态农业开发有限公司 一种淡水鱼养殖管理系统

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
"基于3G的水声通信海测平台的设计与实现";程恩等;《合肥大学学报(自然科学版)》;20160430(第4期);全文 *
"基于FPGA的水声信号通信系统";卜文强等;《合肥工业大学学报(自然科学版)》;20140331;第37卷(第3期);全文 *
"深度学习实时多人姿态估计与跟踪";许忠雄等;《中国电子科学研究院学报》;20180831(第4期);第1节 *
"疏浚船水下违规抛泥行为的声学检测方法";袁飞等;《南京大学学报(自然科学)》;20151130;全文 *

Also Published As

Publication number Publication date
CN109686032A (zh) 2019-04-26

Similar Documents

Publication Publication Date Title
Li et al. Nonintrusive methods for biomass estimation in aquaculture with emphasis on fish: a review
Ren et al. A survey of deep learning in agriculture: techniques and their applications
Lakshmi et al. Implementation of IoT with image processing in plant growth monitoring system
CN109686032B (zh) 一种水产养殖生物防盗监测方法及系统
CN110007366A (zh) 一种基于多传感器融合的生命搜寻方法以及系统
CN114463701B (zh) 一种基于多源大数据动物养殖数据挖掘的监测预警系统
CN113111767A (zh) 一种基于深度学习3d姿态评估的跌倒检测方法
CN110456320A (zh) 一种基于自由空间步态时序特征的超宽带雷达身份识别方法
Zhao et al. An algorithm for tracking multiple fish based on biological water quality monitoring
CN112766165B (zh) 基于深度神经网络与全景分割的跌倒预判方法
Ibrahim et al. Transfer learning for efficient classification of grouper sound
CN114898405B (zh) 基于边缘计算的便携式肉鸡异常监测系统
CN115859078A (zh) 一种基于改进Transformer的毫米波雷达跌倒检测方法
CN115578678A (zh) 一种鱼类摄食强度分类方法及系统
CN115546899A (zh) 一种基于深度学习的考场异常行为分析方法、系统及终端机
CN111783751A (zh) 基于枪球联动与bim的养殖舍仔猪异常预警方法
CN111680609A (zh) 基于图像配准和目标检测的异物识别系统及其方法
Ramos et al. Quantifying ecological constraints on motion signaling
CN110532854B (zh) 一种生猪爬跨行为检测方法及系统
Jovanović et al. Splash detection in fish Plants surveillance videos using deep learning
Nouredanesh et al. Wearable vision detection of environmental fall risk using gabor barcodes
Desell et al. Wildlife@ Home: Combining crowd sourcing and volunteer computing to analyze avian nesting video
CN116884416A (zh) 野生动物音频采集检测系统、方法、存储介质及电子设备
CN116034904A (zh) 基于轨道式巡检机器人的猪只健康监测系统及方法
CN115170942A (zh) 一种声音与视觉多级融合的鱼类行为识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant