CN117423061A - 一种基于人工智能的智慧园区智能监控系统 - Google Patents

一种基于人工智能的智慧园区智能监控系统 Download PDF

Info

Publication number
CN117423061A
CN117423061A CN202311499101.3A CN202311499101A CN117423061A CN 117423061 A CN117423061 A CN 117423061A CN 202311499101 A CN202311499101 A CN 202311499101A CN 117423061 A CN117423061 A CN 117423061A
Authority
CN
China
Prior art keywords
module
audio
pet
intelligent
appearance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202311499101.3A
Other languages
English (en)
Inventor
殷翔
马成彪
陈成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Yebian Ge Network Technology Co ltd
Original Assignee
Chengdu Yebian Ge Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Yebian Ge Network Technology Co ltd filed Critical Chengdu Yebian Ge Network Technology Co ltd
Priority to CN202311499101.3A priority Critical patent/CN117423061A/zh
Publication of CN117423061A publication Critical patent/CN117423061A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Housing For Livestock And Birds (AREA)

Abstract

本发明公开了一种基于人工智能的智慧园区智能监控系统,包括:存储模块保存宠物图像、宠物音频;筛选模块对对历史监控视频中的各视频帧图像筛选得到若干疑似图像;外形识别模块识别得到若干疑似动物外形特征,若干宠物外形特征;第一计算模块计算各疑似动物外形特征与各宠物外形特征之间的外形总体相似度,生成音频获取指令;音频获取模块根据音频获取指令获取历史音频数据作为疑似音频;音频识别模块识别得到若干疑似动物声音特征,若干宠物声音特征;第二计算模块计算各疑似动物声音特征与各宠物声音特征之间的声音总体相似度,生成定位指令;定位模块根据定位指令对监控设备定位。本发明提升了智慧居民园区内家养宠物的搜寻精度和效率。

Description

一种基于人工智能的智慧园区智能监控系统
技术领域
本发明涉及园区监控技术领域,尤其涉及一种基于人工智能的智慧园区智能监控系统。
背景技术
智慧园区是指利用物联网、云计算、大数据、人工智能等先进技术手段,对园区内的设施、设备、人员进行全面的感知、连接、分析和智能化管理,以提高园区的运营效率、安全性以及居住和工作的舒适度。在居民园区中,经常会有带家养宠物在园区内散步,同时也会有家养宠物在主人不知情的情况下从居民楼中跑出至园区内玩耍,因此不少家养宠物经常会有在园区内走失的情况发生。由于目前的居民园区内绿化环境较好,在居民园区内除了家养宠物外,还有不少具备攻击性和伤害能力的外来动物存在于居民园区内,因此走失的家养宠物在居民园区内的安全无法得到有效保证。目前,在现有技术中,一般在居民园区内安装监控,当家养宠物走失后,只能通过调取监控来判断家养宠物大致的运动轨迹,该种方式不但监控精度比较低,同时需要大量的查询时间,搜寻效率极低,无法协助主人快速精确搜寻到家养宠物。
发明内容
针对现有技术存在的不足,本发明的目的在于提供一种基于人工智能的智慧园区智能监控系统,用于提升对智慧居民园区内家养宠物的搜寻精度和搜寻效率。
为实现上述目的,本发明提供了如下技术方案:一种基于人工智能的智慧园区智能监控系统,应用于智慧居民园区,所述智慧居民园区均匀分布有若干监控设备,所述监控设备用于实时录制所述智能居民园区内的监控视频和监控音频,并分别存储为历史监控视频和历史监控音频上传至云端服务器,所述历史监控视频、所述历史监控音频均关联有相应的录制时刻,所述智慧园区智能监控系统包括:
存储模块,用于保存家养宠物的宠物图像、宠物音频;
筛选模块,连接所述存储模块和所述云端服务器,用于对所述宠物图像进行特征提取得到个性特征,根据所述个性特征对所述历史监控视频中的各视频帧图像进行快速筛选,得到若干疑似图像;
外形识别模块,连接所述筛选模块,用于识别得到各所述疑似图像中的若干疑似动物外形特征,以及识别得到所述宠物图像中的若干宠物外形特征;
第一计算模块,连接所述筛选模块,用于计算各所述疑似动物外形特征与各所述宠物外形特征之间的外形总体相似度,在所述外形总体相似度大于预设的第一相似度阈值时,生成音频获取指令;
音频获取模块,连接所述云端服务器和所述第一计算模块,用于根据所述音频获取指令获取与所述疑似图像的录制时刻一致的历史音频数据作为疑似音频;
音频识别模块,连接所述音频获取模块和所述存储模块,用于识别得到所述疑似音频中的若干疑似动物声音特征,以及识别得到所述宠物音频中的若干宠物声音特征;
第二计算模块,连接所述音频识别模块,用于计算各所述疑似动物声音特征与各所述宠物声音特征之间的声音总体相似度,在所述声音总体相似度大于预设的第二相似度阈值时,生成一定位指令;
定位模块,连接所述第二计算模块,用于根据所述定位指令对录制时刻距离当前时刻最近的采集所述疑似音频的监控设备进行定位。
进一步地,所述存储模块中预先保存有所述家养宠物的初始音频和初始图像,则所述智慧园区智能监控系统还包括:
时间采集模块,用于采集所述家养宠物的走失时间;
天气采集模块,连接所述时间采集模块,用于采集所述走失时间内的天气变化数据;
性格采集模块,用于采集所述家养宠物的性格数据;
音频预测模块,分别连接所述时间采集模块、所述天气采集模块、所述性格采集模块以及所述存储模块,用于将所述走失时间、所述天气变化数据、所述性格数据以及所述初始音频输入预设的音频变化预测模型,预测得到所述家养宠物当前时刻的所述宠物音频;
外形预测模块,分别连接所述时间采集模块、所述天气采集模块、所述性格采集模块以及所述存储模块,用于将所述走失时间、所述天气变化数据、所述性格数据以及所述初始图像输入预设的外形变化预测模型,预测得到所述家养宠物当前时刻的所述宠物图像。
进一步地,所述个性特征为所述家养宠物的外形显著特征,所述个性特征包括所述家养宠物的体型、体表颜色、身体覆盖物和特征身体器官。
进一步地,所述筛选模块包括:
特征提取单元,用于获取所述宠物图像中的所述个性特征,并提取所述个性特征中包含的标准颜色特征和标准形状特征;
视频帧提取单元,用于获取各所述视频帧图像中的局部特征,并提取所述局部特征中包含的视频颜色特征和视频形状特征;
筛选单元,连接所述特种提取单元,用于分别计算各所述视频颜色特征与所述标准颜色特征之间的颜色相似度,以及计算所述视频形状特征与所述标准形状特征之间的形状相似度,并根据所述颜色相似度和所述形状相似度对各所述视频帧图像进行筛选,得到各所述疑似图像。
进一步地,所述智慧园区被预先划分为若干监控区域,所述智慧园区智能监控系统还包括音频播放模块,连接所述定位模块,所述定位模块、所述音频播放模块和监控设备处于同一监控区域内,所述音频播放模块用于根据所述定位指令对在被定位的监控设备周围循环播放宠物主人的呼叫音频。
进一步地,所述存储模块中还预先保存有能够对各所述家养宠物产生威胁的外来动物的若干威胁动物图像,所述威胁动物图像关联有相应的驱逐音频,则所述还智慧园区智能监控系统包括:
动物识别模块,连接所述存储模块,用于提取各所述视频帧图像中的动物外形特征,以及提取各所述威胁动物图像中的危险外形特征;
第三计算模块,分别连接所述动物识别模块和所述音频播放模块,用于计算各所述动物外形特征与各所述危险外形特征之间的第三相似度,并在所述第三相似度大于预设的第三相似阈值时生成一驱逐指令,所述驱逐指令与采集到所述视频帧图像的监控设备所在的所述监控区域相关联;
所述音频播放模块根据所述驱逐指令播放相应的所述驱逐音频,所述驱逐音频的播放优先级高于所述呼叫音频。
进一步地,还包括危险标记模块,连接所述第三计算模块,用于根据所述驱逐指令对相关联的各所述监控区域进行标记形成危险区域。
进一步地,所述危险标记模块包括:
等级划分单元,用于根据各所述危险区域内出现所述驱逐指令的次数和频率对各所述危险区域的危险等级进行划分;
颜色区分单元,连接所述等级划分单元,用于根据各所述危险区域的危险等级进行不同颜色标记。
进一步地,还包括诱捕模块,连接所述危险标记模块,用于根据各所述危险区域的危险等级在相应所述危险区域内设置若干诱捕装置,所述诱捕装置的数量与所述危险等级正相关。
本发明的有益效果:
本发明首先提取宠物图像中的个性特征,利用个性特征对历史监控视频中的各视频帧图像快速筛选得到若干疑似图像,实现了对视频帧图像的初步筛选,有效提高了搜寻效率;然后计算各疑似动物外形特征与各宠物外形特征之间的外形总体相似度,计算各疑似动物声音特征与各宠物声音特征之间的声音总体相似度,在声音总体相似度大于第二相似度阈值时生成定位指令对录制时刻距离当前时刻最近的采集疑似音频的监控设备进行定位,通过两次总体相似度的计算,使得家养宠物的外形特征和声音特征都能用于识别搜索,在分两次计算减少运算量的同时,提升了对家养宠物的识别搜索的精度,进而提升了对家养宠物在智慧居民园区内的搜索精度和搜索效率。
附图说明
图1是本发明中基于人工智能的智慧园区智能监控系统的结构示意图。
附图标记:1、监控设备;2、存储模块;3、筛选模块;31、特征提取单元;32、视频帧提取单元;33、筛选单元;4、外形识别模块;5、第一计算模块;6、音频获取模块;7、云端服务器;8、音频识别模块;9、第二计算模块;10、定位模块;11、时间采集模块;12、天气采集模块;13、性格采集模块;14、音频预测模块;15、外形预测模块;16、动物识别模块;17、第三计算模块;18、危险标记模块;181、等级划分单元;182、颜色区分单元;19、诱捕模块;20、音频播放模块。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,当组件被称为“固定于”另一个组件,它可以直接在另一个组件上或者也可以存在居中的组件。当一个组件被认为是“连接”另一个组件,它可以是直接连接到另一个组件或者可能同时存在居中组件。当一个组件被认为是“设置于”另一个组件,它可以是直接设置在另一个组件上或者可能同时存在居中组件。本文所使用的术语“垂直的”、“水平的”、“左”、“右”以及类似的表述只是为了说明的目的。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
请同时参见图1,本实施例提供了一种基于人工智能的智慧园区智能监控系统,应用于智慧居民园区,智慧居民园区均匀分布有若干监控设备1,监控设备1用于实时录制智能居民园区内的监控视频和监控音频,并分别存储为历史监控视频和历史监控音频上传至云端服务器7,历史监控视频、历史监控音频均关联有相应的录制时刻,智慧园区智能监控系统包括:
存储模块2,用于保存家养宠物的宠物图像、宠物音频;
筛选模块3,连接存储模块2和云端服务器7,用于对宠物图像进行特征提取得到个性特征,根据个性特征对历史监控视频中的各视频帧图像进行快速筛选,得到若干疑似图像;
外形识别模块4,连接筛选模块3,用于识别得到各疑似图像中的若干疑似动物外形特征,以及识别得到宠物图像中的若干宠物外形特征;
第一计算模块5,连接外形识别模块4,用于计算各疑似动物外形特征与各宠物外形特征之间的外形总体相似度,在外形总体相似度大于预设的第一相似度阈值时,生成音频获取指令;
音频获取模块6,连接云端服务器7和第一计算模块5,用于根据音频获取指令获取与疑似图像的录制时刻一致的历史音频数据作为疑似音频;
音频识别模块8,连接音频获取模块6和存储模块2,用于识别得到疑似音频中的若干疑似动物声音特征,以及识别得到宠物音频中的若干宠物声音特征;
第二计算模块9,连接音频识别模块8,用于计算各疑似动物声音特征与各宠物声音特征之间的声音总体相似度,在声音总体相似度大于预设的第二相似度阈值时,生成一定位指令;
定位模块10,连接第二计算模块9,用于根据定位指令对录制时刻距离当前时刻最近的采集疑似音频的监控设备1进行定位。
具体地,本实施例中,监控设备1可以为监控摄像头,均匀分布在智慧居民园区内,监控摄像头实时采集到。存储模块2可以为非易失性存储器,用于对家养宠物的宠物图像、宠物音频进行存储。筛选模块3可以为配置在运算处理终端上的特征提取软件,用于提取宠物图像中的个性特征,进而利用个性特征对历史监控视频中的各视频帧图像快速筛选得到若干疑似图像,实现了对视频帧图像的快速初步筛选,有效提高了搜寻效率。其中个性特征为家养宠物的外形显著特征,个性特征包括家养宠物的体型、体表颜色、身体覆盖物和特征身体器官。外形识别模块4、音频识别模块8分别为配置在运算处理终端上的外形特征提取算法和音频特征提取算法。外形特征提取算法分别提取各疑似图像中的若干疑似动物外形特征,以及提取宠物图像中的若干宠物外形特征。音频特征提取算法分别提取疑似音频中的若干疑似动物声音特征,以及提取得到宠物音频中的若干宠物声音特征。第一计算模块5、第二计算模块9为配置在运算处理终端上的计算程序,分别用于计算各疑似动物外形特征与各宠物外形特征之间的外形总体相似度,以及计算各疑似动物声音特征与各宠物声音特征之间的声音总体相似度。当外形总体相似度大于第一相似度阈值(90%)时表明疑似图像中的各疑似动物外形特征与各宠物外形特征基本相符合,此时可以将与该疑似图像的录制时间一致的历史音频数据作为疑似音频,用作进一步识别。当声音总体相似度大于第二相似度(95%)时则表明疑似动物声音特征与宠物声音特征之间基本相符,此时表明搜寻到了走失的家养宠物。定位模块10可以为GPS定位装置,GPS定位装置安装在监控设备1上,用于在接收到定位指令后将监控设备1的定位数据发送到智慧居民园区的云端服务器7,可以实现对监控设备1的快速定位。主人通过智能设备无线连接云端服务器7,并获取到监控设备1的定位数据后前往相应的实际区域搜索家养宠物。
本技术方案通过两次总体相似度的计算,使得家养宠物的外形特征和声音特征都能用于识别搜索,在分两次计算减少运算量的同时,提升了对家养宠物的识别搜索的精度,进而提升了对家养宠物在智慧居民园区内的搜索精度和搜索效率。
优选的,存储模块2中预先保存有家养宠物的初始音频和初始图像,则智慧园区智能监控系统还包括:
时间采集模块11,用于采集家养宠物的走失时间;
天气采集模块12,连接时间采集模块11,用于采集走失时间内的天气变化数据;
性格采集模块13,用于采集家养宠物的性格数据;
音频预测模块14,分别连接时间采集模块11、天气采集模块12、性格采集模块13以及存储模块2,用于将走失时间、天气变化数据、性格数据以及初始音频输入预设的音频变化预测模型,预测得到家养宠物当前时刻的宠物音频;
外形预测模块15,分别连接时间采集模块11、天气采集模块12、性格采集模块13以及存储模块2,用于将走失时间、天气变化数据、性格数据以及初始图像输入预设的外形变化预测模型,预测得到家养宠物当前时刻的宠物图像。
具体地,本实施例中,家养宠物走失后,走失时间,天气因素以及宠物性格特征均会对外形和声音产生较大的影响,因此直接选用宠物在正常状态下的图像和叫声音频可能会导致计算不准确,影响对家养宠物的搜素精度。因此在该优选的实施例中,引入家养宠物的走失时间、天气变化数据以及性格数据,并分别输入预选训练完成的音频变化预测模型以及外形变化预测模型中,滤除了走失时间,天气因素以及宠物性格特征对宠物的外形和叫声音频的影响,显著提升了对家养宠物的搜索精度。其中,音频变化预测模型基于WavLM模型训练得到,该模型利用走失时间、天气变化数据以及性格数据对宠物正常状态下的初始音频进行预测,得到当前时刻的宠物音频。其中,外形预测模块15基于YOLOv7模型训练得到,该模型利用走失时间、天气变化数据以及性格数据对宠物正常状态下的初始图像进行预测,得到当前时刻的宠物图像。
优选的,筛选模块3包括:
特征提取单元31,用于获取宠物图像中的个性特征,并提取个性特征中包含的标准颜色特征和标准形状特征;
视频帧提取单元32,用于获取各视频帧图像中的局部特征,并提取局部特征中包含的视频颜色特征和视频形状特征;
筛选单元33,连接特种提取单元,用于分别计算各视频颜色特征与标准颜色特征之间的颜色相似度,以及计算视频形状特征与标准形状特征之间的形状相似度,并根据颜色相似度和形状相似度对各视频帧图像进行筛选,得到各疑似图像。
具体地,本实施例中,特征提取单元31和视频帧提取单元32均使用基于opencv的特征提取算法,分别对个性特征中的标准颜色特征和标准形状特征,以及局部特征中包含的视频颜色特征和视频形状特征进行特征提取,然后筛选单元33利用颜色相似度和形状相似度对视频帧图像筛选,筛选规则配置为:当视频帧图像的颜色相似度和形状相似度均大于90%时,将该视频帧图像作为筛选过后的疑似图像,不满足上述条件的视频帧图像则被筛选过滤掉。
优选的,智慧园区被预先划分为若干监控区域,智慧园区智能监控系统还包括音频播放模块20,连接定位模块10,定位模块10、音频播放模块20和监控设备1处于同一监控区域内,音频播放模块20用于根据定位指令对在被定位的监控设备1周围循环播放宠物主人的呼叫音频。
具体地,本实施例中,音频播放模块20通过播放宠物主人预先上传至云端服务器7的呼叫音频,然后云端服务器7根据定位指令发送到相应监控区域内的音频播放模块20,以吸引家养宠物出现,提升对家养宠物的搜索速度。
优选的,存储模块2中还预先保存有能够对各家养宠物产生威胁的外来动物的若干威胁动物图像,威胁动物图像关联有相应的驱逐音频,则还智慧园区智能监控系统包括:
动物识别模块16,连接存储模块2,用于提取各视频帧图像中的动物外形特征,以及提取各威胁动物图像中的危险外形特征;
第三计算模块17,分别连接动物识别模块16和音频播放模块20,用于计算各动物外形特征与各危险外形特征之间的第三相似度,并在第三相似度大于预设的第三相似阈值时生成一驱逐指令,驱逐指令与采集到视频帧图像的监控设备1所在的监控区域相关联;
音频播放模块20根据驱逐指令播放相应的驱逐音频,驱逐音频的播放优先级高于呼叫音频。
具体地,本实施例中,智慧居民园区内不可避免地会有外来动物存在,部分外来动物会对家养宠物的安全产生威胁,当家养宠物在智慧居民园区内走失后可能遇到危险。为了提升家养宠物走失后的安全性,动物识别模块16利用基于opencv的特征提取算法提取各视频帧图像中的动物外形特征,以及提取各威胁动物图像中的危险外形特征,进而利用第三计算模块17计算各动物外形特征与各危险外形特征之间的第三相似度,当第三相似度大于第三相似阈值(95%)时表明该视频帧图像中出现的动物为外来危险动物,会对走失的家养宠物安全造成严重威胁,此时生成驱逐指令,该驱逐指令与采集监控视频的监控设备1的监控区域相关联,音频播放模块20根据驱逐指令播放与威胁动物图像相关的驱逐音频,以驱逐有威胁的外来动物。
优选的,还包括危险标记模块18,连接第三计算模块17,用于根据驱逐指令对相关联的各监控区域进行标记形成危险区域。
具体地,本实施例中,危险标记模块18用于对接收到驱逐指令的音频播放模块20所在的监控区域进行标记,以提醒主人带着家养宠物散步时提高安全意识,提升了家养宠物在智慧居民园区的安全性。
优选的,危险标记模块18包括:
等级划分单元181,用于根据各危险区域内出现驱逐指令的次数和频率对各危险区域的危险等级进行划分;
颜色区分单元182,连接等级划分单元181,用于根据各危险区域的危险等级进行不同颜色标记。
具体地,本实施例中,危险等级与驱逐指令的次数和频率成正相关的关系,危险等级危险区域的颜色越深,便于对宠物主人进行警示,远离危险等级高的危险区域,提高家养宠物的安全性。
优选的,还包括诱捕模块19,连接危险标记模块18,用于根据各危险区域的危险等级在相应危险区域内设置若干诱捕装置,诱捕装置的数量与危险等级正相关。
具体地,本实施例中,诱捕装置内设有诱饵,诱捕装置可以为诱捕笼,危险区域的危险等级越高,设置的诱捕装置越多,以捕捉更多外来动物,提升家养宠物的安全性。
以上仅是本发明的优选实施方式,本发明的保护范围并不仅局限于上述实施例,凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理前提下的若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (9)

1.一种基于人工智能的智慧园区智能监控系统,应用于智慧居民园区,所述智慧居民园区内均匀分布有若干监控设备(1),所述监控设备(1)用于实时录制所述智能居民园区内的监控视频和监控音频,并分别存储为历史监控视频和历史监控音频上传至云端服务器(7),所述历史监控视频、所述历史监控音频均关联有相应的录制时刻,其特征在于,所述智慧园区智能监控系统包括:
存储模块(2),用于保存家养宠物的宠物图像、宠物音频;
筛选模块(3),连接所述存储模块(2)和所述云端服务器(7),用于对所述宠物图像进行特征提取得到个性特征,根据所述个性特征对所述历史监控视频中的各视频帧图像进行快速筛选,得到若干疑似图像;
外形识别模块(4),连接所述筛选模块(3),用于识别得到各所述疑似图像中的若干疑似动物外形特征,以及识别得到所述宠物图像中的若干宠物外形特征;
第一计算模块(5),连接所述外形识别模块(4),用于计算各所述疑似动物外形特征与各所述宠物外形特征之间的外形总体相似度,在所述外形总体相似度大于预设的第一相似度阈值时,生成音频获取指令;
音频获取模块(6),连接所述云端服务器(7)和所述第一计算模块(5),用于根据所述音频获取指令获取与所述疑似图像的录制时刻一致的历史音频数据作为疑似音频;
音频识别模块(8),连接所述音频获取模块(6)和所述存储模块(2),用于识别得到所述疑似音频中的若干疑似动物声音特征,以及识别得到所述宠物音频中的若干宠物声音特征;
第二计算模块(9),连接所述音频识别模块(8),用于计算各所述疑似动物声音特征与各所述宠物声音特征之间的声音总体相似度,在所述声音总体相似度大于预设的第二相似度阈值时,生成一定位指令;
定位模块(10),连接所述第二计算模块(9),用于根据所述定位指令对录制时刻距离当前时刻最近的采集所述疑似音频的监控设备(1)进行定位。
2.根据权利要求1所述的智慧园区智能监控系统,其特征在于,所述存储模块(2)中预先保存有所述家养宠物的初始音频和初始图像,则所述智慧园区智能监控系统还包括:
时间采集模块(11),用于采集所述家养宠物的走失时间;
天气采集模块(12),连接所述时间采集模块(11),用于采集所述走失时间内的天气变化数据;
性格采集模块(13),用于采集所述家养宠物的性格数据;
音频预测模块(14),分别连接所述时间采集模块(11)、所述天气采集模块(12)、所述性格采集模块(13)以及所述存储模块(2),用于将所述走失时间、所述天气变化数据、所述性格数据以及所述初始音频输入预设的音频变化预测模型,预测得到所述家养宠物当前时刻的所述宠物音频;
外形预测模块(15),分别连接所述时间采集模块(11)、所述天气采集模块(12)、所述性格采集模块(13)以及所述存储模块(2),用于将所述走失时间、所述天气变化数据、所述性格数据以及所述初始图像输入预设的外形变化预测模型,预测得到所述家养宠物当前时刻的所述宠物图像。
3.根据权利要求1所述的智慧园区智能监控系统,其特征在于:所述个性特征为所述家养宠物的外形显著特征,所述个性特征包括所述家养宠物的体型、体表颜色、身体覆盖物和特征身体器官。
4.根据权利要求3所述的智慧园区智能监控系统,其特征在于:所述筛选模块(3)包括:
特征提取单元(31),用于获取所述宠物图像中的所述个性特征,并提取所述个性特征中包含的标准颜色特征和标准形状特征;
视频帧提取单元(32),用于获取各所述视频帧图像中的局部特征,并提取所述局部特征中包含的视频颜色特征和视频形状特征;
筛选单元(33),连接所述特种提取单元,用于分别计算各所述视频颜色特征与所述标准颜色特征之间的颜色相似度,以及计算所述视频形状特征与所述标准形状特征之间的形状相似度,并根据所述颜色相似度和所述形状相似度对各所述视频帧图像进行筛选,得到各所述疑似图像。
5.根据权利要求1所述的智慧园区智能监控系统,其特征在于:所述智慧园区被预先划分为若干监控区域,所述智慧园区智能监控系统还包括音频播放模块(20),连接所述定位模块(10),所述定位模块(10)、所述音频播放模块(20)和监控设备(1)处于同一监控区域内,所述音频播放模块(20)用于根据所述定位指令对在被定位的监控设备(1)周围循环播放宠物主人的呼叫音频。
6.根据权利要求5所述的智慧园区智能监控系统,其特征在于:所述存储模块(2)中还预先保存有能够对各所述家养宠物产生威胁的外来动物的若干威胁动物图像,所述威胁动物图像关联有相应的驱逐音频,则所述还智慧园区智能监控系统包括:
动物识别模块(16),连接所述存储模块(2),用于提取各所述视频帧图像中的动物外形特征,以及提取各所述威胁动物图像中的危险外形特征;
第三计算模块(17),分别连接所述动物识别模块(16)和所述音频播放模块(20),用于计算各所述动物外形特征与各所述危险外形特征之间的第三相似度,并在所述第三相似度大于预设的第三相似阈值时生成一驱逐指令,所述驱逐指令与采集到所述视频帧图像的监控设备(1)所在的所述监控区域相关联;
所述音频播放模块(20)根据所述驱逐指令播放相应的所述驱逐音频,所述驱逐音频的播放优先级高于所述呼叫音频。
7.根据权利要求6所述的智慧园区智能监控系统,其特征在于:还包括危险标记模块(18),连接所述第三计算模块(17),用于根据所述驱逐指令对相关联的各所述监控区域进行标记形成危险区域。
8.根据权利要求7所述的智慧园区智能监控系统,其特征在于:所述危险标记模块(18)包括:
等级划分单元(181),用于根据各所述危险区域内出现所述驱逐指令的次数和频率对各所述危险区域的危险等级进行划分;
颜色区分单元(182),连接所述等级划分单元(181),用于根据各所述危险区域的危险等级进行不同颜色标记。
9.根据权利要求8所述的智慧园区智能监控系统,其特征在于:还包括诱捕模块(19),连接所述危险标记模块(18),用于根据各所述危险区域的危险等级在相应所述危险区域内设置若干诱捕装置,所述诱捕装置的数量与所述危险等级正相关。
CN202311499101.3A 2023-11-09 2023-11-09 一种基于人工智能的智慧园区智能监控系统 Withdrawn CN117423061A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311499101.3A CN117423061A (zh) 2023-11-09 2023-11-09 一种基于人工智能的智慧园区智能监控系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311499101.3A CN117423061A (zh) 2023-11-09 2023-11-09 一种基于人工智能的智慧园区智能监控系统

Publications (1)

Publication Number Publication Date
CN117423061A true CN117423061A (zh) 2024-01-19

Family

ID=89530075

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311499101.3A Withdrawn CN117423061A (zh) 2023-11-09 2023-11-09 一种基于人工智能的智慧园区智能监控系统

Country Status (1)

Country Link
CN (1) CN117423061A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118097923A (zh) * 2024-04-29 2024-05-28 杭州澎湃数智科技有限公司 基于人工智能的智慧园区智能监控方法及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118097923A (zh) * 2024-04-29 2024-05-28 杭州澎湃数智科技有限公司 基于人工智能的智慧园区智能监控方法及系统

Similar Documents

Publication Publication Date Title
CN103517042B (zh) 一种养老院老人危险行为监测方法
CN110751022A (zh) 基于图像识别的城市宠物活动轨迹监测方法及相关设备
CN113065474B (zh) 行为识别方法、装置及计算机设备
CN117423061A (zh) 一种基于人工智能的智慧园区智能监控系统
Nazir et al. Advances in image acquisition and processing technologies transforming animal ecological studies
CN115100512A (zh) 一种海洋经济物种的监测识别捕捞方法、系统及存储介质
CN108491807B (zh) 一种奶牛发情行为实时监测方法及系统
CN111163285A (zh) 高空抛坠物监测方法及其系统、计算机可读存储介质
CN109831634A (zh) 目标对象的密度信息确定方法及装置
CN113963298A (zh) 基于计算机视觉的野生动物识别跟踪与行为检测系统、方法、设备及存储介质
CN113269091A (zh) 一种面向智慧园区的人员轨迹分析方法、设备及介质
CN210110004U (zh) 一种基于人工智能的油田行为监控系统
US20190096066A1 (en) System and Method for Segmenting Out Multiple Body Parts
CN111652043A (zh) 对象状态识别方法、装置、图像采集设备及存储介质
CN113935395A (zh) 对象识别神经网络的训练
CN113076818A (zh) 一种宠物排泄物的识别方法、装置和计算机可读存储介质
CN113269127A (zh) 实时自动建库的人脸识别和行人重识别监控方法及系统
CN104484651B (zh) 人像动态对比方法及系统
CN112528823B (zh) 一种基于关键帧检测和语义部件分割的条斑鲨运动行为分析方法及系统
Tusubira et al. Improving in-field cassava whitefly pest surveillance with machine learning
Dong et al. Supporting animal welfare with automatic tracking of giraffes with thermal cameras
AT524715A1 (de) Verfahren und Vorrichtung zur Nachverfolgung von Tieren
CN111652128A (zh) 一种高空电力作业安全监测方法、系统和存储装置
CN116419059A (zh) 基于行为标签的自动监控方法、装置、设备及介质
Chinchuluun et al. Machine vision-based citrus yield mapping system.

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20240119