CN106375725A - 一种基于人脸识别的智能视频监控系统 - Google Patents

一种基于人脸识别的智能视频监控系统 Download PDF

Info

Publication number
CN106375725A
CN106375725A CN201610835596.6A CN201610835596A CN106375725A CN 106375725 A CN106375725 A CN 106375725A CN 201610835596 A CN201610835596 A CN 201610835596A CN 106375725 A CN106375725 A CN 106375725A
Authority
CN
China
Prior art keywords
unmanned plane
cloud computing
computing platform
video
video monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610835596.6A
Other languages
English (en)
Other versions
CN106375725B (zh
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shandong Shisen Integrated Technology Co., Ltd.
Original Assignee
朱海燕
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 朱海燕 filed Critical 朱海燕
Priority to CN201910201390.1A priority Critical patent/CN109819223A/zh
Priority to CN201610835596.6A priority patent/CN106375725B/zh
Publication of CN106375725A publication Critical patent/CN106375725A/zh
Application granted granted Critical
Publication of CN106375725B publication Critical patent/CN106375725B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/53Recognition of crowd images, e.g. recognition of crowd congestion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/44Event detection

Abstract

本发明涉及一种基于人脸识别的智能视频监控系统,包括:LED路灯灯柱上安装有视频监控装置、灯柱无线通讯模块,所述视频监控装置适于通过灯柱无线通讯模块将视频图像发送至云计算平台;所述视频监控装置适于判断所述视频图像中是否具有人体图像,若存在人体图像,则对该人体图像中的人脸部分进行聚焦。本系统及其工作方法充分利用灯柱,拓展了传统灯柱的功能,将视频监控与灯柱相结合,各灯柱拍摄的视频图像发送至位于云端的云计算平台进行分析和处理,实现防恐、防暴的目的,从而最大限度地把暴恐活动遏制在萌芽状态,遏制恐怖势力发挥重要作用。

Description

一种基于人脸识别的智能视频监控系统
技术领域
本发明涉及一种基于人脸识别的智能视频监控系统及其工作方法。
背景技术
“天网监控系统”(简称:天网系统)是利用设置在大街小巷、室内外等地的大量摄像头组成了监控网络,是公安机关打击街面犯罪的一项法宝,是城市治安的坚强后盾。
目前视频监控系统,特别是室外视频监控系统覆盖率越来越高,将视频监控系统与防恐相结合,能够通过视频图像等手段捕捉侦查线索、查货嫌疑人的犯罪证据,能够使监控摄像机主动识别、预报、揭露、证实犯罪,变被动录像为主动报警,能帮助侦查人员在海量视频资料中快速、准确的定位线索,缩短案件侦破时间、提升案件侦破效率,并可节约用于视频监控管理约 80%的警力。主动预防“恶势力”的破坏捣乱。从而最大限度地把暴恐活动遏制在萌芽状态,为确保不出事,不出大事发挥重要作用。
发明内容
本发明的目的是提供一种基于人脸识别的智能视频监控系统及其工作方法,以利用LED路灯的灯柱与视频监控相结合,提高视频监控的分布范围,尽可能的消除监控死角。
为了解决上述技术问题,本发明提供了一种基于人脸识别的智能视频监控系统,包括:分布于街区的若干LED路灯的灯柱,各灯柱上分别安装有与一控制模块相连的视频监控装置和灯柱无线通讯模块;所述视频监控装置适于通过灯柱无线通讯模块将视频图像发送至云计算平台。LED路灯的灯头通过一连杆连接在灯柱上,灯头和/或连杆适于旋转;所述视频监控装置适于判断所述视频图像中是否具有人体图像,若存在人体图像,则对该人体图像中的人脸部分进行聚焦,同时控制所述灯头和/或连杆旋转,以使所述灯头朝向该人体图像中的人体方向,以增加该人体的人脸亮度。
云计算平台中设有人脸识别系统,以将来自所述视频监控装置的视频图像中的人体图像进行人脸识别,以得到的人脸图像,同时记录该人脸图像的属性(包括获取图像的时间、地点、在所述视频图像中的位置等);然后将人脸识别得到的人脸图像及其属性传输至公安局的数据库中。
进一步,所述灯柱上还设有报警装置,以及所述视频监控装置中摄像头适于通过控制模块控制云台使其转向;所述云计算平台适于对各视频监控装置拍摄的视频图像进行识别,若判定异常,则通过控制模块控制其报警;所述云计算平台还适于设定相应视频监控装置所采集的视频图像的拌线和感兴趣区域,当有物体进入拌线和感兴趣区域时,通过摄像头进行对该物体进行跟踪拍摄。
进一步,所述灯柱上还设有用于停放无人机的停机坞,且该无人机上安装有无人机控制系统;所述无人机控制系统包括:机载处理器模块,与机载处理器模块相连的机载无线通讯模块和视频拍摄模块;所述无人机控制系统适于将拍摄的视频图像通过机载无线通讯模块与灯柱无线通讯模块通讯,以发送至云计算平台;当某一灯柱上的视频监控装置被遮挡,或故障,或丢失目标后,云计算平台启动无人机对目标进行跟踪监控。所述停机坞上设有用于无线充电的能量发送装置,无人机上安装有用于无线充电的能量接收装置,能量发送装置的电源输入端与所述电池相连,能量接收装置用于对无人机上的机载电池进行充电。
另一种可选的方案是,所述停机坞上设有激光发射器,无人机上安装有光电池,无人机停在所述停机坞上时,激光发射器发射激光至光电池上,光电池对无人机上的机载电池进行充电。
光电池可采用多晶硅薄膜太阳能电池和非晶硅薄膜太阳能电池等,优选铜铟硒薄膜电池(简称CIS)、多晶体薄膜电池、硫化镉薄膜电池、碲化镉多晶薄膜电池、有机薄膜太阳能电池等之一。
采用的无线充电装置,可以是电磁感应式、磁场共振式或无线电波式。采用无线电波式无线充电装置时,能量发送装置为微波发射装置,能量接收装置为微波接收装置。采用的无线充电标准有四种:Qi标准、Power Matters Alliance(PMA)标准、Alliance forWireless Power(A4WP)标准、iNPOFi技术。机载处理器模块控制能量接收装置的工作。所述灯柱的中上部、顶部或底部设有电池(电池可以设置在灯柱内或外侧);所述垂直式磁悬浮风力发电机和太阳能光伏组件通过风光互补系统对电池(可以是镍镉电池、镍氢电池、锂离子电池、铅蓄电池、铁锂电池,优选储能锂电池、镍氢电池)进行充电。
进一步,当一处灯柱的视频监控装置拍摄到一目标,且该目标正远离该灯柱的监控区时,所述云计算平台根据目标的位置,指派无人机对该目标进行跟踪监控;所述无人机还设有与机载处理器模块相连的路径优化系统和飞机动力系统;所述路径优化系统适于获得各楼间风的实时数据,并建立城市楼间风道网;当无人机获得目标位置后,所述路径优化系统适于根据城市楼间风道网选择无人机飞至该目标位置的最优路径;所述路径优化系统包括:与机载处理器模块相连的地图存储模块、GPS模块和用于检测无人机飞行姿态的陀螺仪;其中所述飞机动力系统包括:由机载处理器模块控制的水平动力机构和垂直动力机构;其中所述水平动力机构位于机身处,且包括:水平螺旋桨机构;所述垂直动力机构包括:对称设于左、右机翼处的垂直螺旋桨机构;所述垂直螺旋桨机构包括至少一垂直螺旋桨,用于将垂直螺旋桨机构悬挂于机翼下方的悬挂装置,所述垂直螺旋桨适于通过相应微型电机驱动转动;所述悬挂装置包括:适于使垂直螺旋桨向前或向后倾斜的第一角度微调电机,以及使垂直螺旋桨向左或向右倾斜的第二角度微调电机;其中所述第一、第二角度微调电机和微型电机均由机载处理器模块控制,以根据飞行姿态调节垂直螺旋桨的倾角和垂直螺旋桨的转速;并且,所述无人机还设有用于检测飞行过程中所遇侧风的风向传感器和风速传感器,且将当前无人机所受侧风的风向和风速数据发送至机载处理器模块;所述机载处理器模块适于根据侧风的风向和风速数据,调节垂直螺旋桨的倾角和垂直、水平螺旋桨的转速,以稳定当前飞行姿态进行视频图像采集;并且,若侧风的风向和风速有助于飞行,则降低垂直螺旋桨和/或水平螺旋桨的转速。
进一步,所述无人机的机翼上覆盖有光伏电池,所述路径优化系统还适于获得各楼间的实时光照强度,以及所述路径优化系统在选择最优路径时,若两条或两条以上的路段具有相同数据的楼间风,则将实时光照强度最大的路段选入最优路径中;所述路径优化系统还适于获得城市上空的云层数据,且在选择最优路径时,避开云层覆盖区的路段;以及所述视频拍摄模块适于拍摄建筑物全景,并通过云计算平台识别该建筑物的高度;当无人机在雨雪天气飞行时,所述路径优化系统适于选择建筑物的背风路段作为无人机在最优路径中的路径选择;并且使无人机的飞行高度低于该建筑物的高度,以遮挡雨雪。
进一步,所述机载处理器模块还与无人机内的充放电控制模块相连,且所述充放电控制模块适于将机载电池电量发送至机载处理器模块,且当机载电池电量低于一设定值时,所述机载处理器模块控制无人机停至一光照强度高的区域,以通过所述光伏电池对机载电池进行充电;或所述机载处理器模块控制无人机停至一风力较大的区域,以通过风吹动水平螺旋桨和/或垂直螺旋桨产生电能对机载电池进行充电;其中所述垂直螺旋桨适于通过第一、第二角度微调电机调节倾角。
又一方面,本发明还提供了一种所述基于人脸识别的智能视频监控系统的工作方法,通过云计算平台对各视频监控装置的视频图像中的目标进行跟踪。
进一步,通过云计算平台对各视频监控装置的视频图像中的目标进行跟踪前,需对目标进行识别,且识别方法包括:
所述云计算平台适于通过斗殴特征数据库识别视频图像中发生斗殴事件;所述斗殴特征数据库包括:人体手脚的运动频率特征值、运动方向凌乱程度特征值;若视频图像中人体手脚的运动频率和运动方向凌乱程度与特征数据库中相应特征值相匹配,则判定该视频图像中发生斗殴行为;所述云计算平台还适于检测人群聚集异常,即所述云计算平台适于提取出图像中的人群面积及人群中的人数,以计算出人均面积,若人均面积低于预设值时,判定该人群拥挤;所述云计算平台还适于设定相应视频监控装置所采集的视频图像的拌线和感兴趣区域,当有物体进入拌线和感兴趣区域时,通过摄像头进行对该物体进行跟踪拍摄;所述云计算平台还适于计算视频画面中的运动轨迹,以判定视频画面中是否出现逆向行进;所述云计算平台还适于记录静止视频图像中各特征,当该视频图像中出现其他特征时,对上述特征进行识别。
进一步,所述灯柱上还设有用于停放无人机的停机坞,且该无人机上安装有无人机控制系统;所述无人机控制系统包括:机载处理器模块,与机载处理器模块相连的机载无线通讯模块和视频拍摄模块;所述无人机控制系统适于将拍摄的视频图像通过机载无线通讯模块与灯柱无线通讯模块通讯,以发送至云计算平台;当某一灯柱上的视频监控装置被遮挡,或故障,或丢失目标后,云计算平台启动无人机对目标进行跟踪监控。
进一步,当一处灯柱的视频监控装置拍摄到一目标,且该目标正远离该灯柱的监控区时,所述云计算平台根据目标的位置,指派无人机对该目标进行跟踪监控;无人机通过路径优化系统对无人机飞至该目标位置的若干路径进行选择,以获得最优路径。
本发明的有益效果是,本基于人脸识别的智能视频监控系统及其工作方法充分利用LED路灯灯柱,拓展了传统灯柱的功能,将视频监控与灯柱相结合,各灯柱拍摄的视频图像发送至位于云端的云计算平台进行分析和处理,实现防恐、防暴的目的,从而最大限度地把暴恐活动遏制在萌芽状态,遏制恐怖势力发挥重要作用。
附图说明
下面结合附图和实施例对本发明进一步说明。
图1是本发明的基于人脸识别的智能视频监控系统的原理框图;
图2是本发明LED路灯灯柱的结构示意图;
图3是本发明的无人机控制原理框图;
图4是本发明的无人机的结构示意图;
图5是本发明的路径优化系统所规划的无人机飞行轨迹示意图。
图中:视频监控装置1、停机坞2、无人机3、水平动力机构31、水平螺旋桨311、垂直动力机构32、垂直螺旋桨321、微型电机322、机翼333、悬挂装置34、第一角度微调电机341、第二角度微调电机342、机身35、光伏电池36。
具体实施方式
现在结合附图对本发明作进一步详细的说明。这些附图均为简化的示意图,仅以示意方式说明本发明的基本结构,因此其仅显示与本发明有关的构成。
实施例1
如图1至图5所示,本发明的一种基于人脸识别的智能视频监控系统,包括:分布于街区的若干LED路灯的灯柱,各灯柱上分别安装有视频监控装置1;以及灯柱上还设有灯柱无线通讯模块;所述视频监控装置、灯柱无线通讯模块与一控制模块相连;所述视频监控装置适于通过灯柱无线通讯模块将视频图像发送至云计算平台。
所述灯柱上还设有报警装置,以及所述视频监控装置中摄像头适于通过控制模块控制云台使其转向;所述云计算平台适于对各视频监控装置拍摄的视频图像进行识别,若判定异常,可以通过控制模块控制其报警,例如但不限于若云计算平台通过视频图像识别判断摄像头被恶意遮挡后,通过控制模块控制报警装置进行报警;所述云计算平台还适于设定相应视频监控装置所采集的视频图像的拌线和感兴趣区域,当有物体进入拌线和感兴趣区域时,通过摄像头进行对该物体进行跟踪拍摄。
进一步优选的实施方式,LED路灯的灯头固定在第一电机的转轴上,该第一电机的壳体固定在一连杆的顶端,和/或,连杆的底端固定在第二电机的转轴上,第二电机的壳体固定在灯柱上,以使灯头和/或连杆适于旋转;第一、第二电机(优选步进电机或伺服电机)由所述视频监控装置中的处理器控制。
所述视频监控装置适于判断所述视频图像中是否具有人体图像,若存在人体图像,则对该人体图像中的人脸部分进行聚焦,同时控制所述灯头和/或连杆旋转,以使所述灯头朝向该人体图像中的人体方向,以增加该人体的人脸亮度。
所述灯柱上还设有用于停放无人机的停机坞,且该无人机上安装有无人机控制系统;所述无人机控制系统包括:机载处理器模块,与机载处理器模块相连的机载无线通讯模块和视频拍摄模块;所述无人机控制系统适于将拍摄的视频图像通过机载无线通讯模块与灯柱无线通讯模块通讯,以发送至云计算平台;当某一灯柱上的视频监控装置被遮挡,或故障,或丢失目标后,云计算平台启动无人机对目标进行跟踪监控。
所述停机坞的上盖在无人机垂直起降时可以打开;具体的,若无人机飞回,则停机坞的上盖打开,待无人机停机后,上盖再闭合;所述上盖的一端设有转轴,该转轴由一驱动电机带动转动,所述驱动电机由控制模块控制,当云计算平台发出无人机飞行指令后,所述控制模块控制控制驱动电机使上盖打开。所述控制模块例如但不限于采用嵌入式处理器及电机驱动电路构成。
当一处灯柱的视频监控装置拍摄到一目标,且该目标正远离该灯柱的监控区时,所述云计算平台根据目标的位置,指派无人机对该目标进行跟踪监控;所述无人机还设有与机载处理器模块相连的路径优化系统和飞机动力系统;所述路径优化系统适于获得各楼间风的实时数据,并建立城市楼间风道网;当无人机获得目标位置后,所述路径优化系统适于根据城市楼间风道网选择无人机飞至该目标位置的最优路径。所述云计算平台获得目标位置的方法例如但不限于通过该拍摄目标的安装视频监控装置的灯柱的具体位置进行大体定位,并根据视频监控装置拍摄的角度或距离进行进一步精确定位。
在实际中并不需要每个灯柱均配备无人机,可以在设定一个区域配置一架无人机,该无人机适于跟踪本区域视频监控装置所拍摄的目标。
通过路径优化系统获得无人机飞往目标位置的最优路径,充分利用各楼间风道中楼间风的风向,提高了飞行速度,降低了飞行能耗。
具体的,各楼间风的实时数据例如但不限于通过分布于各高楼间的风道数据采集节点获得,所述风道数据采集节点包括:安装于楼宇间的用于检测楼间风风速的风速传感器和楼间风风向的风向传感器,并且与该风速传感器和风向传感器相连的节点处理器和无线模块,即将风速、风向数据通过无线方式发送至无人机,以通过路径优化系统进行数据分析,进而建立城市楼间风道。
无人机在获得飞行目标位置后,分析飞行路径所经历的城市相应楼间风道,并规划出最合理的飞行路线,即为最优路径。
具体的,城市楼间风道网以各楼间风道的交点为节点,并且根据相邻两节点之间的楼间风道的风速、风向数据进行路径选择,即选取风向与飞行路径相匹配的相应楼间风道作为最优路径的选择路段,使无人机尽可能的在顺风的情况下到达目标位置,以达到提高飞行速度,降低燃料消耗的目的;或者选择虽逆风、但风速小、路程短的路段。具体可以通过设定相应限定值,例如逆风状态时,将具体的风速级别进行数字化,如1级、2级等,路程也可以设置10米、20米或30米等,例如设定路段选择条件为不大于风速2级,路程不超过20米时,可以选择该路段,则在最优路径规划过程中,若某一路段满足上述条件,则可以选择该路段加入至最优路径。
如图3所示,获得无人机从起始位置A到目标位置E的多条路径,且根据各路径所相关的楼间风道的风向对路径进行筛选,使无人机尽量在顺风的楼间风道中飞行,例如A到B、B到C、C到D、D到E,且各空心箭头分别表示相应楼间风道的风向。
优选的,所述路径优化系统包括:与机载处理器模块相连的地图存储模块、GPS模块和用于检测无人机飞行姿态的陀螺仪;具体的,所述无人机内的机载处理器模块还连接有地图存储模块,机载处理器模块适于将接收的最优路径与地图信息相匹配,以使无人机按照最优路径进行飞行,在飞行过程中通过GPS模块和陀螺仪对飞行路径、飞行姿态进行修正,以提高控制拍摄的稳定性。
其中所述飞机动力系统包括:由机载处理器模块控制的水平动力机构31和垂直动力机构32;其中所述水平动力机构31位于机身35处,且包括:水平螺旋桨机构;所述垂直动力机构32包括:对称设于左、右机翼33处的垂直螺旋桨321机构;所述垂直螺旋桨321机构包括至少一垂直螺旋桨321,用于将垂直螺旋桨321机构悬挂于机翼33下方的悬挂装置34,所述垂直螺旋桨321适于通过相应微型电机322驱动转动;所述悬挂装置34包括:适于使垂直螺旋桨321向前或向后倾斜的第一角度微调电机341(如图5中F1方向),以及使垂直螺旋桨321向左或向右倾斜的第二角度微调电机342(如图5中F2方向);其中所述第一、第二角度微调电机和微型电机322均由机载处理器模块控制,以根据飞行姿态调节垂直螺旋桨321的倾角和垂直螺旋桨321的转速,适合高空悬停或者保持相应飞行姿态控制,进而提高图像拍摄清晰度。
图5中一垂直螺旋桨321包括两个垂直螺旋桨321,且前后对称设置,因此,也同样包括两个第二角度微调电机342,该两个第二角度微调电机342由机载处理器模块控制适于同步转动。
所述无人机还设有用于检测飞行过程中所遇侧风的风向传感器和风速传感器,所述风向传感器和风速传感器适于将当前无人机所受侧风的风向和风速数据发送至机载处理器模块;所述机载处理器模块适于根据侧风的风向和风速数据,调节垂直螺旋桨321的倾角和垂直、水平螺旋桨的转速,以稳定当前飞行姿态,进而获得稳定的视频图像。
若无人机在城市中楼间飞行,则侧风属于楼间风的一种。
具体的,所述风向传感器和风速传感器用于测得无人机在飞行过程中实际获得的侧风的风向和风速数据,进而通过垂直螺旋桨321的倾角,即前或后,左或右调节,并结合垂直、水平螺旋桨的转速,以起到稳定飞行姿态的效果,并且若侧风有利于飞行,则还可以适当降低水平螺旋桨的转速,以节约电能。
例如无人机从东往西飞行,若遇到西南方向的侧风,则机载处理器模块适于调节垂直螺旋桨321的倾角,即向西南方向倾斜,以抵消西南方向的侧风对无人机飞行路线的影响;并且,根据风速大小,改变垂直螺旋桨321的转速。无人机保持稳定的悬停姿态,以近距离贴近高层,实现对可以楼层的监控,降低无人机碰撞几率。
其中,所述机载处理器模块例如但不限于采用具有DSP和ARM的双核架构的处理器,也可以采用DSP处理器和ARM处理器协同工作的方式。
优选的,所述无人机的机翼上覆盖有光伏电池,所述路径优化系统还适于获得各楼间的实时光照强度,以及所述路径优化系统在选择最优路径时,若两条或两条以上的路段具有相同数据的楼间风,则将实时光照强度最大的路段选入最优路径中。
进一步,所述路径优化系统还适于获得城市上空的云层数据,且在选择最优路径时,避开云层覆盖区的路段;以及所述视频拍摄模块适于拍摄建筑物全景,并通过云计算平台识别该建筑物的高度;当无人机在雨雪天气飞行时,所述路径优化系统适于选择建筑物的背风路段作为无人机在最优路径中的路径选择;并且使无人机的飞行高度低于该建筑物的高度,以遮挡雨雪。
优选的,所述机载处理器模块还与无人机内的充放电控制模块相连,且所述充放电控制模块适于将机载电池电量发送至机载处理器模块,且当机载电池电量低于一设定值时,所述机载处理器模块控制无人机停至一光照强度高的区域,以通过所述光伏电池对机载电池进行充电;或所述机载处理器模块控制无人机停至一风力较大的区域,以通过风吹动水平螺旋桨和/或垂直螺旋桨产生电能对机载电池进行充电;其中所述垂直螺旋桨适于通过第一、第二角度微调电机调节倾角,以获得最大风力,提高风力发电效率。具体的,所述充放电控制模块适于将风力和太阳能所产生电能进行互补后对机载电池进行充电,所述充放电控制模块可以通过现有技术的相应风光互补模块实现。
实施例2
在实施例1基础上,上述基于人脸识别的智能视频监控系统的工作方法,即通过云计算平台对各视频监控装置的视频图像中的目标进行跟踪。
通过云计算平台对各视频监控装置的视频图像中的目标进行跟踪前,需对目标进行识别,对目标进行图像识别的方法可以通过关于图像处理的现有技术来实现。优选的,对于识别,本实施例中还提供了一种优选的识别方法,即
所述云计算平台适于通过斗殴特征数据库识别视频图像中发生斗殴事件;
所述斗殴特征数据库包括:人体手脚的运动频率特征值、运动方向凌乱程度特征值;
若视频图像中人体手脚的运动频率和运动方向凌乱程度与特征数据库中相应特征值相匹配,则判定该视频图像中发生斗殴行为;
具体的,通过现有技术中的视频识别技术识别出视频图像中的人的手脚,运动频率特征值具体为手脚的运动频率,例如一分钟摆动次数;运动方向凌乱程度特征值具体为手脚摆动的轨迹和幅度,例如轨迹没有规律且幅度偏大,则判断发生斗殴行为。
优选的,还可以通过现有技术中的视频识别技术识别出视频图像中的人的脸部、胸部和腿部,并且根据手脚与脸部、胸部和腿部的碰撞出现率判断是否存在斗殴行为。
所述云计算平台还适于检测人群聚集异常,即所述云计算平台适于提取出图像中的人群面积及人群中的人数,以计算出人均面积,若人均面积低于预设值时,判定该人群拥挤。
所述云计算平台还适于设定相应视频监控装置所采集的视频图像的拌线和感兴趣区域,当有物体进入拌线和感兴趣区域时,通过摄像头进行对该物体进行跟踪拍摄。
所述云计算平台还适于计算视频画面中的运动轨迹,以判定视频画面中是否出现逆向行进;具体的,云计算平台根据道路的箭头指示判断视频画面中的人是否逆行,或者根据交通规则靠右行驶判断该路段的正常行驶方向,再通过视频画面中的人的行驶轨迹判断人是否逆行。
所述云计算平台还适于记录静止视频图像中各特征,当该视频图像中出现其他特征时,对上述特征进行识别;具体的,记录静止视频图像中各特征具体为视频图像画面中的物体,摆放位置等,若其他物体进入视频画面中时,云计算平台快速捕捉,对其进行识别和标定,提醒警示,必要时发出报警。
所述灯柱上还设有用于停放无人机的停机坞,且该无人机上安装有无人机控制系统;所述无人机控制系统包括:机载处理器模块,与机载处理器模块相连的机载无线通讯模块和视频拍摄模块;所述无人机控制系统适于将拍摄的视频图像通过机载无线通讯模块与灯柱无线通讯模块通讯,以发送至云计算平台;当某一灯柱上的视频监控装置被遮挡,或故障,或丢失目标后,云计算平台启动无人机对目标进行跟踪监控。
当一处灯柱的视频监控装置拍摄到一目标,且该目标正远离该灯柱的监控区时,所述云计算平台根据目标的位置,指派无人机对该目标进行跟踪监控;无人机通过路径优化系统对无人机飞至该目标位置的若干路径进行选择,以获得最优路径。
进一步,无人机通过路径优化系统对无人机飞至目标位置的若干路径进行选择,以获得最优路径的方法包括:
获得各楼间风的实时数据,并建立城市楼间风道网;当无人机获得目标位置后,无人机内的机载处理器模块通过路径优化系统适于根据城市楼间风道网选择无人机飞至该目标位置的最优路径。
所述无人机的机翼上覆盖有光伏电池,所述路径优化系统还适于获得各楼间的实时光照强度;所述路径优化系统在选择最优路径时,若两条或两条以上的路段具有相同数据的楼间风,则将实时光照强度最大的路段选入最优路径中。其中实时光照数据可以通过在风道数据采集节点内放置光敏传感器,以获得楼间的实时光照强度。
所述路径优化系统还适于获得城市上空的云层数据,且在选择最优路径时,避开云层覆盖区的路段;其中,所述云层数据适于通过气象卫星获得,或通过当地的多个气象观察哨实时获取。
所述机载处理器模块适于根据建筑物全景识别该建筑物的高度;当无人机在雨雪天气飞行时,所述路径优化系统适于选择建筑物的背风路段作为无人机在最优路径中的路径选择;并且使无人机的飞行高度低于该建筑物的高度,以遮挡雨雪,可以提高拍摄效果和使图像稳定成像。
所述工作方法还包括:根据飞行姿态调节垂直螺旋桨321的倾角和转速的方法包括:所述机载处理器模块适于控制第一角度微调电机341带动垂直螺旋桨321向前倾斜,同时控制水平螺旋桨机构中水平螺旋桨工作,以缩短无人机到达设定的巡航高度的时间,且在无人机在达到巡航高度的同时,满足其巡航速度。
所述无人机还设有用于检测飞行过程中所遇侧风的风向传感器和风速传感器,所述风向传感器和风速传感器适于将当前无人机所受侧风的风向和风速数据发送至机载处理器模块;所述机载处理器模块适于根据侧风的风向和风速数据,调节垂直螺旋桨321的倾角和垂直、水平螺旋桨的转速,以稳定当前飞行姿态进行视频图像采集。
具体的,所述机载处理器模块适于根据侧风的风向和风速数据,调节垂直螺旋桨321的倾角和垂直、水平螺旋桨的转速,以稳定当前飞行姿态进行视频图像采集的方法包括:若无人机在空中悬停,则水平螺旋桨停止工作,且垂直螺旋桨321工作,所述机载处理器模块适于根据侧风的风向和风速数据,改变垂直螺旋桨321的倾角和转速,以稳定悬停姿态;若无人机巡航,所述机载处理器模块适于根据侧风的风向和风速数据,改变垂直螺旋桨321的倾角和转速,以保持巡航高度。
具体实施过程:若无人机在控制悬停,若遇到从东往西的侧风,则垂直螺旋桨321的倾角对应侧风方向,以抵消侧风对无人机飞行姿态的影响,并且根据侧风的风速调节垂直螺旋桨321的转速。
所述机载处理器模块适于判断侧风的风向和风速是否有助于飞行,若有助于飞行,则降低垂直螺旋桨321和/或水平螺旋桨311的转速,节约电能,提高无人机的巡航里程。
以上述依据本发明的理想实施例为启示,通过上述的说明内容,相关工作人员完全可以在不偏离本项发明技术思想的范围内,进行多样的变更以及修改。本项发明的技术性范围并不局限于说明书上的内容,必须要根据权利要求范围来确定其技术性范围。

Claims (10)

1.一种基于人脸识别的智能视频监控系统,其特征在于,包括:LED路灯,LED路灯的灯柱上分别安装有与一控制模块相连的视频监控装置和灯柱无线通讯模块;
所述视频监控装置适于通过灯柱无线通讯模块将视频图像发送至云计算平台;LED路灯的灯头通过一连杆连接在灯柱上,连杆适于旋转;
所述视频监控装置适于判断所述视频图像中是否具有人体图像,若存在人体图像,则对该人体图像中的人脸部分进行聚焦,同时控制所述连杆旋转,以使所述灯头朝向该人体图像中的人体方向,以增加该人体的人脸亮度。
2.根据权利要求1所述的基于人脸识别的智能视频监控系统,其特征在于,云计算平台中设有人脸识别系统,以将来自所述视频监控装置的视频图像中的人体图像进行人脸识别;
所述灯柱上还设有报警装置,以及所述视频监控装置中摄像头适于通过控制模块控制云台使其转向;
所述云计算平台适于对各视频监控装置拍摄的视频图像进行识别,若判定异常,则通过控制模块控制其报警;
所述云计算平台还适于设定相应视频监控装置所采集的视频图像的拌线和感兴趣区域,当有物体进入拌线和感兴趣区域时,通过摄像头进行对该物体进行跟踪拍摄。
3.根据权利要求2所述的基于人脸识别的智能视频监控系统,其特征在于,所述灯柱上还设有用于停放无人机的停机坞,且该无人机上安装有无人机控制系统;
所述无人机控制系统包括:机载处理器模块,与机载处理器模块相连的机载无线通讯模块和视频拍摄模块;
所述无人机控制系统适于将拍摄的视频图像通过机载无线通讯模块与灯柱无线通讯模块通讯,以发送至云计算平台;
当某一灯柱上的视频监控装置被遮挡,或故障,或丢失目标后,云计算平台启动无人机对目标进行跟踪监控;
所述停机坞上设有激光发射器,无人机上安装有光电池,无人机停在所述停机坞上时,激光发射器发射激光至光电池上,光电池对无人机上的机载电池进行充电。
4.根据权利要求3所述的基于人脸识别的智能视频监控系统,其特征在于,
当一处灯柱的视频监控装置拍摄到一目标,且该目标正远离该灯柱的监控区时,所述云计算平台根据目标的位置,指派无人机对该目标进行跟踪监控;
所述无人机还设有与机载处理器模块相连的路径优化系统和飞机动力系统;
所述路径优化系统适于获得各楼间风的实时数据,并建立城市楼间风道网;当无人机获得目标位置后,所述路径优化系统适于根据城市楼间风道网选择无人机飞至该目标位置的最优路径;
所述路径优化系统包括:与机载处理器模块相连的地图存储模块、GPS模块和用于检测无人机飞行姿态的陀螺仪;其中
所述飞机动力系统包括:由机载处理器模块控制的水平动力机构和垂直动力机构;其中
所述水平动力机构位于机身处,且包括:水平螺旋桨机构;
所述垂直动力机构包括:对称设于左、右机翼处的垂直螺旋桨机构;
所述垂直螺旋桨机构包括至少一垂直螺旋桨,用于将垂直螺旋桨机构悬挂于机翼下方的悬挂装置,所述垂直螺旋桨适于通过相应微型电机驱动转动;
所述悬挂装置包括:适于使垂直螺旋桨向前或向后倾斜的第一角度微调电机,以及使垂直螺旋桨向左或向右倾斜的第二角度微调电机;其中
所述第一、第二角度微调电机和微型电机均由机载处理器模块控制,以根据飞行姿态调节垂直螺旋桨的倾角和垂直螺旋桨的转速;
并且,所述无人机还设有用于检测飞行过程中所遇侧风的风向传感器和风速传感器,且将当前无人机所受侧风的风向和风速数据发送至机载处理器模块;
所述机载处理器模块适于根据侧风的风向和风速数据,调节垂直螺旋桨的倾角和垂直、水平螺旋桨的转速,以稳定当前飞行姿态进行视频图像采集;
并且,若侧风的风向和风速有助于飞行,则降低垂直螺旋桨和/或水平螺旋桨的转速。
5.根据权利要求4所述的系统,其特征在于,所述无人机的机翼上覆盖有光伏电池,所述路径优化系统还适于获得各楼间的实时光照强度;
所述路径优化系统在选择最优路径时,若两条或两条以上的路段具有相同数据的楼间风,则将实时光照强度最大的路段选入最优路径中;
所述路径优化系统还适于获得城市上空的云层数据,且在选择最优路径时,避开云层覆盖区的路段;以及
所述视频拍摄模块适于拍摄建筑物全景,并通过云计算平台识别该建筑物的高度;
当无人机在雨雪天气飞行时,所述路径优化系统适于选择建筑物的背风路段作为无人机在最优路径中的路径选择,并且使无人机的飞行高度低于该建筑物的高度,以遮挡雨雪。
6.根据权利要求5所述的系统,其特征在于,所述机载处理器模块还与无人机内的充放电控制模块相连,且所述充放电控制模块适于将机载电池电量发送至机载处理器模块,且当机载电池电量低于一设定值时,所述机载处理器模块控制无人机停至一光照强度高的区域,以通过所述光伏电池对机载电池进行充电;或所述机载处理器模块控制无人机停至一风力较大的区域,以通过风吹动水平螺旋桨和/或垂直螺旋桨产生电能对机载电池进行充电;其中
所述垂直螺旋桨适于通过第一、第二角度微调电机调节倾角。
7.一种如权利要求1所述的基于人脸识别的智能视频监控系统的工作方法,其特征在于,
通过云计算平台对各视频监控装置的视频图像中的目标进行跟踪。
8.根据权利要求7所述的工作方法,其特征在于,
通过云计算平台对各视频监控装置的视频图像中的目标进行跟踪前,需对目标进行识别,且识别方法包括:
所述云计算平台适于通过斗殴特征数据库识别视频图像中发生斗殴事件;
所述斗殴特征数据库包括:人体手脚的运动频率特征值、运动方向凌乱程度特征值;
若视频图像中人体手脚的运动频率和运动方向凌乱程度与特征数据库中相应特征值相匹配,则判定该视频图像中发生斗殴行为;
所述云计算平台还适于检测人群聚集异常,即
所述云计算平台适于提取出图像中的人群面积及人群中的人数,以计算出人均面积,若人均面积低于预设值时,判定该人群拥挤;
所述云计算平台还适于设定相应视频监控装置所采集的视频图像的拌线和感兴趣区域,当有物体进入拌线和感兴趣区域时,通过摄像头进行对该物体进行跟踪拍摄;
所述云计算平台还适于计算视频画面中的运动轨迹,以判定视频画面中是否出现逆向行进;
所述云计算平台还适于记录静止视频图像中各特征,当该视频图像中出现其他特征时,对上述特征进行识别。
9.根据权利要求8所述的工作方法,其特征在于,所述灯柱上还设有用于停放无人机的停机坞,且该无人机上安装有无人机控制系统;
所述无人机控制系统包括:机载处理器模块,与机载处理器模块相连的机载无线通讯模块和视频拍摄模块;
所述无人机控制系统适于将拍摄的视频图像通过机载无线通讯模块与灯柱无线通讯模块通讯,以发送至云计算平台;
当某一灯柱上的视频监控装置被遮挡,或故障,或丢失目标后,云计算平台启动无人机对目标进行跟踪监控。
10.根据权利要求9所述的工作方法,其特征在于,
当一处灯柱的视频监控装置拍摄到一目标,且该目标正远离该灯柱的监控区时,所述云计算平台根据目标的位置,指派无人机对该目标进行跟踪监控;
无人机通过路径优化系统对无人机飞至该目标位置的若干路径进行选择,以获得最优路径。
CN201610835596.6A 2016-09-20 2016-09-20 一种基于人脸识别的智能视频监控系统 Active CN106375725B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910201390.1A CN109819223A (zh) 2016-09-20 2016-09-20 一种无人机及基于人脸识别的智能视频监控系统
CN201610835596.6A CN106375725B (zh) 2016-09-20 2016-09-20 一种基于人脸识别的智能视频监控系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610835596.6A CN106375725B (zh) 2016-09-20 2016-09-20 一种基于人脸识别的智能视频监控系统

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910201390.1A Division CN109819223A (zh) 2016-09-20 2016-09-20 一种无人机及基于人脸识别的智能视频监控系统

Publications (2)

Publication Number Publication Date
CN106375725A true CN106375725A (zh) 2017-02-01
CN106375725B CN106375725B (zh) 2019-04-26

Family

ID=57897752

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910201390.1A Withdrawn CN109819223A (zh) 2016-09-20 2016-09-20 一种无人机及基于人脸识别的智能视频监控系统
CN201610835596.6A Active CN106375725B (zh) 2016-09-20 2016-09-20 一种基于人脸识别的智能视频监控系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910201390.1A Withdrawn CN109819223A (zh) 2016-09-20 2016-09-20 一种无人机及基于人脸识别的智能视频监控系统

Country Status (1)

Country Link
CN (2) CN109819223A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107126014A (zh) * 2017-05-02 2017-09-05 文博创造展览展示(天津)有限公司 一种自防御展柜系统
CN107231730A (zh) * 2017-07-27 2017-10-03 佛山市维瑞克科技有限公司 一种智能化路灯
CN108806181A (zh) * 2017-05-02 2018-11-13 刘玥 一种金融机构报警救助装置
CN109218667A (zh) * 2018-09-08 2019-01-15 合刃科技(武汉)有限公司 一种用公共场所安全预警系统和方法
CN109362228A (zh) * 2017-10-31 2019-02-19 深圳市大疆创新科技有限公司 无人飞行器、无人飞行器底座及无人飞行器系统
CN112406581A (zh) * 2020-11-12 2021-02-26 重庆凯创荣智能科技有限公司 一种无人机充电感应及充电扣合结构及其使用方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112319807B (zh) * 2020-11-12 2022-05-10 广东联合金地不动产评估勘测设计有限公司 一种基于智能设备的无人飞行器操控平台的操控方法
CN112560751A (zh) * 2020-12-24 2021-03-26 湘潭大学 一种阳台高空坠物风险检测方法及系统
CN113342048B (zh) * 2021-06-23 2022-04-19 广州泽衡信息科技有限公司 一种基于智慧杆的无人机配送快递的方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102547244A (zh) * 2012-01-17 2012-07-04 深圳辉锐天眼科技有限公司 视频监控方法及系统
US20130300850A1 (en) * 2012-04-12 2013-11-14 Thomas Nathan Millikan Viewing and Processing Multispectral Images
CN104994335A (zh) * 2015-06-11 2015-10-21 广东欧珀移动通信有限公司 一种报警的方法及终端
CN105840996A (zh) * 2016-04-02 2016-08-10 伍海平 多功能led路灯

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9489839B2 (en) * 2012-08-06 2016-11-08 Cloudparc, Inc. Tracking a vehicle using an unmanned aerial vehicle
CN104168455B (zh) * 2014-08-08 2018-03-09 北京航天控制仪器研究所 一种空基大场景摄像系统及方法
CN104898692A (zh) * 2015-05-04 2015-09-09 中山智芯电子科技有限公司 一种无人机管理系统
CN105752346A (zh) * 2016-05-02 2016-07-13 天津北洋通航航空技术有限公司 太阳能无人机
CN106375713B (zh) * 2016-08-30 2019-05-14 浙江东鼎电子股份有限公司 一种视频监控智能化天网系统及其工作方法
CN106375640B (zh) * 2016-08-30 2019-08-16 广东奎创科技股份有限公司 基于多功能智慧灯柱的反恐智能化监控系统及工作方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102547244A (zh) * 2012-01-17 2012-07-04 深圳辉锐天眼科技有限公司 视频监控方法及系统
US20130300850A1 (en) * 2012-04-12 2013-11-14 Thomas Nathan Millikan Viewing and Processing Multispectral Images
CN104994335A (zh) * 2015-06-11 2015-10-21 广东欧珀移动通信有限公司 一种报警的方法及终端
CN105840996A (zh) * 2016-04-02 2016-08-10 伍海平 多功能led路灯

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107126014A (zh) * 2017-05-02 2017-09-05 文博创造展览展示(天津)有限公司 一种自防御展柜系统
CN108806181A (zh) * 2017-05-02 2018-11-13 刘玥 一种金融机构报警救助装置
CN107231730A (zh) * 2017-07-27 2017-10-03 佛山市维瑞克科技有限公司 一种智能化路灯
CN109362228A (zh) * 2017-10-31 2019-02-19 深圳市大疆创新科技有限公司 无人飞行器、无人飞行器底座及无人飞行器系统
CN109218667A (zh) * 2018-09-08 2019-01-15 合刃科技(武汉)有限公司 一种用公共场所安全预警系统和方法
CN112406581A (zh) * 2020-11-12 2021-02-26 重庆凯创荣智能科技有限公司 一种无人机充电感应及充电扣合结构及其使用方法

Also Published As

Publication number Publication date
CN106375725B (zh) 2019-04-26
CN109819223A (zh) 2019-05-28

Similar Documents

Publication Publication Date Title
CN106412502B (zh) 基于人脸识别的视频监控智能化天网系统及其工作方法
CN106375725B (zh) 一种基于人脸识别的智能视频监控系统
CN106375640B (zh) 基于多功能智慧灯柱的反恐智能化监控系统及工作方法
CN106454228A (zh) 一种基于人脸识别的视频监控智能化天网系统
CN106375713A (zh) 一种视频监控智能化天网系统及其工作方法
CN106384097B (zh) 基于人脸识别的智能视频监控系统
CN105159318B (zh) 生态文明监测装置及系统
CN204808049U (zh) 一种具有无人机的通信系统
CN205574268U (zh) 一种用于高压输电线路巡检的多机协同四旋翼飞行器系统
CN105262986B (zh) 野生猕猴追踪监测装置及系统
US20210269174A1 (en) Drone docking port and method of use
CN113534829B (zh) 一种基于边缘计算的无人机日常巡逻检测系统
CN105559228A (zh) 一种智能骑行头盔
CN106647806A (zh) 一种社区安防无人机
CN107547792B (zh) 一种车载移动影像采集系统
CN203675333U (zh) 一种基于多旋翼无人飞行器的无线网络优化及查勘系统
CN107526362A (zh) 无人机的飞行控制系统及其工作方法
CN206171831U (zh) 交通智能无人机
CN204846371U (zh) 一种可避障的无人机系统
CN110660238B (zh) 一种基于无人机投影的高危地段交通指挥台及其指挥方法
CN106143913B (zh) 垂直起飞供电系统、固定翼无人机及工作方法
KR102044225B1 (ko) Cctv 드론이 헤드부에 구비된 방범 치안용 가로등
CN113433963B (zh) 一种针对磁悬浮轨道巡检的无人机多平台系统及方法
CN206871336U (zh) 一种用于监控的太阳能供能飞艇
CN213735527U (zh) 一种基于停机坪集群的无人机巡查装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20190320

Address after: 276800 Room 545, Block C, Xingye Century City, Beijing Road, Rizhao City, Shandong Province

Applicant after: Shandong Shisen Integrated Technology Co., Ltd.

Address before: 213000 26-, Ding -701, long Jin Road, Xinbei District, Changzhou, Jiangsu.

Applicant before: Zhu Haiyan

GR01 Patent grant
GR01 Patent grant