CN104268534B - 触发式视频监控的智能箱控制系统及其控制方法 - Google Patents

触发式视频监控的智能箱控制系统及其控制方法 Download PDF

Info

Publication number
CN104268534B
CN104268534B CN201410529560.6A CN201410529560A CN104268534B CN 104268534 B CN104268534 B CN 104268534B CN 201410529560 A CN201410529560 A CN 201410529560A CN 104268534 B CN104268534 B CN 104268534B
Authority
CN
China
Prior art keywords
triggering
trigger
video
feature
intelligent box
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410529560.6A
Other languages
English (en)
Other versions
CN104268534A (zh
Inventor
郭志波
林少帅
孙前双
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yangzhou University
Original Assignee
Yangzhou University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yangzhou University filed Critical Yangzhou University
Priority to CN201410529560.6A priority Critical patent/CN104268534B/zh
Publication of CN104268534A publication Critical patent/CN104268534A/zh
Application granted granted Critical
Publication of CN104268534B publication Critical patent/CN104268534B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/169Holistic features and representations, i.e. based on the facial image taken as a whole
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position

Abstract

本发明公开了视频监控领域的一种触发式视频监控的智能箱控制系统及其控制方法,控制系统包括用以存放物品的箱体,在箱体外部装有摄像头、人体红外探测器、感光器、LED灯以及操作面板,操作面板包括触摸屏、射频卡读卡器以及按键;箱体内部装有控制器、蓄电池、振动传感器以及存储器,其中振动传感器应安置在柜体内侧,摄像头安装在箱体上方,存储视频图像的存储器安放在箱体内部,振动传感器、人体红外探测器、感光器、操作面板的输出端均连接在控制器的输入端,控制器控制LED灯的亮灭;控制方法,包括以下步骤:触发‑录像‑视频保存;本发明通过高精度人脸识别进一步提高了智能箱使用时的安全性,可用于公共储物箱中。

Description

触发式视频监控的智能箱控制系统及其控制方法
技术领域
本发明涉及一种公共储物箱,特别涉及一种视频监控储物箱。
背景技术
随着公共智能箱的普及,如何更好地保护公共财产的安全成为行业内关注的热点。目前大多数公共智能箱的视频监控系统采用全程实时录像的方式,该方式录像视频占用容量较大,并且没有清晰的人脸照片,导致在事后查证时需要花费较多的时间去找寻嫌疑人。因此针对这个问题需要进一步研究和改进。
发明内容
本发明的目的是提供一种触发式视频监控的智能箱及其控制方法,提高智能箱的安全性。
本发明的目的是这样实现的:一种触发式视频监控的智能箱控制系统及其控制方法,所述控制系统包括用以存放物品的箱体,在箱体外部装有摄像头、人体红外探测器、感光器、LED灯以及操作面板,所述操作面板包括触摸屏、射频卡读卡器以及按键;箱体内部装有控制器、蓄电池、振动传感器以及存储器,其中振动传感器应安置在柜体内侧,所述摄像头安装在箱体上方,存储视频图像的存储器安放在箱体内部,所述振动传感器、人体红外探测器、感光器、操作面板的输出端均连接在控制器的输入端,控制器控制LED灯的亮灭;
所述控制方法,包括以下步骤:
步骤1)触发,所述触发包括操作触发、振动触发和长时间驻足触发;
步骤2)录像,当控制器检测到触发信息后,控制器发出指令控制摄像头开始录像;
步骤3)视频保存;摄像头将所录制的视频保存在视频存储器中。
与现有技术相比,本发明的有益效果在于,本发明中的智能箱结构简单,功能多样,运行的安全性可靠性较高,本发明的控制方法通过高精度识别人脸进一步提高了智能箱使用时的安全性。本发明可用于公共储物箱中。
作为本发明的进一步限定,所述操作触发可以是按键触发、触摸屏触发、刷卡触发,任何对于智能箱的操作都将被视为操作触发信息,智能箱将该触发信息传送给控制器;所述振动触发表示箱体壳因被敲打、撞击等因素而造成的箱体振动,该触发机制由振动传感器检测完成;所述长时间驻足触发表示有人在箱体附近长时间停留,该触发机制由人体红外传感器检测完成。扩大了触发的范围,通过多种触发机制配合工作,进一步提高了智能箱使用的安全性。
作为本发明的进一步限定,步骤2)中摄像头开始录像时,同时开启感光器检测,若外界光线不充足,控制器发出指令给LED灯,控制打开LED灯增强亮度,提高录像拍照的清晰度。通过LED灯配合阳光保证了摄像时的亮度从而确保摄像效果,保证清晰度,进一步提高智能箱安全性。
作为本发明的进一步限定,步骤2)中摄像头进行录像时,还进行人脸检测算法,抓拍人脸的面孔特征;所述人脸检测算法包括以下步骤:
步骤a)采用帧间差分法对视频录像中的运动目标进行锁定,缩小人脸检测范围;
步骤b)对运动图像进行预处理,包括光线补偿、灰度变换及滤波锐化处理;
步骤c)采用随机矩形特征算子提取运动图像的特征,提取出的特征送入训练好的分类器,进行分类,分类器中包含最能代表人脸特征的特征算子,并且每个特征算子经训练后有着不同的权重。权重是用来表示该算子对正确分类结果所起作用的大小,权重越大,所起作用越大,不同权重表示不同算子对分类结果的影响作用的大小,采用随机矩形特征算子不仅可以加速训练过程,而且保证检测性能并没有下降。
作为本发明的进一步限定,所述分类器训练方式如下:
1. 对于训练集合为样本向量,类别标签,分别表示反例、正例样本,初始化权重
2. 寻找个对应的分类函数
(1) 选择适量的足够多的随机矩形特征Pk,在样本图像上,随机选取两个像素大小一致和相对位置随机的两个矩形框,然后对所有样本的各个特征进行积分图计算;
(2) 根据所有样本的相同特征的数值对样本空间进行划分,得到区间;
(3) 使用训练样本的来统计各个区间的权重和:
(4) 计算选择特征的准则函数值:
(5) 选择使得最小化的特征:
其中,函数根据每个样本的特征所在的区间而定:
其中,为一个较小的正常数,
(6)对所有样本的权重进行归一化:
其中,是使的归一化因子;
3. 最终的分类器为:
其中,为手动设定的阈值,默认为0。手动阈值的调节是为了能够根据实际情况的需要进行人工调节,使分类器分类效果更佳。
附图说明
图1为本发明智能箱控制系统安装示意图。
图2为本发明控制系统控制原理框图。
图3为本发明中分类器训练过程流程图。
图4为本发明中随机矩形特征提取的示意图。
具体实施方式
如图1-2所示的触发式视频监控的智能箱控制系统及其控制方法,所述控制系统包括用以存放物品的箱体,在箱体外部装有摄像头101、人体红外探测器102、感光器103、LED灯104以及操作面板,所述操作面板包括触摸屏105、射频卡读卡器107以及按键108;箱体内部装有控制器、蓄电池、振动传感器106以及存储器,其中振动传感器106应安置在柜体内侧,所述摄像头101安装在箱体上方,存储视频图像的存储器安放在箱体内部,所述振动传感器106、人体红外探测器102、感光器103、操作面板的输出端均连接在控制器的输入端,控制器控制LED灯104的亮灭;
所述控制方法,包括以下步骤:
步骤1)触发,所述触发包括操作触发、振动触发和长时间驻足触发;操作触发可以是按键108触发、触摸屏105触发、刷卡触发,任何对于智能箱的操作都将被视为一触发信息,智能箱将该触发信息传送给控制器;振动触发表示箱体壳因被敲打、撞击等因素而造成的箱体振动,该触发机制由振动传感器106检测完成;长时间驻足触发表示有人在箱体附近长时间停留,该触发机制由人体红外传感器检测完成。
步骤2)录像,当控制器检测到触发信息后,控制器发出指令控制摄像头101开始录像;多种触发机制通过或逻辑运算后传达给控制器,控制器在收到触发信息后,控制器发出指令控制摄像头101开始录像,同时开启感光器103检测外界光线,若外界光线不充足,控制器发出指令给LED灯104,控制打开LED灯104增强亮度,提高录像拍照的清晰度;摄像头101在录像的同时,还要进行一项工作,就是通过人脸检测算法,抓拍嫌疑人的面孔特征;所述人脸检测算法通过下述方法实现:(1) 采用帧间差分法对视频录像中的运动目标进行锁定,缩小人脸检测范围;(2) 对运动图像进行预处理,包括光线补偿、灰度变换及滤波锐化处理;(3) 采用随机矩型特征算子提取运动图像的特征,提取出的特征与分类器中的特征进行匹配,匹配结果较好的则输出。
分类器训练的具体方式如下:
1. 对于训练集合 为样本向量,类别标签,分别表示反例、正例样本,初始化权重
2. 寻找个对应的分类函数
(1) 选择适量的足够多的随机矩形特征Pk,在样本图像上,随机选取两个像素大小一致和相对位置随机的两个矩形框,然后对所有样本的各个特征进行积分图计算;
(2) 根据所有样本的相同特征的数值对样本空间进行划分,得到区间;
(3) 使用训练样本的来统计各个区间的权重和:
(4) 计算选择特征的准则函数值:
(5) 选择使得最小化的特征:
其中,函数根据每个样本的特征所在的区间而定:
其中,为一个较小的正常数,
(6)对所有样本的权重进行归一化:
其中,是使的归一化因子;
3. 最终的分类器为:
其中,为手动设定的阈值,默认为0。
步骤3)视频保存;摄像头将所录制的视频保存在视频存储器中。
本发明中的控制方法使得智能箱的视频信号采集精度更高,调节更加方便,图像清晰度高。
本发明并不局限于上述实施例,在本发明公开的技术方案的基础上,本领域的技术人员根据所公开的技术内容,不需要创造性的劳动就可以对其中的一些技术特征作出一些替换和变形,这些替换和变形均在本发明的保护范围内。

Claims (3)

1.一种触发式视频监控的智能箱控制系统的控制方法,其特征在于,包括以下步骤:
步骤1)触发,所述触发包括操作触发、振动触发和长时间驻足触发;
步骤2)录像,当控制器检测到触发信息后,控制器发出指令控制摄像头开始录像,摄像头进行录像时,还进行人脸检测算法,抓拍人脸面孔特征;所述人脸检测算法包括以下步骤:
步骤a)采用帧间差分法对视频录像中的运动目标进行锁定,缩小人脸检测范围;
步骤b)对运动图像进行预处理,包括光线补偿、灰度变换及滤波锐化处理;
步骤c)采用随机矩形特征算子提取运动图像的特征,提取出的特征送入训练好的分类器,进行分类,分类器中包含最能代表人脸特征的特征算子,并且每个特征算子经训练后有着不同的权重,所述分类器训练方式如下:
对于训练集合 为样本向量,类别标签 ,分别表示反例、正例样本,初始化权重
寻找 个对应的分类函数
(1) 选择适量的足够多的随机矩形特征Pk,在样本图像上,随机选取两个像素大小一致和相对位置随机的两个矩形框,然后对所有样本的各个特征进行积分图计算;
(2) 根据所有样本的相同特征的数值对样本空间 进行划分,得到 区间;
(3) 使用训练样本的 来统计各个区间的权重和:
(4) 计算选择特征的准则函数值:
(5) 选择使得 最小化的特征:
其中,函数 根据每个样本的特征所在的区间而定:
其中, 为一个较小的正常数,
(6)对所有样本的权重进行归一化:
其中, 是使 的归一化因子;
最终的分类器为:
其中, 为手动设定的阈值,默认为0;
步骤3)视频保存;摄像头将所录制的视频保存在视频存储器中。
2.根据权利要求1所述触发式视频监控的智能箱控制系统的控制方法,其特征在于,所述操作触发可以是按键触发、触摸屏触发、刷卡触发,任何对于智能箱的操作都将被视为操作触发信息,智能箱将该触发信息传送给控制器;所述振动触发表示箱体壳因被敲打、撞击等因素而造成的箱体振动,该触发机制由振动传感器检测完成;所述长时间驻足触发表示有人在箱体附近长时间停留,该触发机制由人体红外传感器检测完成。
3.根据权利要求1所述触发式视频监控的智能箱控制系统的控制方法,其特征在于,步骤2)中摄像头开始录像时,同时开启感光器检测,若外界光线不充足,控制器发出指令给LED灯,控制打开LED灯增强亮度,提高录像拍照的清晰度。
CN201410529560.6A 2014-10-10 2014-10-10 触发式视频监控的智能箱控制系统及其控制方法 Active CN104268534B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410529560.6A CN104268534B (zh) 2014-10-10 2014-10-10 触发式视频监控的智能箱控制系统及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410529560.6A CN104268534B (zh) 2014-10-10 2014-10-10 触发式视频监控的智能箱控制系统及其控制方法

Publications (2)

Publication Number Publication Date
CN104268534A CN104268534A (zh) 2015-01-07
CN104268534B true CN104268534B (zh) 2017-06-06

Family

ID=52160054

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410529560.6A Active CN104268534B (zh) 2014-10-10 2014-10-10 触发式视频监控的智能箱控制系统及其控制方法

Country Status (1)

Country Link
CN (1) CN104268534B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104630060A (zh) * 2015-01-19 2015-05-20 广西壮族自治区农业科学院蔬菜研究所 自动化聚焦立体拍摄培养物的人工气候箱
CN104531528A (zh) * 2015-01-19 2015-04-22 广西壮族自治区农业科学院蔬菜研究所 一种自动化聚焦立体拍摄培养物的人工气候箱
CN107465896B (zh) * 2017-08-16 2020-05-01 英华达(上海)科技有限公司 一种智能监控系统及监控方法
CN108288044B (zh) * 2018-01-31 2020-11-20 Oppo广东移动通信有限公司 电子装置、人脸识别方法及相关产品
CN111225178A (zh) * 2018-11-23 2020-06-02 杭州眼云智家科技有限公司 基于对象检测的视频监控方法及其系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW425450B (en) * 1998-04-17 2001-03-11 Ferco Int Usine Ferrures Locking device for sliding doors, windows and the like
WO2001064481A2 (en) * 2000-03-02 2001-09-07 Donnelly Corporation Video mirror systems incorporating an accessory module
CN2781868Y (zh) * 2004-12-29 2006-05-24 薛恒伟 智能箱智能控制装置
CN101075291A (zh) * 2006-05-18 2007-11-21 中国科学院自动化研究所 一种用于人脸识别的高效提升训练方法
CN201167372Y (zh) * 2008-03-14 2008-12-17 东莞万晖电子有限公司 红外线感应灯光数码照相控制器
CN201229620Y (zh) * 2007-12-19 2009-04-29 中国科学院长春光学精密机械与物理研究所 Atm的智能监控系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090273673A1 (en) * 2008-05-01 2009-11-05 Worley Iii John R Personal vehicle surveillance system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW425450B (en) * 1998-04-17 2001-03-11 Ferco Int Usine Ferrures Locking device for sliding doors, windows and the like
WO2001064481A2 (en) * 2000-03-02 2001-09-07 Donnelly Corporation Video mirror systems incorporating an accessory module
CN2781868Y (zh) * 2004-12-29 2006-05-24 薛恒伟 智能箱智能控制装置
CN101075291A (zh) * 2006-05-18 2007-11-21 中国科学院自动化研究所 一种用于人脸识别的高效提升训练方法
CN201229620Y (zh) * 2007-12-19 2009-04-29 中国科学院长春光学精密机械与物理研究所 Atm的智能监控系统
CN201167372Y (zh) * 2008-03-14 2008-12-17 东莞万晖电子有限公司 红外线感应灯光数码照相控制器

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于图像的人脸识别技术研究;王莹;《中国博士学位论文全文数据库 信息科技辑》;20120930;I138-38 *
基于视频序列的人脸检测与跟踪算法研究;张明轩;《中国优秀硕士学位论文全文数据库 信息科技辑》;20111031;I138-649 *

Also Published As

Publication number Publication date
CN104268534A (zh) 2015-01-07

Similar Documents

Publication Publication Date Title
CN104268534B (zh) 触发式视频监控的智能箱控制系统及其控制方法
AU2017233723B2 (en) System and method for training object classifier by machine learning
US10757377B2 (en) Surveillance system and operation method thereof
US10366595B2 (en) Surveillance method and system based on human behavior recognition
EP3092619A1 (en) Information processing apparatus and information processing method
KR20130043222A (ko) Tv 제어용 제스처 인식 시스템
US20090167493A1 (en) Video monitoring system
US9047504B1 (en) Combined cues for face detection in computing devices
CN109359577B (zh) 一种基于机器学习的复杂背景下人数检测系统
US20190340904A1 (en) Door Surveillance System and Control Method Thereof
JP6351243B2 (ja) 画像処理装置、画像処理方法
US20200145623A1 (en) Method and System for Initiating a Video Stream
CN106204573A (zh) 一种智能冰箱的食品管理方法及系统
CN109977876A (zh) 图像识别方法、装置、计算设备、系统和存储介质
Chhoriya Automated criminal identification system using face detection and recognition
CA3060340A1 (en) Detection system, detection device and method therefor
CN111581679A (zh) 一种基于深度网络的防范屏幕拍照方法
CN107194379A (zh) 能够适应不同应用场景的人脸识别验证终端及其工作方法
US11605224B2 (en) Automated media editing operations in consumer devices
KR200481554Y1 (ko) 접근자 자동 감지 및 전송 기능을 갖는 스마트 금고 시스템
US20120268237A1 (en) System and method for controlling door
CN210442821U (zh) 一种人脸识别装置
KR20220072499A (ko) 다중 뷰 영상 기반 행위 인지 방법, 장치 및 시스템
CN106251545A (zh) 一种智能家庭监控系统
Vankayalapati et al. Real-Time Smart Attendance Monitoring System with Thermal Scanning

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20150107

Assignee: Yangzhou Suhong Electric Technology Co.,Ltd.

Assignor: YANGZHOU University

Contract record no.: X2020320000389

Denomination of invention: Intelligent box control system and control method of trigger video monitoring

Granted publication date: 20170606

License type: Common License

Record date: 20201222