CN110516615A - 基于卷积神经网络的人车分流控制方法 - Google Patents

基于卷积神经网络的人车分流控制方法 Download PDF

Info

Publication number
CN110516615A
CN110516615A CN201910807497.0A CN201910807497A CN110516615A CN 110516615 A CN110516615 A CN 110516615A CN 201910807497 A CN201910807497 A CN 201910807497A CN 110516615 A CN110516615 A CN 110516615A
Authority
CN
China
Prior art keywords
image
convolutional neural
neural networks
time
control computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910807497.0A
Other languages
English (en)
Other versions
CN110516615B (zh
Inventor
魏书伟
曾上游
鲁健恒
彭柯
王新娇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangxi Normal University
Original Assignee
Guangxi Normal University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangxi Normal University filed Critical Guangxi Normal University
Priority to CN201910807497.0A priority Critical patent/CN110516615B/zh
Publication of CN110516615A publication Critical patent/CN110516615A/zh
Application granted granted Critical
Publication of CN110516615B publication Critical patent/CN110516615B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle

Abstract

本发明公开基于卷积神经网络的人车分流控制方法,先利用训练集和测试集对后台控制计算机中的卷积神经网络进行训练和测试,得到目标识别模型,在利用目标识别模型对实时采集的图像进行目标检测,以完成人车分流控制。本发明具有精确度高、检测速度快、智能化程度高、实用性强和适用范围广的特点。

Description

基于卷积神经网络的人车分流控制方法
技术领域
本发明涉及卷积神经网络技术领域,具体涉及一种基于卷积神经网络的人车分流控制方法。
背景技术
在人流和车流密集的场所,往往需要进行人车分流来保证行人的安全。现有的人车分流方式多采用人工看守指挥方式,来使得人行通道仅供行人通过,而不能让车辆通过,同时使得车行通道仅供车辆通过,而不能让行人通过,从而保证了行人和车辆的安全。然而这种方式需要门卫24小时轮流值守,费时费力。
发明内容
本发明所要解决的是现有人车分流方法智能化程度不高的问题,提供一种基于卷积神经网络的人车分流控制方法。
为解决上述问题,本发明是通过以下技术方案实现的:
基于卷积神经网络的人车分流控制方法,具体包括如下步骤:
步骤1、将公开的行人图像和已知车辆图像形成图像集合,并将图像集合分成训练数据集和测试数据集;
步骤2、将训练数据集的图像送入后台控制计算机的卷积神经网络中,在卷积神经网络中,训练数据集的图像先经过前向传播,计算损失熵的大小,再通过随机梯度下降不断更新参数,后经过反向传播,使得损失熵不断减小寻找到最优参数,当迭代到设定好的次数或者准确率达到一定要求后停止训练,保存训练好的参数,由此得到训练好的卷积神经网络模型;
步骤3、将测试数据集的图像送入后台控制计算机训练好的卷积神经网络中,在训练好的卷积神经网络中,测试数据集的图像先经过前向传播,计算损失熵的大小,再通过随机梯度下降不断更新参数,后经过反向传播,使得损失熵不断减小寻找到最优参数,以测试训练好的卷积神经网络模型的准确率,由此得到测试好的卷积神经网络模型;
步骤4、将测试好的卷积神经网络模型作为最终的目标识别模型存储在后台控制计算机中;
步骤5、人行摄像头采集人行通道出入口处的实时人行通道图像,并将实时人行通道图像送入到后台控制计算机中;后台控制计算机将实时人行通道图像送入到最终的目标识别模型中,以识别出人行通道图像中所存在的是行人和/或车辆;
步骤6、仅有实时人行通道图像的最终识别出的目标全部是行人时,后台控制计算机才发出控制信号至人行电控闸门,此时人行电控闸门开启;否则,后台控制计算机不发出控制信号至人行电控闸门,此时人行电控闸门保持关闭状态;
步骤7、车行摄像头采集车行通道出入口处的实时车行通道图像,并将实时车行通道图像送入到后台控制计算机中;后台控制计算机将实时车行通道图像送入到最终的目标识别模型中,以识别出人行通道图像中所存在的是行人和/或车辆;
步骤8、仅有实时车行通道图像的最终识别出的目标全部是车辆时,后台控制计算机才发出控制信号至车行电控闸门,此时车行电控闸门开启;否则,后台控制计算机不发出控制信号至车行电控闸门,此时车行电控闸门保持关闭状态。
上述方案中,卷积神经网络为使用slice卷积层的YOLO卷积神经网络。
与现有技术相比,本发明具有如下特点:
1、后台控制计算机利用深度学习算法对实时采集图像进行行人和车辆的目标检测,其具有精确度高和检测速度快的特点;
2、卷积神经网络中使用slice卷积模块替代YOLO中的每一层1x1或3x3单层卷积,识别效果更佳;
3、后台控制计算机根据所检测出的目标发送指令控制下位机的电控闸门,以实现人车分流控制,下位机硬件性能要求较低;
4、本发明具有智能化程度高、检测准确和速度快、实用性强和适用范围广的特点。
附图说明
图1为一种基于卷积神经网络的人车分流控制方法的流程图。
图2为现有卷积神经网络中卷积层的结构示意图。
图3为本发明卷积神经网络中卷积层的结构示意图。
图4为一种基于卷积神经网络的人车分流控制系统结构图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实例,对本发明进一步详细说明。
一种基于卷积神经网络的人车分流控制方法,如图1所示,具体包括如下步骤:
(1)在后台控制计算机中建立目标识别模型。
1.1)构建卷积神经网络
在卷积神经网络中,卷积层是由多个特征图组成,每一个特征图是由多个神经元组成,而每一个神经元通过卷积核与上一层的特征图进行卷积运算得出。卷积核为一个权值矩阵,涵盖网络需要学习的内容,它包括权值和偏置。此处的卷积运算不同于信号处理中一维的卷积运算,而是二维平面上两个二维数据对应位置上的数据相乘后的总和而成。其计算公式为:
式中,f(.)代表激活函数,表示下层输出,表示上层的输出,k代表该层卷积核的权值,b代表该层卷积核的偏置。
在卷积神经网络的结构中,卷积的层次越深,网络的学习能力就越强,特征图得到的信息就越全。但是,随着网络层次结构的加深网络的计算量将会随之增加,也就导致网络变得更复杂,这样很容易会出现过拟合的现象。在一般的卷积神经网络结构中,提取的特征都是逐级递进的,由简单的颜色、边缘特征逐渐变为复杂的纹理特征,最后的网络结构将提取关键特征,以便精确的辨别特征图的属性。另外,卷积核的大小相当于人类眼睛的感受野,使用不同尺度大小的卷积核对图像进行特征提取,能够避免网络对小目标物体检测受限或者特征提取时不充分的问题。
考虑到当前主流的目标检测YOLOv2或者YOLOv3卷积神经网络,如图2所示,都是使用1x1或者3x3的卷积核在单条支路累加,只有一条通道提取图像特征,且卷积核大小在一层卷积时也只能是一种,其会存在对小目标物体检测受限或者特征提取时不充分的问题。本发明在传统目标检测YOLOv2或者YOLOv3卷积神经网络的基础上,使用slice卷积层的YOLO卷积神经网络,如图3所示。将输入的特征图通过slice操作平均分为两组,分别使用不同大小的卷积核对图像进行特征提取,最后将两条支路提取到的信息进行cancat级联融合操作,一起作为下一级的输入。Slice卷积层其核心思想是将输入的特征图切分为两部分,分别输送给两条卷积核大小不同的网络支路进行卷积操作来提取特征,再经过特征图级联操作concat将两条支路提取到的特征信息进行融合,最后再经过1*1卷积核整合特征图并增加网络的深度,同时也减少了下一级网络输入的参数。如图2和3所示,Slice卷积模块将输入的32张特征图分为2组,每组为16张特征图,分别经过3*3和1*1两种不同大小的卷积核进行提取特征,又经过级联操作整合为32张特征图,再经过1*1卷积操作后输出,对比传统仅使用3*3卷积核结构的参数为32*3*3*32=9216,Slice Module卷积结构参数为16*3*3*16+16*1*1*16+32*1*1*32=3584,参数减少为原来的三分之一,还同时增加了网络的宽度和深度,提高了网络的识别性能。经过测试,使用slice卷积层替代YOLO中的每一层1x1或3x3单层卷积,识别效果更佳。
1.2)将公开的行人图像和已知车辆图像形成图像集合,并将图像集合分成训练数据集和测试数据集。
1.3)将训练数据集的图像送入后台控制计算机的卷积神经网络中,在卷积神经网络中,训练数据集的图像先经过前向传播,计算损失熵的大小,再通过随机梯度下降不断更新参数,后经过反向传播,使得损失熵不断减小寻找到最优参数,当迭代到设定好的次数或者准确率达到一定要求后停止训练,保存训练好的参数,由此得到训练好的卷积神经网络模型。
1.4)、将测试数据集的图像送入后台控制计算机训练好的卷积神经网络中,在训练好的卷积神经网络中,测试数据集的图像先经过前向传播,计算损失熵的大小,再通过随机梯度下降不断更新参数,后经过反向传播,使得损失熵不断减小寻找到最优参数,以测试训练好的卷积神经网络模型的准确率,由此得到测试好的卷积神经网络模型。
1.5)将测试好的卷积神经网络模型作为最终的目标识别模型存储在后台控制计算机中。
(2)利用后台控制计算机中目标识别模型完成目标检测和人车分流控制。
2.1)人行摄像头采集人行通道出入口处的实时人行通道图像,并将实时人行通道图像送入到后台控制计算机中;后台控制计算机将实时人行通道图像送入到最终的目标识别模型中,以识别出人行通道图像中所存在的是行人和/或车辆。
2.2)仅有实时人行通道图像的最终识别出的目标全部是行人时,后台控制计算机才发出控制信号至人行电控闸门,此时人行电控闸门开启;否则,后台控制计算机不发出控制信号至人行电控闸门,此时人行电控闸门保持关闭状态。
2.3)车行摄像头采集车行通道出入口处的实时车行通道图像,并将实时车行通道图像送入到后台控制计算机中;后台控制计算机将实时车行通道图像送入到最终的目标识别模型中,以识别出人行通道图像中所存在的是行人和/或车辆。
2.4)仅有实时车行通道图像的最终识别出的目标全部是车辆时,后台控制计算机才发出控制信号至车行电控闸门,此时车行电控闸门开启;否则,后台控制计算机不发出控制信号至车行电控闸门,此时车行电控闸门保持关闭状态。
实现上述方法的一种基于卷积神经网络的人车分流控制系统,如图4所示,包括设置在人行通道出入口处的人行电控闸门和人行摄像头,设置在车行通道出入口处的车行电控闸门和车行摄像头,以及后台控制计算机。
人行摄像头朝向人行通道出入口处,人行摄像头的输出端通过路由器连接后台控制计算机的一个输入端;后台控制计算机的一个输出端通过路由器连接人行电控闸门的控制端。在本发明优选实施例中,人行电控闸门和人行摄像头通过无线路由器与后台控制计算机连接。
车行摄像头朝向车行通道出入口处,车行摄像头的输出端通过路由器连接后台控制计算机的另一个输入端;后台控制计算机的另一个输出端通过路由器连接车行电控闸门的控制端。在本发明优选实施例中,车行电控闸门和车行摄像头通过无线路由器与后台控制计算机连接。
需要说明的是,尽管以上本发明所述的实施例是说明性的,但这并非是对本发明的限制,因此本发明并不局限于上述具体实施方式中。在不脱离本发明原理的情况下,凡是本领域技术人员在本发明的启示下获得的其它实施方式,均视为在本发明的保护之内。

Claims (2)

1.一种基于卷积神经网络的人车分流控制方法,其特征是,具体包括如下步骤:
步骤1、将公开的行人图像和已知车辆图像形成图像集合,并将图像集合分成训练数据集和测试数据集;
步骤2、将训练数据集的图像送入后台控制计算机的卷积神经网络中,在卷积神经网络中,训练数据集的图像先经过前向传播,计算损失熵的大小,再通过随机梯度下降不断更新参数,后经过反向传播,使得损失熵不断减小寻找到最优参数,当迭代到设定好的次数或者准确率达到一定要求后停止训练,保存训练好的参数,由此得到训练好的卷积神经网络模型;
步骤3、将测试数据集的图像送入后台控制计算机训练好的卷积神经网络中,在训练好的卷积神经网络中,测试数据集的图像先经过前向传播,计算损失熵的大小,再通过随机梯度下降不断更新参数,后经过反向传播,使得损失熵不断减小寻找到最优参数,以测试训练好的卷积神经网络模型的准确率,由此得到测试好的卷积神经网络模型;
步骤4、将测试好的卷积神经网络模型作为最终的目标识别模型存储在后台控制计算机中;
步骤5、人行摄像头采集人行通道出入口处的实时人行通道图像,并将实时人行通道图像送入到后台控制计算机中;后台控制计算机将实时人行通道图像送入到最终的目标识别模型中,以识别出人行通道图像中所存在的是行人和/或车辆;
步骤6、仅有实时人行通道图像的最终识别出的目标全部是行人时,后台控制计算机才发出控制信号至人行电控闸门,此时人行电控闸门开启;否则,后台控制计算机不发出控制信号至人行电控闸门,此时人行电控闸门保持关闭状态;
步骤7、车行摄像头采集车行通道出入口处的实时车行通道图像,并将实时车行通道图像送入到后台控制计算机中;后台控制计算机将实时车行通道图像送入到最终的目标识别模型中,以识别出人行通道图像中所存在的是行人和/或车辆;
步骤8、仅有实时车行通道图像的最终识别出的目标全部是车辆时,后台控制计算机才发出控制信号至车行电控闸门,此时车行电控闸门开启;否则,后台控制计算机不发出控制信号至车行电控闸门,此时车行电控闸门保持关闭状态。
2.根据权利要求1所述的一种基于卷积神经网络的人车分流控制方法,其特征是,卷积神经网络为使用slice卷积层的YOLO卷积神经网络。
CN201910807497.0A 2019-08-29 2019-08-29 基于卷积神经网络的人车分流控制方法 Active CN110516615B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910807497.0A CN110516615B (zh) 2019-08-29 2019-08-29 基于卷积神经网络的人车分流控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910807497.0A CN110516615B (zh) 2019-08-29 2019-08-29 基于卷积神经网络的人车分流控制方法

Publications (2)

Publication Number Publication Date
CN110516615A true CN110516615A (zh) 2019-11-29
CN110516615B CN110516615B (zh) 2022-04-08

Family

ID=68628838

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910807497.0A Active CN110516615B (zh) 2019-08-29 2019-08-29 基于卷积神经网络的人车分流控制方法

Country Status (1)

Country Link
CN (1) CN110516615B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111311488A (zh) * 2020-01-15 2020-06-19 广西师范大学 一种基于深度学习的高效超分辨率重建方法
CN112001320A (zh) * 2020-08-25 2020-11-27 天地伟业技术有限公司 一种基于视频的闸门检测方法
CN113139458A (zh) * 2021-04-21 2021-07-20 新疆爱华盈通信息技术有限公司 识别停车库卷闸门开关状态的方法和系统
CN112001320B (zh) * 2020-08-25 2024-04-23 天地伟业技术有限公司 一种基于视频的闸门检测方法

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201570077U (zh) * 2009-12-14 2010-09-01 深圳市方迪计算机系统有限公司 监所大门人车分流智能控制系统
CN105096610A (zh) * 2015-09-07 2015-11-25 苏州市世跃智能科技有限公司 一种小区出入口监控管理系统
CN106934319A (zh) * 2015-12-29 2017-07-07 北京大唐高鸿软件技术有限公司 基于卷积神经网络的监控视频中人车目标分类方法
CN107730972A (zh) * 2017-05-10 2018-02-23 西安艾润物联网技术服务有限责任公司 视频识别控制道闸的方法和装置
CN108073917A (zh) * 2018-01-24 2018-05-25 燕山大学 一种基于卷积神经网络的人脸识别方法
CN108951470A (zh) * 2018-07-27 2018-12-07 遵义仁科信息技术有限公司 道闸闸杆的缓冲防砸装置
CN109376699A (zh) * 2018-11-30 2019-02-22 昆明理工大学 一种基于卷积神经网络的指纹识别方法
CN109784479A (zh) * 2019-01-16 2019-05-21 上海西井信息科技有限公司 基于神经网络的闸杆防砸方法、系统、设备及存储介质
CN110009648A (zh) * 2019-03-04 2019-07-12 东南大学 基于深浅特征融合卷积神经网络的路侧图像车辆分割方法
CN110060464A (zh) * 2019-06-03 2019-07-26 柏涛建筑设计(深圳)有限公司 一种接送航站、接送管理系统及其实现方法
CN110135231A (zh) * 2018-12-25 2019-08-16 杭州慧牧科技有限公司 动物面部识别方法、装置、计算机设备和存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201570077U (zh) * 2009-12-14 2010-09-01 深圳市方迪计算机系统有限公司 监所大门人车分流智能控制系统
CN105096610A (zh) * 2015-09-07 2015-11-25 苏州市世跃智能科技有限公司 一种小区出入口监控管理系统
CN106934319A (zh) * 2015-12-29 2017-07-07 北京大唐高鸿软件技术有限公司 基于卷积神经网络的监控视频中人车目标分类方法
CN107730972A (zh) * 2017-05-10 2018-02-23 西安艾润物联网技术服务有限责任公司 视频识别控制道闸的方法和装置
CN108073917A (zh) * 2018-01-24 2018-05-25 燕山大学 一种基于卷积神经网络的人脸识别方法
CN108951470A (zh) * 2018-07-27 2018-12-07 遵义仁科信息技术有限公司 道闸闸杆的缓冲防砸装置
CN109376699A (zh) * 2018-11-30 2019-02-22 昆明理工大学 一种基于卷积神经网络的指纹识别方法
CN110135231A (zh) * 2018-12-25 2019-08-16 杭州慧牧科技有限公司 动物面部识别方法、装置、计算机设备和存储介质
CN109784479A (zh) * 2019-01-16 2019-05-21 上海西井信息科技有限公司 基于神经网络的闸杆防砸方法、系统、设备及存储介质
CN110009648A (zh) * 2019-03-04 2019-07-12 东南大学 基于深浅特征融合卷积神经网络的路侧图像车辆分割方法
CN110060464A (zh) * 2019-06-03 2019-07-26 柏涛建筑设计(深圳)有限公司 一种接送航站、接送管理系统及其实现方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
TARAK GANDHI等: "Pedestrian Protection Systems: Issues, Survey, and Challenges", 《IEEE TRANSACTIONS ON INTELLIGENT TRANSPORTATION SYSTEMS》 *
TONG XIAO等: "Joint Detection and Identification Feature Learning for Person Search", 《PROCEEDINGS OF THE IEEE CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION (CVPR)》 *
徐韶华: "基于图像识别的车道闸杆防砸系统研究", 《交通工程》 *
潘婷等: "基于卷积神经网络的车辆和行人检测算法", 《浙江科技学院学报》 *
赵歌等: "基于DeepID算法的人证合一自动验证系统", 《计算机应用技术》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111311488A (zh) * 2020-01-15 2020-06-19 广西师范大学 一种基于深度学习的高效超分辨率重建方法
CN112001320A (zh) * 2020-08-25 2020-11-27 天地伟业技术有限公司 一种基于视频的闸门检测方法
CN112001320B (zh) * 2020-08-25 2024-04-23 天地伟业技术有限公司 一种基于视频的闸门检测方法
CN113139458A (zh) * 2021-04-21 2021-07-20 新疆爱华盈通信息技术有限公司 识别停车库卷闸门开关状态的方法和系统

Also Published As

Publication number Publication date
CN110516615B (zh) 2022-04-08

Similar Documents

Publication Publication Date Title
CN104992223B (zh) 基于深度学习的密集人数估计方法
CN112308158B (zh) 一种基于部分特征对齐的多源领域自适应模型及方法
CN104217214B (zh) 基于可配置卷积神经网络的rgb‑d人物行为识别方法
CN107016405B (zh) 一种基于分级预测卷积神经网络的害虫图像分类方法
CN110555368B (zh) 基于三维卷积神经网络的跌倒行为识别方法
CN104978580B (zh) 一种用于无人机巡检输电线路的绝缘子识别方法
CN108288035A (zh) 基于深度学习的多通道图像特征融合的人体动作识别方法
CN106650806A (zh) 一种用于行人检测的协同式深度网络模型方法
CN108304826A (zh) 基于卷积神经网络的人脸表情识别方法
CN107506692A (zh) 一种基于深度学习的密集人群计数与人员分布估计方法
CN107145889A (zh) 基于具有RoI池化的双CNN网络的目标识别方法
CN107239514A (zh) 一种基于卷积神经网络的植物识别方法及系统
CN109272500B (zh) 基于自适应卷积神经网络的织物分类方法
CN108647742A (zh) 基于轻量级神经网络的快速目标检测方法
CN108427920A (zh) 一种基于深度学习的边海防目标检测方法
CN108520516A (zh) 一种基于语义分割的桥梁路面裂缝检测和分割方法
CN106447658A (zh) 基于全局和局部卷积网络的显著性目标检测方法
CN110348376A (zh) 一种基于神经网络的行人实时检测方法
CN108388896A (zh) 一种基于动态时序卷积神经网络的车牌识别方法
CN113239784B (zh) 一种基于空间序列特征学习的行人重识别系统及方法
CN107590489A (zh) 基于级联卷积神经网络的目标检测方法
CN106650913A (zh) 一种基于深度卷积神经网络的车流密度估计方法
CN105335716A (zh) 一种基于改进udn提取联合特征的行人检测方法
CN106971160A (zh) 基于深度卷积神经网络和病害图像的冬枣病害识别方法
CN107451565B (zh) 一种半监督小样本深度学习图像模式分类识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant