CN112001339A - 一种基于YOLO v4的行人社交距离实时监测方法 - Google Patents
一种基于YOLO v4的行人社交距离实时监测方法 Download PDFInfo
- Publication number
- CN112001339A CN112001339A CN202010879084.6A CN202010879084A CN112001339A CN 112001339 A CN112001339 A CN 112001339A CN 202010879084 A CN202010879084 A CN 202010879084A CN 112001339 A CN112001339 A CN 112001339A
- Authority
- CN
- China
- Prior art keywords
- yolo
- network
- pedestrian
- social distance
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 21
- 238000000034 method Methods 0.000 title claims abstract description 18
- 238000012549 training Methods 0.000 claims abstract description 30
- 238000001514 detection method Methods 0.000 claims abstract description 28
- 230000006870 function Effects 0.000 claims description 12
- 238000000137 annealing Methods 0.000 claims description 9
- 238000004422 calculation algorithm Methods 0.000 claims description 7
- 230000008014 freezing Effects 0.000 claims description 6
- 238000007710 freezing Methods 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 4
- 230000002238 attenuated effect Effects 0.000 claims description 2
- 238000003064 k means clustering Methods 0.000 claims description 2
- 238000005259 measurement Methods 0.000 abstract description 4
- 238000012795 verification Methods 0.000 abstract description 2
- 238000000605 extraction Methods 0.000 description 6
- 241000700605 Viruses Species 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000004927 fusion Effects 0.000 description 3
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 230000002265 prevention Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 208000025721 COVID-19 Diseases 0.000 description 1
- 241000711573 Coronaviridae Species 0.000 description 1
- 206010035664 Pneumonia Diseases 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 239000000443 aerosol Substances 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000007635 classification algorithm Methods 0.000 description 1
- 230000009351 contact transmission Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000009365 direct transmission Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000037361 pathway Effects 0.000 description 1
- 238000011176 pooling Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- GOLXNESZZPUPJE-UHFFFAOYSA-N spiromesifen Chemical compound CC1=CC(C)=CC(C)=C1C(C(O1)=O)=C(OC(=O)CC(C)(C)C)C11CCCC1 GOLXNESZZPUPJE-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/23—Clustering techniques
- G06F18/232—Non-hierarchical techniques
- G06F18/2321—Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions
- G06F18/23213—Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions with fixed number of clusters, e.g. K-means clustering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/044—Recurrent networks, e.g. Hopfield networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Probability & Statistics with Applications (AREA)
- Geometry (AREA)
- Multimedia (AREA)
- Image Analysis (AREA)
Abstract
本发明涉及一种基于YOLO v4的行人社交距离实时监测方法。本发明包括：收集整理数据集，网络模型训练，视频图像输入，目标行人预测，根据检测结果遍历目标，计算目标距离和阈值并对其分类，输出分类结果。本发明主要采用了YOLO v4的网络模型，经过参数调整，在VOC2007的验证集下对行人目标的AP达到了87.54%，识别精度较高。本发明的分类阈值根据目标尺度动态变化，实现了多尺度下的行人目标距离度量。
Description
技术领域
本发明属于计算机图像处理领域，尤其涉及一种基于YOLO v4的行人社交距离实时监测方法
背景技术
2019年末，一种新型冠状病毒COVID-19在世界各地接连爆发。这种病毒的传播性极强，世界卫生组织评估这次新冠肺炎疫情为全球大流行(pandemic)。病毒的主要传播途径为直接传播、气溶胶传播和接触传播。全球各地接连禁止线下集会，关闭人员密集的公共场所，提倡居家隔离，减少外出，才遏制了病毒的进一步扩散，说明保持社交距离是有效的防疫措施。现在，随着疫情有所减缓，一些公共场所，例如超市、商场、餐馆逐渐开放，但是疫情仍未结束，还要加强防范意识，在公共场所保持一定的社交距离。而遍布公共场所的监控摄像头，不仅可以采集行人数据制作数据集，也可以用来部署检测方案进行实时监测，相比人工监督，是一种更为有效的监测手段。
近年来，深度学习发展迅猛，尤其是深度卷积网络在计算机视觉领域不断实现新的突破。在2012年的ILSVRC比赛中，获得冠军的AlexNet使用的深度卷积网络将top-5的错误率降低至了16.4％，相比第二名的26.2％错误率有了大幅提升。此后，图像分类算法不断改进，2014年的VGGnet使用3×3的小卷积核代替5×5或7×7的大卷积核增加了网络深度，GoogleNet在此基础上又引入了Inception模块，模型性能得到进一步提高。2017年，Jie Hu等人提出的SENet在图像分类任务中的top-5错误率降低到了2.3％，已经远远低于人工标注的错误率5％。卷积网络的运用不只是在图像分类，在目标检测领域同样取得了巨大进步。
目前主流目标检测算法分为One-stage和Two-stage两种，Two-stage的主要代表为R-CNN及其衍生的一系列算法，它首先用选择性搜索或RPN网络生成候选区域，再把候选区域输入卷积网络做分类或者回归，检测一幅图像需要同时运算两个网络，不仅参数众多，运行速度也很难提升；而One-stage只需要一个网络就能够完成端到端的目标的检测任务，其代表就是YOLO网络，它把目标检测问题中的边框定位和分类融合为一个回归问题，只需要将数据送入网络一次，就可以检测出所有物体类别和位置，并且运行速度较快，适合实时监测场景。
YOLO网络最初通过转化网络的损失函数，将目标定位于分类融合为一个回归问题，YOLO v2/YOLO 9000相比最初版本添加了批量归一化(BN)层，取消了全连接层，实现了对任意尺寸图像的检测；YOLO v3相比上一版本，主要改进了特征提取网络，引入残差层，并进行了多层特征融合，实现了对多尺度目标的检测；YOLO v4在特征提取网络中引入了CSPnet结构，修改了激活函数，使用PANet融合了多尺度特征，等等一系列改动，使得网络在速度没有明显降低的情况下，检测精度相比YOLO v3有了大幅提升，因此，YOLO v4网络兼具精度与速度优势。
发明内容
本发明旨在提出一种基于YOLO v4的行人社交距离实时监测方法，实现准确、高效地监测行人社交距离。
本发明具体步骤如下：
步骤1，搜集整理多尺度、多角度、多场景下的包含行人的图片，并使用标注工具对图片中的行人进行数据标注。
步骤2，使用K-means聚类算法生成基于自制数据集的初始锚框。
步骤3，设置YOLO v4的网络参数。
步骤4，在公开的标注数据集上进行网络的预训练，初始化YOLO v4网络。
步骤5，将已标注的数据集进行数据增强后，输入已初始化的YOLO v4网络进行训练直至网络收敛，保存模型与权重文件。
步骤6，读取保存的模型与权重文件，输入待检测视频、图像，网络根据目标是否符合社交距离，绘制对应的检测框。
进一步地，在步骤3中，包括如下子步骤：
3.1YOLO v4的学习率采用余弦退火衰减。在一个重启周期内，学习率会首先线性上升至最大值，然后模拟余弦函数下降。
3.2在余弦退火衰减的基础上，加入warm up预热阶段，使在模型最初训练时的学习率较小，模型趋于稳定后再选用预先设定的学习率。
3.3在YOLO v4中直接采用CIOU与置信度作为Loss函数，删去分类误差项，CIOU将预测框与真实框的距离、重叠度、尺度以及惩罚项都考虑在内。
进一步地，在步骤5中，包括如下子步骤：
5.1采用Mosaic数据增强，每次随机读取四张图片，分别进行镜像翻转、尺度缩放、色域变化等，并按照左上、右上、左下、右下的位置拼接，再对原图中的真实框进行剪裁与组合，形成一张新的图片输入网络进行训练。
5.2采取冻结训练方式，将网络划分为两部分，首先冻结网络前半部分，对未冻结层进行训练，达到冻结训练的最大迭代次数后，对整体解冻的网络再进行训练。
进一步地，步骤6具体如下：
视频、图像经过YOLO v4卷积网络，输出每个行人目标的中心点以及检测框的高度，遍历所有预测框，对每两个中心点计算欧氏距离，根据设定阈值t进行分类。
设定阈值t的计算公式为：
其中a为安全距离系数，是实际安全社交距离与平均身高的比值，h1,h2分别为两个中心点对应的检测框的高度。通过比较中心点的欧氏距离与阈值t的大小判别行人是否符合安全社交距离，根据分类结果，在输出图像中绘制对应颜色的检测框，得到最终基于YOLOv4的行人社交距离实时监测的结果。
本发明的有益效果是：
(1)发明基于目标检测的深度卷积网络YOLO v4，在行人识别精确性上优于其他同类型网络，本发明在VOC2007的验证集下对“person”单一目标的AP达到了87.54％，识别精度较高，且拥有较高的识别速度，能够满足实时性要求。
(2)对于行人距离的度量，阈值设定不是固定值，而是根据检测物体的位置与尺度动态变化的，解决不同距离下行人间距尺度不统一的问题。
附图说明
图1是本发明的检测流程图；
图2是YOLO v4的特征提取模型结构；
图3是检测效果图a；
图4是检测效果图b。
具体实施方式
本发明提供了一种基于YOLO v4的行人社交距离实时监测方法，下面结合附图对本发明作进一步说明。
如图1所示，本发明提供了一种基于YOLO v4的行人社交距离实时监测方法，包括：
步骤1制作数据集：
搜集整理多尺度、多角度、多场景下的包含行人的图像，共5011张，并使用标注工具对图像中的行人进行数据标注，生成对应于每一幅图像xml标注文件，整理成为VOC数据集格式。
步骤2生成网络初始锚框：
YOLO v4网络将输入图像划分为19×19、38×38、76×76的网格，每一个网格对应3个不同长宽比例初始锚框用于预测目标位置，对一张图片共需要9个初始锚框。运用K-mean算法将数据集中的真实框聚类为9种，作为网络初始锚框，能够加快网络的收敛，提升训练速度和精度。
K-mean首先随机选取9个任意长宽比例的锚框作为聚类中心，然后计算所有真实框与锚矿的距离，根据距离把真实框分配给聚类中心，当所有真实框都聚类完毕时，重新计算聚类中心，然后重新计算距离并聚类，重复操作直至聚类中心不再变化，输出当前聚类中心。最终得到的9个初始锚框尺寸为(15,27)，(24,73)，(46,133)，(47,43)，(86,89)，(94,206)，(175,298)，(203,153)，(344,329)。
步骤3设置YOLO v4网络参数：
如图2所示，YOLO v4的主干特征提取网络CSPDarknet53在Darknet53的基础上引入了CSPnet结构，在原本的残差块上又引入了一条残差边，提升网络学习能力，与残差模块一同构成Resblock_body。
在特征金字塔部分加入SPP和PANet，增大网络的感受野，首先对输出特征图进行池化、堆叠，然后进行上采样特征融合，再对融合后的特征图利用卷积下采样再次特征融合，最后输出三种尺度的特征图。
本发明基于YOLO v4的特征提取网络结构，对学习率采用余弦退火算法动态实现动态学习率。在一个重启周期内，学习率会首先线性上升至最大值，然后模拟余弦函数下降。在余弦退火算法中设置最大学习率hmax最小学习率hmin以及重启步长Tmax，对学习率的衰减实现如下：
其中，Tcur为当前重启周期内的步长，在训练过程中多次执行学习率的余弦退火衰减，避免网络陷入局部极小值。
为了防止模型训练初期由于学习率太大而造成模型不稳定甚至的发散，在余弦退火的基础上加入warm up预热阶段，使在模型最初训练时的学习率较小，模型趋于稳定后再选用预先设定的学习率。
进一步地，YOLO v4损失函数中边框回归使用了CIOU，包括了预测框与真实框的距离、重叠度、尺度以及惩罚项，其中惩罚项将预测框的长宽比拟合真实框也考虑在内，CIOU公式如下：
其中IOU为交并比，为预测框与真实框交集和并集的比值，ρ2(b,bgt)代表了预测框与真实框的中心点的欧氏距离，c为能够同时包含预测框与真实框的最小闭包区域的对角线距离。αυ是惩罚项，公式如下：
wgt,hgt,w,h分别为真实框的宽高和预测框的框高，可以得到CIOU对应的Loss如下：
对于单目标检测，分类误差回归是不必要的，因此在原本的Loss函数中删去分类误差项最终网络的Loss函数为：
LOOS＝LOSSCIOU+LOSSconfidences (6)
置信度损失函数LOSSconfidences仍然采用交叉熵计算。
步骤4模型预训练：
YOLO v4网络结构搭建完成，在公开的标注COCO数据集上进行网络的预训练，初始化YOLO v4网络，获得网络权重用于进一步训练；
步骤5进一步训练：
将步骤1中制作好的VOC格式数据集进行Mosaic数据增强，每次随机读取四张图片，分别进行镜像翻转、尺度缩放、色域变化等，并按照左上、右上、左下、右下的位置拼接，再对原图中的真实框进行剪裁与组合，形成一张新的图片输入网络进行训练，变相增加了训练的batch_size，批量归一化也会同时计算四张图片，降低了网络对设备的性能要求。
其中，在网络的训练过程中，Mosai数据增强与原图片直接输入是交替进行的，避免因图片拼接后目标尺度减小，导致网络泛化性能降低的问题。
训练方式采取冻结训练，将网络划分为两部分，首先冻结网络前302层，对未冻结的后68层进行训练，避免训练初期对权值的破坏。达到冻结训练的最大迭代次数后，解冻网络，对整体370层网络再次进行训练。
网络训练达到最大迭代次数或网络收敛后，保存模型与权重文件。
步骤6目标距离度量：
读取网络模型与权重文件，输入待检测视频、图像，得到YOLO v4网络输出的目标信息如下：
(confidences,(x,y,x+w,y+h),centroid,w,h) (7)
其中confidences代表检测目标的置信度，(x,y,x+w,y+h)是预测框的左上角坐标以及右下角坐标，用于在输出图像中绘制检测框，centroid内存放预测框的中心点坐标，w，h分别为预测框的宽高。遍历预测框，对每两个中心点计算欧氏距离，根据设定阈值t进行分类。
设定阈值t的计算公式为：
其中a为安全距离系数，是实际安全社交距离与平均身高的比值，这里设为0.6，h1,h2分别为两个中心点对应的检测框的高度。通过比较中心点的欧氏距离与阈值t的大小判别行人是否符合安全社交距离，将预测框分为两类。根据分类结果，在输出图像中将符合安全距离的预测框绘制为绿色，不符合安全距离的预测框绘制为红色，并将红色预测框数量标注在视频图像的左下方，得到最终基于YOLO v4的行人社交距离实时监测的结果，检测结果示意图如图3和图4所示。
本发明的检测视频图像行人安全社交距离方法，主要运用了YOLO v4的特征提取网络，提取视频、图像中的行人目标信息，利用阈值对行人进行分类，达到检测安全社交距离的目的。为了提升YOLO v4的在行人检测场景下的效果，对Loss函数中的边框回归做出改进并删去分类误差项，减少网络参数，提升网络运行速度。训练阶段在Mosaic数据增强的基础下，运用冻结训练和余弦退火衰减学习率增强网络稳定性，提升网络对目标检测的准确性。在目标距离度量中，鉴于行人监测场景下的尺度不统一，本发明根据目标尺度动态变化的阈值，提高距离度量的可靠性。
Claims (7)
1.一种基于YOLO v4的行人社交距离实时监测方法，其特征在于，该方法包括以下步骤：
步骤1，搜集整理多尺度、多角度、多场景下的包含行人的图片，并使用标注工具对图片中的行人进行数据标注；
步骤2，使用K-means聚类算法生成基于自制数据集的初始锚框；
步骤3，设置YOLO v4的网络参数；
步骤4，在公开的标注数据集上进行网络的预训练，初始化YOLO v4网络；
步骤5，将已标注的数据集进行数据增强后，输入已初始化的YOLO v4网络进行训练直至网络收敛，保存模型与权重文件；
步骤6，读取保存的模型与权重文件，输入待检测视频、图像，网络根据目标是否符合社交距离，绘制对应的检测框。
2.根据权利要求1所叙述的一种基于YOLO v4的行人社交距离实时监测方法，其特征在于，在步骤3中，YOLO v4的学习率采用余弦退火衰减；在一个重启周期内，学习率首先线性上升至最大值，然后模拟余弦函数下降。
3.根据权利要求2所述的一种基于YOLO v4的行人社交距离实时监测方法，其特征在于，在余弦退火衰减的基础上，加入warm up预热阶段，使在模型最初训练时的学习率较小，模型趋于稳定后再选用预先设定的学习率。
4.根据权利要求1所述的一种基于YOLO v4的行人社交距离实时监测方法，其特征在于，在步骤3中，YOLO v4采用CIOU作为Loss函数，删去分类误差项，CIOU将预测框与真实框的距离、重叠度、尺度以及惩罚项都考虑在内。
5.根据权利要求1所述的一种基于YOLO v4的行人社交距离实时监测方法，其特征在于，在步骤5中，采用Mosaic数据增强，每次读取四张图片，分别进行镜像翻转、尺度缩放、色域变化，并按照左上、右上、左下、右下的位置拼接，再对原图中的真实框进行剪裁与组合，形成一张新的图片输入网络进行训练。
6.根据权利要求5所述的一种基于YOLO v4的行人社交距离实时监测方法，其特征在于，采取冻结训练方式，将网络划分为两部分，首先冻结网络前半部分，对未冻结层进行训练，达到冻结训练的最大迭代次数后，再对整体解冻的网络进行训练。
7.根据权利要求1所述的一种基于YOLO v4的行人社交距离实时监测方法，其特征在于，步骤6具体是：视频、图像经过YOLO v4卷积网络，输出每个行人目标的中心点(x,y)以及检测框的高度h，遍历所有预测框，对每两个中心点计算欧氏距离，根据设定阈值t进行分类；
设定阈值t的计算公式为：
其中a为安全距离系数，是实际安全社交距离与平均身高的比值，h1,h2分别为两个中心点对应的检测框的高度；
通过比较中心点的欧氏距离与阈值t的大小判别行人是否符合安全社交距离，根据分类结果，在输出图像中绘制对应颜色的检测框，得到最终基于YOLO v4的行人社交距离实时监测的结果。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010879084.6A CN112001339B (zh) | 2020-08-27 | 2020-08-27 | 一种基于YOLO v4的行人社交距离实时监测方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010879084.6A CN112001339B (zh) | 2020-08-27 | 2020-08-27 | 一种基于YOLO v4的行人社交距离实时监测方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112001339A true CN112001339A (zh) | 2020-11-27 |
| CN112001339B CN112001339B (zh) | 2024-02-23 |
Family
ID=73471297
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010879084.6A Active CN112001339B (zh) | 2020-08-27 | 2020-08-27 | 一种基于YOLO v4的行人社交距离实时监测方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112001339B (zh) |
Cited By (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112488230A (zh) * | 2020-12-07 | 2021-03-12 | 中国农业大学 | 基于机器学习的作物水分胁迫程度判定方法和装置 |
| CN112560816A (zh) * | 2021-02-20 | 2021-03-26 | 北京蒙帕信创科技有限公司 | 一种基于YOLOv4的设备指示灯识别方法及系统 |
| CN112598001A (zh) * | 2021-03-08 | 2021-04-02 | 中航金城无人系统有限公司 | 一种基于多模型融合的船舶水尺读数自动识别方法 |
| CN112613343A (zh) * | 2020-12-01 | 2021-04-06 | 浙江大学 | 一种基于改进YOLOv4的河道废弃物监测方法 |
| CN112633174A (zh) * | 2020-12-23 | 2021-04-09 | 电子科技大学 | 一种基于改进的YOLOv4高穹顶场景下火灾检测方法、存储介质 |
| CN112715403A (zh) * | 2020-12-29 | 2021-04-30 | 燕山大学 | 牲畜圈自动供水方法及其养殖用自动供水装置 |
| CN112906002A (zh) * | 2021-03-26 | 2021-06-04 | 山西三友和智慧信息技术股份有限公司 | 一种基于深度学习的恶意软件识别方法 |
| CN112967243A (zh) * | 2021-02-26 | 2021-06-15 | 清华大学深圳国际研究生院 | 一种基于yolo的深度学习芯片封装裂纹缺陷检测方法 |
| CN113011319A (zh) * | 2021-03-16 | 2021-06-22 | 上海应用技术大学 | 多尺度火灾目标识别方法及系统 |
| CN113076871A (zh) * | 2021-04-01 | 2021-07-06 | 华南理工大学 | 一种基于目标遮挡补偿的鱼群自动检测方法 |
| CN113192040A (zh) * | 2021-05-10 | 2021-07-30 | 浙江理工大学 | 一种基于YOLO v4改进算法的织物瑕疵检测方法 |
| CN113283408A (zh) * | 2021-07-22 | 2021-08-20 | 中国人民解放军国防科技大学 | 基于监控视频的社交距离监测方法、装置、设备和介质 |
| CN113553874A (zh) * | 2021-07-27 | 2021-10-26 | 张金翼 | 一种复杂环境下快递条码检测方法 |
| CN113568407A (zh) * | 2021-07-27 | 2021-10-29 | 山东中科先进技术研究院有限公司 | 一种基于深度视觉的人机协作安全预警方法及系统 |
| CN113569769A (zh) * | 2021-07-30 | 2021-10-29 | 仲恺农业工程学院 | 基于深度神经网络的红火蚁蚁巢远程识别与定位方法 |
| CN113657261A (zh) * | 2021-08-16 | 2021-11-16 | 成都民航空管科技发展有限公司 | 基于机场远程塔台全景视频的实时目标检测方法及装置 |
| CN113673326A (zh) * | 2021-07-14 | 2021-11-19 | 南京邮电大学 | 一种基于图像深度学习的无人机平台人群计数方法及系统 |
| CN113793388A (zh) * | 2021-08-09 | 2021-12-14 | 南京工程学院 | 一种基于深度学习的立体视觉人际安全距离检测方法 |
| CN113989708A (zh) * | 2021-10-27 | 2022-01-28 | 福州大学 | 一种基于YOLO v4的校园图书馆疫情防控方法 |
| CN114821987A (zh) * | 2021-01-18 | 2022-07-29 | 漳州立达信光电子科技有限公司 | 提醒方法、装置及终端设备 |
| CN114842001A (zh) * | 2022-07-01 | 2022-08-02 | 苏州大学 | 一种遥感图像检测系统及方法 |
| CN115019226A (zh) * | 2022-05-13 | 2022-09-06 | 云南农业大学 | 一种基于改进型YoloV4模型的茶叶采摘识别方法 |
| CN115966009A (zh) * | 2023-01-03 | 2023-04-14 | 迪泰（浙江）通信技术有限公司 | 一种船舶智能检测系统及方法 |
| WO2023185779A1 (zh) * | 2022-03-29 | 2023-10-05 | 青岛海尔电冰箱有限公司 | 冰箱内物品信息识别方法 |
| CN117496253A (zh) * | 2023-11-10 | 2024-02-02 | 数据空间研究院 | 一种sar图像目标检测识别一体化方法及系统 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109325418A (zh) * | 2018-08-23 | 2019-02-12 | 华南理工大学 | 基于改进YOLOv3的道路交通环境下行人识别方法 |
| WO2019144575A1 (zh) * | 2018-01-24 | 2019-08-01 | 中山大学 | 一种快速行人检测方法及装置 |
| CN111325726A (zh) * | 2020-02-19 | 2020-06-23 | 腾讯医疗健康(深圳)有限公司 | 模型训练方法、图像处理方法、装置、设备及存储介质 |
-
2020
- 2020-08-27 CN CN202010879084.6A patent/CN112001339B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019144575A1 (zh) * | 2018-01-24 | 2019-08-01 | 中山大学 | 一种快速行人检测方法及装置 |
| CN109325418A (zh) * | 2018-08-23 | 2019-02-12 | 华南理工大学 | 基于改进YOLOv3的道路交通环境下行人识别方法 |
| CN111325726A (zh) * | 2020-02-19 | 2020-06-23 | 腾讯医疗健康(深圳)有限公司 | 模型训练方法、图像处理方法、装置、设备及存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 仇男豪;曹杰;马俊杰;龚永富;: "一种改进的无人机对地小目标检测方法", 电子设计工程, no. 12, 15 June 2020 (2020-06-15) * |
Cited By (34)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112613343A (zh) * | 2020-12-01 | 2021-04-06 | 浙江大学 | 一种基于改进YOLOv4的河道废弃物监测方法 |
| CN112613343B (zh) * | 2020-12-01 | 2023-12-15 | 浙江大学 | 一种基于改进YOLOv4的河道废弃物监测方法 |
| CN112488230A (zh) * | 2020-12-07 | 2021-03-12 | 中国农业大学 | 基于机器学习的作物水分胁迫程度判定方法和装置 |
| CN112633174A (zh) * | 2020-12-23 | 2021-04-09 | 电子科技大学 | 一种基于改进的YOLOv4高穹顶场景下火灾检测方法、存储介质 |
| CN112715403A (zh) * | 2020-12-29 | 2021-04-30 | 燕山大学 | 牲畜圈自动供水方法及其养殖用自动供水装置 |
| CN114821987A (zh) * | 2021-01-18 | 2022-07-29 | 漳州立达信光电子科技有限公司 | 提醒方法、装置及终端设备 |
| CN114821987B (zh) * | 2021-01-18 | 2024-04-30 | 漳州立达信光电子科技有限公司 | 提醒方法、装置及终端设备 |
| CN112560816A (zh) * | 2021-02-20 | 2021-03-26 | 北京蒙帕信创科技有限公司 | 一种基于YOLOv4的设备指示灯识别方法及系统 |
| CN112967243A (zh) * | 2021-02-26 | 2021-06-15 | 清华大学深圳国际研究生院 | 一种基于yolo的深度学习芯片封装裂纹缺陷检测方法 |
| CN112967243B (zh) * | 2021-02-26 | 2023-01-13 | 清华大学深圳国际研究生院 | 一种基于yolo的深度学习芯片封装裂纹缺陷检测方法 |
| CN112598001A (zh) * | 2021-03-08 | 2021-04-02 | 中航金城无人系统有限公司 | 一种基于多模型融合的船舶水尺读数自动识别方法 |
| CN112598001B (zh) * | 2021-03-08 | 2021-06-25 | 中航金城无人系统有限公司 | 一种基于多模型融合的船舶水尺读数自动识别方法 |
| CN113011319A (zh) * | 2021-03-16 | 2021-06-22 | 上海应用技术大学 | 多尺度火灾目标识别方法及系统 |
| CN113011319B (zh) * | 2021-03-16 | 2024-04-16 | 上海应用技术大学 | 多尺度火灾目标识别方法及系统 |
| CN112906002A (zh) * | 2021-03-26 | 2021-06-04 | 山西三友和智慧信息技术股份有限公司 | 一种基于深度学习的恶意软件识别方法 |
| CN113076871A (zh) * | 2021-04-01 | 2021-07-06 | 华南理工大学 | 一种基于目标遮挡补偿的鱼群自动检测方法 |
| CN113076871B (zh) * | 2021-04-01 | 2022-10-21 | 华南理工大学 | 一种基于目标遮挡补偿的鱼群自动检测方法 |
| CN113192040B (zh) * | 2021-05-10 | 2023-09-22 | 浙江理工大学 | 一种基于YOLO v4改进算法的织物瑕疵检测方法 |
| CN113192040A (zh) * | 2021-05-10 | 2021-07-30 | 浙江理工大学 | 一种基于YOLO v4改进算法的织物瑕疵检测方法 |
| CN113673326B (zh) * | 2021-07-14 | 2023-08-15 | 南京邮电大学 | 一种基于图像深度学习的无人机平台人群计数方法及系统 |
| CN113673326A (zh) * | 2021-07-14 | 2021-11-19 | 南京邮电大学 | 一种基于图像深度学习的无人机平台人群计数方法及系统 |
| CN113283408A (zh) * | 2021-07-22 | 2021-08-20 | 中国人民解放军国防科技大学 | 基于监控视频的社交距离监测方法、装置、设备和介质 |
| CN113568407A (zh) * | 2021-07-27 | 2021-10-29 | 山东中科先进技术研究院有限公司 | 一种基于深度视觉的人机协作安全预警方法及系统 |
| CN113553874A (zh) * | 2021-07-27 | 2021-10-26 | 张金翼 | 一种复杂环境下快递条码检测方法 |
| CN113569769A (zh) * | 2021-07-30 | 2021-10-29 | 仲恺农业工程学院 | 基于深度神经网络的红火蚁蚁巢远程识别与定位方法 |
| CN113793388A (zh) * | 2021-08-09 | 2021-12-14 | 南京工程学院 | 一种基于深度学习的立体视觉人际安全距离检测方法 |
| CN113657261A (zh) * | 2021-08-16 | 2021-11-16 | 成都民航空管科技发展有限公司 | 基于机场远程塔台全景视频的实时目标检测方法及装置 |
| CN113989708A (zh) * | 2021-10-27 | 2022-01-28 | 福州大学 | 一种基于YOLO v4的校园图书馆疫情防控方法 |
| CN113989708B (zh) * | 2021-10-27 | 2024-06-04 | 福州大学 | 一种基于YOLO v4的校园图书馆疫情防控方法 |
| WO2023185779A1 (zh) * | 2022-03-29 | 2023-10-05 | 青岛海尔电冰箱有限公司 | 冰箱内物品信息识别方法 |
| CN115019226A (zh) * | 2022-05-13 | 2022-09-06 | 云南农业大学 | 一种基于改进型YoloV4模型的茶叶采摘识别方法 |
| CN114842001A (zh) * | 2022-07-01 | 2022-08-02 | 苏州大学 | 一种遥感图像检测系统及方法 |
| CN115966009A (zh) * | 2023-01-03 | 2023-04-14 | 迪泰（浙江）通信技术有限公司 | 一种船舶智能检测系统及方法 |
| CN117496253A (zh) * | 2023-11-10 | 2024-02-02 | 数据空间研究院 | 一种sar图像目标检测识别一体化方法及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112001339B (zh) | 2024-02-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112001339A (zh) | 一种基于YOLO v4的行人社交距离实时监测方法 | |
| CN109977812B (zh) | 一种基于深度学习的车载视频目标检测方法 | |
| CN108053427B (zh) | 一种基于KCF与Kalman的改进型多目标跟踪方法、系统及装置 | |
| CN105447459B (zh) | 一种无人机自动检测目标和跟踪方法 | |
| WO2020173226A1 (zh) | 一种时空行为检测方法 | |
| CN106960195B (zh) | 一种基于深度学习的人群计数方法及装置 | |
| CN108062349B (zh) | 基于视频结构化数据及深度学习的视频监控方法和系统 | |
| CN111723654B (zh) | 基于背景建模、YOLOv3与自优化的高空抛物检测方法及装置 | |
| CN109829398B (zh) | 一种基于三维卷积网络的视频中的目标检测方法 | |
| CN110059581A (zh) | 基于场景深度信息的人群计数方法 | |
| CN103824070B (zh) | 一种基于计算机视觉的快速行人检测方法 | |
| CN103839065B (zh) | 人群动态聚集特征提取方法 | |
| CN109508710A (zh) | 基于改进YOLOv3网络的无人车夜间环境感知方法 | |
| CN108416250A (zh) | 人数统计方法及装置 | |
| CN111079739B (zh) | 一种多尺度注意力特征检测方法 | |
| CN109376637A (zh) | 基于视频监控图像处理的人数统计系统 | |
| CN107563299B (zh) | 一种利用ReCNN融合上下文信息的行人检测方法 | |
| CN109063549A (zh) | 基于深度神经网络的高分辨率航拍视频运动目标检测方法 | |
| CN113469050A (zh) | 基于图像细分类的火焰检测方法 | |
| CN111126278A (zh) | 针对少类别场景的目标检测模型优化与加速的方法 | |
| CN111882586A (zh) | 一种面向剧场环境的多演员目标跟踪方法 | |
| CN115841649A (zh) | 一种用于城市复杂场景的多尺度人数统计方法 | |
| CN105279485A (zh) | 激光夜视下监控目标异常行为的检测方法 | |
| CN112270381A (zh) | 基于深度学习的人流量检测方法 | |
| CN111259736B (zh) | 一种基于深度学习的复杂环境下行人实时检测方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |