CN108229411A - 基于rgb彩色图像的人体手持刀行为检测系统及方法 - Google Patents

基于rgb彩色图像的人体手持刀行为检测系统及方法 Download PDF

Info

Publication number
CN108229411A
CN108229411A CN201810037077.4A CN201810037077A CN108229411A CN 108229411 A CN108229411 A CN 108229411A CN 201810037077 A CN201810037077 A CN 201810037077A CN 108229411 A CN108229411 A CN 108229411A
Authority
CN
China
Prior art keywords
feature
hand
knife
processing module
feature extraction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810037077.4A
Other languages
English (en)
Inventor
付宇卓
黄燕清
刘婷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN201810037077.4A priority Critical patent/CN108229411A/zh
Publication of CN108229411A publication Critical patent/CN108229411A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开一种基于RGB彩色图像的人体手持刀行为检测系统及方法，所述检测系统包括：输入数据处理模块，用于获取训练数据流和实时图像数据流，并将其输出至特征提取和处理模块；特征提取和处理模块，用于提取所述输入数据处理模块输入图片的边缘直方图特征，并根据刀检测结果进行特征提取算法改进；SVM刀分类器，连接所述特征提取和处理模块，用于根据所述特征提取和处理模块输出的特征向量进行手持刀模型训练,生成手持刀SVM分类模型；检测单元，用于根据实时提取的待测图片的特征，加载离线训练好的手持刀SVM分类模型，进行实时检测并输出结果标签，本发明解决现有技术中视频图像的刀检测识别率低，误检测较多的问题。

Description

基于RGB彩色图像的人体手持刀行为检测系统及方法
技术领域
本发明涉及机器学习领域，特别是涉及一种具有高召回率的基于RGB彩色图像的人体手持刀行为检测系统及方法。
背景技术
虽然近年来人类行为识别已经吸引了很多关注，但由于各方面发展和知识背景的差距，相比国外先进技术研究，我们在安全监控领域的技术还不成熟，距离实际部署应用到监视系统还遗留很多问题有待解决。目前来看，计算机视觉还没发展到能够描述人体视觉能感知的异常行为，因此对于我们来说这还是个棘手的问题。而且由于环境复杂多变，人体行为多样性，以及运动时的相互遮挡、视角不同等噪声的干扰，对人体行为识别和检测造成了很大的难题。同时，又要求系统有非常高的实时性、灵活性、准确性和稳定性。由此可见，关于异常行为识别的研究和实现难度可见一斑。
关于手持刀行为的研究目前还较少，但已有几种研究提出的刀检测方法。已有一种涉及主动外观模型(Active Appearance Model)的算法，该模型算法考虑到刀片的锋利度，检测图像中的边缘尖角来判断是否含刀，但准确率较低；随后有人提出了一种几何方法，一个像素一个像素地处理使得该方法在很多情况下十分低效；因此最新的研究中提出了一种用MPEG-7描述符作为图片特征向量的表示方法来检测刀，并比较了MPEG-7边缘直方图描述符(Edge Histogram Descriptor)与同质纹理描述符(Homogeneous TextureDescriptor)的特征，在检测图片中刀的应用效果，并发现前者具有更高的准确性和更低的敏感性；此外还有其他可靠的在类似情况下检测危险物的方法，如使用微波扫频雷达技术，实现金属物体，如枪和刀等的检测，使用X射线成像来识别刀等。但是在实际应用中，使用这种方法检测的经济成本过高，健康危害也很大，因此应用到智能监控系统中并不合适。
发明内容
为克服上述现有技术存在的不足，本发明之目的在于提供一种基于RGB彩色图像的人体手持刀行为检测系统及方法以解决现有技术中视频图像的刀检测识别率低，误检测较多的问题。
为达上述及其它目的，本发明提出一种基于RGB彩色图像的人体手持刀行为检测系统，包括：
输入数据处理模块，用于获取训练数据流和实时图像数据流，并将其输出至特征提取和处理模块；
特征提取和处理模块，用于提取所述输入数据处理模块输入图片的边缘直方图特征，并根据刀检测结果进行特征提取算法改进；
SVM刀分类器，连接所述特征提取和处理模块，用于根据所述特征提取和处理模块输出的特征向量进行手持刀模型训练,生成手持刀SVM分类模型；
检测单元，用于根据实时提取的待测图片的特征，加载离线训练好的手持刀SVM分类模型，进行实时检测并输出结果标签。
进一步地，所述输入数据处理模块在训练过程中，从输入视频序列图片中截取人体轮廓附近区域的RGB数据作为研究对象，在实时检测过程中，利用前置摄像头追踪手的位置，并截取手附近区域的RGB数据作为研究对象，并将获取的研究对象输入到所述特征提取和处理模块。
进一步地，所述实时图像数据流的获取过程如下：
激活所述前置摄像头的手模块，并设置手追踪模式；
抓取视频流中的图像帧，获取手相关的图像数据；
存储样本图像的缓存数据，生成RGB图像并保存；
释放图像帧，进入下一帧获取循环。
进一步地，所述特征提取和处理模块的特征提取采用提取待检测图像的MPEG-7边缘直方图描述符信息作为特征向量；所述特征提取和处理模块的特征处理紧随特征提取操作之后，在80维特征向量之上进行改进；然后将所述的特征向量输入到所述SVM刀分类器。
进一步地，所述特征提取和处理模块采用特征旋转法和添加全局边缘特征法进行特征提取算法改进。
进一步地，所述特征旋转法通过旋转候选图片的MPEG-7边缘直方图特征，交换80维特征向量中特征值的位置来实现90度、180度和270度三个典型方向的旋转，并具体根据旋转的方向，交换16个图像子块的位置，以及每个图像块中五种边缘类型的位置，以此来适应不同的拍摄角度。
进一步地，所述添加最大全局边缘和特征法针对刀的长直边缘特性，提取图像块的全局边缘特征作为新的特征维度与原始MPEG-7边缘直方图特征组成81维特征向量进行后续模型训练，所述全局边缘特征来源于MPEG-7边缘直方图特征，16个图像分割块中连续三个图像块组合特征和的最大边缘类型特征值。
进一步地，所述SVM刀分类器的实现过程如下。
选择高斯径向基函数作为非线性支持向量机核函数；
根据特征提取改进算法，确定模型个数和类型；
利用格搜索算法为每个SVM模型寻找最优参数γ和υ；
确定最优性能下的SVM模型参数后，输入训练图片进行离线训练手持刀SVM分类模型。
进一步地，所述检测系统还包括报警模块，根据所述SVM刀分类器的图片检测结果的正负标志进行决策。
为达到上述目的，本发明还提供一种基于RGB彩色图像的人体手持刀行为检测方法，包括如下步骤：
步骤一，获取训练数据流和实时图像数据流；
步骤二，提取所述输入数据处理模块输入图片的边缘直方图特征，并根据刀检测结果进行特征提取算法改进；
步骤三，根据特征提取和处理模块输出的特征向量进行手持刀模型训练,生成手持刀SVM分类模型；
步骤四，根据实时提取的待测图片的特征，加载离线训练好的手持刀SVM分类模型，进行实时检测并输出结果标签。
与现有技术相比，本发明一种基于RGB彩色图像的人体手持刀行为检测系统及方法通过输入数据处理模块获取训练数据流和实时图像数据流，利用特征提取和处理模块提取所述输入数据处理模块输入图片的边缘直方图特征，并针对刀识别提出了两种特征提取改进方法，利用SVM刀分类器进行手持刀模型训练，生成手持刀SVM分类模型，实现了一种基于RGB彩色图像的人体手持刀行为检测系统，以克服现有技术中视频图像的刀检测识别率低，误检测较多的问题，本发明针对人体手持刀异常行为检测具有较高的召回率和准确率，具有可靠的应用前景。
附图说明
图1为本发明一种基于RGB彩色图像的人体手持刀行为检测系统的系统架构图；
图2为本发明具体实施例中将候选图片与特定的旋转矩阵相乘，完成图片的90度、180度和270度旋转的示意图；
图3为本发明具体实施例中MPEG-7边缘直方图特征提取改进算法—特征旋转法的伪代码示意图；
图4a为本发明具体实施例中添加最大全局边缘和特征法中涉及的24种三个连续图像块组合示意图；
图4b为本发明具体实施例中MPEG-7边缘直方图特征提取改进算法—添加最大全局边缘和特征法的伪代码示意图；
图5为本发明一种基于RGB彩色图像的人体手持刀行为检测方法的步骤流程图。
具体实施方式
以下通过特定的具体实例并结合附图说明本发明的实施方式，本领域技术人员可由本说明书所揭示的内容轻易地了解本发明的其它优点与功效。本发明亦可通过其它不同的具体实例加以施行或应用，本说明书中的各项细节亦可基于不同观点与应用，在不背离本发明的精神下进行各种修饰与变更。
图1为本发明一种基于RGB彩色图像的人体手持刀行为检测系统的系统架构图。如图1所示，本发明一种基于RGB彩色图像的人体手持刀行为检测系统，包括：
输入数据处理模块10，用于获取训练数据流和实时图像数据流，所述训练数据流来源于低分辨率、差质量的手持刀视频采集图片，在本发明具体实施例中，可利用改进的滑动窗口技术截取部分图像作为候选输入图像，用于模拟复杂苛刻的实际监控环境，具体地，为了满足图片低分辨率、质量差、小的检测对象以及真实的复杂的相机环境，在本发明实施例中滑窗的大小设为100×100；所述实时图像数据流，利用RealseSense SR300前置摄像头实时追踪手的位置，采集监控摄像头中手附近的图片帧，作为待测图片判断是否有手持刀异常行为出现。
具体地，所述实时图像数据流的获取过程如下：
(1)激活RealSense摄像头的手模块，并设置手追踪模式；
(2)抓取视频流中的图像帧，获取手相关的图像数据；
(3)存储样本图像的缓存数据，生成640×480的RGB图像并保存到磁盘；
(4)释放图像帧，进入下一帧获取循环。
也就是说，输入数据处理模块10在训练过程中，从输入视频序列图片中截取人体轮廓附近区域的RGB数据作为研究对象，在实时检测过程中，利用RealseSense SR300前置摄像头追踪手的位置，并截取手附近区域的RGB数据作为研究对象，所述的离线数据和实时数据输入到所述的特征提取和处理模块
特征提取和处理模块20，用于提取所述输入数据处理模块10输入图片的边缘直方图特征，并根据刀检测结果进行特征提取算法改进，具体地，所述特征提取采用提取待检测图像的MPEG-7边缘直方图描述符信息作为特征向量；所述的特征处理紧随特征提取操作之后，在80维特征向量之上做了两种特征提取算法改进，在本发明具体实施例中，分别是特征旋转法和添加全局边缘特征法，然后将所述的特征向量输入到所述的SVM刀分类器。具体地，两种特征提取算法具体如下：
一、特征旋转法，通过旋转候选图片的MPEG-7边缘直方图特征，交换80维特征向量中特征值的位置来实现90度、180度和270度三个典型方向的旋转，并具体根据旋转的方向，交换16个图像子块的位置，以及每个图像块中五种边缘类型的位置，以此来适应不同的拍摄角度，避免同一张图因为不同的拍摄视角而呈现不同检测结果的情况，同时也是通过增加训练样本数量来减少误检测率的一种方式，其具体过程如下：
(1)首先利用边缘直方图描述符(EHD)特征提取算法将原始图片分割成16个子块；
(2)通过将候选图片与特定的旋转矩阵相乘，完成图片的90度、180度和270度旋转，如图2所示；
(3)将原来的样本和旋转了三个方向的样本一起输入到SVM分类器进行训练，生成手持刀的行为检测模型。
本发明特征旋转法的伪代码如图3所示。
二、添加最大全局边缘和特征法，针对刀的长直边缘特性，提取图像块的全局边缘特征作为新的特征维度与原始MPEG-7边缘直方图特征组成81维特征向量进行后续模型训练，所述全局边缘特征来源于MPEG-7边缘直方图特征，16个图像分割块中连续三个图像块组合特征和的最大边缘类型特征值。其具体过程如下：
(1)为待测图片生成MEPG-7EHD特征，并保存到相应的特征文件；
(2)读取并分析该特征文件，存储到三维数组供后续特征处理；
(3)解析特征数组，将24种三个连续图像块组合的特征值相加，提取其中最大的边缘类型特征和，所述24种组合类型如图4a所示；
(4)将该全局特征值添加到原始MPEG-7边缘直方图特征之后，组成新的81维特征向量进行后续SVM模型训练；
本发明添加最大全局边缘和特征法的伪代码如图4b所示。
SVM刀分类器30，连接特征提取和处理模块20，用于进行手持刀模型训练,生成手持刀SVM分类模型，具体地，SVM刀分类器30将特征向量标好正负样本标签，输入到所述的SVM刀分类器生成所需的手持刀RGB图片分类器。具体地，SVM刀分类器30具体实现过程如下：
(1)选择高斯径向基函数(RBF)作为非线性支持向量机核函数；
(2)根据特征提取改进算法，确定本发明实施例的模型个数和类型；
(3)利用格搜索算法为每个SVM模型寻找最优参数γ和υ；
(4)确定最优性能下的SVM模型参数后，输入训练图片进行离线训练手持刀SVM分类模型，并保存到磁盘；
检测单元40，用于根据实时提取的待测图片的特征，加载离线训练好的手持刀SVM分类模型，进行实时检测并输出结果标签。
优选地，本发明之基于RGB彩色图像的人体手持刀行为检测系统还包括报警模块，用于根据SVM刀分类器30的图片检测结果的正负标志来做决策，如果为正则提醒监控者有危险行为发生，否则一切正常，继续监控。
图5为本发明一种基于RGB彩色图像的人体手持刀行为检测方法的步骤流程图。如图5所示，本发明一种基于RGB彩色图像的人体手持刀行为检测方法，包括如下步骤：
步骤501，获取训练数据流和实时图像数据流，所述训练数据流来源于低分辨率、差质量的手持刀视频采集图片，在本发明具体实施例中，可利用改进的滑动窗口技术截取部分图像作为候选输入图像，用于模拟复杂苛刻的实际监控环境，具体地，为了满足图片低分辨率、质量差、小的检测对象以及真实的复杂的相机环境，在本发明实施例中滑窗的大小设为100×100；所述实时图像数据流，利用RealseSense SR300前置摄像头实时追踪手的位置，采集监控摄像头中手附近的图片帧，作为待测图片判断是否有手持刀异常行为出现。
具体地，所述实时图像数据流的获取过程如下：
(1)激活RealSense摄像头的手模块，并设置手追踪模式；
(2)抓取视频流中的图像帧，获取手相关的图像数据；
(3)存储样本图像的缓存数据，生成640×480的RGB图像并保存到磁盘；
(4)释放图像帧，进入下一帧获取循环。
也就是说，在训练过程中，从输入视频序列图片中截取人体轮廓附近区域的RGB数据作为研究对象，在实时检测过程中，利用RealseSense SR300前置摄像头追踪手的位置，并截取手附近区域的RGB数据作为研究对象。
步骤502，提取输入图片的边缘直方图特征，并根据刀检测结果进行特征提取算法改进，具体地，所述特征提取采用提取待检测图像的MPEG-7边缘直方图描述符信息作为特征向量；所述的特征处理紧随特征提取操作之后，在80维特征向量之上做了两种特征提取算法改进，在本发明具体实施例中，分别是特征旋转法和添加全局边缘特征法，然后将所述的特征向量输入到所述的SVM刀分类器。具体地，两种特征提取算法具体如下：
一、特征旋转法，通过旋转候选图片的MPEG-7边缘直方图特征，交换80维特征向量中特征值的位置来实现90度、180度和270度三个典型方向的旋转，并具体根据旋转的方向，交换16个图像子块的位置，以及每个图像块中五种边缘类型的位置，以此来适应不同的拍摄角度，避免同一张图因为不同的拍摄视角而呈现不同检测结果的情况，同时也是通过增加训练样本数量来减少误检测率的一种方式，其具体过程如下：
(1)首先利用边缘直方图描述符(EHD)特征提取算法将原始图片分割成16个子块；
(2)通过将候选图片与特定的旋转矩阵相乘，完成图片的90度、180度和270度旋转；
(3)将原来的样本和旋转了三个方向的样本一起输入到SVM分类器进行训练，生成手持刀的行为检测模型。
二、添加最大全局边缘和特征法，针对刀的长直边缘特性，提取图像块的全局边缘特征作为新的特征维度与原始MPEG-7边缘直方图特征组成81维特征向量进行后续模型训练，所述全局边缘特征来源于MPEG-7边缘直方图特征，16个图像分割块中连续三个图像块组合特征和的最大边缘类型特征值。其具体过程如下：
(1)为待测图片生成MEPG-7EHD特征，并保存到相应的特征文件；
(2)读取并分析该特征文件，存储到三维数组供后续特征处理；
(3)解析特征数组，将24种三个连续图像块组合的特征值相加，提取其中最大的边缘类型特征和，所述24种组合类型如图4a所示；
(4)将该全局特征值添加到原始MPEG-7边缘直方图特征之后，组成新的81维特征向量进行后续SVM模型训练；
步骤503，进行手持刀模型训练，生成手持刀SVM分类模型。具体地，将特征向量标好正负样本标签，输入到SVM刀分类器生成所需的手持刀RGB图片分类器。具体步骤如下：
(1)选择高斯径向基函数(RBF)作为非线性支持向量机核函数；
(2)根据特征提取改进算法，确定本发明实施例的模型个数和类型；
(3)利用格搜索算法为每个SVM模型寻找最优参数γ和υ；
(4)确定最优性能下的SVM模型参数后，输入训练图片进行离线训练手持刀SVM分类模型，并保存到磁盘。
步骤504，根据实时提取的待测图片的特征，加载离线训练好的手持刀SVM分类模型，进行实时检测并输出结果标签。
优选地，本发明之基于RGB彩色图像的人体手持刀行为检测方法还包括
根据手持刀SVM分类模型的图片检测结果的正负标志来做决策，如果为正则提醒监控者有危险行为发生，否则一切正常，继续监控。
综上所述，本发明一种基于RGB彩色图像的人体手持刀行为检测系统及方法通过输入数据处理模块获取训练数据流和实时图像数据流，利用特征提取和处理模块提取所述输入数据处理模块输入图片的边缘直方图特征，并针对刀识别提出了两种特征提取改进方法，利用SVM刀分类器进行手持刀模型训练，生成手持刀SVM分类模型，实现了一种基于RGB彩色图像的人体手持刀行为检测系统，以克服现有技术中视频图像的刀检测识别率低，误检测较多的问题，本发明针对人体手持刀异常行为检测具有较高的召回率和准确率，具有可靠的应用前景。
上述实施例仅例示性说明本发明的原理及其功效，而非用于限制本发明。任何本领域技术人员均可在不违背本发明的精神及范畴下，对上述实施例进行修饰与改变。因此，本发明的权利保护范围，应如权利要求书所列。

Claims (10)

1.一种基于RGB彩色图像的人体手持刀行为检测系统，包括：
输入数据处理模块，用于获取训练数据流和实时图像数据流，并将其输出至特征提取和处理模块；
特征提取和处理模块，用于提取所述输入数据处理模块输入图片的边缘直方图特征，并根据刀检测结果进行特征提取算法改进；
SVM刀分类器，连接所述特征提取和处理模块，用于根据所述特征提取和处理模块输出的特征向量进行手持刀模型训练,生成手持刀SVM分类模型；
检测单元，用于根据实时提取的待测图片的特征，加载离线训练好的手持刀SVM分类模型，进行实时检测并输出结果标签。
2.如权利要求1所述的一种基于RGB彩色图像的人体手持刀行为检测系统，其特征在于：所述输入数据处理模块在训练过程中，从输入视频序列图片中截取人体轮廓附近区域的RGB数据作为研究对象，在实时检测过程中，利用前置摄像头追踪手的位置，并截取手附近区域的RGB数据作为研究对象，并将获取的研究对象输入到所述特征提取和处理模块。
3.如权利要求1所述的一种基于RGB彩色图像的人体手持刀行为检测系统，其特征在于，所述实时图像数据流的获取过程如下：
激活所述前置摄像头的手模块，并设置手追踪模式；
抓取视频流中的图像帧，获取手相关的图像数据；
存储样本图像的缓存数据，生成RGB图像并保存；
释放图像帧，进入下一帧获取循环。
4.如权利要求1所述的一种基于RGB彩色图像的人体手持刀行为检测系统，其特征在于：所述特征提取和处理模块的特征提取采用提取待检测图像的MPEG-7边缘直方图描述符信息作为特征向量；所述特征提取和处理模块的特征处理紧随特征提取操作之后，在80维特征向量之上进行改进；然后将所述的特征向量输入到所述SVM刀分类器。
5.如权利要求4所述的一种基于RGB彩色图像的人体手持刀行为检测系统，其特征在于：所述特征提取和处理模块采用特征旋转法和添加全局边缘特征法进行特征提取算法改进。
6.如权利要求5所述的一种基于RGB彩色图像的人体手持刀行为检测系统，其特征在于：所述特征旋转法通过旋转候选图片的MPEG-7边缘直方图特征，交换80维特征向量中特征值的位置来实现90度、180度和270度三个典型方向的旋转，并具体根据旋转的方向，交换16个图像子块的位置，以及每个图像块中五种边缘类型的位置，以此来适应不同的拍摄角度。
7.如权利要求5所述的一种基于RGB彩色图像的人体手持刀行为检测系统，其特征在于：所述添加最大全局边缘和特征法针对刀的长直边缘特性，提取图像块的全局边缘特征作为新的特征维度与原始MPEG-7边缘直方图特征组成81维特征向量进行后续模型训练，所述全局边缘特征来源于MPEG-7边缘直方图特征，16个图像分割块中连续三个图像块组合特征和的最大边缘类型特征值。
8.如权利要求1所述的一种基于RGB彩色图像的人体手持刀行为检测系统，其特征在于，所述SVM刀分类器的实现过程如下。
选择高斯径向基函数作为非线性支持向量机核函数；
根据特征提取改进算法，确定模型个数和类型；
利用格搜索算法为每个SVM模型寻找最优参数γ和υ；
确定最优性能下的SVM模型参数后，输入训练图片进行离线训练手持刀SVM分类模型。
9.如权利要求1所述的一种基于RGB彩色图像的人体手持刀行为检测系统，其特征在于，所述检测系统还包括报警模块，根据所述SVM刀分类器的图片检测结果的正负标志进行决策。
10.一种基于RGB彩色图像的人体手持刀行为检测方法，包括如下步骤：
步骤一，获取训练数据流和实时图像数据流；
步骤二，提取所述输入数据处理模块输入图片的边缘直方图特征，并根据刀检测结果进行特征提取算法改进；
步骤三，根据特征提取和处理模块输出的特征向量进行手持刀模型训练,生成手持刀SVM分类模型；
步骤四，根据实时提取的待测图片的特征，加载离线训练好的手持刀SVM分类模型，进行实时检测并输出结果标签。
CN201810037077.4A 2018-01-15 2018-01-15 基于rgb彩色图像的人体手持刀行为检测系统及方法 Pending CN108229411A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810037077.4A CN108229411A (zh) 2018-01-15 2018-01-15 基于rgb彩色图像的人体手持刀行为检测系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810037077.4A CN108229411A (zh) 2018-01-15 2018-01-15 基于rgb彩色图像的人体手持刀行为检测系统及方法

Publications (1)

Publication Number Publication Date
CN108229411A true CN108229411A (zh) 2018-06-29

Family

ID=62641318

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810037077.4A Pending CN108229411A (zh) 2018-01-15 2018-01-15 基于rgb彩色图像的人体手持刀行为检测系统及方法

Country Status (1)

Country Link
CN (1) CN108229411A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110207537A (zh) * 2019-06-19 2019-09-06 赵天昊 基于计算机视觉技术的火控装置及其自动瞄准方法
CN112530133A (zh) * 2020-11-22 2021-03-19 李绪明 一种用于识别注射器的装置及方法
CN112580474A (zh) * 2020-12-09 2021-03-30 云从科技集团股份有限公司 基于计算机视觉的目标对象检测方法、系统、设备及介质
WO2022022292A1 (zh) * 2020-07-29 2022-02-03 华为技术有限公司 手持物体识别方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103324955A (zh) * 2013-06-14 2013-09-25 浙江智尔信息技术有限公司 一种基于视频处理的行人检测方法
CN105139003A (zh) * 2015-09-17 2015-12-09 桂林远望智能通信科技有限公司 一种动态人脸识别系统及方法
CN105812721A (zh) * 2014-12-30 2016-07-27 浙江大华技术股份有限公司 一种跟踪监控方法及跟踪监控设备
CN105979203A (zh) * 2016-04-29 2016-09-28 中国石油大学(北京) 一种多摄像机协同监控方法及装置
CN106127141A (zh) * 2016-06-21 2016-11-16 北京小米移动软件有限公司 报警信息生成方法及装置
US20170004357A1 (en) * 2013-02-26 2017-01-05 Elwha Llc Systems and method for activity monitoring

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170004357A1 (en) * 2013-02-26 2017-01-05 Elwha Llc Systems and method for activity monitoring
CN103324955A (zh) * 2013-06-14 2013-09-25 浙江智尔信息技术有限公司 一种基于视频处理的行人检测方法
CN105812721A (zh) * 2014-12-30 2016-07-27 浙江大华技术股份有限公司 一种跟踪监控方法及跟踪监控设备
CN105139003A (zh) * 2015-09-17 2015-12-09 桂林远望智能通信科技有限公司 一种动态人脸识别系统及方法
CN105979203A (zh) * 2016-04-29 2016-09-28 中国石油大学(北京) 一种多摄像机协同监控方法及装置
CN106127141A (zh) * 2016-06-21 2016-11-16 北京小米移动软件有限公司 报警信息生成方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
YANQING HUANG ET AL.: "High-recall Human Abnormal Behavior Detection Using MPEG-7 Descriptor", 《IEEE》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110207537A (zh) * 2019-06-19 2019-09-06 赵天昊 基于计算机视觉技术的火控装置及其自动瞄准方法
WO2022022292A1 (zh) * 2020-07-29 2022-02-03 华为技术有限公司 手持物体识别方法及装置
CN112530133A (zh) * 2020-11-22 2021-03-19 李绪明 一种用于识别注射器的装置及方法
CN112530133B (zh) * 2020-11-22 2022-08-09 李绪明 一种用于识别注射器的装置及方法
CN112580474A (zh) * 2020-12-09 2021-03-30 云从科技集团股份有限公司 基于计算机视觉的目标对象检测方法、系统、设备及介质
CN112580474B (zh) * 2020-12-09 2021-09-24 云从科技集团股份有限公司 基于计算机视觉的目标对象检测方法、系统、设备及介质

Similar Documents

Publication Publication Date Title
CN109670441B (zh) 一种实现安全帽穿戴识别的方法、系统、终端以及计算机可读存储介质
Yousaf et al. Visual analysis of asphalt pavement for detection and localization of potholes
CN108229411A (zh) 基于rgb彩色图像的人体手持刀行为检测系统及方法
Jimenez et al. Traffic sign shape classification and localization based on the normalized FFT of the signature of blobs and 2D homographies
Li et al. Person-independent head pose estimation based on random forest regression
US20190370536A1 (en) Gait recognition system to identify walking subject
CN108573231B (zh) 基于运动历史点云生成的深度运动图的人体行为识别方法
CN106127253B (zh) 一种利用样本特征学习分类的红外弱小目标检测方法
Ahmed et al. IoT-based crowd monitoring system: Using SSD with transfer learning
CN106682641A (zh) 基于fhog‑lbph特征的图像行人识别方法
CN110414571A (zh) 一种基于特征融合的网站报错截图分类方法
CN104301712A (zh) 一种基于视频分析的监控摄像头抖动检测方法
Jang et al. An adult image identification system based on robust skin segmentation
García-Martín et al. Robust real time moving people detection in surveillance scenarios
Iodice et al. Salient feature based graph matching for person re-identification
Kmieć et al. Towards robust visual knife detection in images: active appearance models initialised with shape-specific interest points
Poularakis et al. Finger detection and hand posture recognition based on depth information
CN107330441B (zh) 火焰图像前景提取算法
Raghavendra et al. Robust 2D/3D face mask presentation attack detection scheme by exploring multiple features and comparison score level fusion
Lennon et al. Patch attack invariance: How sensitive are patch attacks to 3d pose?
CN102682291A (zh) 一种场景人数统计方法、装置和系统
Sreelakshmy et al. An improved method for copy-move forgery detection in digital forensic
Balamurali et al. Face spoof detection using vgg-face architecture
Liu et al. Pedestrian detection from still images based on multi-feature covariances
Singh et al. Estimation of crowd density by counting objects

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180629