CN109299659A - 一种基于rgb相机和深度学习的人体姿态识别方法与系统 - Google Patents

一种基于rgb相机和深度学习的人体姿态识别方法与系统 Download PDF

Info

Publication number
CN109299659A
CN109299659A CN201810956644.6A CN201810956644A CN109299659A CN 109299659 A CN109299659 A CN 109299659A CN 201810956644 A CN201810956644 A CN 201810956644A CN 109299659 A CN109299659 A CN 109299659A
Authority
CN
China
Prior art keywords
human body
human
joint points
body attitude
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810956644.6A
Other languages
English (en)
Inventor
王庆
唐晖
陈洪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Agricultural University
Original Assignee
China Agricultural University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Agricultural University filed Critical China Agricultural University
Priority to CN201810956644.6A priority Critical patent/CN109299659A/zh
Publication of CN109299659A publication Critical patent/CN109299659A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供了一种基于RGB相机和深度学习的人体姿态识别方法与系统，包括：S1、获取待识别图像；S2、将待识别图像输入至训练好的第一神经网络，进行人体目标检测，获取人体目标图像；S3、将人体目标图像输入至训练好的第二神经网络，进行人体关节点位置检测，获取待匹配人体关节点位置信息；S4、将待匹配人体关节点位置信息进行模板匹配，识别出人体姿态。本发明基于采用Faster‑RCNN算法的深度卷积神经网络作为第一神经网络进行人体目标检测，以及采用CPM算法的深度卷积神经网络作为第二神经网络进行人体关节点位置检测，能够快速、准确地从待识别图像中准确识别人体关节点的位置信息，从而识别出人体姿态。

Description

一种基于RGB相机和深度学习的人体姿态识别方法与系统
技术领域
本发明涉及人体姿态识别领域，尤其涉及一种基于RGB相机和深度学习的人体姿态识别方法与系统。
背景技术
人体姿态识别是人机交互的重要部分，以人为中心的交互方式，近年来得到了越来越多的关注，在各领域具有广阔的应用前景。由于人体姿态的多样性，背景干扰，衣服以及其他物体的遮挡等情况，准确识别人体姿态具有很大挑战性。
人体姿态识别是人机交互的一项关键技术，传统的人体姿态识别是基于人工提取特征，这种方法的识别速度慢，准确率低和鲁棒性较差，而随着微软Kinect设备在2010年的推出，给人体姿态识别带来极大的方便，人体姿态识别应用微软Kinect设备得到较大的发展，在Kinect设备使用过程中，一般采用深度摄像头，该深度摄像头还兼具红外传感摄像头的功能，但是若采用深度摄像头，则会存在深度摄像头的识别范围较小、自身分辨率较低、物体边缘容易产生空洞，延迟较大等问题；若采用红外传感摄像头，则会存在分辨率较低、纹理和色彩缺失，以及容易受到各种热源噪声影响等问题，而这些都限制了Kinect设备的应用；同时，在2017年10月份，微软宣布永久停产Kinect设备产品，使得微软Kinect设备在后续使用中存在较大不变，目前人体姿态识别领域亟需一种能替代微软Kinect设备的产品。
因此，目前的人体姿态识别领域，存在人工提取特征识别速度慢、准确率低和鲁棒性较差，或依赖微软Kinect设备，从而受深度摄像头限制的问题。
发明内容
为了解决目前人体姿态识别领域，存在人工提取特征识别速度慢、准确率低和鲁棒性较差，或依赖微软Kinect设备，从而受深度摄像头限制的问题，一方面，本发明提供了一种人体姿态识别方法，包括：
S1、获取待识别图像；S2、将待识别图像输入至训练好的第一神经网络，进行人体目标检测，获取人体目标图像；S3、将人体目标图像输入至训练好的第二神经网络，进行人体关节点位置检测，获取待匹配人体关节点位置信息；S4、将待匹配人体关节点位置信息进行模板匹配，识别出人体姿态。
优选地，步骤S1和步骤S2之间，还包括：对待识别图像进行图像预处理，图像预处理包括图像去噪和图像滤波。
优选地，第一神经网络为采用Faster-RCNN算法的深度卷积神经网络。
优选地，第二神经网络为采用CPM算法的深度卷积神经网络。
另一方面，本发明还提供了一种人体姿态识别系统，包括：依次连接的拍摄装置、人体目标检测装置、人体关节点位置检测装置和人体姿态识别装置。
其中，拍摄装置用于获取待识别图像；人体目标检测装置用于将待识别图像输入至训练好的第一神经网络，进行人体目标检测，获取人体目标图像；人体关节点位置检测装置用于将人体目标图像输入至训练好的第二神经网络，进行人体关节点位置检测，获取待匹配人体关节点位置信息；人体姿态识别装置用于将待匹配人体关节点位置信息进行模板匹配，识别出人体姿态。
优选地，人体姿态识别系统还包括图像预处理装置，拍摄装置和人体目标检测装置分别与图像预处理装置连接，图像预处理装置用于对待识别图像进行图像预处理。
优选地，人体关节点位置检测装置包括依次连接的人体关节点定位单元和人体关节点分类单元，人体关节点定位单元用于根据人体目标检测装置获取的人体目标图像确认人体关节点的位置信息；人体关节点分类单元用于根据人体关节点的位置信息确认待匹配人体关节点位置信息。
优选地，拍摄装置包括单目RGB相机。
优选地，人体姿态识别装置包括人体姿态匹配模板，人体姿态识别装置根据待匹配人体关节点位置信息与人体姿态匹配模板进行模板匹配，识别出人体姿态。
优选地，人体关节点的位置和数目根据人体姿态匹配模板设定。
本发明提供了一种基于RGB相机和深度学习的人体姿态识别方法与系统，基于采用Faster-RCNN算法的深度卷积神经网络作为第一神经网络进行人体目标检测，以及采用CPM算法的深度卷积神经网络作为第二神经网络进行人体关节点位置检测，能够快速、准确地从待识别图像中准确识别人体关节点的位置信息，从而识别出人体姿态。
附图说明
图1为根据本发明一个优选实施方式的一种人体姿态识别方法的流程示意图；
图2为根据本发明一个优选实施方式的一种人体姿态识别系统的结构示意图。
具体实施方式
下面结合附图和实施例，对本发明的具体实施方式作进一步详细描述。以下实施例用于说明本发明，但不用来限制本发明的范围。
目前的人体姿态识别领域，存在人工提取特征识别速度慢，准确率低和鲁棒性较差，或依赖微软Kinect设备，从而受深度摄像头限制的问题，因此目前人体姿态识别领域亟需一种能替代微软Kinect设备且不受深度摄像头的限制的产品，同时也能克服传统的人工提取特征识别速度慢、准确率低和鲁棒性较差的问题。
图1为根据本发明一个优选实施方式的一种人体姿态识别方法的流程示意图，如图1所示，本发明实施例提供了一种人体姿态识别方法，该方法包括：
S1、获取待识别图像；S2、将待识别图像输入至训练好的第一神经网络，进行人体目标检测，获取人体目标图像；S3、将人体目标图像输入至训练好的第二神经网络，进行人体关节点位置检测，获取待匹配人体关节点位置信息；S4、将待匹配人体关节点位置信息进行模板匹配，识别出人体姿态。
具体地，首先，需要获取待识别图像，待识别图像通常由照相机或摄像机采集，待识别图像中包含目标人体；将待识别图像经第一神经网络进行人体目标检测，从而获取人体目标图像；再讲人体目标图像经第二神经网络进行人体关节点位置检测，对人体目标图像中人体关节点位置进行定位和分类，获取待匹配的人体关节点位置信息；最后将人体关节点位置信息与预先设定的模板进行模板匹配，从而识别出人体姿态。
进一步地，步骤S1和步骤S2之间，还包括：对待识别图像进行图像预处理，图像预处理包括图像去噪和图像滤波。由于拍摄到的待识别图像可能出现噪声大、变形、模糊等情况，因此对待识别图像做预处理，可以有效地达到降噪、矫正形变、去除模糊等目的，为后续人体目标检测提供方便。
基于上述实施例，第一神经网络为采用Faster-RCNN算法的深度卷积神经网络。
对于目标检测算法近些两年出现很多，典型代表有Faster-RCNN、YOLOV2、SSD等模型。本发明实施例中，人体目标检测中，主要采用Faster-RCNN算法。
Faster-RCNN网络是目前目标的识别检测准确率比较高的深度学习算法。FasterR-CNN模型主要有两部分结构组成：RPN网络和Fast-RCNN网络。RPN网络的作用是人体目标候选框提取，Fast R-CNN网络对RPN网络提取的人体目标候选框进行分类和回归，这两个网络相互配合生成较高置信度的目标检测边框。
具体地，人体目标检测中，从待识别图像中检测到人体信息，用矩形框框处人体，从而获得人体目标图像。其中，采用Faster-RCNN算法的深度卷积神经网络，能快速、有效地从待识别图像中获取人体目标图像并输出。
基于上述实施例，第二神经网络为采用CPM算法的深度卷积神经网络。
人体关节点位置检测主要使用的是CPM(使用顺序化的卷积架构来表达空间信息和纹理信息)和Stacked Hourglass(使用多个残差沙漏结构捕捉人体多尺度特征)，本发明实施例中，人体关节点位置检测主要采用CPM算法。
人体关节点位置检测CPM算法是一种顺序化的卷积架构，通过设计了多阶段网络来表达空间信息和纹理信息，后面阶段使用前面阶段的检测结果和从人体检测框图像提取的特征作为输入，这样做同时利用了人体关节点局部信息和人体全局信息，更好的融合空间信息、纹理信息以及中心约束。
具体地，人体关节点点位置检测中，定位人体目标图像中的人体关节点位置信息。其中，采用CPM算法的深度卷积神经网络，同时利用了人体关节点局部信息和人体全局信息，更好的融合空间信息、纹理信息以及中心约束。
本发明实施例中，人体关节点位置具体包括但不限于以下15类别：头顶、顶部、颈下脊椎，左肩、右肩、左肘、右肘、左手腕、右手腕、左胯、右胯、左膝、右膝、左脚踝和右脚踝。
图2为根据本发明一个优选实施方式的一种人体姿态识别系统的结构示意图，如图2所示，本发明还提供了一种人体姿态识别系统，该系统包括：依次连接的拍摄装置、人体目标检测装置、人体关节点位置检测装置和人体姿态识别装置。
具体地，拍摄装置用于获取待识别图像；人体目标检测装置用于将待识别图像输入至训练好的第一神经网络，进行人体目标检测，获取人体目标图像；人体关节点位置检测装置用于将人体目标图像输入至训练好的第二神经网络，进行人体关节点位置检测，获取待匹配人体关节点位置信息；人体姿态识别装置用于将待匹配人体关节点位置信息进行模板匹配，识别出人体姿态。
进一步地，拍摄装置、人体目标检测装置、人体关节点位置检测装置和人体姿态识别装置可以通过有线设备集成于一体；也可以分别独立设置而互相通过无线信号传输，从而完成人体姿态识别。
基于上述实施例，人体姿态识别系统还包括图像预处理装置，拍摄装置和人体目标检测装置分别与图像预处理装置连接，图像预处理装置用于对待识别图像进行图像预处理。
具体地，图像预处理装置设于拍摄装置和人体目标检测装置之间，拍摄装置拍摄的待识别图像经过图像预处理装置之后，再传输至人体目标检测装置。图像预处理装置用于对所述拍摄单元提取的每一帧图像进行图像变换和滤波预处理，将预处理后的图像输入到所述人体目标检测单元来更好地进行人体目标检测。
进一步地，本发明实施例中，拍摄装置包括单目RGB相机，只需要通过单目RGB相机采集二维图像即可快速、准确地完成人体姿态识别，而不需要深度信息，消除了目前人体姿态识别领域对深度摄像机的依赖，以及深度摄像机识别范围较小、自身分辨率较低、物体边缘容易产生空洞，延迟较大等问题，有利于人体姿态识别的普及与大众化。
基于上述实施例，人体关节点位置检测装置包括依次连接的人体关节点定位单元和人体关节点分类单元，人体关节点定位单元用于根据人体目标检测装置获取的人体目标图像确认人体关节点的位置信息；人体关节点分类单元用于根据人体关节点位置信息确认待匹配人体关节点位置信息，将获取的人体关节点位置分类成不同类别。
具体地，人体关节点定位单元的输出，为人体关节点位置在人体目标图像中的二维坐标。
进一步地，人体姿态识别装置包括人体姿态匹配模板，人体姿态识别装置根据待匹配人体关节点位置信息与人体姿态匹配模板进行模板匹配，识别出人体姿态。
具体地，人体姿态识别装置，将人体关节点位置检测装置中人体关节点定位单元输出的人体目标图像中的人体关节点位置的二维坐标，与预先设定的人体姿态匹配模板作比较，将人体关节点位置与人体姿态匹配模板中的某一种预设的人体姿态匹配。
例如，人体在RGB相机前面连续做出两个或两个以上的姿态，人体目标检测装置和人体姿态检测装置就会识别出人体关节点位置信息，人体姿态匹配装置根据识别到的人体关节点位置信息，按照模板匹配法将人体关节点位置信息匹配到预定义好的两个或两个以上的姿态，从而实现人体姿态识别的操作。
其中，人体姿态模板中预设的人体姿态具体包括但不限于：右手向上举起、左手向上举起、双臂伸开、双手交叉抱胸、体感交互开始指令的人体姿态、体感交互介绍指令的人体姿态、体感拍摄指令的人体姿态。各人体姿态根据人体不同关节点的角度和关节点之间的长短距离来定义。
进一步地，人体关节点的位置和数目根据人体姿态匹配模板设定。由于人体姿态取决于人体关节点的位置，因此可以使得人体姿态的具体数目和具体样式能够根据实际需要而进行预先定义，从而使得对人体姿态识别的控制更加方便快捷。
本发明提供了一种基于RGB相机和深度学习的人体姿态识别方法与系统，基于采用Faster-RCNN算法的深度卷积神经网络作为第一神经网络进行人体目标检测，以及采用CPM算法的深度卷积神经网络作为第二神经网络进行人体关节点位置检测，能够快速、准确地从待识别图像中准确识别人体关节点的位置信息，从而识别出人体姿态。同时，拍摄单元只需单目RGB相机采集二维图像来识别人体关节点，降低了对专业摄像设备的需求。
最后，本发明的方法仅为较佳的实施方案，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种人体姿态识别方法，其特征在于，包括：
S1、获取待识别图像；
S2、将所述待识别图像输入至训练好的第一神经网络，进行人体目标检测，获取人体目标图像；
S3、将所述人体目标图像输入至训练好的第二神经网络，进行人体关节点位置检测，获取待匹配人体关节点位置信息；
S4、将所述待匹配人体关节点位置信息进行模板匹配，识别出人体姿态。
2.根据权利要求1所述的一种人体姿态识别方法，其特征在于，步骤S1和步骤S2之间，还包括：
对所述待识别图像进行图像预处理，所述图像预处理包括图像去噪和图像滤波。
3.根据权利要求1所述的一种人体姿态识别方法，其特征在于，所述第一神经网络为采用Faster-RCNN算法的深度卷积神经网络。
4.根据权利要求1-3任一项所述的一种人体姿态识别方法，其特征在于，所述第二神经网络为采用CPM算法的深度卷积神经网络。
5.一种人体姿态识别系统，其特征在于，包括：依次连接的拍摄装置、人体目标检测装置、人体关节点位置检测装置和人体姿态识别装置；
所述拍摄装置，用于获取待识别图像；
所述人体目标检测装置，用于将所述待识别图像输入至训练好的第一神经网络，进行人体目标检测，获取人体目标图像；
所述人体关节点位置检测装置，用于将所述人体目标图像输入至训练好的第二神经网络，进行人体关节点位置检测，获取待匹配人体关节点位置信息；
所述人体姿态识别装置，用于将所述待匹配人体关节点位置信息进行模板匹配，识别出人体姿态。
6.根据权利要求5所述的一种人体姿态识别系统，其特征在于，还包括图像预处理装置，所述拍摄装置和所述人体目标检测装置分别与所述图像预处理装置连接，所述图像预处理装置用于对所述待识别图像进行图像预处理。
7.根据权利要求5所述的一种人体姿态识别系统，其特征在于，所述人体关节点位置检测装置包括依次连接的人体关节点定位单元和人体关节点分类单元，
所述人体关节点定位单元用于根据所述人体目标检测装置获取的人体目标图像确认人体关节点的位置信息；
所述人体关节点分类单元用于根据所述人体关节点的位置信息确认待匹配人体关节点位置信息。
8.根据权利要求5所述的一种人体姿态识别系统，其特征在于，所述拍摄装置包括单目RGB相机。
9.根据权利要求7所述的一种人体姿态识别系统，其特征在于，所述人体姿态识别装置包括人体姿态匹配模板，所述人体姿态识别装置根据所述待匹配人体关节点位置信息与人体姿态匹配模板进行模板匹配，识别出人体姿态。
10.根据权利要求9所述的一种人体姿态识别系统，其特征在于，人体关节点的位置和数目根据所述人体姿态匹配模板设定。
CN201810956644.6A 2018-08-21 2018-08-21 一种基于rgb相机和深度学习的人体姿态识别方法与系统 Pending CN109299659A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810956644.6A CN109299659A (zh) 2018-08-21 2018-08-21 一种基于rgb相机和深度学习的人体姿态识别方法与系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810956644.6A CN109299659A (zh) 2018-08-21 2018-08-21 一种基于rgb相机和深度学习的人体姿态识别方法与系统

Publications (1)

Publication Number Publication Date
CN109299659A true CN109299659A (zh) 2019-02-01

Family

ID=65165455

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810956644.6A Pending CN109299659A (zh) 2018-08-21 2018-08-21 一种基于rgb相机和深度学习的人体姿态识别方法与系统

Country Status (1)

Country Link
CN (1) CN109299659A (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110008913A (zh) * 2019-04-08 2019-07-12 南京工业大学 基于姿态估计与视点机制融合的行人再识别方法
CN110147743A (zh) * 2019-05-08 2019-08-20 中国石油大学(华东) 一种复杂场景下的实时在线行人分析与计数系统及方法
CN110222558A (zh) * 2019-04-22 2019-09-10 桂林电子科技大学 基于深度学习的手部关键点检测方法
CN110321795A (zh) * 2019-05-24 2019-10-11 平安科技（深圳）有限公司 用户姿态识别方法、装置、计算机装置及计算机存储介质
CN110569724A (zh) * 2019-08-05 2019-12-13 湖北工业大学 一种基于残差沙漏网络的人脸对齐方法
CN110580445A (zh) * 2019-07-12 2019-12-17 西北工业大学 一种基于GIoU和加权NMS改进的人脸关键点检测方法
CN110639169A (zh) * 2019-09-25 2020-01-03 燕山大学 基于游戏和肌电信号的cpm下肢康复训练方法及系统
CN110826401A (zh) * 2019-09-26 2020-02-21 广州视觉风科技有限公司 一种人体肢体语言识别方法及系统
CN110928408A (zh) * 2019-11-11 2020-03-27 中国电子科技集团公司电子科学研究院 基于二维图像人体姿态匹配的人机交互方法及装置
CN111062364A (zh) * 2019-12-28 2020-04-24 青岛理工大学 一种基于深度学习的监测装配操作的方法和装置
CN111126157A (zh) * 2019-11-27 2020-05-08 北京华捷艾米科技有限公司 一种数据标注方法及装置
CN111231892A (zh) * 2019-12-29 2020-06-05 的卢技术有限公司 一种基于人脸和手势识别的汽车自动解锁控制方法及系统
CN111428609A (zh) * 2020-03-19 2020-07-17 辽宁石油化工大学 一种基于深度学习的人体姿态识别方法及系统
CN112381001A (zh) * 2020-11-16 2021-02-19 四川长虹电器股份有限公司 基于专注度的智能电视用户识别方法及装置
CN112784723A (zh) * 2021-01-14 2021-05-11 金陵科技学院 一种基于IFast-RCNN算法的道路交通安全保护模型
CN112800834A (zh) * 2020-12-25 2021-05-14 温州晶彩光电有限公司 一种基于跪拜行为识别来定位炫彩射灯的方法及系统
CN113712538A (zh) * 2021-08-30 2021-11-30 平安科技（深圳）有限公司 基于wifi信号的跌倒检测方法、装置、设备和存储介质
CN114783059A (zh) * 2022-04-20 2022-07-22 浙江东昊信息工程有限公司 一种基于深度相机的寺庙香客参拜管理方法和系统
WO2022188056A1 (zh) * 2021-03-10 2022-09-15 深圳市大疆创新科技有限公司 图像处理方法、装置及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106897658A (zh) * 2015-12-18 2017-06-27 腾讯科技（深圳）有限公司 人脸活体的鉴别方法和装置
CN107239728A (zh) * 2017-01-04 2017-10-10 北京深鉴智能科技有限公司 基于深度学习姿态估计的无人机交互装置与方法
CN108182416A (zh) * 2017-12-30 2018-06-19 广州海昇计算机科技有限公司 一种无人机监控场景下的人体行为识别方法、系统及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106897658A (zh) * 2015-12-18 2017-06-27 腾讯科技（深圳）有限公司 人脸活体的鉴别方法和装置
CN107239728A (zh) * 2017-01-04 2017-10-10 北京深鉴智能科技有限公司 基于深度学习姿态估计的无人机交互装置与方法
CN108182416A (zh) * 2017-12-30 2018-06-19 广州海昇计算机科技有限公司 一种无人机监控场景下的人体行为识别方法、系统及装置

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110008913A (zh) * 2019-04-08 2019-07-12 南京工业大学 基于姿态估计与视点机制融合的行人再识别方法
CN110222558A (zh) * 2019-04-22 2019-09-10 桂林电子科技大学 基于深度学习的手部关键点检测方法
CN110147743A (zh) * 2019-05-08 2019-08-20 中国石油大学(华东) 一种复杂场景下的实时在线行人分析与计数系统及方法
CN110321795A (zh) * 2019-05-24 2019-10-11 平安科技（深圳）有限公司 用户姿态识别方法、装置、计算机装置及计算机存储介质
CN110321795B (zh) * 2019-05-24 2024-02-23 平安科技（深圳）有限公司 用户姿态识别方法、装置、计算机装置及计算机存储介质
CN110580445B (zh) * 2019-07-12 2023-02-07 西北工业大学 一种基于GIoU和加权NMS改进的人脸关键点检测方法
CN110580445A (zh) * 2019-07-12 2019-12-17 西北工业大学 一种基于GIoU和加权NMS改进的人脸关键点检测方法
CN110569724A (zh) * 2019-08-05 2019-12-13 湖北工业大学 一种基于残差沙漏网络的人脸对齐方法
CN110569724B (zh) * 2019-08-05 2021-06-04 湖北工业大学 一种基于残差沙漏网络的人脸对齐方法
CN110639169A (zh) * 2019-09-25 2020-01-03 燕山大学 基于游戏和肌电信号的cpm下肢康复训练方法及系统
CN110826401A (zh) * 2019-09-26 2020-02-21 广州视觉风科技有限公司 一种人体肢体语言识别方法及系统
CN110826401B (zh) * 2019-09-26 2023-12-26 广州视觉风科技有限公司 一种人体肢体语言识别方法及系统
CN110928408A (zh) * 2019-11-11 2020-03-27 中国电子科技集团公司电子科学研究院 基于二维图像人体姿态匹配的人机交互方法及装置
CN111126157A (zh) * 2019-11-27 2020-05-08 北京华捷艾米科技有限公司 一种数据标注方法及装置
CN111126157B (zh) * 2019-11-27 2023-08-25 北京华捷艾米科技有限公司 一种数据标注方法及装置
CN111062364A (zh) * 2019-12-28 2020-04-24 青岛理工大学 一种基于深度学习的监测装配操作的方法和装置
CN111062364B (zh) * 2019-12-28 2023-06-30 青岛理工大学 一种基于深度学习的监测装配操作的方法和装置
CN111231892A (zh) * 2019-12-29 2020-06-05 的卢技术有限公司 一种基于人脸和手势识别的汽车自动解锁控制方法及系统
CN111428609A (zh) * 2020-03-19 2020-07-17 辽宁石油化工大学 一种基于深度学习的人体姿态识别方法及系统
CN112381001A (zh) * 2020-11-16 2021-02-19 四川长虹电器股份有限公司 基于专注度的智能电视用户识别方法及装置
CN112800834B (zh) * 2020-12-25 2022-08-12 温州晶彩光电有限公司 一种基于跪拜行为识别来定位炫彩射灯的方法及系统
CN112800834A (zh) * 2020-12-25 2021-05-14 温州晶彩光电有限公司 一种基于跪拜行为识别来定位炫彩射灯的方法及系统
CN112784723A (zh) * 2021-01-14 2021-05-11 金陵科技学院 一种基于IFast-RCNN算法的道路交通安全保护模型
WO2022188056A1 (zh) * 2021-03-10 2022-09-15 深圳市大疆创新科技有限公司 图像处理方法、装置及存储介质
CN113712538A (zh) * 2021-08-30 2021-11-30 平安科技（深圳）有限公司 基于wifi信号的跌倒检测方法、装置、设备和存储介质
CN114783059A (zh) * 2022-04-20 2022-07-22 浙江东昊信息工程有限公司 一种基于深度相机的寺庙香客参拜管理方法和系统

Similar Documents

Publication Publication Date Title
CN109299659A (zh) 一种基于rgb相机和深度学习的人体姿态识别方法与系统
CN106650687B (zh) 一种基于深度信息和骨骼信息的姿势矫正方法
US20180186452A1 (en) Unmanned Aerial Vehicle Interactive Apparatus and Method Based on Deep Learning Posture Estimation
Hussain et al. Hand gesture recognition using deep learning
US10417775B2 (en) Method for implementing human skeleton tracking system based on depth data
CN107688391B (zh) 一种基于单目视觉的手势识别方法和装置
CN105930767B (zh) 一种基于人体骨架的动作识别方法
US9898651B2 (en) Upper-body skeleton extraction from depth maps
Dikovski et al. Evaluation of different feature sets for gait recognition using skeletal data from Kinect
Uddin et al. Human activity recognition using body joint‐angle features and hidden Markov model
CN109176512A (zh) 一种体感控制机器人的方法、机器人及控制装置
CN114067358A (zh) 一种基于关键点检测技术的人体姿态识别方法及系统
CN104200200B (zh) 融合深度信息和灰度信息实现步态识别的系统及方法
CN105426827A (zh) 活体验证方法、装置和系统
CN110490109B (zh) 一种基于单目视觉的在线人体康复动作识别方法
CN110008913A (zh) 基于姿态估计与视点机制融合的行人再识别方法
CN111027432B (zh) 基于步态特征的视觉跟随机器人方法
CN106815855A (zh) 基于产生式和判别式结合的人体运动跟踪方法
CN108875586B (zh) 一种基于深度图像与骨骼数据多特征融合的功能性肢体康复训练检测方法
CN110796101A (zh) 一种嵌入式平台的人脸识别方法及系统
KR102377767B1 (ko) 손동작 및 팔동작 학습기반 수화 번역 시스템 및 방법
CN109325408A (zh) 一种手势判断方法及存储介质
CN111860451A (zh) 一种基于人脸表情识别的游戏交互方法
Li et al. Posture recognition technology based on kinect
Yan et al. Human-object interaction recognition using multitask neural network

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190201

RJ01 Rejection of invention patent application after publication