CN114578306A - 利用毫米波雷达的人体姿态识别方法及存储介质 - Google Patents
利用毫米波雷达的人体姿态识别方法及存储介质 Download PDFInfo
- Publication number
- CN114578306A CN114578306A CN202011488427.2A CN202011488427A CN114578306A CN 114578306 A CN114578306 A CN 114578306A CN 202011488427 A CN202011488427 A CN 202011488427A CN 114578306 A CN114578306 A CN 114578306A
- Authority
- CN
- China
- Prior art keywords
- human body
- millimeter wave
- wave radar
- point cloud
- echo data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 65
- 238000001514 detection method Methods 0.000 claims abstract description 61
- 230000008859 change Effects 0.000 claims description 22
- 238000009499 grossing Methods 0.000 claims description 14
- 230000008030 elimination Effects 0.000 claims description 10
- 238000003379 elimination reaction Methods 0.000 claims description 10
- 238000012935 Averaging Methods 0.000 claims description 5
- 238000006073 displacement reaction Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 6
- 238000001914 filtration Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000005452 bending Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/89—Radar or analogous systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/02—Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
- G01S13/06—Systems determining position data of a target
- G01S13/42—Simultaneous measurement of distance and other co-ordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/411—Identification of targets based on measurements of radar reflectivity
- G01S7/412—Identification of targets based on measurements of radar reflectivity based on a comparison between measured values and known or stored values
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/414—Discriminating targets with respect to background clutter
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/35—Details of non-pulse systems
- G01S7/352—Receivers
- G01S7/354—Extracting wanted echo-signals
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Radar Systems Or Details Thereof (AREA)
Abstract
一种利用毫米波雷达的人体姿态识别方法,所述方法包括:获取毫米波雷达检测范围内的毫米波雷达的回波数据,所述毫米波雷达回波数据包括点云信息;根据所述毫米波雷达回波数据确定所述检测范围内存在人体;根据所述毫米波雷达回波数据的点云信息确定所述人体的质心;根据所述人体的质心去除所述点云信息的噪声;及根据去除噪声的所述点云信息识别人体姿态。本案还提供一种计算机可读存储介质,避免了隐私的泄露及提高了人体姿态识别的准确性。
Description
技术领域
本发明涉及识别领域,具体涉及一种利用毫米波雷达的人体姿态识别方法及计算机可读存储介质。
背景技术
目前,病人在行动不便及老年人在照明不足的情况下,容易发生意外。为了知道意外的发生,人们往往会安装摄像头来监控病人及老年人。但是,摄像头可能会导致病人及老年人的隐私泄露。
发明内容
鉴于此,有必要提供一种利用毫米波雷达的人体姿态识别方法及计算机可读存储介质,避免了隐私的泄露及提高了人体姿态识别的准确性。
本申请的第一方面提供一种利用毫米波雷达的人体姿态识别方法,所述方法包括:
获取毫米波雷达检测范围内的毫米波雷达的回波数据,所述毫米波雷达回波数据包括点云信息;
根据所述毫米波雷达回波数据确定所述检测范围内存在人体;
根据所述毫米波雷达回波数据的点云信息确定所述人体的质心;
根据所述人体的质心去除所述点云信息的噪声;
根据去除噪声的所述点云信息识别人体姿态。
较佳地,所述根据所述毫米波雷达回波数据确定所述检测范围内存在人体包括:
根据所述毫米波雷达回波数据确定所述毫米波雷达的一维距离像;
根据所述毫米波雷达的一维距离像确定所述检测范围内的物体的雷达散射截面;
根据所述雷达散射截面确定所述检测范围内存在人体。
较佳地,所述方法还包括:
获取毫米波雷达检测范围内的前一时间的毫米波雷达回波数据;
所述根据所述毫米波雷达回波数据确定所述检测范围内存在人体包括:
根据所述前一时间的毫米波雷达回波数据及所述毫米波雷达回波数据确定所述毫米波雷达回波数据中存在相位差的区域与不存在相位差的区域的比值;
若所述比值大于预设比值,确定所述检测范围内存在人体。
较佳地,所述根据所述人体的质心去除所述点云信息的噪声包括:
根据所述人体的质心通过鬼影消除方法去除所述点云信息的噪声。
较佳地,所述根据所述人体的质心通过鬼影消除方法去除所述点云信息的噪声包括:
根据所述人体的质心及所述点云信息的信号强度去除所述点云信息的噪声;及/或
去除所述点云信息中与所述人体的质心的距离大于预设距离的点云信息。
较佳地,所述根据所述人体的质心通过鬼影消除方法去除所述点云信息的噪声包括:
去除所述点云信息中预设范围内有效点数过少的噪声。
较佳地,所述根据所述人体的质心去除所述点云信息的噪声包括:
根据所述人体的质心通过资料平滑方法去除所述点云信息的噪声。
较佳地,所述获取毫米波雷达检测范围内的毫米波雷达回波数据包括:
每隔预设时间间隔获取一帧毫米波雷达检测范围内的毫米波雷达回波数据;
所述根据所述人体的质心通过资料平滑方法去除所述点云信息的噪声包括:
确定当前帧毫米波雷达回波数据中人体的质心的位置与前一保存帧毫米波雷达回波数据中人体的质心的位置变化是否大于预设值,所述位置变化包括高度变化及位移量变化中的至少一种;
若当前帧毫米波雷达回波数据中人体的质心的位置与前一保存帧毫米波雷达回波数据中人体的质心的位置变化大于预设值,去除当前帧毫米波雷达回波数据;
若当前帧毫米波雷达回波数据中人体的质心的位置与前一保存帧毫米波雷达回波数据中人体的质心的位置变化小于或等于预设值,保存当前帧毫米波雷达回波数据;
将预设时间内保存的所述帧毫米波雷达回波数据中生物体人体的质心的位置信息进行平均化。
较佳地,根据去除噪声的所述点云信息识别人体姿态包括:
根据所述点云信息与所述人体的质心的位置分布比例识别人体姿态。
本申请的第二方面提供一种计算机可读存储介质,所述计算机可读存储介质存储有至少一个指令,所述至少一个指令被处理器执行以实现如上任意一项所述的人体姿态识别方法。
本案通过毫米波雷达来识别人体姿态,避免了隐私的泄露;通过根据所述毫米波雷达回波数据确定所述检测范围内存在人体,避免了检测范围内不存在人体时也进行人体姿态识别所造成的多余的运算及误判;通过确定所述人体的质心可方便后续的毫米波雷达回波数据的噪声的去除;通过去除所述毫米波雷达回波数据的噪声可方便后续进行有效的特征提取,提高了人体姿态识别的准确性。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本案的人体姿态识别系统的方框图。
图2是本案的人体姿态识别方法的流程图。
图3是图2的人体姿态识别方法中的根据毫米波雷达回波数据确定检测范围内存在人体的流程图。
图4是图2的人体姿态识别方法根据雷达散射截面确定检测范围内存在人体的流程图。
图5是图2的人体姿态识别方法根据人体的质心通过鬼影消除方法去除点云信息的噪声的示意图。
图6是图2的人体姿态识别方法根据去除噪声的点云信息识别人体姿态。
图7是本案的人体姿态识别装置的方框图。
如下具体实施方式将结合上述附图进一步说明本发明。
主要元件符号说明
人体姿态识别系统 10
获取模块 101
检测模块 102
质心确定模块 103
去除模块 104
识别模块 105
人体姿态识别装置 7
毫米波雷达 71
处理器 73
存储器 74
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施例对本发明进行详细描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。
请参阅图1,图1是本案的人体姿态识别系统的方框图。所述人体姿态识别系统10应用于人体姿态识别装置上。所述人体姿态识别系统10包括获取模块101、检测模块102、质心确定模块103、去除模块104及识别模块105。所述获取模块101用于获取毫米波雷达检测范围内的毫米波雷达回波数据,所述毫米波雷达回波数据包括点云信息。所述检测模块102用于根据所述毫米波雷达回波数据确定所述检测范围内存在人体。所述质心确定模块103用于根据所述毫米波雷达回波数据中的点云信息确定所述人体的质心。所述去除模块104用于根据所述人体的质心去除所述点云信息的噪声。识别模块105用于根据去除噪声的所述点云信息识别人体姿态。以下将结合一种人体姿态识别方法的流程图来详细描述模块101~105的具体功能。
请参考图2,图2是本案的人体姿态识别方法的流程图。所述人体姿态识别方法可包括以下步骤:
S21:获取毫米波雷达检测范围内的毫米波雷达回波数据,所述毫米波雷达回波数据包括点云信息。
所述毫米波雷达是指工作频段在毫米波频段的雷达。所述毫米波雷达用于向所述检测范围内发射线性调频连续波信号,并接收检测范围内的毫米波雷达回波数据。所述毫米波雷达回波数据包括物体的距离、物体的速度及物体的角度等。所述物体的距离、所述物体的速度及所述物体的角度可用于确定所述人体的位置信息。所述毫米波雷达回波数据包括稀疏且不均匀的点云信息。所述点云信息包括三维坐标系统中的点的三维坐标值。所述三维坐标包括X轴、Y轴及Z轴。
在所述获取毫米波雷达检测范围内的毫米波雷达回波数据之前,所述方法还可包括:通过模数转换器对所述毫米波雷达检测范围内的毫米波雷达回波数据进行采样。在所述获取毫米波雷达检测范围内的毫米波雷达回波数据之前,所述方法还可包括:对所述毫米波雷达检测范围内的毫米波雷达回波数据进行滤波。
S22:根据所述毫米波雷达回波数据确定所述检测范围内存在人体。
请同时参考图3,所述根据所述毫米波雷达回波数据确定所述检测范围内存在人体可包括:
S31:根据所述毫米波雷达回波数据确定所述毫米波雷达的一维距离像。
在本实施例中,所述根据所述毫米波雷达回波数据确定所述毫米波雷达的一维距离像包括:对所述毫米波雷达回波数据进行距离变换,生成所述毫米波雷达的一维距离像。
在所述根据所述毫米波雷达回波数据确定所述毫米波雷达的一维距离像之前,所述方法还可包括:获取向所述检测范围内发射的线性调频连续波信号。
所述根据所述毫米波雷达回波数据确定所述毫米波雷达的一维距离像包括:将所述线性调频连续波信号及所述毫米波雷达回波数据进行混频;根据混频后的信号确定所述毫米波雷达的一维距离像。
S32:根据所述毫米波雷达的一维距离像确定所述检测范围内的物体的雷达散射截面。
在本实施例中,所述根据所述毫米波雷达的一维距离像确定所述检测范围内的物体的雷达散射截面的值后,先针对所述检测范围内的物体的雷达散射截面的值做标准偏差运算,接着再针对所述标准偏差运算后的雷达散射截面的值再做平滑运算处理得到的数值。所述检测范围内的物体的雷达散射截面的值经过标准化运算及平滑运算处理后,需大于一预设比值,确定所述检测范围内存在人体。
在所述检测范围内的物体的雷达散射截面的值做标准偏差运算之前,所述方法还包括:对所述毫米波雷达的一维距离像进行静态滤波。
所述平滑运算处理还包括:通过低通滤波器对所述标准偏差运算后的雷达散射截面的值进行平滑处理。所述低通滤波器可为阿尔法滤波器。
S33:根据所述雷达散射截面确定所述检测范围内存在人体。
请一并参考图4,所述根据所述雷达散射截面确定所述检测范围内存在人体包括:
S41:判断所述雷达散射截面是否大于一阈值。
S42:若所述雷达散射截面大于所述阈值,确定所述检测范围内存在人体。
S43:若所述雷达散射截面小于或等于所述阈值,确定所述检测范围内不存在人体,流程结束。
在本实施例中,所述方法还包括:获取毫米波雷达检测范围内的前一时间的毫米波雷达回波数据。所述根据所述毫米波雷达回波数据确定所述检测范围内存在人体可包括:根据所述前一时间的毫米波雷达回波数据及所述毫米波雷达回波数据确定所述毫米波雷达回波数据中存在相位差的区域与不存在相位差的区域的比值;若所述比值大于预设比值,确定所述检测范围内存在人体。在本实施例中,所述人体为人或形状似人的物体。
S23:根据所述毫米波雷达回波数据中的点云信息确定所述人体的质心。
所述人体的质心是指物质系统上被认为质量所集中在的一个假想点。所述人体的质心可用于代表所述人体。所述人体的质心不能超出所述人体的范围。
在本实施例中,所述根据所述毫米波雷达回波数据中的点云信息确定所述人体的质心包括:利用目标追踪模型采用卡尔曼滤波算法根据所述毫米波雷达回波数据中的点云信息追踪所述人体的动态信息,根据追踪的所述人体的动态信息确定所述人体的各点的位置信息,并根据所述位置信息确定所述人体的质心。在本实施例中,所述目标追踪模型为Gtrack算法。在本实施例中,本发明可通过所述卡尔曼滤波算法过滤噪声的影响。
S24:根据所述人体的质心去除所述点云信息的噪声。
所述根据所述人体的质心去除所述点云信息的噪声可包括:根据所述人体的质心通过鬼影消除方法去除所述点云信息的噪声。
所述根据所述人体的质心通过鬼影消除方法去除所述点云信息的噪声可包括:根据所述人体的质心及所述点云信息的信号强度去除所述点云信息的噪声。所述根据所述人体的质心及所述点云信息的信号强度去除所述点云信息的噪声包括:去除所述点云信息中信号强度比(SNR)小于预设强度的数据。所述预设强度可为0,0.05分贝等。
所述根据所述人体的质心通过鬼影消除方法去除所述点云信息的噪声可包括:去除所述点云信息中与所述人体的质心的距离大于预设距离的点云信息。从而,可将离所述人体的质心较远的点滤除,提高了后续姿态识别的准确性。所述去除所述毫米波雷达回波数据中与所述人体的质心的距离大于预设距离的毫米波雷达回波数据包括:去除所述毫米波雷达回波数据中与所述人体的质心在第一预设方向的距离大于第一预设距离的毫米波雷达回波数据,去除所述毫米波雷达回波数据中与所述人体的质心在第二预设方向的距离大于第二预设距离的毫米波雷达回波数据,及去除所述毫米波雷达回波数据中与所述人体的质心在第三预设方向的距离大于第三预设距离的毫米波雷达回波数据。所述第一预设距离、所述第二预设距离及所述第三预设距离可分别为例如,X轴、Y轴及Z轴中的不同的轴,或者为与所述X轴、Y轴及Z轴中的不同的轴呈预设角度的直线等。
请同时参考图5,图5是人体姿态识别方法根据所述人体的质心通过鬼影消除方法去除点云信息的噪声的示意图。在图5中,第一帧毫米波雷达回波数据、第二帧毫米波雷达回波数据及第三帧毫米波雷达回波数据皆存在人体A。其中所述第一帧毫米波雷达回波数据包括A的点云信息、B的点云信息、C的点云信息、D的点云信息。其中,B的点云信息、C的点云信息、及D的点云信息的信号强度比所述A的点云信息的信号强度低或者与所述A的质心的距离大于预设距离,则将所述第一帧毫米波雷达回波数据中的B的点云信息、C的点云信息、D的点云信息去除。所述第二帧毫米波雷达回波数据包括A的点云信息、B的点云信息、D的点云信息。其中,B的点云信息、D的点云信息的信号强度比所述A的点云信息的信号强度低或者与所述A的质心的距离大于预设距离,则将所述第二帧毫米波雷达回波数据中的B的点云信息、D的点云信息去除。所述第三帧毫米波雷达回波数据包括A的点云信息、E的点云信息、F的点云信息、G的点云信息、H的点云信息。其中,E的点云信息、F的点云信息、G的点云信息、H的点云信息的信号强度比所述A的点云信息的信号强度低或者与所述A的质心的距离大于预设距离,则将所述第三帧毫米波雷达回波数据中的B的点云信息、D的点云信息去除。
所述根据所述人体的质心去除所述毫米波雷达回波数据的噪声还可包括:根据所述人体的质心通过资料平滑方法去除所述毫米波雷达回波数据的噪声。
在本实施例中,所述获取毫米波雷达检测范围内的毫米波雷达回波数据包括:每隔预设时间间隔获取一帧毫米波雷达检测范围内的毫米波雷达回波数据。所述根据所述人体的质心通过资料平滑方法去除所述毫米波雷达回波数据的噪声包括:确定当前帧毫米波雷达回波数据中人体的质心的位置与前一保存帧毫米波雷达回波数据中人体的质心的位置变化是否大于预设值,所述位置变化包括高度变化及位移量变化中的至少一种;若当前帧毫米波雷达回波数据中人体的质心的位置与前一保存帧毫米波雷达回波数据中人体的质心的位置变化大于预设值,去除当前帧毫米波雷达回波数据;若当前帧毫米波雷达回波数据中人体的质心的位置与前一保存帧毫米波雷达回波数据中人体的质心的位置变化小于或等于预设值,保存当前帧毫米波雷达回波数据。在本实施例中,若当前帧毫米波雷达回波数据为第一帧,所述前一保存帧毫米波雷达回波数据为所述当前帧毫米波雷达回波数据。
所述根据所述人体的质心通过资料平滑方法去除所述毫米波雷达回波数据的噪声还包括:将预设时间内保存的所述帧毫米波雷达回波数据中人体的质心的位置信息进行平均化。所述将预设时间内保存的所述帧毫米波雷达回波数据中人体的质心的位置信息进行平均化包括:将预设时间内保存的所述帧毫米波雷达回波数据中人体的质心的高度及位移量中的至少一种进行平均化。
S25:根据去除噪声的所述点云信息识别人体姿态。
请参考图6,所述根据去除噪声的所述点云信息识别人体姿态包括:
S61:确定去除噪声的所述点云信息对应的相似度最高的人体姿态。
在本实施例中,所述确定去除噪声的所述点云信息对应的相似度最高的人体姿态可包括:根据人体的质心确定去除噪声的所述点云信息对应的相似度最高的人体姿态。
所述确定去除噪声的所述点云信息对应的相似度最高的人体姿态可包括:通过轮廓描绘方式,根据去除噪声的所述点云信息获取所述人体的特征信息;根据所述人体的特征信息确定去除噪声的所述点云信息对应的相似度最高的人体姿态。
所述通过轮廓描绘方式,根据去除噪声的所述点云信息获取所述人体的特征信息包括:通过轮廓描绘方式,根据去除噪声的所述点云信息及预设关系获取所述人体的特征信息,所述预设关系包括所述点云信息中预设数据与所述人体的特征信息之间的关系。所述预设关系如下表1所示:
表1
在本实施例中,所述三轴包括X轴、Y轴及Z轴。所述人体姿态包括蹲下、站立、前进、后退、坐下、弯腰、摔倒中的至少一种。
显然,本发明还可无需人体的质心确定去除噪声的所述点云信息对应的相似度最高的人体姿态。此时,表1中的人体在三轴上的数据与人体的质心的距离分布比例与三轴上的数据与质心的紧密程度的间的关系可省略。
S62:判断所述点云信息与相似度最高的所述人体姿态的相似度是否大于预设姿态阈值。
S63:若所述点云信息与相似度最高的所述人体姿态的相似度大于预设姿态阈值,监控所述人体姿态在预设帧点云信息中的信心程度。
所述预设帧点云信息为毫米波雷达动态接收多帧的所述点云信息,执行去除噪声的所述点云信息后并平滑处理后的预设帧点云信息。例如,毫米波雷达动态连续接收第一帧至第十三帧点云信息,去除其中具有噪声的三帧所述点云信息后,留下其中十帧点云信息,然后再经平滑处理后,做为预设帧点云信息。接着,毫米波雷达动态继续连续接收多帧点云信息,并动态调整更新所述预设帧点云信息。
所述监控所述人体姿态在预设帧点云信息中的信心程度包括:根据所述预设帧点云信息确定待确定人体姿态,比较所述人体姿态与所述待确定人体姿态来判断所述人体姿态在预设帧点云信息中的信心程度。
在本实施例中,所述方法还包括:若所述点云信息与相似度最高的所述人体姿态的相似度小于或等于预设姿态阈值,流程结束。
S64:判断所述人体姿态在预设帧点云信息中的信心程度是否大于预设信心程度。
S65:若所述人体姿态在预设帧点云信息中的信心程度大于预设信心程度,输出所述人体姿态。
在本实施例中,所述人体姿态与所述待确定人体姿态的相似度越高,所述人体姿态在预设帧点云信息中的信心程度越高,所述人体姿态与所述待确定人体姿态的相似度越低,所述人体姿态在预设帧点云信息中的信心程度越低。
在本实施例中,所述方法还包括:若所述人体姿态在预设帧点云信息中的信心程度小于或等于预设信心程度,流程结束。
本案通过毫米波雷达来识别人体姿态,避免了隐私的泄露;通过根据所述毫米波雷达回波数据确定所述检测范围内存在人体,避免了检测范围内不存在人体时也进行人体姿态识别所造成的多余的运算及误判;通过确定所述人体的质心可方便后续的点云信息的噪声的去除;通过去除所述点云信息的噪声可方便后续进行有效的特征提取,提高了人体姿态识别的准确性;通过鬼影消除方法去除所述点云信息的噪声,可在距离及信号强度上去除噪声;通过数据平滑方法去除所述点云信息的噪声,可在时间上去除噪声。
请参考图7,图7是本案的人体姿态识别装置的方框图。所述人体姿态识别装置7包括:毫米波雷达71、模数转换器(图未示)、至少一个处理器73、存储器74、及存储在所述存储器74中并可在所述至少一个处理器73上运行的人体姿态识别系统10。
所述毫米波雷达71用于向所述检测范围内发射线性调频连续波信号,并接收检测范围内的毫米波雷达回波数据。
所述毫米波雷达71包括所述模数转换器对所述毫米波雷达检测范围内的毫米波雷达回波数据进行采样。
所述至少一个处理器73执行所述人体姿态识别系统10时实现上述方法实施例中的步骤。或者,所述至少一个处理器73执行所述人体姿态识别系统10时实现上述系统实施例中的各模块的功能。
示例性的,所述人体姿态识别系统10可以被分割成一个或多个模块/单元,例如图1中的各模块,所述一个或者多个模块/单元被存储在所述存储器74中,并由所述至少一个处理器73执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述人体姿态识别系统10在所述人体姿态识别装置7中的执行过程。例如,所述人体姿态识别系统10可以被分割成各模块。
所述人体姿态识别装置7可以为任何一种电子产品,例如,个人计算机、平板计算机、智能手机、个人数字助理(Personal Digital Assistant,PDA)等。本领域技术人员可以理解,所述示意图7仅是人体姿态识别装置7的示例,并不构成对人体姿态识别装置7的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述人体姿态识别装置7还可以包括总线等。
所述至少一个处理器73可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可程序设计门阵列(Field-Programmable Gate Array,FPGA)或者其他可程序设计逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。该处理器73可以是微处理器或者该处理器73也可以是任何常规的处理器等,所述处理器73是所述人体姿态识别装置7的控制中心,利用各种接口和线路连接整个人体姿态识别装置7的各个部分。
所述存储器74可用于存储所述人体姿态识别系统10和/或模块/单元,所述处理器73通过运行或执行存储在所述存储器74内的计算机可读指令和/或模块/单元,以及调用存储在存储器74内的数据,实现所述人体姿态识别装置7的各种功能。所述存储器74可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据人体姿态识别装置7的使用所创建的数据(比如音频数据等)等。此外,存储器74可以包括非易失性计算机可读存储介质,例如硬盘、内存、插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。
所述人体姿态识别装置7集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁盘、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)等。
最后应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神范围。
Claims (10)
1.一种利用毫米波雷达的人体姿态识别方法,所述方法包括:
获取毫米波雷达检测范围内的毫米波雷达的回波数据,所述毫米波雷达回波数据包括点云信息;
根据所述毫米波雷达回波数据确定所述检测范围内存在人体;
根据所述毫米波雷达回波数据的点云信息确定所述人体的质心;
根据所述人体的质心去除所述点云信息的噪声;及
根据去除噪声的所述点云信息识别人体姿态。
2.如权利要求1所述的人体姿态识别方法,其特征在于,所述根据所述毫米波雷达回波数据确定所述检测范围内存在人体包括:
根据所述毫米波雷达回波数据确定所述毫米波雷达的一维距离像;
根据所述毫米波雷达的一维距离像确定所述检测范围内的物体的雷达散射截面;
根据所述雷达散射截面确定所述检测范围内存在人体。
3.如权利要求1所述的人体姿态识别方法,其特征在于,所述方法还包括:
获取毫米波雷达检测范围内的前一时间的毫米波雷达回波数据;
所述根据所述毫米波雷达回波数据确定所述检测范围内存在人体包括:
根据所述前一时间的毫米波雷达回波数据及所述毫米波雷达回波数据确定所述毫米波雷达回波数据中存在相位差的区域与不存在相位差的区域的比值;
若所述比值大于预设比值,确定所述检测范围内存在人体。
4.如权利要求1所述的人体姿态识别方法,其特征在于,所述根据所述人体的质心去除所述点云信息的噪声包括:
根据所述人体的质心通过鬼影消除方法去除所述点云信息的噪声。
5.如权利要求4所述的人体姿态识别方法,其特征在于,所述根据所述人体的质心通过鬼影消除方法去除所述点云信息的噪声包括:
根据所述人体的质心及所述点云信息的信号强度去除所述点云信息的噪声;及/或
去除所述点云信息中与所述人体的质心的距离大于预设距离的点云信息。
6.如权利要求4所述的人体姿态识别方法,其特征在于,所述根据所述人体的质心通过鬼影消除方法去除所述点云信息的噪声包括:
去除所述点云信息中预设范围内有效点数过少的噪声。
7.如权利要求1所述的人体姿态识别方法,其特征在于,所述根据所述人体的质心去除所述点云信息的噪声包括:
根据所述人体的质心通过资料平滑方法去除所述点云信息的噪声。
8.如权利要求7所述的人体姿态识别方法,其特征在于:
所述获取毫米波雷达检测范围内的毫米波雷达回波数据包括:
每隔预设时间间隔获取一帧毫米波雷达检测范围内的毫米波雷达回波数据;
所述根据所述人体的质心通过资料平滑方法去除所述点云信息的噪声包括:
确定当前帧毫米波雷达回波数据中人体的质心的位置与前一保存帧毫米波雷达回波数据中人体的质心的位置变化是否大于预设值,所述位置变化包括高度变化及位移量变化中的至少一种;
若当前帧毫米波雷达回波数据中人体的质心的位置与前一保存帧毫米波雷达回波数据中人体的质心的位置变化大于预设值,去除当前帧毫米波雷达回波数据;
若当前帧毫米波雷达回波数据中人体的质心的位置与前一保存帧毫米波雷达回波数据中人体的质心的位置变化小于或等于预设值,保存当前帧毫米波雷达回波数据;
将预设时间内保存的所述帧毫米波雷达回波数据中生物体人体的质心的位置信息进行平均化。
9.如权利要求1所述的人体姿态识别方法,其特征在于,根据去除噪声的所述点云信息识别人体姿态包括:
根据所述点云信息与所述人体的质心的位置分布比例识别人体姿态。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有至少一个指令,所述至少一个指令被处理器执行以实现如权利要求1至9中任意一项所述的人体姿态识别方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW109142131A TWI769602B (zh) | 2020-11-30 | 2020-11-30 | 利用毫米波雷達的人體姿態識別方法及電腦可讀存儲介質 |
TW109142131 | 2020-11-30 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114578306A true CN114578306A (zh) | 2022-06-03 |
Family
ID=81752494
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011488427.2A Pending CN114578306A (zh) | 2020-11-30 | 2020-12-16 | 利用毫米波雷达的人体姿态识别方法及存储介质 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220171024A1 (zh) |
CN (1) | CN114578306A (zh) |
TW (1) | TWI769602B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116449363A (zh) * | 2023-03-30 | 2023-07-18 | 森思泰克河北科技有限公司 | 基于雷达的闹钟控制方法、装置、雷达及存储介质 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100111370A1 (en) * | 2008-08-15 | 2010-05-06 | Black Michael J | Method and apparatus for estimating body shape |
CN102697503A (zh) * | 2012-02-29 | 2012-10-03 | 北京无线电计量测试研究所 | 一种基于毫米波成像的人体检测方法 |
CN106468772A (zh) * | 2016-09-23 | 2017-03-01 | 南京特艺科技有限公司 | 一种基于距离‑多普勒量测的多站雷达人体跟踪方法 |
CN109239707A (zh) * | 2018-08-27 | 2019-01-18 | 成都工业学院 | 行为状态检测设备及方法 |
TWI653610B (zh) * | 2017-12-01 | 2019-03-11 | 拓連科技股份有限公司 | 利用雷達之跌倒偵測系統及方法,及相關電腦程式產品 |
CN110045370A (zh) * | 2019-05-10 | 2019-07-23 | 成都宋元科技有限公司 | 基于毫米波雷达的人体感知方法及其系统 |
CN110058220A (zh) * | 2019-05-05 | 2019-07-26 | 广东勘生科技有限公司 | 基于毫米波雷达技术的火灾探测救援方法及系统 |
CN110361725A (zh) * | 2018-04-11 | 2019-10-22 | 英飞凌科技股份有限公司 | 使用毫米波雷达进行人类检测和识别的系统和方法 |
CN110412378A (zh) * | 2019-07-30 | 2019-11-05 | 北京经纬恒润科技有限公司 | 目标物体检测方法及装置 |
CN111652953A (zh) * | 2020-06-29 | 2020-09-11 | 中国电子科技集团公司第十四研究所 | 一种利用区域搜索和像素值抑制的安检图像伪影去除方法 |
US20200322439A1 (en) * | 2019-04-02 | 2020-10-08 | Chiun Mai Communication Systems, Inc. | Method for tracking persons and state of tracked person and device employing method |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8963811B2 (en) * | 2011-06-27 | 2015-02-24 | Sct Technology, Ltd. | LED display systems |
CN105989625A (zh) * | 2015-02-04 | 2016-10-05 | 华为技术有限公司 | 数据处理的方法和装置 |
US11241167B2 (en) * | 2016-08-17 | 2022-02-08 | The Regents Of The University Of Colorado, A Body Corporate | Apparatus and methods for continuous and fine-grained breathing volume monitoring |
IL265930B2 (en) * | 2019-04-08 | 2023-05-01 | Essence Security International Esi Ltd | Method and device for detection |
CN110208793B (zh) * | 2019-04-26 | 2022-03-11 | 纵目科技(上海)股份有限公司 | 基于毫米波雷达的辅助驾驶系统、方法、终端和介质 |
CN110456343B (zh) * | 2019-07-22 | 2021-05-28 | 深圳普捷利科技有限公司 | 一种基于fmcw毫米波雷达的即时定位方法及系统 |
CN110632617B (zh) * | 2019-09-29 | 2021-11-02 | 北京邮电大学 | 一种激光雷达点云数据处理的方法及装置 |
CN111047827B (zh) * | 2019-12-03 | 2021-06-25 | 北京深测科技有限公司 | 环境辅助生活的智能监控方法及系统 |
CN111372363A (zh) * | 2020-04-09 | 2020-07-03 | 珠海格力电器股份有限公司 | 灯具的控制方法、设备、存储介质和灯具 |
-
2020
- 2020-11-30 TW TW109142131A patent/TWI769602B/zh active
- 2020-12-16 CN CN202011488427.2A patent/CN114578306A/zh active Pending
-
2021
- 2021-11-30 US US17/539,114 patent/US20220171024A1/en active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100111370A1 (en) * | 2008-08-15 | 2010-05-06 | Black Michael J | Method and apparatus for estimating body shape |
CN102697503A (zh) * | 2012-02-29 | 2012-10-03 | 北京无线电计量测试研究所 | 一种基于毫米波成像的人体检测方法 |
CN106468772A (zh) * | 2016-09-23 | 2017-03-01 | 南京特艺科技有限公司 | 一种基于距离‑多普勒量测的多站雷达人体跟踪方法 |
TWI653610B (zh) * | 2017-12-01 | 2019-03-11 | 拓連科技股份有限公司 | 利用雷達之跌倒偵測系統及方法,及相關電腦程式產品 |
CN110361725A (zh) * | 2018-04-11 | 2019-10-22 | 英飞凌科技股份有限公司 | 使用毫米波雷达进行人类检测和识别的系统和方法 |
CN109239707A (zh) * | 2018-08-27 | 2019-01-18 | 成都工业学院 | 行为状态检测设备及方法 |
US20200322439A1 (en) * | 2019-04-02 | 2020-10-08 | Chiun Mai Communication Systems, Inc. | Method for tracking persons and state of tracked person and device employing method |
CN110058220A (zh) * | 2019-05-05 | 2019-07-26 | 广东勘生科技有限公司 | 基于毫米波雷达技术的火灾探测救援方法及系统 |
CN110045370A (zh) * | 2019-05-10 | 2019-07-23 | 成都宋元科技有限公司 | 基于毫米波雷达的人体感知方法及其系统 |
CN110412378A (zh) * | 2019-07-30 | 2019-11-05 | 北京经纬恒润科技有限公司 | 目标物体检测方法及装置 |
CN111652953A (zh) * | 2020-06-29 | 2020-09-11 | 中国电子科技集团公司第十四研究所 | 一种利用区域搜索和像素值抑制的安检图像伪影去除方法 |
Non-Patent Citations (1)
Title |
---|
许志猛 等: "基于空间聚类的FMCW 雷达双人行为识别方法", 福州大学学报( 自然科学版), vol. 48, no. 4, 31 August 2020 (2020-08-31) * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116449363A (zh) * | 2023-03-30 | 2023-07-18 | 森思泰克河北科技有限公司 | 基于雷达的闹钟控制方法、装置、雷达及存储介质 |
CN116449363B (zh) * | 2023-03-30 | 2024-01-19 | 森思泰克河北科技有限公司 | 基于雷达的闹钟控制方法、装置、雷达及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US20220171024A1 (en) | 2022-06-02 |
TWI769602B (zh) | 2022-07-01 |
TW202223437A (zh) | 2022-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210041555A1 (en) | System and method for camera radar fusion | |
US11074800B2 (en) | Fall detection method and apparatus | |
CN110874594B (zh) | 基于语义分割网络的人体外表损伤检测方法及相关设备 | |
CN109541583B (zh) | 一种前车距离检测方法及系统 | |
JP2020079781A (ja) | 相対的位置姿勢の決定方法、装置、機器及び媒体 | |
CN111815754B (zh) | 一种三维信息确定方法、三维信息确定装置及终端设备 | |
CN109934065B (zh) | 一种用于手势识别的方法和装置 | |
US20220375106A1 (en) | Multi-target tracking method, device and computer-readable storage medium | |
CN111814752B (zh) | 室内定位实现方法、服务器、智能移动设备、存储介质 | |
CN108090486B (zh) | 一种台球比赛中的图像处理方法及装置 | |
CN112069879A (zh) | 一种目标人物跟随方法、计算机可读存储介质及机器人 | |
CN111242065B (zh) | 一种便携式车载智能驾驶系统 | |
US11308346B2 (en) | Sensor information integration system, sensor information integration method, and program | |
CN113392681A (zh) | 人体跌倒检测方法、装置及终端设备 | |
CN114578306A (zh) | 利用毫米波雷达的人体姿态识别方法及存储介质 | |
CN114764912A (zh) | 驾驶行为识别方法、设备和存储介质 | |
EP3715910A1 (en) | Motion state detection apparatus and method based on wireless signals and system | |
CN113064118A (zh) | 声源定位方法和装置 | |
CN116236173A (zh) | 基于毫米波雷达的智能养老监护管理系统 | |
CN114972415B (zh) | 机器人视觉跟踪方法、系统、电子设备及介质 | |
CN115601435A (zh) | 车辆姿态检测方法、装置、车辆及存储介质 | |
CN114200934A (zh) | 机器人目标跟随控制方法、装置、电子设备和存储介质 | |
CN115937007B (zh) | 风切变的识别方法、装置、电子设备及介质 | |
CN111110348B (zh) | 定位方法、定位装置、定位系统及计算机可读存储介质 | |
CN109833029B (zh) | 一种睡眠分期方法、系统及终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |