JP7484492B2 - レーダーに基づく姿勢認識装置、方法及び電子機器 - Google Patents
レーダーに基づく姿勢認識装置、方法及び電子機器 Download PDFInfo
- Publication number
- JP7484492B2 JP7484492B2 JP2020109968A JP2020109968A JP7484492B2 JP 7484492 B2 JP7484492 B2 JP 7484492B2 JP 2020109968 A JP2020109968 A JP 2020109968A JP 2020109968 A JP2020109968 A JP 2020109968A JP 7484492 B2 JP7484492 B2 JP 7484492B2
- Authority
- JP
- Japan
- Prior art keywords
- feature
- range
- conditions
- period
- condition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 74
- 238000001514 detection method Methods 0.000 claims description 51
- 230000000877 morphologic effect Effects 0.000 claims description 10
- 230000015654 memory Effects 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 3
- 230000036544 posture Effects 0.000 description 68
- 238000010586 diagram Methods 0.000 description 9
- 238000004364 calculation method Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 230000001052 transient effect Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000002354 daily effect Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000003203 everyday effect Effects 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/415—Identification of targets based on measurements of movement associated with the target
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
- G06V40/25—Recognition of walking or running movements, e.g. gait recognition
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/87—Combinations of radar systems, e.g. primary radar and secondary radar
- G01S13/874—Combination of several systems for attitude determination
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/411—Identification of targets based on measurements of radar reflectivity
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/418—Theoretical aspects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/23—Clustering techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/07—Target detection
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Data Mining & Analysis (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- Human Computer Interaction (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Social Psychology (AREA)
- Evolutionary Computation (AREA)
- Multimedia (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Radar Systems Or Details Thereof (AREA)
Description
検出ターゲットから反射されてきたレーダーエコー信号に基づいてレーダー反射点情報を取得し、前記レーダー反射点情報に対してクラスタリングを行う取得ユニット;
第一期間で、クラスタリングにより得られたターゲット点セットについて、空間形態特徴情報及び/又は移動特徴情報を計算する計算ユニット;
第二期間で、複数の前記第一期間の前記空間形態特徴情報及び/又は前記移動特徴情報に対して統計を行い、前記第二期間内の移動過程特徴情報を得る統計ユニット;及び
判定ユニットを含み、
前記判定ユニットは、
現在の時刻の所在する第二期間内の移動過程特徴情報及び前記現在の時刻の所在する第一期間の前記空間形態特徴情報及び/又は前記移動特徴情報を特徴集合とし、前記特徴集合が第一条件集合を満足するかを判断し、
前記特徴集合が第一条件集合を満足する場合、前記検出ターゲットの姿勢を「床に横たわる」と判定し、
前記特徴集合が前記第一条件集合を満足しない場合、前記特徴集合が第二条件集合を満足するかを判断し、前記特徴集合が前記第二条件集合を満足するときに、前記特徴集合が第三条件集合を満足するかを判断し、前記特徴集合が前記第三条件集合を満足すれば、前記検出ターゲットの姿勢を「ベッドに横たわる」と判定し、
前記特徴集合が前記第二条件集合又は前記第三条件集合を満足しない場合、前記特徴集合が第四条件集合を満足するかを判断し、前記特徴集合が前記第四条件集合を満足するときに、前記特徴集合が第五条件集合を満足するかを判断し、前記特徴集合が前記第五条件集合を満足すれば、前記検出ターゲットの姿勢を「歩く」と判定する。
検出ターゲットから反射されてきたレーダーエコー信号に基づいてレーダー反射点情報を取得し、前記レーダー反射点情報に対してクラスタリングを行い;
第一期間で、クラスタリングにより得られたターゲット点セットについて、空間形態特徴情報及び/又は移動特徴情報を計算し;
第二期間で、複数の前記第一期間の前記空間形態特徴情報及び/又は前記移動特徴情報に対して統計を行い、前記第二期間内の移動過程特徴情報を取得し;及び
現在の時刻の所在する第二期間内の移動過程特徴情報及び前記現在の時刻の所在する第一期間の前記空間形態特徴情報及び/又は前記移動特徴情報を特徴集合とし、前記特徴集合が第一条件集合を満足するかを判断し、
前記特徴集合が第一条件集合を満足する場合、前記検出ターゲットの姿勢を「床に横たわる」と判定し、
前記特徴集合が前記第一条件集合を満足しない場合、前記特徴集合が第二条件集合を満足するかを判断し、前記特徴集合が前記第二条件集合を満足するときに、前記特徴集合が第三条件集合を満足するかを判断し、前記特徴集合が前記第三条件集合を満足すれば、前記検出ターゲットの姿勢を「ベッドに横たわる」と判定し、
前記特徴集合が前記第二条件集合又は前記第三条件集合を満足しない場合、前記特徴集合が第四条件集合を満足するかを判断し、前記特徴集合が前記第四条件集合を満足するときに、前記特徴集合が第五条件集合を満足するかを判断し、前記特徴集合が前記第五条件集合を満足すれば、前記検出ターゲットの姿勢を「歩く」と判定する。
本発明の実施例は、レーダーに基づく姿勢認識方法を提供し、図1は、本発明の実施例中のレーダーに基づく姿勢認識方法を示す図である。図1に示すように、該方法は、以下の操作(ステップ)を含む。
102:第一期間で、クラスタリングにより得られたターゲット点セット(point set)について空間形態特徴情報(spatial morphological feature information)及び/又は移動特徴情報(motion feature information)を計算し;
103:第二期間で、複数の第一期間の空間形態特徴情報及び/又は移動特徴情報に対して統計を行い、第二期間内の移動過程特徴情報(motion process feature
information)を取得し;及び
104:現在の時刻の所在する第二期間内の移動過程特徴情報及び現在の時刻の所在する第一期間の空間形態特徴情報及び/又は移動特徴情報を特徴集合とし、特徴集合が第一条件集合を満足するかを判断し;
105:特徴集合が第一条件集合を満足する場合、検出ターゲットの姿勢を「床に横たわる」と判定し、例えば、lie(floor)とマーキング(ラベル付け)し;
106:特徴集合が第一条件集合を満足しない場合、特徴集合が第二条件集合を満足するかを判断し、特徴集合が第二条件集合を満足するときに、特徴集合が第三条件集合を満足するかを判断し、特徴集合が第三条件集合を満足すれば、検出ターゲットの姿勢を「ベッドに横たわる」と判定し、例えば、lie(bed)とマーキングし;
107:特徴集合が第二条件集合又は第三条件集合を満足しない場合、特徴集合が第四条件集合を満足するかを判断し、特徴集合が第四条件集合を満足するときに、特徴集合が第五条件集合を満足するかを判断し、特徴集合が第五条件集合を満足すれば、検出ターゲットの姿勢を「歩く」と判定し、例えば、walkとマーキングする。
であり、x及びyは、反射される平面座標であり、zは、地面までの高さである。なお、如何に検出ターゲットの空間情報及び速度情報を得るか、如何にクラスタリングを行うかなどについては、関連技術を参照することができる。
である)、第二期間の開始の第三期間(例えば、1s)内でrが第三特徴閾値(例えば、0.5m)よりも大きい数r_range_1s、第二期間内でtarget.dopplerが第四特徴閾値(例えば、0.2m/s)よりも大きい数doppler_2s、第二期間の開始の第三期間(例えば、1s)内でtarget.dopplerが第四特徴閾値(例えば、0.2m/s)より大きい数doppler_1s、及び第二期間内でx_range及びy_rangeがすべてz_rangeの半分よりも大きい数x_y_05zを含む。
本発明の実施例は、レーダーに基づく姿勢認識装置を提供する。ここでは、第一側面の実施例と同じ内容の記載が省略される。
計算ユニット402:第一期間で、クラスタリングにより得られたターゲット点セットについて空間形態特徴情報及び/又は移動特徴情報を計算し;
統計ユニット403:第二期間で、複数の第一期間の空間形態特徴情報及び/又は移動特徴情報に対して統計を行い、第二期間内の移動過程特徴情報を取得し;及び
判定ユニット404:現在の時刻の所在する第二期間内の移動過程特徴情報及び現在の時刻の所在する第一期間の空間形態特徴情報及び/又は移動特徴情報を特徴集合とし、特徴集合が第一条件集合を満足するかを判断し;特徴集合が第一条件集合を満足する場合、検出ターゲットの姿勢を「床に横たわる」と判定し;特徴集合が第一条件集合を満足しない場合、特徴集合が第二条件集合を満足するかを判断し、特徴集合が第二条件集合を満足するときに、特徴集合が第三条件集合を満足するかを判断し、特徴集合が第三条件集合を満足すれば、検出ターゲットの姿勢を「ベッドに横たわる」と判定し;及び、特徴集合が第二条件集合又は第三条件集合を満足しない場合、特徴集合が第四条件集合を満足するかを判断し、特徴集合が第四条件集合を満足するときに、特徴集合が第五条件集合を満足するかを判断し、特徴集合が第五条件集合を満足すれば、検出ターゲットの姿勢を「歩く」と判定する。
である)、第二期間の開始の第三期間(例えば、1s)内でrが第三特徴閾値(例えば、0.5m)よりも大きい数r_range_1s、第二期間内でtarget.dopplerが第四特徴閾値(例えば、0.2m/s)よりも大きい数doppler_2s、第二期間の開始の第三期間(例えば、1s)内でtarget.dopplerが第四特徴閾値(例えば、0.2m/s)より大きい数doppler_1s、及び第二期間内でx_range及びy_rangeがすべてz_rangeの半分よりも大きい数x_y_05zを含む。
本発明の実施例は、電子機器を提供し、それは、第二側面の実施例に記載のレーダーに基づく姿勢認識装置を含む。なお、ここでは、その内容の記載を省略する。該電子機器は、例えば、コンピュータ、サーバ、ワークステーション、ノートパソコン、スマートフォンなどであっても良いが、本発明の実施例は、これに限られない。
レーダーに基づく姿勢認識方法であって、
検出ターゲットから反射されてきたレーダーエコー信号に基づいてレーダー反射点情報を取得し、前記レーダー反射点情報に対してクラスタリングを行い;
第一期間(例えば、0.2s)で、クラスタリングにより得られたターゲット点セットについて空間形態特徴情報及び/又は移動特徴情報を計算し;
第二期間(例えば、2s)で、複数の前記第一期間(例えば、10個)の前記空間形態特徴情報及び/又は前記移動特徴情報に対して統計を行い、前記第二期間内の移動過程特徴情報を取得し;及び
現在の時刻の所在する第二期間内の移動過程特徴情報及び前記現在の時刻の所在する第一期間の前記空間形態特徴情報及び/又は前記移動特徴情報を特徴集合とし、前記特徴集合が第一条件集合を満足するかを判断し;前記特徴集合が第一条件集合を満足する場合、前記検出ターゲットの姿勢を「床に横たわる」と判定し;前記特徴集合が前記第一条件集合を満足しない場合、前記特徴集合が第二条件集合を満足するかを判断し、前記特徴集合が前記第二条件集合を満足するときに、前記特徴集合が第三条件集合を満足するかを判断し、前記特徴集合が前記第三条件集合を満足すれば、前記検出ターゲットの姿勢を「床に横たわる」と判定し;前記特徴集合が前記第二条件集合又は前記第三条件集合を満足しない場合、前記特徴集合が第四条件集合を満足するかを判断し、前記特徴集合が前記第四条件集合を満足するときに、前記特徴集合が第五条件集合を満足するかを判断し、前記特徴集合が前記第五条件集合を満足すれば、前記検出ターゲットの姿勢を「歩く」と判定することを含む、方法。
付記1に記載の方法であって、さらに、
前記特徴集合が前記第五条件集合を満足しない場合、前記特徴集合が第六条件集合を満足するかを判断し、前記特徴集合が前記第六条件集合を満足する場合、前記検出ターゲットの姿勢を「座る」と判定し、前記特徴集合が前記第六条件集合を満足しない場合、前記検出ターゲットの姿勢を「立つ」と判定することを含む、方法。
付記1に記載の方法であって、さらに、
前記特徴集合が前記第五条件集合を満足しない場合前記特徴集合が第八条件集合を満足するかを判断し、前記特徴集合が前記第八条件集合を満足する場合、前記検出ターゲットの姿勢を「立つ」と判定し;
前記特徴集合が前記第八条件集合を満足しない場合、前記特徴集合が第九条件集合を満足するかを判断し、前記特徴集合が前記第九条件集合を満足する場合、前記検出ターゲットの姿勢を「座る」と判定し;及び
前記特徴集合が前記第九条件集合を満足しない場合、前記特徴集合が第十条件集合を満足するかを判断し、前記特徴集合が前記第十条件集合を満足する場合、前記検出ターゲットの姿勢を「座る」と判定し、前記特徴集合が前記第十条件集合を満足しない場合、前記検出ターゲットの姿勢を「立つ」と判定することを含む、方法。
付記1乃至3の任意の1項に記載の方法であって、さらに、
前記特徴集合が前記第四条件集合を満足しない場合、前記特徴集合が第七条件集合を満足するかを判断し、前記特徴集合が前記第七条件集合を満足する場合、前記検出ターゲットの姿勢を「床に座る」と判定することを含む、方法。
付記1乃至4の任意の1項に記載の方法であって、
前記空間形態特徴情報は、前記ターゲット点セットの高さ平均値z_mid、前記ターゲット点セットの高さ最大値z_max、前記ターゲット点セットの長さx_range、前記ターゲット点セットの幅y_range、及び前記ターゲット点セットの高さz_rangeを含み、
前記移動過程特徴情報は、前記第二期間内でx_range又はy_rangeがz_rangeよりも大きい数xy_z、前記第二期間内でx_range又はy_rangeが第一特徴閾値(例えば、1m)よりも大きい数xy_1、前記第一期間内のx_range及びy_rangeの最大値とz_rangeとの比shape_ratio、前記第二期間内のx_rangeとy_rangeとの標準偏差の最大値xy_range_var、前記第二期間内でz_rangeが第二特徴閾値(例えば、1m)よりも大きい数z_1、及び前記第二期間内でターゲット点セットが連続して空である数Lost_frame_numを含み、
前記第一条件集合は、z_midが第一条件閾値(例えば、0.3m)よりも小さく、且つz_maxが第二条件閾値(例えば、0.8m)よりも低く、且つxy_zとxy_1との和がゼロよりも大きく、且つshape_ratioが1よりも大きく、
前記第二条件集合は、xy_1がゼロより大きく、
前記第三条件集合は、xy_zがゼロよりも大きく、且つz_midが第三条件閾値(例えば、1m)よりも小さく、且つz_rangeが第四条件閾値(例えば、1m)よりも小さく、且つxy_range_varが第五条件閾値(例えば、0.2)よりも大きく、
前記第四条件集合は、z_1が第六条件閾値(例えば、6)よりも大きく、
前記第五条件集合は、Lost_frame_numが第七条件閾値(例えば、Nである)よりも小さい、方法
(付記6)
付記5に記載の方法であって、
前記移動特徴情報は、前記ターゲット点セットにおける反射点の最大速度target.dopplerを含み、
前記移動過程特徴情報はさらに、前記第二期間内でrが第三特徴閾値(例えば、0.5m)よりも大きい数r_range_2s(ここで、
である)、前記第二期間の開始の第三期間(例えば、1s)内でrが第三特徴閾値(例えば、0.5m)よりも大きい数r_range_1s、前記第二期間内でtarget.dopplerが第四特徴閾値(例えば、0.2m/s)よりも大きい数doppler_2s、及び前記第二期間の開始の第三期間(例えば、1s)内でtarget.dopplerが第四特徴閾値(例えば、0.2m/s)より大きい数doppler_1sを含み、
前記第六条件集合は、r_range_2sが第八条件閾値(例えば、5)以上であり、且つdoppler_2sが第九条件閾値(例えば、4)以上であり、或いは、r_range_1sが第十条件閾値(例えば、3)以上であり、且つdoppler_1sが第十一条件閾値(例えば、3)以上である。
付記5に記載の方法であって、
前記移動特徴情報はさらに、前記ターゲット点セットにおける高さが第五特徴閾値(例えば、z0)より大きい反射点の速度平均値v_upper_mean、前記ターゲット点セットにおける高さが第五特徴閾値(例えば、z0)以下の反射点の速度平均値v_lower_mean、前記ターゲット点セットの高さが第六特徴閾値(例えば、z1)より大きい平面中心位置xy_upper、及び前記ターゲット点セットの高さが第六特徴閾値(例えば、z1)以下の平面中心位置xy_lowerを含み、
前記移動過程特徴情報はさらに、前記第二期間内の後ろの半分(例えば、2sのうちの後ろの1s)の複数のターゲット点セットのxy_upperと前記第二期間の開始時刻のxy_upperとの間の距離の平均値d_upper_mean、前記第二期間内の期間全体(例えば、2s)の複数のターゲット点セットのxy_upperと前記第二期間の開始時刻のxy_upperとの間の距離の標準偏差d_upper_var、前記第二期間内の後ろの半分(例えば、2sのうちの後ろの1s)の複数のターゲット点セットのxy_lowerと前記第二期間の開始時刻のxy_lowerとの間の距離の平均値d_lower_mean、前記第二期間内の期間全体(例えば、2s)の複数のターゲット点セットのxy_lowerと前記第二期間の開始時刻のxy_lowerとの間距離の標準偏差d_lower_var、及び前記第二期間内でv_upper_meanがv_lower_meanより大きい数v_maskを含み、
前記第八条件集合は、r_range_2sが第十二条件閾値(例えば、3)よりも小さく、
前記第九条件集合は、d_upper_varがd_lower_varよりも大きく、且つd_upper_meanとd_lower_meanとの差が第十三条件閾値(例えば、0.15m)以上であり、
前記第十条件集合は、v_maskが第十四条件閾値(例えば、5)以上である、方法。
付記6又は7に記載の方法であって、
前記移動過程特徴情報はさらに、前記第二期間内でx_range及びy_rangeがともにz_rangeの半分よりも大きい数x_y_05z含み、
前記第七条件集合は、z_midが第十五条件閾値(例えば、0.6m)よりも小さく、且つz_maxが第十六条件閾値(例えば、1m)よりも低く、且つx_y_05zがゼロよりも大きい、方法。
Claims (8)
- レーダーに基づく、姿勢を認識する装置であって、
検出ターゲットから反射されてきたレーダーエコー信号に基づいてレーダー反射点情報を取得し、前記レーダー反射点情報に対してクラスタリングを行う取得ユニット;
第一期間で、クラスタリングにより得られたターゲット点セットについて空間形態特徴情報及び/又は移動特徴情報を計算する計算ユニット;
第二期間で、複数の前記第一期間の前記空間形態特徴情報及び/又は前記移動特徴情報に対して統計を行い、前記第二期間内の移動過程特徴情報を得る統計ユニット;及び
判定ユニットを含み、
前記判定ユニットは、
現在の時刻の所在する第二期間内の移動過程特徴情報及び前記現在の時刻の所在する第一期間の前記空間形態特徴情報及び/又は前記移動特徴情報を特徴集合とし、前記特徴集合が第一条件集合を満足するかを判断し、
前記特徴集合が第一条件集合を満足する場合、前記検出ターゲットの姿勢を「床に横たわる」と判定し、
前記特徴集合が前記第一条件集合を満足しない場合、前記特徴集合が第二条件集合を満足するかを判断し、前記特徴集合が前記第二条件集合を満足する場合、前記特徴集合が第三条件集合を満足するかを判断し、前記特徴集合が前記第三条件集合を満足する場合、前記検出ターゲットの姿勢を「ベッドに横たわる」と判定し、
前記特徴集合が前記第二条件集合又は前記第三条件集合を満足しない場合、前記特徴集合が第四条件集合を満足するかを判断し、前記特徴集合が前記第四条件集合を満足する場合、前記特徴集合が第五条件集合を満足するかを判断し、前記特徴集合が前記第五条件集合を満足する場合、前記検出ターゲットの姿勢を「歩く」と判定し、
前記空間形態特徴情報は、前記ターゲット点セットの高さ平均値z_mid、前記ターゲット点セットの高さ最大値z_max、前記ターゲット点セットの長さx_range、前記ターゲット点セットの幅y_range、及び前記ターゲット点セットの高さz_rangeを含み、
前記移動過程特徴情報は、前記第二期間内でx_range又はy_rangeがz_rangeよりも大きい数xy_z、前記第二期間内でx_range又はy_rangeが第一特徴閾値よりも大きい数xy_1、前記第一期間内のx_range及びy_rangeの最大値とz_rangeとの比shape_ratio、前記第二期間内のx_rangeとy_rangeとの標準偏差の最大値xy_range_var、前記第二期間内でz_rangeが第二特徴閾値よりも大きい数z_1、及び前記第二期間内でターゲット点セットが連続して空である数Lost_frame_numを含み、
前記第一条件集合は、z_midが第一条件閾値よりも小さく、且つz_maxが第二条件閾値よりも低く、且つxy_zとxy_1との和がゼロよりも大きく、且つshape_ratioが1よりも大きく、
前記第二条件集合は、xy_1がゼロより大きく、
前記第三条件集合は、xy_zがゼロよりも大きく、且つz_midが第三条件閾値よりも小さく、且つz_rangeが第四条件閾値よりも小さく、且つxy_range_varが第五条件閾値よりも大きく、
前記第四条件集合は、z_1が第六条件閾値よりも大きく、
前記第五条件集合は、Lost_frame_numが第七条件閾値よりも小さく、
前記移動特徴情報は、前記ターゲット点セットにおける反射点の最大速度target.dopplerを含み、
前記移動過程特徴情報はさらに、前記第二期間内でrが第三特徴閾値よりも大きい数r_range_2s(ここで、
である)、前記第二期間の開始の第三期間内でrが前記第三特徴閾値よりも大きい数r_range_1s、前記第二期間内でtarget.dopplerが第四特徴閾値よりも大きい数doppler_2s、前記第二期間の開始の第三期間内でtarget.dopplerが第四特徴閾値より大きい数doppler_1s、及び前記第二期間内でx_range及びy_rangeがともにz_rangeの半分よりも大きい数x_y_05zを含む、装置。 - 請求項1に記載の装置であって、
前記判定ユニットは、さらに、
前記特徴集合が前記第五条件集合を満足しない場合、前記特徴集合が第六条件集合を満足するかを判断し、前記特徴集合が前記第六条件集合を満足する場合、前記検出ターゲットの姿勢を「座る」と判定し、前記特徴集合が前記第六条件集合を満足しない場合、前記検出ターゲットの姿勢を「立つ」と判定し、
前記第六条件集合は、r_range_2sが第八条件閾値以上であり、且つdoppler_2sが第九条件閾値以上であり、或いは、r_range_1sが第十条件閾値以上であり、且つdoppler_1sが第十一条件閾値以上である、装置。 - 請求項1に記載の装置であって、
前記判定ユニットは、さらに、
前記特徴集合が前記第五条件集合を満足しない場合、前記特徴集合が第八条件集合を満足するかを判断し、前記特徴集合が前記第八条件集合を満足する場合、前記検出ターゲットの姿勢を「立つ」と判定し、
前記特徴集合が前記第八条件集合を満足しない場合、前記特徴集合が第九条件集合を満足するかを判断し、前記特徴集合が前記第九条件集合を満足する場合、前記検出ターゲットの姿勢を「座る」と判定し、
前記特徴集合が前記第九条件集合を満足しない場合、前記特徴集合が第十条件集合を満足するかを判断し、前記特徴集合が前記第十条件集合を満足する場合、前記検出ターゲットの姿勢を「座る」と判定し、前記特徴集合が前記第十条件集合を満足しない場合、前記検出ターゲットの姿勢を「立つ」と判定し、
前記第八条件集合は、r_range_2sが第十二条件閾値よりも小さく、
前記第九条件集合は、d_upper_varがd_lower_varよりも大きく、且つd_upper_meanとd_lower_meanとの差が第十三条件閾値以上であり、
前記第十条件集合は、v_maskが第十四条件閾値以上である、装置。 - 請求項1に記載の装置であって、
前記判定ユニットは、さらに、
前記特徴集合が前記第四条件集合を満足しない場合、前記特徴集合が第七条件集合を満足するかを判断し、前記特徴集合が前記第七条件集合を満足する場合、前記検出ターゲットの姿勢を「床に座る」と判定し、
前記第七条件集合は、z_midが第十五条件閾値よりも小さく、且つz_maxが第十六条件閾値よりも低く、且つx_y_05zがゼロよりも大きい、装置。 - 請求項1に記載の装置であって、
前記移動特徴情報はさらに、前記ターゲット点セットにおける高さが第五特徴閾値より大きい反射点の速度平均値v_upper_mean、前記ターゲット点セットにおける高さが前記第五特徴閾値以下の反射点の速度平均値v_lower_mean、前記ターゲット点セットの高さが第六特徴閾値より大きい平面中心位置xy_upper、及び前記ターゲット点セットの高さが前記第六特徴閾値以下の平面中心位置xy_lowerを含み、
前記移動過程特徴情報はさらに、前記第二期間内の後ろの半分の複数のターゲット点セットのxy_upperと前記第二期間の開始時刻のxy_upperとの間の距離の平均値d_upper_mean、前記第二期間内の期間全体の複数のターゲット点セットのxy_upperと前記第二期間の開始時刻のxy_upperとの間の距離の標準偏差d_upper_var、前記第二期間内の後ろの半分の複数のターゲット点セットのxy_lowerと前記第二期間の開始時刻のxy_lowerとの間の距離の平均値d_lower_mean、前記第二期間内の期間全体の複数のターゲット点セットのxy_lowerと前記第二期間の開始時刻のxy_lowerとの間距離の標準偏差d_lower_var、前記第二期間内でv_upper_meanがv_lower_meanより大きい数v_mask、及び前記第二期間内でx_range及びy_rangeがともにz_rangeの半分よりも大きい数x_y_05zを含む、装置。 - 請求項1に記載の装置であって、
複数の連続した第二期間内で検出したターゲットの姿勢に基づいて、そのうちの1つの第二期間内の検出ターゲットの姿勢に対して修正を行う修正ユニットをさらに含む、装置。 - レーダーに基づく、姿勢を認識する方法であって、
検出ターゲットから反射されてきたレーダーエコー信号に基づいてレーダー反射点情報を取得し、前記レーダー反射点情報に対してクラスタリングを行い;
第一期間で、クラスタリングにより得られたターゲット点セットについて空間形態特徴情報及び/又は移動特徴情報を計算し;
第二期間で、複数の前記第一期間の前記空間形態特徴情報及び/又は前記移動特徴情報に対して統計を行い、前記第二期間内の移動過程特徴情報を取得し;及び
現在の時刻の所在する第二期間内の移動過程特徴情報及び前記現在の時刻の所在する第一期間の前記空間形態特徴情報及び/又は前記移動特徴情報を特徴集合とし、前記特徴集合が第一条件集合を満足するかを判断し、
前記特徴集合が第一条件集合を満足する場合、前記検出ターゲットの姿勢を「床に横たわる」と判定し、
前記特徴集合が前記第一条件集合を満足しない場合、前記特徴集合が第二条件集合を満足するかを判断し、前記特徴集合が前記第二条件集合を満足する場合、前記特徴集合が第三条件集合を満足するかを判断し、前記特徴集合が前記第三条件集合を満足する場合、前記検出ターゲットの姿勢を「ベッドに横たわる」と判定し、
前記特徴集合が前記第二条件集合又は前記第三条件集合を満足しない場合、前記特徴集合が第四条件集合を満足するかを判断し、前記特徴集合が前記第四条件集合を満足する場合、前記特徴集合が第五条件集合を満足するかを判断し、前記特徴集合が前記第五条件集合を満足する場合、前記検出ターゲットの姿勢を「歩く」と判定することを含み、
前記空間形態特徴情報は、前記ターゲット点セットの高さ平均値z_mid、前記ターゲット点セットの高さ最大値z_max、前記ターゲット点セットの長さx_range、前記ターゲット点セットの幅y_range、及び前記ターゲット点セットの高さz_rangeを含み、
前記移動過程特徴情報は、前記第二期間内でx_range又はy_rangeがz_rangeよりも大きい数xy_z、前記第二期間内でx_range又はy_rangeが第一特徴閾値よりも大きい数xy_1、前記第一期間内のx_range及びy_rangeの最大値とz_rangeとの比shape_ratio、前記第二期間内のx_rangeとy_rangeとの標準偏差の最大値xy_range_var、前記第二期間内でz_rangeが第二特徴閾値よりも大きい数z_1、及び前記第二期間内でターゲット点セットが連続して空である数Lost_frame_numを含み、
前記第一条件集合は、z_midが第一条件閾値よりも小さく、且つz_maxが第二条件閾値よりも低く、且つxy_zとxy_1との和がゼロよりも大きく、且つshape_ratioが1よりも大きく、
前記第二条件集合は、xy_1がゼロより大きく、
前記第三条件集合は、xy_zがゼロよりも大きく、且つz_midが第三条件閾値よりも小さく、且つz_rangeが第四条件閾値よりも小さく、且つxy_range_varが第五条件閾値よりも大きく、
前記第四条件集合は、z_1が第六条件閾値よりも大きく、
前記第五条件集合は、Lost_frame_numが第七条件閾値よりも小さく、
前記移動特徴情報は、前記ターゲット点セットにおける反射点の最大速度target.dopplerを含み、
前記移動過程特徴情報はさらに、前記第二期間内でrが第三特徴閾値よりも大きい数r_range_2s(ここで、
である)、前記第二期間の開始の第三期間内でrが前記第三特徴閾値よりも大きい数r_range_1s、前記第二期間内でtarget.dopplerが第四特徴閾値よりも大きい数doppler_2s、前記第二期間の開始の第三期間内でtarget.dopplerが第四特徴閾値より大きい数doppler_1s、及び前記第二期間内でx_range及びy_rangeがともにz_rangeの半分よりも大きい数x_y_05zを含む、方法。 - 記憶器及び処理器を含む電子機器であって、
前記記憶器には、コンピュータプログラムが記憶されており、前記処理器は、請求項7に記載の方法を実行するように構成される、電子機器。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910758029.9A CN112395920B (zh) | 2019-08-16 | 2019-08-16 | 基于雷达的姿态识别装置、方法以及电子设备 |
CN201910758029.9 | 2019-08-16 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021032879A JP2021032879A (ja) | 2021-03-01 |
JP7484492B2 true JP7484492B2 (ja) | 2024-05-16 |
Family
ID=74568339
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020109968A Active JP7484492B2 (ja) | 2019-08-16 | 2020-06-25 | レーダーに基づく姿勢認識装置、方法及び電子機器 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11604254B2 (ja) |
JP (1) | JP7484492B2 (ja) |
CN (1) | CN112395920B (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022188651A (ja) | 2021-06-09 | 2022-12-21 | 株式会社アイシン | 乗員検知装置、方法、およびプログラム |
CN113822241B (zh) * | 2021-11-22 | 2022-07-01 | 江苏邦邦智能科技有限公司 | 步态数据的获取方法、助行设备和计算机可读存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011086286A (ja) | 2009-09-17 | 2011-04-28 | Shimizu Corp | ベッド上及び室内の見守りシステム |
JP2018029671A (ja) | 2016-08-22 | 2018-03-01 | 学校法人慶應義塾 | 行動検知システム、情報処理装置、プログラム |
JP2018059884A (ja) | 2016-10-07 | 2018-04-12 | 日本無線株式会社 | 物標識別装置、プログラム及び方法 |
JP2018112540A (ja) | 2017-01-06 | 2018-07-19 | パナソニックIpマネジメント株式会社 | センサーおよび方法 |
WO2019070651A1 (en) | 2017-10-06 | 2019-04-11 | Tellus You Care, Inc. | VITAL SIGNS WITH NON-CONTACT ACTIVITY DETECTION NETWORK FOR CARE OF OLDER PEOPLE |
JP2019158862A (ja) | 2018-03-12 | 2019-09-19 | パナソニックIpマネジメント株式会社 | 追尾装置および追尾方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SG150527A1 (en) | 2006-07-11 | 2009-03-30 | Agency Science Tech & Res | Method and system for multi-object tracking |
US8306273B1 (en) * | 2009-12-28 | 2012-11-06 | Ball Aerospace & Technologies Corp. | Method and apparatus for LIDAR target identification and pose estimation |
US10206610B2 (en) * | 2012-10-05 | 2019-02-19 | TransRobotics, Inc. | Systems and methods for high resolution distance sensing and applications |
US9921660B2 (en) * | 2014-08-07 | 2018-03-20 | Google Llc | Radar-based gesture recognition |
US10912493B2 (en) * | 2017-01-06 | 2021-02-09 | Panasonic Intellectual Property Management Co., Ltd. | Sensor and method |
CN107749143B (zh) | 2017-10-30 | 2023-09-19 | 安徽工业大学 | 一种基于WiFi信号的穿墙室内人员跌倒探测系统及方法 |
US20190277947A1 (en) * | 2018-03-12 | 2019-09-12 | Panasonic Intellectual Property Management Co., Ltd. | Tracking apparatus and tracking method |
CN108510710A (zh) | 2018-04-03 | 2018-09-07 | 广州市燧烽电子有限公司 | 室内看护求助方法及系统 |
CN108805021A (zh) | 2018-04-27 | 2018-11-13 | 西安理工大学 | 基于特征算子的实时个体跌倒行为检测报警方法 |
US11226408B2 (en) * | 2018-07-03 | 2022-01-18 | Panasonic Intellectual Property Management Co., Ltd. | Sensor, estimating device, estimating method, and recording medium |
CN109507653A (zh) * | 2018-10-22 | 2019-03-22 | 中国人民解放军第四军医大学 | 一种基于uwb的多信息感知生物雷达系统及其获取目标信息的方法 |
CN109961058B (zh) | 2019-04-03 | 2021-06-04 | 长沙军民先进技术研究有限公司 | 一种非接触式跌倒检测方法及装置 |
CN110118966B (zh) * | 2019-05-28 | 2020-10-13 | 长沙莫之比智能科技有限公司 | 基于毫米波雷达的人员检测与计数系统 |
-
2019
- 2019-08-16 CN CN201910758029.9A patent/CN112395920B/zh active Active
-
2020
- 2020-06-16 US US16/902,749 patent/US11604254B2/en active Active
- 2020-06-25 JP JP2020109968A patent/JP7484492B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011086286A (ja) | 2009-09-17 | 2011-04-28 | Shimizu Corp | ベッド上及び室内の見守りシステム |
JP2018029671A (ja) | 2016-08-22 | 2018-03-01 | 学校法人慶應義塾 | 行動検知システム、情報処理装置、プログラム |
JP2018059884A (ja) | 2016-10-07 | 2018-04-12 | 日本無線株式会社 | 物標識別装置、プログラム及び方法 |
JP2018112540A (ja) | 2017-01-06 | 2018-07-19 | パナソニックIpマネジメント株式会社 | センサーおよび方法 |
WO2019070651A1 (en) | 2017-10-06 | 2019-04-11 | Tellus You Care, Inc. | VITAL SIGNS WITH NON-CONTACT ACTIVITY DETECTION NETWORK FOR CARE OF OLDER PEOPLE |
JP2019158862A (ja) | 2018-03-12 | 2019-09-19 | パナソニックIpマネジメント株式会社 | 追尾装置および追尾方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2021032879A (ja) | 2021-03-01 |
CN112395920B (zh) | 2024-03-19 |
CN112395920A (zh) | 2021-02-23 |
US20210048511A1 (en) | 2021-02-18 |
US11604254B2 (en) | 2023-03-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Yu et al. | Noninvasive human activity recognition using millimeter-wave radar | |
US11989861B2 (en) | Deep learning-based real-time detection and correction of compromised sensors in autonomous machines | |
JP7447700B2 (ja) | レーダ反射点のクラスタリング装置、方法及び電子機器 | |
JP2020071226A (ja) | 転倒検出方法及び装置 | |
CN108875533B (zh) | 人脸识别的方法、装置、系统及计算机存储介质 | |
US10255673B2 (en) | Apparatus and method for detecting object in image, and apparatus and method for computer-aided diagnosis | |
CN103514432A (zh) | 人脸特征提取方法、设备和计算机程序产品 | |
CN109559330A (zh) | 运动目标的视觉跟踪方法、装置、电子设备及存储介质 | |
JP7484492B2 (ja) | レーダーに基づく姿勢認識装置、方法及び電子機器 | |
WO2021098802A1 (en) | Object detection device, method, and systerm | |
CN113486961A (zh) | 基于深度学习的低信噪比下雷达rd图像目标检测方法、系统及计算机设备 | |
US20220277581A1 (en) | Hand pose estimation method, device and storage medium | |
US20240104744A1 (en) | Real-time multi-view detection of objects in multi-camera environments | |
EP4264319A1 (en) | Radar detection and tracking | |
CN117953581A (zh) | 动作识别的方法、装置、电子设备及可读存储介质 | |
KR20240058752A (ko) | 레이더 데이터에 기반한 낙상 감지 모델의 학습 방법 | |
CN114972492A (zh) | 一种基于鸟瞰图的位姿确定方法、设备和计算机存储介质 | |
CN113466851A (zh) | 人体姿态检测方法、装置和数据处理设备 | |
Wang et al. | Research on an effective human action recognition model based on 3D CNN | |
Yen et al. | Adaptive Indoor People-Counting System Based on Edge AI Computing | |
Pandit et al. | Generalized method to validate social distancing using median angle proximity methodology | |
WO2022254644A1 (ja) | 姿勢推定装置、姿勢推定方法、及びコンピュータ読み取り可能な記録媒体 | |
US20240153274A1 (en) | Artificial intelligence enabled distance event detection using image analysis | |
US20240285100A1 (en) | Methods and systems for detecting and tracking objects | |
Bennet et al. | Performance Evalution of Video Surveillance Using Mete, Melt and Nidc Technique |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230309 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231220 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231226 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240219 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240402 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240415 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7484492 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |