CN116602663A - 一种基于毫米波雷达的智能监测方法及系统 - Google Patents
一种基于毫米波雷达的智能监测方法及系统 Download PDFInfo
- Publication number
- CN116602663A CN116602663A CN202310650020.2A CN202310650020A CN116602663A CN 116602663 A CN116602663 A CN 116602663A CN 202310650020 A CN202310650020 A CN 202310650020A CN 116602663 A CN116602663 A CN 116602663A
- Authority
- CN
- China
- Prior art keywords
- old
- detected
- motion trail
- tested
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 238000012544 monitoring process Methods 0.000 title claims abstract description 35
- 230000033001 locomotion Effects 0.000 claims abstract description 166
- 201000010099 disease Diseases 0.000 claims abstract description 71
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims abstract description 71
- 238000013145 classification model Methods 0.000 claims abstract description 26
- 238000001514 detection method Methods 0.000 claims abstract description 19
- 230000006399 behavior Effects 0.000 claims description 76
- 238000012549 training Methods 0.000 claims description 40
- 230000008859 change Effects 0.000 claims description 34
- 230000004927 fusion Effects 0.000 claims description 32
- 230000009467 reduction Effects 0.000 claims description 26
- 238000013528 artificial neural network Methods 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 11
- 238000013135 deep learning Methods 0.000 claims description 9
- 239000011159 matrix material Substances 0.000 claims description 9
- 125000004122 cyclic group Chemical group 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 8
- 208000024891 symptom Diseases 0.000 claims description 8
- 238000003745 diagnosis Methods 0.000 claims description 7
- 230000001133 acceleration Effects 0.000 claims description 6
- 230000002776 aggregation Effects 0.000 claims description 6
- 238000004220 aggregation Methods 0.000 claims description 6
- 230000005540 biological transmission Effects 0.000 claims description 6
- 238000003909 pattern recognition Methods 0.000 claims description 5
- 230000000737 periodic effect Effects 0.000 claims description 5
- 238000012216 screening Methods 0.000 claims description 4
- 238000012546 transfer Methods 0.000 claims description 4
- 230000000474 nursing effect Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 208000024827 Alzheimer disease Diseases 0.000 description 1
- 206010039966 Senile dementia Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 230000003997 social interaction Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1118—Determining activity level
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/0507—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves using microwaves or terahertz waves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1116—Determining posture transitions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1121—Determining geometric values, e.g. centre of rotation or angular range of movement
- A61B5/1122—Determining geometric values, e.g. centre of rotation or angular range of movement of movement trajectories
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
- A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
- A61B5/7275—Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
- Y02A90/10—Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Physiology (AREA)
- Artificial Intelligence (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Signal Processing (AREA)
- Psychiatry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Mathematical Physics (AREA)
- Fuzzy Systems (AREA)
- Evolutionary Computation (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Geometry (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明涉及一种基于毫米波雷达的智能监测方法及系统。通过对雷达或传感器采集到的行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息,并运用图网络方法对老人未来时间段的运动轨迹进行预测,再根据待测老人的运动轨迹及运动轨迹信息进行分析以获取区分度高的特征,及通过图网络模型提取出表征待测老人的运动轨迹动态变化的图网络特征,再将区分度高的特征与图网络特征进行融合以得到融合特征,再降低维度,继而将融合特征输入分类模型以实现对老人是否存在患有预设疾病的风险进行初步预测,最后再将预测结果与特征分析进行综合分析以进一步判断老人是否存在患有预设疾病的风险,从而进一步保障判断结果的准确性。
Description
技术领域
本发明属于智能监测技术领域,尤其涉及一种基于毫米波雷达的智能监测方法及系统。
背景技术
传统基于雷达对老人进行监测看护的方法主要依赖于雷达信号的反射和回波来检测老人的存在和位置,再通过分析来回波的特征,如幅度、时间延迟或多普勒频率等来确定老人的距离、速度和方向。
这类监测方法主要依赖雷达信号,其感知能力会受到信号传播和干扰的限制,且雷达信号也无法提供目标老人的详细外观和姿态信息,更无法结合老人的一些行为数据实现对老人的一些特定疾病(如老年痴呆症、家族高风险病、等老年人常见疾病)进行风险预测及判断,从而达到对老人进行提前防护的目的。
发明内容
本发明提供一种基于毫米波雷达的智能监测系统及装置及其充电系统,旨在解决无法基于雷达实现对老人的一些特定疾病进行风险预测的问题。
本发明是这样实现的,提供一种基于毫米波雷达的智能监测方法,在老人所在房间内部署毫米波雷达及各类传感器,步骤包括:
通过毫米波雷达和传感器采集待测老人在室内的行为数据;
对所述行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息;
根据待测老人的位置信息和姿态信息并运用图网络对待测老人未来时间段的运动轨迹进行预测,以获取待测老人的运动轨迹及运动轨迹信息;
根据待测老人的运动轨迹及运动轨迹信息进行分析以获取区分度高的特征;
构建图网络模型,以待测老人的运动轨迹作为节点,根据运动轨迹的时间序列关系建立边的连接,并在图网络中学习节点和边的特征表示,以提取出表征待测老人的运动轨迹动态变化的图网络特征;
将所述区分度高的特征与所述图网络特征进行拼接融合以得到融合特征,对融合特征中的高维特征降维为低维特征;
将降维后的所述融合特征输入训练好的分类模型以得到预测结果,所述分类模型是根据大量采集预设疾病患者的行为数据并通过深度学习算法训练得到,输入为预设疾病患者的早期行为数据经过处理后得到的降维后的融合特征,预测结果为是否存在预设疾病风险的判断结果;
根据所述预测结果与特征分析进行综合分析以进一步判断待测老人是否存在患有预设疾病的风险。
更进一步地,所述对所述行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息的步骤包括:
获取YOLO模型和配置文件,并根据实际需求对YOLO模型的配置文件进行调整,所述配置文件包括类别数量、锚框设置和置信度阈值;
将所述行为数据转换为适合YOLO模型输入格式的输入数据;
将所述输入数据送入YOLO模型进行前向传递;
通过YOLO模型对所述输入数据进行处理以提取图像特征;
在包含图像特征的特征图上应用锚框以生成候选框;
对所述候选框进行类别预测和位置回归以判断所述候选框中是否包含待测老人,若包含待测老人,则在所述候选框中获取待测老人的定位和边界框;
根据所述候选框中待测老人的定位和边界框获取待测老人的位置信息和姿态信息。
更进一步地,所述根据待测老人的位置信息和姿态信息并运用图网络对待测老人未来时间段的运动轨迹进行预测,以获取待测老人的运动轨迹及运动轨迹信息的步骤包括:
将待测老人的每个时刻的状态作为一个节点,其中,待测老人的每个时刻的状态包括待测老人的每个时刻的位置信息和姿态信息;
确定节点之间的连接关系,其中,节点之间的边表示节点之间的连接关系,节点之间的连接关系包括节点之间的距离关系、运动速度关系、临近关系和时间关系;
根据节点之间的连接关系构建图结构,其中,图结构的图以邻接矩阵或邻接列表的形式表示;
提取每个节点的特征以得到节点特征,所述节点特征包括节点的位置特征、姿态特征和运动特征,所述姿态特征包括角度和速度,所述运动特征包括加速度和运动方向;
根据需求和应用场景确定节点之间边的权重,节点之间边的权重包括节点之间的距离关系、运动速度关系、临近关系和时间关系的权重;
根据构建好的所述图结构和所述节点特征对待测老人进行轨迹预测。
更进一步地,所述根据构建好的所述图结构和所述节点特征对待测老人进行轨迹预测的步骤还包括:
根据历史采集的待测老人的行为数据构建行为数据集,并对所述行为数据集进行时间序列信息标注;
从所述行为数据集中提取若干个输入序列和若干个配对的输出序列并构建训练集,其中,所述输入序列包括待测老人第一时刻的位置信息、姿态信息和速度信息,配对的所述输出序列包括待测老人第二时刻的位置信息、姿态信息和速度信息,所述第二时刻比所述第一时刻晚预设时间;
输入所述训练集对循环神经网络进行训练以让循环神经网络学习所述输入序列和所述输出序列之间的关联关系,并得到轨迹预测模型;
对实时获取的待测老人的图结构和节点特征进行拼接融合以构建待测老人的实时输入序列,其中,待测老人的实时输入序列包括待测老人实时的位置信息、姿态信息和速度信息,所述图结构以邻接矩阵或邻接列表的形式表示;
将构建好的待测老人的实时输入序列输入所述轨迹预测模型进行轨迹预测以得到待测老人未来时刻的位置信息、姿态信息和速度信息,并根据待测老人历史、实时及未来时刻的位置信息、姿态信息和速度信息构建待测老人的运动轨迹。
更进一步地,所述根据待测老人的运动轨迹进行分析以获取区分度高的特征的步骤包括:
对待测老人的运动轨迹进行分析以提取有区分度的特征,其中,有区分度的特征包括统计特征、周期性特征和模式识别特征;
对每个有区分度的特征与预设疾病之间的相关系数进行计算并筛选出相关系数高的有区分度的特征,设为区分度高的特征。
更进一步地,所述构建图网络模型,以待测老人的运动轨迹作为节点,根据运动轨迹的时间序列关系建立边的连接,并在图网络中学习节点和边的特征表示,以提取出表征待测老人的运动轨迹动态变化的图网络特征的步骤包括:
收集大量的待测老人的运动轨迹信息并构建用于训练的图数据集,其中,所述样本数据包括节点的特征表示、边的特征表示和标签,每个节点的特征表示为待测老人的历史运动轨迹的每个时刻点的运动状态,边的特征表示为待测老人的历史运动轨迹的时间序列关系;
将所述图数据集输入训练前的图网络模型进行训练学习以得到训练后的图网络模型;
将实时生成的待测老人的运动轨迹信息输入训练好的图网络模型进行前向传播以使图网络在节点和边上进行特征传递何聚合,来获取节点和边的实时的特征表示;
从图网络模型中提取节点和边的动态变化的特征表示,即为动态变化的图网络特征,其中,节点的动态变化的特征表示为待测老人的运动轨迹上的每个时刻点的运动状态的变化,边的动态变化的特征表示为待测老人的运动轨迹上节点之间的时间序列关系的变化。
更进一步地,所述将降维后的所述融合特征输入训练好的分类模型以得到预测结果的步骤包括:
采集大量预设疾病患者的行为数据,设为患者行为数据;
从所述患者行为数据中提取区分度高的特征和图网络特征,分别设为区分度高的患者特征和患者图网络特征;
对所述区分度高的患者特征和所述患者图网络特征进行拼接融合以得到患者融合特征,并对所述患者融合特征进行降维处理;
将降维处理后的所述患者融合特征作为输入数据及将是否患有预设疾病作为标签来建立训练集,并通过训练集对深度神经网络进行训练以得到分类模型;
将降维后的所述融合特征输入训练好的分类模型以对待测老人患有预设疾病的风险进行预测并得到预测结果。
更进一步地,所述根据所述预测结果与特征分析进行综合分析以进一步判断待测老人是否存在患有预设疾病的风险的步骤包括:
从待测老人的特征数据中提取所有特征,并对所有特征与预设疾病的早期症状之间的相关性进行分析以提取相关性高的特征,其中,特征数据包括运动轨迹信息和生理指标数据;
若所述预测结果为预设疾病的早期症状,则对相关性高的特征的数据进行阈值分析,以进一步判断待测老人是否存在患有预设疾病的风险。
本发明还提供一种基于毫米波雷达的智能监测系统,用于执行基于毫米波雷达的智能监测方法,在老人所在房间内部署毫米波雷达及各类传感器,包括:
采集模块:用于通过毫米波雷达和传感器采集待测老人在室内的行为数据;
目标检测模块:用于对所述行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息;
轨迹预测模块:用于根据待测老人的位置信息和姿态信息并运用图网络对待测老人未来时间段的运动轨迹进行预测,以获取待测老人的运动轨迹及运动轨迹信息;
第一提取模块:用于根据待测老人的运动轨迹及运动轨迹信息进行分析以获取区分度高的特征;
第二提取模块:用于构建图网络模型,以待测老人的运动轨迹作为节点,根据运动轨迹的时间序列关系建立边的连接,并在图网络中学习节点和边的特征表示,以提取出表征待测老人的运动轨迹动态变化的图网络特征;
融合模块:用于将所述区分度高的特征与所述图网络特征进行拼接融合以得到融合特征,对融合特征中的高维特征降维为低维特征;
诊断结果预测模块:用于将降维后的所述融合特征输入训练好的分类模型以得到预测结果,所述分类模型是根据大量采集预设疾病患者的行为数据并通过深度学习算法训练得到,输入为预设疾病患者的早期行为数据经过处理后得到的降维后的融合特征,预测结果为是否存在预设疾病风险的判断结果;
综合诊断模块:用于根据所述预测结果与特征分析进行综合分析以进一步判断待测老人是否存在患有预设疾病的风险。
更进一步地,所述目标检测模块还用于:
获取YOLO模型和配置文件,并根据实际需求对YOLO模型的配置文件进行调整,所述配置文件包括类别数量、锚框设置和置信度阈值;
将所述行为数据转换为适合YOLO模型输入格式的输入数据;
将所述输入数据送入YOLO模型进行前向传递;
通过YOLO模型对所述输入数据进行处理以提取图像特征;
在包含图像特征的特征图上应用锚框以生成候选框;
对所述候选框进行类别预测和位置回归以判断所述候选框中是否包含待测老人,若包含待测老人,则在所述候选框中获取待测老人的定位和边界框;
根据所述候选框中待测老人的定位和边界框获取待测老人的位置信息和姿态信息。
本发明的有益效果在于,与现有技术相比,本发明的基于毫米波雷达的智能监测方法,能够基于毫米波雷达和一些传感器的监测再结合一些系统算法以实现对老人的运动轨迹进行监测及患有疾病的风险进行预测和判断的目的,从而不仅方便家人对独居老人的看护,还能够帮助老人预防一些高发或常见老年疾病,以实现健康看护的目的。
本发明通过对雷达或传感器采集到的行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息,并运用图网络方法对老人未来时间段的运动轨迹进行预测,可以融合多种传感器数据(如图像、视频或深度信息等),以提供更全面的感知能力,从而更准确地检测、识别并预测目标,且图网络能够处理多目标的情况,以适应多个目标老人的需求,再根据待测老人的运动轨迹及运动轨迹信息进行分析以获取区分度高的特征,及通过图网络模型提取出表征待测老人的运动轨迹动态变化的图网络特征,再将区分度高的特征与图网络特征进行融合以得到融合特征,区分度高的特征对待测老人的个性化特征或独特性有较好的反映,图网络特征能够捕捉目标之间的关联和上下文信息,融合这两者可以使得模型在不同场景和变化条件下都具有更好的适应性和泛化能力,进而提高后续分类模型的预测性能,再降低维度,以减少特征空间的复杂性,提高计算效率,继而将融合特征输入分类模型以实现对老人是否存在患有预设疾病的风险进行初步预测,最后再将预测结果与特征分析进行综合分析以进一步判断老人是否存在患有预设疾病的风险,从而进一步保障判断结果的准确性。
附图说明
图1是本发明提供的基于毫米波雷达的智能监测方法的流程示意图;
图2是本发明提供的基于毫米波雷达的智能监测系统的系统框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
实施例一
参考图1,实施例一提供一种基于毫米波雷达的智能监测方法,在老人所在房间内部署毫米波雷达及各类传感器,包括步骤S101~S108:
S101,通过毫米波雷达和传感器采集待测老人在室内的行为数据。
S102,对所述行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息。
其中,所述对所述行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息的步骤包括:
获取YOLO模型和配置文件,并根据实际需求对YOLO模型的配置文件进行调整,所述配置文件包括类别数量、锚框设置和置信度阈值;
将所述行为数据转换为适合YOLO模型输入格式的输入数据,一般是图像或视频帧;
将所述输入数据送入YOLO模型进行前向传递;
通过YOLO模型对所述输入数据进行处理以提取图像特征;
在包含图像特征的特征图上应用锚框以生成候选框;
对所述候选框进行类别预测和位置回归以判断所述候选框中是否包含待测老人,若包含待测老人,则在所述候选框中获取待测老人的定位和边界框;
根据所述候选框中待测老人的定位和边界框获取待测老人的位置信息和姿态信息(如角度、速度)。
S103,根据待测老人的位置信息和姿态信息并运用图网络对待测老人未来时间段的运动轨迹进行预测,以获取待测老人的运动轨迹及运动轨迹信息。
其中,所述根据待测老人的位置信息和姿态信息并运用图网络对待测老人未来时间段的运动轨迹进行预测,以获取待测老人的运动轨迹及运动轨迹信息的步骤包括:
将待测老人的每个时刻的状态作为一个节点,其中,待测老人的每个时刻的状态包括待测老人的每个时刻的位置信息和姿态信息;
确定节点之间的连接关系,其中,节点之间的边表示节点之间的连接关系,节点之间的连接关系包括节点之间的距离关系、运动速度关系、临近关系和时间关系;
根据节点之间的连接关系构建图结构,其中,图结构的图以邻接矩阵或邻接列表的形式表示,邻接矩阵用于表示节点之间的连接关系,邻接列表用于记录每个节点与其邻居节点之间的关系;
提取每个节点的特征以得到节点特征,所述节点特征包括节点的位置特征、姿态特征和运动特征,所述姿态特征包括角度和速度,所述运动特征包括加速度和运动方向;
根据需求和应用场景确定节点之间边的权重,节点之间边的权重包括节点之间的距离关系、运动速度关系、临近关系和时间关系的权重;
根据构建好的所述图结构和所述节点特征对待测老人进行轨迹预测。
进一步,所述根据构建好的所述图结构和所述节点特征对待测老人进行轨迹预测的步骤还包括:
根据历史采集的待测老人的行为数据构建行为数据集,并对所述行为数据集进行时间序列信息标注;
从所述行为数据集中提取若干个输入序列和若干个配对的输出序列并构建训练集,其中,所述输入序列包括待测老人第一时刻的位置信息、姿态信息和速度信息,配对的所述输出序列包括待测老人第二时刻的位置信息、姿态信息和速度信息,所述第二时刻比所述第一时刻晚预设时间;
输入所述训练集对循环神经网络进行训练以让循环神经网络学习所述输入序列和所述输出序列之间的关联关系,并得到轨迹预测模型;
对实时获取的待测老人的图结构和节点特征进行拼接融合以构建待测老人的实时输入序列,其中,待测老人的实时输入序列包括待测老人实时的位置信息、姿态信息和速度信息,所述图结构以邻接矩阵或邻接列表的形式表示;
将构建好的待测老人的实时输入序列输入所述轨迹预测模型进行轨迹预测以得到待测老人未来时刻的位置信息、姿态信息和速度信息,并根据待测老人历史、实时及未来时刻的位置信息、姿态信息和速度信息构建待测老人的运动轨迹。
S104,根据待测老人的运动轨迹及运动轨迹信息进行分析以获取区分度高的特征。
其中,所述根据待测老人的运动轨迹进行分析以获取区分度高的特征的步骤包括:
对待测老人的运动轨迹进行分析以提取有区分度的特征,其中,有区分度的特征包括统计特征、周期性特征和模式识别特征;
对每个有区分度的特征与预设疾病之间的相关系数进行计算并筛选出相关系数高的有区分度的特征,设为区分度高的特征。
需要说明的是,所述统计特征包括平均速度、加速度和方向变化,所述周期性特征包括动作周期、呼吸周期、心率周期、睡眠周期、日常活动周期和社交互动周期,所述模式识别特征为通过深度学习方法踢球的更高级的特征,如卷积神经网络中的卷积层特征或循环神经网络中的隐藏状态特征;对待测老人的运动轨迹的几何特征进行分析以提取轨迹的弯曲程度、曲率变化和直线段长度;根据待测老人的运动轨迹上的不同点之间的位移和时间间隔计算平均速度、最大速度和加速度;根据待测老人的运动轨迹上的不同点之间的方向角度计算平均方向和方向变化幅度;根据待测老人的运动轨迹的总长度和每个时间段内的移动距离以获取待测老人反映行为的活动范围和移动程度;对待测老人的运动轨迹上每个时间段的停留时间、运动时间和不同行为之间的转换时间进行计算以获取待测老人反映行为的持续时间和转换频率;根据待测老人的运动轨迹的轨迹点的分布密度分析提取待测老人的运动轨迹的稠密度和聚集度以获取待测老人反映行为的聚集程度;根据待测老人的运动轨迹的差异或变化提取待测老人的运动轨迹的变化速度和变化模式。
S105,构建图网络模型,以待测老人的运动轨迹作为节点,根据运动轨迹的时间序列关系建立边的连接,并在图网络中学习节点和边的特征表示,以提取出表征待测老人的运动轨迹动态变化的图网络特征。
其中,所述构建图网络模型,以待测老人的运动轨迹作为节点,根据运动轨迹的时间序列关系建立边的连接,并在图网络中学习节点和边的特征表示,以提取出表征待测老人的运动轨迹动态变化的图网络特征的步骤包括:
收集大量的待测老人的运动轨迹信息并构建用于训练的图数据集,其中,所述样本数据包括节点的特征表示、边的特征表示和标签,每个节点的特征表示为待测老人的历史运动轨迹的每个时刻点的运动状态,边的特征表示为待测老人的历史运动轨迹的时间序列关系;
将所述图数据集输入训练前的图网络模型进行训练学习以得到训练后的图网络模型;
将实时生成的待测老人的运动轨迹信息输入训练好的图网络模型进行前向传播以使图网络在节点和边上进行特征传递何聚合,来获取节点和边的实时的特征表示;
从图网络模型中提取节点和边的动态变化的特征表示,即为动态变化的图网络特征,其中,节点的动态变化的特征表示为待测老人的运动轨迹上的每个时刻点的运动状态的变化,边的动态变化的特征表示为待测老人的运动轨迹上节点之间的时间序列关系的变化。
S106,将所述区分度高的特征与所述图网络特征进行拼接融合以得到融合特征,对融合特征中的高维特征降维为低维特征。
需要说明的是,对每个所述区分度高的特征进行编码;以确保它们具有一致的维度和表示形式,编码可以包括归一化、标准化、降维等操作,将编码后的所述区分度高的特征与所述图网络特征进行拼接融合以得到融合特征,还可以采用加权求和、特征交互等方式进行融合,对融合特征中的高维特征降维为低维特征,在保留数据关键信息的基础上以减少数据的维度并提高算法的效率和准确度。
S107,将降维后的所述融合特征输入训练好的分类模型以得到预测结果,所述分类模型是根据大量采集预设疾病患者的行为数据并通过深度学习算法训练得到,输入为预设疾病患者的早期行为数据经过处理后得到的降维后的融合特征,预测结果为是否存在预设疾病风险的判断结果。
其中,所述将降维后的所述融合特征输入训练好的分类模型以得到预测结果的步骤包括:
采集大量预设疾病患者的行为数据,设为患者行为数据;
从所述患者行为数据中提取区分度高的特征和图网络特征,分别设为区分度高的患者特征和患者图网络特征;
对所述区分度高的患者特征和所述患者图网络特征进行拼接融合以得到患者融合特征,并对所述患者融合特征进行降维处理;
将降维处理后的所述患者融合特征作为输入数据及将是否患有预设疾病作为标签来建立训练集,并通过训练集对深度神经网络进行训练以得到分类模型;
将降维后的所述融合特征输入训练好的分类模型以对待测老人患有预设疾病的风险进行预测并得到预测结果。
S108,根据所述预测结果与特征分析进行综合分析以进一步判断待测老人是否存在患有预设疾病的风险。
其中,所述根据所述预测结果与特征分析进行综合分析以进一步判断待测老人是否存在患有预设疾病的风险的步骤包括:
从待测老人的特征数据中提取所有特征,并对所有特征与预设疾病的早期症状之间的相关性进行分析以提取相关性高的特征,其中,特征数据包括运动轨迹信息和生理指标数据;
若所述预测结果为预设疾病的早期症状,则对相关性高的特征的数据进行阈值分析,以进一步判断待测老人是否存在患有预设疾病的风险。
本发明的基于毫米波雷达的智能监测方法,能够基于毫米波雷达和一些传感器的监测再结合一些系统算法以实现对老人的运动轨迹进行监测及患有疾病的风险进行预测和判断的目的,从而不仅方便家人对独居老人的看护,还能够帮助老人预防一些高发或常见老年疾病,以实现健康看护的目的。
本发明通过对雷达或传感器采集到的行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息,并运用图网络方法对老人未来时间段的运动轨迹进行预测,可以融合多种传感器数据(如图像、视频或深度信息等),以提供更全面的感知能力,从而更准确地检测、识别并预测目标,且图网络能够处理多目标的情况,以适应多个目标老人的需求,再根据待测老人的运动轨迹及运动轨迹信息进行分析以获取区分度高的特征,及通过图网络模型提取出表征待测老人的运动轨迹动态变化的图网络特征,再将区分度高的特征与图网络特征进行融合以得到融合特征,区分度高的特征对待测老人的个性化特征或独特性有较好的反映,图网络特征能够捕捉目标之间的关联和上下文信息,融合这两者可以使得模型在不同场景和变化条件下都具有更好的适应性和泛化能力,进而提高后续分类模型的预测性能,再降低维度,以减少特征空间的复杂性,提高计算效率,继而将融合特征输入分类模型以实现对老人是否存在患有预设疾病的风险进行初步预测,最后再将预测结果与特征分析进行综合分析以进一步判断老人是否存在患有预设疾病的风险,从而进一步保障判断结果的准确性。
实施例二
参考图2,实施例二提供一种基于毫米波雷达的智能监测系统,在老人所在房间内部署毫米波雷达及各类传感器,包括:
采集模块:用于通过毫米波雷达和传感器采集待测老人在室内的行为数据。
目标检测模块:用于对所述行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息。
所述目标检测模块还用于:
获取YOLO模型和配置文件,并根据实际需求对YOLO模型的配置文件进行调整,所述配置文件包括类别数量、锚框设置和置信度阈值;
将所述行为数据转换为适合YOLO模型输入格式的输入数据;
将所述输入数据送入YOLO模型进行前向传递;
通过YOLO模型对所述输入数据进行处理以提取图像特征;
在包含图像特征的特征图上应用锚框以生成候选框;
对所述候选框进行类别预测和位置回归以判断所述候选框中是否包含待测老人,若包含待测老人,则在所述候选框中获取待测老人的定位和边界框;
根据所述候选框中待测老人的定位和边界框获取待测老人的位置信息和姿态信息。
轨迹预测模块:用于根据待测老人的位置信息和姿态信息并运用图网络对待测老人未来时间段的运动轨迹进行预测,以获取待测老人的运动轨迹及运动轨迹信息。
所述轨迹预测模块还用于:
将待测老人的每个时刻的状态作为一个节点,其中,待测老人的每个时刻的状态包括待测老人的每个时刻的位置信息和姿态信息;
确定节点之间的连接关系,其中,节点之间的边表示节点之间的连接关系,节点之间的连接关系包括节点之间的距离关系、运动速度关系、临近关系和时间关系;
根据节点之间的连接关系构建图结构,其中,图结构的图以邻接矩阵或邻接列表的形式表示;
提取每个节点的特征以得到节点特征,所述节点特征包括节点的位置特征、姿态特征和运动特征,所述姿态特征包括角度和速度,所述运动特征包括加速度和运动方向;
根据需求和应用场景确定节点之间边的权重,节点之间边的权重包括节点之间的距离关系、运动速度关系、临近关系和时间关系的权重;
根据构建好的所述图结构和所述节点特征对待测老人进行轨迹预测。
进一步,所述轨迹预测模块还用于:
根据历史采集的待测老人的行为数据构建行为数据集,并对所述行为数据集进行时间序列信息标注;
从所述行为数据集中提取若干个输入序列和若干个配对的输出序列并构建训练集,其中,所述输入序列包括待测老人第一时刻的位置信息、姿态信息和速度信息,配对的所述输出序列包括待测老人第二时刻的位置信息、姿态信息和速度信息,所述第二时刻比所述第一时刻晚预设时间;
输入所述训练集对循环神经网络进行训练以让循环神经网络学习所述输入序列和所述输出序列之间的关联关系,并得到轨迹预测模型;
对实时获取的待测老人的图结构和节点特征进行拼接融合以构建待测老人的实时输入序列,其中,待测老人的实时输入序列包括待测老人实时的位置信息、姿态信息和速度信息,所述图结构以邻接矩阵或邻接列表的形式表示;
将构建好的待测老人的实时输入序列输入所述轨迹预测模型进行轨迹预测以得到待测老人未来时刻的位置信息、姿态信息和速度信息,并根据待测老人历史、实时及未来时刻的位置信息、姿态信息和速度信息构建待测老人的运动轨迹。
第一提取模块:用于根据待测老人的运动轨迹及运动轨迹信息进行分析以获取区分度高的特征。
其中,所述第一提取模块还用于:
对待测老人的运动轨迹进行分析以提取有区分度的特征,其中,有区分度的特征包括统计特征、周期性特征和模式识别特征;
对每个有区分度的特征与预设疾病之间的相关系数进行计算并筛选出相关系数高的有区分度的特征,设为区分度高的特征。
第二提取模块:用于构建图网络模型,以待测老人的运动轨迹作为节点,根据运动轨迹的时间序列关系建立边的连接,并在图网络中学习节点和边的特征表示,以提取出表征待测老人的运动轨迹动态变化的图网络特征。
其中,所述第二提取模块还用于:
收集大量的待测老人的运动轨迹信息并构建用于训练的图数据集,其中,所述样本数据包括节点的特征表示、边的特征表示和标签,每个节点的特征表示为待测老人的历史运动轨迹的每个时刻点的运动状态,边的特征表示为待测老人的历史运动轨迹的时间序列关系;
将所述图数据集输入训练前的图网络模型进行训练学习以得到训练后的图网络模型;
将实时生成的待测老人的运动轨迹信息输入训练好的图网络模型进行前向传播以使图网络在节点和边上进行特征传递何聚合,来获取节点和边的实时的特征表示;
从图网络模型中提取节点和边的动态变化的特征表示,即为动态变化的图网络特征,其中,节点的动态变化的特征表示为待测老人的运动轨迹上的每个时刻点的运动状态的变化,边的动态变化的特征表示为待测老人的运动轨迹上节点之间的时间序列关系的变化。
融合模块:用于将所述区分度高的特征与所述图网络特征进行拼接融合以得到融合特征,对融合特征中的高维特征降维为低维特征。
诊断结果预测模块:用于将降维后的所述融合特征输入训练好的分类模型以得到预测结果,所述分类模型是根据大量采集预设疾病患者的行为数据并通过深度学习算法训练得到,输入为预设疾病患者的早期行为数据经过处理后得到的降维后的融合特征,预测结果为是否存在预设疾病风险的判断结果。
其中,所述诊断结果预测模块还用于:
采集大量预设疾病患者的行为数据,设为患者行为数据;
从所述患者行为数据中提取区分度高的特征和图网络特征,分别设为区分度高的患者特征和患者图网络特征;
对所述区分度高的患者特征和所述患者图网络特征进行拼接融合以得到患者融合特征,并对所述患者融合特征进行降维处理;
将降维处理后的所述患者融合特征作为输入数据及将是否患有预设疾病作为标签来建立训练集,并通过训练集对深度神经网络进行训练以得到分类模型;
将降维后的所述融合特征输入训练好的分类模型以对待测老人患有预设疾病的风险进行预测并得到预测结果。
综合诊断模块:用于根据所述预测结果与特征分析进行综合分析以进一步判断待测老人是否存在患有预设疾病的风险。
其中,所述综合诊断模块还用于:
从待测老人的特征数据中提取所有特征,并对所有特征与预设疾病的早期症状之间的相关性进行分析以提取相关性高的特征,其中,特征数据包括运动轨迹信息和生理指标数据;
若所述预测结果为预设疾病的早期症状,则对相关性高的特征的数据进行阈值分析,以进一步判断待测老人是否存在患有预设疾病的风险。
这种基于毫米波雷达的智能监测方法主要用于监测老人的行为以及判断其是否存在患有预设疾病的风险。以下是该方法的步骤:
在老人所在的房间内部署毫米波雷达和各类传感器,这些传感器用于采集待测老人在室内的行为数据。
使用毫米波雷达和传感器采集待测老人在室内的行为数据,这些数据包括老人的位置信息和姿态信息。
对采集到的行为数据进行目标检测,以识别得到待测老人的位置信息和姿态信息。
利用图网络对待测老人未来时间段的运动轨迹进行预测,根据待测老人的位置信息和姿态信息,以获取待测老人的运动轨迹及其信息。
根据待测老人的运动轨迹及其信息进行分析,以获取区分度高的特征。
构建图网络模型,以待测老人的运动轨迹作为节点,并根据运动轨迹的时间序列关系建立边的连接。在图网络中学习节点和边的特征表示,以提取出表征待测老人运动轨迹动态变化的图网络特征。
将区分度高的特征与图网络特征进行拼接融合,得到融合特征。
对融合特征进行降维处理,将高维特征降维为低维特征。
将降维后的融合特征输入训练好的分类模型,该分类模型是通过深度学习算法训练得到的,使用大量采集的预设疾病患者的行为数据进行训练。输入为经过处理并降维后的预设疾病患者的早期行为数据的融合特征。该模型用于预测是否存在预设疾病风险,输出为判断结果。
根据预测结果与特征分析进行综合分析,进一步判断待测老人是否存在患有预设疾病的风险。
这种方法通过结合毫米波雷达、传感器、图网络和深度学习算法,综合分析老人的行为数据,以提供对老人是否存在患有预设疾病风险的判断。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种基于毫米波雷达的智能监测方法,其特征在于,在老人所在房间内部署毫米波雷达及各类传感器,步骤包括:
通过毫米波雷达和传感器采集待测老人在室内的行为数据;
对所述行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息;
根据待测老人的位置信息和姿态信息并运用图网络对待测老人未来时间段的运动轨迹进行预测,以获取待测老人的运动轨迹及运动轨迹信息;
根据待测老人的运动轨迹及运动轨迹信息进行分析以获取区分度高的特征;
构建图网络模型,以待测老人的运动轨迹作为节点,根据运动轨迹的时间序列关系建立边的连接,并在图网络中学习节点和边的特征表示,以提取出表征待测老人的运动轨迹动态变化的图网络特征;
将所述区分度高的特征与所述图网络特征进行拼接融合以得到融合特征,对融合特征中的高维特征降维为低维特征;
将降维后的所述融合特征输入训练好的分类模型以得到预测结果,所述分类模型是根据大量采集预设疾病患者的行为数据并通过深度学习算法训练得到,输入为预设疾病患者的早期行为数据经过处理后得到的降维后的融合特征,预测结果为是否存在预设疾病风险的判断结果;
根据所述预测结果与特征分析进行综合分析以进一步判断待测老人是否存在患有预设疾病的风险。
2.根据权利要求1所述的基于毫米波雷达的智能监测方法,其特征在于,所述对所述行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息的步骤包括:
获取YOLO模型和配置文件,并根据实际需求对YOLO模型的配置文件进行调整,所述配置文件包括类别数量、锚框设置和置信度阈值;
将所述行为数据转换为适合YOLO模型输入格式的输入数据;
将所述输入数据送入YOLO模型进行前向传递;
通过YOLO模型对所述输入数据进行处理以提取图像特征;
在包含图像特征的特征图上应用锚框以生成候选框;
对所述候选框进行类别预测和位置回归以判断所述候选框中是否包含待测老人,若包含待测老人,则在所述候选框中获取待测老人的定位和边界框;
根据所述候选框中待测老人的定位和边界框获取待测老人的位置信息和姿态信息。
3.根据权利要求1所述的基于毫米波雷达的智能监测方法,其特征在于,所述根据待测老人的位置信息和姿态信息并运用图网络对待测老人未来时间段的运动轨迹进行预测,以获取待测老人的运动轨迹及运动轨迹信息的步骤包括:
将待测老人的每个时刻的状态作为一个节点,其中,待测老人的每个时刻的状态包括待测老人的每个时刻的位置信息和姿态信息;
确定节点之间的连接关系,其中,节点之间的边表示节点之间的连接关系,节点之间的连接关系包括节点之间的距离关系、运动速度关系、临近关系和时间关系;
根据节点之间的连接关系构建图结构,其中,图结构的图以邻接矩阵或邻接列表的形式表示;
提取每个节点的特征以得到节点特征,所述节点特征包括节点的位置特征、姿态特征和运动特征,所述姿态特征包括角度和速度,所述运动特征包括加速度和运动方向;
根据需求和应用场景确定节点之间边的权重,节点之间边的权重包括节点之间的距离关系、运动速度关系、临近关系和时间关系的权重;
根据构建好的所述图结构和所述节点特征对待测老人进行轨迹预测。
4.根据权利要求3所述的基于毫米波雷达的智能监测方法,其特征在于,所述根据构建好的所述图结构和所述节点特征对待测老人进行轨迹预测的步骤还包括:
根据历史采集的待测老人的行为数据构建行为数据集,并对所述行为数据集进行时间序列信息标注;
从所述行为数据集中提取若干个输入序列和若干个配对的输出序列并构建训练集,其中,所述输入序列包括待测老人第一时刻的位置信息、姿态信息和速度信息,配对的所述输出序列包括待测老人第二时刻的位置信息、姿态信息和速度信息,所述第二时刻比所述第一时刻晚预设时间;
输入所述训练集对循环神经网络进行训练以让循环神经网络学习所述输入序列和所述输出序列之间的关联关系,并得到轨迹预测模型;
对实时获取的待测老人的图结构和节点特征进行拼接融合以构建待测老人的实时输入序列,其中,待测老人的实时输入序列包括待测老人实时的位置信息、姿态信息和速度信息,所述图结构以邻接矩阵或邻接列表的形式表示;
将构建好的待测老人的实时输入序列输入所述轨迹预测模型进行轨迹预测以得到待测老人未来时刻的位置信息、姿态信息和速度信息,并根据待测老人历史、实时及未来时刻的位置信息、姿态信息和速度信息构建待测老人的运动轨迹。
5.根据权利要求1所述的基于毫米波雷达的智能监测方法,其特征在于,所述根据待测老人的运动轨迹进行分析以获取区分度高的特征的步骤包括:
对待测老人的运动轨迹进行分析以提取有区分度的特征,其中,有区分度的特征包括统计特征、周期性特征和模式识别特征;
对每个有区分度的特征与预设疾病之间的相关系数进行计算并筛选出相关系数高的有区分度的特征,设为区分度高的特征。
6.根据权利要求1所述的基于毫米波雷达的智能监测方法,其特征在于,所述构建图网络模型,以待测老人的运动轨迹作为节点,根据运动轨迹的时间序列关系建立边的连接,并在图网络中学习节点和边的特征表示,以提取出表征待测老人的运动轨迹动态变化的图网络特征的步骤包括:
收集大量的待测老人的运动轨迹信息并构建用于训练的图数据集,其中,所述样本数据包括节点的特征表示、边的特征表示和标签,每个节点的特征表示为待测老人的历史运动轨迹的每个时刻点的运动状态,边的特征表示为待测老人的历史运动轨迹的时间序列关系;
将所述图数据集输入训练前的图网络模型进行训练学习以得到训练后的图网络模型;
将实时生成的待测老人的运动轨迹信息输入训练好的图网络模型进行前向传播以使图网络在节点和边上进行特征传递何聚合,来获取节点和边的实时的特征表示;
从图网络模型中提取节点和边的动态变化的特征表示,即为动态变化的图网络特征,其中,节点的动态变化的特征表示为待测老人的运动轨迹上的每个时刻点的运动状态的变化,边的动态变化的特征表示为待测老人的运动轨迹上节点之间的时间序列关系的变化。
7.根据权利要求1所述的基于毫米波雷达的智能监测方法,其特征在于,所述将降维后的所述融合特征输入训练好的分类模型以得到预测结果的步骤包括:
采集大量预设疾病患者的行为数据,设为患者行为数据;
从所述患者行为数据中提取区分度高的特征和图网络特征,分别设为区分度高的患者特征和患者图网络特征;
对所述区分度高的患者特征和所述患者图网络特征进行拼接融合以得到患者融合特征,并对所述患者融合特征进行降维处理;
将降维处理后的所述患者融合特征作为输入数据及将是否患有预设疾病作为标签来建立训练集,并通过训练集对深度神经网络进行训练以得到分类模型;
将降维后的所述融合特征输入训练好的分类模型以对待测老人患有预设疾病的风险进行预测并得到预测结果。
8.根据权利要求1所述的基于毫米波雷达的智能监测方法,其特征在于,所述根据所述预测结果与特征分析进行综合分析以进一步判断待测老人是否存在患有预设疾病的风险的步骤包括:
从待测老人的特征数据中提取所有特征,并对所有特征与预设疾病的早期症状之间的相关性进行分析以提取相关性高的特征,其中,特征数据包括运动轨迹信息和生理指标数据;
若所述预测结果为预设疾病的早期症状,则对相关性高的特征的数据进行阈值分析,以进一步判断待测老人是否存在患有预设疾病的风险。
9.一种基于毫米波雷达的智能监测系统,其特征在于,在老人所在房间内部署毫米波雷达及各类传感器,包括:
采集模块:用于通过毫米波雷达和传感器采集待测老人在室内的行为数据;
目标检测模块:用于对所述行为数据进行目标检测以识别得到待测老人的位置信息和姿态信息;
轨迹预测模块:用于根据待测老人的位置信息和姿态信息并运用图网络对待测老人未来时间段的运动轨迹进行预测,以获取待测老人的运动轨迹及运动轨迹信息;
第一提取模块:用于根据待测老人的运动轨迹及运动轨迹信息进行分析以获取区分度高的特征;
第二提取模块:用于构建图网络模型,以待测老人的运动轨迹作为节点,根据运动轨迹的时间序列关系建立边的连接,并在图网络中学习节点和边的特征表示,以提取出表征待测老人的运动轨迹动态变化的图网络特征;
融合模块:用于将所述区分度高的特征与所述图网络特征进行拼接融合以得到融合特征,对融合特征中的高维特征降维为低维特征;
诊断结果预测模块:用于将降维后的所述融合特征输入训练好的分类模型以得到预测结果,所述分类模型是根据大量采集预设疾病患者的行为数据并通过深度学习算法训练得到,输入为预设疾病患者的早期行为数据经过处理后得到的降维后的融合特征,预测结果为是否存在预设疾病风险的判断结果;
综合诊断模块:用于根据所述预测结果与特征分析进行综合分析以进一步判断待测老人是否存在患有预设疾病的风险。
10.根据权利要求9所述的基于毫米波雷达的智能监测系统,其特征在于,所述目标检测模块还用于:
获取YOLO模型和配置文件,并根据实际需求对YOLO模型的配置文件进行调整,所述配置文件包括类别数量、锚框设置和置信度阈值;
将所述行为数据转换为适合YOLO模型输入格式的输入数据;
将所述输入数据送入YOLO模型进行前向传递;
通过YOLO模型对所述输入数据进行处理以提取图像特征;
在包含图像特征的特征图上应用锚框以生成候选框;
对所述候选框进行类别预测和位置回归以判断所述候选框中是否包含待测老人,若包含待测老人,则在所述候选框中获取待测老人的定位和边界框;
根据所述候选框中待测老人的定位和边界框获取待测老人的位置信息和姿态信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310650020.2A CN116602663B (zh) | 2023-06-02 | 2023-06-02 | 一种基于毫米波雷达的智能监测方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310650020.2A CN116602663B (zh) | 2023-06-02 | 2023-06-02 | 一种基于毫米波雷达的智能监测方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116602663A true CN116602663A (zh) | 2023-08-18 |
CN116602663B CN116602663B (zh) | 2023-12-15 |
Family
ID=87676329
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310650020.2A Active CN116602663B (zh) | 2023-06-02 | 2023-06-02 | 一种基于毫米波雷达的智能监测方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116602663B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117357103A (zh) * | 2023-12-07 | 2024-01-09 | 山东财经大学 | 一种基于cv的肢体运动训练指导方法及系统 |
CN117524413A (zh) * | 2024-01-05 | 2024-02-06 | 亿慧云智能科技(深圳)股份有限公司 | 基于毫米波雷达的运动保护方法、装置、设备及介质 |
CN117746601A (zh) * | 2024-02-07 | 2024-03-22 | 深圳市震有智联科技有限公司 | 一种基于ai智能的光储移动哨兵控制系统 |
CN118133967A (zh) * | 2024-03-15 | 2024-06-04 | 中国科学院空天信息创新研究院 | 基于先验知识结构嵌入的海上态势预测方法、装置及设备 |
Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111027493A (zh) * | 2019-12-13 | 2020-04-17 | 电子科技大学 | 一种基于深度学习多网络软融合的行人检测方法 |
CN112750277A (zh) * | 2021-01-05 | 2021-05-04 | 武汉大学 | 融合轨迹数据与传感器姿态的室内跌倒检测系统及方法 |
CN113658412A (zh) * | 2021-08-05 | 2021-11-16 | 南京信息职业技术学院 | 一种基于毫米波雷达的居家老人行为监测方法及系统 |
CN113963434A (zh) * | 2021-09-29 | 2022-01-21 | 航天时代飞鸿技术有限公司 | 一种基于人体的目标行为特征检测及其运动轨迹预测方法 |
WO2022022721A1 (zh) * | 2020-07-31 | 2022-02-03 | 商汤集团有限公司 | 轨迹预测方法、装置、设备、存储介质及程序 |
CN114117259A (zh) * | 2021-11-30 | 2022-03-01 | 重庆七腾科技有限公司 | 一种基于双重注意力机制的轨迹预测方法及装置 |
CN114169241A (zh) * | 2021-12-09 | 2022-03-11 | 北京邮电大学 | 一种端到端的多目标识别、追踪与预测方法 |
CN114358194A (zh) * | 2022-01-07 | 2022-04-15 | 吉林大学 | 基于姿态跟踪的孤独症谱系障碍异常肢体行为检测方法 |
CN114387666A (zh) * | 2021-12-28 | 2022-04-22 | 大连理工大学 | 一种基于人体关键点的图卷积网络跌倒检测方法 |
CN114469076A (zh) * | 2022-01-24 | 2022-05-13 | 南京邮电大学 | 一种融合身份特征的独居老人跌倒识别方法及系统 |
CN114601454A (zh) * | 2022-03-11 | 2022-06-10 | 上海太翼健康科技有限公司 | 一种病人卧床姿势的监控方法 |
CN114676956A (zh) * | 2022-01-04 | 2022-06-28 | 哈尔滨工业大学(威海) | 基于多维数据融合的老人跌倒风险预警系统 |
CN114864105A (zh) * | 2022-05-25 | 2022-08-05 | 北京芯联心科技发展有限公司 | 一种基于社交图网络的动物疾病的预警方法和系统 |
CN115116133A (zh) * | 2022-06-14 | 2022-09-27 | 鹏城实验室 | 一种用于独居老人监护的异常行为检测系统及方法 |
CN115345906A (zh) * | 2022-08-22 | 2022-11-15 | 南京邮电大学 | 一种基于毫米波雷达的人体姿态追踪方法 |
CN115345908A (zh) * | 2022-10-18 | 2022-11-15 | 四川启睿克科技有限公司 | 一种基于毫米波雷达的人体姿态识别方法 |
CN115469301A (zh) * | 2022-08-31 | 2022-12-13 | 云知声智能科技股份有限公司 | 基于超宽带雷达的老年人活动能力评估方法及系统 |
CN115565044A (zh) * | 2022-10-24 | 2023-01-03 | 广东工业大学 | 一种目标检测方法及系统 |
CN116087943A (zh) * | 2022-12-06 | 2023-05-09 | 山东省科学院自动化研究所 | 基于毫米波雷达的室内跌倒检测方法及系统 |
-
2023
- 2023-06-02 CN CN202310650020.2A patent/CN116602663B/zh active Active
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111027493A (zh) * | 2019-12-13 | 2020-04-17 | 电子科技大学 | 一种基于深度学习多网络软融合的行人检测方法 |
WO2022022721A1 (zh) * | 2020-07-31 | 2022-02-03 | 商汤集团有限公司 | 轨迹预测方法、装置、设备、存储介质及程序 |
CN112750277A (zh) * | 2021-01-05 | 2021-05-04 | 武汉大学 | 融合轨迹数据与传感器姿态的室内跌倒检测系统及方法 |
CN113658412A (zh) * | 2021-08-05 | 2021-11-16 | 南京信息职业技术学院 | 一种基于毫米波雷达的居家老人行为监测方法及系统 |
CN113963434A (zh) * | 2021-09-29 | 2022-01-21 | 航天时代飞鸿技术有限公司 | 一种基于人体的目标行为特征检测及其运动轨迹预测方法 |
CN114117259A (zh) * | 2021-11-30 | 2022-03-01 | 重庆七腾科技有限公司 | 一种基于双重注意力机制的轨迹预测方法及装置 |
CN114169241A (zh) * | 2021-12-09 | 2022-03-11 | 北京邮电大学 | 一种端到端的多目标识别、追踪与预测方法 |
CN114387666A (zh) * | 2021-12-28 | 2022-04-22 | 大连理工大学 | 一种基于人体关键点的图卷积网络跌倒检测方法 |
CN114676956A (zh) * | 2022-01-04 | 2022-06-28 | 哈尔滨工业大学(威海) | 基于多维数据融合的老人跌倒风险预警系统 |
CN114358194A (zh) * | 2022-01-07 | 2022-04-15 | 吉林大学 | 基于姿态跟踪的孤独症谱系障碍异常肢体行为检测方法 |
CN114469076A (zh) * | 2022-01-24 | 2022-05-13 | 南京邮电大学 | 一种融合身份特征的独居老人跌倒识别方法及系统 |
CN114601454A (zh) * | 2022-03-11 | 2022-06-10 | 上海太翼健康科技有限公司 | 一种病人卧床姿势的监控方法 |
CN114864105A (zh) * | 2022-05-25 | 2022-08-05 | 北京芯联心科技发展有限公司 | 一种基于社交图网络的动物疾病的预警方法和系统 |
CN115116133A (zh) * | 2022-06-14 | 2022-09-27 | 鹏城实验室 | 一种用于独居老人监护的异常行为检测系统及方法 |
CN115345906A (zh) * | 2022-08-22 | 2022-11-15 | 南京邮电大学 | 一种基于毫米波雷达的人体姿态追踪方法 |
CN115469301A (zh) * | 2022-08-31 | 2022-12-13 | 云知声智能科技股份有限公司 | 基于超宽带雷达的老年人活动能力评估方法及系统 |
CN115345908A (zh) * | 2022-10-18 | 2022-11-15 | 四川启睿克科技有限公司 | 一种基于毫米波雷达的人体姿态识别方法 |
CN115565044A (zh) * | 2022-10-24 | 2023-01-03 | 广东工业大学 | 一种目标检测方法及系统 |
CN116087943A (zh) * | 2022-12-06 | 2023-05-09 | 山东省科学院自动化研究所 | 基于毫米波雷达的室内跌倒检测方法及系统 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117357103A (zh) * | 2023-12-07 | 2024-01-09 | 山东财经大学 | 一种基于cv的肢体运动训练指导方法及系统 |
CN117357103B (zh) * | 2023-12-07 | 2024-03-19 | 山东财经大学 | 一种基于cv的肢体运动训练指导方法及系统 |
CN117524413A (zh) * | 2024-01-05 | 2024-02-06 | 亿慧云智能科技(深圳)股份有限公司 | 基于毫米波雷达的运动保护方法、装置、设备及介质 |
CN117524413B (zh) * | 2024-01-05 | 2024-03-19 | 亿慧云智能科技(深圳)股份有限公司 | 基于毫米波雷达的运动保护方法、装置、设备及介质 |
CN117746601A (zh) * | 2024-02-07 | 2024-03-22 | 深圳市震有智联科技有限公司 | 一种基于ai智能的光储移动哨兵控制系统 |
CN117746601B (zh) * | 2024-02-07 | 2024-05-10 | 深圳市震有智联科技有限公司 | 一种基于ai智能的光储移动哨兵控制系统 |
CN118133967A (zh) * | 2024-03-15 | 2024-06-04 | 中国科学院空天信息创新研究院 | 基于先验知识结构嵌入的海上态势预测方法、装置及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN116602663B (zh) | 2023-12-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN116602663B (zh) | 一种基于毫米波雷达的智能监测方法及系统 | |
CN109522793B (zh) | 基于机器视觉的多人异常行为检测与识别方法 | |
CN110425005B (zh) | 矿井下皮带运输人员人机交互行为安全监控与预警方法 | |
CN102663452B (zh) | 基于视频分析的可疑行为检测方法 | |
CN100514353C (zh) | 一种基于人脸生理性运动的活体检测方法及系统 | |
CN108222749B (zh) | 一种基于图像分析的智能自动门控制方法 | |
CN111738060A (zh) | 基于毫米波雷达的人体步态识别系统 | |
CN112801000B (zh) | 一种基于多特征融合的居家老人摔倒检测方法及系统 | |
CN110456320B (zh) | 一种基于自由空间步态时序特征的超宽带雷达身份识别方法 | |
CN112149512A (zh) | 一种基于两阶段深度学习的安全帽佩戴识别方法 | |
CN111505632A (zh) | 基于功率谱和多普勒特征的超宽带雷达动作姿态识别方法 | |
CN113378649A (zh) | 身份、位置和动作识别方法、系统、电子设备及存储介质 | |
CN111091060A (zh) | 基于深度学习的跌倒和暴力检测方法 | |
CN114358194A (zh) | 基于姿态跟踪的孤独症谱系障碍异常肢体行为检测方法 | |
CN112132157B (zh) | 一种基于树莓派的步态人脸融合识别方法 | |
CN111860117A (zh) | 一种基于深度学习的人体行为识别方法 | |
US20240062582A1 (en) | Method and Device for Dynamic Recognition of Emotion Based on Facial Muscle Movement Monitoring | |
Mohan et al. | Non-invasive technique for real-time myocardial infarction detection using faster R-CNN | |
CN116524612A (zh) | 一种基于rPPG的人脸活体检测系统及方法 | |
CN104392201B (zh) | 一种基于全向视觉的人体跌倒识别方法 | |
Abedi et al. | Modification of deep learning technique for face expressions and body postures recognitions | |
CN105118073A (zh) | 基于Xtion摄像机的人体头部目标识别方法 | |
CN117496586A (zh) | 一种基于视频图像的人员异常行为识别方法 | |
CN104123569A (zh) | 一种基于有监督学习的视频人数信息统计方法 | |
CN112257559A (zh) | 一种基于生物个体步态信息的身份识别方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |