CN112826461A - 睡眠分析方法、系统、计算机设备及存储介质 - Google Patents

睡眠分析方法、系统、计算机设备及存储介质 Download PDF

Info

Publication number
CN112826461A
CN112826461A CN202011613711.8A CN202011613711A CN112826461A CN 112826461 A CN112826461 A CN 112826461A CN 202011613711 A CN202011613711 A CN 202011613711A CN 112826461 A CN112826461 A CN 112826461A
Authority
CN
China
Prior art keywords
user
sequence
sleep
video data
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011613711.8A
Other languages
English (en)
Inventor
潘希文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Xiekang Network Technology Co ltd
Original Assignee
Shenzhen Xiekang Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Xiekang Network Technology Co ltd filed Critical Shenzhen Xiekang Network Technology Co ltd
Priority to CN202011613711.8A priority Critical patent/CN112826461A/zh
Publication of CN112826461A publication Critical patent/CN112826461A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4806—Sleep evaluation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1116—Determining posture transitions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867—Combination of radar systems with cameras
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Medical Informatics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Physiology (AREA)
  • Cardiology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Evolutionary Computation (AREA)
  • Fuzzy Systems (AREA)
  • Pulmonology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明适用于计算机技术领域，提供了一种睡眠分析方法、系统、计算机设备及存储介质，所述方法包括以下步骤：获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列；根据所述视频数据得到用户在时间序列内的多个姿态变化量；根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率；以用户在时间序列内的姿态变化量、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列，本发明的有益效果是：相较于现有技术在用户身上增加各种传感器的方式来获取数据，用户在正常睡眠时不会受到线束等的束缚，其对用户的影响较小，分析结果也更加精准。

Description

睡眠分析方法、系统、计算机设备及存储介质
技术领域
本发明涉及计算机技术领域，尤其涉及一种睡眠分析方法、系统、计算机设备及存储介质。
背景技术
每一个人都需要睡眠，睡眠将会占人一生的四分之一到三分之一的时间，所以睡眠质量的优劣对于人的生活有相当的影响力。
现有技术中，睡眠分析一般都需要采集用户在睡眠时的相关数据来进行，例如心跳、呼吸频率、体表温度、动作信息等，其相关数据的采集依靠传感器来进行，例如加速度传感器、心跳传感器等，但是这些传感器在用户正常睡眠时是不需要的，这就会导致用户在使用这些传感器时感觉不适，而传感器的线束也会影响用户的正常动作。
总得来说，就是这些传感器的使用会影响用户的正常睡眠，造成所获取数据的不准确，影响睡眠分析的结果。
发明内容
本发明实施例的目的在于提供一种睡眠分析方法、系统、计算机设备及存储介质，旨在解决背景技术中确定的现有技术存在的技术问题。
本发明实施例是这样实现的，一种睡眠分析方法，包括以下步骤：
获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列；
根据所述视频数据得到用户在时间序列内的多个姿态变化量；
根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率；
以用户在时间序列内的姿态变化量、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列。
作为本发明进一步的方案：所述获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列的步骤，具体包括：
同步红外夜视摄像头、雷达发射机和雷达接收机的系统时间，根据用户的睡眠时间段为所述红外夜视摄像头、雷达发射机和雷达接收机设置启停时间；
红外夜视摄像头和雷达接收机分别采集用户在睡眠时间段内的视频数据和雷达回波信号；
对所述雷达回波信号进行处理，得到用户在睡眠时间段内的雷达回波序列。
作为本发明再进一步的方案：所述根据所述视频数据得到用户在时间序列内的多个姿态变化量的步骤，具体包括：
输入用户在睡眠时间段内的视频数据；
将所述视频数据转化为与时间序列对应的多帧图像；
计算相邻两帧图像中的像素差值的绝对值，以所述像素差值的绝对值作为姿态变化量，得到对应时间序列的多个姿态变化量。
作为本发明再进一步的方案：所述将所述视频数据转化为与时间序列对应的多帧图像的步骤，具体包括：将视频数据转化为多帧彩色图像，再将所述彩色图像转化为灰度图像，每帧所述灰度图像的尺寸和分辨率均相同。
作为本发明再进一步的方案：所述根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率的步骤，具体包括：
对雷达回波序列中的信号进行增强和平滑；
对经过增强和平滑的信号进行降噪和离散傅里叶变换；
筛选处于呼吸区间和心率区间的呼吸特征信号和心率特征信号，作为呼吸速率和心率。
作为本发明再进一步的方案：所述以用户在时间序列内姿态变化序列、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列的步骤，具体包括：
获取用户在时间序列内的多个姿态变化量、呼吸速率和心率数据；
根据时间序列内的每个时间节点，得到与所述时间节点对应的姿态变化量、呼吸速率和心率数据，得到格式为{A，B，C}的多个样本，其中A表示姿态变化量，B表示呼吸速率，C表示心率数据；
将所述样本输入至卷积神经网络模型中，将输出结果按照时间节点的顺序排列得到睡眠状态序列。
作为本发明再进一步的方案：每个所述样本均与对应的时间节点相关联。
本发明实施例的另一目的在于提供一种睡眠分析系统，包括：
数据获取模块，用于获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列；
姿态变化量生成模块，用于根据所述视频数据得到用户在时间序列内的多个姿态变化量；
生理特征生成模块，用于根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率；以及
结果输出模块，用于以用户在时间序列内的姿态变化量、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列。
本发明实施例的另一目的在于提供一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行所述睡眠分析方法的步骤。
本发明实施例的另一目的在于提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行所述睡眠分析方法的步骤。
与现有技术相比，本发明的有益效果是：通过录像的方式来获取用户在睡眠时间段内的图像信息，作为睡眠分析的判定依据，以雷达回波序列来获取用户的呼吸速率和心率，相较于现有技术在用户身上增加各种传感器的方式来获取数据，用户在正常睡眠时不会受到线束等的束缚，其对用户的影响较小，分析结果也更加精准。
附图说明
图1为一种睡眠分析方法的流程图。
图2为一种睡眠分析方法中获取视频数据和雷达回波序列的流程图。
图3为一种睡眠分析方法中获取用户姿态变化量的流程图。
图4为一种睡眠分析方法中获取用户呼吸速率和心率的流程图。
图5为一种睡眠分析方法中获取用户睡眠状态序列的流程图。
图6为一种睡眠分析系统的结构示意图。
图7为一种计算机设备的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
以下结合具体实施例对本发明的具体实现进行详细描述。
如图1所示，为本发明一个实施例提供的一种睡眠分析方法的流程图，包括以下步骤：
S200，获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列。
本发明实施例中，通过录像的方式来获取用户在睡眠时间段内的图像信息，更具体的来说，其可以获取用户在睡眠的姿态变化信息，例如翻身、蹬腿等，可以依此作为睡眠分析的判定依据，同理可以以雷达波的方式来获取雷达回波序列，通过雷达回波序列也可以获取用户在睡眠的姿态变化信息，更具体的，本实施例中，以雷达波来获取用户的雷达回波序列。相较于现有技术，在用户身上增加各种传感器的方式来获取数据，用户在正常睡眠时不会受到线束等的束缚，其对用户的影响较小，分析结果也更加精准。
S400，根据所述视频数据得到用户在时间序列内的多个姿态变化量。
本发明实施例中，由于用户在睡眠时间段内，姿态会发生多种或者多数量的变化，因此此处基于视频数据可以获取其姿态变化量。
S600，根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率。
本发明实施例中，由于人体或者物体可以可以反射电磁波，因此通过回波信号的频率或相位的变化，提取和计算得到体表的微动信息；人体体表微动信息可反映人体的某些生理活动，如检测胸壁的振动可得到呼吸、心跳等心肺活动相关信息；正常人体的心搏运动能够引起的体表机械振动幅度为0.6mm左右；由呼吸作用产生的幅度在(4～12)mm左右；如果使用10GHz频段的生物雷达来检测胸壁运动，每1mm的胸壁位移将会引起最大25.2°的相位偏移，因而理论上，虽然胸壁振动幅度很小，反映在雷达基带的相位偏移量在载频足够高时仍然能够被分辨出来，因此，基于雷达回波序列可以得到用户在时间序列内的呼吸速率和心率。
S800，以用户在时间序列内的姿态变化量、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列。
本发明实施例中，当得到用户在时间序列内的姿态变化量、呼吸速率和心率时，以其作为样本，通过卷积神经网络模型，可以得到对应姿态变化量、呼吸速率和心率的睡眠质量或者睡眠评级。
有必要进行说明的是，本实施例中的S400和S600两个步骤的顺序可以互调，即先后进行姿态变化量或者呼吸速率和心率的获取均可，本实施例在此不进行具体的限定。
如图2所示，作为本发明一个优选的实施例，所述获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列的步骤，具体包括：
S201，同步红外夜视摄像头、雷达发射机和雷达接收机的系统时间，根据用户的睡眠时间段为所述红外夜视摄像头、雷达发射机和雷达接收机设置启停时间。
本发明实施例中，同步红外夜视摄像头、雷达发射机和雷达接收机系统时间的目的在于保证两者能同步启动和同步停止，以保证时间序列的一致性。
S203，红外夜视摄像头和雷达接收机分别采集用户在睡眠时间段内的视频数据和雷达回波信号。
本发明实施例中，红外夜视摄像头用于获取用户在睡眠时间段内的视频数据，而雷达发射机则用于发出雷达波，雷达接收机用于接收被用户反射回来的雷达波。
S205，对所述雷达回波信号进行处理，得到用户在睡眠时间段内的雷达回波序列。
本发明实施例中，对雷达回波信号的处理可以为对回波信号的距离维信息进行傅里叶变换，然后进行极大值搜索，之后通过提取极大值附近数据，得到针对用户的雷达回波序列，由于其属于现有技术，本实施例在此不对其进行具体的说明。
如图3所示，作为本发明另一个优选的实施例，所述根据所述视频数据得到用户在时间序列内的多个姿态变化量的步骤，具体包括：
S401，输入用户在睡眠时间段内的视频数据。
本发明实施例中，视频流数据可以通过有线或者无线方式进行输入，本实施例在此不进行具体的限定。
S403，将所述视频数据转化为与时间序列对应的多帧图像。
本发明实施例中，视频实际上就是连续的多帧图像组合起来得到的，而通过对视频数据的处理，可以获取连续的多帧图像，对应的，多帧图像之间的时间差应该保持固定，例如每间隔0.1秒对视频数据进行截图，以获取多帧图像。
S405，计算相邻两帧图像中的像素差值的绝对值，以所述像素差值的绝对值作为姿态变化量，得到对应时间序列的多个姿态变化量。
本发明实施例中，由于用户在睡眠时间段内的姿态变化是连续的，以翻身为例，对应翻身过程的连续多帧图像可以反映翻身动作的大小、持续时间等，对于相邻的两帧图像之间，可以通过像素差值的绝对值来反映动作大小、持续时间等，而现有技术中也有此类技术，但是其通过分析当前图像与背景图来反映姿态变化，当翻身动作是连续的多个时，当前图像与背景图的对比无法反映姿态变化的大小，所以其并不准确，本实施例以相邻的两帧图像的像素差值的绝对值作为姿态变化量，能有效的反应用户在睡眠时的姿态变化。
具体的，以像素差值的绝对值的计算方式可以为，将两帧图像重合，以差异处(或非重合部)作为像素差值的绝对值，其主要反应的是用户有无动作变化或者动作变化量的大小，实际上其计算方式可以根据需求进行选择，本实施例在此不进行具体的限定。
作为本发明另一个优选的实施例，所述将所述视频数据转化为与时间序列对应的多帧图像的步骤，具体包括：将视频数据转化为多帧彩色图像，再将所述彩色图像转化为灰度图像，每帧所述灰度图像的尺寸和分辨率均相同。
本发明实施例中，采用红外夜视摄像头获得的视频数据转化而得的图像是彩色的，因此需要将其转化为灰度图像，但是最终结果只需要每帧所述灰度图像的尺寸和分辨率均相同，这样方便将两帧图像重合，来对比获取差异。
如图4所示，作为本发明另一个优选的实施例，所述根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率的步骤，具体包括：
S601，对雷达回波序列中的信号进行增强和平滑。
本发明实施例中，对雷达回波信号可以通过归一化方法对信号进行增强或者放大，以便于后续的处理，信号的平滑优选使用汉宁窗进行平滑，本实施例在此不进行具体的限定。
S603，对经过增强和平滑的信号进行降噪和离散傅里叶变换。
S605，筛选处于呼吸区间和心率区间的呼吸特征信号和心率特征信号，作为呼吸速率和心率。
本发明实施例中，对信号的降噪、离散傅里叶变换和筛选，实际上均属于现有技术，本发明实施例在此不对其进行多余的说明。
如图5所示，作为本发明另一个优选的实施例，所述以用户在时间序列内姿态变化序列、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列的步骤，具体包括：
S801，获取用户在时间序列内的多个姿态变化量、呼吸速率和心率数据。
本发明实施例中，姿态变化量、呼吸速率和心率数据由前述的或者步骤得到，本发明实施例在此不进行多余说明。
S803，根据时间序列内的每个时间节点，得到与所述时间节点对应的姿态变化量、呼吸速率和心率数据，得到格式为{A，B，C}的多个样本，其中A表示姿态变化量，B表示呼吸速率，C表示心率数据。
本发明实施例中，由于视频数据和雷达回波序列均是基于同一个时间序列，那么在时间序列确定的情况下，得到的姿态变化量、呼吸速率和心率数据是呈严格的对应关系的，他们的数量应该相等的，并且与时间序列内的时间节点也是严格对应的，因此，可以得到格式为{A，B，C}的多个样本，其中A表示姿态变化量，B表示呼吸速率，C表示心率数据，作为优选的，每个所述样本均与其对应的时间节点相关联。
S805，将所述样本输入至卷积神经网络模型中，将输出结果按照时间节点的顺序排列得到睡眠状态序列。
本发明实施例中，每个样本被输入到卷积神经网络模型内时，均可以得到对应的睡眠状态，例如：深度睡眠、前度睡眠或者清醒状态等，上述睡眠状态按照时间节点的顺序或者实现序列来进行排列的话，即可得到睡眠状态序列，所述睡眠状态序列即反应用户在睡眠时间段内的睡眠状况。
如图6所示，本发明实施例还提供了一种睡眠分析系统，包括数据获取模块100、姿态变化量生成模块200、生理特征生成模块300和结果输出模块400，所述数据获取模块100用于获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列；所述姿态变化量生成模块200用于根据所述视频数据得到用户在时间序列内的多个姿态变化量；所述生理特征生成模块300用于根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率；所述结果输出模块400用于以用户在时间序列内的姿态变化量、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列。
本发明实施例中，通过录像的方式来获取用户在睡眠时间段内的图像信息，更具体的来说，其可以获取用户在睡眠的姿态变化信息，例如翻身、蹬腿等，可以依此作为睡眠分析的判定依据，同理可以以雷达波的方式来获取雷达回波序列，通过雷达回波序列也可以获取用户在睡眠的姿态变化信息，更具体的，本实施例中，以雷达回波序列来获取用户的雷达回波序列。相较于现有技术，在用户身上增加各种传感器的方式来获取数据，用户在正常睡眠时不会受到线束等的束缚，其对用户的影响较小，分析结果也更加精准。由于用户在睡眠时间段内，姿态会发生多种或者多数量的变化，因此此处基于视频数据可以获取其姿态变化量，本发明实施例中，由于人体或者物体可以可以反射电磁波，因此通过回波信号的频率或相位的变化，提取和计算得到体表的微动信息，因此，基于雷达回波序列可以得到用户在时间序列内的呼吸速率和心率。当得到用户在时间序列内的姿态变化量、呼吸速率和心率时，以其作为样本，通过卷积神经网络模型，可以得到对应姿态变化量、呼吸速率和心率的睡眠质量或者睡眠评级。
如图7所示，本发明实施例还提供了一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行：
S200，获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列。
S400，根据所述视频数据得到用户在时间序列内的多个姿态变化量。
S600，根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率。
S800，以用户在时间序列内的姿态变化量、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列。
本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行：
S200，获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列。
S400，根据所述视频数据得到用户在时间序列内的多个姿态变化量。
S600，根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率。
S800，以用户在时间序列内的姿态变化量、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列。
应该理解的是，虽然本发明各实施例的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，各实施例中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
本领域技术人员在考虑说明书及实施例处的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.睡眠分析方法，其特征在于，包括以下步骤：
获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列；
根据所述视频数据得到用户在时间序列内的多个姿态变化量；
根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率；
以用户在时间序列内的姿态变化量、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列。
2.根据权利要求1所述的睡眠分析方法，其特征在于，所述获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列的步骤，具体包括：
同步红外夜视摄像头、雷达发射机和雷达接收机的系统时间，根据用户的睡眠时间段为所述红外夜视摄像头、雷达发射机和雷达接收机设置启停时间；
红外夜视摄像头和雷达接收机分别采集用户在睡眠时间段内的视频数据和雷达回波信号；
对所述雷达回波信号进行处理，得到用户在睡眠时间段内的雷达回波序列。
3.根据权利要求1所述的睡眠分析方法，其特征在于，所述根据所述视频数据得到用户在时间序列内的多个姿态变化量的步骤，具体包括：
输入用户在睡眠时间段内的视频数据；
将所述视频数据转化为与时间序列对应的多帧图像；
计算相邻两帧图像中的像素差值的绝对值，以所述像素差值的绝对值作为姿态变化量，得到对应时间序列的多个姿态变化量。
4.根据权利要求3所述的睡眠分析方法，其特征在于，所述将所述视频数据转化为与时间序列对应的多帧图像的步骤，具体包括：将视频数据转化为多帧彩色图像，再将所述彩色图像转化为灰度图像，每帧所述灰度图像的尺寸和分辨率均相同。
5.根据权利要求1所述的睡眠分析方法，其特征在于，所述根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率的步骤，具体包括：
对雷达回波序列中的信号进行增强和平滑；
对经过增强和平滑的信号进行降噪和离散傅里叶变换；
筛选处于呼吸区间和心率区间的呼吸特征信号和心率特征信号，作为呼吸速率和心率。
6.根据权利要求1所述的睡眠分析方法，其特征在于，所述以用户在时间序列内姿态变化序列、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列的步骤，具体包括：
获取用户在时间序列内的多个姿态变化量、呼吸速率和心率数据；
根据时间序列内的每个时间节点，得到与所述时间节点对应的姿态变化量、呼吸速率和心率数据，得到格式为{A，B，C}的多个样本，其中A表示姿态变化量，B表示呼吸速率，C表示心率数据；
将所述样本输入至卷积神经网络模型中，将输出结果按照时间节点的顺序排列得到睡眠状态序列。
7.根据权利要求6所述的睡眠分析方法，其特征在于，每个所述样本均与对应的时间节点相关联。
8.一种睡眠分析系统，其特征在于，包括：
数据获取模块，用于获取用户在睡眠时间段内的视频数据和雷达回波序列，所述视频数据和雷达回波序列中还包括有时间序列；
姿态变化量生成模块，用于根据所述视频数据得到用户在时间序列内的多个姿态变化量；
生理特征生成模块，用于根据所述雷达回波序列得到用户在时间序列内的呼吸速率和心率；以及
结果输出模块，用于以用户在时间序列内的姿态变化量、呼吸速率和心率作为样本，输入到预先设置好的卷积神经网络模型中，得到用户在睡眠时间段内的睡眠状态序列。
9.一种计算机设备，其特征在于，包括存储器和处理器，所述存储器中存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行权利要求1至7中任一项权利要求所述睡眠分析方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行权利要求1至7中任一项权利要求所述睡眠分析方法的步骤。
CN202011613711.8A 2020-12-30 2020-12-30 睡眠分析方法、系统、计算机设备及存储介质 Pending CN112826461A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011613711.8A CN112826461A (zh) 2020-12-30 2020-12-30 睡眠分析方法、系统、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011613711.8A CN112826461A (zh) 2020-12-30 2020-12-30 睡眠分析方法、系统、计算机设备及存储介质

Publications (1)

Publication Number Publication Date
CN112826461A true CN112826461A (zh) 2021-05-25

Family

ID=75925474

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011613711.8A Pending CN112826461A (zh) 2020-12-30 2020-12-30 睡眠分析方法、系统、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN112826461A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115120837A (zh) * 2022-06-27 2022-09-30 慕思健康睡眠股份有限公司 基于深度学习的睡眠环境调节方法、系统、装置及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106236013A (zh) * 2016-06-22 2016-12-21 京东方科技集团股份有限公司 一种睡眠监测方法及装置
CN109846469A (zh) * 2019-04-16 2019-06-07 合肥工业大学 一种基于卷积神经网络的非接触式心率测量方法
CN112066528A (zh) * 2020-08-10 2020-12-11 珠海格力电器股份有限公司 一种空调控制方法、装置、存储介质及空调

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106236013A (zh) * 2016-06-22 2016-12-21 京东方科技集团股份有限公司 一种睡眠监测方法及装置
CN109846469A (zh) * 2019-04-16 2019-06-07 合肥工业大学 一种基于卷积神经网络的非接触式心率测量方法
CN112066528A (zh) * 2020-08-10 2020-12-11 珠海格力电器股份有限公司 一种空调控制方法、装置、存储介质及空调

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张艺超: "基于心冲击信号的睡眠监测识别研究", 《中国优秀硕士学位论文全文数据库医药卫生科技辑》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115120837A (zh) * 2022-06-27 2022-09-30 慕思健康睡眠股份有限公司 基于深度学习的睡眠环境调节方法、系统、装置及介质

Similar Documents

Publication Publication Date Title
US11562222B2 (en) Systems and methods of identity analysis of electrocardiograms
US6024705A (en) Automated seismic detection of myocardial ischemia and related measurement of cardiac output parameters
CN106456017A (zh) 多传感器生理监测系统和方法
US20100074475A1 (en) Medical image diagnostic device
US20210269046A1 (en) Estimator generation apparatus, monitoring apparatus, estimator generation method, and computer-readable storage medium storing estimator generation program
CN105701331A (zh) 计算机辅助诊断设备和计算机辅助诊断方法
CN105190691A (zh) 用于获得对象的生命体征的设备
Procházka et al. Extraction of breathing features using MS Kinect for sleep stage detection
JP2006198407A (ja) 磁気共鳴（ｍｒ）イメージングにおける動き補償方法および動き補償システム
CN111275755B (zh) 基于人工智能的二尖瓣瓣口面积检测方法、系统和设备
US11103194B2 (en) Systems and methods of analyte measurement analysis
CN107811652B (zh) 自动调整参数的超声成像方法及系统
CN112001122A (zh) 基于端到端生成对抗网络的非接触式生理信号测量方法
CN112313705B (zh) 用于处理视频流的方法、系统以及介质
WO2019000338A1 (zh) 生理信息测量方法及生理信息监测装置、设备
CN103961141B (zh) 一种基于图像回溯性血管内超声图像的心动门控方法
CN112826461A (zh) 睡眠分析方法、系统、计算机设备及存储介质
Golande et al. Smart hospital for heart disease prediction using IoT
CN112634390A (zh) 基于Wasserstein生成对抗网络模型的高能图像合成方法、装置
CN101466302B (zh) 为动态分子成像过程个性化动力学参数估计的方法
WO2019115432A1 (en) Determining whether a hypothesis concerning a signal is true
JPH0627834B2 (ja) 生体データ収集装置
EP4083650A1 (en) Controlling a scanning operation of a medical imaging device
CN106343989A (zh) 基于图像处理的血压监测方法
Zheng et al. Non-contact calibration-free blood pressure estimation method using dual radar

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210525

RJ01 Rejection of invention patent application after publication