CN113724737A - 监测睡眠状态的方法、装置、电子设备和存储介质 - Google Patents

监测睡眠状态的方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN113724737A
CN113724737A CN202111006076.1A CN202111006076A CN113724737A CN 113724737 A CN113724737 A CN 113724737A CN 202111006076 A CN202111006076 A CN 202111006076A CN 113724737 A CN113724737 A CN 113724737A
Authority
CN
China
Prior art keywords
information
sound
value
feature
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111006076.1A
Other languages
English (en)
Inventor
吴明诏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kangjian Information Technology Shenzhen Co Ltd
Original Assignee
Kangjian Information Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kangjian Information Technology Shenzhen Co Ltd filed Critical Kangjian Information Technology Shenzhen Co Ltd
Priority to CN202111006076.1A priority Critical patent/CN113724737A/zh
Publication of CN113724737A publication Critical patent/CN113724737A/zh
Priority to PCT/CN2022/087529 priority patent/WO2023029503A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4806Sleep evaluation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4806Sleep evaluation
    • A61B5/4818Sleep apnoea
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Signal Processing (AREA)
  • Artificial Intelligence (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本申请提供一种监测睡眠状态的方法、装置、电子设备和存储介质,属于数字医疗技术领域。该方法包括:获取预设监测区域的当前环境信息,其中,环境信息包括声音信息;对声音信息进行特征提取,得到声音特征向量;计算声音特征向量与预设的参考特征向量之间的相似度;根据相似度将与声音特征向量最相似的参考特征向量作为目标特征向量;获取目标特征向量表征的状态信息,将状态信息作为当前睡眠状态。通过提取声音信息中的声音特征向量,并与预设参考特征向量进行比较,选取最相似的参考特征向量来表征当前的睡眠状态,提高了判别声音类型和睡眠状态的准确性。

Description

监测睡眠状态的方法、装置、电子设备和存储介质
技术领域
本申请涉及数字医疗技术领域,尤其涉及一种监测睡眠状态的方法、装置、电子设备和存储介质。
背景技术
睡眠时间在人们日常的生活时间中所占的比例很大,睡眠状态的好坏可以整体反映人们的身体健康状况,因此有必要对人们的睡眠状态进行监测。相关技术中公开了通过麦克风采集用户声音信息,并通过检测声音信息的频率、振幅的方式来判断用户的睡眠状态,但此种单纯的以声音的频率或振幅来分辨声音类型的方式,其分辨的声音类型不够准确,因此检测得到的睡眠状态也不够准确。
发明内容
本公开实施例的主要目的在于提出一种监测睡眠状态的方法、装置、电子设备和存储介质,通过对采集的声音信息进行特征提取,可以准确的识别出多种声音的具体类型,从而提高获取的睡眠状态的准确性。
为实现上述目的,本公开实施例的第一方面提出了一种监测睡眠状态的方法,包括:获取预设监测区域的当前环境信息,其中,所述环境信息包括声音信息;对所述声音信息进行特征提取,得到声音特征向量;计算所述声音特征向量与预设的参考特征向量之间的相似度;根据所述相似度将与所述声音特征向量最相似的参考特征向量作为目标特征向量;获取所述目标特征向量表征的状态信息,将所述状态信息作为当前睡眠状态。
根据本申请实施例的一种监测睡眠状态的方法,至少具有如下有益效果:通过对当前环境中的声音信息进行采集,并对采集的声音信息进行声音特征向量的提取,通过比较采集到的声音特征向量与预设的参考特征向量之间的相似度,将与采集到的声音特征向量最为相似的参考特征向量所表征的状态信息作为当前的睡眠状态信息。由于提取到的声音特征向量可以更准确直观的表示出声音的类型信息,因此经过计算得到的睡眠状态信息可以更准确的反应出用户当前真实的睡眠状态,提高了获取睡眠状态的准确性。通过监测用户的睡眠状态,可以使用户直观的获取自身的睡眠质量,从而监测自身的健康状态,在日常生活中协助用户改善自身睡眠质量,提高用户的身体健康状态。
在一些实施例,所述环境信息还包括加速度信息,所述睡眠状态还包括清醒状态,所述方法还包括:根据所述加速度信息和预设的参考加速度,计算出加速度值;根据所述加速度值判断所述睡眠状态是否为所述清醒状态。
在一些实施例,所述环境信息还包括光照信息,所述方法还包括:根据所述光照信息和预设的参考光照,计算出光照值;根据所述光照值判断所述睡眠状态是否为所述清醒状态。
在一些实施例,所述睡眠状态还包括打鼾状态;若检测所述睡眠状态是打鼾状态,则开启声音录制模式,以存储所述声音信息。
在一些实施例,所述声音特征向量包括多个第一特征值,所述预设的参考特征向量包括多个第二特征值,所述计算所述声音特征向量与预设的参考特征向量之间的相似度,包括:计算所述第一特征值与对应的所述第二特征值之间的第一差值;计算所述第一差值的绝对值,作为特征绝对差值,将所述特征绝对差值作为分子;获取所述第一特征值的绝对值和所述第二特征值的绝对值中的最大绝对值,将所述最大绝对值作为分母;计算所述特征绝对差值与所述最大绝对值之间的比值;计算出多个所述比值之间的第一平均值,将所述第一平均值作为所述相似度。
在一些实施例,所述声音特征向量包括多个第一特征值,所述预设的参考特征向量包括多个第二特征值,所述计算所述声音特征向量与预设的参考特征向量之间的相似度,包括:计算所述第一特征值与对应的所述第二特征值之间的第二差值;计算所述第二差值的平方,作为特征差值平方值;计算出多个所述特征差值平方值之间的第二平均值,将所述第二平均值作为所述相似度。
在一些实施例,所述对所述声音信息进行特征提取,得到声音特征向量,包括:对所述声音信息进行预加重处理,得到高频信息;对所述高频信息进行分帧处理,得到分帧信息;对所述分帧信息进行加窗处理,得到优化信息;对所述优化信息进行快速傅里叶变换,得到频域信息;将所述频域信息通过梅尔滤波器组进行滤波,得到滤波信息;将所述滤波信息进行取对数处理,得到局部信息;对所述局部信息进行离散余弦变换,得到压缩信息;对所述压缩信息进行动态差分参数提取,得到所述声音特征向量。
为实现上述目的,本公开的第二方面提出了一种监测睡眠状态的装置,包括:声音采集模块,所述声音采集模块用于获取预设监测区域的当前环境信息,其中,所述环境信息包括声音信息;特征提取模块,所述特征提取模块用于对所述声音信息进行特征提取,得到声音特征向量;计算模块,所述计算模块用于计算所述声音特征向量与预设的参考特征向量之间的相似度;状态确定模块,所述状态确定模块用于根据所述相似度得到与所述声音特征向量最相似的目标参考特征向量,以所述目标参考特征向量代表的状态信息作为当前睡眠状态。
为实现上述目的,本公开的第三方面提出了一种电子设备,包括:至少一个存储器;至少一个处理器;至少一个程序;所述程序被存储在存储器中,处理器执行所述至少一个程序以实现本公开如上述第一方面所述的方法。
为实现上述目的,本公开的第四方面提出了一种存储介质,该存储介质是计算机可读存储介质,所述计算机可读存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行:如上述第一方面所述的方法。
附图说明
图1是本公开实施例提供的一种监测睡眠状态的方法的流程图;
图2是本公开实施例提供的另一种监测睡眠状态的方法的流程图;
图3是本公开实施例提供的又一种监测睡眠状态的方法的流程图;
图4是图1中的步骤S120的流程图;
图5是本公开实施例提供的电子设备的硬件结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本申请,并不用于限定本申请。
需要说明的是,虽然在装置示意图中进行了功能模块划分,在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于装置中的模块划分,或流程图中的顺序执行所示出或描述的步骤。说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本发明实施例的目的,不是旨在限制本发明。
本申请实施例可以基于人工智能技术对相关的数据进行获取和处理。其中,人工智能(Artificial Intelligence,AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。
人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、机器人技术、生物识别技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。
基于此,本公开实施例提供一种监测睡眠状态的方法、装置、电子设备和存储介质,通过对采集的声音信息进行特征提取,可以准确的识别出多种声音的具体类型,从而提高获取的睡眠状态的准确性。
本公开实施例提供一种监测睡眠状态的方法、装置、电子设备和存储介质,具体通过如下实施例进行说明,首先描述本公开实施例中的一种监测睡眠状态的方法。
本公开实施例提供的一种监测睡眠状态的方法可应用于终端中,也可应用于服务器端中,还可以是运行于终端或服务器端中的软件。在一些实施例中,终端可以是智能手机、智能手表、可穿戴设备等;服务器端可以配置成独立的物理服务器,也可以配置成多个物理服务器构成的服务器集群或者分布式系统,还可以配置成提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN以及大数据和人工智能平台等基础云计算服务的云服务器;软件可以是实现一种监测睡眠状态的方法的应用等,但并不局限于以上形式。
图1是本公开实施例提供的一种监测睡眠状态的方法的一个可选的流程图,图1中的方法可以包括但不限于包括步骤S110至步骤S150。
S110,获取预设监测区域的当前环境信息;
S120,对声音信息进行特征提取,得到声音特征向量;
S130,计算声音特征向量与预设的参考特征向量之间的相似度;
S140,根据相似度将与声音特征向量最相似的参考特征向量作为目标特征向量;
S150,获取目标特征向量表征的状态信息,将状态信息作为当前睡眠状态。
本公开实施例中,获取的预设监测区域的当前环境信息中,包括预设监测区域中的声音信息。可以理解的是,预设监测区域为需要监测用户睡眠状态的区域,如卧室、寝室等。获取声音信息的方式可以有多种,可以根据监测睡眠状态方法的不同具体实施方式进行选择。例如,可以通过用户智能手机中的麦克风实时采集周围环境的声音信息;或者通过用户穿戴的智能设备上的麦克风采集周围环境的声音信息;也可以为单独设置的声音采集装置来采集周围环境的声音信息。可以理解的是,在采集声音信息时,声音采集设备距离用户越近,采集得到的声音信息越清晰、准确。
然后获取采集的声音信息,对声音信息进行特征提取,以得到声音特征向量。示例,当使用智能手机或可穿戴智能设备获取声音信息时,智能手机或智能设备可以通过处理器对获取的声音信息进行特征提取,或者可以将获取的声音信息上传至云服务器中,通过云服务器中的处理程序对声音信息进行特征提取,以得到声音特征向量。本申请的声音特征向量为使用语音特征提取算法对声音信息进行处理后得到的,语音特征提取算法可以为梅尔倒频谱系数、线性预测系数、线性预测倒谱系数、谱线频率、离散小波变换、感知线性预测算法中的一种。通过语音特征提取算法可以将声音信息处理为低维的、以数值表示的向量特征,提取得到的声音特征向量在保存声音状态信息的情况下,同时减少了后续处理过程中的计算量,便于后续快速计算得到当前睡眠状态。
得到声音特征向量后,计算声音特征向量与预设的参考特征向量之间的相似度。预设的参考特征向量包括有多个标准声音特征向量,标准声音特征向量是根据实验,通过大数据计算得到。由于用户在不同睡眠状态下,发出的声音信息的音色、响度都不同,如在不同的睡眠状态下,呼吸产生的声音不同、打鼾产生的声音不同,或者在不同的睡眠阶段,由于体动(翻身、摆手等)产生的声音信号也不同。通过预先的数据收集与处理,可以得到对应睡眠状态下的标准声音特征向量,因此通过计算采集得到的声音特征向量与多个标准声音特征向量之间的相似度,根据多个相似度大小,选取与采集的声音特征向量最相似的参考特征向量,作为目标特征向量,此目标特征向量所表征的睡眠状态,即为用户当前的睡眠状态。
可以理解的是,采集得到的当前的声音特征向量可能并不属于预设的参考特征向量中的任意一种,因此相似程度最高的参考特征向量也无法准确表征用户当前的睡眠状态,因此可以设置一个相似度阈值,只有当最大或最小的相似度属于预设范围内的情况下,目标特征向量所表征的状态信息才能作为当前的睡眠状态。
本申请通过语音特征提取算法提取声音信息的声音特征向量,相较于单纯的以声音的频率或振幅来分辨声音类型的方法,可以精确的提取出不同声音的特征信息,因此在分辨声音类型时更加准确,由此计算得到的睡眠状态也更加精准。通过实时判断并记录下用户的睡眠状态,用户可以以曲线、扇形图、柱状图的方式进行查看,判断自生的睡眠质量和身体健康状况,从而优化饮食、睡眠习惯等,提高自身的健康状况。
在一些实施例,环境信息还包括加速度信息,睡眠状态还包括清醒状态,参照图2,监测睡眠状态的方法还包括:
S210,根据加速度信息和预设的参考加速度,计算出加速度值;
S220,根据加速度值判断睡眠状态是否为清醒状态。
本申请的监测睡眠状态的方法中,在采集声音信息的同时,也会采集加速度信息。加速度信息可以通过智能手机或可穿戴智能设备上的加速度计、重力感应器、陀螺仪等采集得到,其都可以响应加速度变化。可以理解的是,当通过智能手机采集加速度信息时,可以将智能手机放在用户的身旁,间接采集加速度信息。可穿戴设备则可以直接获取由于用户体动而产生的加速度变化。
本申请的清醒状态,包括用户在未休息时的运动状态,或者未进入深度睡眠时的翻身、侧身等状态。本申请的参考加速度可以是一个阈值也可以是一段时间内的加速度变化,通过比较当前采集的加速度信息与预设的参考加速度,可以得到加速度值,通过加速度值所在的范围,即可得到用户所处的具体清醒状态。在这些清醒状态下,用户的体动也会对应的产生声音信息,通过声音信息和加速度信息共同判断用户的睡眠状态,提高了判断用户当前睡眠状态的准确程度。
在一些实施例,环境信息还包括光照信息,睡眠状态还包括清醒状态,参照图3,监测睡眠状态的方法还包括:
S310,根据光照信息和预设的参考光照,计算出光照值;
S320,根据光照值判断睡眠状态是否为清醒状态。
通过设置的光线传感器采集预设监测区域的光照信息。一般来说,在预设监测区域的光照强度较大的情况下,光线会透过用户的眼皮,导致用户的睡眠质量较差,此时用户更容易产生体动,在光照强度较低的环境下,用户的睡眠质量通常较好,不容易产生体动。通过获取光照信息,并与预设的参考光照进行比较,计算得到光照值,通过计算得到的光照值并结合声音信息,可以进一步提高检测得到的睡眠状态的准确性。具体示例,当根据声音信息检测到用户在侧身,此时根据光照信息检测到环境光强度较大,由此可以得到用户在睡眠时未进入深度睡眠状态,处在浅度睡眠阶段,因此记录用户的睡眠状态为浅度睡眠,且可以同时记录其翻身、侧身的次数等。可以理解的是,在一些其他实施例中,也可以通过声音信息、加速度信息和光照信息结合的方式来判断用户当前的睡眠状态。
在一些实施例,睡眠状态还包括打鼾状态;
若检测睡眠状态是打鼾状态,则开启声音录制模式,以存储声音信息。
当通过上述实施例中的监测睡眠状态的方法检测出用户当前的睡眠状态为打鼾状态时,则自动开启声音录制模式,将当前采集的声音信息进行存储。通过存储用户打鼾时的声音信息,可以使用户在查看睡眠状态记录的同时,获取自己鼾声的声音片段,提高了系统功能的多样性,增加趣味性。可以理解的是,为节省存储空间,当检测到用户的睡眠状态发生改变,即从打鼾状态变换为其它睡眠状态时,声音录制模式即会关闭,停止存储声音信息。在一些其他实施例中,当检测到用户说梦话、侧身、翻身时的声音信息时,也可以将相应的声音信息进行存储,用户可以根据喜好自定义需要存储的声音信息的类型,进一步增加趣味性。
在一些实施例,声音特征向量包括多个第一特征值,预设的参考特征向量包括多个第二特征值。
具体示例,参照表1,为当前采集的声音信息进行特征提取后,得到的一个声音特征向量的示例。
表1:
X1 X2 X3 X4 X5 X6 X7
声音特征向量 0 1 3 6 4 4 7
声音特征向量中包括多个第一特征值,即表1中的特征值X1至特征值X7为第一特征值,可以理解的是,对相同的声音信息,通过不同的声音特征提取算法,得到的声音特征向量的维数和特征值大小都是不同的,其具体的特征值由不同的特征提取方式决定。
参照表2,为预设的参考特征向量的一具体示例。
表2:
Y1 Y2 Y3 Y4 Y5 Y6 Y7
打鼾 0 2 3 6 4 5 8
侧身 3 7 9 8 9 9 9
表2中的参考特征向量所表示的声音类型分别为打鼾和侧身,对应的每一个参考特征向量分别有特征值Y1至特征值Y7对应的第二特征值。
本申请的计算声音特征向量与预设的参考特征向量之间的相似度的步骤,包括:
计算第一特征值与对应的第二特征值之间的第一差值;
计算第一差值的绝对值,作为特征绝对差值,将特征绝对差值作为分子;
获取第一特征值的绝对值和第二特征值的绝对值中的最大绝对值,将最大绝对值作为分母;
计算特征绝对差值与最大绝对值之间的比值;
计算出多个比值之间的第一平均值,将第一平均值作为相似度。
参照公式(1),为上述相似度计算方法的具体计算公式(1):
Figure BDA0003237090830000071
Dist(X,Y)代表声音特征向量与参考特征向量之间的距离,即相似度,abs(Xi-Yi)即为计算第一特征值与第二特征值之间的第一差值,并对第一差值做求绝对值计算,得到特征绝对差值,max(abs(Xi),abs(Yi))即为求第一特征值的绝对值与第二特征值的绝对值中的最大绝对值,然后计算特征绝对差值与最大绝对值之间的比值,并计算出多个比值之间的第一平均值,完成计算过程。
将表1和表2中的特征值带入式公式(1)中,可以得到:
声音特征向量与打鼾的参考特征向量之间的相似度Dist(打鼾)=0.12;
声音特征向量与侧身的参考特征向量之间的相似度Dist(侧身)=0.5。
由于计算得到的当前声音特征向量与打鼾的参考特征向量之间的值更小,说明当前采集的声音特征向量所表征的状态与打鼾更为接近,因此将打鼾作为当前的睡眠状态。可以理解的是,参考特征向量的数量可以根据预设的实验计算得到,每一种睡眠状态都对应有一个确定的参考特征向量,根据计算得到的值,选取与当前声音特征向量最相似的参考特征向量表征的状态信息,作为当前的睡眠状态。
在一些实施例,计算声音特征向量与预设的参考特征向量之间的相似度的步骤,具体包括:
计算第一特征值与对应的第二特征值之间的第二差值;
计算第二差值的平方,作为特征差值平方值;
计算出多个特征差值平方值之间的第二平均值,将第二平均值作为相似度。
参照公式(2),为上述实施例中,相似度计算方法的具体计算公式:
Figure BDA0003237090830000072
通过计算第一特征值Xi与第二特征值Yi之间的第二差值,再对第二差值进行平方计算,得到特征差值平方值,防止出现负值,最后将多个特征差值平方值进行求平均值计算,得到第二平均值,以第二平局值作为相似度。
将表1和表2中的特征值带入式公式(2)中,可以得到:
声音特征向量与打鼾的参考特征向量之间的相似度Dist(打鼾)=0.28;
声音特征向量与侧身的参考特征向量之间的相似度Dist(侧身)=19.9。
根据计算结果可以得到,表征打鼾状态的参考特征向量与当前声音特征向量更为相似,因此当前的声音特征向量所表示的睡眠状态为打鼾状态。本实施例的计算相似度的方法可以放大特征向量之间的差距,辨识度较高。
在一些其他实施例中,也可以采用求余弦距离的方式,来得到两个向量之间的相似度。可以理解的是,不同的相似度计算方法,对不同类型的声音信号的敏感程度不同,其具体的计算方式可以根据实际的设计需求进行选择。
在一些实施例,参照图4,对声音信息进行特征提取,得到声音特征向量,包括:
S121,对声音信息进行预加重处理,得到高频信息;
S122,对高频信息进行分帧处理,得到分帧信息;
S123,对分帧信息进行加窗处理,得到优化信息;
S124,对优化信息进行快速傅里叶变换,得到频域信息;
S125,将频域信息通过梅尔滤波器组进行滤波,得到滤波信息;
S126,将滤波信息进行取对数处理,得到局部信息;
S127,对局部信息进行离散余弦变换,得到压缩信息;
S128,对压缩信息进行动态差分参数提取,得到声音特征向量。
本申请实施例的对声音信息进行特征提取的方式,采用梅尔倒频谱系数。其具体过程为:首先对声音信息进行预加重处理,通过在频域上乘上一个与频率正相关的系数,提取出声音信息所包含的高频信息;在一些其他实施例中,也可以使用高通滤波器来实现。
然后对高频信息进行分帧,将高频信息分成固定的多段声音信号,得到分帧信息,方便继续进行后续的处理过程;将分帧信息进行加窗处理,以消除各段声音信号两端所造成的谱泄漏,常用的窗函数有方窗、汉明窗和汉宁窗等,可以根据具体的处理过程任意选择,通过加窗处理后得到优化信息;
然后将优化信息进行快速傅里叶变换,将优化信息的时域信号转换为频域信号,以得到频域信息;由于频域信息中有很多冗余,因此将频域信息输入至梅尔滤波器组中,对频域信息进行滤波处理,在每一个频段用一个值来表示,得到滤波后的滤波信息;由于人耳对声音的感知并不是线性的,因此对滤波信息进行取对数处理,得到局部信息;然后对局部信息进行离散余弦变换,对局部信息进行降维,得到压缩信息;最后对压缩信息进行离散余弦变换,得到一维的声音特征向量,方便进行后续的向量比较过程。
在一些实施例,本申请还提出了一种监测睡眠状态的装置,包括:
声音采集模块,声音采集模块用于获取预设监测局域的当前环境信息,其中,环境信息包括声音信息;
特征提取模块,特征提取模块用于对声音信息进行特征提取,得到声音特征向量;
计算模块,计算模块用于计算声音特征向量与预设的参考特征向量之间的相似度;
状态确定模块,状态确定模块用于根据相似度得到与声音特征向量最相似的目标参考特征向量,以目标参考特征向量代表的状态信息作为当前睡眠状态。
在一些实施例,环境信息还包括加速度信息,睡眠状态还包括清醒状态,监测睡眠状态的装置还包括:
加速度检测模块,加速度检测模块用于获取加速度信息,加速度信息可以通过智能手机或可穿戴智能设备上的加速度计、重力感应器、陀螺仪等采集得到。
计算模块用于根据加速度信息和预设的参考加速度,计算出加速度值。
状态确定模块用于根据加速度值判断睡眠状态是否为清醒状态。
在一些实施例,环境信息还包括光照信息,睡眠状态还包括清醒状态,监测睡眠状态的装置还包括:
光照检测模块,光照检测模块用于采集光照信息,光照信息可以通过智能手机或可穿戴智能设备上的光线传感器采集得到。
计算模块用于根据光照信息和预设的参考光照,计算出光照值。
状态确定模块用于根据光照值判断睡眠状态是否为清醒状态。
在一些实施例,睡眠状态还包括打鼾状态,监测睡眠状态的装置还包括:
鼾声存储模块,鼾声存储模块用于在检测到睡眠状态是打鼾状态的情况下,开启声音录制模式,以存储声音信息。
在一些实施例,声音特征向量包括多个第一特征值,预设的参考特征向量包括多个第二特征值,计算模块计算声音特征向量与预设的参考特征向量之间相似度的过程,包括:
计算模块计算第一特征值与对应的第二特征值之间的第一差值;计算第一差值的绝对值,作为特征绝对差值,将特征绝对差值作为分子;获取第一特征值的绝对值和第二特征值的绝对值中的最大绝对值,将最大绝对值作为分母;计算特征绝对差值与最大绝对值之间的比值;计算出多个比值之间的第一平均值,将第一平均值作为相似度
在一些实施例,声音特征向量包括多个第一特征值,预设的参考特征向量包括多个第二特征值,计算模块计算声音特征向量与预设的参考特征向量之间相似度的过程,包括:
计算模块计算第一特征值与对应的第二特征值之间的第二差值;计算第二差值的平方,作为特征差值平方值;计算出多个特征差值平方值之间的第二平均值,将第二平均值作为相似度。
在一些实施例,特征提取模块对声音信息进行特征提取,得到声音特征向量的过程,包括:
特征提取模块对声音信息进行预加重处理,得到高频信息;对高频信息进行分帧处理,得到分帧信息;对分帧信息进行加窗处理,得到优化信息;对优化信息进行快速傅里叶变换,得到频域信息;将频域信息通过梅尔滤波器组进行滤波,得到滤波信息;将滤波信息进行取对数处理,得到局部信息;对局部信息进行离散余弦变换,得到压缩信息;对压缩信息进行动态差分参数提取,得到声音特征向量。
本申请的监测睡眠状态的装置用于执行上述实施例中的监测睡眠状态的方法,其具体处理过程与上述方法实施例中的相同,此处不再一一赘述。
本公开实施例还提供了一种电子设备,包括:
至少一个存储器;
至少一个处理器;
至少一个程序;
所述程序被存储在存储器中,处理器执行所述至少一个程序以实现本公开实施上述的监测睡眠状态的方法。该电子设备可以为包括手机、平板电脑、个人数字助理(Personal Digital Assistant,简称PDA)、车载电脑等任意智能终端。
请参阅图5,图5示意了另一实施例的电子设备的硬件结构,电子设备包括:
处理器,可以采用通用的CPU(Central ProcessingUnit,中央处理器)、微处理器、应用专用集成电路(ApplicationSpecificIntegratedCircuit,ASIC)、或者一个或多个集成电路等方式实现,用于执行相关程序,以实现本公开实施例所提供的技术方案;
存储器,可以采用ROM(ReadOnlyMemory,只读存储器)、静态存储设备、动态存储设备或者RAM(RandomAccessMemory,随机存取存储器)等形式实现。存储器可以存储操作系统和其他应用程序,在通过软件或者固件来实现本说明书实施例所提供的技术方案时,相关的程序代码保存在存储器中,并由处理器来调用执行本公开实施例的监测睡眠状态的方法;
输入/输出接口,用于实现信息输入及输出;
输入/通信接口,用于实现本设备与其他设备的通信交互,可以通过有线方式(例如USB、网线等)实现通信,也可以通过无线方式(例如移动网络、WIFI、蓝牙等)实现通信;
总线,在设备的各个组件(例如处理器、存储器、输入/输出接口和输入/通信接口)之间传输信息;
其中处理器、存储器、输入/输出接口和输入/通信接口通过总线实现彼此之间在设备内部的通信连接。
本公开实施例还提供了一种存储介质,该存储介质是计算机可读存储介质,该计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令用于使计算机执行上述监测睡眠状态的方法。
存储器作为一种非暂态计算机可读存储介质,可用于存储非暂态软件程序以及非暂态性计算机可执行程序。此外,存储器可以包括高速随机存取存储器,还可以包括非暂态存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施方式中,存储器可选包括相对于处理器远程设置的存储器,这些远程存储器可以通过网络连接至该处理器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
本公开实施例描述的实施例是为了更加清楚的说明本公开实施例的技术方案,并不构成对于本公开实施例提供的技术方案的限定,本领域技术人员可知,随着技术的演变和新应用场景的出现,本公开实施例提供的技术方案对于类似的技术问题,同样适用。
本领域技术人员可以理解的是,图中示出的技术方案并不构成对本公开实施例的限定,可以包括比图示更多或更少的步骤,或者组合某些步骤,或者不同的步骤。
以上所描述的装置实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
本领域普通技术人员可以理解,上文中所公开方法中的全部或某些步骤、系统、设备中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。
本申请的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
应当理解,在本申请中,“至少一个(项)”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,用于描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:只存在A,只存在B以及同时存在A和B三种情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b或c中的至少一项(个),可以表示:a,b,c,“a和b”,“a和c”,“b和c”,或“a和b和c”,其中a,b,c可以是单个,也可以是多个。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括多指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等各种可以存储程序的介质。
上面结合附图对本申请实施例作了详细说明,但是本申请不限于上述实施例,在所属技术领域普通技术人员所具备的知识范围内,还可以在不脱离本申请宗旨的前提下作出各种变化。此外,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。

Claims (10)

1.一种监测睡眠状态的方法,其特征在于,包括:
获取预设监测区域的当前环境信息,其中,所述环境信息包括声音信息;
对所述声音信息进行特征提取,得到声音特征向量;
计算所述声音特征向量与预设的参考特征向量之间的相似度;
根据所述相似度将与所述声音特征向量最相似的参考特征向量作为目标特征向量;
获取所述目标特征向量表征的状态信息,将所述状态信息作为当前睡眠状态。
2.根据权利要求1所述的方法,其特征在于,所述环境信息还包括加速度信息,所述睡眠状态还包括清醒状态,所述方法还包括:
根据所述加速度信息和预设的参考加速度,计算出加速度值;
根据所述加速度值判断所述睡眠状态是否为所述清醒状态。
3.根据权利要求1所述的方法,其特征在于,所述环境信息还包括光照信息,所述睡眠状态还包括清醒状态,所述方法还包括:
根据所述光照信息和预设的参考光照,计算出光照值;
根据所述光照值判断所述睡眠状态是否为所述清醒状态。
4.根据权利要求1至3任一项所述的方法,其特征在于,所述睡眠状态还包括打鼾状态;
若检测所述睡眠状态是打鼾状态,则开启声音录制模式,以存储所述声音信息。
5.根据权利要求1至3任一项所述的方法,其特征在于,所述声音特征向量包括多个第一特征值,所述预设的参考特征向量包括多个第二特征值,所述计算所述声音特征向量与预设的参考特征向量之间的相似度,包括:
计算所述第一特征值与对应的所述第二特征值之间的第一差值;
计算所述第一差值的绝对值,作为特征绝对差值,将所述特征绝对差值作为分子;
获取所述第一特征值的绝对值和所述第二特征值的绝对值中的最大绝对值,将所述最大绝对值作为分母;
计算所述特征绝对差值与所述最大绝对值之间的比值;
计算出多个所述比值之间的第一平均值,将所述第一平均值作为所述相似度。
6.根据权利要求1至3任一项所述的方法,其特征在于,所述声音特征向量包括多个第一特征值,所述预设的参考特征向量包括多个第二特征值,所述计算所述声音特征向量与预设的参考特征向量之间的相似度,包括:
计算所述第一特征值与对应的所述第二特征值之间的第二差值;
计算所述第二差值的平方,作为特征差值平方值;
计算出多个所述特征差值平方值之间的第二平均值,将所述第二平均值作为所述相似度。
7.根据权利要求1至3任一项所述的方法,其特征在于,所述对所述声音信息进行特征提取,得到声音特征向量,包括:
对所述声音信息进行预加重处理,得到高频信息;
对所述高频信息进行分帧处理,得到分帧信息;
对所述分帧信息进行加窗处理,得到优化信息;
对所述优化信息进行快速傅里叶变换,得到频域信息;
将所述频域信息通过梅尔滤波器组进行滤波,得到滤波信息;
将所述滤波信息进行取对数处理,得到局部信息;
对所述局部信息进行离散余弦变换,得到压缩信息;
对所述压缩信息进行动态差分参数提取,得到所述声音特征向量。
8.一种监测睡眠状态的装置,其特征在于,包括:
声音采集模块,所述声音采集模块用于获取预设监测区域的当前环境信息,其中,所述环境信息包括声音信息;
特征提取模块,所述特征提取模块用于对所述声音信息进行特征提取,得到声音特征向量;
计算模块,所述计算模块用于计算所述声音特征向量与预设的参考特征向量之间的相似度;
状态确定模块,所述状态确定模块用于根据所述相似度得到与所述声音特征向量最相似的目标参考特征向量,以所述目标参考特征向量代表的状态信息作为当前睡眠状态。
9.一种电子设备,其特征在于,包括:
至少一个存储器;
至少一个处理器;
至少一个程序;
所述程序被存储在所述存储器中,处理器执行所述至少一个程序以实现:
如权利要求1至7任一项所述的方法。
10.一种存储介质,所述存储介质为计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行:
如权利要求1至7任一项所述的方法。
CN202111006076.1A 2021-08-30 2021-08-30 监测睡眠状态的方法、装置、电子设备和存储介质 Pending CN113724737A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202111006076.1A CN113724737A (zh) 2021-08-30 2021-08-30 监测睡眠状态的方法、装置、电子设备和存储介质
PCT/CN2022/087529 WO2023029503A1 (zh) 2021-08-30 2022-04-19 监测睡眠状态的方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111006076.1A CN113724737A (zh) 2021-08-30 2021-08-30 监测睡眠状态的方法、装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN113724737A true CN113724737A (zh) 2021-11-30

Family

ID=78679173

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111006076.1A Pending CN113724737A (zh) 2021-08-30 2021-08-30 监测睡眠状态的方法、装置、电子设备和存储介质

Country Status (2)

Country Link
CN (1) CN113724737A (zh)
WO (1) WO2023029503A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023029503A1 (zh) * 2021-08-30 2023-03-09 康键信息技术(深圳)有限公司 监测睡眠状态的方法、装置、电子设备和存储介质
CN116649942A (zh) * 2023-07-28 2023-08-29 亿慧云智能科技(深圳)股份有限公司 睡眠状态下基于微波雷达的心率监测方法、装置及系统
CN116746887A (zh) * 2023-08-18 2023-09-15 智慧眼科技股份有限公司 一种基于音频的睡眠分期的方法、系统、终端及存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117942039B (zh) * 2024-01-30 2024-08-06 深圳市迈远科技有限公司 睡眠质量监控方法、装置、电子设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150119741A1 (en) * 2012-05-31 2015-04-30 Ben Gurion University Of The Negev Research And Development Authority Apparatus and method for diagnosing sleep quality
CN106264470A (zh) * 2016-09-12 2017-01-04 广东欧珀移动通信有限公司 睡眠监测的方法及装置
CN108523901A (zh) * 2018-05-14 2018-09-14 北京工业大学 一种基于智能手机的睡眠质量监测方法
CN109124572A (zh) * 2018-06-15 2019-01-04 四川斐讯信息技术有限公司 一种睡眠状态的判断方法、系统及空气净化器
CN109510900A (zh) * 2019-01-29 2019-03-22 上海与德通讯技术有限公司 一种控制方法、装置、设备及存储介质
CN110151137A (zh) * 2019-05-28 2019-08-23 深圳如一探索科技有限公司 基于数据融合的睡眠状态监测方法、装置、设备及介质
CN111227791A (zh) * 2020-01-09 2020-06-05 珠海格力电器股份有限公司 一种睡眠质量监控方法及睡眠监控装置
CN113012719A (zh) * 2021-02-04 2021-06-22 上海小芃科技有限公司 睡眠声音信号疲劳评估方法、系统、电子设备及存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108937866B (zh) * 2018-06-29 2020-03-20 出门问问信息科技有限公司 睡眠状态的监测方法及装置
CN110179436B (zh) * 2019-04-04 2021-11-19 深圳创达云睿智能科技有限公司 一种鼾声取样方法及终端设备
CN113724737A (zh) * 2021-08-30 2021-11-30 康键信息技术(深圳)有限公司 监测睡眠状态的方法、装置、电子设备和存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150119741A1 (en) * 2012-05-31 2015-04-30 Ben Gurion University Of The Negev Research And Development Authority Apparatus and method for diagnosing sleep quality
CN106264470A (zh) * 2016-09-12 2017-01-04 广东欧珀移动通信有限公司 睡眠监测的方法及装置
CN108523901A (zh) * 2018-05-14 2018-09-14 北京工业大学 一种基于智能手机的睡眠质量监测方法
CN109124572A (zh) * 2018-06-15 2019-01-04 四川斐讯信息技术有限公司 一种睡眠状态的判断方法、系统及空气净化器
CN109510900A (zh) * 2019-01-29 2019-03-22 上海与德通讯技术有限公司 一种控制方法、装置、设备及存储介质
CN110151137A (zh) * 2019-05-28 2019-08-23 深圳如一探索科技有限公司 基于数据融合的睡眠状态监测方法、装置、设备及介质
CN111227791A (zh) * 2020-01-09 2020-06-05 珠海格力电器股份有限公司 一种睡眠质量监控方法及睡眠监控装置
CN113012719A (zh) * 2021-02-04 2021-06-22 上海小芃科技有限公司 睡眠声音信号疲劳评估方法、系统、电子设备及存储介质

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023029503A1 (zh) * 2021-08-30 2023-03-09 康键信息技术(深圳)有限公司 监测睡眠状态的方法、装置、电子设备和存储介质
CN116649942A (zh) * 2023-07-28 2023-08-29 亿慧云智能科技(深圳)股份有限公司 睡眠状态下基于微波雷达的心率监测方法、装置及系统
CN116649942B (zh) * 2023-07-28 2023-10-20 亿慧云智能科技(深圳)股份有限公司 睡眠状态下基于微波雷达的心率监测方法、装置及系统
CN116746887A (zh) * 2023-08-18 2023-09-15 智慧眼科技股份有限公司 一种基于音频的睡眠分期的方法、系统、终端及存储介质
CN116746887B (zh) * 2023-08-18 2023-12-01 智慧眼科技股份有限公司 一种基于音频的睡眠分期的方法、系统、终端及存储介质

Also Published As

Publication number Publication date
WO2023029503A1 (zh) 2023-03-09

Similar Documents

Publication Publication Date Title
CN113724737A (zh) 监测睡眠状态的方法、装置、电子设备和存储介质
CN107369196B (zh) 表情包制作方法、装置、存储介质及电子设备
KR102659414B1 (ko) Em 센서 모듈을 포함하는 전자 장치 및 이의 제어 방법
CN110123367B (zh) 计算机设备、心音识别装置、方法、模型训练装置及存储介质
WO2018070935A1 (en) Determining sleep stages
TWI714926B (zh) 夢境重現模型的構建方法、夢境重現方法及裝置
Zakaria et al. Three resnet deep learning architectures applied in pulmonary pathologies classification
CN108937866B (zh) 睡眠状态的监测方法及装置
CN107822645B (zh) 一种基于WiFi信号的情绪识别方法
CN110731778A (zh) 一种基于可视化的呼吸音信号识别方法及系统
CN115486833B (zh) 呼吸状态检测方法、装置、计算机设备以及存储介质
CN111954250A (zh) 一种轻量级Wi-Fi行为感知方法和系统
US10799169B2 (en) Apparatus, system and method for detecting onset Autism Spectrum Disorder via a portable device
CN110737201A (zh) 一种监护方法、装置、存储介质及空调
CN110638419A (zh) 用于识别咀嚼的食物和/或饮用的饮料的方法和设备
CN108509034A (zh) 电子装置、信息处理方法及相关产品
AU2013204156A1 (en) Classification apparatus and program
CN114863905A (zh) 语音类别获取方法、装置、电子设备和存储介质
CN116631380B (zh) 一种音视频多模态的关键词唤醒方法及装置
WO2017107035A1 (en) Time domain feature transform for user gestures
KR20220008601A (ko) 생체 신호를 획득하는 전자 장치 및 그 운용 방법
CN114176525B (zh) 睡眠质量分析方法、装置、计算机设备和存储介质
CN114333905A (zh) 耳机佩戴检测方法和装置、电子设备、存储介质
CN111627454A (zh) 环境语音采集处理方法、装置、设备及可读存储介质
CN113220122A (zh) 脑波音频处理方法、设备及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination