CN108670200A - 一种基于深度学习的睡眠鼾声分类检测方法及系统 - Google Patents

一种基于深度学习的睡眠鼾声分类检测方法及系统 Download PDF

Info

Publication number
CN108670200A
CN108670200A CN201810536311.8A CN201810536311A CN108670200A CN 108670200 A CN108670200 A CN 108670200A CN 201810536311 A CN201810536311 A CN 201810536311A CN 108670200 A CN108670200 A CN 108670200A
Authority
CN
China
Prior art keywords
sound
snoring
sleep
signal
acoustical signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810536311.8A
Other languages
English (en)
Other versions
CN108670200B (zh
Inventor
彭健新
唐云飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China University of Technology SCUT
Original Assignee
South China University of Technology SCUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China University of Technology SCUT filed Critical South China University of Technology SCUT
Priority to CN201810536311.8A priority Critical patent/CN108670200B/zh
Publication of CN108670200A publication Critical patent/CN108670200A/zh
Application granted granted Critical
Publication of CN108670200B publication Critical patent/CN108670200B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B7/00—Instruments for auscultation
    • A61B7/003—Detecting lung or respiration noise
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4806—Sleep evaluation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4806—Sleep evaluation
    • A61B5/4818—Sleep apnoea
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device

Abstract

本发明公开了一种基于深度学习的睡眠鼾声分类检测方法，该方法主要包括：通过传感器采集被测患者整晚的睡眠声信号，并对所述睡眠声信号中的有声段进行探测，获取睡眠声信号中的有声段图谱；使用深度学习对有声段图谱进行鼾声与非鼾声的分类，并保留纯鼾声的识别结果；再使用深度学习对纯鼾声的识别结果进行四类鼾声的分类，完成对呼吸暂停低通气综合征(OSAHS)患者鼾声的自动识别与检测；根据对鼾声的识别与检测结果，统计被测患者整晚各类鼾声的数量，获取被测患者整晚AHI指数。本发明还公开了一种基于深度学习的睡眠鼾声分类检测方法的检测系统。本发明的方法及系统能够有效准确评价打鼾对象是否患病及患病程度，为OSAHS患者提供数据参考。

Description

一种基于深度学习的睡眠鼾声分类检测方法及系统
技术领域
本发明涉及疾病检测技术领域，特别涉及一种基于深度学习的睡眠鼾声分类检测方法及系统。
背景技术
阻塞性睡眠呼吸暂停低通气综合征(OSAHS)是较为严重的睡眠呼吸障碍,病症主要表现为患者在睡觉过程中呼吸道软腭多次内陷,反复阻塞气道,导致呼吸受阻,临床表现为晚上睡觉时打鼾并伴随呼吸暂停或呼吸气流流量小。呼吸暂停是指患者在睡觉时呼吸气流消失超过10秒的情况，低通气是指患者在睡觉时呼吸气流强度低于基本值的50％，同时血氧浓度下降到低于正常水平96％的情况。
对于OSAHS的检测，传统的方法是通过多导睡眠监测装置对病人进行6至7小时的睡眠监督和测量，可记录并分析EEG(脑电图)、ECG(心电图)、EOG(眼电图)、EMG(肌电图)，鼾声、血氧饱和度、呼吸频率、体位等多个睡眠时的体征参数，该方法准确可靠，但是由于需要在患者身上安置超过15个导联，影响到了患者的正常睡眠状态，并且价格不菲，而且通过多导睡眠图(PSG)获取的信息必须利用人工辨别出现的问题，非常不便，人们正在寻找经济有效且可靠的辅助诊断方法。
鉴于鼾声的产生与呼吸道的生理结构关系紧密，鼾声极有可能能够反映出患者呼吸道发生病变的一些情况，并且有研究表明普通打鼾者发出的鼾声同OSAHS患者之间的鼾声存在一定的差异。AHI指数(暂停低通气指数)是判定OSAHS患者患病程度的最直观的标准，如果不对鼾声进行分类将很难从鼾声获取病人的AHI指数，因此对患病鼾声进行分类研究有其必要性，且通过将病患的整晚鼾声进行分类识别将有助于OSAHS患者病情的诊断和监控。
发明内容
本发明的目的在于克服现有技术中的缺点与不足，提供一种基于深度学习的睡眠鼾声分类检测方法，将睡眠声信号进行处理有效信号提取，获取有声段图谱，使用深度学习对有声段图谱进行鼾声与非鼾声的分类，获取识别结果为纯鼾声的图谱及音频文件，再使用深度学习对纯鼾声的图谱及音频文件进行四类鼾声分类，完成对呼吸暂停低通气综合征鼾声的自动识别与检测，然后统计被测患者整晚各类鼾声的数量，获取被测患者整晚AHI指数。本发明方法使用深度学习对图谱进行了高准确度的识别，有利于准确评价打鼾对象是否患病及患病程度，为OSAHS患者提供数据参考。
本发明的另一目的在于，运用基于深度学习的睡眠鼾声分类检测方法，提出基于深度学习的睡眠鼾声分类检测方法的检测系统。
为实现以上目的，本发明采取如下技术方案：
一种基于深度学习的睡眠鼾声分类检测方法，包括下述步骤：
S1、通过传感器采集被测患者整晚的睡眠声信号，并对所述睡眠声信号中的有声段进行探测，获取睡眠声信号中的有声段图谱，有声段为一个鼾声或呼吸声；
S11、对所述睡眠声信号中的有声段进行探测：对所述睡眠声信号进行预加重和分帧的预处理，并对预处理后的睡眠声信号进行降噪处理，再将计算降噪处理后的睡眠声信号中有声段及残余噪声段的有效值，根据睡眠声信号的有效值轮廓，确定最终的有效值信号；
S12、根据步骤S11得到的睡眠声信号最终的有效值信号，获取睡眠声信号的有声段图谱；
S2、使用深度学习对有声段图谱进行鼾声与非鼾声的分类，并完成对鼾声与非鼾声的自动侦测与识别，保留识别结果为鼾声的图谱及音频文件；
所述使用深度学习对有声段图谱进行鼾声与非鼾声的分类，采用卷积神经网络，其过程包括：(1)确定卷积神经网络收敛方式；(2)选择激活函数；(3)选择网络输出预测结果概率函数；(4)通过卷积神经网络训练获取其参数；(5)根据损失函数对卷积神经网络参数进行调整，以完成对鼾声与非鼾声的自动识别；
S3、根据步骤S2获得的纯鼾声图谱及音频文件，采用如同步骤S2的深度学习对纯鼾声图谱及音频文件进行鼾声分类，完成对呼吸暂停低通气综合征鼾声的自动识别与检测；
S4、根据步骤S3的识别与检测结果，统计被测患者整晚各类鼾声的数量，获取被测患者整晚AHI指数，完成对被测患者整晚鼾声AHI指数的预测。
作为优选的技术方案，步骤S11具体包括下述步骤：
S111、对所述睡眠声信号进行预加重和分帧的预处理：利用一阶高通FIR滤波器完成睡眠声信号的预加重，分帧时选择帧长为20ms，帧移为10ms、50％的重叠率；
S112、对预处理后的睡眠声信号进行降噪处理：使用谱减法和维纳滤波法相结合的方法或声纹技术对睡眠声信号进行降噪；
S113、计算降噪处理后的睡眠声信号的绝对值，每50个采样点内寻找所述睡眠声信号的绝对值最大值，求得睡眠声信号的最大值信号轮廓；在最大值信号中每50个最大值之间进行求和，形成初步的有效值信号轮廓，根据初步的有效值信号轮廓，确定有效值信号门限；再对初步的有效值信号通过10点滑动平均进行平滑处理，得到最终的有效值信号。
作为优选的技术方案，步骤S12中，所述睡眠声信号的有声段图谱包括信号图、频谱图、以及语谱图；
获取有声段的信号图：信号图为有声段的信号波形图，去掉坐标，只保留图形部分；
获取有声段的频谱图：对有声段信号做离散傅里叶变换所画出的频谱图，去掉坐标，只保留图形部分，傅里叶变换如下式(1)：
其中，k表示离散频率，N表示傅里叶变换的点数，n表示做傅里叶变换的点的序数，j是虚数单位，x(n)表示时域下第n个点的值；
获取有声段的语谱图：语谱图是以时间为横坐标，以频率为纵坐标所得到的声音能量分布图，以不同颜色表征不同的能量大小，去掉坐标，只保留图形部分。
作为优选的技术方案，步骤S2具体包括下述步骤：
S21、确定卷积神经网络收敛方式：按照正则化后的梯度下降法收敛网络，具体利用如下公式：
w＝w-ε(αw+▽wJ(w；X,y))(2)
其中α为正则系数，ε为学习率，J(w,X,y)为目标函数，y为上一轮训练的输出值，w为滤波器权重；
S22、选择激活函数：选择ReLU函数作为激活函数，
其中x是上一卷积层计算所得数值；
S23、选择网络输出预测结果概率函数：选择softmax函数作为输出预测结果概率函数；假设存在一个数组z,zi是其中一个元素，则
其中yi是输出识别分数；因为要将有声段图谱分为鼾声与非鼾声两类，故对每张图谱输出两个y，softmax函数的作用即把输入的类别参数zi转换成识别分数，得分最高的即为分类器输出的最终辨识结果；
S24、通过卷积神经网络训练获取其参数：使用卷积神经网络对步骤S23所分类的图谱集进行初步试训，获取卷积神经网络训练参数大致范围，参数包括：学习率初始值和学习率变化方案、L1和L2正则系数、权值初始化方式、网络层数、池化方式、激活函数、以及训练和测试批大小；
S25、根据步骤S24训练及测试所得的损失函数曲线判断训练状态，以此状态为依据对卷积神经网络训练参数进行调整，得出最终训练结果，完成对鼾声与非鼾声的自动识别，并提取出鼾声的图谱及音频文件用作后续使用。
作为优选的技术方案，步骤S3中，所述鼾声包括呼吸紊乱前鼾声、呼吸紊乱中鼾声、呼吸紊乱后鼾声以及正常鼾声四类鼾声。
作为优选的技术方案，步骤S4中，步骤S4中，按时间顺序记录被测患者整晚四类鼾声；其中，当相邻的两次普通鼾声之间出现呼吸紊乱前鼾声、呼吸紊乱中鼾声和呼吸紊乱后鼾声中的至少一种时，将其记录为一次呼吸紊乱事件；统计每小时的呼吸紊乱事件次数，所得结果即为AHI指数。
基于深度学习的睡眠鼾声分类检测方法的分类检测系统，包括信号提取模块、计算模块、识别模块和统计预测模块；
所述信号提取模块，用于采集被测患者整晚的睡眠声信号，根据被测者整晚的睡眠声信号，获取睡眠声信号中的有声段；
所述计算模块，用于对睡眠声的有声段信号进行计算并获取有声段的图谱；
所述识别模块，分两部分，第一部分用于使用深度学习对有声段图谱进行鼾声与非鼾声的识别分类，并完成对鼾声与非鼾声的自动侦测与识别；第二部分用于在第一部分获取的纯鼾声中，使用深度学习对四类鼾声进行识别分类，完成对呼吸暂停低通气综合征鼾声的自动识别与检测；
所述统计预测模块，用于对整晚睡眠声信号进行统计，得到四类鼾声次数的统计结果，根据统计结果对AHI指数值进行预测。
作为优选的技术方案，所述信号提取模块包括预处理单元和有效值信号门限计算单元；
所述预处理单元，用于两方面工作：(1)将采集的睡眠声信号进行预加重和分帧的预处理工作：利用一阶高通FIR滤波器完成睡眠声信号的预加重，分帧时选择帧长为20ms，帧移为10ms、50％的重叠率；(2)使用谱减法和维纳滤波法相结合的方法对睡眠声信号进行降噪；
所述有效值信号门限计算单元，用于对降噪预处理后的睡眠声信号进行幅值计算，对比有声段与相对无声段的幅值差异确定有声段信号门限，所述有声段信号门限用于有声信号段的侦测和切割。
作为优选的技术方案，所述分类检测系统采用电脑软件、手机app或者带数字信号处理器的硬件模块实现。
本发明相对于现有技术具有如下的优点和效果：
(1)本发明方法及系统通过将鼾声与呼吸紊乱事件适时结合，以呼吸紊乱事件为中心，定义普通鼾声及呼吸紊乱事件相关鼾声，将整晚睡眠鼾声进行四分类，避免过多复杂的分类影响分类系统的识别效果，研究四类鼾声的特征差异，较精确的实现了四类鼾声的自动分类，利用鼾声类型及鼾声前后声音类型判断整晚呼吸紊乱事件次数来预测AHI值，为OSAHS患者提供数据参考。
(2)本发明方法及系统根据鼾声与呼吸紊乱事件的时间关系划分鼾声类型：呼吸紊乱事件前鼾声、呼吸紊乱中鼾声、呼吸紊乱后鼾声和普通鼾声，分别对这四类鼾声进行信号图、频谱图、语谱图等图谱提取，取出图谱中的坐标等干扰因素，只保留图像，从时域和频域两个方面，使用深度学习对图谱进行了高准确度的识别，有利于准确评价打鼾对象是否患病及患病程度。
附图说明
图1是本发明实施例的基于深度学习的睡眠鼾声分类检测方法流程图；
图2是本发明实施例的基于深度学习的睡眠鼾声分类检测系统模块图。
具体实施方式
为了使本发明的目的、技术方案以及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步的详细说明。应当理解，此处所描述的具体实施例仅仅用于解释本发明，并不限于本发明。
实施例
如图1所示，一种基于深度学习的睡眠鼾声分类检测方法，包括下述步骤：
S1、采集患者整晚的睡眠声信号，并对所述睡眠声信号中的有声段进行探测，获取睡眠声信号中的有声段图谱，有声段为一个鼾声或呼吸声或其他噪声；
S11、对所述睡眠声信号中的有声段进行探测：对所述睡眠声信号进行预加重和分帧的预处理，并对预处理后的睡眠声信号进行降噪处理，再将计算降噪处理后的睡眠声信号中有声段及残余噪声段的有效值，根据睡眠声信号的有效值轮廓，确定最终的有效值信号；
S111、对所述睡眠声信号进行预加重和分帧的预处理：利用一阶高通FIR滤波器完成睡眠声信号的预加重，分帧时选择帧长为20ms，帧移为10ms、50％的重叠率；
S112、对预处理后的睡眠声信号进行降噪处理：使用谱减法和维纳滤波法相结合的方法或其他信号处理方法(声纹技术)对睡眠声信号进行降噪；
S113、计算降噪处理后的睡眠声信号的绝对值，每50个采样点内寻找所述睡眠声信号的绝对值最大值，求得睡眠声信号的最大值信号轮廓；在最大值信号中每50个最大值之间进行求和，形成初步的有效值信号轮廓，根据初步的有效值信号轮廓，确定有效值信号门限，所述有声段信号门限用于对有声信号段的侦测和切割；再对初步的有效值信号通过10点滑动平均进行平滑处理，得到最终的有效值信号。
S12、根据步骤S11得到的睡眠声信号最终的有效值信号，获取睡眠声信号的有声段图谱；
所述睡眠声信号的有声段图谱包括信号图、频谱图、以及语谱图；
获取有声段的信号图：信号图为有声段的信号波形图，去掉坐标，只保留图形部分；
获取有声段的频谱图：对有声段信号做离散傅里叶变换所画出的频谱图，去掉坐标，只保留图形部分，傅里叶变换如下式(1)：
其中，k表示离散频率，N表示傅里叶变换的点数，n表示做傅里叶变换的点的序数，j是虚数单位，x(n)表示时域下第n个点的值；
获取有声段的语谱图：语谱图是以时间为横坐标，以频率为纵坐标所得到的声音能量分布图，以不同颜色表征不同的能量大小，去掉坐标，只保留图形部分；
获取其他时域及频域图谱，所考虑的图谱不受以上列出的图谱的任何形式的限制；
S2、使用深度学习对有声段图谱进行鼾声与非鼾声的分类，并完成对鼾声与非鼾声的自动侦测与识别，保留识别结果为鼾声的图谱及音频文件；具体包括下述步骤：
S21、确定卷积神经网络收敛方式：按照正则化后的梯度下降法收敛网络，具体利用如下公式：
w＝w-ε(αw+▽wJ(w；X,y))(2)
其中α为正则系数，ε为学习率，J(w,X,y)为目标函数，y为上一轮训练的输出值，w为滤波器权重；
S22、选择激活函数：线性模型解决非线性问题能力很差，在卷积神经网络中引入了激活函数来对模型加入非线性因素。基本方法是：给模型设定一个阈值，高于阈值的输出一定的值被激活，否则输出另外给定的值，经过多次激活后可以将输入转换为线性可分。常用的激活函数有：sigmod，tanh，ReLU以及一些对ReLU函数的改进型，本实施例选择如下的ReLU函数作为激活函数；
其中x是上一卷积层计算所得数值；
S23、选择网络输出预测结果概率函数：卷积神经网络的最终输出结果为预测概率值，需要将卷积神经网络运算得到的具体特征数值全部转化为概率，因此需要一个能实现这种功能的函数，本实施例中确定softmax函数作为输出预测结果概率函数。假设存在一个数组z,zi是其中一个元素，则
其中yi是输出识别分数；因为要将有声段图谱分为鼾声与非鼾声两类，故对每张图谱输出两个y，softmax函数的作用即把输入的类别参数zi转换成识别分数，得分最高的即为分类器输出的最终辨识结果；
S24、通过卷积神经网络训练获取其参数：使用卷积神经网络对步骤S23所分类的鼾声与非鼾声两类图谱集进行初步试训，获取卷积神经网络训练参数大致范围，参数包括：学习率初始值和学习率变化方案、L1和L2正则系数、权值初始化方式、网络层数、池化方式、激活函数、以及训练和测试批大小；
S25、根据步骤S24训练及测试所得的损失函数曲线判断训练状态，以此状态为依据对卷积神经网络训练参数进行调整，得出最终训练结果，完成对鼾声与非鼾声的自动识别，并提取出鼾声的图谱及音频文件用作后续使用。
S3、根据步骤S2获得的纯鼾声图谱及音频文件，采用如同步骤S2的深度学习对纯鼾声图谱及音频文件进行鼾声分类，完成对呼吸暂停低通气综合征鼾声的自动识别与检测；具体包括下述步骤：
S31、确定网络收敛方式为按照正则化后的梯度下降法收敛网络；
S32、选择ReLU函数作为激活函数；
S33、使用softmax函数作为输出预测结果概率函数；
S34、参数范围确定：将鼾声分为呼吸紊乱前鼾声、呼吸紊乱中鼾声、呼吸紊乱后鼾声以及正常鼾声四类，使用卷积神经网络对所得四类鼾声图谱集进行初步试训，获取神经网络参数大致范围，参数包括：学习率初始值和学习率变化方案、L1和L2正则系数、权值初始化方式、网络层数、池化方式、激活函数、以及训练和测试批大小等；
S35、根据步骤S34训练及测试所得的损失函数曲线判断训练状态，以此状态为依据对神经网络训练参数进行调整，得出最终训练结果，完成对四类鼾声的自动识别与检测。
S4、根据步骤S3的识别与检测结果，统计被测患者整晚四类鼾声的数量，获取被测患者整晚AHI指数，完成对被测患者整晚鼾声AHI指数的预测。
按时间顺序记录被测患者整晚四类鼾声；其中，当相邻的两次普通鼾声之间出现呼吸紊乱前鼾声、呼吸紊乱中鼾声和呼吸紊乱后鼾声中的至少一种时，将其记录为一次呼吸紊乱事件；统计每小时的呼吸紊乱事件次数，所得结果即为AHI指数。在本实施例中，将呼吸紊乱前鼾声、呼吸紊乱中鼾声、呼吸紊乱后鼾声分别记为AH1、AH2、AH3，按照信号时间顺序从左到右进行呼吸紊乱事件的判断，正常鼾声间隔一次呼吸紊乱事件包括的情形有：AH1AH3、AH1AH2AH3、AH1AH2、AH2AH3、AH1、AH2、AH3、N个AH1、N个AH2、N个AH3等；
在本实施中，一种基于深度学习的睡眠鼾声分类检测系统，包括信号提取模块、计算模块、识别模块和统计预测模块；
所述信号提取模块，用于采集被测患者整晚的睡眠声信号，根据被测者整晚的睡眠声信号，获取睡眠声信号中的有声段；
所述计算模块，用于对睡眠声的有声段信号进行计算并获取有声段的图谱；
所述识别模块，分两部分，第一部分用于使用深度学习对有声段图谱进行鼾声与非鼾声的识别分类，并完成对鼾声与非鼾声的自动侦测与识别；第二部分用于在第一部分获取的纯鼾声中，使用深度学习对四类鼾声进行识别分类，完成对呼吸暂停低通气综合征鼾声的自动识别与检测；
所述统计预测模块，用于对整晚睡眠鼾声信号进行统计，得到四类鼾声次数的统计结果，根据统计结果对AHI指数值进行预测。
在本实施例中，所述信号提取模块包括预处理单元和有效值信号门限计算单元；
所述预处理单元，用于两方面工作：(1)将采集的睡眠声信号进行预加重和分帧的预处理工作：利用一阶高通FIR滤波器完成睡眠声信号的预加重，分帧时选择帧长为20ms，帧移为10ms、50％的重叠率；(2)使用谱减法和维纳滤波法相结合的方法对睡眠声信号进行降噪；
所述有效值信号门限计算单元，用于对降噪预处理后的睡眠声信号进行幅值计算，对比有声段与相对无声段的幅值差异确定有声段信号门限，所述有声段信号门限用于对有声信号段的侦测和切割。
本实施例的分类检测系统可以采用电脑软件、手机app或者带数字信号处理器的硬件模块实现。
以下为一个具体的应用实例：
选取10例广州医科大学第一附属医院经PSG诊断为中重度OSAHS的患者。选取信号图作为识别对象，对睡眠声进行鼾声自动检测，检测到鼾声总样本数为22644个，在这些纯鼾声中共有呼吸紊乱鼾声1625个，其中呼吸紊乱前鼾声503个、呼吸紊乱中鼾声625个、呼吸紊乱后鼾声497个，呼吸紊乱鼾声数据集相对均匀，另外有普通鼾声21019个，从普通鼾声中随机挑选1532个与呼吸紊乱鼾声共同构成实施样本集。
在本应用实例中，从鼾声分类图谱中选取信号图作为识别对象，在长时间的网络参数和网络结构调整下，卷积神经网络对鼾声与非鼾声识别实现了90.54％的识别准确率，对四类鼾声同样取得了较好的识别效果。
综上所述，本发明方法及系统通过将鼾声与呼吸紊乱事件适时结合，以呼吸紊乱事件为中心，定义普通鼾声及呼吸紊乱事件相关鼾声，将整晚睡眠鼾声进行四分类，避免过多复杂的分类影响分类系统的识别效果，研究四类鼾声的特征差异，较精确的实现了四类鼾声的自动分类，利用鼾声类型及鼾声前后声音类型判断整晚呼吸紊乱事件次数来预测AHI值，为OSAHS患者提供数据参考。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以权利要求所述为准。

Claims (9)

1.一种基于深度学习的睡眠鼾声分类检测方法，其特征在于，包括下述步骤：
S1、通过传感器采集被测患者整晚的睡眠声信号，并对所述睡眠声信号中的有声段进行探测，获取睡眠声信号中的有声段图谱，有声段为一个鼾声或呼吸声；
S11、对所述睡眠声信号中的有声段进行探测：对所述睡眠声信号进行预加重和分帧的预处理，并对预处理后的睡眠声信号进行降噪处理，再将计算降噪处理后的睡眠声信号中有声段及残余噪声段的有效值，根据睡眠声信号的有效值轮廓，确定最终的有效值信号；
S12、根据步骤S11得到的睡眠声信号最终的有效值信号，获取睡眠声信号的有声段图谱；
S2、使用深度学习对有声段图谱进行鼾声与非鼾声的分类，并完成对鼾声与非鼾声的自动侦测与识别，保留识别结果为鼾声的图谱及音频文件；
所述使用深度学习对有声段图谱进行鼾声与非鼾声的分类，采用卷积神经网络，其过程包括：(1)确定卷积神经网络收敛方式；(2)选择激活函数；(3)选择网络输出预测结果概率函数；(4)通过卷积神经网络训练获取其参数；(5)根据损失函数对卷积神经网络参数进行调整，以完成对鼾声与非鼾声的自动识别；
S3、根据步骤S2获得的纯鼾声图谱及音频文件，采用如同步骤S2的深度学习对纯鼾声图谱及音频文件进行鼾声分类，完成对呼吸暂停低通气综合征鼾声的自动识别与检测；
S4、根据步骤S3的识别与检测结果，统计被测患者整晚各类鼾声的数量，获取被测患者整晚暂停低通气指数，即AHI指数，完成对被测患者整晚鼾声AHI指数的预测。
2.根据权利要求1所述基于深度学习的睡眠鼾声分类检测方法，其特征在于，步骤S11具体包括下述步骤：
S111、对所述睡眠声信号进行预加重和分帧的预处理：利用一阶高通FIR滤波器完成睡眠声信号的预加重，分帧时选择帧长为20ms，帧移为10ms、50％的重叠率；
S112、对预处理后的睡眠声信号进行降噪处理：使用谱减法和维纳滤波法相结合的方法或声纹技术对睡眠声信号进行降噪；
S113、计算降噪处理后的睡眠声信号的绝对值，每50个采样点内寻找所述睡眠声信号的绝对值最大值，求得睡眠声信号的最大值信号轮廓；在最大值信号中每50个最大值之间进行求和，形成初步的有效值信号轮廓，根据初步的有效值信号轮廓，确定有效值信号门限；再对初步的有效值信号通过10点滑动平均进行平滑处理，得到最终的有效值信号。
3.根据权利要求2所述基于深度学习的睡眠鼾声分类检测方法，其特征在于，步骤S12中，所述睡眠声信号的有声段图谱包括信号图、频谱图、以及语谱图；
获取有声段的信号图：信号图为有声段的信号波形图，去掉坐标，只保留图形部分；
获取有声段的频谱图：对有声段信号做离散傅里叶变换所画出的频谱图，去掉坐标，只保留图形部分，傅里叶变换如下式(1)：
其中，k表示离散频率，N表示傅里叶变换的点数，n表示做傅里叶变换的点的序数，j是虚数单位，x(n)表示时域下第n个点的值；
获取有声段的语谱图：语谱图是以时间为横坐标，以频率为纵坐标所得到的声音能量分布图，以不同颜色表征不同的能量大小，去掉坐标，只保留图形部分。
4.根据权利要求2所述基于深度学习的睡眠鼾声分类检测方法，其特征在于，步骤S2具体包括下述步骤：
S21、确定卷积神经网络收敛方式：按照正则化后的梯度下降法收敛网络，具体利用如下公式：
w＝w-ε(αw+▽wJ(w；X,y)) (2)
其中α为正则系数，ε为学习率，J(w,X,y)为目标函数，y为上一轮训练的输出值，w为滤波器权重；
S22、选择激活函数：选择ReLU函数作为激活函数，
其中x是上一卷积层计算所得数值；
S23、选择网络输出预测结果概率函数：选择softmax函数作为输出预测结果概率函数；假设存在一个数组z,zi是其中一个元素，则
其中yi是输出识别分数；因为要将有声段图谱分为鼾声与非鼾声两类，故对每张图谱输出两个y，softmax函数的作用即把输入的类别参数zi转换成识别分数，得分最高的即为分类器输出的最终辨识结果；
S24、通过卷积神经网络训练获取其参数：使用卷积神经网络对步骤S23所分类的图谱集进行初步试训，获取卷积神经网络训练参数大致范围，参数包括：学习率初始值和学习率变化方案、L1和L2正则系数、权值初始化方式、网络层数、池化方式、激活函数、以及训练和测试批大小；
S25、根据步骤S24训练及测试所得的损失函数曲线判断训练状态，以此状态为依据对卷积神经网络训练参数进行调整，得出最终训练结果，完成对鼾声与非鼾声的自动识别，并提取出鼾声的图谱及音频文件用作后续使用。
5.根据权利要求1所述基于深度学习的睡眠鼾声分类检测方法，其特征在于，步骤S3中，所述鼾声包括呼吸紊乱前鼾声、呼吸紊乱中鼾声、呼吸紊乱后鼾声以及正常鼾声四类鼾声。
6.根据权利要求5所述基于深度学习的睡眠鼾声分类检测方法，其特征在于，步骤S4中，步骤S4中，按时间顺序记录被测患者整晚四类鼾声；其中，当相邻的两次普通鼾声之间出现呼吸紊乱前鼾声、呼吸紊乱中鼾声和呼吸紊乱后鼾声中的至少一种时，将其记录为一次呼吸紊乱事件；统计每小时的呼吸紊乱事件次数，所得结果即为AHI指数。
7.运用根据权利要求1到6任一项所述基于深度学习的睡眠鼾声分类检测方法的分类检测系统，其特征在于，包括信号提取模块、计算模块、识别模块和统计预测模块；
所述信号提取模块，用于采集被测患者整晚的睡眠声信号，根据被测者整晚的睡眠声信号，获取睡眠声信号中的有声段；
所述计算模块，用于对睡眠声的有声段信号进行计算并获取有声段的图谱；
所述识别模块，分两部分，第一部分用于使用深度学习对有声段图谱进行鼾声与非鼾声的识别分类，并完成对鼾声与非鼾声的自动侦测与识别；第二部分用于在第一部分获取的纯鼾声中，使用深度学习对四类鼾声进行识别分类，完成对呼吸暂停低通气综合征鼾声的自动识别与检测；
所述统计预测模块，用于对整晚睡眠声信号进行统计，得到四类鼾声次数的统计结果，根据统计结果对AHI指数值进行预测。
8.根据权利要求7所述基于深度学习的睡眠鼾声分类检测方法的分类检测系统，其特征在于，所述信号提取模块包括预处理单元和有效值信号门限计算单元；
所述预处理单元，用于两方面工作：(1)将采集的睡眠声信号进行预加重和分帧的预处理工作：利用一阶高通FIR滤波器完成睡眠声信号的预加重，分帧时选择帧长为20ms，帧移为10ms、50％的重叠率；(2)使用谱减法和维纳滤波法相结合的方法对睡眠声信号进行降噪；
所述有效值信号门限计算单元，用于对降噪预处理后的睡眠声信号进行幅值计算，对比有声段与相对无声段的幅值差异确定有声段信号门限，所述有声段信号门限用于有声信号段的侦测和切割。
9.根据权利要求7所述基于深度学习的睡眠鼾声分类检测方法的分类检测系统，其特征在于，所述分类检测系统采用电脑软件、手机app或者带数字信号处理器的硬件模块实现。
CN201810536311.8A 2018-05-30 2018-05-30 一种基于深度学习的睡眠鼾声分类检测方法及系统 Active CN108670200B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810536311.8A CN108670200B (zh) 2018-05-30 2018-05-30 一种基于深度学习的睡眠鼾声分类检测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810536311.8A CN108670200B (zh) 2018-05-30 2018-05-30 一种基于深度学习的睡眠鼾声分类检测方法及系统

Publications (2)

Publication Number Publication Date
CN108670200A true CN108670200A (zh) 2018-10-19
CN108670200B CN108670200B (zh) 2021-06-08

Family

ID=63808965

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810536311.8A Active CN108670200B (zh) 2018-05-30 2018-05-30 一种基于深度学习的睡眠鼾声分类检测方法及系统

Country Status (1)

Country Link
CN (1) CN108670200B (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109350014A (zh) * 2018-12-10 2019-02-19 苏州小蓝医疗科技有限公司 一种鼾声识别方法与系统
CN109376264A (zh) * 2018-11-09 2019-02-22 广州势必可赢网络科技有限公司 一种音频检测方法、装置、设备及计算机可读存储介质
CN109745011A (zh) * 2019-02-20 2019-05-14 华为终端有限公司 用户睡眠呼吸风险监控方法、终端及计算机可读介质
CN109767784A (zh) * 2019-01-31 2019-05-17 龙马智芯（珠海横琴）科技有限公司 鼾声识别的方法及装置、存储介质和处理器
CN110942784A (zh) * 2019-11-21 2020-03-31 杭州电子科技大学 基于支持向量机的鼾声分类系统
CN111312293A (zh) * 2020-02-17 2020-06-19 杭州电子科技大学 一种基于深度学习对呼吸暂停症患者的识别方法及系统
CN111613210A (zh) * 2020-07-06 2020-09-01 杭州电子科技大学 一种各类呼吸暂停综合征的分类检测系统
CN111696575A (zh) * 2020-06-19 2020-09-22 杭州电子科技大学 基于混合神经网络模型的低通气和呼吸暂停检测识别系统
CN111685774A (zh) * 2020-05-28 2020-09-22 西安理工大学 基于概率集成回归模型的osahs诊断方法
CN111685735A (zh) * 2020-06-08 2020-09-22 清华大学 基于鼾声信号的睡眠呼吸暂停监测方法及装置
CN111789577A (zh) * 2020-07-15 2020-10-20 天津大学 基于cqt和stft深度语谱特征鼾声分类方法及系统
CN111938650A (zh) * 2020-07-03 2020-11-17 上海诺斯清生物科技有限公司 监测睡眠时呼吸暂停的方法及装置
CN112687287A (zh) * 2020-12-22 2021-04-20 杭州电子科技大学 基于盲源分离算法的麦克风阵列鼾声信号分离方法及系统
CN113180691A (zh) * 2020-12-28 2021-07-30 天津大学 一种三通道睡眠呼吸暂停与低通气综合征识别装置
CN113974607A (zh) * 2021-11-17 2022-01-28 杭州电子科技大学 一种基于脉冲神经网络的睡眠鼾声检测系统
CN115206291A (zh) * 2022-05-30 2022-10-18 华南理工大学 基于睡眠鼾声特征的osahs检测系统及方法
EP3920783A4 (en) * 2019-06-04 2022-11-09 Fitbit, Inc. SNORING DETECTION AND MEASUREMENT
WO2023284813A1 (zh) * 2021-07-15 2023-01-19 麒盛科技股份有限公司 一种基于深度学习算法的鼾声监测方法与系统以及相应的电动床控制方法和系统
CN113974607B (zh) * 2021-11-17 2024-04-26 杭州电子科技大学 一种基于脉冲神经网络的睡眠鼾声检测系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103251388A (zh) * 2013-04-25 2013-08-21 北京大学深圳研究生院 基于智能手机平台的打鼾监测和防治方法及系统
CN103735267A (zh) * 2014-01-02 2014-04-23 上海大学 一种基于鼾声筛查osahs的装置
US20140171815A1 (en) * 2012-12-14 2014-06-19 Te-Chung Isaac Yang Classification of Segments of Acoustic Physiological Signal Captured During Sleep Using Phase-Locked Loop Array
WO2016170005A1 (en) * 2015-04-20 2016-10-27 Resmed Sensor Technologies Limited Detection and identification of a human from characteristic signals
CN106821337A (zh) * 2017-04-13 2017-06-13 南京理工大学 一种有监督的鼾声来源识别方法
CN107358965A (zh) * 2017-06-09 2017-11-17 华南理工大学 一种睡眠鼾声分类检测方法及系统
CN107680082A (zh) * 2017-09-11 2018-02-09 宁夏医科大学 基于深度卷积神经网络和全局特征的肺部肿瘤识别方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140171815A1 (en) * 2012-12-14 2014-06-19 Te-Chung Isaac Yang Classification of Segments of Acoustic Physiological Signal Captured During Sleep Using Phase-Locked Loop Array
CN103251388A (zh) * 2013-04-25 2013-08-21 北京大学深圳研究生院 基于智能手机平台的打鼾监测和防治方法及系统
CN103735267A (zh) * 2014-01-02 2014-04-23 上海大学 一种基于鼾声筛查osahs的装置
WO2016170005A1 (en) * 2015-04-20 2016-10-27 Resmed Sensor Technologies Limited Detection and identification of a human from characteristic signals
CN106821337A (zh) * 2017-04-13 2017-06-13 南京理工大学 一种有监督的鼾声来源识别方法
CN107358965A (zh) * 2017-06-09 2017-11-17 华南理工大学 一种睡眠鼾声分类检测方法及系统
CN107680082A (zh) * 2017-09-11 2018-02-09 宁夏医科大学 基于深度卷积神经网络和全局特征的肺部肿瘤识别方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
AMIRIPARIAN, S.等: "Snore Sound Classification Using Image-based Deep Spectrum Features", 《INTERSPEECH》 *
FREITAG, M.等: "An ‘End-to-Evolution’ Hybrid Approach for Snore Sound Classification", 《INTERSPEECH》 *
SZEGEDY, C.等: "Going Deeper With Convolutions", 《CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION》 *
孟泽民 等: "基于神经网络的家用型睡眠呼吸暂停综合症监测系统", 《计算机系统应用》 *
王璨 等: "一种用于诊断OSAHS的鼾声分离方法", 《声学技术》 *

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109376264A (zh) * 2018-11-09 2019-02-22 广州势必可赢网络科技有限公司 一种音频检测方法、装置、设备及计算机可读存储介质
CN109350014A (zh) * 2018-12-10 2019-02-19 苏州小蓝医疗科技有限公司 一种鼾声识别方法与系统
CN109767784A (zh) * 2019-01-31 2019-05-17 龙马智芯（珠海横琴）科技有限公司 鼾声识别的方法及装置、存储介质和处理器
CN109767784B (zh) * 2019-01-31 2020-02-07 龙马智芯（珠海横琴）科技有限公司 鼾声识别的方法及装置、存储介质和处理器
CN109745011A (zh) * 2019-02-20 2019-05-14 华为终端有限公司 用户睡眠呼吸风险监控方法、终端及计算机可读介质
CN109745011B (zh) * 2019-02-20 2021-12-03 华为终端有限公司 用户睡眠呼吸风险监控方法、终端及计算机可读介质
US11793453B2 (en) 2019-06-04 2023-10-24 Fitbit, Inc. Detecting and measuring snoring
EP3920783A4 (en) * 2019-06-04 2022-11-09 Fitbit, Inc. SNORING DETECTION AND MEASUREMENT
CN110942784A (zh) * 2019-11-21 2020-03-31 杭州电子科技大学 基于支持向量机的鼾声分类系统
CN111312293A (zh) * 2020-02-17 2020-06-19 杭州电子科技大学 一种基于深度学习对呼吸暂停症患者的识别方法及系统
CN111685774A (zh) * 2020-05-28 2020-09-22 西安理工大学 基于概率集成回归模型的osahs诊断方法
CN111685774B (zh) * 2020-05-28 2023-08-25 西安理工大学 基于概率集成回归模型的osahs诊断方法
CN111685735A (zh) * 2020-06-08 2020-09-22 清华大学 基于鼾声信号的睡眠呼吸暂停监测方法及装置
CN111696575A (zh) * 2020-06-19 2020-09-22 杭州电子科技大学 基于混合神经网络模型的低通气和呼吸暂停检测识别系统
CN111696575B (zh) * 2020-06-19 2023-01-03 杭州电子科技大学 基于混合神经网络模型的低通气和呼吸暂停检测识别系统
CN111938650A (zh) * 2020-07-03 2020-11-17 上海诺斯清生物科技有限公司 监测睡眠时呼吸暂停的方法及装置
CN111613210A (zh) * 2020-07-06 2020-09-01 杭州电子科技大学 一种各类呼吸暂停综合征的分类检测系统
CN111789577B (zh) * 2020-07-15 2023-09-19 天津大学 基于cqt和stft深度语谱特征鼾声分类方法及系统
CN111789577A (zh) * 2020-07-15 2020-10-20 天津大学 基于cqt和stft深度语谱特征鼾声分类方法及系统
CN112687287B (zh) * 2020-12-22 2022-06-03 杭州电子科技大学 基于盲源分离算法的麦克风阵列鼾声信号分离方法及系统
CN112687287A (zh) * 2020-12-22 2021-04-20 杭州电子科技大学 基于盲源分离算法的麦克风阵列鼾声信号分离方法及系统
CN113180691B (zh) * 2020-12-28 2022-10-21 天津大学 一种三通道睡眠呼吸暂停与低通气综合征识别装置
CN113180691A (zh) * 2020-12-28 2021-07-30 天津大学 一种三通道睡眠呼吸暂停与低通气综合征识别装置
WO2023284813A1 (zh) * 2021-07-15 2023-01-19 麒盛科技股份有限公司 一种基于深度学习算法的鼾声监测方法与系统以及相应的电动床控制方法和系统
CN113974607A (zh) * 2021-11-17 2022-01-28 杭州电子科技大学 一种基于脉冲神经网络的睡眠鼾声检测系统
CN113974607B (zh) * 2021-11-17 2024-04-26 杭州电子科技大学 一种基于脉冲神经网络的睡眠鼾声检测系统
CN115206291A (zh) * 2022-05-30 2022-10-18 华南理工大学 基于睡眠鼾声特征的osahs检测系统及方法
CN115206291B (zh) * 2022-05-30 2024-03-19 华南理工大学 基于睡眠鼾声特征的osahs检测系统及方法

Also Published As

Publication number Publication date
CN108670200B (zh) 2021-06-08

Similar Documents

Publication Publication Date Title
CN108670200A (zh) 一种基于深度学习的睡眠鼾声分类检测方法及系统
CN108388912B (zh) 基于多传感器特征优化算法的睡眠分期方法
CN103687540B (zh) 使用记录的呼吸音振幅谱图和音高升降曲线诊断osa/csa
CN102172328B (zh) 从呼吸信号中检测和区别呼吸模式的方法
US7559903B2 (en) Breathing sound analysis for detection of sleep apnea/popnea events
US11712198B2 (en) Estimation of sleep quality parameters from whole night audio analysis
CN104757975B (zh) 使用血氧饱和度信号辨别潮式呼吸模式
US9844336B2 (en) Apparatus and method for diagnosing obstructive sleep apnea
CN103841888B (zh) 使用呼吸模式识别的呼吸暂停和呼吸不足检测
CN1468077A (zh) 使用神经网络的cpap的方法和装置
CN103153183A (zh) 用于诊断阻塞性睡眠呼吸暂停的装置和方法
CN103961105A (zh) 对打鼾进行识别和强度输出的方法与系统及一种呼吸机
US10004452B2 (en) System and methods for estimating respiratory airflow
CN109328034A (zh) 用于确定对象的睡眠阶段的确定系统和方法
WO2011154791A2 (en) System and methods of acoustical screening for obstructive sleep apnea during wakefulness
CN107280674A (zh) 基于音频录取设备的呼吸模式判决方法
JP7197491B2 (ja) 嚥下障害検出のための嚥下加速度測定信号を使用する方法及びデバイス
CN113520343A (zh) 睡眠风险预测方法、装置和终端设备
Doheny et al. Estimation of respiratory rate and exhale duration using audio signals recorded by smartphone microphones
CN103735267B (zh) 一种基于鼾声筛查osahs的装置
EP4167835A1 (en) Systems and methods for screening obstructive sleep apnea during wakefulness using anthropometric information and tracheal breathing sounds
US20210315517A1 (en) Biomarkers of inflammation in neurophysiological systems
JP7216408B2 (ja) 睡眠時無呼吸症候群判定装置、睡眠時無呼吸症候群判定方法および睡眠時無呼吸症候群判定プログラム
Morgenstern et al. Feasibility of noninvasive single-channel automated differentiation of obstructive and central hypopneas with nasal airflow
Akhter et al. Characterizing the NREM/REM sleep specific obstructive sleep apnea severity using snore sounds

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant