CN101502425B - 一种声带振动力学特性的检测系统与检测方法 - Google Patents

一种声带振动力学特性的检测系统与检测方法 Download PDF

Info

Publication number
CN101502425B
CN101502425B CN2009100214476A CN200910021447A CN101502425B CN 101502425 B CN101502425 B CN 101502425B CN 2009100214476 A CN2009100214476 A CN 2009100214476A CN 200910021447 A CN200910021447 A CN 200910021447A CN 101502425 B CN101502425 B CN 101502425B
Authority
CN
China
Prior art keywords
module
imaging
laryngoscope
data
speed photography
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2009100214476A
Other languages
English (en)
Other versions
CN101502425A (zh
Inventor
万明习
秦绪磊
王素品
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Jiaotong University
Original Assignee
Xian Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Jiaotong University filed Critical Xian Jiaotong University
Priority to CN2009100214476A priority Critical patent/CN101502425B/zh
Publication of CN101502425A publication Critical patent/CN101502425A/zh
Application granted granted Critical
Publication of CN101502425B publication Critical patent/CN101502425B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Endoscopes (AREA)

Abstract

本发明涉及一种声带振动力学特性的检测系统与方法。检测系统,包括高速摄影喉镜模块、高帧率超声模块、数据采集模块、同步采集控制模块、成像显示模块、数据储存模块,成像数据处理模块、力学参数提取模块;高速摄影喉镜和高帧率超声分别连接于同一台计算机。检测方法包括如下步骤:1)设置相应的采集时长、存放路径;2)将高帧率超声探头紧贴喉部的侧面;将高速摄影喉镜从口腔插入;3)调节超声相关参数和高速摄影喉镜的位置与焦距;4)被检测者发声,同步采集数据并存储;5)提取声门面积与体层位移;6)提取声带振动的力学参数。本发明提供了声带振动力学参数的定量提取方法,可以得到力学特性不同的声带被覆层和体层的振动力学参数。

Description

一种声带振动力学特性的检测系统与检测方法
技术领域
本发明属于声带振动检测领域,特别涉及一种声带振动力学特性的检测系统与检测方法。
背景技术
声带振动是一个复杂、精细的三维运动过程,对它的成像与测量,尤其是力学特性的测量,一直是发声生理研究和临床检查中一个重要的方面。但因为声带位于喉部内侧,并且在正常发声时的振动频率高达100-400Hz,所以它的振动细节很难被一般仪器直接检测到。为此,高速成像技术(采样率大于1000Hz)被引入到该领域,用来对高速振动中的声带细节进行动态成像,其中包括高速摄影和高帧率超声技术。
声带的生物力学参数如声带振动质量、粘弹力等,可以定量描述声带振动过程中的力学特性,目前,国外已有在高速摄影喉镜拍摄影像的基础上,结合声带振动模型来提取声带振动力学参数的方法。但由于高速摄影喉镜只能获取声带表面振动的信息,其相应的振动参数反映的是声带浅层的被覆层的振动力学特性。而声带是由黏膜、韧带与肌肉组成的多层结构,对于深层的、力学特性不同的肌肉等组成的体层的振动,则无法通过该方法得到其力学参数。另一方面,高帧率超声虽然可以无损伤的对声带组织内部进行成像,但是不能获得清晰的声带表面振动细节,且没有相应的声带振动力学参数的定量提取方法。
发明内容
针对现有技术中无法获得清晰的声带表面振动细节图像,且没有相应的声带振动力学参数的定量提取方法的技术问题,本发明提出如下技术方案:
一种声带振动力学特性的检测系统,包括高速摄影喉镜模块、高帧率超声模块、数据采集模块、同步采集控制模块、成像显示模块数据储存模块、成像数据处理模块、力学参数提取模块,其特征在于:同步采集控制模块的输出端、高速摄影喉镜模块的输出端、高帧率超声模块的输出端连接数据采集模块的输入端,数据采集模块一个输出端与成像显示模块输入端连接;数据采集模块的另一输出端通过数据储存模块、成像数据处理模块单向连接到力学参数提取模块的输入端;其中,高速摄影喉镜模块和高帧率超声模块对声带振动进行分别成像;同步采集控制模块控制高速摄影喉镜模块和高帧率超声模块进行同步成像;数据采集模块用于采集高速摄影喉镜模块和高帧率超声模块的成像数据;成像显示模块对成像过程进行监控,保证成像效果;数据储存模块将采集到的成像数据保存到计算机硬盘;成像数据处理模块对保存的成像数据进行处理,用于后续声带力学参数提取;力学参数提取模块是基于处理后的成像数据,对声带振动的力学参数进行提取;高速摄影喉镜模块和高帧率超声模块分别连接于同一台计算机的数据采集模块,并通过同一个同步信号触发器来控制高速摄影喉镜模块和高帧率超声模块采集数据的同步。
根据成像数据的不同,声带振动模型的选择包括以下两种:
针对声带被覆层振动参数或者高速摄影喉镜采集的数据,采用二质量块模型;该模型可以模拟声带的被覆层在振动过程中存在的上下位延时现象,且其包含的参数简洁明了,能够在反映声带被覆层振动的力学特性的同时,便于计算仿真;
针对声带体层和被覆层的振动参数或高速摄影喉镜和高帧率超声同时采集的数据,采用三质量块模型;其中,在利用该模型进行力学参数提取之前,对高速摄影喉镜和高帧率超声提取的特征参数:声门面积时间序列和体层位移时间序列,根据声门的特征点进行配准组成综合时间序列,同时包含声门面积和体层位移两种特征参数;三质量块模型是在二质量块模型的基础上加入代表体层的第三质量块,能够同时对声带体层和被覆层振动过程进行模拟,更全面的反映声带振动的力学特性。
本发明的声带振动力学特性的检测系统及检测方法可以获得清晰的声带表面振动细节图像,同时提供了声带振动力学参数的定量提取方法,可以得到深层的、力学特性不同的肌肉体层的振动力学参数。
附图说明
图1为本发明的结构方框示意图,其中:高速摄影喉镜模块1、高帧率超声模块2、同步采集控制模块4、数据采集模块3、成像显示模块5、数据储存模块6,成像数据处理模块7、力学参数提取模块8。
图2为本发明的系统对声带进行检测的示意图,其中为:高速摄影喉镜1′,高帧率超声主机2′,超声探头9、计算机10、同步信号触发器11,被检测的声带12。
图3为本发明的声带振动力学特性检测方法的流程图。
图4为本发明的高速摄影喉镜图像数据处理的流程图。
图5为本发明的高帧率超声射频信号数据处理的流程图。
图6为本发明采用二质量块模型时生物力学参数反求的流程图。
图7为本发明采用三质量块模型时生物力学参数反求的流程图。
具体实施方式
下面结合附图对本发明作进一步说明:
如图1所示,一种声带振动力学特性的检测系统:同步采集控制模块4的输出端、高速摄影喉镜模块1的输出端、高帧率超声模块2的输出端连接数据采集模块3的输入端,数据采集模块3的一个输出端与成像显示模块5输入端连接;数据采集模块3的另一输出端通过数据储存模块6、成像数据处理模块7单向连接到力学参数提取模块8输入端。其中,高速摄影喉镜模块1、高帧率超声模块2和同步采集控制模块4为外置设备,与计算机相连接;数据采集模块3由计算机中专门的数据采集卡实现;成像显示模块5由计算机显示器实现;数据储存模块6由计算机硬盘实现;数据处理模块7和力学参数提取模块8由本发明实现。
其中,高速摄影喉镜模块1和高帧率超声模块2对声带振动进行分别成像;数据采集模块3用于采集高速摄影喉镜模块1和高帧率超声模块2的成像数据;同步采集控制模块4控制高速摄影喉镜模块1和高帧率超声模块2进行同步成像;成像显示模块5能够低频采集数据采集模块的数据并显示,对成像过程进行监控,保证成像效果;数据储存模块6将采集到的成像数据保存到计算机硬盘;成像数据处理模块7对保存的成像数据进行处理,用于后续声带力学参数提取;力学参数提取模块8是基于处理后的成像数据,对声带振动的力学参数进行提取。
一种声带振动力学特性的检测方法,对声带振动特性进行检测的步骤如下:
1)将高帧率超声线阵探头9固定在被检查者颈部,紧贴喉部的侧面,并根据成像显示模块微调位置;将高速摄影喉镜1从口腔插入,置于咽腔上部,通过调整角度,拍摄到声带12上表面图像;同时,该系统的高帧率超声2的探头9被水平或者竖直放置在被检测对象的颈部侧面,且其声场方向指向声带12;
2)启动计算机10中的数据采集和显示程序,设置相应的采集时长、存放路径,成像显示模块5对高速摄影喉镜和高帧率超声实时数据序列进行低频采样,并以图像形式显示,以便于对成像操作进行监控,当对声带12振动进行同步成像时,利用同步信号触发器11同时控制计算机10中的数据采集卡,同步采集数据,如图2所示;
3)调节超声深度、对比度、增益及其相关参数;调节高速摄影喉镜的位置和焦距;
4)被检测者发声,通过成像显示模块5观察声带振动是否符合采集要求;当符合要求时,通过同步采集控制模块4触发高速摄影喉镜模块1和高帧率超声模块2的同步数据采集,该检测系统对正常或者病变条件下的不同发声模式的声带振动细节进行成像,获取的数据被同时保存到计算机10的硬盘中,便于后续的数据处理和参数提取;
5)当采集时间达到设定的时长以后,系统自动停止数据的同步采集和储存,完成了对声带振动的成像、采集与储存。
6)从成像数据中提取声带振动的特征参数:从高速摄影喉镜光学图像中提取声门面积;同时从高帧率超声数据中提取体层位移。
a基于高速摄影喉镜光学图像的声门面积提取采用图像处理方法,包括改进的水平集分割和亚像素边缘检测;获得声门中线,分别获得中线左右部分的声门面积,最后以面积时间序列的形式输出。如图4所示,其流程如下:
①手动分割序列的第一幅图像,其分割结果作为下一帧图像分割的初始曲线;自动分割开始后,将前一帧图像的分割结果作为本帧图像分割的初始曲线,然后求取本帧图像与前帧图像之间的帧差;该差值二值化以后,计算改进的水平集方法的速度函数,然后曲线根据该速度函数在本帧图像内进行进化,直到达到停止条件,本帧分割完成;当序列内所有图像都完成分割后,自动分割停止,得到所有图像声门区域的像素级分割结果。
其中,帧差的二值化是利用设定的阈值来进行处理,其公式如下:
DI ( x , y ) = 1 , &Delta;I ( x , y ) > th - 1 , &Delta;I ( x , y ) < - th 0 , | &Delta;I ( x , y ) | &le; th
这里,DI是进行阈值判断后的对应位置的二值化结果,th是设定的阈值。利用该结果对水平集速度函数进行改进得到:
F ( x , y ) = sign &CenterDot; | DI ( x , y ) | &CenterDot; e - &alpha; | &dtri; G &sigma; * I ( x , y ) |
其中,F是水平集速度函数,sign是速度函数的方向,将初始曲线位置所有的相邻点的帧差求和后,将其数值的正负号取反后得到。
②利用亚像素边缘提取方法,根据实际图像120×256大小,选择5×5的模板。计算得到的亚像素点组成的新的曲线作为实际声门边缘,其所包围的区域即为声门;该分割结果更为精确,是后面声门面积计算的基础。
③在提取亚像素声门边缘后,选择每个声带振动周期内声门开放面积最大的图像,利用线性回归方法计算出它们的声门中线;并将这些中线作为其对应周期内所有图像的声门中线,将整个周期内的所有声门分为左右两部分,并分别计算其面积,成像数据处理模块7输出数据之一为基于高速摄影喉镜光学图像的声门面积时间序列,输入到力学参数提取模块8,进行力学参数的提取。
b基于高帧率超声射频信号的体层位移提取是针对高帧率超声采集到的射频信号,先对其进行内插提高信号精度,然后通过运动估计的方式,获得声带体层的位移。如图5所示,其步骤如下:
①首先对高帧率超声采集到的射频信号进行内插,取采样最大值附近5点数据,利用内插算法求出真实的相关峰位置,以获得精度更高的信号;
②然后将体层与被覆层之间的界面作为一组散射元,利用互相关算法提取出声带体层的位置;
③体层的位移变化从前后两帧对应位置的射频信号中计算出来;
④最后利用该帧超声图像内所有射频信号的位移变化平均值计算出该时刻内的体层位移。成像数据处理模块7输出数据的另一种是基于高帧率超声射频信号的体层位移时间序列;输入到力学参数提取模块8,进行力学参数的提取。
本发明的声带振动力学特性检测方法,如图3所示:在高速摄影喉镜和高帧率超声的同步检测系统基础上,在成像数据处理模块对成像数据进行处理后,得到的特征参数与所选择的声带振动模型相结合,提取声带振动的力学参数。
7)根据成像数据或者实际需要的不同选择相应的声带振动模型,然后与步骤6)中提取的特征参数相结合,利用反求的方法提取声带振动的力学参数。
根据成像数据的不同,声带振动模型的选择包括以下两种:针对声门面积时间序列选择二质量块模型,针对综合时间序列选择三质量块模型。其中,综合时间序列是将声门面积时间序列和体层位移时间序列,根据声门的特征点进行配准组成的,同时包含声门面积和体层位移两种特征参数。
a.当仅针对声门面积时间序列时,选择二质量块模型,其对应的力学参数反求步骤如图6所示:
①声门面积时间序列首先被输入到参数提取模块作为参数反求过程中的实际数据;同时,输入二质量块模型参数集合{m1,m2,k1,k2,r1,r2,kc}的初始值,并模拟生成基于模型的面积时间序列;
②然后计算实际面积时间序列与模型模拟结果之间的差值平方和的均值,当该值小于给定阈值时,则认为模拟结果就是实际结果,其对应的模型参数集合就是要提取的力学参数;
③否则利用遗传方法对参数集合进行优化,并重新带入模型进行模拟、比较,重复该过程,直到获得小于给定阈值的参数集合。
b.当针对综合时间序列时,选择三质量块模型,其对应的力学参数反求步骤如图7所示:
①包含声门面积信息和体层位移信息的综合时间序列首先被输入到参数提取模块,作为参数反求过程中的实际数据;同时,输入三质量块模型参数集合{ml,mu,mb,kl,ku,kb,r1,r2,rb,kc}的初始值,并根据三质量块模型模拟生成基于模型的综合时间序列;
②然后计算实际数据与模型模拟结果之间的差值平方和的均值;计算时,被覆层质量块ml和mu的模拟数据与声门面积序列比较,体层质量块mb的模拟结果与体层位移时间序列作比较,分别计算他们的差值平方和的均值,然后将得到的两个均值再平均;最终得到的均值与给定阈值作比较,当小于给定阈值时,则对应的模型参数集合就是要提取的力学参数;
③否则利用遗传方法对参数集合进行优化,并重新带入模型进行模拟、比较,直到获得小于给定阈值的参数集合。
本发明的声带振动力学特性的检测系统及检测方法可以获得清晰的声带表面振动细节图像,同时提供了声带振动力学参数的定量提取方法,可以得到深层的、力学特性不同的肌肉体层的振动力学参数。

Claims (1)

1.一种声带振动力学特性的检测系统,包括高速摄影喉镜模块(1)、高帧率超声模块(2)、数据采集模块(3)、同步采集控制模块(4)、成像显示模块(5)、数据储存模块(6)、成像数据处理模块(7)、力学参数提取模块(8),其特征在于:同步采集控制模块(4)的输出端、高速摄影喉镜模块(1)的输出端、高帧率超声模块(2)的输出端连接数据采集模块(3)的输入端,数据采集模块(3)一个输出端与成像显示模块(5)输入端连接;数据采集模块(3)的另一输出端通过数据储存模块(6)、成像数据处理模块(7)单向连接到力学参数提取模块(8)的输入端;其中,高速摄影喉镜模块(1)和高帧率超声模块(2)对声带振动进行分别成像;同步采集控制模块(4)控制高速摄影喉镜模块(1)和高帧率超声模块(2)进行同步成像;数据采集模块(3)用于采集高速摄影喉镜模块(1)和高帧率超声模块(2)的成像数据;成像显示模块(5)对成像过程进行监控,保证成像效果;数据储存模块(6)将采集到的成像数据保存到计算机硬盘;成像数据处理模块(7)对保存的成像数据进行处理,用于后续声带力学参数提取;力学参数提取模块(8)是基于处理后的成像数据,对声带振动的力学参数进行提取;高速摄影喉镜模块(1)和高帧率超声模块(2)分别连接于同一台计算机(10)的数据采集模块,并通过同一个同步信号触发器(11)来控制高速摄影喉镜模块(1)和高帧率超声模块(2)采集数据的同步。
CN2009100214476A 2009-03-09 2009-03-09 一种声带振动力学特性的检测系统与检测方法 Expired - Fee Related CN101502425B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009100214476A CN101502425B (zh) 2009-03-09 2009-03-09 一种声带振动力学特性的检测系统与检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009100214476A CN101502425B (zh) 2009-03-09 2009-03-09 一种声带振动力学特性的检测系统与检测方法

Publications (2)

Publication Number Publication Date
CN101502425A CN101502425A (zh) 2009-08-12
CN101502425B true CN101502425B (zh) 2011-06-01

Family

ID=40974905

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009100214476A Expired - Fee Related CN101502425B (zh) 2009-03-09 2009-03-09 一种声带振动力学特性的检测系统与检测方法

Country Status (1)

Country Link
CN (1) CN101502425B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102680076B (zh) * 2011-12-29 2014-04-02 华东师范大学 一种模拟人体声带振动装置及其实现方法
CN102783973B (zh) * 2012-08-07 2014-07-30 南京大学 一种利用自然声道超声波导效应的声带振动无损测量方法
CN103050042B (zh) * 2012-12-04 2015-11-18 华东师范大学 一种声带质量分布模型及其构建方法
US20160296201A1 (en) * 2014-10-30 2016-10-13 Xi'an Jiaotong University Imaging and measuring system of vocal cord vibration based on plane wave ultrasonography, and method thereof
CN105679333B (zh) * 2016-03-03 2019-04-12 河海大学常州校区 声带-喉室-声道联动的物理模型及精神压力检测方法
CN113543697A (zh) * 2019-03-05 2021-10-22 圣犹达医疗用品心脏病学部门有限公司 用于校正细长医疗装置的电极位置的方法和系统
CN110826515A (zh) * 2019-11-13 2020-02-21 三峡大学 一种闭合特质的歌唱音色检测装置
CN111830240B (zh) * 2020-07-30 2022-03-15 中南大学 真三轴多场耦合与动力扰动平台的加载控制与数据同步监测装置
CN112562650A (zh) * 2020-10-31 2021-03-26 苏州大学 一种基于声带特征参数的语音识别分类方法
CN112634266B (zh) * 2021-01-06 2024-03-19 厦门大学 喉镜图像的半自动标注方法、介质、设备及装置
CN115633926A (zh) * 2022-12-23 2023-01-24 山东百多安医疗器械股份有限公司 一种多模态超声心电腔镜诊疗仪

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
UA13182U (en) * 2005-10-05 2006-03-15 Yurii Borysovych Ilchenko Process for early diagnosis of paresis of larynx due to injury of pharyngeal nerves in thyroid surgery
CN1875877A (zh) * 2006-05-15 2006-12-13 西安交通大学 一种获得声门下压力值及计算发声效率的方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
UA13182U (en) * 2005-10-05 2006-03-15 Yurii Borysovych Ilchenko Process for early diagnosis of paresis of larynx due to injury of pharyngeal nerves in thyroid surgery
CN1875877A (zh) * 2006-05-15 2006-12-13 西安交通大学 一种获得声门下压力值及计算发声效率的方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
邹原等.基于喉动态镜图像与声门图信号的声带表面三维振动重建.仪器仪表学报.2001,22(6), *
黄益灯.声门面积测量及动态量化分析的研究.国外医学耳鼻咽喉科学分册.2002,26(5), *

Also Published As

Publication number Publication date
CN101502425A (zh) 2009-08-12

Similar Documents

Publication Publication Date Title
CN101502425B (zh) 一种声带振动力学特性的检测系统与检测方法
Gick The use of ultrasound for linguistic phonetic fieldwork
Ramanarayanan et al. An investigation of articulatory setting using real-time magnetic resonance imaging
CN112446862B (zh) 一种基于人工智能的动态乳腺超声视频全病灶实时检测和分割装置、系统及图像处理方法
CN112001122B (zh) 基于端到端生成对抗网络的非接触式生理信号测量方法
JP7266523B2 (ja) 出産前超音波イメージング
CN105740779A (zh) 人脸活体检测的方法和装置
WO2019021646A1 (ja) 医用撮像装置及び画像処理方法
CN107680110A (zh) 基于统计形状模型的内耳三维水平集分割方法
CN1610841A (zh) 具有处理超声图像序列以执行身体器官中流体定量估计的装置的观测系统
JP2009513221A (ja) 3次元画像から2次元心エコービューを生成して表示するためのシステム及び方法
EP1083443B1 (en) Ultrasonic image apparatus for separating object
CN109003280A (zh) 一种双通道血管内超声影像的血管中内膜分割方法
CN102750549A (zh) 基于核磁共振图像的舌头轮廓自动提取方法
Skordilis et al. Estimation of vocal tract area function from volumetric Magnetic Resonance Imaging
Qin et al. Measuring body-cover vibration of vocal folds based on high-frame-rate ultrasonic imaging and high-speed video
JP6968731B2 (ja) 顔の肌の追従性の推定方法、推定装置及び推定プログラム、並びに、皮下組織の粘弾性の推定方法、推定装置及び推定プログラム
CN116778559A (zh) 基于高斯过程与随机变换的面部皱纹三维评价方法及系统
Sun et al. A deep learning method for limited-view intravascular photoacoustic image reconstruction
US9498141B2 (en) Method for determining right ventricle stroke volume
CN115661030A (zh) 一种基于3d-cnn的激光散斑衬比血流成像精度的提高方法
CN113693617A (zh) 一种体内病灶体积的自动测量系统及方法
JP2022032546A (ja) 出力方法、出力システム及び出力プログラム
Bian et al. A survey of tongue modeling methods in speech visualization
Douros et al. Acoustic evaluation of simplifying hypotheses used in articulatory synthesis

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110601

Termination date: 20210309