CN101939784A - 助听器及助听处理方法 - Google Patents

助听器及助听处理方法 Download PDF

Info

Publication number
CN101939784A
CN101939784A CN2010800010766A CN201080001076A CN101939784A CN 101939784 A CN101939784 A CN 101939784A CN 2010800010766 A CN2010800010766 A CN 2010800010766A CN 201080001076 A CN201080001076 A CN 201080001076A CN 101939784 A CN101939784 A CN 101939784A
Authority
CN
China
Prior art keywords
mentioned
consonant
time
sound
interval
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010800010766A
Other languages
English (en)
Other versions
CN101939784B (zh
Inventor
房川歌津衣
伊藤元邦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN101939784A publication Critical patent/CN101939784A/zh
Application granted granted Critical
Publication of CN101939784B publication Critical patent/CN101939784B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04Time compression or expansion
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • G10L21/0364Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/35Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using translation techniques
    • H04R25/353Frequency, e.g. frequency shift or compression
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • G10L2021/065Aids for the handicapped in understanding
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/78Detection of presence or absence of voice signals
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/93Discriminating between voiced and unvoiced parts of speech signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2225/00Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
    • H04R2225/43Signal processing in hearing aids to enhance the speech intelligibility
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/13Hearing devices using bone conduction transducers

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Otolaryngology (AREA)
  • Neurosurgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Telephone Function (AREA)
  • Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)

Abstract

一种助听器,改善时间分辨能力的下降带来的听力下降,具备:声音输入单元(201),被输入外部声音信号;声音分析单元(202),检测输入到声音输入单元(201)中的声音信号的有音区间和声响上看作无音的区间,并在检测出的有音区间内检测辅音区间和元音区间;以及信号处理部(204),将由声音分析单元(202)检测出的辅音区间在时间上进行拉伸,并将由声音分析单元(202)检测出的上述元音区间及上述声响上看作无音的区间的至少一方在时间上进行压缩。

Description

助听器及助听处理方法
技术领域
本发明涉及助听器及助听处理方法,特别涉及用于听觉补偿的助听处理技术。
背景技术
随着高龄社会的到来,高龄的听力衰退者增加。该高龄听力衰退者中大多患的是老化现象造成的老年性听力衰退。老年性听力衰退的大部分是称作感音性听力衰退的由内耳或内耳以后的神经系统的障碍引起的听力衰退。换言之,老年性听力衰退是因为随着年龄增加,担负将声音信号变换为向脑传递的信号的作用的内耳的毛细胞弱化、变形、消失等、或将变换后的信号向脑传递的神经损伤等而难以将声音信号向脑传递而发生的。
以往,作为补偿听力比正常低的听力衰退者的听觉而使用助听器。在助听器中,使用例如根据听力衰退者的听力特性的劣化而使声音放大、从而改善听声的助听技术。此外,近年来,不仅是助听器,作为面向高龄者使语言的听取变好的助听技术还提出了语速变换,也出现了许多具有利用该语速变换将声音缓慢地再现的功能的电视机及收音机、电话机等。
但是,使用这些助听技术的助听设备只不过是改善听力衰退的机理的一部分。因此,包括老年性听力衰退者的感音性听力衰退者即使使用助听器,仅通过对应于听力特性的声音的增幅,也不能得到充分的听力改善的效果。这是因为,感音性听力衰退的特征在于,不是单纯在音量上听不见声音,而是将声音作为语言听出来的能力下降。
这里,作为感音性听力衰退的能力下降的特征,可以举出1)响度补充现象,2)频率选择性的下降,3)时间分辨能力的下降,在下述中进行说明。
1)所谓响度补充现象,是虽然最小可听域值比听力正常者相比上升、但如果声音成为可听值以上的强度、则作为声音的感觉上的大小的响度急剧地增加的现象。即,感音性听力衰退者有虽然难以听见较小的声音、但如果成为哪怕稍稍为可听值以上的声音则感到嘈杂的对音量变化变得敏感的倾向。另外,使用上述以往的助听技术的助听设备着眼于该现象而实现了听力改善。
2)在感音性听力衰退中,因频率选择性的下降,频带成分间的掩蔽、特别是低频带成分对高频带成分的掩蔽(向上掩蔽)的影响增大。即,感音性听力衰退者具有比低音域的声音更难听取高音域的声音的倾向。另外,对此,报告了通过对左右的耳朵分别分开提示低音域和高音域、从而声音的清晰度变高的情况等(例如参照非专利文献1)。
3)在感音性听力衰退中,因时间分辨能力的下降,难以对应于声音的快速的变化。因此,例如在将两个声音持续地供给的情况下,一个声音被另一个声音掩蔽的时域掩蔽的影响增大。即,感音性听力衰退者难以感知时间变化快的声音、以及难以区别在时间上接近的声音。另外,在时域掩蔽中,有先行音将后续音掩蔽的顺向性掩蔽、和后续音将先行音掩蔽的逆向性掩蔽的两种。顺向性掩蔽是指如果对某个音反应,则即使音消失、该反应也不立即平息,而在该期间中发生的后续音变得难以听见的现象。此外,逆向性掩蔽是指越是强的音则神经的反应发生得越快,所以如果在较弱的音之后到来较强的音则不能进行两个音的区别,较弱的先行音变得难以听到的现象。
在通常的会话中,元音具有能量大、时间变化少、持续时间长的特征,反之,辅音具有能量小、时间变化剧烈、持续时间短的特征。因此,感音性听力衰退者虽然取决于会话中的讲话速度、但由于容易发生辅音的前后的元音带来的时域掩蔽,所以辅音的听取较困难的情况较多。
进而,感音性听力衰退者由于因时间分辨能力的下降而难以对应于声音的快速的变化,所以即使没有辅音的前后的声音带来的时域掩蔽,结果听漏辅音的情况也较多。这是因为,对于时间变化剧烈、持续时间短的辅音,在感音性听力衰退者的毛细胞反应之前该辅音已消失而不能反应。结果听漏了辅音。
这样,感音性听力衰退者因时间分辨能力的下降而难以听取辅音,不知道在说什么或听成不同的语言等辅音的识别率变差。
对此,以往有减轻时域掩蔽的影响的方法。例如,公开了如下技术,即:通过抑制元音的共振峰成分较大的低音域的信号以使元音不会将辅音时域掩蔽、结果强调辅音(例如参照专利文献1)。此外,还公开了如下技术,即:将元音的末端部分一部分抑制一定时间,并在元音与辅音之间放置无音区间,从而抑制对接着到来的辅音的时域掩蔽的影响(例如参照专利文献2、专利文献3)。进而,还提出了如下技术,即:为了降低与元音对辅音的时域掩蔽相关联的、在频率成分间发生的掩蔽,对左右的耳朵提供不同的频率特性的信号(例如参照专利文献4)。
通过进行这样的处理,能够降低从元音向辅音的时域掩蔽,改善辅音的听取。
专利文献1:日本专利第3596580号公报
专利文献2:日本专利第3303446号公报
专利文献3:日本特开平3-245700号公报
专利文献4:日本特开2006-87018号公报
专利文献5:日本特开昭58-70400号公报
非专利文献1:Barbara Franklin,“The Effect of Combining Low-andHigh-Frequency Passbands on Consonant Recognition in the Hearing Impaired”.Journal of Speech and Hearing Research,USA,AmericanSpeech-Language-Hearing Association,December 1975,Vol.18,719-727
但是,上述以往的技术不过是能够将时间分辨能力的下降的影响中的、从元音向辅音的时域掩蔽减轻。即,在上述以往的技术中,关于使感音性听力衰退者感知时间变化剧烈且持续时间短的辅音、改善辅音识别率的问题,并没有解决。
此外,以往的语速变换是使用声音的稳定部分(主要是元音部)提取音调周期,并以音调单位进行补偿,从而进行时间拉伸而使语速变慢的技术。因此,关于使感音性听力衰退者感知时间变化剧烈且持续时间短的辅音、改善辅音识别率的问题,无法解决。此外,由于使语速变慢,因此会发生嘴唇的动作与声音偏差而视觉信息与听觉信息变得不同步的、所谓的不能取得唇音同步(Lip Sync)的状况,结果有时难以听见会话的内容。
发明内容
所以,本发明的目的是解决时间分辨能力下降带来的这些问题,提供一种能够提高时间变化剧烈且持续时间短的辅音的识别率的助听器及助听处理方法。
为了解决该问题,本发明的助听器具备:声音输入单元,被输入外部声音信号;声音分析单元,检测输入到上述声音输入单元中的声音信号的有音区间和在声响上看作无音的区间,并在检测出的有音区间内检测辅音区间和元音区间;以及信号处理单元,在时间上对由上述声音分析单元检测出的上述辅音区间进行拉伸,并在时间上对由上述声音分析单元检测出的上述元音区间及上述在声响上看作无音的区间中的至少一方进行压缩。
根据本结构,通过对辅音区间进行时间拉伸,能够改善时间变化剧烈、持续时间短的辅音的识别率,并且通过将元音区间及/或在声响上看作无音的区间进行压缩,能够使视觉信息与听觉信息同步、保持唇音同步的听觉辅助。
此外,也可以对于上述拉伸的辅音区间的时间的一部分,通过从上述元音区间以音调单位删除信号而将上述元音区间在时间上进行压缩,对于被拉伸的上述辅音区间的时间的剩余部分,通过将在声响上看作无音的区间的信号删除而将上述在声响上看作无音的区间进行压缩。
根据本结构,不是将辅音区间本身(位置、场所),而是将通过拉伸处理增加的时间(量)中的一部分时间量从元音区间删除,避免不能取得唇音同步的状况。由此,能够改善时间变化剧烈、持续时间短的辅音的识别率,能够在保持唇音同步的听觉辅助的同时,防止声音的高度发生变化等音质的劣化。
此外,也可以是,上述助听器还具备调节单元,该调节单元根据时间分辨能力信息,调节将上述辅音区间拉伸的时间,上述时间分辨能力信息表示利用上述助听器的利用者的听觉的时间分辨能力;上述信号处理单元将由上述声音分析单元检测出的上述辅音区间拉伸上述调节单元调节的时间。
根据本结构,能够实现适合于助听器利用者个人的辅音的听取改善。
此外,也可以是,上述助听器还具备调节单元,该调节单元计算上述声音信号的声压,并根据计算出的上述声压,调节将上述辅音区间拉伸的时间;上述信号处理单元将由上述声音分析单元检测出的上述辅音区间拉伸上述调节单元调节的时间。
根据本结构,能够实现对应于输入声音的声压的声音的清晰度改善。
此外,也可以是,上述声音分析单元在上述辅音区间内对辅音的种类进行分析;上述助听器还具备调节单元,该调节单元根据由上述声音分析单元分析出的辅音的种类,调节将上述辅音区间拉伸的时间;上述信号处理单元将由上述声音分析单元检测出的上述辅音区间拉伸上述调节单元调节的时间。
根据本结构,能够提供对应于各辅音的种类的最佳的持续时间,实现对应于辅音的声音的清晰度改善。
根据本发明,能够实现提高时间变化剧烈、持续时间短的辅音的识别率的助听器及助听处理方法。具体而言,对于包括老年性听力衰退的时间分辨能力下降的感音性听力衰退者,特别能够提高辅音的听清状况,能够改善声音清晰度。
附图说明
图1是表示本发明的实施方式1的助听器的结构的模块图。
图2是表示本发明的实施方式1的声音分析单元和控制单元的动作例1的流程图。
图3是表示本发明的实施方式1的声音分析单元和控制单元的动作例2的流程图。
图4是表示本发明的实施方式1的声音分析单元和控制单元的动作例3的流程图。
图5是表示本发明的实施方式2的助听器的结构的模块图。
图6是表示本发明的实施方式3的助听器的结构的模块图。
图7是表示本发明的实施方式3的变形例1的助听器的结构的模块图。
图8是表示本发明的实施方式3的变形例2的助听器的结构的模块图。
图9是表示本发明的实施方式4的助听器的结构的模块图。
图10A是表示无声爆破音的声响特征的图。
图10B是表示无声爆破音的声响特征的图。
图10C是表示无声爆破音的声响特征的图。
图11A是表示有声爆破音的声响特征的图。
图11B是表示有声爆破音的声响特征的图。
图11C是表示有声爆破音的声响特征的图。
图12A是表示鼻音的声响特征的图。
图12B是表示鼻音的声响特征的图。
图13A是表示摩擦音的声响特征的图。
图13B是表示摩擦音的声响特征的图。
图13C是表示摩擦音的声响特征的图。
图14是表示拉伸率表的一例的图。
图15是表示拉伸率表的一例的图。
图16是表示最小时间分辨能力表的一例的图。
图17是表示时间拉伸压缩调节单元503的结构的一例的图。
图18是表示时间拉伸压缩调节单元503的结构的一例的图。
图19是表示本发明的实施方式4的变形例1的助听器的结构的模块图。
图20是表示拉伸率表的一例的图。
图21是表示时间拉伸压缩调节单元703的结构的一例的模块图。
图22是表示本发明的实施方式4的变形例1的助听器的动作例的流程图。
图23是表示时间拉伸压缩调节单元703的结构的另一例的模块图。
图24是表示本发明的实施方式4的变形例1的助听器的另一动作例的流程图。
图25是表示本发明的实施方式4的变形例2的助听器的结构的模块图。
图26是表示本发明的实施方式4的变形例3的助听器的结构的模块图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。
(实施方式1)
图1是表示本发明的实施方式1的助听器的结构的模块图。
图1所示的助听器具备声音输入单元201、声音分析单元202、控制单元203、信号处理部204、和声音输出单元207。
声音输入单元201是将例如麦克风、感应线圈或声音通话装置、或者声音再现装置的输出进行输入的外部输入端子,被输入外部的声音信号,将输入的声音信号输出给信号处理部204。
声音分析单元202分析输入到声音输入单元201中的声音信号的声音的种类(元音、辅音、其他等)。具体而言,声音分析单元202判断输入的声音信号是在声响上看作无音的区间、还是有音区间。进而,声音分析单元202在判断为有音区间的有音区间内,检测辅音区间和后接于辅音区间的元音区间,从而判断辅音区间和元音区间。
例如,声音分析单元202如以下这样判断在声响上看作无音的区间和有音区间。声音分析单元202计算单位时间中的声音信号的强度,在该强度值为规定阈值以上的时间超过了规定持续时间的情况下判断为有音区间,在小于规定持续时间的情况下或小于规定阈值的情况下,判断为在声响上看作无音的区间。另外,在判断有音区间和在声响上看作无音的区间(无音区间)的方法中,也可以使用例示以外的周知的判断方法。
此外,例如声音分析单元202如以下这样检测并判断判断为有音区间的有音区间内的辅音区间和元音区间。声音分析单元202例如使用如下方法等,即:在判断为有音区间的有音区间内提取(检测)共振峰频率或音调周期,并根据辅音和元音具有的各自的特征来判断辅音和元音。这里,辅音的信号在单体中难以与其他噪声区别,所以为了判断辅音区间,根据后接的元音的存在来推测及判断辅音区间。另外,声音分析单元202既可以基于共振峰频率及音调周期的任何一个来判断辅音区间和元音区间,也可以使用上述例示以外周知的判断方法。
控制单元203基于声音分析单元202的分析,进行信号处理部204的控制。即,控制单元203基于由声音分析单元202分析的声音的种类(元音、辅音、其他等),进行该声音的处理内容(拉伸、压缩等)等的判断。并且,通过对信号处理部204发送包括声音的区间及处理内容等的信息的控制信号,进行信号处理部204的控制。
具体而言,控制单元203当由声音分析单元202检测出辅音区间或后接于辅音区间的元音区间时,根据检测出的辅音区间或后接于辅音区间的元音区间,进行信号处理部204的控制。控制单元203在声音分析单元202中检测出了辅音区间的情况下,时间拉伸单元205将包含用来进行辅音区间的时间拉伸的信息的控制信号输入到信号处理部204中。进而,控制单元203在存在后接于声音分析单元202检测出的辅音区间的元音区间的情况下,将控制信号输入到信号处理部204中,该控制信号包含用于时间压缩单元206进行元音区间的时间压缩的信息。
另外,控制单元203和信号处理部204怎样分担处理根据安装方法而能够进行各种安装,并不限于本实施方式的处理分担。例如,也可以是控制单元203仅将声音的种类和处理内容发送给信号处理部204、信号处理部204决定处理时间、在需要的情况下发送给控制单元203的结构。
此外,时间拉伸单元205用来进行辅音区间的时间拉伸的信息既可以为对检测出的辅音的种类分别决定的,也可以为将辅音分类为大致的组并按该组分别决定的。此外,也可以为根据听者的时间分辨能力的劣化而对辅音的每个种类或大致分类的辅音的组分别决定的。
信号处理部204具有时间拉伸单元205和时间压缩单元206,根据来自控制单元203的控制信号,通过时间拉伸单元205和时间压缩单元206进行从声音输入单元201输出的声音信号的信号处理。具体而言,信号处理部204被从声音输入单元201输入声音信号、从控制单元203输入控制信号。信号处理部204基于来自控制单元203的控制信号,通过时间拉伸单元205和时间压缩单元206处理从声音输入单元201输入的声音信号。即,信号处理部204将由声音分析单元202检测出的辅音区间在时间上拉伸,将由声音分析单元202检测出的元音区间及在声响上看作无音的区间的至少一方在时间上压缩。另外,在为了判断辅音而需要将后接的元音输入到声音分析单元202中的情况下,在从控制单元203输入的控制信号中发生辅音区间的判断延迟。因此,一般需要将延迟缓冲设在信号处理部204内或信号处理部204的前级,以便能够配合判断延迟而使时间压缩及拉伸单元动作。
时间拉伸单元205进行通过来自控制单元203的控制信号指定的辅音区间的时间拉伸。辅音区间的时间拉伸例如可以如专利文献5中公开那样通过将辅音区间的声音信号在时间上切出、重复该部分的技术等进行。进而,通过对辅音区间的时间拉伸进行淡入-淡出的交叉衰弱,能够使连接点变得更平滑。
通过这样使辅音发生的时间(辅音区间)变长,即使是劣化的内耳的毛细胞也能够对辅音反应,此外能够使辅音的前后的元音带来的时域掩蔽的影响减少。由此,能够改善不易听取辅音的听力衰退者的辅音的识别率。另外,拉伸辅音区间的方法并不限定于上述辅音拉伸方式,也可以使用其他辅音拉伸方式。在此情况下,也具有同样的识别率改善效果。
时间压缩单元206将元音区间及上述在声响上看作无音的区间的至少一个压缩将辅音区间拉伸的时间量。具体而言,时间压缩单元206基于来自控制单元203的控制信号,进行后接于上述中指定的辅音区间的元音区间或在声响上看作无音的区间的时间压缩、或者后接于辅音区间的元音区间和在声响上看作无音的区间两者的时间压缩。此外,时间压缩单元206将拉伸的辅音区间的时间的一部分从元音区间中以音调单位删除信号,从而将元音区间在时间上压缩,对于拉伸的辅音区间的时间的剩余部,删除在声响上看作无音的区间的信号,从而将在声响上看作无音的区间压缩。这样,时间压缩单元206不是在辅音区间本身(位置、场所)中,而是在后续的区间被进行时间压缩通过拉伸处理增加的时间(量)即在辅音区间中时间拉伸的时间量的处理。由此,即使在时间拉伸单元205将辅音区间的时间拉伸的情况下,也能够对应在视觉信息和听觉信息中发生偏差、不能实现唇音同步(视觉与听觉的同步)带来的听觉辅助的问题。
更具体地讲,时间压缩单元206基于将辅音区间拉伸后的时间的记录等,将后接的元音区间的一部分、或无音区间的声音信号的一部分或全部删除该时间量或其以上,从而进行时间压缩,以使辅音的发生定时与视觉信息一致。这是因为,即使在元音区间中进行了将声音进行部分删除的处理、由于持续时间长、稳定状态继续,所以也不会难以听取。此外,是因为即使将无音区间的一部分或全部删除,也不会给声音的听取带来不良影响。但是,在此情况下,也为了防止通过元音区间的压缩使音高变化等的音质的劣化,优选的是提取压缩的元音区间的元音的音调周期,并以音调单位删除而缩短时间。另外,在这样以音调单位将元音区间删除的情况下,可以想到不能删除为使其与辅音的拉伸时间严密地一致。但是在此情况下,在删除元音区间的情况下即使因上述理由而与拉伸时间不严密地一致,也优选的是以音调单位删除。
另外,关于将辅音区间拉伸的时间,既可以由控制单元203保持,也可以由信号处理部204保持。此外,也可以做成另外设置记录部等而记录拉伸时间的结构。
声音输出单元207将由信号处理部204处理后的声音信号输出。声音输出单元207例如不仅是耳机、扬声器、头戴式耳机等,也可以是利用骨骼传导振子那样的振子、或内耳用的电极等的结构。
接着,对以上那样构成的本实施方式的助听器的声音分析单元202和控制单元203的动作的一例进行说明。图2是表示本实施方式1的声音分析单元和控制单元的动作例1的流程图。另外,在以下的动作例1中,对使用辅音检测标志cons的情况进行例示。
声音分析单元202首先判断输入到声音输入单元201中的输入声音是否是有音区间(S201)。声音分析单元202如果判断为该输入声音是有音区间(S201的是的情况),则前进到判断所判断出的有音区间是否是辅音区间的步骤(S202)。声音分析单元202如果不是那样(S201的否的情况),则结束处理。
接着,在步骤S202中,声音分析单元202如果判断为该有音区间的声音是辅音区间的声音(S202的是的情况),则前进到进行时间拉伸控制的步骤(S204)。如果不是那样(S202的否的情况),则前进到判断是否需要时间压缩处理的步骤(S205)。在步骤S204中,控制单元203控制为使信号处理部204的时间拉伸单元205进行规定时间的时间拉伸,并将1代入到辅音检测标志cons中。
另一方面,在步骤S202中,声音分析单元202如果判断为该有音区间不是辅音区间(S202的否的情况),则前进到判断是否需要时间压缩处理的步骤(S205)。在步骤S205中,声音分析单元202如果判断为辅音检测标志cons是1(S205的是的情况),则再前进到判断该有音区间是否是元音区间的步骤(S206)。如果不是那样(S205的否的情况),则结束处理。在步骤S206中,声音分析单元202如果判断为该有音区间是元音区间(S206的是的情况),则前进到进行音调单位的时间压缩控制的步骤(S208)。如果不是那样(S206的否的情况),则结束处理。在步骤S208中,控制单元203对时间压缩单元206进行控制,以使其将拉伸了辅音的时间量或其以上的时间量的元音区间以音调单位删除而进行时间压缩,并将0代入到辅音检测标志cons中。
以上,声音分析单元202和控制单元203进行对连续输入到声音输入单元201中的输入声音的动作。另外,在S205中,判断辅音检测标志cons是否是1,是为了在没有进行时间拉伸的情况、或在时间拉伸之后进行了时间压缩的情况下(都为cons是0的状态)防止进行不需要的时间压缩。此外,S206的“否”是为了使得在有音区间既不是辅音区间也不是元音区间的噪声等的情况下也能够应对。
另外,在以上的动作例1中,在代替辅音检测标志cons而使用拉伸时间变量dur的情况下,只要如以下这样动作就可以。即,在步骤S204中,代替将1代入到cons中而对dur加上拉伸了辅音的时间。此外,在步骤S205中,代替判断cons是否是1而判断dur是否比0大。此外,在步骤S208中,进行控制以在不超过dur表示的时间的范围内进行时间压缩,从变量dur减去压缩了元音的时间。以上那样的使用拉伸时间变量dur的处理在本发明的助听器例如如帧处理那样将输入的声音以较短的时间音调划分处理的情况下特别有效。进而,并不限于使用上述辅音检测标志或拉伸时间变量的方法,也可以使用能够判断是否应拉伸的其他方法。
接着,对声音分析单元202和控制单元203的其他动作例(动作例2)进行说明。图3是表示本实施方式1的声音分析单元和控制单元的动作例2的流程图。另外,在以下的动作例2中也对使用辅音检测标志cons的情况进行例示,但与上述动作例1同样,也可以使用拉伸时间变量dur或使用能够判断是否应拉伸的其他方法。
声音分析单元202首先判断输入到声音输入单元201中的输入声音是否是有音区间(S301)。声音分析单元202如果判断为该输入声音是有音区间(S301的是的情况),则前进到判断所判断出的有音区间是否是辅音区间的步骤(S302)。如果不是那样(S301的否的情况),则前进到判断是否需要时间压缩处理的步骤(S305)。
接着,在步骤S302中,声音分析单元202如果判断为该有音区间的声音是辅音区间的声音(S302的是的情况),则前进到进行时间拉伸控制的步骤(S304)。如果不是那样(S302的否的情况),则结束处理。另外,步骤S304的动作由于与图2的步骤S204相同,所以省略说明。
另一方面,在步骤S305中,声音分析单元202如果判断为辅音检测标志cons是1(S305的是的情况),则前进到进行时间压缩控制的步骤(S307)。如果不是那样(S305的否的情况),则结束处理。在步骤S307中,控制单元203对时间压缩单元206进行控制,以使其将拉伸了辅音的时间量或其以上的时间量的在声响上看作无音的区间删除而进行时间压缩,并将0代入到辅音检测标志cons中。
以上,声音分析单元202和控制单元203进行对连续输入到声音输入单元201中的输入声音的动作。另外,动作例1与动作例2的差异点在于:不是将元音区间删除,而是将在声响上看作无音的区间删除而进行时间压缩。
进而,对声音分析单元202和控制单元203的另一动作例(动作例3)进行说明。图4是表示本实施方式1的声音分析单元202和控制单元203的动作例3的流程图。另外,在以下的动作例3中也对使用辅音检测标志cons的情况进行例示,但与上述动作例1或动作例2同样,也可以使用拉伸时间变量dur或使用能够判断是否应拉伸的其他方法。
声音分析单元202首先判断输入到声音输入单元201中的输入声音是否是有音区间(S401)。声音分析单元202如果判断为该输入声音是有音区间(S401的是的情况),则前进到判断判断出的有音区间是否是辅音区间的步骤(S402)。如果不是那样(S301的否的情况),则前进到判断是否需要时间压缩处理的步骤(S409)。
接着,在步骤S402中,声音分析单元202如果判断为该有音区间的声音是辅音区间的声音(S402的是的情况),则前进到进行时间拉伸控制的步骤(S404)。如果不是那样(S402的否的情况),则前进到判断是否需要时间压缩处理的步骤(S405)。另外,步骤S404~步骤S406的动作与图2的步骤S204~S206分别相同,所以省略说明。
在步骤S406中,如果声音分析单元202判断(检测)为该有音区间是元音区间(S406的是的情况),则前进到进行音调单位的时间压缩控制的步骤(S408)。如果不是那样(S406的否的情况),则结束处理。在步骤S408中,控制单元203对时间压缩单元206进行控制,以使其将拉伸了辅音的时间量或比其短的时间量的元音区间以音调单位删除而进行时间压缩。并且,在将元音区间压缩的时间及将在声响上看作无音的区间压缩后的时间的总和与拉伸了辅音的时间相等的情况下,将0代入到辅音检测标志cons中。
另一方面,在步骤S409中,声音分析单元202如果判断为辅音检测标志cons是1(S409的是的情况),则前进到进行时间压缩控制的步骤(S411)。如果不是那样(S409的否的情况),则结束处理。在步骤S411中,控制单元203对时间压缩单元206进行控制,使其将拉伸了辅音的时间量或比其短的时间量的、在声响上看作无音的区间删除而进行时间压缩。并且,在将元音区间压缩后的时间及将在声响上看作无音的区间压缩的时间的总和与拉伸了辅音的时间相等的情况下,将0代入到辅音检测标志cons中。
以上,声音分析单元202和控制单元203进行对连续输入到声音输入单元201中的输入声音的动作。另外,与动作例1及动作例2的差异点在于:将元音区间及在声响上看作无音的区间删除而进行时间压缩。
另外,在上述动作例3中,动作为:进行元音区间或在声响上看作无音的区间中的更先检测出的一方的时间压缩控制,但在先检测出元音区间后进行在声响上看作无音的区间的时间压缩处理的情况下,只要除了辅音检测标志cons以外还使用元音判断标志vow、如以下这样进行动作就可以。即,在步骤S408中,进行控制,以将比拉伸了辅音的时间短的时间量的元音区间以音调单位删除而进行时间压缩,除了将0代入到cons中以外,还将1代入到vow中。在步骤S409中,如果判断为cons是0、并且vow是1,则前进到S411。在步骤S411中,对于辅音拉伸时间与元音压缩时间的差的时间量(例如辅音的拉伸时间量中的没有缩减元音而剩余的时间量),进行控制,以进行在声响上看作无音的区间的压缩,将0代入到vow中。
以上,在本实施方式中,在后接的元音区间或在声响上看作无音的区间、或者后接的元音区间和在声响上看作无音的区间两者中进行时间压缩处理。但是,也可以不仅在上述中说明的这些区间进行、而且在后接的再后面发生的其他元音区间或噪声等的区间进行时间压缩处理。不论如何,都只要选择适合于声音信号的区间而进行时间压缩的处理,以消除视觉信息与听觉信息的不一致、能够进行通过唇音同步的听觉辅助就可以。
以上,根据本实施方式1,能够实现使时间变化剧烈、持续时间较短的辅音的识别率提高的助听器及助听处理方法。具体而言,将输入到声音输入单元201中的声音信号在声音分析单元202中分析,判断是在声响上看作无音的区间还是有音区间,在判断出的有音区间中,再进行辅音区间和元音区间的判断。并且,根据声音分析单元202的判断结果,控制单元203对信号处理部204输出使信号处理部204的时间拉伸单元205及时间压缩单元206动作的控制信号。在时间拉伸单元205中,进行辅音区间的时间拉伸,在时间压缩单元206中,通过在后接的元音区间或在声响上看作无音的区间、或者后接的元音区间和在声响上看作无音的区间的两者中删除在辅音区间中拉伸的时间量而进行时间压缩。
通过这样将辅音区间时间拉伸到能够感知的长度,时间分辨能力下降、难以知觉通常的会话中的声音的辅音的听力衰退者能够确保辅音的感知时间,结果能够提高声音整体的识别程度。进而,对于由于辅音的拉伸而不能够进行唇音同步的听觉辅助的问题,通过将后接的元音区间、在声响上看作无音的区间、其他元音区间、或者无意义区间等进行时间压缩,能够将与视觉信息的不一致也消除。
另外,也可以不进行到辅音整体的分析,而采用简单且高速地检测应拉伸的声音的特征的方法进行辅音区间的时间拉伸。在此情况下,不仅能够减少上述辅音区间的判断延迟,安装也变得简单,所以也有好的一面。这里,作为简单且高速地检测应拉伸的声音的特征的方法,例如有仅检测爆破、摩擦等的开头部分(急剧的频率成分的变化)或过渡部分(共振峰成分的变化:共振峰迁移)等的辅音的特征的方法等。
(实施方式2)
图5是表示本发明的实施方式2的助听器的结构的模块图。图5所示的助听器具备声音输入单元201、声音分析单元202、调节部301、控制单元304、信号处理部204、和声音输出单元207。另外,在图5中,对于与图1相同的结构要素使用相同的标号而省略说明。
此外,图5所示的助听器相对于有关实施方式1的助听器,调节部301、控制单元304及信号处理部204的结构不同。
调节部301由时间分辨能力设定单元302和时间拉伸压缩调节单元303构成,根据本发明的助听器利用者的听觉的时间分辨能力而调节将声音信号的一部分拉伸的时间和将其另一部分压缩的时间。例如,调节部301在利用者的听觉的时间分辨能力的下降程度较大的情况下,与利用者的听觉的时间分辨能力的下降程度较小的情况相比,将拉伸辅音区间的时间调节得更长。
时间分辨能力设定单元302为了使本发明的助听器适应于利用者,在助听器使用前,使用拟合程序等,将对于该助听器的时间分辨能力的调节值设定为拟合的参数之一。使用这样设定的调节值,时间分辨能力设定单元302中设定助听器利用者的时间分辨能力的值。这里,从助听器的外部输入而设定调节值,但并不限于时间分辨能力设定单元302设定的结构,也可以做成由也包括时间拉伸压缩调节单元303的调节部301设定的结构。
例如,时间分辨能力设定单元302作为助听器利用者的听觉的时间分辨能力值,设定使用时间分辨能力的测量方法测量的数据、或者对应于测量值的、时间分辨能力的下降程度的参数。
另外,时间分辨能力的测量方法在《听觉心理学概论》(B.J.C摩尔著,大串健吾监译)中详细地记述。例如,在宽频带或窄频带噪声中插入噪声断续的间隙,通过测量间隙的检测阈来计算时间分辨能力的下降程度。这样的时间分辨能力的测量只要在助听器的拟合时或耳鼻科诊疗时进行就可以,还可以考虑在助听器中内置测量程序、一边使用助听器的受话器发出声音一边测量的方法。此外,由于时间分辨能力的下降有使时域掩蔽的影响增大的倾向,所以也可以通过测量时域掩蔽特性来简单地计算时间分辨能力的下降程度。例如,根据上述《听觉心理学概论》,通过使用称作探测信号的较短的信号和掩蔽信号、测量能够感知探测信号的延迟时间、掩蔽量,简单地计算时间分辨能力的下降程度。此外,也可以单纯地用语速不同的文章进行听取试验,根据正确回答率推测时间分辨能力的下降程度,从而测量时间分辨能力。
时间拉伸压缩调节单元303基于由时间分辨能力设定单元302设定的时间分辨能力值,设定对信号处理部204的时间拉伸单元305拉伸的时间(拉伸时间)和时间压缩单元306压缩的时间(压缩时间)进行调节的调节量。
具体而言,时间拉伸压缩调节单元303基于由时间分辨能力设定单元302设定的时间分辨能力值,例如在时间分辨能力的下降程度较小的情况下,将拉伸时间和压缩时间设定得较短,在下降程度较大的情况下,将拉伸时间和压缩时间设定得较长。这样,通过根据利用者的时间分辨能力的下降程度将辅音拉伸直到该利用者能够感知辅音,能够容易感知持续时间较短的辅音。
控制单元304将由时间拉伸压缩调节单元303设定的调节量与对应于声音分析单元202的检测结果的控制信号一起输出给信号处理部204。即,控制单元304基于由声音分析单元202分析的声音的种类(元音、辅音、其他等),进行该声音的处理内容(拉伸、压缩等)等的判断。并且,通过将包括声音的区间及处理内容等的信息的控制信号与在时间拉伸压缩调节单元303中设定的调节量一起发送给对信号处理部204,进行信号处理部204的控制。
时间拉伸单元305基于由控制单元304输入到信号处理部204中的调节量和控制信号,进行辅音区间的时间拉伸。该辅音区间的时间拉伸与图1的时间拉伸单元205同样进行,但使辅音区间拉伸的时间也基于输入的调节量决定。
时间压缩单元306基于由控制单元304输入到信号处理部204中的调节量和控制信号,进行元音区间等的时间压缩。该时间压缩与图1的时间压缩单元206同样进行,但使元音区间等压缩的时间也基于输入的调节量决定。
这样,根据本实施方式2,能够通过时间分辨能力设定单元302和时间拉伸压缩调节单元303根据利用者的听觉的时间分辨能力调节声音的拉伸时间和压缩时间。由此,能够实现能够进行更适合于个人的辅音的听取改善的助听器及助听处理方法。
(实施方式3)
已知利用者的时间分辨能力还根据声压(声音的大小)而变化。因此,在本实施方式3中,以下说明根据输入的声音信号的声压进行拉伸处理的情况的例子。
图6是表示本发明的实施方式3的助听器的结构的模块图。图6所示的助听器具备声音输入单元201、声音分析单元202、调节部401、控制单元404、信号处理部204、和声音输出单元207。另外,对于与图1或图5相同的结构要素赋予相同的标号而省略说明。
图6所示的助听器相对于有关实施方式1的助听器,调节部401及控制单元404的结构不同。
调节部401由声压计算单元402和时间拉伸压缩调节单元403构成,根据输入到声音输入单元201中的输入声音的声压,调节将声音信号的一部分拉伸的时间和将其另一部分压缩的时间。
具体而言,声压计算单元402计算输入到声音输入单元201中的输入声音的每单位时间的声压。
时间拉伸压缩调节单元403基于由声压计算单元402计算出的声压(值),在时间拉伸单元305和时间压缩单元306中,设定对拉伸的时间和压缩的时间进行调节的调节量。例如,时间拉伸压缩调节单元403当由声压计算单元402计算出的声压值比规定值大时,将拉伸时间和压缩时间设定得较短,当上述声压值与规定值相同或较小时,将拉伸时间和压缩时间设定得较长。这里,所谓规定值,是指预先设定的作为拉伸时间和压缩时间的基准的声压值。此外,例如时间拉伸压缩调节单元403在由声压计算单元402计算出的声压值比规定值大的情况下,与由声压计算单元402计算出的声压值是规定值以下的情况相比,将拉伸辅音区间的时间调节得短。
控制单元404将由时间拉伸压缩调节单元403设定的调节量与对应于声音分析单元202的检测结果的控制信号一起输出给信号处理部204。即,控制单元404基于由声音分析单元202分析的声音的种类(元音、辅音、其他等),进行该声音的处理内容(拉伸、压缩等)等的判断。并且,通过将包括声音的区间及处理内容等的信息的控制信号与由时间拉伸压缩调节单元403设定的调节量一起发送给信号处理部204,进行信号处理部204的控制。
这样,根据输入到声音输入单元201中的输入声音的声压,使拉伸时间压压缩时间变化,从而对于例如声压较高而清晰度足够的声音能够使辅音发生的时间变长,反之,能够防止降低清晰度、出现不自然等的不良影响。此外,在声压较低的情况下,能够使辅音发生的时间变长而辅助辅音的感知。
另外,利用者的时间分辨能力也根据声压(声音的大小)而变化,但该变化因每个利用者而不同的情况较多。因此,优选的是在助听器使用前实施利用者的各声压的听力检查,得到有关各声压的听力的参数。在此情况下,也可以将得到的有关各声压的听力的参数输入到调节部401中、在时间拉伸压缩调节单元403中设定调节量、决定对应于声压的拉伸时间和压缩时间。此外,也可以测量辅音和元音的各声压的声音清晰度,将有关各声压的清晰度的参数输入到包括时间拉伸压缩调节单元403的调节部401中,设定上述调节量,决定对应于声压的拉伸时间和压缩时间。
(变形例1)
图7是表示本发明的实施方式3的变形例1的助听器的结构的模块图。
在图7的助听器中,相对于图6的声压计算单元402计算由声音输入单元201输入的声音的、每单位时间的声压,不同点在于:仅对由声音分析单元202判断为有音区间的区间进行声压的计算。通过做成图7那样的结构,能够省去声音的在声响上看作无音的区间、及噪声等的无意义区间的声压计算,能够进行高效率的处理。
以上,能够由调节部401的声压计算单元402和时间拉伸压缩调节单元403根据输入到声音输入单元201中的输入声音的声压的大小,调节拉伸压缩时间。由此,能够实现能够防止因将足够清晰的声音的一部分拉伸、压缩带来的声音劣化的助听器及助听处理方法。此外,通过根据利用者的各声压的听力来调节声音的拉伸时间和压缩时间,能够改善更适合于个人的、声音的听取改善。进而,通过根据辅音、元音的各声压的清晰度来调节声音的拉伸时间和压缩时间,能够实现声音的听取的改善。
(变形例2)
图8是表示本发明的实施方式3的变形例2的助听器的结构的模块图。对于与图1、图5或图6相同的结构要素赋予相同的标号而省略说明。
图8的助听器是图6的调节部401的另一结构例,相对于有关实施方式3的图6的助听器,调节部601的结构不同。
图8所示的调节部601由时间分辨能力设定单元302、声压计算单元402和时间拉伸压缩调节单元603构成。
时间拉伸压缩调节单元603基于由声压计算单元402计算出的声压值、和由时间分辨能力设定单元302设定的时间分辨能力值,设定调节量并输出给控制单元604。另外,时间拉伸压缩调节单元603如图7中说明那样,也可以仅对由声音分析单元202判断为有音区间的区间进行声压计算单元402的计算处理。
控制单元604将由时间拉伸压缩调节单元603设定的调节量与对应于声音分析单元202的检测结果的控制信号一起输入到信号处理部204中。即,控制单元604基于由声音分析单元202分析的声音的种类(元音、辅音、其他等),进行该声音的处理内容(拉伸、压缩等)等的判断。并且,通过将包括声音的区间及处理内容等的信息的控制信号与由时间拉伸压缩调节单元603设定的调节量一起发送给信号处理部204,进行信号处理部204的控制。
这样,能够根据输入声音的声压和助听器利用者的时间分辨能力两者来调节声音的拉伸时间和压缩时间。由此,能够实现不仅能够改善适合于个人的听取、还能够防止声音的不适当的拉伸和压缩带来的声音劣化的助听器及助听处理方法。
(实施方式4)
图9是表示本发明的实施方式4的助听器的结构的模块图。图9所示的助听器具备声音输入单元201、调节部501、控制单元504、信号处理部204和声音输出单元207。另外,对于与图1、图5或图6相同的结构要素赋予相同的标号而省略说明。
图9所示的助听器相对于有关实施方式1的图1的助听器,调节部501、控制单元504及信号处理部204的结构不同。此外,图9所示的助听器相对于有关实施方式3的图5的助听器,调节部501及控制单元504的结构不同。
调节部501如图9所示,由声音分析单元502和时间拉伸压缩调节单元503构成,根据输入到声音输入单元201中的声音的辅音的种类,设定调节将声音信号的一部分拉伸的时间和将其另一部分压缩的时间的调节量。
具体而言,声音分析单元502判断输入到声音输入单元201中的声音是在声响上看作无音的区间还是有音区间,在判断为有音区间的情况下判断有音区间内是辅音区间还是元音区间。进而,声音分析单元502在判断为辅音区间的情况下,判断辅音区间内的辅音的种类。
这里,所谓辅音的种类,也取决于分类的方式,例如根据鹿野等的《声音-音信息的数字信号处理》,如以下这样分类。即,鼻音(m、n)、无声摩擦音(f、s、sh)、有声摩擦音(z、zh)、声门摩擦音(h)、无声爆破音(p、t、k)、有声爆破音(b、d、g)、无声破擦音(ts、ch)、半元音(w)及拗音(y)。
此外,作为更详细的分类方式,例如如以下这样。有:无声口唇爆破音(p)、无声齿龈爆破音(t)、无声软腭爆破音(k)、有声口唇爆破音(b)、有声齿龈爆破音(d)、有声软腭爆破音(g)等的爆破音、无声齿龈摩擦音(s)、无声硬腭摩擦音(sh)、有声齿龈摩擦音(z)、有声硬腭摩擦音(zh)、声门摩擦音(h)等的摩擦音、和无声硬腭破擦音(ch)、无声齿龈破擦音(ts)等的破擦音。此外,还有口唇鼻音(m)、齿龈鼻音(n)、拍音(1)、口唇半元音(w)、以及硬腭半元音(拗音)(y)。
另外,在声音分析单元502中,辅音的种类可以通过根据输入到声音输入单元201中的声音的声音信号检测元音区间、以时间模式推测夹在元音区间中的声音区间来判断。具体而言,基于各辅音的声响上的特征(波谱上的特性)、即在开头可看到的急剧或平缓的强度变化(初始部)、接着初始部的部分、即称作过渡的短时间的共振峰频率变化(共振峰迁移部分)、和为一定的共振峰频率中的初始部和过渡,能够推测辅音的种类。以下,举一些辅音的种类为例具体地说明。
图10A~图10C是表示无声爆破音的声响特征的图(光谱图)。图10A是作为无声爆破音的一例而表示男性的声音发出“パ(pa)”的情况下的声响特征的图,图10B是作为无声爆破音的一例而表示男性的声音发出“タ(ta)”的情况下的声响特征的图。图10C是作为无声爆破音的一例而表示男性的声音发出“カ(ka)”的情况下的声响特征的图。另外,在图中,纵轴表示频率,横轴表示时间。此外,在图中,颜色的浓淡表示声音的强度,越亮则表示包含在声音信号中的成分越强。
在此情况下,如图10A~图10C所示,作为辅音的种类之一的无声爆破音(p、t、k)的声响特征,除了在接着初期的部分,称作过渡的共振峰频率变化(共振峰迁移)不同以外,还可以观察到初始(开头)的爆破部分(声音的强度变化剧烈的部分)。另外,在无声爆破音(p、t、k)内,除了共振峰的迁移的差异以外,初期(开头)的爆破部分的长度及频率成分也不同,从而能够区别。以下说明其例子。
图11A~图11C是表示有声爆破音的声响特征的图。图11A是作为有声爆破音的一例而表示男性的声音发出“バ(ba)”的情况下的声响特征的图,图11B是作为有声爆破音的一例而表示男性的声音发出“ダ(da)”的情况下的声响特征的图。图11C是作为有声爆破音的一例而表示男性的声音发出“ガ(ga)”的情况下的声响特征的图。
在此情况下,如图11A~图11C所示,作为辅音的种类之一的有声爆破音(b、d、g)的声响特征,在初期(开头)可以观察到蜂音条(buzz bar)(开头的低频率成分)、和接着初期的部分中称作过渡的短时间(几十ms左右)的共振峰频率变化。另外,在有声爆破音(b、d、g)内,可以考虑通过蜂音条的时间的长度、共振峰频率变化来区别。
图12A及图12B是表示鼻音的声响特征的图。图12A是作为鼻音的一例而表示男性的声音发出“マ(ma)”的情况下的声响特征的图,图12B是作为鼻音的一例而表示男性的声音发出“ナ(na)”的情况下的声响特征的图。
在此情况下,如图12A及图12B所示,作为辅音的种类之一的鼻音(m、n)的声响特征,在初期(开头)可以观察到200Hz附近的能量的集中,还在接着初期的部分可看到共振峰频率变化。另外,在鼻音(m、n)内,可以通过共振峰频率变化的形状来区别。
还可以考虑其他辅音的分类算法,通过导入这样的辅音分类方法,声音分析单元502能够基于各辅音的声响特征(波谱上的特征),根据初期的强度变化和称作过渡的短时间的共振峰频率变化的特征来判断(确定)辅音的种类。
然后,由信号处理部204进行拉伸处理。另外,拉伸处理中,例如将鼻音(m、n)、有声爆破音(b、d、g)的过渡(共振峰迁移部分)进行拉伸等,仅将时间性变化成为线索的部分(辅音)进行拉伸处理以便能够感知该变化。此外,例如将爆破、破擦部分拉伸等,将发出音的持续时间较短的部分(辅音)拉伸处理以便能够感知该成分。
时间拉伸压缩调节单元503根据由声音分析单元502判断出的辅音的种类,设定对信号处理部204的时间拉伸单元305和时间压缩单元306的拉伸时间和压缩时间进行调节的调节量。
例如,时间拉伸压缩调节单元503根据由声音分析单元502判断出的辅音的种类,如以下这样设定其拉伸时间和压缩时间的调节量。即,时间拉伸压缩调节单元503在基于辅音的调音位置、调音方式和声带振动的有无等的分类中,用表等预先保持表示助听器利用者容易感知的辅音和难以感知的辅音的听力检查等的数据。并且,时间拉伸压缩调节单元503关于通过听力检查等的数据推测为难以感知的辅音,将拉伸时间和压缩时间的调节量设定得较长,关于推测为容易感知的辅音设定为较短。
这样,时间拉伸压缩调节单元503基于表示助听器利用者容易感知的辅音和不易感知的辅音的听力检查等的数据进行拉伸及压缩,从而能够提高辅音的识别率。
例如,时间拉伸压缩调节单元503在由声音分析单元502判断出的辅音的种类是无声爆破音的情况下,将调节量设定得较短以不会与有声爆破音混同的程度,在有声爆破音的情况下,将调节量设定得较长以使与无声爆破音的差别变得清楚的程度。由此,时间分辨能力下降的听力衰退者能够应对难以识别无声爆破音和有声爆破音的问题。另外,该问题对于时间分辨能力下降的听力衰退者来说,是通过难以正确地感知作为两者的识别的一个因素的有声开始时间(Voice onset time(VOT))而发生的。关于这样的辅音,在辅音是无声爆破音的情况和有声爆破音的情况下使调节量变化,而使VOT的差异、即无声爆破音与有声爆破音的差异变得清楚,从而能够提高辅音的识别率。
另外,时间拉伸压缩调节单元503作为听力检查等的数据而保持有例如将关于各辅音的容易感知度的助听器利用者的听力信息、或对每个辅音设定的调节量与辅音建立对应的表。当然,这些表并不限于时间拉伸压缩调节单元503保持的情况,也可以是调节部501内具备存储部、通过该存储部保持的结构。
此外,表示听力检查等的数据的表既可以是表示被标准化成助听器利用者整体的数据的表,也可以是表示基于助听器利用者个人的听力的数据的表。
这里,对表示听力检查等的数据的表、和使用它进行拉伸处理的时间拉伸压缩调节单元503更具体地说明。
图14是表示拉伸率表的1例的图。图14所示的拉伸率表按照各辅音的每个成分(种类)表示时间分辨能力与拉伸率的关系,对应于辅音的种类而表示应拉伸的倍率(调节量)。这里,图中的时间分辨能力的值20(ms)是表示助听器利用者普遍的辅音的听出能力的时间,预先设定。
如图14所示,例如在有音口唇爆破音b的情况下,时间拉伸压缩调节单元503将辅音b的时间拉伸到4.5倍。此外,例如在声门摩擦音h的情况下,时间拉伸压缩调节单元503将辅音h的时间拉伸到1.8倍。这里,关于表示为1.0倍的辅音的种类,表示时间拉伸压缩调节单元503没有拉伸辅音的时间。
另外,图14的拉伸率表表示的值只不过是设定了辅音的种类与使用助听器的利用者的听觉的时间分辨能力的每个组合的拉伸时间的倍率的一例。当然也可以是其他值,只要为助听器利用者能够听出来辅音的拉伸率就可以。例如,过渡的时间性变化较慢的硬腭半元音(拗音)不怎么需要拉伸,但过渡的时间性变化较快的、图10A~图10C所示的无声爆破音(p、t、k)及图11A~图11C所示的有声爆破音也可以将拉伸时间设定为比例示的长。同样,在拉伸率表中表示的时间分辨能力的值也可以不是20ms,也可以是25ms或15ms。只要是能够作为助听器利用者普遍能够设定的值就可以。
此外,在拉伸率表中表示的辅音的种类并不限定于图14所示的辅音的种类。例如,如图15所示,也可以使辅音的种类为将各个辅音按照共通的特征大致分类的组的种类。在此情况下,只要对辅音的各种类、即将辅音大致分类的各组表示拉伸率就可以。此外,将辅音的种类大致分类的组也并不限于如图16所示的有声爆破音、无声爆破音、无音摩擦音、有声摩擦音、无声破擦音及鼻音,例如也可以是分类为口唇音、齿龈音等的组。此外,这些各组的拉伸率只要使用各组内的代表值(例如平均值、最大值、最小值等)设定就可以。该各组内的代表值既可以在预先准备后设定,也可以根据各组内的辅音各自的拉伸率的值来设定。
图16是表示最小时间分辨能力表的一例的图。图16所示的最小时间分辨能力表表示为了能够按辅音的每个种类来识别(辨别)所需要的最低限度的时间分辨能力。与助听器利用者(受听者)的时间分辨能力比较,在判断为不能感知的情况下进行拉伸处理。这里,助听器利用者(受听者)的时间分辨能力例如是25(ms),预先设定。
如图16所示,例如在口唇鼻音m的情况下,时间拉伸压缩调节单元503根据25(ms)/19.3(ms)的值,将辅音m的时间拉伸到1.3倍。此外,例如在有声齿龈爆破音d的情况下,时间拉伸压缩调节单元503根据25(ms)/4.1(ms)的值,将辅音d的时间拉伸到6.1倍。其中,在图16中记载为(33.5)的、例如硬腭半元音(拗音)y的情况下,表示是即使不拉伸也能够识别的音,因此,时间拉伸压缩调节单元503拉伸到1.0倍(不拉伸)。
这样,时间拉伸压缩调节单元503将助听器利用者(受听者)的听觉的时间分辨能力拉伸到除以由声音分析单元202分析出的辅音的种类的设定在最小时间分辨能力表中的最小时间分辨能力而得到的值的倍数。
另外,图16的最小时间分辨能力表表示的值不过是一例,也可以是其他值,只要为助听器利用者能够听出辅音的拉伸时间的倍率就可以。例如,过渡的时间性变化较慢的硬腭半元音(拗音)不怎么需要拉伸,但过渡的时间性变化较快的、图10A~图10C所示的无声爆破音(p、t、k)及图11~图11C所示的有声爆破音也可以设定为拉伸时间比例示的长。同样,预先设定的助听器利用者(受听者)的时间分辨能力的值也可以不是25ms,也可以是20ms或15ms,只要是作为普遍的助听器利用者能够设定的值就可以。
此外,与上述同样,在最小时间分辨能力表中表示的辅音的种类并不限于图16所示的辅音的种类。例如,如图15所示,也可以是将辅音的种类大致分类的每个组。除此以外,与上述拉伸率表的情况是同样,所以省略说明。
此外,上述拉伸率表及最小时间分辨能力表并不限于如上述那样由时间拉伸压缩调节单元503保持的情况,也可以是由装备在调节部501内的存储部保持的结构。这里,在图中表示时间拉伸压缩调节单元503保持拉伸率表及最小时间分辨能力表的情况下的时间拉伸压缩调节单元503的结构的一例。
图17及图18是表示时间拉伸压缩调节单元503的结构的一例的图。
图17所示的时间拉伸压缩调节单元503例如由拉伸率设定单元5031和拉伸率表存储单元5032构成。拉伸率表存储单元5032保持有上述拉伸率表。拉伸率设定单元5031基于助听器利用者(受听者)的时间分辨能力和辅音的种类,参照拉伸率表存储单元5032保持的拉伸率表,设定拉伸率。拉伸率设定单元5031将包含设定的拉伸率的调节量输出到控制单元504。
图18所示的时间拉伸压缩调节单元503例如由拉伸率设定单元5031和最小时间分辨能力表存储单元5033构成。最小时间分辨能力表存储单元5033保持有上述最小时间分辨能力表。拉伸率设定单元5031参照最小时间分辨能力表存储单元5033保持的最小时间分辨能力表,与助听器利用者(受听者)的时间分辨能力比较,在判断为不能感知的情况下,设定拉伸率。拉伸率设定单元5031将包括设定的拉伸率的调节量输出到控制单元504。
这样,时间拉伸压缩调节单元503能够基于拉伸率表或最小时间分辨能力表,根据辅音的种类设定进行拉伸及压缩的调节量,所以能够提高辅音识别率。
控制单元504将由时间拉伸压缩调节单元503设定的调节量与对应于声音分析单元502中的检测结果的控制信号一起输出到信号处理部204。即,控制单元504基于由声音分析单元502判断出的辅音的种类,进行该音的处理内容(拉伸、压缩等)等的判断。并且,通过将包括音的区间及处理内容等的信息的控制信号与由时间拉伸压缩调节单元503设定的调节量一起对信号处理部204发送,进行信号处理部204的控制。
以上,构成实施方式4的助听器。
这样,在本实施方式的助听器中,通过调节部501的声音分析单元502和时间拉伸压缩调节单元503能够根据辅音的种类调节拉伸时间和压缩时间,所以能够根据辅音的种类改善辅音的听取状况。
(变形例1)
接着,对上述调节部501的其他结构例进行说明。
图19是表示本发明的实施方式4的变形例1的助听器的结构的模块图。图19所示的助听器具备声音输入单元201、调节部701、控制单元704、信号处理部204、和声音输出单元207。调节部701由声音分析单元502、时间拉伸压缩调节单元703、和时间分辨能力设定单元302构成。对于与图1、图5或图9相同的结构要素使用相同的标号而省略说明。
图19所示的助听器相对于图9的助听器不同的是调节部701、控制单元704的结构。具体而言,图19所示的助听器的调节部701相对于图9的助听器的调节部501不同的是时间拉伸压缩调节单元703和时间分辨能力设定单元302的结构。
声音分析单元502如上所述,判断输入到声音输入单元201中的声音是在声响上看作无音的区间还是有音区间,在判断为有音区间的情况下判断有音区间内是辅音区间还是元音区间。进而,声音分析单元502在判断为辅音区间的情况下,判断辅音区间内的辅音的种类。具体而言,声音分析单元502基于各辅音的声响特征(波谱上的特征),根据初期的强度变化和称作过渡的短时间的共振峰频率变化的特征,判断(确定)辅音的种类。
另外,声音分析单元502也可以在判断出的辅音区间中判断是否出现了应进行拉伸的声响特征,在出现了应进行拉伸的声响特征的情况下设定并保持拉伸区间。
时间分辨能力设定单元302在助听器使用前设定了用来使助听器适应于利用者个人的时间分辨能力值。
时间拉伸压缩调节单元703参照拉伸率表及最小时间分辨能力表,基于由声音分析单元502判断出的辅音的种类和由时间分辨能力设定单元302设定的助听器利用者(受听者)的时间分辨能力值,设定调节量。时间拉伸压缩调节单元703将设定后的调节量输出给控制单元704。
通过以上那样的结构,时间拉伸压缩调节单元703能够根据输入声音的辅音的种类和助听器利用者的时间分辨能力两者,设定对声音的拉伸时间和压缩时间进行调节的调节量。由此,能够实现能够达到更适合于个人的听取的改善的助听器及助听处理方法。
以下,具体说明根据时间拉伸压缩调节单元703通过参照预先准备的拉伸率表来设定的调节量而进行辅音的拉伸处理的情况、和根据通过参照预先准备的最小时间分辨能力表来设定的调节量而进行辅音的拉伸处理的情况。
首先,对使用预先准备的拉伸率表的拉伸处理进行说明。
图20是表示拉伸率表的一例的图。图20所示的拉伸率表按各辅音的每个成分(种类)表示时间分辨能力与拉伸率的关系,对应于辅音的种类而表示应拉伸的倍率(调节量)。
此外,图21是表示时间拉伸压缩调节单元703的结构的一例的模块图。
图21所示的时间拉伸压缩调节单元703例如由拉伸率设定单元7031和拉伸率表存储单元7032构成。拉伸率表存储单元7032保持有图20所示的拉伸率表。拉伸率设定单元7031基于由时间分辨能力设定单元302设定的助听器利用者(受听者)的时间分辨能力和辅音的种类,参照拉伸率表存储单元7032保持的拉伸率表,设定拉伸率。拉伸率设定单元7031将包含设定的拉伸率的调节量输出到控制单元704。
例如,假设由声音分析单元502判断出的辅音的种类是有音口唇爆破音b,并且由时间分辨能力设定单元302设定的助听器利用者(受听者)的时间分辨能力值是15ms。在此情况下,时间拉伸压缩调节单元703参照图20所示的拉伸率表,设定将判断为辅音b的辅音区间拉伸到3.4倍的调节量。此外,例如假设由声音分析单元502判断出的辅音的种类是声门摩擦音h,并且由时间分辨能力设定单元302设定的助听器利用者(受听者)的时间分辨能力值是15ms。。在此情况下,时间拉伸压缩调节单元703参照图20所示的拉伸率表,设定将判断为辅音h的辅音区间拉伸到1.4倍的调节量。其他也是同样的,所以省略说明。
另外,图20的拉伸率表表示的值不过是一例,也可以是其他的值,只要为助听器利用者能够听出辅音的拉伸时间的倍率就可以。例如,过渡的时间性变化较慢的硬腭半元音(拗音)不怎么需要拉伸,但过渡的时间性变化较快的、图10A~图10C所示的无声爆破音(p、t、k)及图11A~图11C所示的有声爆破音也可以设定为拉伸时间比例示的长。另一方面,在通过使初期部的时间较短的辅音、例如无声爆破音的拉伸时间变长、而发生与初期部的时间较长的辅音、例如有声爆破音的错听的情况下,也可以进行设定以使无声爆破音的拉伸时间不超过有声爆破音的拉伸时间、或者使有声爆破音的拉伸时间更长。
控制单元704将由时间拉伸压缩调节单元703设定的调节量与对应于声音分析单元502中的检测结果的控制信号一起输出到信号处理部204。即,控制单元304通过将控制信号与调节量一起对信号处理部204发送,进行信号处理部204的控制。
接着,对以上那样构成的助听器的动作例进行说明。
图22是表示本实施方式4的变形例1的助听器的动作例的流程图。另外,步骤S401~步骤S411的动作与图4的步骤S401~S411分别相同,所以省略说明。
在步骤S4040中,声音分析单元502判断在判断(检测)出的辅音区间是否出现了应进行拉伸的声响的特征(S4041)。声音分析单元502如果判断为出现了应进行拉伸的声响特征(S4041的是的情况),则前进到设定拉伸区间的步骤(S4042)。如果不是那样(S4041的否的情况),则结束处理。
接着,如果由声音分析单元502判断(检测)出的辅音区间设定为应拉伸处理的拉伸区间(S4042),则时间拉伸压缩调节单元703参照如图20所示的拉伸率表。接着,时间拉伸压缩调节单元703根据由声音分析单元502判断(检测)出的输入声音的辅音的种类和由时间分辨能力设定单元302设定的助听器利用者的时间分辨能力两者,设定对拉伸区间的拉伸率和时间、以及对应于辅音拉伸时间而将元音、无音区间压缩的时间进行调节的调节量(S4043)。
接着,控制单元704将由时间拉伸压缩调节单元703设定的调节量与对应于声音分析单元502的检测结果的控制信号一起输出到信号处理部204。信号处理部204按照从控制单元704输出的调节量和控制信号,执行拉伸处理(S4044)。这里,所谓拉伸处理,是指例如将鼻音(m、n)、有声爆破音(b、d、g)的过渡(共振峰迁移部分)进行拉伸等、仅将时间性变化成为线索的部分(辅音)进行拉伸处理以便能够感知其变化。此外,例如是将爆破、破擦部分进行拉伸等、将发音的持续时间较短的部分(辅音)进行拉伸处理以便能够感知该成分的处理。即,对爆破等的初期(开头)和接着初期的过渡部分(共振峰迁移)实施拉伸处理。
由此,进行使用了预先准备的拉伸率表的拉伸处理。
接着,对使用了预先准备的图16所示的最小时间分辨能力表的拉伸处理进行说明。
图23是表示时间拉伸压缩调节单元703的结构的另一例的模块图。
图23所示的时间拉伸压缩调节单元703例如由拉伸率设定单元7031和最小时间分辨能力表存储单元7033构成。最小时间分辨能力表存储单元7033保持有图16所示的最小时间分辨能力表。拉伸率设定单元7031基于由时间分辨能力设定单元302设定的助听器利用者(受听者)的时间分辨能力和辅音的种类,参照最小时间分辨能力表存储单元7033保持的最小时间分辨能力表,设定拉伸率。拉伸率设定单元7031将包含设定的拉伸率的调节量输出给控制单元704。
例如,假设由声音分析单元502判断出的辅音的种类是口唇鼻音m、并且由时间分辨能力设定单元302设定的助听器利用者(受听者)的时间分辨能力值是25ms。在此情况下,时间拉伸压缩调节单元703参照图16所示的最小时间分辨能力表,根据25(ms)/19.3(ms)的值,设定将判断为辅音m的辅音区间拉伸到1.3倍的调节量。此外,例如假设由声音分析单元502判断出的辅音的种类是有音齿龈爆破音d、并且由时间分辨能力设定单元302设定的助听器利用者(受听者)的时间分辨能力值是25ms。在此情况下,时间拉伸压缩调节单元703参照图16所示的最小时间分辨能力表,根据25(ms)/4.1(ms)的值,设定将判断为辅音d的辅音区间拉伸到6.1倍的调节量。其他也是同样的,所以省略说明。
另外,图16所示的最小时间分辨能力表表示的值不过是一例,也可以是其他的值,只要为助听器利用者能够听出辅音的拉伸时间的倍率就可以。例如,过渡的时间性变化较慢的硬腭半元音(拗音)不怎么需要拉伸,但过渡的时间性变化较快的、图10A~图10C所示的无声爆破音(p、t、k)及图11A~图11C所示的有声爆破音也可以设定为拉伸时间比例示的长。另一方面,在通过使初期部的时间较短的辅音例如无声爆破音的拉伸时间变长、而发生与初期部的时间较长的辅音例如有声爆破音的错听的情况下,也可以进行设定以使无声爆破音的拉伸时间不超过有声爆破音的拉伸时间、或者使有声爆破音的拉伸时间更长。
控制单元704将由时间拉伸压缩调节单元703设定的调节量与对应于声音分析单元502的检测结果的控制信号一起输出到信号处理部204中。即,控制单元304通过将控制信号和调节量一起对信号处理部204发送,进行信号处理部204的控制。
接着对以上那样构成的助听器的动作例进行说明。
图24是表示本实施方式4的变形例1的助听器的另一动作例的流程图。另外,步骤S401~步骤S411的动作与图4的步骤S401~S411分别相同,所以省略说明。此外,步骤S4041和步骤S4012的动作与图22的步骤S4041~S4012分别相同,所以省略说明。
在步骤S4047中,时间拉伸压缩调节单元703参照如图16所示的最小时间分辨能力表。并且,时间拉伸压缩调节单元703基于由声音分析单元502判断(检测)出的输入声音的辅音的种类和由时间分辨能力设定单元302设定的助听器利用者的时间分辨能力两者,取得最小时间分辨能力(S4047)。接着,时间拉伸压缩调节单元703设定对拉伸区间的拉伸率和时间、以及对应于辅音拉伸时间将元音、无音区间压缩的时间进行调节的调节量。
接着,控制单元704将由时间拉伸压缩调节单元703设定的调节量与对应于声音分析单元502的检测结果的控制信号一起输出到信号处理部204中。信号处理部204按照从控制单元704输出的调节量和控制信号执行拉伸处理(S4047)。这里的拉伸处理与上述同样,对爆破等的初期(开头)和接着初期的过渡部分(共振峰迁移)进行。
如以上,进行使用了预先准备的最小时间分辨能力表的拉伸处理。
以上那样构成的助听器根据助听器利用者(受听者)的时间分辨能力的劣化,对每个辅音进行拉伸处理。该拉伸处理是基于时间分辨能力的拉伸处理,使用预先准备的拉伸率表或最小时间分辨能力表等来进行。具体而言,例如将鼻音(m、n)、有声爆破音(b、d、g)的过渡(共振峰迁移部分)进行拉伸等,仅将时间性变化成为线索的部分(辅音)进行拉伸处理以便能够感知其变化。此外,例如将爆破、破擦部分进行拉伸等,将发音的持续时间较短的部分(辅音)进行拉伸处理以便能够感知该成分。换言之,对爆破等的初期(开头)和接着初期的过渡部分(共振峰迁移)进行拉伸处理。
另外,助听器利用者(受听者)的时间分辨能力的劣化程度如上所述,不仅因辅音的种类而不同,还因语速而不同。
因此,也可以是,声音分析单元502例如通过测量辅音或元音出现的时间音调等而分析语速,保持语速信息,时间拉伸压缩调节单元703还考虑保持在声音分析单元502中的语速信息来设定调节量。具体而言,时间拉伸压缩调节单元703也可以对标准的语速的声音设定拉伸率表或最小时间分辨能力表,例如在语速比标准快1.2倍的情况下,将拉伸率表的值设为1.2倍或将最小分辨能力表的值设为1.2分之一等,根据受听的声音的语速来调节表。
此外,在上述拉伸处理中,将助听器利用者(受听者)的时间分辨能力的值预先知道(预先准备)、将该助听器利用者(受听者)的时间分辨能力的值设定到时间分辨能力设定单元302中的情况作为典型例进行了说明,但并不限于此。例如,也可以在有关本发明的助听器的使用开始前,通过调节装置等推测(测量)助听器利用者(受听者)的时间分辨能力,并将由调节装置等推测(测量)的助听器利用者(受听者)的时间分辨能力设定到时间分辨能力设定单元302中。该调节装置既可以装备在时间分辨能力设定单元302中,也可以另外准备在外部。
这里,例示通过调节装置等推测助听器利用者(受听者)的时间分辨能力的方法。
该调节装置取得测量了助听器利用者(受听者)将辅音怎样听错的错听模式,根据所取得的错听模式推测助听器利用者(受听者)的时间分辨能力。例如,在助听器利用者(受听者)弄错了辅音k、正确回答辅音m的情况下,调节装置利用图16所示的最小时间分辨能力表,根据辅音k的最小时间分辨能力17.6ms和辅音m的最小时间分辨能力19.3ms,推测该助听器利用者(受听者)的时间分辨能力为18~19ms左右。这样,调节装置也可以根据助听器利用者(受听者)的错听模式来推测助听器利用者(受听者)的时间分辨能力。另外,错听模式的测量只要使用一般的语音清楚度检查(57S、57S)的结果、或使用容易发生错听(易混淆)的发出的声音以知道辨别的边界线来进行就可以。
此外,该调节装置不仅可以根据助听器利用者(受听者)的错听模式来推测助听器利用者(受听者)的时间分辨能力,还可以指定容易发生错听的辅音或辅音对,通知给时间分辨能力设定单元302。在此情况下,时间拉伸压缩调节单元703设定对容易发生错听的辅音或辅音的对的调节量以使容易发生错听的辅音或辅音对的声响特征变得清楚,并输出给控制单元。另外,时间拉伸压缩调节单元703也可以通过再调节关于容易发生错听的辅音或辅音对的拉伸率表或最小时间分辨能力表的值等来应对。并且,信号处理部204对容易发生错听的辅音或辅音对进行拉伸处理以使声响特征变得清楚。例如,在鼻音(m、n)间或有声爆破音(b、d、g)之间发生错听的情况下,设定拉伸区间及拉伸率以便能够感知它们的过渡部分的差异。此外,在口唇音(p、b、m、w)间、齿龈音(t、d、s、z、ts、n)间发生错听的情况下,设定拉伸区间及拉伸率,以便能够感知初期(开头)的爆破音、破擦音等。这样,助听器也可以对容易发生错听的辅音或辅音对进行拉伸处理以使声响特征变得清楚。
(变形例2)
助听器利用者(受听者)的时间分辨能力的劣化程度不仅因辅音的种类而不同,还因声音的大小(声压)而不同。因此,在变形例2中,作为考虑到声音的大小的情况的结构例,对与上述变形例1中的调节部501不同的结构例进行说明。
图25是表示本发明的实施方式4的变形例2的助听器的结构的模块图。图25所示的助听器具备声音输入单元201、调节部801、控制单元804、信号处理部204、和声音输出单元207。调节部801由声音分析单元502、时间拉伸压缩调节单元803、和声压计算单元402构成。对于与图1、图5或图9相同的结构要素使用相同的标号而省略说明。
时间拉伸压缩调节单元803参照拉伸率表或最小时间分辨能力表,基于由声音分析单元502判断出的辅音的种类和由声压计算单元402计算出的声压(值),设定调节量。例如,时间拉伸压缩调节单元803在由声压计算单元402计算出的声压比规定值大的情况下,在由声音分析单元502判断出的辅音的种类中设定调节量,以成为从设定在拉伸率表中的拉伸率减去规定值量的值。此外,时间拉伸压缩调节单元803在由声压计算单元402计算出的声压是规定值以下的情况下,在由声音分析单元502判断出的辅音的种类中设定调节量,以成为对设定在拉伸率表中的拉伸率加上规定值量的值。时间拉伸压缩调节单元803将设定的调节量输出给控制单元804。
另外,声压计算单元402也可以与上述图8同样,仅对由声音分析单元502判断为有音区间的区间进行计算处理。
控制单元804将由时间拉伸压缩调节单元803设定的调节量与对应于声音分析单元502的检测结果的控制信号一起输出到信号处理部204中。即,控制单元804基于由声音分析单元502分析的声音的种类(元音、辅音、其他等),进行该声音的处理内容(拉伸、压缩等)等的判断。接着,通过将包括声音的区间及处理内容等的信息的控制信号与由时间拉伸压缩调节单元303设定的调节量一起发送给信号处理部204,进行信号处理部204的控制。
这样,能够参照拉伸率表及最小时间分辨能力表,根据输入声音的辅音的种类和输入声音的声压两者,调节声音的拉伸时间和压缩时间,能够实现适合于个人的听取的改善、和防止声音的不适当的拉伸和压缩带来的声音劣化的助听器及助听处理方法。
(变形例3)
进而,对调节部501的另一结构例进行说明。
图26是表示本发明的实施方式4的变形例3的助听器的结构的模块图。图26所示的助听器由声音输入单元201、调节部901、控制单元904、信号处理部204、和声音输出单元207。调节部901由声音分析单元502、声压计算单元402、时间分辨能力设定单元302和时间拉伸压缩调节单元903构成。对于与图1、图5或图9相同的结构要素使用相同的标号而省略说明。
时间拉伸压缩调节单元903参照拉伸率表和最小时间分辨能力表,基于由声音分析单元502判断出的辅音的种类、由声压计算单元402计算出的声压值、和由时间分辨能力设定单元302设定的时间分辨能力值,设定调节量。时间拉伸压缩调节单元903将设定的调节量输出给控制单元904。另外,在此情况下,也可以如上述图8那样,声压计算单元402仅对由声音分析单元202判断为有音区间的区间进行计算处理。
控制单元904将由时间拉伸压缩调节单元903设定的调节量与对应于声音分析单元202的检测结果的控制信号一起输出给信号处理部204。
这样,能够参照拉伸率表及最小时间分辨能力表,根据输入声音的辅音的种类、输入声音的声压、利用者的时间分辨能力,调节声音的拉伸时间和压缩时间,能够实现更适合于个人的听取的改善、和防止声音的不适当的拉伸和压缩带来的声音劣化的助听器及助听处理方法。
如以上,根据本发明,通过分析输入声音并检测辅音区间、拉伸辅音区间的时间,能够对因时间分辨能力的下降而难以听取辅音的听力衰退者给予足够感知辅音的时间。由此,能够改善辅音的漏听及误识别、提高辅音识别度及声音识别度。
另外,仅通过拉伸辅音区间的时间,会在视觉信息与听觉信息中发生偏差,发生不能进行视觉的听觉辅助的问题。特别是,对于难以听取的辅音,如果在视觉信息与听觉信息之间发生延迟,则听取变得更困难。因此,在有关本发明的助听器及助听处理方法中,进行使以后的辅音的发生时间统一的处理,以使得在视觉信息与听觉信息之间不发生延迟。即,在后接于辅音区间的元音区间或在辅音区间之后出现的在声响上看作无音的区间、或者元音区间与无音区间的两者中,删除拉伸了辅音区间的时间量,从而将后接于辅音区间的区间的时间进行压缩。由此,能够使得不发生视觉信息与听觉信息的时间的偏差。另外,该时间压缩并不限于后接于拉伸了时间的辅音区间的元音区间,也可以对其他元音区间进行,也可以对噪声等的无意义区间进行。
此外,在有关本发明的助听器及助听处理方法中,通过由表等保持听力衰退者的时间分辨能力的下降程度的数据,根据听力衰退者的时间分辨能力的下降程度来调节辅音区间的拉伸时间。由此,能够进行适合于听力衰退者个人的辅音的听取改善。
进而,在有关本发明的助听器及助听处理方法中,根据输入声音的声压来调节辅音区间的拉伸时间。由此,能够进行对应于声压的辅音的听取改善。
进而,在有关本发明的助听器及助听处理方法中,基于辅音的声响特征即初始的音信号的强度变化、和接着初期的过渡(共振峰迁移部分),判断辅音的种类,并根据辅音的种类,例如使用PSOLA(基音同步叠加)法、或使用反复复制共振峰迁移部分的波形的反复处理等来调节拉伸处理的辅音区间的拉伸时间。由此,能够进行对应于辅音的种类的辅音的听取改善。另外,所谓对应于辅音的种类,不仅可以如上述那样对应于各辅音的种类,也可以对应于将辅音的种类大致分类的组。例如,也可以将辅音的种类大致分类为有声爆破音的组、无声爆破音的组、无声摩擦音的组、有声摩擦音的组、无声破擦音的组以及鼻音的组。此外,例如也可以将辅音的种类大致分类为口唇音的组、齿龈音的组等。并且,只要使用各组内的代表值(例如平均值、最大值、最小值等)设定拉伸率就可以。该各组内的代表值既可以在预先准备后设定,也可以根据各组内的辅音各自的拉伸率的值设定。
另外,也可以考虑通过对每个辅音单独设定拉伸率、反而发生错听的情况。在此情况下,只要进行校正(修正)以对发生错听的辅音或辅音对设定共通的拉伸率就可以。
此外,在通过本发明的拉伸处理反而发生辅音的错听的情况下,也可以对助听器的使用初期容许错听。这是因为,通过本发明的拉伸处理,如果助听器利用者(受听者)能够感知(区分)各辅音的声响差异,则通过进行学习以正确地识别该错听所表示的辅音,也能够逐渐消除错听。这样,也可以依赖于助听器利用者(受听者)的再学习而容许错听。
以上,根据本发明,能够实现使时间变化剧烈、持续时间较短的辅音的识别率提高的助听器及助听处理方法。
另外,在上述本发明的助听器及助听处理方法中,也可以做成不进行到辅音整体的分析、而容易且高速地检测应拉伸的声音的特征、开始辅音区间的时间拉伸的结构。即,也可以为如下结构:如果检测出例如表示爆破、摩擦的开头部分(急剧的频率成分的变化)或过渡部分(共振峰成分的变化:共振峰迁移)等表示辅音的特征性变化、则不等待辅音整体的分析而开始辅音区间的时间拉伸。在此情况下,不仅能够减少上述辅音区间的判断延迟,还起到安装变得简单的效果。
此外,也可以不使用声音的波谱上的特征(共振峰等)、而使用将声音在时间轴上分析的情况下的特征进行辅音或元音的判断。
以上,基于上述实施方式说明了本发明,但本发明当然并不限定于上述实施方式。以下这样的情况也包含在本发明中。
构成上述各装置的结构要素的一部分或全部也可以由1个系统LSI(Large Scale Integration:大规模集成电路)构成。系统LSI是将多个结构部集成在1个芯片上制造的超多功能LSI,具体而言,是包括微处理器、ROM、RAM等构成的计算机系统。在上述RAM中存储有计算机程序。通过上述微处理器按照上述计算机程序动作,系统LSI实现其功能。
此外,构成上述各装置的结构要素的一部分或全部也可以由相对于各装置可拆装的IC卡或单体的模块构成。上述IC卡或上述模块是由微处理器、ROM、RAM等构成的计算机系统。上述IC卡或上述模块也可以包括上述超多功能LSI。通过微处理器按照计算机程序动作,上述IC卡或上述模块实现其功能。该IC卡或该模块也可以具有防篡改性。
此外,本发明也可以是上述所示的方法。此外,也可以是通过计算机实现这些方法的计算机程序,也可以是由上述计算机程序构成的数字信号。
此外,本发明也可以是将上述计算机程序或上述数字信号记录到计算机可读取的记录介质、例如软盘、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray Disc)、半导体存储器等中的产品。此外,也可以是记录在这些记录介质中的上述数字信号。
此外,本发明也可以是将上述计算机程序或上述数字信号经由电气通信线路、无线或有线通信线路、以因特网为代表的网络、数据广播等传送的结构。
此外,本发明也可以是具备微处理器和存储器的计算机系统,上述存储器存储有上述计算机程序,上述微处理器按照上述计算机程序动作。
此外,也可以通过将上述程序或上述数字信号记录到上述记录介质中并移送、或者通过将上述程序或上述数字信号经由上述网络等移送,由独立的其他计算机系统实施。
此外,也可以将上述实施方式及上述变形例分别进行组合。
工业实用性
本发明能够在助听器及助听处理方法中使用,特别是在提高包括老年性听力衰退的、时间分辨能力下降的感音性听力衰退者的辅音的听取、应用到助听器及声音通信设备、声音再现装置中的情况下,能够在使用了可提高声音清晰度的声响处理技术的助听器及助听处理方法中使用。
符号说明
201声音输入单元
202、502声音分析单元
203、304、404、504、604、704、804、904控制单元
204信号处理部
205、305时间拉伸单元
206、306时间压缩单元
207声音输出单元
301、401、501、601、701、801、901调节部
302时间分辨能力设定单元
303、403、503、603、703、803、903时间拉伸压缩调节单元
402声压计算单元
5031、7031拉伸率设定单元
5032、7032拉伸率表存储单元
5033、7033最小时间分辨能力表存储单元
权利要求书(按照条约第19条的修改)
1.(修改后)一种助听器,具备:
声音输入单元,被输入外部声音信号;
声音分析单元,检测输入到上述声音输入单元中的声音信号的有音区间和声响上看作无音的区间,在检测出的有音区间内检测辅音区间和元音区间;
信号处理单元,将由上述声音分析单元检测出的上述辅音区间在时间上进行拉伸,并将由上述声音分析单元检测出的上述元音区间及上述声响上看作无音的区间的至少一方在时间上进行压缩;以及
调节单元,根据时间分辨能力信息,对拉伸上述辅音区间的时间进行调节,上述时间分辨能力信息表示利用上述助听器的利用者的听觉的时间分辨能力;
上述信号处理单元将由上述声音分析单元检测出的上述辅音区间拉伸上述调节单元调节的时间。
2.如权利要求1所述的助听器,其中,
上述信号处理单元将被拉伸的上述辅音区间的时间的一部分,以音调单位从上述元音区间删除信号,从而将上述元音区间在时间上进行压缩,并将被拉伸的上述辅音区间的时间的剩余部分,删除上述声响上看作无音的区间的信号,从而将上述声响上看作无音的区间进行压缩。
3.(修改后)如权利要求1或2所述的助听器,其中,
上述调节单元在上述时间分辨能力信息表示利用者的听觉的时间分辨能力的下降程度大的情况下,与上述时间分辨能力信息表示利用者的听觉的时间分辨能力的下降程度小的情况相比,将拉伸上述辅音区间的时间调节得长。
4.(修改后)如权利要求1或2所述的助听器,其中,
上述助听器还计算上述声音信号的声压,并根据计算出的上述声压,对拉伸上述辅音区间的时间进行调节;
上述信号处理单元将由上述声音分析单元检测出的上述辅音区间拉伸上述调节单元调节的时间。
5.(修改后)如权利要求4所述的助听器,其中,
上述调节单元在上述计算出的上述声压比规定值大的情况下,与上述计算出的上述声压为规定值以下的情况相比,将拉伸上述辅音区间的时间调节得短。
6.(修改后)如权利要求1或2所述的助听器,其中,
上述声音分析单元在上述辅音区间内对辅音的种类进行分析;
上述调节单元根据由上述声音分析单元分析出的辅音的种类,对拉伸上述辅音区间的时间进行调节;
上述信号处理单元将由上述声音分析单元检测出的上述辅音区间拉伸上述调节单元调节的时间。
7.(修改后)如权利要求6所述的助听器,其中,
上述调节单元保持对上述辅音的每个种类设定了拉伸率的拉伸率表,并通过参照上述拉伸率表,对上述辅音的每个种类调节拉伸上述辅音区间的时间。
8.(修改后)如权利要求7所述的助听器,其中,
在上述拉伸率表中,设定有上述辅音的种类与时间分辨能力信息的每个组合的拉伸率,上述时间分辨能力信息表示利用上述助听器的利用者的听觉的时间分辨能力;
上述调节单元通过参照上述拉伸率表,根据上述时间分辨能力信息,对上述辅音的每个种类调节将上述辅音区间拉伸的时间。
9.(修改后)如权利要求6所述的助听器,其中,
上述辅音的种类包括将辅音按照共通的特征来分类的组的种类。
10.(修改后)如权利要求7所述的助听器,其中,
上述调节单元还计算上述声音信号的声压;
在计算出的上述声压比规定值大的情况下,使用从由上述声音分析单元分析出的辅音的种类的在上述拉伸率表中设定的拉伸率中减去规定值量的值来进行调节,以拉伸上述辅音区间,在计算出的上述声压为规定值以下的情况下,使用对由上述声音分析单元分析出的辅音的种类的上述拉伸率附加了规定值量的值来进行调节,以拉伸上述辅音区间。
11.(修改后)如权利要求1所述的助听器,其中,
上述声音分析单元在检测出的上述有音区间内检测出辅音的声响特征的情况下,设为检测出了上述辅音区间;
上述信号处理单元在上述声音分析单元检测后接于该辅音区间的上述元音区间之前,开始被设为由上述声音分析单元检测出的上述辅音区间的拉伸。
12.(修改后)如权利要求6所述的助听器,其中,
上述调节单元还保持最小时间分辨能力表,并通过参照上述最小时间分辨能力表,对上述辅音的每个种类调节将上述辅音区间拉伸的时间,上述最小时间分辨能力表对上述辅音的每个种类设定了表示可辨别的最低限度的时间分辨能力的最小时间分辨能力。
13.(修改后)如权利要求12所述的助听器,其中,
上述调节单元对拉伸上述辅音区间的时间进行调节,以使其成为将利用上述助听器的利用者的听觉的时间分辨能力除以由上述声音分析单元分析出的辅音的种类的在上述最小时间分辨能力表中设定的最小时间分辨能力而得到的值倍的时间。
14.(修改后)一种助听处理方法,包括:
声音输入步骤,输入外部声音信号;
声音分析步骤,检测在上述声音输入步骤中输入的声音信号的有音区间和声响上看作无音的区间,在检测出的有音区间内检测辅音区间和元音区间;
信号处理步骤,将在上述声音分析步骤中检测出的上述辅音区间在时间上拉伸,并将在上述声音分析步骤中检测出的上述元音区间及上述声响上看作无音的区间的至少一方在时间上进行压缩;以及
调节步骤,根据时间分辨能力信息,对拉伸上述辅音区间的时间进行调节,上述时间分辨能力信息表示利用上述助听处理方法的利用者的听觉的时间分辨能力;
在上述信号处理步骤中,将在上述声音分析步骤中检测出的上述辅音区间拉伸在上述调节步骤中调节的时间。
15.(删除)

Claims (15)

1.一种助听器,具备:
声音输入单元,被输入外部声音信号;
声音分析单元,检测输入到上述声音输入单元中的声音信号的有音区间和声响上看作无音的区间,在检测出的有音区间内检测辅音区间和元音区间;以及
信号处理单元,将由上述声音分析单元检测出的上述辅音区间在时间上进行拉伸,并将由上述声音分析单元检测出的上述元音区间及上述声响上看作无音的区间的至少一方在时间上进行压缩。
2.如权利要求1所述的助听器,其中,
上述信号处理单元将被拉伸的上述辅音区间的时间的一部分,以音调单位从上述元音区间删除信号,从而将上述元音区间在时间上进行压缩,并将被拉伸的上述辅音区间的时间的剩余部分,删除上述声响上看作无音的区间的信号,从而将上述声响上看作无音的区间进行压缩。
3.如权利要求1或2所述的助听器,其中,
上述助听器还具备调节单元,该调节单元根据时间分辨能力信息,对拉伸上述辅音区间的时间进行调节,上述时间分辨能力信息表示利用上述助听器的利用者的听觉的时间分辨能力;
上述信号处理单元将由上述声音分析单元检测出的上述辅音区间拉伸上述调节单元调节的时间。
4.如权利要求3所述的助听器,其中,
上述调节单元在上述时间分辨能力信息表示利用者的听觉的时间分辨能力的下降程度大的情况下,与上述时间分辨能力信息表示利用者的听觉的时间分辨能力的下降程度小的情况相比,将拉伸上述辅音区间的时间调节得长。
5.如权利要求1或2所述的助听器,其中,
上述助听器还具备调节单元,该调节单元计算上述声音信号的声压,并根据计算出的上述声压,对拉伸上述辅音区间的时间进行调节;
上述信号处理单元将由上述声音分析单元检测出的上述辅音区间拉伸上述调节单元调节的时间。
6.如权利要求5所述的助听器,其中,
上述调节单元在上述计算出的上述声压比规定值大的情况下,与上述计算出的上述声压为规定值以下的情况相比,将拉伸上述辅音区间的时间调节得短。
7.如权利要求1或2所述的助听器,其中,
上述声音分析单元在上述辅音区间内对辅音的种类进行分析;
上述助听器还具备调节单元,该调节单元根据由上述声音分析单元分析出的辅音的种类,对拉伸上述辅音区间的时间进行调节;
上述信号处理单元将由上述声音分析单元检测出的上述辅音区间拉伸上述调节单元调节的时间。
8.如权利要求7所述的助听器,其中,
上述调节单元保持对上述辅音的每个种类设定了拉伸率的拉伸率表,并通过参照上述拉伸率表,对上述辅音的每个种类调节拉伸上述辅音区间的时间。
9.如权利要求8所述的助听器,其中,
在上述拉伸率表中,设定有上述辅音的种类与时间分辨能力信息的每个组合的拉伸率,上述时间分辨能力信息表示利用上述助听器的利用者的听觉的时间分辨能力;
上述调节单元通过参照上述拉伸率表,根据上述时间分辨能力信息,对上述辅音的每个种类调节将上述辅音区间拉伸的时间。
10.如权利要求7所述的助听器,其中,
上述辅音的种类包括将辅音按照共通的特征来分类的组的种类。
11.如权利要求7所述的助听器,其中,
上述调节单元还计算上述声音信号的声压;
在计算出的上述声压比规定值大的情况下,使用从由上述声音分析单元分析出的辅音的种类的在上述拉伸率表中设定的拉伸率中减去规定值量的值来进行调节,以拉伸上述辅音区间,在计算出的上述声压为规定值以下的情况下,使用对由上述声音分析单元分析出的辅音的种类的上述拉伸率附加了规定值量的值来进行调节,以拉伸上述辅音区间。
12.如权利要求1所述的助听器,其中,
上述声音分析单元在检测出的上述有音区间内检测出辅音的声响特征的情况下,设为检测出了上述辅音区间;
上述信号处理单元在上述声音分析单元检测后接于该辅音区间的上述元音区间之前,开始被设为由上述声音分析单元检测出的上述辅音区间的拉伸。
13.如权利要求7所述的助听器,其中,
上述调节单元保持最小时间分辨能力表,并通过参照上述最小时间分辨能力表,对上述辅音的每个种类调节将上述辅音区间拉伸的时间,上述最小时间分辨能力表对上述辅音的每个种类设定了表示可辨别的最低限度的时间分辨能力的最小时间分辨能力。
14.如权利要求13所述的助听器,其中,
上述调节单元对拉伸上述辅音区间的时间进行调节,以使其成为将利用上述助听器的利用者的听觉的时间分辨能力除以由上述声音分析单元分析出的辅音的种类的在上述最小时间分辨能力表中设定的最小时间分辨能力而得到的值倍的时间。
15.一种助听处理方法,包括:
声音输入步骤,输入外部声音信号;
声音分析步骤,检测在上述声音输入步骤中输入的声音信号的有音区间和声响上看作无音的区间,在检测出的有音区间内检测辅音区间和元音区间;以及
信号处理步骤,将在上述声音分析步骤中检测出的上述辅音区间在时间上拉伸,并将在上述声音分析步骤中检测出的上述元音区间及上述声响上看作无音的区间的至少一方在时间上进行压缩。
CN2010800010766A 2009-01-29 2010-01-28 助听器及助听处理方法 Expired - Fee Related CN101939784B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009-017549 2009-01-29
JP2009017549 2009-01-29
PCT/JP2010/000485 WO2010087171A1 (ja) 2009-01-29 2010-01-28 補聴器および補聴処理方法

Publications (2)

Publication Number Publication Date
CN101939784A true CN101939784A (zh) 2011-01-05
CN101939784B CN101939784B (zh) 2012-11-21

Family

ID=42395435

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010800010766A Expired - Fee Related CN101939784B (zh) 2009-01-29 2010-01-28 助听器及助听处理方法

Country Status (5)

Country Link
US (1) US8374877B2 (zh)
EP (1) EP2383732B1 (zh)
JP (2) JPWO2010087171A1 (zh)
CN (1) CN101939784B (zh)
WO (1) WO2010087171A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102222507A (zh) * 2011-06-07 2011-10-19 中国科学院声学研究所 一种适用于汉语语言的听力损失补偿方法及设备
CN103039092A (zh) * 2011-07-08 2013-04-10 松下电器产业株式会社 助听适合度判断装置及助听适合度判断方法
CN103782340A (zh) * 2011-08-31 2014-05-07 阿尔卡特朗讯公司 用于对数字声音信号进行减速的方法和设备
CN104244155A (zh) * 2013-06-07 2014-12-24 杨国屏 处理声音段的方法及助听器
CN105357619A (zh) * 2015-12-11 2016-02-24 广州大学 一种数字助听器频率分辨力增强方法
CN107112026A (zh) * 2014-10-20 2017-08-29 奥迪马科斯公司 用于智能语音识别和处理的系统、方法和装置
CN110097874A (zh) * 2019-05-16 2019-08-06 上海流利说信息技术有限公司 一种发音纠正方法、装置、设备以及存储介质
CN111653281A (zh) * 2019-02-05 2020-09-11 西万拓私人有限公司 用于对助听器的音频信号进行个性化信号处理的方法

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2578153B1 (en) * 2010-06-04 2015-05-13 Panasonic Corporation Audiometer and method thereof
US20120197643A1 (en) * 2011-01-27 2012-08-02 General Motors Llc Mapping obstruent speech energy to lower frequencies
DE102011006515A1 (de) 2011-03-31 2012-10-04 Siemens Medical Instruments Pte. Ltd. Verfahren zur Verbesserung der Sprachverständlichkeit mit einem Hörhilfegerät sowie Hörhilfegerät
DE102011006511B4 (de) * 2011-03-31 2016-07-14 Sivantos Pte. Ltd. Hörhilfegerät sowie Verfahren zum Betrieb eines Hörhilfegeräts
WO2013009672A1 (en) 2011-07-08 2013-01-17 R2 Wellness, Llc Audio input device
US9286384B2 (en) 2011-09-21 2016-03-15 Sonos, Inc. Methods and systems to share media
EP2864983B1 (en) 2012-06-20 2018-02-21 Widex A/S Method of sound processing in a hearing aid and a hearing aid
JP6296219B2 (ja) 2012-07-13 2018-03-20 パナソニックIpマネジメント株式会社 補聴装置
TWI576824B (zh) * 2013-05-30 2017-04-01 元鼎音訊股份有限公司 處理聲音段之方法及其電腦程式產品及助聽器
CN103813253B (zh) * 2014-03-11 2017-11-21 深圳市微纳集成电路与系统应用研究院 助听器声音处理方法
US10390147B2 (en) * 2015-02-24 2019-08-20 Gn Hearing A/S Frequency mapping for hearing devices
US10631113B2 (en) * 2015-11-19 2020-04-21 Intel Corporation Mobile device based techniques for detection and prevention of hearing loss
US10098082B2 (en) * 2015-12-16 2018-10-09 Sonos, Inc. Synchronization of content between networked devices
EP3414923A1 (en) 2016-02-11 2018-12-19 Widex A/S Method of fitting a hearing aid system capable of detecting auditory neuro-synaptopathy, a hearing aid fitting system and a computerized device
EP3291580A1 (en) 2016-08-29 2018-03-07 Oticon A/s Hearing aid device with speech control functionality
US9967689B1 (en) 2016-09-29 2018-05-08 Sonos, Inc. Conditional content enhancement
EP3327723A1 (en) * 2016-11-24 2018-05-30 Listen Up Technologies Ltd Method for slowing down a speech in an input media content
WO2019099699A1 (en) * 2017-11-15 2019-05-23 Starkey Laboratories, Inc. Interactive system for hearing devices
JP2021026098A (ja) * 2019-08-02 2021-02-22 株式会社三菱ケミカルホールディングス コミュニケーション支援装置
EP4287655A1 (en) * 2022-06-01 2023-12-06 Sivantos Pte. Ltd. Method of fitting a hearing device

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5870400A (ja) 1981-10-21 1983-04-26 市川 征二 速度違反警報、記録取締方法
JPS5879400A (ja) * 1981-11-06 1983-05-13 Gen Eng:Kk 補聴器
JPS59123400A (ja) * 1982-12-29 1984-07-17 Sony Corp 時計付補聴器
JPH03245700A (ja) 1990-02-23 1991-11-01 Matsushita Electric Ind Co Ltd 補聴器
JPH075898A (ja) * 1992-04-28 1995-01-10 Technol Res Assoc Of Medical & Welfare Apparatus 音声信号処理装置と破裂性抽出装置
US5572593A (en) * 1992-06-25 1996-11-05 Hitachi, Ltd. Method and apparatus for detecting and extending temporal gaps in speech signal and appliances using the same
JPH06289896A (ja) * 1993-03-31 1994-10-18 Hitachi Ltd 音声の特徴強調方式および装置
JP3303446B2 (ja) 1993-07-21 2002-07-22 ソニー株式会社 音声信号処理装置
JP3245700B2 (ja) 1996-07-15 2002-01-15 三菱樹脂株式会社 折畳み式収納容器
JPH10333695A (ja) * 1997-06-04 1998-12-18 Technol Res Assoc Of Medical & Welfare Apparatus 音声変換装置
JP3596580B2 (ja) 1997-07-11 2004-12-02 ソニー株式会社 音声信号の処理回路
US6289310B1 (en) * 1998-10-07 2001-09-11 Scientific Learning Corp. Apparatus for enhancing phoneme differences according to acoustic processing profile for language learning impaired subject
US6732073B1 (en) * 1999-09-10 2004-05-04 Wisconsin Alumni Research Foundation Spectral enhancement of acoustic signals to provide improved recognition of speech
AU2002236483A1 (en) * 2000-11-15 2002-05-27 Logometrix Corporation Method for utilizing oral movement and related events
JP4223350B2 (ja) * 2003-08-19 2009-02-12 パナソニック株式会社 補聴器
JP4012970B2 (ja) * 2004-03-31 2007-11-28 独立行政法人産業技術総合研究所 音声情報伝達装置
US7457741B2 (en) * 2004-03-30 2008-11-25 National Institute of Advnaced Industrial Science and Technology Device for transmitting speech information
CN1269106C (zh) * 2004-08-31 2006-08-09 四川微迪数字技术有限公司 一种用于数字助听器的中文语音信号处理方法
JP2006087018A (ja) * 2004-09-17 2006-03-30 Matsushita Electric Ind Co Ltd 音響処理装置
JP4876245B2 (ja) * 2006-02-17 2012-02-15 国立大学法人九州大学 子音加工装置、音声情報伝達装置及び子音加工方法
JP4946293B2 (ja) * 2006-09-13 2012-06-06 富士通株式会社 音声強調装置、音声強調プログラムおよび音声強調方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102222507A (zh) * 2011-06-07 2011-10-19 中国科学院声学研究所 一种适用于汉语语言的听力损失补偿方法及设备
CN103039092A (zh) * 2011-07-08 2013-04-10 松下电器产业株式会社 助听适合度判断装置及助听适合度判断方法
US9313584B2 (en) 2011-07-08 2016-04-12 Panasonic Corporation Hearing assistance suitability determining device and hearing assistance suitability determining method
CN103039092B (zh) * 2011-07-08 2017-02-15 松下电器产业株式会社 助听适合度判断装置及助听适合度判断方法
CN103782340A (zh) * 2011-08-31 2014-05-07 阿尔卡特朗讯公司 用于对数字声音信号进行减速的方法和设备
US9928849B2 (en) 2011-08-31 2018-03-27 Wsou Investments, Llc Method and device for slowing a digital audio signal
CN104244155A (zh) * 2013-06-07 2014-12-24 杨国屏 处理声音段的方法及助听器
CN107112026A (zh) * 2014-10-20 2017-08-29 奥迪马科斯公司 用于智能语音识别和处理的系统、方法和装置
CN105357619A (zh) * 2015-12-11 2016-02-24 广州大学 一种数字助听器频率分辨力增强方法
CN105357619B (zh) * 2015-12-11 2018-10-26 广州大学 一种数字助听器频率分辨力增强方法
CN111653281A (zh) * 2019-02-05 2020-09-11 西万拓私人有限公司 用于对助听器的音频信号进行个性化信号处理的方法
CN110097874A (zh) * 2019-05-16 2019-08-06 上海流利说信息技术有限公司 一种发音纠正方法、装置、设备以及存储介质

Also Published As

Publication number Publication date
JPWO2010087171A1 (ja) 2012-08-02
CN101939784B (zh) 2012-11-21
EP2383732A1 (en) 2011-11-02
EP2383732B1 (en) 2015-10-07
WO2010087171A1 (ja) 2010-08-05
JP2014194554A (ja) 2014-10-09
US8374877B2 (en) 2013-02-12
JP5870309B2 (ja) 2016-02-24
EP2383732A4 (en) 2012-12-05
US20110004468A1 (en) 2011-01-06

Similar Documents

Publication Publication Date Title
CN101939784B (zh) 助听器及助听处理方法
Traunmüller et al. Acoustic effects of variation in vocal effort by men, women, and children
US9149202B2 (en) Device, method, and program for adjustment of hearing aid
CN101627427B (zh) 声音强调装置及声音强调方法
Garellek et al. Breathy voice during nasality: A cross-linguistic study
Seshadri et al. Perceived loudness of speech based on the characteristics of glottal excitation source
JPWO2012108128A1 (ja) 脳波記録装置、補聴器、脳波記録方法およびそのプログラム
US8155966B2 (en) Apparatus and method for producing an audible speech signal from a non-audible speech signal
JP2018050847A (ja) 認知機能評価装置、認知機能評価方法、およびプログラム
WO2010011963A1 (en) Methods and systems for identifying speech sounds using multi-dimensional analysis
CN105765654A (zh) 具有基频修改的助听装置
CN111653281A (zh) 用于对助听器的音频信号进行个性化信号处理的方法
CN101281747A (zh) 基于声道参数的汉语耳语音声调识别方法
Rahman et al. Amplitude variation of bone-conducted speech compared with air-conducted speech
US11640831B2 (en) Evaluation apparatus, training apparatus, methods and programs for the same
Rao et al. Speech enhancement for listeners with hearing loss based on a model for vowel coding in the auditory midbrain
Richard et al. Comparison of objective and subjective methods for evaluating speech quality and intelligibility recorded through bone conduction and in-ear microphones
Brouckxon et al. Time and frequency dependent amplification for speech intelligibility enhancement in noisy environments
Bapineedu et al. Analysis of Lombard speech using excitation source information.
Gobl et al. Inverse filtering of nasalized vowels using synthesized speech
JP7294460B2 (ja) 訓練装置、その方法、およびプログラム
US11967334B2 (en) Method for operating a hearing device based on a speech signal, and hearing device
Amin et al. Nine voices, one artist: Linguistic and acoustic analysis
CN114121040A (zh) 用于借助听力设备评估语音信号的语音质量的方法
McDonald et al. Objective estimation of tracheoesophageal speech ratings using an auditory model

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20121121

Termination date: 20190128

CF01 Termination of patent right due to non-payment of annual fee