CN104937954A - 用于自管理声音增强的方法和系统 - Google Patents

用于自管理声音增强的方法和系统 Download PDF

Info

Publication number
CN104937954A
CN104937954A CN201480004449.3A CN201480004449A CN104937954A CN 104937954 A CN104937954 A CN 104937954A CN 201480004449 A CN201480004449 A CN 201480004449A CN 104937954 A CN104937954 A CN 104937954A
Authority
CN
China
Prior art keywords
hearing
overview
audio
test
frequency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480004449.3A
Other languages
English (en)
Other versions
CN104937954B (zh
Inventor
尹怀信
甘志珊
李沛镗
郑家驹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ACE COMM Ltd
Original Assignee
ACE COMM Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ACE COMM Ltd filed Critical ACE COMM Ltd
Publication of CN104937954A publication Critical patent/CN104937954A/zh
Application granted granted Critical
Publication of CN104937954B publication Critical patent/CN104937954B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022Monitoring a patient using a global network, e.g. telephone networks, internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/12Audiometering
    • A61B5/121Audiometering evaluating hearing capacity
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/12Audiometering
    • A61B5/121Audiometering evaluating hearing capacity
    • A61B5/123Audiometering evaluating hearing capacity subjective methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/12Audiometering
    • A61B5/128Audiometering evaluating tinnitus
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/30Monitoring or testing of hearing aids, e.g. functioning, settings, battery power
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/35Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using translation techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/50Customised settings for obtaining desired overall acoustical characteristics
    • H04R25/505Customised settings for obtaining desired overall acoustical characteristics using digital signal processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/70Adaptation of deaf aid to hearing loss, e.g. initial electronic fitting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/75Electric tinnitus maskers providing an auditory perception
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2205/00Details of stereophonic arrangements covered by H04R5/00 but not provided for in any of its subgroups
    • H04R2205/041Adaptation of stereophonic signal reproduction for the hearing impaired
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2225/00Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
    • H04R2225/39Aspects relating to automatic logging of sound environment parameters and the performance of the hearing aid during use, e.g. histogram logging, or of user selected programs or settings in the hearing aid, e.g. usage logging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2225/00Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
    • H04R2225/41Detection or adaptation of hearing aid parameters or programs to listening situation, e.g. pub, forest
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2225/00Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
    • H04R2225/55Communication between hearing aids and external devices via a network for data exchange
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/04Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Otolaryngology (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Neurosurgery (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本公开提供了用于从自管理听力测试获取包括不同声音频率处的响度容忍水平的听力特性的系统和方法,作为用于自动增强音频的个性化的成形的听觉简况,从而尽可能接近地补偿和解决个体通过具体信号通路经历的听力缺陷,信号通路包括用于管理测试、声音环境和用户的听力能力的音频设备,用户可在方便的个人装置(诸如智能电话)上自行管理听力测试。然后,成形的听觉简况可用于产生随后通过相同的信号通路传递至个体的增强的声音。在其某些方面,本发明对于寻求增强的听力体验的任何个体来说都是有用的,无论是具有听力正常范围内的听力的个体还是具有受损听力的个体。

Description

用于自管理声音增强的方法和系统
相关申请的交叉引用
本申请要求于2013年1月9日提交的第61/750,779号临时申请的优先权。
背景技术
本发明大体涉及听力学和数字声音工程学领域,具体涉及用于基于个性化听力简况(profile)增强用户体验的系统和方法。
听力损失已经被评估为发达国家最为常见的残疾。事实上,全世界有数百万人患有听力障碍,其中的许多人并未意识到他们的听力损失。下降的听力能力可能是由包括年龄、健康、职业、伤害、和疾病的许多因素造成的。听力的损失可导致生活质量的显著下降、人际关系受损、就业机会减少以及生产力减弱。不同类型的听力损失及相关情况可通过不同的方式影响人们的日常活动,特别是进行电话交谈和听音乐。
通常,对高音调声音的听力灵敏度倾向于首先下降。人们通常不会意识到其听力灵敏度的下降,直到他们遭遇听力问题,例如,难以听清电话中的交谈或者在嘈杂的环境中有听力问题。对于听力退化的人们来说,他们的听力能力通常在大部分情况下是足够的。由于他们听力损失的影响是可以忍受的,因此他们往往忽略这一点或找到解决的方法。他们会避免在嘈杂的环境中进行电话交谈,并且不太可能寻求听力保健专业人员的帮助。
听力明显损失的个人可以咨询听力保健专业人员,从而开取处方并获得助听器。尽管佩戴助听器被认为是对听力损失患者侵入性很小的辅助技术之一,但它也并非没有任何问题。在通过耳机进行电话交谈或享受音乐的过程中,使用助听器笨拙且不方便。使用助听器的人们经常遭受到反馈,该反馈是由助听器的麦克风采集到的助听器输出的声音生成的啸叫。
与听力损失相关联的常见问题是耳鸣。耳鸣是源自头部(即,不存在外部声音源)的声音的意识体验,并且可以表现为在一个或多个频率周围干扰其它声音的明显可听的铃声。耳鸣是通常与年龄相关的听力损失一起观察到的常见情况和症状。已知耳鸣在不同程度上通过许多不同方式对人产生影响。患有慢性耳鸣的一些人能够忽视这种情况,而其他人则觉得耳鸣令人讨厌、打扰人、使人分心、甚至使人残疾。耳鸣可能会干扰睡眠,从而导致情感抑郁以及综合健康方面的其它不利影响。
很多耳鸣患者注意到他们的耳鸣会在不同的声音环境中变化;通常,在寂静的环境中耳鸣会变得更令人厌烦,而在声音丰富的环境中则不那么令人讨厌。这一现象导致了用于耳鸣治疗的声音疗法的发展。最常见的建议是通过丰富背景声音来“避免寂静”。这可通过简单地播放一些背景声音或音乐来实现。更复杂的声音疗法涉及测量耳鸣信号的音高和响度,并且提供能够通过耳机设备和声音发生器播放的信号。
本发明的各方面之一为听力剖析(hearing profiling),特别是通过自管理式测试的进行听力剖析。在听力剖析过程中,测量一组听力测定频率的最低可听听力水平。已知有各种方法用于获得最低可听听力水平。然而,在特定情况下将听力剖析应用到听力增强设备(如助听器、声音放大器、或者诸如MP3播放器、智能电话等的个人聆听设备)的过程中,用户有时可能坚持调大或调小设备音量,以便充分地听见和理解由听力测试确定的以其他方式增强的音频以及作为听力增强过程的一部分的在耳朵处的听力简况的相应修改。一个问题是,在增强的音频中无意诱发的响度可能导致听力不适和损伤。人可能对某个声音频率具有较高的容忍水平,而对另一频率的容忍水平较低。人和人的声音响度容忍简况彼此不同。该差别在具有正常听力的人之间可能并不明显。然而,对于有不同程度听力损伤(诸如,听力损失、耳鸣或带耳鸣的听力损失伴)的人来说情况就不同了。由于人们的声音响度容忍简况的差异,所以不应把具有正常听力的人的听力曲线作为标准。因而,在不考虑人的声音响度容忍简况的情况下对人的听力曲线进行调整可能会导致听力不适或损伤。
为了充分地听见和理解如由音频增强过程控制的增强后的声音而简单地调高设备音量可能是危险的。调高或调低设备的音量意味着以相同的因数放大或减小所有听力测定频率的音频。人通常需要放大或减小有限范围的听力测定频率。调高或调低全部听力测定频率的音频的响度可导致一系列听力问题。需要能对具有不同程度的听力损伤的各种声音响度容忍简况进行处理的系统。更具体地说,需要对于本文提出的问题(诸如在电话交谈或听音乐过程中的听力困难,以及由助听器的使用产生的反馈)的解决方案。
传统“听力测试”需要校准设备来测量处于安静环境中的个人的听力阈值水平。因而,从这种听力测试中获取的数据集代表了个人的听力阈值。
为了使设备产生作为测试音的具体声音波幅,需要校准该设备与其换能器的组合。这是因为,每个设备的电路和换能器或耳机具有影响声波的输出幅度的不同的频率响应。这意味着,对于不同模式的设备和耳机,相同的电音频信号会产生不同幅度的声波。因此,能够通过校准设备和耳机的组合来生成用于听力测试的、作为测试音的特定声波幅度。
通过使用校准后的设备可产生一致的声波幅度,然后,可通过在隔音或安静环境中找到一定频率范围上的阈值来获得听力水平的精准值,并且生成将表示对象的听力阈值或听力图的“听力简况”。本发明人在该方面的工作已经在《国际听力学杂志(International Journal ofAudiology)》第5卷第8篇,第606-610页(2012年8月)中出版。由此,在设备中获取的数据然后可被用作参数,信号处理引擎可基于该参数来调整或增强音频信号。
在开发过程中进行了实验,并且来自具有“正常”听力的人的实验结果以及来自在一定频率范围上有听力损失的人士的结果表明,确实存在着十分重要的、在增强音频信号时应被考虑的因素。这些因素包括耳机中的换能器和环境噪声。采用与校正过的(标准)耳机不同的一系列不同耳机进行的进一步调查研究确认了“换能器效应”的重要性。实际上,任何电子元件,无论是替代另一元件还是添加到校正过的信号路径中或从校正过的信号路径中移除,都会引起换能器效应。例如,发明人已发现,即使是于相同三星盖世平板(Samsung Galaxy)型号的两个单元,但是生产年份不同并且承载不同的声卡,也可具有略微不同的音频特性。
已发现的是,在使用不同耳机的情况下,所获得的相同用户的简况在不同的耳机型号之间略有差异。与系统校正的耳机的换能器相比,该差异是由该耳机的换能器的不同的频率响应造成的。
在开发过程中进行的实验表明,背景环境噪声也会影响个人感知和理解声音信号的能力。这是由背景噪声的“掩蔽效应”造成的。如果分析环境噪声,然后在音频信号增强的过程中考虑环境噪声,那么环境噪声可被配置成向用户提供益处。
通过考虑换能器效应和环境二者,除了所获得的阈值之外,还可收集和存储额外的信息/数据。这些数据在数据采集时对所使用的换能器以及环境噪声成分是特定的。换能器特性甚至可由用户来确定,从而在经历测试协议之前向该系统指示耳机的品牌/型号。环境噪声可在测试期间单独进行采样和分析。
鉴于以上内容,应理解的是,隔离特定用户的音频感知的特征需要考虑音频设备的若干特性,以及控制或考虑环境噪声。这些要求增加了剖析系统中所需的数据采集和/或处理组件的复杂性。因此,需要一种为具体用户提供定制的增强声音的更实用和有效的系统和方法。另外,不同的用户会有通过除频率特有的音频感知、舒适水平、或耳鸣之外的其他考虑因素(包括例如个人的审美情趣)来确定的声音增强偏好。因而,还需要一种允许用户从自动生成的默认增强信号开始手动调整设备的音频输出的声音增强系统。
发明内容
根据本发明的一方面,提供了用于为听力受损个体生成通常正常的听力体验的系统和方法。具体地,本发明包括获取人的音频听力特性,以生成个性化的听力学简况;分析个性化的听力学简况;生成处理结果;以及然后自动增强来自音频再生装置的输出信号,从而为该个体提供作为令人满意的音频体验的处理结果。
在优选实施方式中,用于生成处理结果的听力学简况采用部分或全部经校准的设备来获得。通过使用任何换能器在任何环境下找到一定范围的频率上的阈值来获取表示为具体通路测量的、对象的“听力简况”的数据集。因而,所获取的数据会生成成形的“听觉简况”,该“听觉简况”仅适用于在测量信号通路的环境中所测量的信号通路。然后,将该数据集用做模板,信号处理引擎可根据该模板增强音频信号。该方法会有效地建立设备的电子信号与在获取该成形简况的环境中从该设备生成的声音的用户听觉感知之间的关系。
处理结果包括基于频率的响度增强和其他听力相关的特征的个体听力参数以解决和补充个人的听力需求。该活动被实现为为尽可能靠近正常听力标准,同时保持安全裕度,以防止可能引起不适或进一步听力损害的过度响度。个体用户可使用诸如MP3播放器或智能电话的个人设备自行管理听力测试。个性化听力学简况通常包括以下内容:(1)每个听力测定频率处的三个典型响度水平(即最舒适水平、不舒适水平以及最小可听水平)的测量值;(2)来自具有耳鸣响度和音高的耳鸣测试的测量值;以及(3)用户的定制设置。定制设置可包括适合于用户或由用户选择的、将在噪声学环境中实施的设置。本发明的这方面对于寻求增强听力体验的任何个体都有用,无论是否具有在正常范围内的听力还是具有受损的听力。因而,该系统作为助听器是很有用的。
在具体实施方式中,可将本发明的单独功能并入单个多功能设备或多个设备中。基于软件的系统可根据本发明在任何计算机化设备上实施,诸如,个人计算机、智能电话、个人放大器或其与个性化的听力学简况的本地的、可去除的存储或远程存储的组合。基于软件的系统执行多种功能。该系统获取频率特定的个人音频听力特性,并且分析这些特性以生成个性化的听力学简况。该简况进行本地存储或远程存储,并随后被用作控制输入,以增强来自适当的可编程声音再生装置的音频,诸如个人计算机、智能电话、个人放大器或其组合,音频程序或类似源材料(例如,预先录制的音乐或电话通话)通过该可编程声音再生装置再现。
在音频再现设备中,信号处理包括:接收时域音频信号形式的音频程序材料;捕获和分析声学环境的当前频率成分,从而由此生成反映随着该声学环境的变化而更新的周围声音环境的当前环境简况;通过一组滤波器(诸如有限脉冲响应数字滤波器)将所存储的个性化的听力学简况以及当前环境简况应用于音频程序材料,从而计算在预先选择的频率处的一组期望的增益;修改音频程序材料;将修改的音频程序材料从时域转换到频域;通过在每个听力学频率处对比修改的音频程序材料的响度容忍水平与个人的声音响度容忍水平(在下文中还称为不舒适响度水平-UCL)来分析用于修改后的音频程序材料的响度容忍水平;调整超出个体的UCL的选定频率处的响度以生成频域音频信号;将该频域音频信号转换成其等效的时域音频输出信号;以及将时域音频输出信号传送至个体。音频听力特性可进行本地存储或远程存储,并且听力特性的分析和处理以生成个性化的听力学简况可在本地个人设备上执行和存储,或个性化的听力学简况可远程存储在通过诸如因特网连接的中央听力处理中心处,并且在需要根据本发明的原理再现声音时重新取回。
在本发明的各种实施方式中,本发明的原理可在存在诸如白色或有色噪声的环境源、存在耳鸣条件或两者都存在的情况下应用于音频程序。
根据本发明,耳鸣可以被缓和。耳鸣响度是指如通过从个体的耳鸣的强度减去耳鸣的音高的最低可听水平计算的、个体耳鸣的感觉水平(SL)。虽然可使用不同的方法来解决耳鸣,但是一种方法是通过使用声音疗法。耳鸣减轻信号根据在获取用于形成个性化的听力学简况的音频体力特性时已测量的响度和耳鸣音调生成。这些生成的减轻信号独立使用(无其他增强)或嵌入为所再现的声音的一部分。
本发明的另一方面允许计算机化设备的任何用户以将用户的听力体验恢复到“正常”为目标而容易地生成个性化的听力学简况,从而补偿个体的个人需求,同时提供针对不适和听力损害的安全裕度。另外,能够获取、分析并本地和/或远程地存储自管理听力特性测试结果以及专业管理听力特性测试结果或其他音频听力特性测试结果。虽然正常听力体验是自动实现的,但是可选地,可为用户提供根据其偏好修改既定的正常听力体验的能力。
本发明识别听力测试结果与声音增强过程之间的显著差距,并且在二者之间提供桥梁。根据经证明有效的方法论分析的听力特性为实现正常听力体验的声音增强过程的决定因素。
除了在获取用户的聆听特性的过程期间存储的因素之外,还有会影响音频信号增强的其他用户因素。这些因素为用户偏好,其包括由系统施加的增强的水平(例如25%、50%、75%或100%)、以及根据所处理的音频的类型(例如,音乐或语音)的优选调整。
对于增强的水平,其为由用户进行的影响用于音频处理的参数的刻意调整。该调整处理用户的舒适度、使用该技术的适应性以及增强水平的选择。用户可选择不同的增强水平(例如25%、50%、75%或100%)。
另一“用户偏好”可以是耳机或耳塞的选择以及耳机在耳朵上的物理安装以及耳塞在耳朵的碗状部或耳道内的物理安装。对于任何特定的音频设备,该“用户偏好”有时会变化,但是对于个体往往是相对一致的习惯或安装方法。然而,由于不同型号的不同构建,由于其不同的物理性质(例如,尺寸和形状),这些型号会差别地安装在耳朵之上或耳朵中。这些因素还有助于成形的“听觉简况”中的差异,该差异可为个体根据各种型号的耳机及其关于个体用户的耳朵的物理安装来获得。
对于根据音频类型的优选调整,该系统可配置成根据音频信号的类型来增强音频,从而使用于音频增强的参数更适合音乐(甚至是音乐流派)或语音的特性。
所有因素,包括个体的阈值(其为成形的“听觉简况”)、换能器特性、测试期间的噪声成分以及用户偏好,都被存储在该系统中。该成形的“听觉简况”可被看作表示沿信号通路从音频信号到用户的声音感知的关系,该关系对已测量的信号通路来说是特定的;该“听觉简况”可用于根据一组规则生成用于音频信号增强的参数。
通过结合附图并参照以下具体描述会更清楚地理解本发明。
附图说明
图1A是示出了根据本发明的一方面的结合远程存储介质使用的一个或多个个人设备的高级框图。
图1B是根据本发明的一方面的系统的高级框图。
图2是根据本发明的一方面的听力学简况子系统的高级框图。
图3是根据本发明的一方面的分析子系统的框图。
图4是根据本发明的一方面的用户识别子系统的框图。
图5是根据本发明的一方面的音频信号子系统的框图。
图6A和图6B共同为根据本发明的一方面的声音增强过程的活动图。
图7是根据本发明的一方面的耳鸣匹配过程的流程图。
图8是根据本发明的一方面的耳鸣匹配过程的测试耳选择过程的流程图。
图9是根据本发明的一方面的耳鸣匹配过程的音调数量确定测试的流程图。
图10是根据本发明的一方面的耳鸣匹配过程的耳鸣类型确定过程的流程图。
图11是用于根据本发明的一方面的耳鸣匹配过程的耳鸣音调选择过程的测试信号音调的简图。
图12是根据本发明的一方面的耳鸣匹配过程的耳鸣音高确定过程的流程图。
图13A和图13B共同为用于根据本发明的一方面的耳鸣匹配过程的每个耳鸣音高的三级耳鸣测试的流程图。
图14是根据本发明的一方面的声音增强过程的流程图。
图15是具有图14中声音增强过程的能力的设备的高级框图。
图16是示出根据本发明的一方面的从创建听觉简况至生成输出至个体的音频输出的进展的流程图。
图17是示出根据本发明的一方面的参数创建过程的流程图。
图18是示出根据本发明的一方面的个性化的音频输出生成过程的流程图。
图19是示出根据本发明的一方面的签名(成形听觉简况)创建过程的流程图。
图20是示出根据本发明的一方面的声音参考点识别过程的流程图。
图21是示出根据本发明的一方面的最小声音参考点的识别过程的流程图。
图22是示出根据本发明的一方面的最舒适声音参考点的识别过程的流程图。
图23是示出根据本发明的一方面的不舒适声音参考点的识别过程的流程图。
图24是示出根据本发明的一方面的简况选择过程的流程图。
图25是示出根据本发明的一方面的简况创建过程的流程图。
图26是示出根据本发明的一方面的环境取样过程的流程图。
图27是示出根据本发明的一方面的换能器识别过程的流程图。
具体实施方式
参见图1A,通过具有代表性的环境要素示出了个人设备1的高级框图。设备1A具有显示器2、一组耳机3以及诸如键盘的控制接口4,如键盘。设备1A存储或接收由其个体用户通过控制接口4激活的测试方案5,然后,测试方案5与如下所解释的做出响应的用户的聆听交互。生成如下所述的个性化的听力学简况并存储在本地(S)设备1A中,或存储在可去除的存储设备(拇指驱动器或非易失性存储卡)7上,或远程存储在能够通过电信链接8B访问的远程分析和存储系统8A中。个性化的听力学简况在相同或类似的设备1B上使用以修改输出至相同耳机3或输出至扬声器9的音频信号。音频信号输出基于编程材料11的输入,编程材料11的频率相关特性和时间相关特性通过个性化的听力学简况以及如下所述的由当前环境产生的环境简况进行调节。
参见图1B,根据本发明的一方面,提供了定制增强声音TM(CES)系统10,该系统具有用于信息输入、听力学剖析、分析、显示、用户识别、响应控制以及数据储存库的子系统和类。如本文中所用的,类是对具有类型属性、共同行为、共同关系以及共同语义的、基于软件的对象的组的描述。子系统是协作完成该子系统负责的一个或多个行为的一组类。每个类都通过处理不同的任务并通过彼此通信以实现每个任务在子系统中起作用。
当在具有适当功能的通用硬件平台上以软件实现时,一个或多个设备1A/1B/8A的系统10提供双重功能:测试以开发简况以及在特定环境中的声音再现。在测试模式中,系统10在一个功能(通常在随后的储存之前使用)中交互地测量个人听力能力以及在另一功能(通常与再现同时进行)中测量环境声音/噪音。系统10本地存储或远程存储个性化的听力学简况。系统10本地存储环境简况。分析原始数据以生成个性化的听力学简况也可以在本地或远程(通过电信链路)执行。在再现或回放模式中,系统10根据个体和环境简况修改源音频程序(输入音频信号),从而使该程序适应该个体用户的听力能力和偏好。在具体实施方式中,系统10获取和测量数据或接收所获取的数据,分析该数据,为每个听力测定频率生成目标增益,将目标增益和/或耳鸣缓解信号施加于音频信号,并且形成防止令人不适的或损害性响度的增强的音频输出信号。
CES系统10的组成部分包括听力学简况子系统12、分析子系统14、显示子系统16、用户识别子系统18、音频信号子系统20、响应控制器22以及与数据储存库26(可为本地数据储存库或远程数据储存库)通信的数据储存库连接器24。
听力学简况子系统
因为关系到用户的音频听力特性,所以听力学简况子系统12执行在每个耳朵上单独进行的测试。该子系统的职责包括:确定用户的听力特性;确定用户的耳鸣特性;确定用户对每个听力测定频率的最舒适响度水平;确定用户对每个听力测定频率的不舒适响度水平;按需生成音频测试信号;从专业管理的听力测试中确定用户的音频听力特性;以及生成个性化的听力学简况。
参见图2,听力学简况子系统中的类包括:专业管理的听力测试类27;自我管理的听力测试类28;耳鸣匹配测试类30;舒适和不舒适听力水平测试类32;测试选择器34;以及音频测试信号发生器类36。
分析子系统
分析子系统14分析用户的个性化听力学简况并生成处理结果,该处理结果由音频信号子系统用来生成增强的音频输出信号。该子系统的职责包括:解译用户的听力学简况;确定所需的音频增益;确定要生成的一种或多种类型的减轻声音;生成特定的减轻声音;以及处理用户的定制设置。所支持的减轻声音的类型为:a)音乐;b)窄带噪声;c)宽带噪声;d)环境声音以及e)纯音音频信号。
参见图3,分析子系统14的子系统和类包括:增益子系统38、信号处理子系统40、声音减轻器子系统42、以及定制器类46。增益子系统38中的类为增益算法选择器35和目标增益计算器37。信号处理子系统40中的类为算法选择器39和滤波器产生器41。声音减轻器子系统42中的类为声音减轻器选择器43和声音减轻器发生器45。
用户识别子系统
用户识别子系统18管理用户识别过程并且维护个性化的听力学简况。子系统18的职责包括:确定用户的身份;验证用户的身份;以及维护用户的听力学简况。参见图4,用户识别子系统18中的类包括简况对象48和用户标识50。
音频信号子系统
音频信号子系统20管理与音频信号的储存和使用相关的所有问题。该子系统的职责包括:从音频程序源检索预增强的音频信号;基于来自分析子系统的处理结果从预增强的音频生成增强的音频信号;以及调度增强的音频信号。参见图5,音频信号子系统20中的类包括音频信号检索器52、音频信号调度器54和音频处理器56。
显示子系统
显示子系统16提供了在使用本发明时与用户交互的所有用户接口元素,并且可以是适合于系统10的常规设计。
数据储存库连接器
数据储存库连接器24是对与数据储存库26的连接进行管理的类。该类的职责包括:建立数据库连接;生成一个或多个数据库查询语句;从数据储存库26以及向数据储存库26中检索/更新/插入/删除数据;以及从数据存储库26检索数据。
响应控制器
响应控制器22为根据请求对需要显示的内容进行解译的模块。响应控制器的职责包括确定和发送将在显示子系统上显示的必要信息。
框架的逻辑流程
图6A和图6B以及以下的段落以活动图的方式描述了根据本发明的一方面的CES系统10和过程100的逻辑流程。图6A和图6B中所示出的基于软件的系统的活动图大体上是不需要加以说明的,并且包括声音增强过程中的节点、基本功能和元件的相互关系。声音增强过程包括:监测用户设备状态102;确定用户简况是否存在以及该用户简况存储的位置104;检测环境噪声水平106;生成个性化的听力学简况108;确定用户简况的日期和时间110;分析个性化的听力学简况112;生成增强的音频信号114;以及在用户设备上播放增强的音频信号的增强的音频。对于声音增强过程的几个主要步骤,以如下概要(伪码)形式提供了几个示例性实施方式:
监测用户设备状态(检查设备状态)
 检查是否存在设备的功率信号,
   如果存在功率信号。
     将该设备状态标记为打开(ON)。
如果不存在功率信号,
     将该设备状态标记为关闭(OFF)。
基于软件的系统不断地与声音增强过程中的其他过程并行执行设备状态监测。在任何给定的时间点,如果设备状态等于关闭(OFF),那么基于软件的系统将停止运行。
检查是否存在简况以及简况存储的位置
-检查因特网连接
    ○如果无因特网连接并且设备状态为打开(ON)
        ■检查是否存在简况
           ·如果本地设备具有简况,
              检查简况简况年龄
           ·如果本地设备没有简况并且设备状态为打开(ON)
              检测环境噪声水平并生成听力学简况
     ○如果有因特网连接并且设备状态为打开(ON)
         ■检查是否存在简况以及简况的位置
           ·如果数据储存库具有简况并且设备状态为打开(ON),
             将简况从数据储存库下载到本地设备
             检查简况年龄和信号增强
           ·如果本地设备具有简况并且设备状态为打开(ON),
             将简况从本地设备上传到数据储存库
             检查简况年龄和信号增强
           ·如果数据存储库和本地设备二者都具有简况并且设备状态为打开(ON),
             对比两个简况的时间戳
                 如果本地简况为最近并且设备状态为打开(ON),
                    将简况从本地设备上传到数据储存库
                    检查简况年龄和信号增强
                如果数据存储库中的简况为最近并且设备状态为打开(ON),
                    将简况从数据储存库下载到本地设备
                    检查简况年龄和信号增强
         ·如果没有发现简况并且设备状态为打开(ON),
             检测环境噪声水平,然后生成听力学简况
检查简况年龄和信号增强
-如果简况年龄大于一天并且设备状态为打开(ON),
   ○重设简况年龄
   ○检查是否存在简况以及简况储存的位置
-如果简况年龄小于或等于一天并且设备状态为打开(ON),
   ○检查CES状态
      ■如果CES已启用,
         分析个性化听力学简况
            生成增强的音频信号
             播放增强的音频
      ■如果CES已禁用,
         播放预增强的音频
检测环境噪声水平(环境)
-测量环境噪声的水平
   ○如果环境噪声水平大于45dB并且设备状态等于打开(ON)
      ■显示警告信息
         检测环境噪声水平
   ○如果环境噪声的水平小于等于45dB并且设备状态等于打开
      ■生成个性化的听力学简况。
在音频程序材料的回放过程中,环境简况不断地实时更新。用于更新环境简况的典型周期为100毫秒。然而,在变化缓慢的环境噪声学环境中,更新可更频繁或不那么频繁地进行,从约16毫秒至50毫秒到至几分钟的数字化的声音采样速率。
生成个性化的听力学简况
-选择要执行的听力测试的类型
○如果用户选择自管理听力测试
     ■对每个耳朵单独执行纯音听力测定
         ·在每个听力测定频率播放音频信号
         ·询问用户以在每个听力测定频率选择最低可听水平
         ·重复纯音听力测定,直至获取所有听力测定频率的最低可听水平
     ■对每个耳朵单独执行不舒适听力测试
         ·在每个听力测定频率播放音频信号
         ·询问用户以在每个听力测定频率选择不舒适响度水平
         ·重复不舒适响听力测定,直至获取所有听力测定频率的不舒适响度水平
     ■对每个耳朵单独执行最舒适听力测试
         ·在每个听力测定频率处播放音频信号
         ·询问用户以在每个听力测定频率处选择最舒适响度水平
         ·重复最舒适响听力测定,直至获取所有听力测定频率的最舒适响度水平
     ■邀请用户执行耳鸣匹配测试
         ·如果用户想执行耳鸣匹配测试
             执行耳鸣匹配测试
                 确定测试耳朵
                 确定耳鸣类型
                 匹配耳鸣音高
                 匹配耳鸣响度
         ·如果用户不想执行耳鸣匹配测试
             跳过耳鸣匹配测试
○如果用户选择专业管理听力测试
■为每个耳朵输入用于所有听力测定频率的空气传导的未掩蔽的最低可听水平
■为每个耳朵输入用于所有听力测定频率的空气传导的掩蔽的最低可听水平
■为每个耳朵输入用于所有听力测定频率的骨传导的未掩蔽的最低可听水平
■为每个耳朵输入用于所有听力测定频率的骨传导的掩蔽的最低可听水平
■输入用于所有听力测定频率的骨传导前额未掩蔽的最低可听水平
■为每个耳朵输入用于所有听力测定频率的骨传导前额掩蔽的最低可听水平
■为每个耳朵输入用于所有听力测定频率的不舒适响度水平
■为每个耳朵输入用于所有听力测定频率的最舒适响度水平
■输入耳鸣匹配结果
■输入来自语音接收阈值测试的结果
■输入来自语音识别测试的结果
■输入在语音接收阈值测试中使用的音频源
■输入在语音识别测试中使用的音频源
-根据所获取的数据生成个性化的听力学简况
如上所注意到的是,测试的一个方案用于在各个频率处的听力灵敏度,而测试的另一方案用于个体耳鸣。耳鸣音高、耳鸣感觉水平、耳鸣最小可听水平以及耳鸣UCL测试方案是被称为耳鸣匹配过程的过程。由本发明考虑的耳鸣类型为:主观的,即,在没有任何外部声音源的情况下对声音的感知。该方案以5个步骤执行。参见图7,这5个步骤为:测试耳确定(A);耳鸣音调数确定(B);耳鸣类型确定(C);耳鸣音高确定(D);以及耳鸣感觉水平确定(E)。下面对这些步骤进行更详细地解释。
步骤1:耳鸣音调数确定
该步骤的目的是确定将哪个耳朵用作测试耳。用户可在各种位置感知耳鸣:单侧、双侧和头部。可根据所报告的耳鸣的位置来相应地选择测试耳朵。图8概述了所涉及的程序并且在很大程度上是不需要说明的。以下各点涉及特定步骤。
如果感知的耳鸣的报告位置为单侧,那么对侧的耳朵将被认为是测试耳(AA)。使用对侧的耳朵的选择是为了使耳鸣与测试激励之间的可能的干扰最小化并提高测试结果的精确度。
如果感知的耳鸣的报告位置偏向一侧,那么对侧的耳朵将被认为是测试耳(AA)。使用对侧的耳朵的选择是为了使耳鸣与测试激励之间的可能的干扰最小化并提高测试结果的精确度。
如果感知的耳鸣的报告位置既不是单侧也不偏向于个体头部的一侧,那么具有较好听力的耳朵将被认为是测试耳朵(AB)。在两个耳朵的听力能力之间没有差异的情况下,可随机选择测试耳朵(AC)。
步骤2:耳鸣音调数确定
耳鸣被感知为音调。该步骤的目的是确定用户感知的耳鸣音调的数量。参见图9,该确定过程将询问用户具有的耳鸣音调的数量并且保存输入值(BA)。在本发明的一个实施方式中,测试集中在最扰人的耳鸣音调(通常为个体的个体主观决定)。在另一实施方式中,测试集中在两个最显著的耳鸣音调上。在又一实施方式中,该测试及其剖析支持任何数量的耳鸣音调,在这种情况下,所有这种音调(BB)将被记下。
步骤3:耳鸣类型确定
该步骤的目的是确定耳鸣的类型(音调耳鸣或类噪声耳鸣)。图10示出了该步骤。该程序相应地设定测试信号类型(CA)。如果用户具有音调耳鸣,那么测试信号类型将为纯音形式(CB)。如果用户具有类似噪声的耳鸣,那么测试信号类型将为窄带噪声形式(CC)。
在本发明的一个实施方式中,该确定过程通过在4000赫兹处向用户播放两个测试信号而开始,其中,一个信号为纯音形式而另一测试信号为窄带噪声形式。选择在4000赫兹处播放测试信号是因为大多数人报告具有在4000赫兹范围中的耳鸣。用户被询问以比较测试信号并选择听起来最接近其耳鸣的一个测试信号。根据用户在测试信号中的选择获得耳鸣的类型,并相应地设置测试信号类型。
步骤4:耳鸣音高确定
该步骤的目的是测量用户感知的耳鸣音高。该确定过程将播放会为一系列听力测定频率的测试信号。每个测试信号均以10dB SL播放,意味着比相应频率的预测量的最低响应水平高10dB。用户将选择听起来最接近用户自己的耳鸣音高的一个测试信号。
在本发明的一个实施方式中,用户被要求重复三次耳鸣音高确定,并且最终匹配的耳鸣音高将是这些测量值的平均值。如果用户具有不止一个耳鸣音调,那么该用户将必须执行6次耳鸣音高确定,每个耳鸣音调执行三次耳鸣音调确定。
可采用各种方法来测量耳鸣音高。在本发明的一个实施方式中使用了离散频率方法。测试信号集合将为离散的数据的形式。该确定过程使用两个可选的强迫选择方法呈现测试信号对,并且用户将选择在音高上最接近用户的耳鸣的一个。
图11是耳鸣确定过程的一个示例。该确定过程在4000赫兹处开始。选择4000赫兹是因为大多数用户报告他们在约4000赫兹处有耳鸣。测试完成标准是对所有频率都获得125赫兹的精确度。在本发明的另一实施方式中使用了连续频率的方法。参见图12,测试信号集可采用在频率的有限区间内的值。用户选取在音高上接近用户的耳鸣的一个信号。
步骤5:耳鸣感觉水平、耳鸣最低可听水平以及耳鸣不舒适响度水平确定
对每个耳鸣音调进行最小感觉水平、舒适水平和UCL水平的三个水平的测试。在某种程度上,这大致三个水平的测试可需要说明;图13A和图13B中的流程图是示例性的。在图13A和图13B中示出的多特性测试中,该确定通过将测试信号的频率设置为所识别的耳鸣音高(EA)开始。接下来的任务是在该耳鸣音高处识别最低可听水平(EB)。该确定过程播放各种可听水平的测试信号,并且用户被询问以识别其认为是最低可听水平的一个信号。这是个迭代过程。然后,该测试识别用户的耳鸣的感觉水平。在该确定过程期间,以始于低于最低可听水平的各种可听水平播放测试信号。用户被询问以识别在响度上与用户的耳鸣相等的测试信号。此时,将该声音强度设定为耳鸣响度(EC)。耳鸣感觉水平通过从耳鸣响度(EC)减去最低可听水平(EB)来计算
在一个实施方式中,通过向用户播放识别的耳鸣音高的窄带噪声并要求用户识别导致不舒适的噪声的响度水平来获取耳鸣不舒适响度水平(TUCL)。在另一实施方式中,要求用户重复3次耳鸣感觉水平和耳鸣最低可听水平确定。最终匹配的感觉水平将为这些测量值的平均值。如果用户具有不止一个耳鸣音调,则这些耳鸣音调都需要进行该确定过程。
在声音再现之前获得包括耳鸣测试的分析结果的个性化的听力学简况,即,声音增强过程。该简况可基于任何安排进行更新,但是通常每天都更新该简况以确保声音增强过程为最近的。
图14中宽泛地概括了根据本发明的声音增强过程。图14示出了音频程序材料作为音频信号与个性化听力学简况204以及优选地与如图15中进一步示出的最新(即,当前)的环境简况202结合的过程。该声音增强过程始于声学环境频率成分分析(FA)。该系统自动捕获和分析声学环境的频率成分。然后,如上所述,该系统生成环境简况202。该系统提供所储存的包括最低可听水平、声音响度容忍水平以及当前环境简况的个性化听力学简况204,个性化听力学简况204与音频信号一起用于调整增益(FB)。环境简况和个性化听力学简况用于导出用于一个或多个滤波器的系数或参数,诸如一个或多个有限脉冲响应(FIR)滤波器206。一个或多个滤波器用于提供基于来自任何源的音频程序材料的个性化听力学简况和音频信号208确定的、所期望的对频率特定的增益。这些增益通过相应地修改传入的音频信号的一个或多个滤波器来施加。在生成了修改后的音频信号的情况下,该系统通过傅立叶分析器210将修改后的音频信号从时域表示转换为频域音频信号(FC)。然后,通过进行声音响度容忍水平分析的声音响度容忍水平分析器212来应用该频域表示(FD)。声音响度容忍水平分析包括根据所存储的个性化的听力学简况检查修改后的音频信号的响度以及在每个听力测定频率处对修改后的音频信号的响度和用户的声音响度容忍水平进行比较。如果该响度水平在特定频率下大于用户的声音响度容忍水平,那么该系统将相应地调整响度(FE)。在完成容忍水平分析的情况下,该系统在傅立叶逆变换模块214中将调整后的频域音频信号转换回其等效的时域音频信号(FF),从而生成将作为增强的音频播放的、所期望的增强的音频信号。然后,可释放提供给用户的任何响度警告信号。
在本发明的一个实施方式中,系统10将不舒适响度水平作为声音响度容忍水平,并且将听力损失作为考虑的听力损害的类型。
在本发明的另一实施方式中,系统10还把耳鸣音高、耳鸣感觉水平、耳鸣最低可听水平和耳鸣UCL作为声音响度容忍水平,并将具有耳鸣的听力损失作为考虑的听力损害的类型。
系统10向用户提供自动增益调节选项和手动增益调节选项,其中,自动增益调节选项通过声学环境触发,而手动增益调节选项为用户触发。
在本发明的一个实施方式中,系统10开始于启动声学环境频率成分分析的功能。该系统自动捕获和分析当前声学环境中的频率成分,并且在安排基础上(通常为每50毫秒)生成更新的环境简况。然后,该系统使用更新后的环境简况特性来自动确定所需的增益量,该增益量允许用户根据期望舒适地倾听并理解增强的音频而不会遭受任何新的或进一步的耳损伤。
在本发明的另一实施方式中,系统10向用户提供多个增益调节选项。用户可以动态地调整所需的增益量,从而在各种环境中充分地听到和理解如由声音增强过程管理的增强的音频。
总之,该基于软件的系统使来自计算机化设备的音频的增强过程自动化,从而基于用户的个性化的听力学简况补充用户的特有音频听力特性。个性化听力学简况可通过自管理听力测试或专业管理听力测试来获得。自我管理听力测试指的是由计算机化设备生成的简况。该方法在每个耳朵上执行获取过程,并且包括进行听力测试、UCL测试、最舒适水平(MCL)测试和/或耳鸣匹配测试。对于使用系统10来说,不是所有这些测试都是必要的,而是被视为是可选的。该系统在本地听力增强设备上保持个性化的听力学简况和/或将副本提交给数据存储库。专业管理测试是指由适当的医疗保健专业人士提供的数据编译的简况。如下所概括,来自专业管理测试的数据包括用于每个听力测定频率和耳鸣特性的纯音听力图、UCL和MCL测试结果。医疗保健专业人士可在适当启用的设备上输入数据或通过因特网将数据输入至网络访问的数据存储库。
根据本发明的某些实施方式的基于软件的系统将有利地具有接受来自专业生成的听力图的任何参数的能力。根据本领域的标准名称,这种参数包括:在常规测试中为未掩蔽或掩蔽的AC、未掩蔽或掩蔽的BC、前额未掩蔽或掩蔽的BC、PTA、MCL、UCL、SRT语音识别、语言接收阈值(SRT)和语音辨别测试中使用的音频源,即,在以下频率的用于左耳和右耳的电脑生成的声音片段、或CD或磁带上的声音片段:
125Hz处的单位为分贝的听力水平
250Hz处的单位为分贝的听力水平
500Hz处的单位为分贝的听力水平
1kHz处的单位为分贝的听力水平
2kHz处的单位为分贝的听力水平
3kHz处的单位为分贝的听力水平
4kHz处的单位为分贝的听力水平
6kHz处的单位为分贝的听力水平
8kHz处的单位为分贝的听力水平
在默认情况下,系统将最近的个性化听觉简档作为其声音增强过程的基础。在操作过程中,该系统对最近的个性化听力学简况与本地设备和数据存储库上的那些个性化听力学简况进行比较。如果储存在数据储存库中的个性化听力学简况较新,那么该个性化听力学简况会覆盖本地版本(除非另有配置)。如果在本地设备中的简况较新,那么该系统会将该本地简况上传到数据储存库。在没有因特网连接的情况下,该系统会把本地简况用于声音增强过程。通常通过频繁监测本地设备上的简况变化每天进行日期和时间比较过程。每当系统检测到变化,该系统就会重新计算增益并通过更新的数据执行声音增强。
参照下面的段落,根据[BKL1]本发明的、也被称为ACE听力过程的、定制增强声音(CES)被呈现为一连串的伪代码表。为了提高该伪代码的清晰度,出于简洁目的而没有尝试使用编程语言中常见的特定语言(例如Java)进行描述。本文旨在采用其解译对软件编程领域的技术人员显而易见的通用语句。
虽然已经在用于与设备和环境因素隔离的个体用户的听力简况的上下文中大体描述了本发明的前述实施方式,但是本发明的其他系统和方法有利地利用了成形的“听觉简况”,该成形的“听觉简况”仅适用于具体信号通路,该具体信号通路已经在测量该具体信号通路的环境中进行测量。因而,以下将描述一种系统和方法,该系统和方法建立了设备中的电子信号与在任何环境下用户对从该设备产生的声音的听觉感知之间的关系;获取(描画)表示用户的听觉感知与在任何选择的环境下设备的电子信号之间所建立的关系的数据集(被称为或被描述为“听觉简况”);以及根据所选择的“听觉简况”和一组应用的规则、参数和算法来处理该电音频信号;由此,以提供优化的全音频体验为目的,调整该电音频信号以用于任何环境下用户的听觉感知以及设备中的电子元件的特性。
1.获得“听觉简况”
在一个实施方式中,参见附图16-19、图21和图22,通过图形用户界面询问用户以在声音输出水平在其最低可听水平的频率范围(这些频率可少到为两个不同的频率)上识别多个参考点。该系统首先为用户展示特定频率的声音信号。响度调节可通过诸如滑块、旋钮或音量键的工具、或语音命令或甚至眼球运动来完成。用户调整响度,直到他或她几乎听不到信号。用户在最低可听水平处设置参考点,然后在不同的频率处继续进行下一设置。以这种方式,每个参考点都考虑到该设备的固有的规格(诸如电路器特性和换能器特性)、该设备的定位(诸如耳机的安装)、在其中进行识别的环境、用户耳道和鼓膜的解剖特征、以及用户的听力能力。
当用户已经成功地定位第一参考点时,该系统保存第一参考点并且在另一频率处重复该过程。重要的是,应注意,在整个过程中所收集到的参考点并不反映如在专业的听力测试环境中通常所观察的人的听力的听觉阈值。所收集到的参考点是用户就测试设备和其规格、该设备相对于耳朵的定位、进行识别的环境、以及耳道、鼓膜和听力通路的解剖特性而言几乎听不到声音信号的点。所保存的参考点(每个耳朵可少至两个)被称为在这些情况下的人的“听觉简况”。因而,用户可具有用于不同的设备、耳机的选择和/或聆听环境的多个“听觉简况”。该“听觉简况”应用于已测量的信号通路(不仅包括用户的听力特性,而且还包括其它因素,包括设备的信号、电路、和换能器/耳塞或耳机;设备是否安装在耳朵上或安装至耳朵中、用户的耳道的解剖学特性;以及环境)。因而,所获取的“听觉简况”把该设备的换能器特性以及用户的听力感知结合在一起。值得注意地,在无需评估该简况的任何部分是否归因于听力损失的情况下,该系统可使用该“听觉简况”来确定在所测量的信号通路的特定情况下补偿用户的听觉感知的频率响应特性所需的声音增强。
通过不依赖于测量真实听力阈值水平而仅仅建立提供用于特定完整通路的简况的“形状(shape)”的关系,根据本发明的该方面的方法与使用助听器原理的音频增强和听力测试不同。所以“听觉简况”不是已经在隔音或安静的环境中测量了阈值的、个体用户的听力简况,而是数据集形式的“听觉简况”,该数据集表现在由任何设备产生的信号(考虑该设备的电路及其换能器或通过由用户选择的特定耳机及其至耳道中的安装)与在任何选择的环境中用于该特定设备的、用户的可听度阈值之间创建的关系。所以“听觉简况”(或用作在其上增强声音信号的平台的数据集)“属于”建立该“听觉简况”的条件下的具体电路及其用户或与建立该“听觉简况”的条件下的具体电路及其用户相关。如上所述,该“听觉简况”只适用于所测量的信号通路。不同的“听觉简况”可由个人(或甚至由同一设备上的若干用户)在不同情况下(耳塞和/或环境变化)获取并存储在该设备中以备适当应用。
该系统进行获取数据并以数据形式存储“听觉简况”。
2.用户偏好
然后由用户根据用户的偏好将“听觉简况”(从所存储的简况中的一个或任何数量中)选择为用于由该设备进行的定制/增强的优选的“听觉简况”,其中,用户的偏好在逻辑上基于环境情况和/或聆听设备的选择。
可替代地,从多个存储的简况中选择配合最佳的听觉简况可基于取样或探测特性或将增强的音频传递至个体的信号通路的组件来自动执行。信号通路的可自动采样或检测的特征可包括但不限于环境声音(例如,信号通路的整体强度、调性/无调性、和/或频率特定的强度)、使用中的换能器的测量的听觉特性(如频率响应)和/或识别签名;换能器的位置、角度方向、或移动(包括诸如指示将换能器定位在个体的哪个耳朵中或上的运动);以及换能器上的任何接触、触碰或压力,特别是通过用户的耳朵,诸如将表明接近或配合的舒适性(在插入耳道的换能器情况下)。自动选择也可以部分地由用户控制,例如通过提示用户指定自动选择的信号通路的不同特征的相对重要性。因而,在一个简单示例中,用户可要求设备选择具有最接近增强的音频传输时存在的声音条件的环境声音条件。在该示例中,考虑到背景声音条件可能的广泛可变性,对于与大量不同的环境音景相对应的、待存储的大量音频简况来说是很有利的。
另外,可有利地使用户能够在随后的任何时间应用和选择其他的个人偏好,例如,减少高音调和/或增强低音调。该附加功能可与自动最适合接口识别协同增强。例如,如果以及当该系统基于所采样的或所检测的条件自动选择最适合简况,随后由用户进行总音量或对频率特定的音量的即时手动调节,那么该手动调节可反馈到该系统中,从而根据机器学习原理来训练自动简况选择算法。
可替代地或另外地,响应于手动调整,该系统可提示用户选择是否与所采样的环境声景一起存储与如手动修改的、有源信号增强设置相关联的新简况。在一个实施方式中,该系统可基于所采样的条件与所存储的、被自动选择为最类似所采样的条件的条件之间的一些测量差异度来决定是否对其自动选择算法应用训练调整、和/或是否邀请用户存储新的简况。例如,如果该差异大时,该系统可仅邀请用户存储新的简况,因为可能不是由于自动选择缺陷而是由于可用存储简况的范围不够稳健而已经需要手动调整。用户对这类提示的肯定响应会有助于以不同的存储接口来填充该系统,从而改进该系统的能力以在大范围的不同背景声景上优化用户的聆听体验。
另一方面,如果所采样的条件与所存储的条件之间的差异很小,那么该系统可仅对其选择算法进行训练调整。可替代地,在一些情况下,该系统可整体或部分地基于用户对存储新简况的邀请的响应来进行纠正行动。因而,例如,如果用户选择不存储新的简况,那么该系统在用户拒绝的所有情况下或仅在用户拒绝创建新的简况以及所采样的条件与所存储的条件之间的差异低于某个限制的情况下可对其算法应用训练调整。无论用户是否拒绝创建新的简况,该系统将不纠正其选择算法的阈值差异度可高于该系统将要求用户创建新的简况的阈值差异度。
3.运行时间因素
参见图19,然后,所选择的“听觉简况”数据集确定一组“参数”。这些参数是基于应用于如何在考虑一个或若干因素的情况下处理数据的规则,例如,1)用于在每个参考点测量的分贝水平的因素,2)用于所测量的环境噪声的因素,以及3)用于已知换能器特性的因素。参照图18,然后,根据预选的“听觉简况”和适用的规则、参数和算法,该设备的电信号经过处理以补偿在生成所选择的“听觉简况”的环境下该设备中的电子组件以及用户的听觉感知的固有频率响应特性。
信号处理可通过或可不通过检测所存储的测试条件与和信号处理同时进行测量的条件之间的差异的设备来引导。例如,如果与手动选择的简况相关联的测试条件与当前聆听环境之间的差异很大,那么该系统可提醒用户该事实,并且提示用户选择是否创建新的简况,与以上所述连同随后进行手动用户调整的自动简况选择的过程类似。另外,该系统可通过修改与预先的简况相关联的增强操作来解析地推断要执行的信号增强操作,从而对测试条件与当前检测的条件之间的差异负责。
因而,流程如下:有或没有环境噪声测量的听力测试协议→听觉简况获取→规则(如何使用简况)→参数(按规则生成)→算法(如何使用参数)→处理(信号→结果)。
这样生成的信号对于听者的听力简况(可包括或可不包括听力障碍的影响)是正确的;对听者想听到的声音或音乐是正确的(听者能够在尝试一些语音或音乐之后调整听觉简况);对具体设备的独特特征来说是正确的,例如,电话(或其他音频输出设备)的换能器的频率响应,其中,简况在该具体设备上生成;对于从换能器至耳鼓的能量传递是正确的,该能量传递取决于听者的个体解剖学以及对于定位换能器的偏好;以及对于听者在其中创建听觉简况并将使用该设备的声音环境是正确的。
在另一实施方式中,参见图20和图22,通过图形用户界面询问用户以识别多个参考点,其中,在一定范围的频率上,声音水平在所述多个参考点中位于其最舒适水平。
在又一实施方式中,参见图20和图23,通过图形用户界面询问用户以识别多个参考点,其中,在一定范围的频率上,声音水平在所述多个参考点处或以上是不舒适的。
在另一实施方式中,如图24所示,通过图形用户界面询问用户以从现有的听觉简况列表中选择听觉简况。
在又一实施方式中,参见图24和图25,通过图形用户界面,给出用户从头开始创建新的听觉简况或从现有的听觉简况列表中选择一个的选择。
在又一实施方式中,参见图26,该系统能够被配置成由用户通过图形用户界面启动或自动地采样、分析以及以数据的形式保存环境噪声。
在又一实施方式中,如图27所示,在进行测试协议之前通过图形用户界面给出用户向系统指出换能器识别机构的选项的选择:耳机品牌/型号的手动选择、半自动检测、或自动检测。
本发明已参照具体实施方式进行了解释。其他实施方式对本领域技术人员将是清楚的。因此,除了由所附权利要求所表示的之外,并不旨在限制本发明。

Claims (22)

1.一种用于增强个体听力体验的系统,包括:
用于获取所述个体的用于测试信号通路的音频听力特性的组件,所述测试信号通路包括:
将输入测试电子信号转换成感知的音频信号的元件,所述元件包括将输入测试电子信号转换成输出测试音频信号的测试音频设备的电子组件,
声音环境,所述个体在所述声音环境中听到所述输出测试音频信号,以及
所述个体的听力能力;
用于分析所述个体的用于所述测试信号通路的音频听力特性以生成成形的听觉简况的组件;以及
用于响应于通过与所述测试信号通路类似的聆听信号通路传递至所述个体的另一输入电子信号来选择性地应用所述成形的听觉简况以增强由个体感知的音频的组件。
2.如权利要求1所述的系统,所述测试信号通路还包括所述具体音频设备相对于所述个体的耳朵的定位和/或安装。
3.如权利要求1所述的系统,还包括应用可选的用户偏好以指示、修改或调整所述音频增强的组件。
4.如权利要求1所述的系统,所增强的音频通过计算机化的设备来生成,从而在定制的响度水平内为与所述测试信号通路类似的信号通路补偿所感知的音频信号中的频率依赖响度缺陷。
5.如权利要求1所述的系统,所述成形的听觉简况包括用于通过所述测试信号通路传递的至少一个频率的最小可听响度水平的测试测量值。
6.如权利要求5所述的系统,所述成形的听觉简况还包括用于通过所述测试信号通路传递的至少一个频率的最舒适水平的测试测量值以及不舒适水平的测试测量值。
7.如权利要求5所述的系统,所述最小可听响度水平在多个听力测定频率处进行测量。
8.如权利要求1所述的系统,所述分析组件包括用于根据增益计算来产生处理结果的子系统。
9.如权利要求8所述的系统,其中,表明所述处理结果的压缩特性和频率增益的增益计算是频率相关和输入水平相关的。
10.如权利要求1所述的系统,还包括用于存储个性化成形的听觉简况的数据存储库,所述数据存储库配置成用于从任何源收集数据并且用于存储、更新特定个性化成形的听觉简况,并对所述分析组件使用具体个性化成形的听觉简况的请求做出响应。
11.如权利要求10所述的系统,所述个性化成形的听觉简况还包括可选的定制设置,所述可选的定制设置由所述个体选择以指示、修改或调整所述音频增强。
12.如权利要求11所述的系统,所述个性化成形的听觉简况还包括来自耳鸣测试的测量值。
13.如权利要求10所述的系统,其中,所述数据存储库能够通过因特网连接访问。
14.如权利要求10所述的系统,其中,所述获取组件为便携式电子组件。
15.如权利要求10所述的系统,其中,所述分析组件为便携式电子组件。
16.如权利要求1所述的系统,还包括用于检测所述聆听信号通路的至少一个元件以及基于所述聆听信号通路元件与所述测试信号通路的相应元件之间的差异改变所述音频增强的组件。
17.一种用于增强个体的听力体验的方法,其包括:
通过管理对所述个体的听力测试获取所述个体的、与用于将输入电子信号转换成由所述个体感知的感知音频信号的测试信号通路相对应的音频听力特性,其中,在测试声音环境中使用测试音频设备以将输出测试音频信号从输入测试电子信号传递至所述个体来管理对所述个体的听力测试;
分析所述个体的对于所述测试信号通路的音频听力特性,以生成成形的听觉简况;以及
应用所述成形的听觉简况来增强通过聆听音频设备传递至所述个体的输出音频信号,所述聆听音频设备在与所述测试声音环境类似的聆听声音环境中具有与所述测试音频设备类似的信号处理特性。
18.如权利要求17所述的方法,还包括检测所述聆听音频设备或所述聆听声音环境的至少一个方面,并且基于所述聆听音频设备或所述声音环境的方面与所述测试音频设备或所述声音环境的相应方面之间的差异改变所述音频增强。
19.如权利要求17所述的方法,还包括对应于不同的测试信号通路生成用于所述个体的至少一个第二成形的听觉简况,以及将至少两个成形的条件简况存储在数据储存库中,以允许选择所述至少两个成形的条件简况中的一个来应用于增强所述输出音频信号。
20.一种用于通过特定信号通路将定制的增强的声音传递至个体的装置,包括:
用于从源接收未增强的音频信号的组件;
用于接收与所述个体和所述特定信号通路相关联的、存储的个性化成形的听觉简况的组件;
滤波器器件,用于接收所述个性化成形的听觉简况以建立滤波器系数,并且用于接收未增强的音频信号作为输入,从而在多个频率处修改所述音频信号的响度以获得修改的音频信号;
时域至频域转换器,用于将所述修改的音频信号从时域转换到频域;
用于通过在多个听力学频率处比较所述个性化成形的听觉简况的响度容忍水平与所述修改的音频信号的响度水平来分析所述修改的音频信号的响度容忍水平以及调整所选择的听力学频率处的响度的组件,其中,在所述所选择的听力学频率处,所述响度容忍水平被超过以产生增强的频域音频信号;
用于将所述增强的频域音频信号转换成用于所述个体的等效时域增强的音频的组件。
21.如权利要求20所述的装置,所述滤波器器件为时域有限脉冲响应滤波器组。
22.如权利要求21所述的装置,所述时域至频域转换器为傅里叶变换元件,并且用于转换所述增强的音频信号的组件为傅里叶逆变换元件。
CN201480004449.3A 2013-01-09 2014-01-09 用于自管理声音增强的方法和系统 Active CN104937954B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361750779P 2013-01-09 2013-01-09
US61/750,779 2013-01-09
PCT/CN2014/070394 WO2014108080A1 (en) 2013-01-09 2014-01-09 Method and system for self-managed sound enhancement

Publications (2)

Publication Number Publication Date
CN104937954A true CN104937954A (zh) 2015-09-23
CN104937954B CN104937954B (zh) 2019-06-28

Family

ID=51061508

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480004449.3A Active CN104937954B (zh) 2013-01-09 2014-01-09 用于自管理声音增强的方法和系统

Country Status (7)

Country Link
US (2) US9468401B2 (zh)
EP (1) EP2944097A4 (zh)
JP (1) JP2016511648A (zh)
KR (1) KR20150104626A (zh)
CN (1) CN104937954B (zh)
HK (1) HK1212534A1 (zh)
WO (1) WO2014108080A1 (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107564538A (zh) * 2017-09-18 2018-01-09 武汉大学 一种实时语音通信的清晰度增强方法及系统
TWI630828B (zh) * 2017-06-14 2018-07-21 趙平 供使用者定向交談之智慧型耳機裝置個人化系統及其使用方法
CN109936999A (zh) * 2016-09-16 2019-06-25 伯斯有限公司 使用家庭睡眠系统进行睡眠评估
CN110351644A (zh) * 2018-04-08 2019-10-18 苏州至听听力科技有限公司 一种自适应声音处理方法及装置
CN110459212A (zh) * 2019-06-05 2019-11-15 西安易朴通讯技术有限公司 音量控制方法及设备
CN110493695A (zh) * 2018-05-15 2019-11-22 群腾整合科技股份有限公司 一种音频补偿系统
CN110858941A (zh) * 2018-08-22 2020-03-03 Mimi听力技术有限责任公司 用于在音频系统中进行声音增强的系统和方法
CN111031445A (zh) * 2019-11-29 2020-04-17 深圳普罗声声学科技有限公司 音量补偿方法、装置、计算机设备和存储介质
CN111050261A (zh) * 2019-12-20 2020-04-21 深圳市易优斯科技有限公司 听力补偿方法、装置及计算机可读存储介质
CN112352441A (zh) * 2018-06-27 2021-02-09 谷歌有限责任公司 增强型环境意识系统
CN113301872A (zh) * 2018-11-28 2021-08-24 独立生物制药有限公司 通过声音控制提高感知能力的装置和方法
CN113873416A (zh) * 2021-10-15 2021-12-31 歌尔科技有限公司 一种辅听耳机及其增益处理方法、装置及可读存储介质
CN114173652A (zh) * 2019-04-30 2022-03-11 重庆中嘉盛世智能科技有限公司 存储器、声学单元及其音频处理方法、装置、设备和系统
WO2024061245A1 (en) * 2022-09-22 2024-03-28 Alex Lau Headphones with sound-enhancement and integrated self-administered hearing test

Families Citing this family (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10687155B1 (en) * 2019-08-14 2020-06-16 Mimi Hearing Technologies GmbH Systems and methods for providing personalized audio replay on a plurality of consumer devices
DK2572640T3 (en) * 2011-09-21 2015-02-02 Jacoti Bvba Method and device for performing a survey rentoneaudiometri
CN104160443B (zh) 2012-11-20 2016-11-16 统一有限责任两合公司 用于音频数据处理的方法、设备和系统
DE212014000045U1 (de) 2013-02-07 2015-09-24 Apple Inc. Sprach-Trigger für einen digitalen Assistenten
US10051120B2 (en) 2013-12-20 2018-08-14 Ultratec, Inc. Communication device and methods for use by hearing impaired
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
KR20160000345A (ko) * 2014-06-24 2016-01-04 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9712934B2 (en) 2014-07-16 2017-07-18 Eariq, Inc. System and method for calibration and reproduction of audio signals based on auditory feedback
US10111005B2 (en) 2014-08-03 2018-10-23 Even Inc. Method and device for modifying audio signals based on hearing capabilities of the listener
US11026602B2 (en) * 2014-09-19 2021-06-08 Bitwave Pte Ltd System for hearing sensitivity testing and auto reinforcement
US9560465B2 (en) * 2014-10-03 2017-01-31 Dts, Inc. Digital audio filters for variable sample rates
US10258260B2 (en) * 2014-12-18 2019-04-16 Widex A/S Method of testing hearing and a hearing test system
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
WO2016166743A1 (en) * 2015-04-17 2016-10-20 Meq Inc. A method and device for conducting a self-administered hearing test
KR102460393B1 (ko) * 2015-04-30 2022-11-01 삼성전자주식회사 사운드 출력 기기, 전자 장치 및 그 제어 방법
US10936277B2 (en) * 2015-06-29 2021-03-02 Audeara Pty Ltd. Calibration method for customizable personal sound delivery system
US10028065B2 (en) * 2015-07-07 2018-07-17 Cochlear Limited Methods, systems, and device for remotely-processing audio signals
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10631113B2 (en) * 2015-11-19 2020-04-21 Intel Corporation Mobile device based techniques for detection and prevention of hearing loss
US10750293B2 (en) * 2016-02-08 2020-08-18 Hearing Instrument Manufacture Patent Partnership Hearing augmentation systems and methods
CN105704634B (zh) * 2016-02-22 2019-01-01 惠州华阳通用电子有限公司 反馈式音频输出检测方法及装置
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10972847B2 (en) * 2016-11-10 2021-04-06 Honeywell International Inc. Calibration method for hearing protection devices
US10757517B2 (en) 2016-12-19 2020-08-25 Soundperience GmbH Hearing assist device fitting method, system, algorithm, software, performance testing and training
US10952649B2 (en) 2016-12-19 2021-03-23 Intricon Corporation Hearing assist device fitting method and software
US10200800B2 (en) 2017-02-06 2019-02-05 EVA Automation, Inc. Acoustic characterization of an unknown microphone
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK201770411A1 (en) * 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
US10430155B2 (en) * 2017-06-28 2019-10-01 MeQ, Inc. Method of calibrating audio output device with playback of adjusted audio
FR3071149B1 (fr) * 2017-09-21 2021-10-15 France Hearing Systems Systeme de mesure audiometrique a distance et procedes associes pour l'etablissement d'un profil auditif et le reglage des protheses auditives a l'aide d'un tel systeme
DE102017218483A1 (de) * 2017-10-16 2019-04-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren zur einstellung von parametern zur individuellen anpassung eines audiosignals
US10893370B1 (en) * 2018-01-05 2021-01-12 Texas Institute Of Science, Inc. System and method for aiding hearing
JP2021510287A (ja) * 2018-01-05 2021-04-15 オラー、ラスロ 補聴器及びその使用方法
US10993047B2 (en) * 2018-01-05 2021-04-27 Texas Institute Of Science, Inc. System and method for aiding hearing
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10991375B2 (en) 2018-06-20 2021-04-27 Mimi Hearing Technologies GmbH Systems and methods for processing an audio signal for replay on an audio device
EP3584927B1 (en) 2018-06-20 2021-03-10 Mimi Hearing Technologies GmbH Systems and methods for processing an audio signal for replay on an audio device
US11062717B2 (en) 2018-06-20 2021-07-13 Mimi Hearing Technologies GmbH Systems and methods for processing an audio signal for replay on an audio device
EP3614379B1 (en) 2018-08-20 2022-04-20 Mimi Hearing Technologies GmbH Systems and methods for adaption of a telephonic audio signal
US11562330B1 (en) * 2018-08-30 2023-01-24 EAM Tech Solutions, LLC Remote care system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11197105B2 (en) 2018-10-12 2021-12-07 Intricon Corporation Visual communication of hearing aid patient-specific coded information
US11785386B2 (en) 2019-01-03 2023-10-10 Harman International Industries, Incorporated Multistep sound preference determination
US11354604B2 (en) 2019-01-31 2022-06-07 At&T Intellectual Property I, L.P. Venue seat assignment based upon hearing profiles
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
CA3136131A1 (en) * 2019-04-05 2020-10-08 The Medical College Of Wisconsin, Inc. Systems, methods, and media for automatically determining audio gain profiles for fitting personal audio output devices
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
TWI708592B (zh) * 2019-05-09 2020-11-01 原相科技股份有限公司 產生減緩耳鳴影響聲音之方法及執行該方法之耳鳴遮蔽器
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DE102020114026A1 (de) * 2019-06-01 2020-12-03 Apple Inc. Mediensystem und verfahren zur berücksichtigung eines hörverlustes
US11252518B2 (en) 2019-06-01 2022-02-15 Apple Inc. Media system and method of accommodating hearing loss
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11330377B2 (en) 2019-08-14 2022-05-10 Mimi Hearing Technologies GmbH Systems and methods for fitting a sound processing algorithm in a 2D space using interlinked parameters
CN112577590A (zh) * 2019-09-30 2021-03-30 万魔声学科技有限公司 听力保护方法及装置
CA3180685C (en) 2020-04-19 2023-08-29 Alpaca Group Holdings, LLC Systems and methods for remote administration of hearing tests
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
GB2599742A (en) * 2020-12-18 2022-04-13 Hears Tech Limited Personalised audio output
WO2022164423A1 (en) * 2021-01-26 2022-08-04 Hewlett-Packard Development Company, L.P. Audio device calibration
US11665490B2 (en) 2021-02-03 2023-05-30 Helen Of Troy Limited Auditory device cable arrangement
US11830489B2 (en) 2021-06-30 2023-11-28 Bank Of America Corporation System and method for speech processing based on response content
US11425516B1 (en) * 2021-12-06 2022-08-23 Audiocare Technologies Ltd. System and method for personalized fitting of hearing aids

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001026272A2 (en) * 1999-09-28 2001-04-12 Sound Id Internet based hearing assessment methods
CN1390408A (zh) * 1999-09-28 2003-01-08 声音识别公司 数据包交换网络上传送定制的语音音频数据的系统和方法
CN1589588A (zh) * 2001-09-20 2005-03-02 声音识别公司 移动电话及为用户产生个性化音频的其他产品的声音增强
US20100119093A1 (en) * 2008-11-13 2010-05-13 Michael Uzuanis Personal listening device with automatic sound equalization and hearing testing
WO2012016527A1 (en) * 2010-08-05 2012-02-09 The Chinese University Of Hong Kong Method and system for self-managed sound enhancement

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4284847A (en) 1978-06-30 1981-08-18 Richard Besserman Audiometric testing, analyzing, and recording apparatus and method
SE428167B (sv) 1981-04-16 1983-06-06 Mangold Stephan Programmerbar signalbehandlingsanordning, huvudsakligen avsedd for personer med nedsatt horsel
US4759070A (en) * 1986-05-27 1988-07-19 Voroba Technologies Associates Patient controlled master hearing aid
US4879749A (en) 1986-06-26 1989-11-07 Audimax, Inc. Host controller for programmable digital hearing aid system
US5944672A (en) 1998-04-15 1999-08-31 Samsung Electronics Co., Ltd. Digital hearing impairment simulation method and hearing aid evaluation method using the same
SG115411A1 (en) 2000-10-03 2005-10-28 Freesystems Pte Ltd A personal on-demand audio entertainment device that is untethered and allows wireless download of content
US6610019B2 (en) 2001-03-02 2003-08-26 Daniel S. J. Choy Method and apparatus for treatment of monofrequency tinnitus utilizing sound wave cancellation techniques
US20030182000A1 (en) 2002-03-22 2003-09-25 Sound Id Alternative sound track for hearing-handicapped users and stressful environments
US7288072B2 (en) 2002-05-23 2007-10-30 Tympany, Inc. User interface for automated diagnostic hearing test
US7695441B2 (en) 2002-05-23 2010-04-13 Tympany, Llc Automated diagnostic hearing test
EP1622505A4 (en) 2003-05-15 2009-03-11 Tympany Inc COMPUTER-BASED DIAGNOSTIC LISTENING TEST
US7190795B2 (en) * 2003-10-08 2007-03-13 Henry Simon Hearing adjustment appliance for electronic audio equipment
US20050192514A1 (en) 2004-03-01 2005-09-01 Kearby Gerald W. Audiological treatment system and methods of using the same
WO2005125281A1 (en) 2004-06-14 2005-12-29 Johnson & Johnson Consumer Companies, Inc. System for and method of optimizing an individual’s hearing aid
US7613314B2 (en) * 2004-10-29 2009-11-03 Sony Ericsson Mobile Communications Ab Mobile terminals including compensation for hearing impairment and methods and computer program products for operating the same
KR100636213B1 (ko) * 2004-12-28 2006-10-19 삼성전자주식회사 실시간 주파수 특성 보정 방법 및 그를 적용한 사운드재생 장치
US7564979B2 (en) 2005-01-08 2009-07-21 Robert Swartz Listener specific audio reproduction system
KR100647310B1 (ko) 2005-01-26 2006-11-23 삼성전자주식회사 인간의 청각특성에 따른 주파수 특성을 갖는 신호 출력 방법 및 이를 이용한 이명 치료 장치
US20060215844A1 (en) * 2005-03-16 2006-09-28 Voss Susan E Method and device to optimize an audio sound field for normal and hearing-impaired listeners
CN1663528A (zh) 2005-03-25 2005-09-07 四川微迪数字技术有限公司 一种用于耳鸣诊断与治疗的装置
WO2006136174A2 (en) 2005-06-24 2006-12-28 Microsound A/S Methods and systems for assessing hearing ability
CN101410900A (zh) 2006-03-24 2009-04-15 皇家飞利浦电子股份有限公司 用于可佩戴装置的数据处理
WO2008011396A2 (en) 2006-07-18 2008-01-24 Oregon Health & Science University Method and apparatus for tinnitus evaluation
US8472634B2 (en) 2007-04-25 2013-06-25 Daniel R. Schumaier Preprogrammed hearing assistance device with audiometric testing capability
DE102007046020B4 (de) * 2007-09-26 2013-01-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zur Analyse und Synthese von Audiosignalen, insbesondere Tinnitustherapievorrichtung und Tinnitustherapieverfahren
CN101621729A (zh) 2009-07-20 2010-01-06 厦门新声科技有限公司 助听器自我调试方法
CN102111699A (zh) 2011-03-11 2011-06-29 华为终端有限公司 终端及其兼容对讲耳机和立体声耳机的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001026272A2 (en) * 1999-09-28 2001-04-12 Sound Id Internet based hearing assessment methods
CN1390408A (zh) * 1999-09-28 2003-01-08 声音识别公司 数据包交换网络上传送定制的语音音频数据的系统和方法
CN1589588A (zh) * 2001-09-20 2005-03-02 声音识别公司 移动电话及为用户产生个性化音频的其他产品的声音增强
US20100119093A1 (en) * 2008-11-13 2010-05-13 Michael Uzuanis Personal listening device with automatic sound equalization and hearing testing
WO2012016527A1 (en) * 2010-08-05 2012-02-09 The Chinese University Of Hong Kong Method and system for self-managed sound enhancement

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109936999A (zh) * 2016-09-16 2019-06-25 伯斯有限公司 使用家庭睡眠系统进行睡眠评估
TWI630828B (zh) * 2017-06-14 2018-07-21 趙平 供使用者定向交談之智慧型耳機裝置個人化系統及其使用方法
CN107564538A (zh) * 2017-09-18 2018-01-09 武汉大学 一种实时语音通信的清晰度增强方法及系统
CN110351644A (zh) * 2018-04-08 2019-10-18 苏州至听听力科技有限公司 一种自适应声音处理方法及装置
CN110493695A (zh) * 2018-05-15 2019-11-22 群腾整合科技股份有限公司 一种音频补偿系统
CN112352441B (zh) * 2018-06-27 2022-07-12 谷歌有限责任公司 增强型环境意识系统
CN112352441A (zh) * 2018-06-27 2021-02-09 谷歌有限责任公司 增强型环境意识系统
CN110858941B (zh) * 2018-08-22 2021-07-09 Mimi听力技术有限责任公司 用于在音频系统中进行声音增强的系统和方法
CN110858941A (zh) * 2018-08-22 2020-03-03 Mimi听力技术有限责任公司 用于在音频系统中进行声音增强的系统和方法
CN113301872A (zh) * 2018-11-28 2021-08-24 独立生物制药有限公司 通过声音控制提高感知能力的装置和方法
CN114173652A (zh) * 2019-04-30 2022-03-11 重庆中嘉盛世智能科技有限公司 存储器、声学单元及其音频处理方法、装置、设备和系统
CN110459212A (zh) * 2019-06-05 2019-11-15 西安易朴通讯技术有限公司 音量控制方法及设备
CN111031445B (zh) * 2019-11-29 2021-06-29 深圳普罗声声学科技有限公司 音量补偿方法、装置、计算机设备和存储介质
CN111031445A (zh) * 2019-11-29 2020-04-17 深圳普罗声声学科技有限公司 音量补偿方法、装置、计算机设备和存储介质
CN111050261A (zh) * 2019-12-20 2020-04-21 深圳市易优斯科技有限公司 听力补偿方法、装置及计算机可读存储介质
CN113873416A (zh) * 2021-10-15 2021-12-31 歌尔科技有限公司 一种辅听耳机及其增益处理方法、装置及可读存储介质
WO2023060745A1 (zh) * 2021-10-15 2023-04-20 歌尔股份有限公司 一种辅听耳机及其增益处理方法、装置及可读存储介质
WO2024061245A1 (en) * 2022-09-22 2024-03-28 Alex Lau Headphones with sound-enhancement and integrated self-administered hearing test

Also Published As

Publication number Publication date
KR20150104626A (ko) 2015-09-15
US9782131B2 (en) 2017-10-10
EP2944097A4 (en) 2016-11-23
US20140194775A1 (en) 2014-07-10
WO2014108080A1 (en) 2014-07-17
US20150320344A9 (en) 2015-11-12
US20170027522A1 (en) 2017-02-02
JP2016511648A (ja) 2016-04-21
EP2944097A1 (en) 2015-11-18
HK1212534A1 (zh) 2016-06-10
CN104937954B (zh) 2019-06-28
US9468401B2 (en) 2016-10-18

Similar Documents

Publication Publication Date Title
CN104937954A (zh) 用于自管理声音增强的方法和系统
CN103098492B (zh) 用于自我管理的声音增强的方法和系统
US10356535B2 (en) Method and system for self-managed sound enhancement
US20230283969A1 (en) Hearing evaluation and configuration of a hearing assistance-device
US20170223471A1 (en) Remotely updating a hearing aid profile
JP5325994B2 (ja) 補聴器を微調整する方法
US20140309549A1 (en) Methods for testing hearing
KR20160033705A (ko) 이명 치료 데이터를 추적 및 제시하기 위한 시스템들 및 방법들
CN112118485B (zh) 音量自适应调整方法、系统、设备及存储介质
US11595766B2 (en) Remotely updating a hearing aid profile
CN115175076A (zh) 音频信号的处理方法、装置、电子设备及存储介质
KR102236569B1 (ko) 디지털 피아노를 활용한 두뇌 활동관리 시스템

Legal Events

Date Code Title Description
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1212534

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1212534

Country of ref document: HK