CN114175142A - 音频输出装置和使用该装置的音频输出系统 - Google Patents
音频输出装置和使用该装置的音频输出系统 Download PDFInfo
- Publication number
- CN114175142A CN114175142A CN202080054186.2A CN202080054186A CN114175142A CN 114175142 A CN114175142 A CN 114175142A CN 202080054186 A CN202080054186 A CN 202080054186A CN 114175142 A CN114175142 A CN 114175142A
- Authority
- CN
- China
- Prior art keywords
- audio output
- listener
- unit
- head
- related transfer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K15/00—Acoustics not otherwise provided for
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/301—Automatic calibration of stereophonic sound system, e.g. with test microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/033—Headphones for stereophonic communication
- H04R5/0335—Earpiece support, e.g. headbands or neckrests
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
- H04S7/304—For headphones
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Geometry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Stereophonic System (AREA)
Abstract
[问题]提供了一种能够通过高质量双耳播放向给定收听者即时提供音频的音频输出装置。[解决方案]本发明的音频输出装置被配置为可佩戴在收听者身上,并且包括一对输出单元和图像捕获部件。这对输出单元被配置为能够在佩戴音频输出装置的佩戴状态下分别向收听者的耳朵输出使用头部相关传递函数生成的音频输出信号。图像捕获部件被提供给这对输出单元中的至少一个,并且被配置为能够在处于佩戴状态时捕获收听者的耳朵的图像,以生成用于计算头部相关传递函数的图像。在这种配置中,使用被提供给这对输出单元的图像捕获部件,使得能够在收听者打开音频输出装置之后生成收听者的耳朵的图像,该图像用于计算头部相关传递函数。因此,该音频输出装置能够通过高质量双耳播放向给定的收听者即时提供音频。
Description
技术领域
本技术涉及一种可穿戴式音频输出设备和一种使用该设备的音频输出系统。
背景技术
双耳播放技术已经引起了注意,该技术能够允许收听者通过诸如耳机和耳塞等可佩戴型音频输出设备输出音频信号来感知特定空间中的声音图像位置。对于双耳播放,使用头部相关传递函数,该函数表示声音如何从周围空间传递到收听者双耳的耳膜。
众所周知,由于收听者之间的耳朵形状差异,头部相关传递函数具有显著的个体差异。根据专利文献1中描述的技术,使用通过便携式终端装置等的内置相机对收听者的耳朵成像而预先生成的图像来计算头部相关传递函数,使得可以通过高质量双耳播放向给定收听者提供声音。
引用列表
专利文献
专利文献1:WO 2017/047309
发明内容
技术问题
然而,专利文献1中描述的技术需要在向收听者输出音频信号之前生成收听者耳朵的图像,并通过使用该图像来计算头部相关传递函数。因此,在这种技术中,很难通过双耳播放立即向耳朵形状未知的新收听者提供声音。
鉴于上述情况,本技术的目的是提供一种能够通过高质量双耳播放向给定收听者即时提供声音的音频输出设备和使用该设备的音频输出系统。
问题的解决方案
为了实现上述目的,根据本技术实施例的音频输出设备被配置为可佩戴在收听者身上,并且包括一对输出单元和成像单元。
这对输出单元被配置为能够在佩戴音频输出设备的佩戴状态下分别向收听者的双耳输出使用头部相关传递函数生成的音频输出信号。
成像单元设置在一对输出单元中的至少一个输出单元中,并且被配置为能够通过对佩戴状态下的收听者的耳朵进行成像来生成图像,图像用于计算头部相关传递函数。
在该配置中,在一对输出单元中使用成像单元使得能够在收听者佩戴音频输出设备之后生成用于计算头部相关传递函数的收听者耳朵的图像。因此,该音频输出设备可以通过高质量的双耳播放向给定的收听者即时提供声音。
音频输出设备还可以包括检测佩戴状态的检测单元。
音频输出设备还可以包括成像控制单元,该成像控制单元基于检测单元的检测结果来驱动成像单元。
音频输出设备还可以包括计算单元,该计算单元通过使用由成像单元生成的图像来计算头部相关传递函数。
音频输出设备还可以包括生成单元,该生成单元通过使用头部相关传递函数来生成音频输出信号。
音频输出设备还可以包括校正单元,其中,已经记录了具有减少成像单元对来自这对输出单元的音频输出信号的输出的影响的效果的校正功能。
这对输出单元可以在佩戴状态下覆盖收听者的耳朵。
成像单元可以包括照射器,该照射器在佩戴状态下向收听者的耳朵发射光。
根据本技术实施例的音频输出系统包括音频输出设备、计算单元和生成单元。
音频输出设备被配置为可佩戴在收听者身上,并且包括:一对输出单元,这对输出单元被配置为能够在佩戴音频输出设备的佩戴状态下分别向收听者的双耳输出使用头部相关传递函数生成的音频输出信号;以及成像单元,所述成像单元设置在所述一对输出单元中的至少一个输出单元中,并且被配置为能够通过对佩戴状态下的收听者的耳朵进行成像来生成图像,所述图像用于计算头部相关传递函数。
计算单元通过使用由成像单元生成的图像来计算头部相关传递函数。
生成单元通过使用头部相关传递函数来生成音频输出信号。
音频输出系统还可以包括:记录单元,其中,登记由计算单元计算的头部相关传递函数;以及确定单元,所述确定单元确定对应于由成像单元生成的图像的头部相关传递函数是否已经登记在记录单元中。
附图说明
图1根据本技术的实施例的音频输出设备的透视图;
图2是从内部示出音频输出设备的输出单元的平面图;
图3是示出使用音频输出设备的音频输出系统的配置的框图;
图4是示出音频输出系统的操作的流程图;
图5是示出音频输出设备的另一实施例的前视图;
图6是示出音频输出设备的另一实施例的前视图;
图7是示出音频输出设备的另一实施例的前视图;
图8是示出音频输出设备的另一实施例的前视图;
图9是示出音频输出设备的计算单元的处理的另一实施例的示图;
图10是示出将在音频输出系统的另一实施例中使用的信息处理设备的配置的框图;
图11是示出音频输出系统的另一实施例的操作的流程图。
具体实施方式
[音频输出设备1和音频输出系统100]
图1是根据本技术实施例的音频输出设备1的透视图。图1所示的音频输出设备1被配置为可佩戴在收听者头部的头顶式耳机。音频输出设备1包括一对第一输出单元10L和第二输出单元10R以及连接它们的头带20。
输出单元10L和10R位于具有U形的头带20的两个端部,并且彼此向内面对。对于处于佩戴音频输出设备1的佩戴状态的收听者,第一输出单元10L覆盖左耳,第二输出单元10R覆盖右耳,头带20沿左右方向在头部上方延伸。
在音频输出设备1中,输出单元10L和10R具有相似的配置。图2是示出在佩戴状态下从内部面对收听者的耳朵的输出单元10L或10R的平面图。输出单元10L和10R各自包括耳垫11、输出单元12L或12R、成像单元13和检测单元14。
输出单元10L和10R的耳垫11是具有缓冲特性的环形构件。耳垫11在佩戴状态下包围并密封收听者的耳朵。因此,音频输出设备1具有气密式配置,其中,收听者的双耳被气密地密封,并且可以减少从外部环境发出并进入收听者耳朵的声音。
输出单元12L和12R中的每一个被配置为驱动器,该驱动器被布置在耳垫11内部的中间区域中,并且在佩戴状态下朝向收听者的耳朵生成声音。输出单元12L或12R不限于特定的驱动系统,并且例如可以被配置为动态型、平衡电枢型、电容器型等。
成像单元13包括相机13a、照射器13b和保持器13c。相机13a和照射器13b由保持器13c保持。相机13a布置在耳垫11内部空间的中心部分。照射器13b以基本相等的间隔布置在邻近耳垫11内部的三个位置。
相机13a包括成像元件、透镜等,并且被配置为能够在佩戴状态下对收听者的耳朵成像。成像元件不限于特定的一个,并且例如可以是对可见光区域、红外光区域和紫外光区域中的任何一个具有灵敏度的一个。此外,相机13a可以生成多个时序图像,例如,除了静止图像之外的运动图像。
照射器13b包括光源,并且被配置为能够在佩戴状态下朝向收听者的耳朵发射光。光源不限于特定的光源,并且例如,可以使用LED光源、有机EL光源等。此外,由照射器13b发射的光可以是可见光、红外光和紫外光中的任何一种。
利用这种配置,成像单元13可以通过相机13a执行成像,同时通过照射器13b向处于佩戴状态的收听者的耳朵发射光。因此,成像单元13也能够在被输出单元10L或10R覆盖并且光不从外部环境进入的空间中生成收听者耳朵的清晰图像。
检测单元14被配置为能够检测收听者中音频输出设备1的佩戴状态。具体而言,检测单元14包括嵌入耳垫11内部三个位置处的压电元件。因此,音频输出设备1能够基于由检测单元14检测到的添加到耳垫11上的压力来确定是否达到佩戴状态。
图3是示出音频输出系统100的配置的框图。音频输出系统100包括音频输出设备1和信息处理设备2。作为信息处理设备2,可以使用能够执行各种类型的信息处理的任意设备,并且例如,可以使用诸如智能手机、移动电话和平板电脑等便携式终端装置。
音频输出系统100被配置为使得可以在音频输出设备1和信息处理设备2之间执行传输和接收。即,音频输出设备1包括用于向/从信息处理设备2传输和接收信号的传输单元15和接收单元16。此外,信息处理设备2包括用于向/从音频输出设备1传输和接收信号的传输单元21和接收单元22。
此外,音频输出设备1包括控制成像单元13的驱动的成像控制单元17和控制输出单元12L和12R的输出的输出控制单元18。成像控制单元17和输出控制单元18被配置为例如中央处理单元(CPU)、微处理单元(MPU)等,并且可以被整体配置或者可以被单独配置。
成像控制单元17基于检测单元14的检测结果驱动成像单元13。即,成像控制单元17使得成像单元13对收听者的耳朵进行成像,将收听者对音频输出设备1的佩戴运动视为触发。因此,在音频输出设备1中,收听者等没有必要为了对收听者的耳朵成像而执行特殊操作。
输出控制单元18使输出单元12L和12R输出音频输出信号,所述音频输出信号是从信息处理设备2传输的用于双耳播放的音频数据。此外,输出控制单元18可以被配置为能够根据收听者等进行的操作(例如,音量改变、静音)来改变输出单元12L和12R的输出。
此外,音频输出设备1包括校正单元19,其中,已经记录了校正功能,该校正功能具有减少由于产品规格(例如,成像单元13的设置)对音频输出信号的输出的影响的效果。因此,音频输出设备1能够防止由于产品规格导致的声音质量的降低。例如,在音频输出设备1的制造过程中,包含校正单元19,作为只读存储器(ROM)等。
信息处理设备2包括计算单元23、生成单元24和记录单元25。计算单元23计算头部相关传递函数(HRTF)。计算单元23能够通过使用由音频输出设备1的成像单元13生成的收听者耳朵图像来生成对应于收听者耳朵形状的头部相关传递函数。
记录单元25被配置为记录装置,其中,已经记录了作为声源数据的音频输入信号等,以作为用于播放声音图像的目标。生成单元24通过使用由计算单元23计算的上述头部相关传递函数、记录在校正单元19中的校正函数等,生成记录在记录单元25中的音频输入信号和从输出单元12L和12R输出的音频输出信号。
图4是示出使用音频输出设备1的音频输出系统100的操作的流程图。首先,在音频输出设备1中,当检测单元14已经检测到收听者的佩戴状态时(步骤S01),成像控制单元17促使驱动成像单元13,从而对收听者的耳朵进行成像(步骤S02)。
音频输出设备1将在步骤S02中由成像单元13生成的收听者的耳朵图像和记录在校正单元19中的校正功能从传输单元15传输到信息处理设备2。信息处理设备2通过接收单元22接收从音频输出设备1传输的收听者的耳朵图像和校正功能。
在信息处理设备2中,收听者的耳朵图像从接收单元22传输到计算单元23,并且校正功能从接收单元22传输到生成单元24。计算单元23通过使用收听者的耳朵图像来计算与收听者的耳朵形状相对应的头部相关传递函数(步骤S03),并将生成单元24传输到所计算的头部相关传递函数。
生成单元24加载记录在记录单元25中的音频输入信号,并从音频输入信号生成音频输出信号(步骤S04)。具体地,为了从音频输入信号生成音频输出信号,生成单元24执行头部相关传递函数的卷积,并且进一步执行关于音频输入信号的校正函数的卷积。
信息处理设备2将由生成单元24生成的音频输出信号从传输单元21传输到音频输出设备1。音频输出设备1通过接收单元16接收从信息处理设备2传输的音频输出信号,并使输出控制单元18从输出单元12L和12R输出音频输出信号(步骤S05)。
以上述方式,音频输出系统100可以通过高质量双耳播放为具有不同耳朵形状的每个收听者提供声音。此外,在音频输出系统100中,可以在收听者佩戴之后生成对应于耳朵形状的头部相关传递函数,因此可以通过双耳播放向给定的收听者即时提供声音。
[音频输出设备1的另一实施例]
(成像单元13)
音频输出设备1的成像单元13只需要能够对佩戴状态下的收听者的耳朵成像,并且不限于上述配置。例如,成像单元13可以仅提供给输出单元10L和10R中的一个。在这种情况下,音频输出设备1能够基于相对于佩戴状态下的收听者的一只耳朵的图像来估计另一只耳朵的形状。
此外,成像单元13不需要包括照射器13b。在这种情况下,例如,通过采用具有红外相机作为相机13a的配置或者输出单元10L或10R的外壳被制成透明并且来自外部环境的光进入收听者的耳朵的配置,可以通过相机13a生成收听者耳朵的清晰图像。
(检测单元14)
音频输出设备1的检测单元14只需要能够检测收听者的佩戴状态,并且不限于具有如上所述的压电元件的配置。图5是示出包括没有压电元件的检测单元14的音频输出设备1的示例的前视图。在图5所示的音频输出设备1中,检测单元14包括张力传感器。
图5所示的音频输出设备1具有双带结构,并且沿着头带20的内部设置有调节带20a。调节带20a分别通过由弹性材料制成的连接带20b连接到输出单元10L和10R。检测单元14被配置为能够检测连接带20b的张力。
在图5所示的音频输出设备1中,当由收听者佩戴时与头部接触的调节带20a被推向头带20,同时延伸连接带20b。因此,图5所示的音频输出设备1能够基于由检测单元14检测到的连接带20b的张力来确定是否达到佩戴状态。
应当注意,音频输出设备1不需要包括检测单元14。在这种情况下,例如,考虑到关于设置在输出单元10L或10R中的操作单元的操作、关于信息处理设备2的输入操作、向左或向右打开输出单元10L或10R的操作等作为触发,音频输出设备1能够通过成像控制单元17驱动成像单元13。
(校正单元19)
音频输出设备1不需要包括校正单元19。在这种情况下,例如,音频输出设备1可以从信息处理设备2、云等获取校正功能。此外,在由于诸如成像单元13的布置的产品规格而对音频输出信号的输出的影响较小的情况下,音频输出设备1不需要使用校正功能。
(整体配置)
音频输出设备1不需要是密封型的,并且可以是开放式的。图6是示出被配置为开放式耳机的音频输出设备1的示例的前视图。在图6所示的音频输出设备1中,输出单元10L和10R形成向外部环境开放的空间,而不形成气密密封收听者耳朵的空间。
更具体地,在图6所示的音频输出设备1中,在输出单元10L和10R中设置在输出单元12L和12R与耳垫11之间形成间隙的柱状部分P。由于柱状部分P的周边是敞开的,所以输出单元10L和10R内部的空间通过由柱状部分P形成的间隙与外部空间连通。
图6所示的音频输出设备1可以提供宽的声场,在输出单元10L和10R内部的空间中没有减弱声音。此外,在图6所示的音频输出设备1中,外部光进入输出单元10L和10R内部的空间,并且因此也可以采用成像单元13没设置有照射器13b的配置。
此外,在图6所示的音频输出设备1中,输出单元10L和10R内部的成像单元13能够通过由柱状部分P形成的间隙对外部环境进行成像。特别地,在成像单元13中,相机13a的超广角镜头的使用使得收听者的耳朵和外部环境能够同时成像。
此外,音频输出设备1是可由收听者佩戴的可佩戴型,并且包括能够向佩戴状态下的收听者的双耳输出声音的一对输出单元10L和10R就足够了,并且不限于头顶式耳机。图7和图8是示出具有不同于头顶式耳机的配置的音频输出设备1的示例的前视图。
图7所示的音频输出设备1被配置为具有U形主体部分的颈部扬声器。在图7所示的音频输出设备1中,通过收听者从脖子后面将主体部分放在肩膀上来佩戴,构成主体部分的两个端部的输出单元10L和10R的输出单元12L和12R面向位于它们上方的收听者的左右耳朵。
在图7所示的音频输出设备1中,成像单元13分别设置在输出单元10L和10R中与输出单元12L和12R相邻的位置,使得处于佩戴状态的收听者的左耳和右耳包括在视角中。因此,同样利用图7所示的音频输出设备1,处于佩戴状态的收听者的耳朵可以由成像单元13成像。
图8所示的音频输出设备1被配置为耳道式耳机,其中,输出单元10L和10R的输出单元12L和12R被插入耳孔中。在图8所示的音频输出设备1中,成像单元13经由保持构件H附接到输出单元10L和10R,从而能够在佩戴状态下对收听者的耳朵成像。
应当注意,音频输出设备1还可以被配置为例如除了耳道式耳机之外的内耳式耳机、耳挂式耳机等。可替代地,音频输出设备1的输出单元12L和12R能够通过收听者的骨传导输出声音。可替代地,音频输出设备1可以与诸如眼镜的另一配置整体配置。
(额外配置)
音频输出设备1可以根据需要的方式设置有上述配置。例如,音频输出设备1可以设置有各种传感器,例如,陀螺仪传感器、加速度传感器和地磁传感器。因此,音频输出设备1能够实现根据收听者的头部运动来切换声音图像方向的头部跟踪功能。
图9是示出计算单元23通过各种传感器的处理的具体示例的示图。在图9A中,关于正常佩戴音频输出设备1的收听者C,示出了收听者C面向前方的状态(左图)和收听者C以角度α面向上方的状态(右图)。如图9B所示,由成像单元13捕获的耳朵图像G在这两种状态下是相似的。
图9C示出了用于计算头部相关传递函数的将由计算单元23使用的耳朵图像。计算单元23对图像G应用校正,以倾斜对应于例如从陀螺仪传感器获取的头部角度α的量。即,计算单元23在头部角度α为零的状态下原样使用图像G(左图),并且在另一状态下使用倾斜对应于头部角度α的量的图像G1(右图)。
因此,在计算单元23中,可以减少由收听者C的姿势等的趋势引起的声音图像方向的偏差。应当注意,在计算单元23中,将基于头部角度α的校正应用于耳朵图像G的配置不是必需的,并且即使利用将基于头部角度α的校正应用于基于耳朵图像G计算的头部相关传递函数的角度的标签的配置,也可以获得类似的效果。
此外,在计算单元23中,通过利用头部角度α连续执行校正,可以防止声音图像方向由于收听者C的姿势的变化(运动)而偏离。此外,监视连续获取的头部角度α并使用关于平均值等的信息执行校正,使得计算单元23能够进一步有效地减少声音图像方向的偏离。
计算单元23从各种传感器获取的头部角度α不限于如上所述的收听者C的仰角。计算单元23只需要能够获取收听者C的仰角、俯角或方位角中的至少一个,作为由各种传感器检测的头部角度α,并且有利地能够获取收听者C的所有仰角、俯角和方位角。
此外,音频输出设备1可以设置有能够对外部环境成像的外部相机。因此,连续获取外部环境的图像并执行同时定位和映射(SLAM),使得音频输出设备1能够输出取决于收听者的位置或姿势的变化的声音。
[信息处理设备2的另一实施例]
信息处理设备2只需要能够生成对应于收听者的耳朵形状的音频输出信号,并且不限于上述配置。图10是示出与上述不同的信息处理设备2的示例的配置的框图。在图10所示的信息处理设备2中,仅使用耳朵图像作为新收听者的初始设置,来计算头部相关传递函数。
除了图3所示的各个配置之外,图10所示的信息处理设备2还包括在接收单元22和计算单元23之间连接的确定单元26。在图10所示的信息处理设备2中,由计算单元23计算的头部相关传递函数登记在记录单元25中,并且确定单元26确定对应于耳朵图像的头部相关传递函数是否已经登记在记录单元25中。
图11是示出使用图10所示的信息处理设备2的音频输出系统100的操作的流程图。在图11所示的流程中,步骤S01、S02、S04和S05与图4相同,并且执行步骤S10(步骤S11至S14)来代替图4所示的步骤S03。
在步骤S10中,确定单元26首先确定对应于耳朵图像的头部相关传递函数是否已经登记在记录单元25中(步骤S11)。在已经登记了头部相关传递函数的情况下,头部相关传递函数从记录单元25加载到生成单元24中(步骤S12)。在尚未登记头部相关传递函数的情况下,计算单元23计算头部相关传递函数(步骤S13)。
然后,由计算单元23计算的头部相关传递函数登记在记录单元25中(步骤S14)。因此,可以从第二次开始省略计算单元23对收听者的头部相关传递函数的计算。然后,登记在记录单元25中的头部相关传递函数被加载到生成单元24中(步骤S12)。
应当注意,在捕获用于计算头部相关传递函数的耳朵图像时,收听者C的头部角度α(见图9)可以记录在记录单元25中。在这种情况下,在已经登记了头部相关传递函数的情况下,确定单元26计算此时的头部角度α和登记时的头部角度α之间的差,并且可以通过使用计算结果来校正用于头部跟踪的角度信息。
[音频输出系统100的另一实施例]
音频输出系统100只需要能够实现与上述类似的功能,并且不限于上述配置。例如,音频输出系统100可以在音频输出设备1中包括信息处理设备2的一些上述配置。或者,音频输出系统100可以仅由包括信息处理设备2的所有上述配置的音频输出设备1构成。
此外,音频输出系统100可以使云具有它的一些功能。例如,音频输出系统100可以使云具有信息处理设备2的上述配置的一些功能。或者,音频输出系统100可以使云具有信息处理设备2的上述配置的所有功能,并且音频输出设备1可以被配置为能够直接与云通信。
此外,音频输出系统100可以被配置为能够通过使用由成像单元13生成的收听者的耳朵图像生成的头部相关传递函数来执行个人认证。因此,音频输出系统100能够例如允许利用信息处理设备2中关于经认证的收听者的网络服务。
[其他实施例]
应当注意,本技术也可以采用以下配置。
(1)一种音频输出设备,音频输出设备被配置为可佩戴在收听者身上,包括:
一对输出单元,一对输出单元被配置为能够在佩戴音频输出设备的佩戴状态下,分别向收听者的双耳输出使用头部相关传递函数生成的音频输出信号;以及
成像单元,成像单元设置在一对输出单元中的至少一个输出单元中,并且被配置为能够通过对在佩戴状态下的收听者的耳朵进行成像来生成图像,图像用于计算头部相关传递函数。
(2)根据(1)所述的音频输出设备,还包括
检测单元,检测单元检测佩戴状态。
(3)根据(2)所述的音频输出设备,还包括
成像控制单元,成像控制单元基于检测单元的检测结果驱动成像单元。
(4)根据(1)至(3)中任一项所述的音频输出设备,还包括
计算单元,计算单元通过使用由成像单元生成的图像来计算头部相关传递函数。
(5)根据(1)至(4)中任一项所述的音频输出设备,还包括
生成单元,生成单元通过使用头部相关传递函数来生成音频输出信号。
(6)根据(1)至(5)中任一项所述的音频输出设备,还包括
校正单元,其中已经记录校正功能,校正功能具有降低成像单元对来自一对输出单元的音频输出信号的输出的影响的效果。
(7)根据(1)至(6)中任一项所述的音频输出设备,其中,
一对输出单元在佩戴状态下覆盖收听者的耳朵,并且
成像单元包括照射器,照射器在佩戴状态下向收听者的耳朵发射光。
(8)一种音频输出系统,包括:
音频输出设备,音频输出设备被配置为可佩戴在收听者身上,包括
一对输出单元,一对输出单元被配置为能够在佩戴音频输出设备的佩戴状态下,分别向收听者的双耳输出使用头部相关传递函数生成的音频输出信号;以及
成像单元,成像单元设置在一对输出单元中的至少一个输出单元中,并且被配置为能够通过对在佩戴状态下的收听者的耳朵进行成像来生成图像,图像用于计算头部相关传递函数;
计算单元,计算单元通过使用由成像单元生成的图像来计算头部相关传递函数;以及
生成单元,生成单元通过使用头部相关传递函数来生成音频输出信号。
(9)根据(8)所述的音频输出系统,还包括:
记录单元,其中登记由计算单元计算的头部相关传递函数;以及
确定单元,确定单元确定对应于由成像单元生成的图像的头部相关传递函数是否已经登记在记录单元中。
附图标记列表
1音频输出设备
10L、10R输出单元
11耳垫
12L、12R输出单元
13成像单元
14检测单元
15传输单元
16接收单元
17成像控制单元
18输出控制单元
19校正单元
2信息处理设备
21传输单元
22接收单元
23计算单元
24生成单元
25记录单元
26确定单元
100音频输出系统
Claims (9)
1.一种音频输出设备,所述音频输出设备被配置为可佩戴在收听者身上,包括:
一对输出单元,所述一对输出单元被配置为能够在佩戴所述音频输出设备的佩戴状态下,分别向收听者的双耳输出使用头部相关传递函数生成的音频输出信号;以及
成像单元,所述成像单元设置在所述一对输出单元中的至少一个输出单元中,并且被配置为能够通过对在佩戴状态下的所述收听者的耳朵进行成像来生成图像,所述图像用于计算所述头部相关传递函数。
2.根据权利要求1所述的音频输出设备,还包括
检测单元,所述检测单元检测所述佩戴状态。
3.根据权利要求2所述的音频输出设备,还包括
成像控制单元,所述成像控制单元基于所述检测单元的检测结果驱动所述成像单元。
4.根据权利要求1所述的音频输出设备,还包括
计算单元,所述计算单元通过使用由所述成像单元生成的所述图像来计算所述头部相关传递函数。
5.根据权利要求1所述的音频输出设备,还包括
生成单元,所述生成单元通过使用所述头部相关传递函数来生成所述音频输出信号。
6.根据权利要求1所述的音频输出设备,还包括
校正单元,所述校正单元中已经记录校正功能,所述校正功能具有降低所述成像单元对来自所述一对输出单元的所述音频输出信号的输出的影响的效果。
7.根据权利要求1所述的音频输出设备,其中,
所述一对输出单元在所述佩戴状态下覆盖所述收听者的耳朵,并且
所述成像单元包括照射器,所述照射器在所述佩戴状态下向所述收听者的耳朵发射光。
8.一种音频输出系统,包括:
音频输出设备,所述音频输出设备被配置为可佩戴在收听者身上,包括
一对输出单元,所述一对输出单元被配置为能够在佩戴所述音频输出设备的佩戴状态下,分别向所述收听者的双耳输出使用头部相关传递函数生成的音频输出信号;以及
成像单元,所述成像单元设置在所述一对输出单元中的至少一个输出单元中,并且被配置为能够通过对在所述佩戴状态下的所述收听者的耳朵进行成像来生成图像,所述图像用于计算所述头部相关传递函数;
计算单元,所述计算单元通过使用由所述成像单元生成的所述图像来计算所述头部相关传递函数;以及
生成单元,所述生成单元通过使用所述头部相关传递函数来生成所述音频输出信号。
9.根据权利要求8所述的音频输出系统,还包括:
记录单元,其中登记由所述计算单元计算的所述头部相关传递函数;以及
确定单元,所述确定单元确定对应于由所述成像单元生成的所述图像的头部相关传递函数是否已经登记在所述记录单元中。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019-142880 | 2019-08-02 | ||
JP2019142880 | 2019-08-02 | ||
PCT/JP2020/027720 WO2021024747A1 (ja) | 2019-08-02 | 2020-07-16 | 音響出力装置、及びこれを用いた音響出力システム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114175142A true CN114175142A (zh) | 2022-03-11 |
Family
ID=74504056
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080054186.2A Pending CN114175142A (zh) | 2019-08-02 | 2020-07-16 | 音频输出装置和使用该装置的音频输出系统 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220264242A1 (zh) |
CN (1) | CN114175142A (zh) |
DE (1) | DE112020003687T5 (zh) |
WO (1) | WO2021024747A1 (zh) |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8045727B2 (en) * | 2005-09-30 | 2011-10-25 | Atmel Corporation | Headset power management |
US7756281B2 (en) * | 2006-05-20 | 2010-07-13 | Personics Holdings Inc. | Method of modifying audio content |
WO2012028906A1 (en) * | 2010-09-03 | 2012-03-08 | Sony Ericsson Mobile Communications Ab | Determining individualized head-related transfer functions |
WO2016089133A1 (ko) * | 2014-12-04 | 2016-06-09 | 가우디오디오랩 주식회사 | 개인 특징을 반영한 바이노럴 오디오 신호 처리 방법 및 장치 |
JP6687032B2 (ja) | 2015-09-14 | 2020-04-22 | ヤマハ株式会社 | 耳形状解析方法、頭部伝達関数生成方法、耳形状解析装置および頭部伝達関数生成装置 |
SG10201510822YA (en) * | 2015-12-31 | 2017-07-28 | Creative Tech Ltd | A method for generating a customized/personalized head related transfer function |
US9955279B2 (en) * | 2016-05-11 | 2018-04-24 | Ossic Corporation | Systems and methods of calibrating earphones |
US10104491B2 (en) * | 2016-11-13 | 2018-10-16 | EmbodyVR, Inc. | Audio based characterization of a human auditory system for personalized audio reproduction |
-
2020
- 2020-07-16 WO PCT/JP2020/027720 patent/WO2021024747A1/ja active Application Filing
- 2020-07-16 CN CN202080054186.2A patent/CN114175142A/zh active Pending
- 2020-07-16 DE DE112020003687.1T patent/DE112020003687T5/de active Pending
- 2020-07-16 US US17/628,309 patent/US20220264242A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
DE112020003687T5 (de) | 2022-06-09 |
US20220264242A1 (en) | 2022-08-18 |
WO2021024747A1 (ja) | 2021-02-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10555106B1 (en) | Gaze-directed audio enhancement | |
US11825272B2 (en) | Assistive listening device systems, devices and methods for providing audio streams within sound fields | |
US10419843B1 (en) | Bone conduction transducer array for providing audio | |
US20150092952A1 (en) | Audio Device and Control Method | |
US11082765B2 (en) | Adjustment mechanism for tissue transducer | |
US10231053B1 (en) | Bone-conduction headset with crosstalk cancelation function | |
US11178481B2 (en) | Ear-plug assembly for hear-through audio systems | |
KR20210092757A (ko) | 이동형 디바이스들의 지향성 무선 링크들을 유지하기 위한 시스템들 및 방법들 | |
US20240056733A1 (en) | Audio system for suppressing leakage signal from in-ear device | |
US10824390B1 (en) | Methods and system for adjusting level of tactile content when presenting audio content | |
US11782502B2 (en) | Head tracking system | |
WO2019198194A1 (ja) | 音声出力装置 | |
CN115244947A (zh) | 音响再现方法、程序及音响再现系统 | |
CN114175142A (zh) | 音频输出装置和使用该装置的音频输出系统 | |
JP2022546161A (ja) | 個別化された空間オーディオを作り出すためにビームフォーミングを介して耳殻情報を推論すること | |
KR20230038406A (ko) | 무선 음향 기기를 제어하는 단말기 및 그 방법 | |
US20150078602A1 (en) | Hearing loss compensation apparatus including external microphone | |
KR20230107829A (ko) | 긴 레버 쌍극들을 갖는 오디오 조립체 | |
KR20220062546A (ko) | 촉각 콘텐트를 제어하는 방법 및 시스템 | |
US20240118107A1 (en) | Dynamic signal tuning for active noise cancellation | |
TW202329700A (zh) | 具有藉由空氣傳導換能器驅動的組織換能器之音訊系統 | |
KR20240057284A (ko) | 스피커 모듈 및 이를 포함하는 전자 장치 | |
KR20160086704A (ko) | 전자디바이스 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |