CN106663448A - 信号处理装置和信号处理方法 - Google Patents
信号处理装置和信号处理方法 Download PDFInfo
- Publication number
- CN106663448A CN106663448A CN201580036691.3A CN201580036691A CN106663448A CN 106663448 A CN106663448 A CN 106663448A CN 201580036691 A CN201580036691 A CN 201580036691A CN 106663448 A CN106663448 A CN 106663448A
- Authority
- CN
- China
- Prior art keywords
- frequency
- signal
- detecting
- audio signal
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 44
- 238000003672 processing method Methods 0.000 title claims description 15
- 230000005236 sound signal Effects 0.000 claims abstract description 111
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 12
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims abstract description 11
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 11
- 238000001514 detection method Methods 0.000 claims abstract description 10
- 239000000284 extract Substances 0.000 claims abstract description 7
- 238000000034 method Methods 0.000 claims description 29
- 230000008569 process Effects 0.000 claims description 21
- 230000001965 increasing effect Effects 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 5
- 230000009467 reduction Effects 0.000 claims description 5
- 230000003362 replicative effect Effects 0.000 claims description 4
- 238000001228 spectrum Methods 0.000 description 74
- 230000008859 change Effects 0.000 description 24
- 230000006835 compression Effects 0.000 description 24
- 238000007906 compression Methods 0.000 description 24
- 238000005259 measurement Methods 0.000 description 19
- 238000012937 correction Methods 0.000 description 18
- 238000000605 extraction Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 8
- 230000008447 perception Effects 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 7
- 238000000611 regression analysis Methods 0.000 description 7
- 238000005070 sampling Methods 0.000 description 7
- 150000001875 compounds Chemical class 0.000 description 5
- 230000010076 replication Effects 0.000 description 5
- 241000208340 Araliaceae Species 0.000 description 4
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 4
- 235000003140 Panax quinquefolius Nutrition 0.000 description 4
- 230000015556 catabolic process Effects 0.000 description 4
- 238000006731 degradation reaction Methods 0.000 description 4
- 235000008434 ginseng Nutrition 0.000 description 4
- 238000012417 linear regression Methods 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000000116 mitigating effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 230000002401 inhibitory effect Effects 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
- G10L21/0324—Details of processing therefor
- G10L21/0332—Details of processing therefor involving modification of waveforms
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L21/0232—Processing in the frequency domain
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/038—Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
- G10L21/0388—Details of processing therefor
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Tone Control, Compression And Expansion, Limiting Amplitude (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
提供给了一种信号处理装置,其设置有:频率检测单元,其从音频信号检测满足预定条件的频率;补偿单元,其根据频率检测单元的检测出的频率或者在检测出的频率周围的频率特性,对检测出的频率进行补偿;参考信号生成单元,其基于由补偿单元补偿的检测出的频率,从音频信号提取信号以生成参考信号;内插信号生成单元,其基于生成的参考信号来生成内插信号;以及信号合成单元,其将生成的内插信号与音频信号合成以执行音频信号的高频率内插。
Description
技术领域
本发明涉及如下的信号处理装置和信号处理方法,其通过生成内插信号并且将内插信号与音频信号合成,从而对音频信号的高频带分量进行内插。
背景技术
已知有损压缩格式,例如MP3(MPEG音频层-3)、WMA(Windows媒体音频TM)以及AAC(增强音频编码)作为压缩音频信号的格式。对于有损压缩格式,通过明显地切断接近可听到频带的上限或者超过可听到频带的上限的高频率分量来获得高压缩速率。在这种类型的技术被开发的时代初期,已经认为即使当明显地削减高频分量,听觉感受方面的声音质量也不变差。然而,近年来,与原始声音相比,明显地削减高频分量引起声音质量的微小变化并由此听觉感受方面的声音质量变差的想法已经成为主流。在这种情况下,高频带内插装置通过对已经经受有损压缩的音频信号内插高频带来增强声音质量。例如,在日本专利临时公开文本第2007-25480A号(在下文中,称作为专利文件1)和PCT公开文本的国内再版第2007-29796A1号(在下文中,称作为专利文件2)中,描述了这种类型的高频带内插装置的具体配置。
在专利文件1中描述的高频带内插装置计算通过分析音频信号(原始信号)获得的信号的实部和虚部,基于计算的实部和虚部来形成原始信号的包络分量,并且提取形成的包络分量的较高谐波分量。在专利文件1中描述的高频带内插装置通过将提取出的较高谐波分量与原始信号合成,从而对原始信号的高频带执行内插。
在专利文件2中描述的高频带内插装置将音频信号的频谱反相,对频谱反相的信号进行上采样,并且基于上采样的信号来提取较低频率边缘大约等于基带信号的高频带的扩展频带分量。在专利文件2中描述的高频带内插装置通过将提取出的扩展频带分量与基带信号合成,从而对基带信号的高频带执行内插。
发明内容
通过有损压缩而进行压缩的音频信号的频带根据压缩编码格式、采样速率或者在压缩编码之后的比特率来变化。因此,如专利文件1所述的,当通过对音频信号和具有固定频带的内插信号进行合成来执行高频带内插时,根据音频信号在高频带内插之前的频带,音频信号在高频带内插之后的频谱变得不连续。因而,在专利文件1中所述的高频带内插装置通过将音频信号经受高频带内插,而可能在听觉感受方面相反地使得声音质量变差。
尽管音频信号具有如通常特性的高频率区域很大程度地衰减的特性,但是也存在音频信号的电平在高频率侧立即增大的情况。然而,在专利文件2中,仅将音频信号的前述通常特性考虑为输入至装置的音频信号的特性。因此,具有电平在高频率侧上增加的特性的音频信号被输入至装置之后,音频信号的频谱立即变得不连续,且因此过度地突显了高频带。因而,如在专利文件1所述的高频带内插装置的情况下,专利文件2中所示的高频带内插装置通过将音频信号经受高频带内插而可能相反地使得在听觉感受方面的声音质量变差。
音频信号不仅包括有损压缩格式的音频信号,还包括无损压缩格式的音频信号以及CD(光盘)声源或者高清晰度声源(例如,DVD(数字通用盘)音频和SACD(超音频CD))的音频信号。存在的问题在于,当在专利文件1或者专利文件2中所述的技术应用至这些音频信号时,通过将这些音频信号经受高频带内插,也会相反地引起在听觉感受方面的声音质量变差。
结合上述情况提出了本发明。即,本发明的目标是提供一种适用于利用对音频信号的高频带内插来实现声音质量的提高的信号处理装置和信号处理方法。
根据本发明的一个实施方案的信号处理装置包括:频率检测单元,其从音频信号检测满足预定条件的频率;补偿单元,其根据在检测出的频率处或者检测出的频率周围的频率特性对由频率检测单元检测出的频率给出补偿;参考信号生成单元,其基于由补偿单元补偿的检测出的频率,通过从音频信号提取信号来生成参考信号;内插信号生成单元,其基于生成的参考信号来生成内插信号;以及信号合成单元,其通过将生成的内插信号与音频信号合成来执行高频带内插。
补偿单元可以检测音频信号在检测出的频率处或者检测出的频率周围的斜率特性,以及可以根据检测出的斜率特性来对检测出的频率改变补偿量。
补偿单元可以对检测出的频率设定补偿量,使得随着音频信号在检测出的频率处或者在检测出的频率周围的衰减更加适度,补偿量变得更大。
参考信号生成单元可以从音频信号提取与从检测出的频率朝向较低频率侧延伸n%的范围相对应的信号,并且利用提取出的信号来生成参考信号。
频率检测单元可以计算音频信号中的第一频率区域的电平、以及音频信号中比第一频率区域更高的第二频率区域的电平,可以基于第一频率区域和第二频率区域计算出的电平来设定阈值,并且可以将电平低于设定的阈值的电平的频率检测为满足预定条件的频率。
频率检测单元可以将如下频率点处的频率检测为满足预定条件的频率:在电平低于阈值的电平的至少一个频率点中的最高频率侧上的频率点。
内插信号生成单元可以在对由参考信号生成单元生成的参考信号执行通过窗函数的加权和重叠处理之后,复制参考信号;可以对通过复制增加的多个参考信号并排地布置于比检测出的频率更高的频带;并且可以根据音频信号的频率特性,对并排布置的多个参考信号的每个频率分量执行加权,从而生成内插信号。
根据实施方案的信号处理装置可以进一步包括:噪声降低单元,其在通过内插信号生成单元对参考信号进行复制之前,降低包括在参考信号中的噪声。
根据一个实施方案的信号处理装置可以进一步包括对音频信号进行滤波的滤波单元。在这种情况下,信号合成单元可以通过将内插信号与由滤波单元滤波的音频信号合成,从而对音频信号执行高频带内插。滤波单元可以配置为使得音频信号的截止频率根据检测出的频率而变化。
根据本发明的一个实施方案的信号处理方法包括:频率检测步骤,其从音频信号检测满足预定条件的频率;补偿步骤,其根据在检测出的频率处或者检测出的频率周围的频率特性对由频率检测步骤检测出的频率给出补偿;参考信号生成步骤,其基于由补偿步骤补偿的检测出的频率,通过从音频信号提取信号来生成参考信号;内插信号生成步骤,其基于声测很难过的参考信号来生成内插信号;以及信号合成步骤,其通过将生成的内插信号与音频信号合成来执行高频带内插。
根据本发明的实施方案,提供了一种适用于利用对音频信号的高频带内插来实现声音质量的提高的信号处理装置和信号处理方法。
附图说明
图1为图示了根据本发明的实施方案的声音处理装置的配置的框图。
图2为图示了根据本发明的实施方案的设置于声音处理装置的高频带内插单元的配置的框图。
图3为根据本发明的实施方案的关于设置于高频带内插单元的频带检测单元的操作的辅助解释的图。
图4图示了根据本发明的实施方案的输入至频带检测单元的高压缩音频信号的阈值频率与复合频谱之间的关系(上部的图),并且图示了高压缩音频信号的频率与信号电平(信号レベル)的变化率之间的关系(下部的图)。
图5图示了根据本发明的实施方案的输入至频带检测单元的高压缩音频信号的阈值频率与复合频谱之间的关系(上部的图),并且图示了高压缩音频信号的频率与信号电平的变化率之间的关系(下部的图)。
图6中的(a)至图6中的(h)示出了工作波形(图6中的(a)至图6中的(h)),用于解释根据本发明的实施方案的直到对输入至设置于高频带内插单元的参考信号提取单元的复合频谱执行高频带内插为止,所执行的一系列处理。
图7图示了补偿量与在阈值频率处或者阈值频率周围的信号电平的变化率之间的关系。
图8中的(a)和图8中的(b)示出了工作波形(图8中的(a)和图8中的(b)),其用于解释根据本发明的实施方案的设置于高频带内插单元的内插信号生成单元的操作。
图9中的(a)和图9中的(b)为解释图示(图9中的(a)和图9中的(b)),其用于解释根据本发明的实施方案的由设置于高频带内插单元的第一噪声降低电路执行的噪声去除处理。
图10中的(a)至图10中的(d)为解释图示(图10中的(a)至图10中的(d)),其用于解释根据本发明的实施方案的由设置于高频带内插单元的第二噪声降低电路执行的噪声去除处理。
图11中的(a)至图11中的(c)为情况1的解释图示(图11中的(a)至图11中的(c)),其用于解释在本发明的实施方案中根据频率斜率、通过对阈值频率进行补偿处理所获得的有利效果。
图12中的(a)至图12中的(c)为情况2的解释图示(图12中的(a)至图12中的(c)),其用于解释在本发明的实施方案中对参考信号通过窗函数进行加权和重叠处理所获得的有利效果。
图13中的(a)和图13中的(b)为情况3的解释图示(图13中的(a)和图13中的(b)),其用于解释在本发明的实施方案中通过第一噪声降低电路来进行噪声去除处理所获得的有利效果。
图14中的(a)至图14中的(c)为情况4的解释图示(图14中的(a)至图14中的(c)),其用于解释在本发明的实施方案中通过第二噪声降低电路来进行噪声去除处理所获得的有利效果。
具体实施方式
在以下内容中,参照所附附图来描述根据实施方案的声音处理装置1。
(声音处理装置1的整体配置)
图1为图示了根据实施方案的声音处理装置1的配置的框图。如图1所示,声音处理装置1包括:FFT(快速傅里叶变换)单元10、高频带内插单元20和IFFT(快速傅里叶逆变换)单元30。
对FFT单元10输入例如,将通过对有损压缩格式的编码信号解码所获得的音频信号、通过对无损压缩格式的编码信号解码所获得的音频信号、或者CD声源或者高清晰度声源(诸如DVD音频和SACD)的音频信号。有损压缩格式为例如,MP3、WMA或者AAC。无损压缩格式例如为WMAL(MWA无损)、ALAC(AppleTM无损音频编码解码器)、或者AAL(ATRAC高级无损TM)。为了便于解释,有损压缩格式的频率信号被称作为“高压缩音频信号”,并且具有关于比高压缩音频信号更高频域的信息,以及例如为无损压缩格式的音频信号、高清晰度声源的音频信号以及不满足诸如CD-DA(44.1kHz/16比特)的高清晰度声源的规格的音频信号的音频信号被称作为“高质量音频信号”。
FFT单元10将输入的音频信号进行重叠处理并且通过窗函数进行加权,将处理的信号通过STFT(短时傅里叶变换)从时域转换成频域,并且获得包括实数和虚数的复合频谱,以及将复合频谱输出至高频带内插单元20。高频率内插处理单元20对从FFT单元10输入的复合频谱单元的高频带进行内插,并且将所得的复合频谱输出至IFFT单元30。在高压缩音频信号的情况下,由高频带内插单元20内插的频带为例如超过或者接近可听到的频带中在有损压缩的处理期间明显削减的上限的频带。在高质量音频信号的情况下,通过高频带内插单元20内插的频带为例如超过或者接近可听到的频带的上限并且包括电平适当衰减的频带。FFT单元30基于通过高频带内插单元20内插的高频带的复合频谱,从而获得复合频谱的实数和虚数,并且通过窗函数来执行加权。IFFT单元30通过执行STFT并且对加权的信号重叠叠加,从而执行从时域到频域的信号转换,以及生成并输出进行内插的高频带的音频信号。
(高频带内插单元20的配置)
图2为图示了高频带内插单元20的配置的框图。如图2所示,高频带内插单元20包括:频带检测单元210、参考信号提取单元220、参考信号校正单元230、内插信号生成单元240、内插信号校正单元250、加法单元260、第一噪声降低电路270、以及第二噪声降低电路280。为了便于解释,在以下内容中,附图标记被分配至高频带内插单元20的每个单元的输入信号和输出信号。
图3为关于频带检测单元210的操作的辅助解释的图,并且示出从FFT单元10输入至频带检测单元210的复合频谱S的示例。在图3中,竖直轴(y轴)表示信号电平(单位:dB),并且水平轴(x轴)表示频率(单位:Hz)。
频带检测单元210将从FFT单元10输入的音频信号的复合频谱S(线性度量)转换成分贝度量。为了防止复合频谱S的局部波动的发生,频带检测单元210使转换成分贝度量的复合频谱S平滑。频带检测单元210计算平滑的复合频带S的预定低和中范围以及预定高范围的信号电平,并且基于低和中范围以及高范围的计算出的信号电平来设定阈值。例如,如图3所示,阈值处在低和中范围的信号电平(平均值)与高范围的信号电平(平均值)之间的中间电平。
频带检测单元210从FFT单元10输入的复合频谱(线性度量)中检测低于阈值的频率点。如图3所示,当存在多个低于阈值的频率点时,频带检测单元210检测在较高频带侧的频率点(图3的示例中的频率ft)。为了便于解释,在以下内容中,由阈值检测出的频率(在该示例中的频率ft)被称作为“阈值频率Fth”。应当注意的是,为了抑制生成不期望的内插信号,当满足以下条件(1)至(3)中的至少一个时,频带检测单元210判断出不需要生成内插信号。
(1)检测的阈值频率Fth低于或等于预定的频率。
(2)高范围的信号电平高于或等于预定值。
(3)低和中范围的信号电平与高范围的信号电平之间的差低于或等于预定值。
对于判断出不需要生成内插信号的复合频谱S,不执行高频带内插。
在图4的上部,图示了阈值频率Fth与从FFT单元10输入至频带检测单元210的高压缩音频信号的复合频谱S之间的关系。在图4的下部,图示了频率与高压缩音频信号的信号电平的变化率β之间的关系。在图5的上部,图示了阈值频率Fth与从FFT单元10输入至频带检测单元210的高质量音频信号的复合频谱S之间的关系。在图5的下部,图示了频率与高质量音频信号的信号电平的变化率β之间的关系。变化率β是通过使用高通滤波器来区分复合频谱S而获得的。在图4和图5的上部所示的每个示意图中,竖直轴(y轴)表示信号电平(单位:dB),并且水平轴(x轴)表示频率(单位:Hz)。此外,在图4和图5的下部所示的每个示意图中,竖直轴(y轴)表示信号电平的变化率(单位:dB),并且水平轴(x轴)表示频率(单位:Hz)。
关于高压缩音频信号,为了减少信息量,在阈值频率Fth周围的高压缩信号的高频带明显被削减(参见图4的上部),并且阈值频率Fth周围的信号电平的变化率β较大(参见图4的下部)。另一方面,对于高质量音频信号,在阈值频率Fth周围的信号电平具有相对缓和的频率斜率的形式(参见图5的上部),并且在阈值频率Fth周围的信号电平的变化率β较小(参见图5的下部)。
通过第一噪声降低电路270和第二噪声降低电路280去除了噪声的复合频谱S被输入至参考信号提取单元220。为了便于解释,在以下内容中,通过第一噪声降低电路270降低噪声之后的复合频谱S被分配附图标记S’,并且通过第二噪声降低电路280降低噪声之后的复合频谱S’被分配附图标记S”。随后解释关于第一噪声降低电路270和第二噪声降低电路280进行噪声降低处理的细节。此外,从频带检测单元210输入的关于后补偿频率Fth’的信息被输入至参考信号提取单元220。随后也将解释关于后补偿频率Fth’的细节。
图6(a)至图6(h)示出了用于解释直到对复合频谱S”执行高频带内插为止所执行的一系列处理的工作波形,所述复合频谱S”输入至参考信号提取单元220。在图6(a)至图6(h)的每个中,竖直轴(y轴)表示信号电平(单位:dB),并且水平轴(x轴)表示频率(单位:Hz)。
考虑参考信号提取单元220基于关于阈值频率Fth的信息来从复合频谱S”提取参考信号Sb的情况。在这种情况下,例如,从整个复合频谱S”中,将在从阈值频率Fth至较低频率侧延伸n%(0<n)的范围内的复合频谱提取为参考信号Sb。因此,由于在当检测到阈值频率Fth时设定的阈值频率Fth周围的复合频谱S”的频率斜率的影响,所以存在参考信号Sb不具有适当的信号电平的可能性。具体地,当参考信号Sb为高质量音频信号时,质量受到在阈值频率Fth周围的频率斜率影响的质量的变差程度较大,且因此,参考信号Sb可能不具有适当的信号电平。
针对该原因,频带检测单元210将依据在阈值频率Fth周围的频率斜率的补偿量α应用至检测出的阈值频率Fth,并且将补偿之后的阈值频率Fth(后补偿频率Fth’)输出至参考信号提取单元220。参考信号提取单元220从整个复合频谱S”中将在从补偿频率Fth’延伸至较低频率侧n%范围内的复合频谱提取为参考信号Sb(参见图6(a))。因此,防止由于在阈值频率Fth周围的频率斜率引起的参考信号Sb的质量变差。
图7图示了补偿量α与在阈值频率Fth周围(或者在阈值频率Fth处)的信号电平的变化率β之间的关系。应当注意的是,在阈值频率Fth周围的变化率β为例如在包括阈值频率Fth的预定范围内的平均值。在图7中,竖直轴(y轴)表示补偿量α(单位:Hz),并且水平轴(x轴)表示信号电平的变化率β(单位:dB)。如图7所示,在关于信号电平的变化率β的-50dB至0dB的范围内,补偿量α在0Hz至-3kHz的范围内变化。补偿量α的绝对值随着变化率β变得更大(随着频率斜率变得更陡)而变得更小,并且补偿量α的绝对值随着变化率β变得更小(随着频率斜率变得更缓和)而变得更大。
具体地,在图4中所示的高压缩音频信号的示例中,信号电平的变化率较大(频率斜率较陡),并且由于在阈值频率Fth周围的频率斜率而引起的参考信号Sb的质量变差基本上为零。因此,补偿量α为零。相应地,参考信号提取单元220将在从等于阈值频率Fth的后补偿频率Fth’起延伸至较低频率侧n%的范围内的复合频谱提取为参考信号Sb。
另一方面,在图5中所示的高质量音频信号的示例中,信号电平的变化率β较小(频率斜率缓和),并且由于在阈值频率Fth周围的频率斜率而引起的参考信号Sb的质量变差较大。因此,补偿量α为-3kHz。相应地,参考信号提取单元220将在从比阈值频率Fth低3kHz的后补偿频率Fth’起延伸至较低频率侧n%的范围内的复合频谱提取为参考信号Sb。因此,如图6(a)所示,消除了在阈值频率Fth周围的频率斜率的影响,并且参考信号Sb的电平变为足够的(适当的)信号电平。
存在的问题在于,当通过基于语音频带(例如,正常语音)的信号生成的内插信号来执行高频带内插时,信号的声音质量通过改变至趋于对于听觉感受给出不舒服感觉的声音质量而变差。通过对比,根据实施方案,复合频率S”变得越窄,参考信号Sb的频带变得越窄。因此,能够抑制引起声音质量变差的语音频带的提取。
参考信号提取单元220将从复合频带S”提取出的参考信号Sb的频率移位至较低频率侧(DC侧)(参见图6(b)),并且将频率已经被移位的参考信号Sb输出至参考信号校正单元230。
参考信号校正单元230将从参考信号提取单元220输入的参考信号Sb(线性度量)转换成分贝度量,并且对转换成分贝度量的参考信号Sb,通过线性回归分析来检测频率斜率。参考信号校正单元230计算通过线性回归分析检测出的频率斜率的逆特性(参照参考信号Sb对每个频率的加权量)。具体地,当关于参考信号Sb对每个频率的加权量被定义为p1(x)时,在水平轴(x轴)上的频域FFT的采样点被定义为x,由线性回归分析检测出的参考信号Sb的频率斜率的值被定义为α1,与参考信号Sb的频带相对应的FFT的采样数量的1/2被定义为β1,参考信号校正单元230通过以下等式(1)来计算频率斜率的逆特性(关于参考信号Sb对每个频率的加权量p1(x))。
(等式(1))
p1(x)=-α1x+β1
如图6(c)所示,关于参考信号Sb对每个频率的加权量p1(x)以分贝度量来获得。参考信号校正单元230将以分贝度量获得的加权量p1(x)转换成线性度量。参考信号校正单元230将转换成线性度量的加权量p1(x)与从参考参考信号提取单元220输入的参考信号Sb(线性度量)一起相乘来校正参考信号Sb。具体地,参考信号Sb被校正成具有平坦频率特性的信号(参考信号Sb’)(参见图6(d))。
由参考信号校正单元230校正的参考信号Sb’被输入至内插信号生成单元240。内插信号生成单元240通过将参考信号Sb’扩展至高于阈值频率Fth的频带(换言之,通过复制参考信号Sb'来生成多个参考信号Sb’并且通过布置多个复制的参考信号Sb’以达到高于阈值频率Fth的频带),从而生成包括高频带的内插信号Sc(参见图6(e))。频率信号Sb’被扩展的范围包括例如,靠近可听到频带的上限的频带或者超过可听到频带的上限的频带。
图8(a)和图8(b)图示了用于解释内插信号生成单元240的操作的工作波形。严格地讲,通过内插信号校正单元230校正的参考信号Sb’不具有平坦的频率特性。因此,当参考信号Sb’在内插信号生成单元240被复制成多个频带时,由于幅度的突然改变以及复制的参考信号Sb’之间的相位会引起频带之间的干扰。因此,引起信号沿着相对于真实内插信号Sc的时间轴在先输出的前回声。因此,如图8(a)的上部所示,内插信号生成单元240通过预定的窗函数对参考信号Sb’相乘的频率特性执行加权,并且执行重叠处理。因此,频带之间的信号电平差和相位差降低,并且频带之间的干扰降低。
应当注意的是,当在图8(a)的上部所示的参考信号Sb’被复制到多个频带而没有变化时,内插信号将具有纹波。因此,内插信号生成单元240相对于参考信号Sb’的峰值而将参考信号Sb’分为两部分,并且将在高频率侧的划分信号与在较低频率侧的划分信号相互替换(参见图8(a)的下部)。然后,内插信号生成单元240将通过窗函数加权之后的参考信号Sb’(参见图8(a)的上部)与替换之后的参考信号(参见图8(a)的下部)合成,并且在频带之间执行重叠处理。因此,获得具有更平坦的频率特性的参考信号Sb’(参见图8(b))。对于因而获得的参考信号Sb’,即使当参考信号Sb’被复制到多个频带时,也不会引起频带之间的干扰,并且也不生成前回声。即,获得具有平坦频率特性的内插信号Sc。
在内插信号生成单元240中生成的内插信号Sc被输入至内插信号校正单元250。此外,复合频谱S’从第一噪声降低电路270输入至内插信号校正单元250,并且关于后补偿频率Fth’的信息从频带检测单元210输入。
内插信号校正单元250将从第一噪声降低电路270输入的复合频谱S’(线性度量)转换成分贝度量,并且通过线性回归分析来检测转换成分贝度量的复合频谱S’的频率斜率。应当注意的是,当内插信号校正单元250检测出频率斜率时,内插信号校正单元250不利用关于比后补偿频率Fth’更高频带侧的信息。可以任意地设置回归分析的范围;然而,为了将音频信号的较高频带侧与内插信号平滑地连接,典型地,回归分析的范围对应于除了较低频带分量之外的预定频带。内插信号校正单元250根据对应于检测出的频率斜率的频带和回归分析的范围,从而对每个频率计算加权量。具体地,当关于内插信号Sc的每个频率的加权量被定义为p2(x),在频域中FFT的水平轴(x轴)上的采样点被定义为x,FFT的采样长度被定义为s,回归分析的范围的上限频率被定义为b,FFT的采样长度被定义为s,在与回归分析的范围相对应的频带中的频率斜率值被定义为α2,以及预定的校正系数被定义为k时,内插信号校正单元250通过以下等式2来计算关于内插信号Sc的每个频率的加权量p2(x)。
(等式(2))
P2(x)=-α’x+β2
其中:
α'=α2-(1-(b/s))/k
β2=-αb
当x<b时,p2(x)=-∞
如图6(f)所示,关于参考信号Sc的每个频率的加权量p2(x)以分贝度量来获得。内插信号校正单元250将为分贝度量的加权量p2(x)转换成线性度量。内插信号校正单元250通过将转换成线性度量的加权量p2(x)与在内插生成单元240中生成的内插信号Sc(线性度量)一起相乘,从而校正内插信号Sc。如图6(g)中的示例所示的,校正之后的内插信号Sc’为相对于后补偿频率Fth’的高频带侧上的信号,并且具有朝向较高频带侧衰减的特性。
从FFT单元10通过第一噪声降低电路270的复合频谱S’以及来自内插信号校正单元250的内插信号Sc’被输入至加法单元260。复合频谱S’为高频带分量被明显削减的音频信号的复合频谱或者关于高频带分量的信息量较小的音频信号的复合频谱。内插信号Sc’为关于高于音频信号的频带的频率区域的复合频带。加法单元260通过将复合频谱S’和内插信号Sc’合成来生成内插高频带的音频信号的复合频谱SS(参见图6(h)),并且将生成的音频信号的复合频谱SS输出至IFFT单元30。
因而,根据实施方案,参考信号Sb是基于依据阈值频率Fth周围的频率斜率进行补偿的后补偿频率Fth’,从复合频谱S”中提取出的。因此,抑制了由于频率斜率引起的参考信号Sb的质量变差,且因此能够生成具有高质量的内插信号Sc’。相应地,无论输入至FFT单元10的音频信号的频率特性如何,都能够对音频信号执行高频带内插,由此提供了具有连续变化的正常衰减特性的频谱,并且能够在听觉感受方面实现声音质量的提高。
此外,由于在实施方案中对参考信号Sb’执行重叠处理和通过窗函数进行加权,所以能够抑制频带之间干扰引起的前回声的发生。即,由于抑制了被引起为高频带内插的负面影响的前回声,所以能够在听觉感受方面实现声音质量的提高。
同时,根据声源的记录环境或者音频设备的影响,会存在如下的情况:由采样频谱的转换所引起的混叠噪声(折叠噪声)和不期望的正弦波噪声被混合至在超过阈值频率Fth的频带中从声源输入的音频信号中。图9(a)示出混合了这种类型的噪声的音频信号的复合频谱S的示例。由于图9(a)中例示的正弦波噪声和混叠噪声引起声音质量变差,所以期望的是消除这种噪声。
针对该原因,第一噪声降低电路270包括低通滤波器,其中,截止频率根据阈值频率Fth而能够变化。具体地,第一噪声降低电路270基于关于从频带检测单元210输入的阈值频率Fth的信息,从而对从FFT单元10输入的复合频谱S进行滤波,并且将滤波的复合频谱S’输出至后阶段的电路。
图9(b)示出通过阈值频率Fth对图9(a)中例示的复合频谱S进行滤波所获得的复合频谱S’。如图9(b)所示,在复合频谱S’中,正弦波噪声和混叠噪声通过第一噪声降低电路270被去除。因此,能够抑制由正弦波噪声和混叠噪声引起的声音质量的变差。
此外,由于声源的记录环境或者音频设备的影响,会存在如下的情况:在关于阈值频率Fth的较低频带侧上,不期望的正弦波被混合至从声源输入的音频信号中。作为示例,图10(a)示出混合了这种类型的噪声的音频信号的复合频谱S。
在图10(a)所示的示例中,噪声被混合至提取为参考信号Sb的频带。当基于混合了这种噪声的参考信号Sb来执行高频带内插时,噪声被叠加至已经经受高频带内插的音频信号上,噪声的数量根据对参考信号Sb’的复制处理的数量而增加,如图10(b)所示。
针对该原因,在本实施方案中,在将参考信号Sb’至多个频带的复制处理的前阶段,提前降低混合至参考信号Sb的噪声。具体地,第二噪声降低电路280将复合频谱S’(其已经对于各个STFT输入多次并且从低频带至高频带变化)转换成幅度频谱和相位频谱。第二噪声降低电路280通过滤波处理,从而对每个转换的幅度分量抑制恒定分量(即,DC分量和DC周围的波动分量)。第二噪声降低电路280将抑制的幅度频谱和相位频谱再次转换成复合频谱。如图10(c)所示,所得的复合频谱S”使得仅恒定分量(例如,正弦波)被抑制。当通过基于已经抑制了正弦波等的参考信号Sb来生成内插信号,从而执行高频带内插时,能够抑制在参考信号Sb’的复制处理期间的噪声增加,如图10(d)所示。因此,能够抑制由正弦波噪声引起的的声音质量的变差。
(工作参数的示例)
在下文中,示出根据实施方案的声音处理装置1的工作参数的示例。本文中例示的工作参数应用至以下所述的情况1至4。应当注意的是,在情况1至4的每个中所处理的音频信号为高质量音频信号。
(FFT单元10/IFFT单元30)
采样频率:96kHz
采样长度:8,192个采样
窗函数:汉明
重叠长度:75%
(频带检测单元210)
最小控制频率:7kHz
低和中频带范围:2kHz-6kHz
高频带范围:46kHz-48kHz
高频带电平判断:-40dB
信号电平差:30dB
阈值:0.5
主高通滤波器的标准截止频率:0.005
(参考信号提取单元220)
参考频带宽度:6kHz
(内插信号生成单元240)
窗函数:汉明
(内插信号校正单元250)
下限频率:500Hz
校正系数k:0.01
(第一噪声降低电路270)
响应于阈值频率Fth的可变低通滤波器
(第二噪声降低电路280)
主高通滤波器的标准截止频率:0.01
“采样频率(=96kHz)”表示通过STFT,转换成频域的频率的FFT的采样点。“最小控制频率(=7kHz)”表示当通过频带检测单元210检测出的阈值频率Fth小于7kHz时,不执行高频带内插。“高频带电平判断(=-40dB)”表示当高频带中的信号电平高于或等于-40dB时,不执行高频带内插。“信号电平差(=30dB)”表示当低和中频带范围与高频带范围之间的信号电平差小于或等于30dB时,不执行高频带内插。“阈值(=0.5)”表示用于检测阈值频率Fth的阈值为低和中频带范围的信号电平(平均值)与高频带范围的信号电平(平均值)之间的中间值。频带检测单元210的“主高通滤波器的标准截止频率”为当检测出变化率β时设定的值。“参考频带宽度(=6kHz)”为与“最小控制频率(=7kHz)”相对应的参考信号Sb的频带宽度。“下限频率(=500Hz)”表示通过内插信号校正单元250进行的回归分析的范围的下限(即,低于500Hz的区域不包括在回归分析的范围内)。
(情况1)
图11(a)至图11(c)为用于解释情况1的解释图示。在图11(a)至图11(c)的每个中,竖直轴(y轴)表示信号电平(单位:dB),并且水平轴(x轴)表示频率(单位:kHz)。在情况1中,解释了通过引入针对取决于频率斜率的阈值频率Fth的补偿处理所获得的有利效果。
图11(a)示出了输入至高频带内插单元20的音频信号的复合频谱S。由于在图11(a)中所示的复合频谱S为高质量音频信号的频谱,所以在高频带侧的频率斜率(大约22kHz至25kHz)不陡峭,而是相对缓和。
图11(b)和图11(c)的每个示出了关于图11(a)所示的输入(复合频谱S)的输出(复合频谱SS)。图11(b)示出了当不执行根据频率斜率的针对阈值频率Fth的补偿处理时提供的输出。图11(c)示出了当执行根据频率斜率的针对阈值频率Fth的补偿处理时提供的输出。
如图11(b)所示,当不执行根据频率斜率的针对阈值频率Fth的补偿处理时,复合频谱S’不平滑地连接至频域中的内插信号Sc’(在22kHz至25kHz周围引起空隙),并且朝向内插区域(高频带)的衰减变得异常。另外,由于参考信号Sb不具有足够的(适当的)信号电平,所以内插区域的衰减失去连续性并且变得异常。
通过对比,如图11(c)所示,当执行根据频率斜率的针对阈值频率Fth的补偿处理时,复合频谱S’不平滑地连接至频域中的内插信号Sc’,并且朝向内插区域(高频带)的衰减变得正常。另外,由于参考信号Sb具有足够的(适当的)信号电平,所以内插区域的衰减变得连续和正常。
(情况2)
图12(a)至图12(c)为用于解释情况2的解释图示(光谱图)。在图12(a)至图12(c)的每个中,竖直轴(y轴)表示频率(单位:kHz),并且水平轴(x轴)表示时间(或者采样数量)(单位:毫秒),着色的阴影表示功率(单位:dB)。在情况2中,解释了通过相对于参考信号Sb’进行窗函数加权并且进行重叠处理所获得的有利效果。
图12(a)示出了在情况2下输入至声音处理装置1的音频信号的光谱图。
图12(b)和图12(c)的每个示出了关于图12(a)所示的输入的声音处理装置1的输出。图12(b)为在情况2下不相对于参考信号Sb’执行重叠处理和通过窗函数进行加权时所提供的输出。图12(c)示出在情况2下,当相对于参考信号Sb’执行重叠处理和通过窗函数的加权时所提供的输出。
如图12(b)所示,当不执行相对于参考信号Sb’的重叠处理和通过窗函数的加权时,由频带之间的干扰会引起前回声(在图12(b)中,细的线状分量沿着高频侧的时间轴方向延伸)。
通过对比,如图12(c)所示,当执行相对于参考信号Sb’的重叠处理和通过窗函数的加权时,抑制了由频带之间的干扰所引起的前回声的发生。
(情况3)
图13(a)和图13(b)为用于解释情况3的解释图示。在图13(a)和图13(b)的每个中,竖直轴(y轴)表示信号电平(单位:dB),并且水平轴(x轴)表示频率(单位:kHz)。在情况3中,解释了通过引入由第一噪声降低电路270进行的噪声降低处理所获得的有利效果。
图13(a)示出在情况3中输入至第一噪声降低电路270的音频信号的复合频谱S。如图13(a)所示,在情况3中,正弦波噪声和混叠噪声包含在复合频谱S中。
图13(b)示出在情况3中通过第一噪声降低电路270输出的音频信号的复合频谱S’。如图13(b)所示,通过第一噪声降低电路270去除了正弦波噪声和混叠噪声。
(情况4)
图14(a)至图14(c)为用于解释情况4的解释图示。在图14(a)至图14(c)的每个中,竖直轴(y轴)表示信号电平(单位:dB),并且水平轴(x轴)表示频率(单位:kHz)。在情况4中,解释了通过引入由第二噪声降低电路280进行的噪声降低处理所获得的有利效果。
图14(a)示出了在情况4中输入至高频带内插单元20的音频信号的复合频谱S。在图14(a)中所示的复合频谱S中,正弦波噪声混合至被提取为参考信号Sb的频带中。
图14(b)和图14(c)中的每个示出了关于图14(a)所示的输入(复合频谱S)的输出(复合频谱SS)。图14(b)示出了在情况4中当不执行通过第二噪声降低电路280的噪声降低处理时所提供的输出。图14(c)示出了在情况4中当执行通过第二噪声降低电路280的噪声降低处理时所提供的输出。
如图14(b)所示,当不执行通过第二噪声降低电路280的噪声降低处理时,根据参考信号Sb’的复制处理的数量增加的噪声被叠加在复合频谱SS上。
通过对比,如图14(c)所示,当执行通过第二噪声降低电路280的噪声降低处理时,抑制了在参考信号Sb’的复制处理期间噪声的增加。
前述内容是关于本发明的实施方案的解释。本发明不限制于上述实施方案,而在本发明的范围内可以采用各种方式进行变化。例如,本发明的实施方案包括在本说明书中清楚描述的实施方案以及易于从上述实施方案中实现的实施方案的组合。例如,在实施方案中,参考信号校正单元230利用线性归回分析来校正具有在频率区域中单调增加或衰减特性的参考信号Sb。然而,参考信号Sb的特性不限制于线性特性,也可以为非线性特性。考虑到对在频域中具有重复增加和衰减特性的参考信号Sb进行校正的情况。在这种情况下,参考信号校正单元230通过执行升序的回归分析来计算逆特性,并且通过利用计算出的逆特性来校正参考信号Sb。
Claims (18)
1.一种信号处理装置,其包括:
频率检测单元,其从音频信号检测满足预定条件的频率;
补偿单元,其根据在检测出的频率处或者检测出的频率周围的频率特性对由频率检测单元检测出的频率给出补偿;
参考信号生成单元,其基于由补偿单元补偿的检测出的频率,通过从音频信号提取信号来生成参考信号;
内插信号生成单元,其基于生成的参考信号来生成内插信号;以及
信号合成单元,其通过将生成的内插信号与音频信号合成来执行高频带内插。
2.根据权利要求1所述的信号处理装置,
其中,补偿单元检测音频信号在检测出的频率处或者检测出的频率周围的斜率特性,以及
根据检测出的斜率特性来对检测出的频率改变补偿量。
3.根据权利要求2所述的信号处理装置,
其中,补偿单元针对检测出的频率设定补偿量,使得随着音频信号在检测出的频率处或者在检测出的频率周围的衰减更加适度,补偿量变得更大。
4.根据权利要求1至3中的任一项所述的信号处理装置,
其中,参考信号生成单元从音频信号提取与从检测出的频率朝向较低频率侧延伸n%的范围相对应的信号,并且利用提取出的信号来生成参考信号。
5.根据权利要求1至4中的任一项所述的信号处理装置,
其中,频率检测单元计算音频信号中的第一频率区域的电平、以及音频信号中比第一频率区域更高的第二频率区域的电平,
基于第一频率区域和第二频率区域计算出的电平来设定阈值,以及
将电平低于设定的阈值的电平的频率检测为满足预定条件的频率。
6.根据权利要求5所述的信号处理装置,
其中,频率检测单元将如下频率点处的频率检测为满足预定条件的频率:在电平低于阈值的电平的至少一个频率点中的最高频率侧上的频率点。
7.根据权利要求1至6中的任一项所述的信号处理装置,
其中,内插信号生成单元在对由参考信号生成单元生成的参考信号执行通过窗函数的加权和重叠处理之后,复制参考信号,
对通过复制增加的多个参考信号并排地布置于比检测出的频率更高的频带,以及
根据音频信号的频率特性,对并排布置的多个参考信号的每个频率分量执行加权,从而生成内插信号。
8.根据权利要求7所述的信号处理装置,
进一步包括噪声降低单元,其在通过内插信号生成单元对参考信号进行复制之前,降低包括在参考信号中的噪声。
9.根据权利要求1至8中的任一项所述的信号处理装置,
进一步包括滤波单元,其对音频信号进行滤波,
其中:
信号合成单元通过将内插信号与由滤波单元滤波的音频信号合成,从而对音频信号执行高频带内插;以及
滤波单元配置为使得音频信号的截止频率根据检测出的频率而变化。
10.一种信号处理方法,其包括:
频率检测步骤,其从音频信号检测满足预定条件的频率;
补偿步骤,其根据在检测出的频率处或者检测出的频率周围的频率特性对由频率检测步骤检测出的频率给出补偿;
参考信号生成步骤,其基于由补偿步骤补偿的检测出的频率,通过从音频信号提取信号来生成参考信号;
内插信号生成步骤,其基于生成的参考信号来生成内插信号;以及
信号合成步骤,其通过将生成的内插信号与音频信号合成来执行高频带内插。
11.根据权利要求10所述的信号处理方法,
其中,补偿步骤包括:
检测音频信号在检测出的频率处或者检测出的频率周围的斜率特性,以及
根据检测出的斜率特性来对检测出的频率改变补偿量。
12.根据权利要求11所述的信号处理方法,
其中,补偿步骤包括针对检测出的频率设定补偿量,使得随着在检测出的频率处或者在检测出的频率周围的音频信号的衰减更加适度,补偿量变得更大。
13.根据权利要求10至12中的任一项所述的信号处理方法,
其中,参考信号生成步骤包括:
从音频信号提取与从检测出的频率朝向较低频率侧延伸n%的范围相对应的信号;以及
利用提取出的信号来生成参考信号。
14.根据权利要求10至13中的任一项所述的信号处理方法,
其中,频率检测步骤包括:
计算音频信号中的第一频率区域的电平、以及音频信号中比第一频率区域更高的第二频率区域的电平;
基于第一频率区域和第二频率区域计算出的电平来设定阈值;以及
将电平低于设定的阈值的电平的频率检测为满足预定条件的频率。
15.根据权利要求14所述的信号处理方法,
其中,频率检测步骤将如下频率点处的频率检测为满足预定条件的频率:在电平低于阈值的电平的至少一个频率点中的最高频率侧上的频率点。
16.根据权利要求10至15中的任一项所述的信号处理方法,
其中,内插信号生成步骤包括:
在对由参考信号生成单元生成的参考信号执行通过窗函数的加权和重叠处理之后,复制参考信号;
对通过复制增加的多个参考信号并排地布置于比检测出的频率更高的频带,以及
根据音频信号的频率特性,对并排布置的多个参考信号的每个频率分量执行加权,从而生成内插信号。
17.根据权利要求16所述的信号处理方法,
进一步包括噪声降低步骤,其在通过内插信号生成步骤对参考信号进行复制之前,降低包括在参考信号中的噪声。
18.根据权利要求10至17中的任一项所述的信号处理方法,
进一步包括滤波步骤,其对音频信号进行滤波,
其中,信号合成步骤包括通过将内插信号与由滤波步骤滤波的音频信号合成,从而对音频信号执行高频带内插,以及
其中,在滤波步骤中,音频信号的截止频率根据检测出的频率而变化。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014138351A JP6401521B2 (ja) | 2014-07-04 | 2014-07-04 | 信号処理装置及び信号処理方法 |
JP2014-138351 | 2014-07-04 | ||
PCT/JP2015/067824 WO2016002551A1 (ja) | 2014-07-04 | 2015-06-22 | 信号処理装置及び信号処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106663448A true CN106663448A (zh) | 2017-05-10 |
CN106663448B CN106663448B (zh) | 2020-09-29 |
Family
ID=55019095
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580036691.3A Active CN106663448B (zh) | 2014-07-04 | 2015-06-22 | 信号处理装置和信号处理方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10354675B2 (zh) |
EP (1) | EP3166107B1 (zh) |
JP (1) | JP6401521B2 (zh) |
CN (1) | CN106663448B (zh) |
WO (1) | WO2016002551A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107154993A (zh) * | 2017-05-16 | 2017-09-12 | 深圳市乃斯网络科技有限公司 | 终端的语音处理方法及系统 |
CN109036449A (zh) * | 2017-06-09 | 2018-12-18 | 恩智浦有限公司 | 在风噪声中检测有意义的声学信号 |
CN109557509A (zh) * | 2018-11-23 | 2019-04-02 | 安徽四创电子股份有限公司 | 一种用于改善脉间干扰的双脉冲信号合成器 |
CN115331683A (zh) * | 2022-08-08 | 2022-11-11 | 北京达佳互联信息技术有限公司 | 音频处理方法、装置、电子设备及存储介质 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6401521B2 (ja) * | 2014-07-04 | 2018-10-10 | クラリオン株式会社 | 信号処理装置及び信号処理方法 |
JP6611042B2 (ja) * | 2015-12-02 | 2019-11-27 | パナソニックIpマネジメント株式会社 | 音声信号復号装置及び音声信号復号方法 |
DE102017006980A1 (de) * | 2017-07-22 | 2019-01-24 | Leopold Kostal Gmbh & Co. Kg | Verfahren zum Erkennen einer Annäherung an ein Sensorelement |
DE102017009705A1 (de) * | 2017-10-18 | 2019-04-18 | Leopold Kostal Gmbh & Co. Kg | Verfahren zum Erkennen einer Annäherung an ein Sensorelement |
KR102475989B1 (ko) | 2018-02-12 | 2022-12-12 | 삼성전자주식회사 | 오디오 신호의 주파수의 변화에 따른 위상 변화율에 기반하여 노이즈가 감쇠된 오디오 신호를 생성하는 장치 및 방법 |
CN116821594B (zh) * | 2023-05-24 | 2023-12-05 | 浙江大学 | 基于频谱选择机制的图神经网络工业控制系统异常检测方法及装置 |
Citations (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040059568A1 (en) * | 2002-08-02 | 2004-03-25 | David Talkin | Method and apparatus for smoothing fundamental frequency discontinuities across synthesized speech segments |
JP2005010621A (ja) * | 2003-06-20 | 2005-01-13 | Matsushita Electric Ind Co Ltd | 音声帯域拡張装置及び帯域拡張方法 |
CN1870133A (zh) * | 2005-05-24 | 2006-11-29 | 北京大学科技开发部 | 数字助听器语音频率压缩方法 |
JP2007093677A (ja) * | 2005-09-27 | 2007-04-12 | D & M Holdings Inc | オーディオ信号出力装置 |
JP2007192964A (ja) * | 2006-01-18 | 2007-08-02 | Yamaha Corp | オーディオ信号の帯域拡張装置 |
CN101178898A (zh) * | 2006-11-09 | 2008-05-14 | 索尼株式会社 | 频带扩展装置及方法、播放装置、方法、程序及记录介质 |
US20080262835A1 (en) * | 2004-05-19 | 2008-10-23 | Masahiro Oshikiri | Encoding Device, Decoding Device, and Method Thereof |
US7457757B1 (en) * | 2002-05-30 | 2008-11-25 | Plantronics, Inc. | Intelligibility control for speech communications systems |
WO2009054393A1 (ja) * | 2007-10-23 | 2009-04-30 | Clarion Co., Ltd. | 高域補間装置および高域補間方法 |
US7676043B1 (en) * | 2005-02-28 | 2010-03-09 | Texas Instruments Incorporated | Audio bandwidth expansion |
US20100274564A1 (en) * | 2009-04-28 | 2010-10-28 | Pericles Nicholas Bakalos | Coordinated anr reference sound compression |
CN102047326A (zh) * | 2008-05-29 | 2011-05-04 | 高通股份有限公司 | 用于频谱对比加强的系统、方法、设备及计算机程序产品 |
US20120016667A1 (en) * | 2010-07-19 | 2012-01-19 | Futurewei Technologies, Inc. | Spectrum Flatness Control for Bandwidth Extension |
CN103035250A (zh) * | 2011-09-29 | 2013-04-10 | 瑞萨电子株式会社 | 音频编码装置 |
CN103069484A (zh) * | 2010-04-14 | 2013-04-24 | 华为技术有限公司 | 时/频二维后处理 |
US20130121508A1 (en) * | 2011-11-03 | 2013-05-16 | Voiceage Corporation | Non-Speech Content for Low Rate CELP Decoder |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4701392B2 (ja) | 2005-07-20 | 2011-06-15 | 国立大学法人九州工業大学 | 高域信号補間方法及び高域信号補間装置 |
JP4627548B2 (ja) | 2005-09-08 | 2011-02-09 | パイオニア株式会社 | 帯域拡張装置、帯域拡張方法および帯域拡張プログラム |
US9801552B2 (en) * | 2011-08-02 | 2017-10-31 | Valencell, Inc. | Systems and methods for variable filter adjustment by heart rate metric feedback |
CN104040888B (zh) * | 2012-01-10 | 2018-07-10 | 思睿逻辑国际半导体有限公司 | 多速率滤波器系统 |
JP6305694B2 (ja) * | 2013-05-31 | 2018-04-04 | クラリオン株式会社 | 信号処理装置及び信号処理方法 |
JP6401521B2 (ja) * | 2014-07-04 | 2018-10-10 | クラリオン株式会社 | 信号処理装置及び信号処理方法 |
US9780801B2 (en) * | 2015-09-16 | 2017-10-03 | Semiconductor Components Industries, Llc | Low-power conversion between analog and digital signals using adjustable feedback filter |
-
2014
- 2014-07-04 JP JP2014138351A patent/JP6401521B2/ja active Active
-
2015
- 2015-06-22 US US15/322,194 patent/US10354675B2/en active Active
- 2015-06-22 EP EP15814179.6A patent/EP3166107B1/en active Active
- 2015-06-22 CN CN201580036691.3A patent/CN106663448B/zh active Active
- 2015-06-22 WO PCT/JP2015/067824 patent/WO2016002551A1/ja active Application Filing
Patent Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7457757B1 (en) * | 2002-05-30 | 2008-11-25 | Plantronics, Inc. | Intelligibility control for speech communications systems |
US20040059568A1 (en) * | 2002-08-02 | 2004-03-25 | David Talkin | Method and apparatus for smoothing fundamental frequency discontinuities across synthesized speech segments |
JP2005010621A (ja) * | 2003-06-20 | 2005-01-13 | Matsushita Electric Ind Co Ltd | 音声帯域拡張装置及び帯域拡張方法 |
US20080262835A1 (en) * | 2004-05-19 | 2008-10-23 | Masahiro Oshikiri | Encoding Device, Decoding Device, and Method Thereof |
US7676043B1 (en) * | 2005-02-28 | 2010-03-09 | Texas Instruments Incorporated | Audio bandwidth expansion |
CN1870133A (zh) * | 2005-05-24 | 2006-11-29 | 北京大学科技开发部 | 数字助听器语音频率压缩方法 |
JP2007093677A (ja) * | 2005-09-27 | 2007-04-12 | D & M Holdings Inc | オーディオ信号出力装置 |
JP2007192964A (ja) * | 2006-01-18 | 2007-08-02 | Yamaha Corp | オーディオ信号の帯域拡張装置 |
CN101178898A (zh) * | 2006-11-09 | 2008-05-14 | 索尼株式会社 | 频带扩展装置及方法、播放装置、方法、程序及记录介质 |
WO2009054393A1 (ja) * | 2007-10-23 | 2009-04-30 | Clarion Co., Ltd. | 高域補間装置および高域補間方法 |
EP2209116A1 (en) * | 2007-10-23 | 2010-07-21 | Clarion Co., Ltd. | High range interpolation device and high range interpolation method |
CN102047326A (zh) * | 2008-05-29 | 2011-05-04 | 高通股份有限公司 | 用于频谱对比加强的系统、方法、设备及计算机程序产品 |
US20100274564A1 (en) * | 2009-04-28 | 2010-10-28 | Pericles Nicholas Bakalos | Coordinated anr reference sound compression |
CN103069484A (zh) * | 2010-04-14 | 2013-04-24 | 华为技术有限公司 | 时/频二维后处理 |
US20120016667A1 (en) * | 2010-07-19 | 2012-01-19 | Futurewei Technologies, Inc. | Spectrum Flatness Control for Bandwidth Extension |
CN103035250A (zh) * | 2011-09-29 | 2013-04-10 | 瑞萨电子株式会社 | 音频编码装置 |
US20130121508A1 (en) * | 2011-11-03 | 2013-05-16 | Voiceage Corporation | Non-Speech Content for Low Rate CELP Decoder |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107154993A (zh) * | 2017-05-16 | 2017-09-12 | 深圳市乃斯网络科技有限公司 | 终端的语音处理方法及系统 |
CN109036449A (zh) * | 2017-06-09 | 2018-12-18 | 恩智浦有限公司 | 在风噪声中检测有意义的声学信号 |
CN109036449B (zh) * | 2017-06-09 | 2023-08-25 | 汇顶科技(香港)有限公司 | 在风噪声中检测有意义的声学信号 |
CN109557509A (zh) * | 2018-11-23 | 2019-04-02 | 安徽四创电子股份有限公司 | 一种用于改善脉间干扰的双脉冲信号合成器 |
CN109557509B (zh) * | 2018-11-23 | 2020-08-11 | 安徽四创电子股份有限公司 | 一种用于改善脉间干扰的双脉冲信号合成器 |
CN115331683A (zh) * | 2022-08-08 | 2022-11-11 | 北京达佳互联信息技术有限公司 | 音频处理方法、装置、电子设备及存储介质 |
CN115331683B (zh) * | 2022-08-08 | 2024-10-25 | 北京达佳互联信息技术有限公司 | 音频处理方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP6401521B2 (ja) | 2018-10-10 |
CN106663448B (zh) | 2020-09-29 |
EP3166107B1 (en) | 2018-12-12 |
JP2016017982A (ja) | 2016-02-01 |
US20170140774A1 (en) | 2017-05-18 |
EP3166107A1 (en) | 2017-05-10 |
WO2016002551A1 (ja) | 2016-01-07 |
EP3166107A4 (en) | 2018-01-03 |
US10354675B2 (en) | 2019-07-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106663448A (zh) | 信号处理装置和信号处理方法 | |
EP2232223B1 (en) | Method and apparatus for bandwidth extension of audio signal | |
EP2375785B1 (en) | Stability improvements in hearing aids | |
EP2374126B1 (en) | Regeneration of wideband speech | |
JP4670483B2 (ja) | 雑音抑圧の方法及び装置 | |
CN101976566B (zh) | 语音增强方法及应用该方法的装置 | |
EP2579252B1 (en) | Stability and speech audibility improvements in hearing devices | |
TWI501661B (zh) | 參數式立體聲轉換系統及方法 | |
EP2905778A1 (en) | Echo cancellation method and device | |
KR102563915B1 (ko) | 오디오 신호의 인위적 대역폭 제한 처리와 관련된 미리 결정된 특성을 결정하기 위한 장치 및 방법 | |
JP2008513848A (ja) | 音声信号の帯域幅を疑似的に拡張するための方法および装置 | |
EP2238594A1 (en) | Method and apparatus for estimating high-band energy in a bandwidth extension system | |
CA2550654A1 (en) | Frequency extension of harmonic signals | |
CN106941006B (zh) | 用于音频信号的分离和低音增强的方法、装置和系统 | |
EP3007171B1 (en) | Signal processing device and signal processing method | |
JP2005010621A (ja) | 音声帯域拡張装置及び帯域拡張方法 | |
US8144762B2 (en) | Band extending apparatus and method | |
CN108604454B (zh) | 音频信号处理装置和输入音频信号处理方法 | |
JP2006201622A (ja) | 帯域分割型雑音抑圧装置及び帯域分割型雑音抑圧方法 | |
EP2755205B1 (en) | Sub-band processing complexity reduction | |
Omidi et al. | Speech enhancement using a variable suppression rule in Hilbert domain | |
WO2013050605A1 (en) | Stability and speech audibility improvements in hearing devices |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |