CN103674235A - 基于短时傅里叶变换的单一频率报警声音特征检测方法 - Google Patents

基于短时傅里叶变换的单一频率报警声音特征检测方法 Download PDF

Info

Publication number
CN103674235A
CN103674235A CN201410003377.2A CN201410003377A CN103674235A CN 103674235 A CN103674235 A CN 103674235A CN 201410003377 A CN201410003377 A CN 201410003377A CN 103674235 A CN103674235 A CN 103674235A
Authority
CN
China
Prior art keywords
amplitude
end points
sound
fourier transform
alarm sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410003377.2A
Other languages
English (en)
Other versions
CN103674235B (zh
Inventor
魏树银
高会军
于金泳
孙光辉
吴立刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Institute of Technology
Original Assignee
Harbin Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Institute of Technology filed Critical Harbin Institute of Technology
Priority to CN201410003377.2A priority Critical patent/CN103674235B/zh
Publication of CN103674235A publication Critical patent/CN103674235A/zh
Application granted granted Critical
Publication of CN103674235B publication Critical patent/CN103674235B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

基于短时傅里叶变换的单一频率报警声音特征检测方法,涉及单一频率报警声音特征检测技术。它为了解决传统的检测大噪声下环境下单一频率报警声音特征方法耗时长的问题。本发明首先对原始数据进行分段,对每段音频信号数据进行短时傅里叶变换,以求得每段音频信号的幅值和频率,将每次记录下来的音频信号的幅值连接起来,以得到音频信号的幅值随时间变化的图像,然后根据开始幅值阀值和截止幅值阀值计算音频信号端点,再根据端点计算音频信号的周期、有声时间长度和静音时间长度。本发明采用短时傅里叶变换对音频信号特征进行检测,检测处理速度快,检测时间缩短了90%以上。本发明适用于大噪音环境下的单一频率报警声音特征检测。

Description

基于短时傅里叶变换的单一频率报警声音特征检测方法
技术领域
本发明涉及单一频率报警声音特征检测技术。
背景技术
在工业生产和日常生活中,许多方面都需要用到报警声音。
报警声音通常是单一频率的。一些紧急情况下的报警声音,其频率较高并且幅值保持不变,这种声音听起来比较刺耳,起到警告的作用;普通情况下的报警声音要求是和弦的,即幅值从最大单调减小到最小并保持一段时间,这种声音听起来比较柔和,起到提示的作用,和弦信号可以是周期的,也可以是非周期的。
对于此类单一频率的声音信号,我们首先需要检测它的频率和强度是否符合设计要求。如果信号是和弦信号,还需要检测信号幅值的变化特征是否符合设计要求,需要检测音频信号的端点以及周期的大小。
对于幅值不变的信号,可以先对数据进行一些处理,例如归一化,数字滤波等。然后使用短时傅里叶变换即可得到信号的频率和幅值,处理过程比较简单。
对于和弦信号,由于频率是单一的,用短时傅里叶变化可以得到信号的频率。使用短时能量方法可以得到音频信号幅值的变化规律。使用过零率加短时能量的方法可以得到音频信号的端点和周期。
过零率是一段时间内信号符号发生变化的次数,例如信号从正数变为负数,也可以反过来,在某些情况下,只统计正向或者负向变化的次数,因为两次正向之间必有一次负向,反之亦然。当声音的频率发生变化或者有声变无声,无声变有声时,过零率就会出现差别,可以用于音频端点的检测,能够发挥出很好的作用。
短时能量就是一段时间内信号各个采样点幅值的平方和。短时能量的理论依据是音频信号能量的大小,有声音时音频信号能量大,短时能量大;无声音时音频信号的能量小,短时能量也小。由于待处理的音频信号幅值是从最大开始减小到最小的,因此可以只取两个门限值,超过第一个门限值代表声音开始,低于第二个门限值代声音停止。
但是在实际使用过程中发现,车间的噪声非常大,对于过零率和短时能量都有很大的影响,因此必须先进行高阶的数字滤波。高阶数字滤波需要较多的时间,会影响到检测的实时性。因此需要使用更加快速有效的方法,在此,选择了短时傅里叶变化来处理音频数据。
短时傅里叶变换(STFT,short-time Fourier transform,或short-term Fourier transform))是和傅里叶变换相关的一种数学变换,用以确定时变信号其局部区域正弦波的频率与相位。
它的思想是:选择一个时频局部化的窗函数,假定分析窗函数g(t)在一个短时间间隔内是平稳(伪平稳)的,移动窗函数,使f(t)g(t)在不同的有限时间宽度内是平稳信号,从而计算出各个不同时刻的功率谱。短时傅里叶变换使用一个固定的窗函数,窗函数一旦确定了以后,其形状就不再发生改变,短时傅里叶变换的分辨率也就确定了。如果要改变分辨率,则需要重新选择窗函数。短时傅里叶变换用来分析分段平稳信号或者近似平稳信号犹可,但是对于非平稳信号,当信号变化剧烈时,要求窗函数有较高的时间分辨率;而波形变化比较平缓的时刻,主要是低频信号,则要求窗函数有较高的频率分辨率。短时傅里叶变换不能兼顾频率与时间分辨率的需求。短时傅里叶变换窗函数受到W.Heisenberg不确定准则的限制,时频窗的面积不小于2。这也就从另一个侧面说明了短时傅里叶变换窗函数的时间与频率分辨率不能同时达到最优。
发明内容
本发明的目的是为了解决提取大噪声下环境下单一频率报警声音的特征时,采用过零率和短时能量方法需要高阶数字滤波,导致检测时间长的问题,提供一种基于短时傅里叶变换的单一频率报警声音特征检测方法。
本发明所述的基于短时傅里叶变换的单一频率报警声音特征检测方法,所述单一频率报警声音特征包括频率、幅值、周期、有声时间长度和静音时间长度,所述方法通过以下步骤实现:
步骤一、将原始音频信号数据进行分段,每段音频信号的数据个数均相等,1个数据是指一次采样得到的数据;
步骤二、对每段音频信号数据进行短时傅里叶变换,以求得每段音频信号的幅值和频率,记录下音频信号的幅值;
步骤三、将每次记录下来的音频信号的幅值连接起来,以得到音频信号的幅值随时间变化的图像;
步骤四、确定音频信号端点:选择一个开始幅值阀值和一个截止幅值阀值,将步骤三得到的图像与开始幅值阀值和截止幅值阀值进行比较,当幅值大于开始幅值阀值时,该幅值对应的时间点为开始端点,当幅值小于截止幅值阀值时,该幅值对应的时间点为截止端点,所述的开始端点和截止端点即为音频信号的端点;
步骤五、计算音频信号的周期:当音频信号为周期信号时,相邻两个开始端点的时间间隔即为音频信号的周期,即:每个周期从一个开始端点开始,经过一个截止端点,再到下一个开始端点结束;
步骤六、计算有声时间长度和静音时间长度:在音频信号的一个周期内,第一个开始端点到截止端点的时间间隔为有声时间长度,截止端点到下一个开始端点的时间间隔为静音时间长度。
上述步骤一中,每段数据的个数为256。
上述步骤二所述的音频信号的幅值的选择方法为:对每段音频信号数据进行短时傅里叶变换后,得到的图像的横坐标为频率,纵坐标为幅值,其中幅值最高的谱线代表音频信号。
上述步骤四所述的开始幅值阀值大于截止幅值阀值。
本发明所述的基于短时傅里叶变换的单一频率报警声音特征检测方法首先对原始数据进行分段,从分段后的音频信号可以看出,在短时间内,一段音频信号内的幅值可以看作是保持不变的,因而可以使用短时傅里叶变换求出对应分段时间内信号的幅值(与微积分的原理很相似)。进行短时傅里叶变换后得到的图像包含多条谱线,其中强度最大的一条谱线为单一频率报警声音,其他谱线为噪声。谱线的纵坐标正比于幅值的大小,横坐标代表音频信号的频率。根据谱线的横坐标即可判断该单一频率报警声音的频率特征是否符合要求。对每段数据进行短时傅里叶变换之后,记录下音频信号的幅值。将每段时间内的信号幅值连接起来,得到最终的短时傅里叶变换处理结果。根据需要选择开始幅值阀值和截止幅值阀值后,可以求得音频信号的端点。再根据音频信号的端点来求得周期、有声时间和静音时间。与传统的利用数字滤波器进行检测的方法相比,本发明采用短时傅里叶变换对音频信号特征进行检测,检测处理速度快,检测时间缩短了90%以上。
附图说明
图1为实施方式一所述的基于短时傅里叶变换的单一频率报警声音特征检测方法的流程图;
图2为在车间录制的五秒钟的报警声音的原始音频信号,其中,纵坐标表示强度,横坐标表示采样次数,对应的采样频率为32KHz;
图3为图2所示的原始音频信号经步骤一分段处理后,其中一段原始音频信号数据,其中,纵坐标表示强度,横坐标表示采样次数,对应的采样频率为32KHz;
图4为图2中有声音时的一段音频信号经短时傅里叶变换后的结果;
图5为图2中静音时的一段音频信号经短时傅里叶变换后的结果;
图6为实施试一中步骤三得到的图像,其中,纵坐标表示强度,横坐标表示采样次数,每次采样的时间为8ms。
具体实施方式
具体实施方式一:结合图1、图2、图3和图6说明本实施方式,本实施方式所述的基于短时傅里叶变换的单一频率报警声音特征检测方法,所述单一频率报警声音特征包括频率、幅值、周期、有声时间长度和静音时间长度,所述方法通过以下步骤实现:
步骤一、将原始音频信号数据进行分段,每段音频信号的数据个数均相等,1个数据是指一次采样得到的数据;
步骤二、对每段音频信号数据进行短时傅里叶变换,以求得每段音频信号的幅值和频率,记录下音频信号的幅值;
步骤三、将每次记录下来的音频信号的幅值连接起来,以得到音频信号的幅值随时间变化的图像;
步骤四、确定音频信号端点:选择一个开始幅值阀值和一个截止幅值阀值,将步骤三得到的图像与开始幅值阀值和截止幅值阀值进行比较,当幅值大于开始幅值阀值时,该幅值对应的时间点为开始端点,当幅值小于截止幅值阀值时,该幅值对应的时间点为截止端点,所述的开始端点和截止端点即为音频信号的端点;
步骤五、计算音频信号的周期:当音频信号为周期信号时,相邻两个开始端点的时间间隔即为音频信号的周期,即:每个周期从一个开始端点开始,经过一个截止端点,再到下一个开始端点结束;
步骤六、计算有声时间长度和静音时间长度:在音频信号的一个周期内,第一个开始端点到截止端点的时间间隔为有声时间长度,截止端点到下一个开始端点的时间间隔为静音时间长度。
图2所示的是在有噪音的车间里录制的一段单一频率报警声音的音频信号,前面幅值较高的一段信号为单一频率报警声音的音频信号,后面幅值较低的为噪声,可以看出现场噪声很大,对传统的报警声音特征检测方法会有很大影响。
本实施方式所述的基于短时傅里叶变换的单一频率报警声音特征检测方法首先对原始数据进行分段,从图3所示的分段后的音频信号可以看出,在短时间内(图3中横坐标的数值代表采样次数,采样频率为32KHz,因此横坐标反应的是时间,例如,横坐标50表示的时间为50/32000秒),一段音频信号内的幅值可以看作是保持不变的,因而可以使用短时傅里叶变换求出对应分段时间内信号的幅值(与微积分的原理很相似)。进行短时傅里叶变换后得到的图像包含多条谱线,其中强度最大的一条谱线为单一频率报警声音,其他谱线为噪声。谱线的纵坐标正比于幅值的大小,横坐标代表音频信号的频率。根据谱线的横坐标即可判断该单一频率报警声音的频率特征是否符合要求。对每段数据进行短时傅里叶变换之后,记录下音频信号的幅值。将每段时间内的信号幅值连接起来,得到最终的短时傅里叶变换处理结果(如图6所示)。根据需要选择开始幅值阀值和截止幅值阀值后,可以求得音频信号的端点。再根据音频信号的端点来求得周期、有声时间和静音时间。
本实施方式所述的基于短时傅里叶变换的单一频率报警声音特征检测方法与传统的利用数字滤波器进行检测的方法相比具有如下优点:
1,实时性能更好。许多处理器对于短时傅里叶变换具有硬件优化,比如TMS320F28335型高性能数字信号处理器,因此短时傅里叶变换的处理速度很快,对音频信号特征检测的时间缩短了90%以上。
2,不需要设计数字滤波器的参数。设计数字滤波器需要使用专门的设计软件,例如MATLAB中的FDATool。但是其众多的滤波器类型,各种参数代表的意义需要设计人员充分理解。设计人员需要花费很多精力才可以设计出合理的数字滤波器。
3,编写程序简单。不需要编写过零率程序,短时能量程序以及数字滤波器程序,只需要使用短时傅里叶变换程序。而短时傅里叶变换程序一般由数字信号处理器的生产厂家提供汇编代码,针对处理器进行了优化,可以直接调用库函数。
具体实施方式二:本实施方式是对实施方式一所述的基于短时傅里叶变换的单一频率报警声音特征检测方法的进一步限定,本实施方式中,步骤一中,每段数据的个数为256。
实际使用过程中,音频信号的采样率是32kHz。短时傅里叶变换首先将原始数据分段,每段的数据个数相等,为256,对应的采样时间是8ms。256个数据对于短时傅里叶变换来说是比较合适的,而8ms对于音频端点检测需要的精度来说也是比较合适的,因此该分段是合理的
具体实施方式三:结合图4和图5说明本实施方式,本实施方式是对实施方式一所述的基于短时傅里叶变换的单一频率报警声音特征检测方法的进一步限定,本实施方式中,步骤二所述的音频信号的幅值的选择方法为:对每段音频信号数据进行短时傅里叶变换后,得到的图像的横坐标为频率,纵坐标为幅值,其中幅值最高的谱线代表音频信号。
从分段数据的频谱可以看出,音频信号对应的谱线是非常明显的,其幅值远远高于噪声的幅值,可以直接获得音频信号的频率和幅值。音频信号的频谱与噪声的频谱是分开的,可以直接剔除噪声的频谱,保留音频信号的频谱。信号的频谱对应了每段时间内信号的幅值。在没有信号的情况下,信号的频谱为零,噪声的频谱依然存在,但是噪声无法对结果造成影响。
具体实施方式四:本实施方式是对实施方式一所述的基于短时傅里叶变换的单一频率报警声音特征检测方法的进一步限定,本实施方式中,步骤四所述的开始幅值阀值大于截止幅值阀值。

Claims (4)

1.基于短时傅里叶变换的单一频率报警声音特征检测方法,所述单一频率报警声音特征包括频率、幅值、周期、有声时间长度和静音时间长度,其特征在于:该方法通过以下步骤实现:
步骤一、将原始音频信号数据进行分段,每段音频信号的数据个数均相等,1个数据是指一次采样得到的数据;
步骤二、对每段音频信号数据进行短时傅里叶变换,以求得每段音频信号的幅值和频率,记录下音频信号的幅值;
步骤三、将每次记录下来的音频信号的幅值连接起来,以得到音频信号的幅值随时间变化的图像;
步骤四、确定音频信号端点:选择一个开始幅值阀值和一个截止幅值阀值,将步骤三得到的图像与开始幅值阀值和截止幅值阀值进行比较,当幅值大于开始幅值阀值时,该幅值对应的时间点为开始端点,当幅值小于截止幅值阀值时,该幅值对应的时间点为截止端点,所述的开始端点和截止端点即为音频信号的端点;
步骤五、计算音频信号的周期:当音频信号为周期信号时,相邻两个开始端点的时间间隔即为音频信号的周期,即:每个周期从一个开始端点开始,经过一个截止端点,再到下一个开始端点结束;
步骤六、计算有声时间长度和静音时间长度:在音频信号的一个周期内,第一个开始端点到截止端点的时间间隔为有声时间长度,截止端点到下一个开始端点的时间间隔为静音时间长度。
2.根据权利要求1所述的基于短时傅里叶变换的单一频率报警声音特征检测方法,其特征在于:步骤一中,每段数据的个数为256。
3.根据权利要求1所述基于短时傅里叶变换的单一频率报警声音特征检测方法,其特征在于:步骤二所述的音频信号的幅值的选择方法为:对每段音频信号数据进行短时傅里叶变换后,得到的图像的横坐标为频率,纵坐标为幅值,其中幅值最高的谱线代表音频信号。
4.根据权利要求1所述基于短时傅里叶变换的单一频率报警声音特征检测方法,其特征在于:步骤四所述的开始幅值阀值大于截止幅值阀值。
CN201410003377.2A 2014-01-03 2014-01-03 基于短时傅里叶变换的单一频率报警声音特征检测方法 Active CN103674235B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410003377.2A CN103674235B (zh) 2014-01-03 2014-01-03 基于短时傅里叶变换的单一频率报警声音特征检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410003377.2A CN103674235B (zh) 2014-01-03 2014-01-03 基于短时傅里叶变换的单一频率报警声音特征检测方法

Publications (2)

Publication Number Publication Date
CN103674235A true CN103674235A (zh) 2014-03-26
CN103674235B CN103674235B (zh) 2015-09-09

Family

ID=50312484

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410003377.2A Active CN103674235B (zh) 2014-01-03 2014-01-03 基于短时傅里叶变换的单一频率报警声音特征检测方法

Country Status (1)

Country Link
CN (1) CN103674235B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105100758A (zh) * 2015-09-30 2015-11-25 天津华来科技有限公司 用于安防监控的方法、设备以及摄像头
CN105424170A (zh) * 2015-11-03 2016-03-23 中国人民解放军国防科学技术大学 一种枪声探测计数方法及系统
CN109429165A (zh) * 2017-08-24 2019-03-05 霍尼韦尔腾高电子系统(广州)有限公司 功放电路的检测方法、装置、系统及广播系统
CN110580913A (zh) * 2019-09-26 2019-12-17 杭州嘉楠耘智信息科技有限公司 语音激活检测方法、装置及计算机可读存储介质
CN110838305A (zh) * 2019-11-15 2020-02-25 中国汽车工程研究院股份有限公司 基于声音识别的智能车辆adas预警测试方法和系统
CN114571472A (zh) * 2020-12-01 2022-06-03 北京小米移动软件有限公司 用于足式机器人的地面属性检测方法及驱动方法及其装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020116178A1 (en) * 2001-04-13 2002-08-22 Crockett Brett G. High quality time-scaling and pitch-scaling of audio signals
CN101358950A (zh) * 2008-09-04 2009-02-04 浙江大学 一种禽蛋裂缝检测方法
CN101882442A (zh) * 2009-05-04 2010-11-10 上海音乐学院 历史音频噪声检测与消除方法
CN102314884A (zh) * 2011-08-16 2012-01-11 捷思锐科技(北京)有限公司 语音激活检测方法与装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020116178A1 (en) * 2001-04-13 2002-08-22 Crockett Brett G. High quality time-scaling and pitch-scaling of audio signals
CN101358950A (zh) * 2008-09-04 2009-02-04 浙江大学 一种禽蛋裂缝检测方法
CN101882442A (zh) * 2009-05-04 2010-11-10 上海音乐学院 历史音频噪声检测与消除方法
CN102314884A (zh) * 2011-08-16 2012-01-11 捷思锐科技(北京)有限公司 语音激活检测方法与装置

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105100758A (zh) * 2015-09-30 2015-11-25 天津华来科技有限公司 用于安防监控的方法、设备以及摄像头
CN105100758B (zh) * 2015-09-30 2018-05-08 天津华来科技有限公司 用于安防监控的方法、设备以及摄像头
CN105424170A (zh) * 2015-11-03 2016-03-23 中国人民解放军国防科学技术大学 一种枪声探测计数方法及系统
CN105424170B (zh) * 2015-11-03 2018-07-06 中国人民解放军国防科学技术大学 一种枪声探测计数方法及系统
CN109429165A (zh) * 2017-08-24 2019-03-05 霍尼韦尔腾高电子系统(广州)有限公司 功放电路的检测方法、装置、系统及广播系统
CN110580913A (zh) * 2019-09-26 2019-12-17 杭州嘉楠耘智信息科技有限公司 语音激活检测方法、装置及计算机可读存储介质
CN110838305A (zh) * 2019-11-15 2020-02-25 中国汽车工程研究院股份有限公司 基于声音识别的智能车辆adas预警测试方法和系统
CN110838305B (zh) * 2019-11-15 2022-03-18 中国汽车工程研究院股份有限公司 基于声音识别的智能车辆adas预警测试方法和系统
CN114571472A (zh) * 2020-12-01 2022-06-03 北京小米移动软件有限公司 用于足式机器人的地面属性检测方法及驱动方法及其装置
CN114571472B (zh) * 2020-12-01 2024-01-23 北京小米机器人技术有限公司 用于足式机器人的地面属性检测方法及驱动方法及其装置

Also Published As

Publication number Publication date
CN103674235B (zh) 2015-09-09

Similar Documents

Publication Publication Date Title
CN103674235B (zh) 基于短时傅里叶变换的单一频率报警声音特征检测方法
CN105118502A (zh) 语音识别系统的端点检测方法及系统
CN103117067B (zh) 一种低信噪比下语音端点检测方法
JP4435127B2 (ja) ハーモニックとサブハーモニックの比率を用いたピッチ検出方法およびピッチ検出装置
US9997168B2 (en) Method and apparatus for signal extraction of audio signal
JP4740609B2 (ja) 有声音および無声音の検出装置、並びにその方法
KR20140031790A (ko) 잡음 환경에서 강인한 음성 구간 검출 방법 및 장치
CN104021789A (zh) 一种利用短时时频值的自适应端点检测方法
Papoulis et al. Detection of hidden periodicities by adaptive extrapolation
KR20170036779A (ko) 하모닉 필터 툴의 하모닉서티-의존 제어
CN104992714A (zh) 一种电机异音的检测方法
CN104409078A (zh) 异常声音检测和识别系统
Govind et al. Epoch extraction from emotional speech
CN109377982B (zh) 一种有效语音获取方法
Xu et al. A novel method for extracting maximum kurtosis component and its applications in rolling bearing fault diagnosis
Patil et al. Effectiveness of Teager energy operator for epoch detection from speech signals
CN103821499A (zh) 用于油井动液面深度检测的声音信号处理方法
Cai et al. A modified pitch detection method based on wavelet transform
Liu et al. Real-time pitch tracking based on combined SMDSF.
Jiao et al. Pitch detection algorithm based on NCCF and CAMDF
CN115862685B (zh) 一种实时语音活动的检测方法、装置和电子设备
CN110208364B (zh) 一种无位置传感器的钢丝绳缺陷定位方法
Li et al. Pitch detection method for noisy speech signals based on pre-filter and weighted wavelet coefficients
Ru-Wei et al. Pitch detection method for noisy speech signals based on wavelet transform and autocorrelation function
Bäckström et al. Finding line spectral frequencies using the fast Fourier transform

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant