CN110070884A - 音频起始点检测方法和装置 - Google Patents
音频起始点检测方法和装置 Download PDFInfo
- Publication number
- CN110070884A CN110070884A CN201910151015.0A CN201910151015A CN110070884A CN 110070884 A CN110070884 A CN 110070884A CN 201910151015 A CN201910151015 A CN 201910151015A CN 110070884 A CN110070884 A CN 110070884A
- Authority
- CN
- China
- Prior art keywords
- frequency range
- voice spectrum
- spectrum parameters
- audio
- current frequency
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000001228 spectrum Methods 0.000 claims abstract description 196
- 230000005236 sound signal Effects 0.000 claims abstract description 43
- 238000001514 detection method Methods 0.000 claims abstract description 37
- 241000208340 Araliaceae Species 0.000 claims description 3
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims description 3
- 235000003140 Panax quinquefolius Nutrition 0.000 claims description 3
- 238000004364 calculation method Methods 0.000 claims description 3
- 235000008434 ginseng Nutrition 0.000 claims description 3
- 238000007689 inspection Methods 0.000 abstract description 5
- 238000010586 diagram Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 8
- 230000033764 rhythmic process Effects 0.000 description 7
- 238000012360 testing method Methods 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000005291 magnetic effect Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
- G10L25/81—Detection of presence or absence of voice signals for discriminating voice from music
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/04—Segmentation; Word boundary detection
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/40—Rhythm
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/21—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being power information
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
- G10L25/87—Detection of discrete points within a voice signal
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
- G10H2210/051—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for extraction or detection of onsets of musical sounds or notes, i.e. note attack timings
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
- G10H2210/071—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for rhythm pattern analysis or rhythm style recognition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2250/00—Aspects of algorithms or signal processing methods without intrinsic musical character, yet specifically adapted for or used in electrophonic musical processing
- G10H2250/315—Sound category-dependent sound synthesis processes [Gensound] for musical use; Sound category-specific synthesis-controlling parameters or control means therefor
- G10H2250/455—Gensound singing voices, i.e. generation of human voices for musical applications, vocal singing sounds or intelligible words at a desired pitch or with desired vocal effects, e.g. by phoneme synthesis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/18—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being spectral information of each sub-band
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Telephone Function (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本公开公开了一种音频起始点检测方法、装置、电子设备和计算机可读存储介质。其中该音频起始点检测方法包括:针对音频的音频信号的各频段,根据当前频段的第一语音频谱参数和按照时序位于当前频段之前的各频段的第一语音频谱参数确定当前频段的第二语音频谱参数;根据各频段对应的第二语音频谱参数确定音频中的音符和音节的一个或多个起始点位置。本公开实施例由于在确定第二语音频谱参数时参照了多个频段的第一语音频谱参数,使得确定的第二语音频谱参数更为准确,从而可以准确的检测出音频中音符和音节的起始点,减少误检和漏检情况的发生,并且参照的是按照时序位于所述当前频段之前的各频段的第一语音频谱参数,保证了起始点检测的实时性。
Description
技术领域
本公开涉及图像处理技术领域,尤其涉及一种音频起始点检测方法、装置、电子设备及计算机可读存储介质。
背景技术
音频起始点检测是一种应用于音频信号的信息抽取算法,目标是准确检测音符和音节的起始点位置。其中音符(note)特指音乐信号;音节(phone)特指语音人声信号。音频起始点检测在信号处理领域有很多重要的用途和应用前景,举例如下:对于人声和音乐音频的自动切分和自动标注、信息抽取、分段压缩、及互动娱乐的玩法。图1a和图1b表示了起始点检测,其中图1a为音频信号,图1b是检测出的起始点位置。
在现有技术中,通常通过计算音频信号对应语音频谱参数曲线,根据语音频谱参数曲线确定曲线的局部最大点,将改点对应的语音频谱参数与设置的门限值进行比较,如果大于门限值,则确定该点对应的位置为起始点位置。
但是,上述算法主要适用于边界清晰、节奏相对单一的音频信号(例如音符边界清晰、节奏相对单一的快节奏音乐),而对于一些较为复杂节奏感不强的音频(例如多乐器混合的音乐、节奏比较慢的音乐以及人声),上述检测算法就不能准确的检测出边界,就会出现频繁的误检和漏检。
发明内容
第一方面,本公开实施例提供一种音频起始点检测方法,包括:
根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数;
针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数;
根据所述各频段对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置。
进一步的,所述针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数,包括:
针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值,将所述均值作为所述当前频段的第二语音频谱参数。
进一步的,所述针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数,包括:
针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值;
根据所述当前频段的第一语音频谱参数和所述均值确定所述当前频段的第二语音频谱参数。
进一步的,所述根据所述当前频段的第一语音频谱参数和所述均值确定所述当前频段的第二语音频谱参数,包括:
计算所述当前频段的第一语音频谱参数与所述均值的差值;
根据所述差值确定所述当前频段的第二语音频谱参数。
进一步的,所述根据所述差值确定所述当前频段的第二语音频谱参数,包括:
根据所述当前频段对应的差值和按照时序位于所述当前频段之前的各频段对应的差值确定差值的均值,将所述差值的均值作为所述当前频段的第二语音频谱参数。
进一步的,所述根据所述各频段对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置,包括:
根据所述各频段对应的第二语音频谱参数绘制语音频谱参数曲线;
根据所述语音频谱参数曲线确定局部最高点,根据所述局部最高点对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置。
进一步的,所述根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数包括:
将所述音频的音频信号切分为多个子音频信号,将各子音频信号转换为频域信号,每个子音频信号对应一个频段;
确定各频段对应的第一语音频谱参数。
第二方面,本公开实施例提供一种音频起始点检测装置,包括:
第一参数确定模块,用于根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数;
第二参数确定模块,用于针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数;
起始点确定模块,用于根据所述各频段对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置。
进一步的,所述第二参数确定模块具体用于:针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值,将所述均值作为所述当前频段的第二语音频谱参数。
进一步的,所述第二参数确定模块包括:
均值确定单元,用于针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值;
第二参数确定单元,用于根据所述当前频段的第一语音频谱参数和所述均值确定所述当前频段的第二语音频谱参数。
进一步的,所述第二参数确定单元具体用于:计算所述当前频段的第一语音频谱参数与所述均值的差值;根据所述差值确定所述当前频段的第二语音频谱参数。
进一步的,所述第二参数确定单元具体用于:根据所述当前频段对应的差值和按照时序位于所述当前频段之前的各频段对应的差值确定差值的均值,将所述差值的均值作为所述当前频段的第二语音频谱参数。
进一步的,所述起始点确定模块具体用于:根据所述各频段对应的第二语音频谱参数绘制语音频谱参数曲线;根据所述语音频谱参数曲线确定局部最高点,根据所述局部最高点对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置。
进一步的,所述装置第一参数确定模块具体用于:将所述音频的音频信号切分为多个子音频信号,将各子音频信号转换为频域信号,每个子音频信号对应一个频段;确定各频段对应的第一语音频谱参数。
第三方面,本公开实施例提供一种电子设备,包括:至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有能被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行前述第一方面中的任一所述音频起始点检测方法。
第四方面,本公开实施例提供一种非暂态计算机可读存储介质,其特征在于,该非暂态计算机可读存储介质存储计算机指令,该计算机指令用于使计算机执行前述第一方面中的任一所述音频起始点检测方法。
本公开实施例通过根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数,并针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定当前频段的第二语音频谱参数,根据各频段对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置,由于在确定第二语音频谱参数时参照了多个频段对应的第一语音频谱参数,使得确定的第二语音频谱参数更为准确,从而可以准确的检测出音频中的音符和音节的起始点,减少了误检和漏检情况的发生,并且参照的是按照时序位于所述当前频段之前的各频段的第一语音频谱参数,保证了起始点检测的实时性。
上述说明仅是本公开技术方案的概述,为了能更清楚了解本公开的技术手段,而可依照说明书的内容予以实施,并且为让本公开的上述和其他目的、特征和优点能够更明显易懂,以下特举较佳实施例,并配合附图,详细说明如下。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a为现有技术提供的音频信号示意图;
图1b为现有技术提供的音频起始点检测结果示意图;
图2a为本公开实施例一提供的音频起始点检测方法的流程图;
图2b为本公开实施例一提供的音频起始点检测方法中的音频信号示意图;
图2c为本公开实施例一提供的音频起始点检测方法中的音频信号的语音频谱图;
图3为本公开实施例二提供的音频起始点检测方法的流程图;
图4a为本公开实施例三提供的音频起始点检测方法的流程图;
图4b为本公开实施例三提供的语音频谱参数组成含有毛刺信号的曲线图;
图4c为本公开实施例三提供的音频起始点检测方法中语音频谱参数组成的曲线图;
图4d为本公开实施例三提供的音频起始点检测方法中的音频信号示意图;
图4e为本公开实施例三提供的采用现有起始点检测方法得到的图4d所示的音频信号检测结果示意图;
图4f为本公开实施例三提供的音频起始点检测方法得到的图4d所示的音频信号检测结果示意图;
图5为本公开实施例四提供的音频起始点检测装置的结构示意图;
图6为根据本公开实施例五提供的电子设备的结构示意图。
具体实施方式
以下通过特定的具体实例说明本公开的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本公开的其他优点与功效。显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。本公开还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本公开的精神下进行各种修饰或改变。需说明的是,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。基于本公开中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
需要说明的是,下文描述在所附权利要求书的范围内的实施例的各种方面。应显而易见,本文中所描述的方面可体现于广泛多种形式中,且本文中所描述的任何特定结构及/或功能仅为说明性的。基于本公开,所属领域的技术人员应了解,本文中所描述的一个方面可与任何其它方面独立地实施,且可以各种方式组合这些方面中的两者或两者以上。举例来说,可使用本文中所阐述的任何数目个方面来实施设备及/或实践方法。另外,可使用除了本文中所阐述的方面中的一或多者之外的其它结构及/或功能性实施此设备及/或实践此方法。
还需要说明的是,以下实施例中所提供的图示仅以示意方式说明本公开的基本构想,图式中仅显示与本公开中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
另外,在以下描述中,提供具体细节是为了便于透彻理解实例。然而,所属领域的技术人员将理解,可在没有这些特定细节的情况下实践所述方面。
实施例一
图2a为本公开实施例一提供的音频起始点检测方法的流程图,本实施例提供的该音频起始点检测方法可以由一音频起始点检测装置来执行,该音频起始点检测装置可以实现为软件,或者实现为软件和硬件的组合,该音频起始点检测装置可以集成设置在音频起始点检测系统中的某设备中,比如音频起始点检测服务器或者音频起始点检测终端设备中。本实施例可适用于对于一些较为复杂节奏感不强的音频(例如多乐器混合的音乐、节奏比较慢的音乐以及人声)的场景。如图2a所示,该方法包括如下步骤:
步骤S21:根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数。
其中,音频信号可以为一段音乐或语音,将时域的音频信号转换为频域即得到对应的频域信号。
这里,为了区分本文中出现的不同的语音频谱参数,将根据出现的先后顺序分别称为第一语音频谱参数和第二语音频谱参数。
其中,第一语音频谱参数可以根据频谱幅度和相位确定。
在一个可选的实施例中,步骤S21具体包括:
步骤S211:将音频的音频信号切分为多个子音频信号,将各子音频信号转换为频域信号,每个子音频信号对应一个频段。
步骤S212:确定各频段对应的第一语音频谱参数。
具体的,音频信号是一串一维的离散时间序列,可以表示为:X={x1,x2…xN},其中,N为离散样本点的总数。虽然音频信号是一种随时间非周期变化的信号,但是在短时范围内(通常短时定义为10-40ms之间),音频信号可以近似的展现出平稳(近似周期性)的特性,因此这里可将音频信号切分成等长的短时语音段即子音频信号进行分析。例如,如图2b所示,针对16000Hz采样率的音频信号,可选择512个样本点为一个子音频信号,其对应了32ms的语音长度。
这里,可采用傅里叶变换将时域的音频信号转换为频域的音频信号,随时间变化的频段信息称为语谱图,如图2c所示,可以清晰地看到子音频信号在不同频段的能量变化,可见在起始点位置,频谱会有明显的阶跃变化。
其中,对应的频域信号可以表示为:其中,n表示第n个子音频信号,L表示子音频信号的长度,k代表第k个频段。
相应的,当音频信号划分为多个子音频信号时,第一语音频谱参数具体可以为不同子音频信号的频谱幅度和相位的综合加权,例如可采用公式 计算得到,其中|Yn(k)|为第k个频段的幅度,其中为第k个频段的二阶相位差分,其中 其中为第k个频段的一阶相位差分,其中 其中为第k个频段的相位。本实施例采用相位的二阶差分可以更好地表示起始点信息。
步骤S22:针对各频段,根据当前频段的第一语音频谱参数和按照时序位于当前频段之前的各频段的第一语音频谱参数确定当前频段的第二语音频谱参数。
其中,预设个数可自定义设置。
具体的,在确定各频段的第二语音频谱参数中,首先选定任一频段作为当前频段,然后根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定当前频段的第二语音频谱参数,再从剩余频段中选取任一频段作为当前频段,重复执行上述操作,直到确定所有频段的第二语音频谱参数。
步骤S23:根据各频段对应的第二语音频谱参数确定音频中的音符和音节的一个或多个起始点位置。
在一个可选的实施例中,步骤S23包括:
S231:根据各频段对应的第二语音频谱参数绘制语音频谱参数曲线。
S232:根据语音频谱参数曲线确定局部最高点,根据局部最高点对应的第二语音频谱参数确定音频中的音符和音节的一个或多个起始点位置。
本公开实施例通过根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数,并针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定当前频段的第二语音频谱参数,根据各频段对应的第二语音频谱参数确定音频中的音符和音节的一个或多个起始点位置,由于在确定第二语音频谱参数时参照了多个频段对应的第一语音频谱参数,使得确定的第二语音频谱参数更为准确,从而可以准确的检测出音频中的音符和音节的起始点,减少了误检和漏检情况的发生,并且参照的是按照时序位于所述当前频段之前的各频段的第一语音频谱参数,保证了起始点检测的实时性。
实施例二
图3为本公开实施例二提供的音频起始点检测方法的流程图,本实施例在上述实施例的基础上,对步骤根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定当前频段的第二语音频谱参数进行进一步优化,本实施例可适用于对于一些较为复杂节奏感不强的音频(例如多乐器混合的音乐、节奏比较慢的音乐以及人声)的场景。如图3所示,具体包括:
步骤S31:根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数。
步骤S32:针对各频段,根据当前频段的第一语音频谱参数和按照时序位于当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值,将均值作为当前频段的第二语音频谱参数。
步骤S33:根据各频段对应的第二语音频谱参数确定音频中的音符和音节的一个或多个起始点位置。
本公开实施例通过确定各频段的均值,并根据各频段对应的均值确定音频中的音符和音节的起始点位置,可以改善由均值组成的曲线图中的毛刺现象,进一步提高起始点检测准确率,并且参照的是按照时序位于所述当前频段之前的各频段的第一语音频谱参数,保证了起始点检测的实时性。
实施例三
图4a为本公开实施例三提供的音频起始点检测方法的流程图,本实施例在上述实施例的基础上,对步骤根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定当前频段的第二语音频谱参数进行进一步优化,本实施例可适用于对于一些较为复杂节奏感不强的音频(例如多乐器混合的音乐、节奏比较慢的音乐以及人声)的场景。如图4a所示,具体包括:
步骤S41:根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数。
步骤S42:针对各频段,根据当前频段的第一语音频谱参数和按照时序位于当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值。
步骤S43:根据当前频段的第一语音频谱参数和均值确定当前频段的第二语音频谱参数。
在一个可选的实施例中,步骤S43包括:
步骤S431:计算当前频段的第一语音频谱参数与均值的差值。
步骤S432:根据差值确定当前频段的第二语音频谱参数。
进一步的,步骤S432包括:
可有如下两种实施方式:根据当前频段对应的差值和按照时序位于所述当前频段之前的各频段对应的差值确定差值的均值,将差值的均值作为当前频段的第二语音频谱参数,后续在根据第二语音频谱参数确定起始点时,可以减掉曲线中的毛刺信号。例如,如图4b所示,为语音频谱参数组成的含有毛刺信号的曲线,如图4c所示,为本方案中语音频谱参数组成的曲线。举例说明,如图4d,为音频信号示意图,图4e为采用现有技术的方法对图4d的音频信号进行检测得到的起始点检测结果示意图,图4f为采用本实施的方法对图4d的音频信号进行检测得到的起始点检测结果示意图。
步骤S44:根据各频段对应的第二语音频谱参数确定音频中的音符和音节的一个或多个起始点位置。
本公开实施例由于在确定第二语音频谱参数时参照了多个频段对应的第一语音频谱参数,使得确定的第二语音频谱参数更为准确,从而可以准确的检测出音频中的音符和音节的起始点,减少了误检和漏检情况的发生,并且通过确定各频段的差值的均值,并根据各频段对应的差值的均值确定音频中的音符和音节起始点位置,可以改善由现有曲线图中的毛刺现象,进一步提高起始点检测准确率,并且参照的是按照时序位于所述当前频段之前的各频段的第一语音频谱参数,保证了起始点检测的实时性。
实施例四
图5为本公开实施例四提供的音频起始点检测装置的结构示意图,该音频起始点检测装置可以实现为软件,或者实现为软件和硬件的组合,该音频起始点检测装置可以集成设置在音频起始点检测系统中的某设备中,比如音频起始点检测服务器或者音频起始点检测终端设备中。本实施例可适用于对于一些较为复杂节奏感不强的音频(例如多乐器混合的音乐、节奏比较慢的音乐以及人声)的场景。如图5所示,该装置包括:第一参数确定模块51、第二参数确定模块52和起始点确定模块53;其中,
第一参数确定模块51用于根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数;
第二参数确定模块52用于针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数;
起始点确定模块53用于根据所述各频段对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置。
进一步的,所述第二参数确定模块52具体用于:针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值,将所述均值作为所述当前频段的第二语音频谱参数。
进一步的,所述第二参数确定模块52包括:均值确定单元521和第二参数确定单元522;其中,
均值确定单元521用于针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值;
第二参数确定单元522用于根据所述当前频段的第一语音频谱参数和所述均值确定所述当前频段的第二语音频谱参数。
进一步的,所述第二参数确定单元522具体用于:计算所述当前频段的第一语音频谱参数与所述均值的差值;根据所述差值确定所述当前频段的第二语音频谱参数。
进一步的,所述第二参数确定单元522具体用于:根据所述当前频段对应的差值和按照时序位于所述当前频段之前的各频段对应的差值确定差值的均值,将所述差值的均值作为所述当前频段的第二语音频谱参数。
进一步的,所述起始点确定模块53具体用于:根据所述各频段对应的第二语音频谱参数绘制语音频谱参数曲线;根据所述语音频谱参数曲线确定局部最高点,根据所述局部最高点对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置。
进一步的,所述第一参数确定模块51具体用于:将所述音频的音频信号切分为多个子音频信号,将各子音频信号转换为频域信号,每个子音频信号对应一个频段;确定各频段对应的第一语音频谱参数。
有关音频起始点检测装置实施例的工作原理、实现的技术效果等详细说明可以参考前述音频起始点检测方法实施例中的相关说明,在此不再赘述。
实施例五
下面参考图6,其示出了适于用来实现本公开实施例的电子设备的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图6示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示,电子设备可以包括处理装置(例如中央处理器、图形处理器等)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储装置608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有电子设备操作所需的各种程序和数据。处理装置601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
通常,以下装置可以连接至I/O接口605:包括例如触摸屏、触摸板、键盘、鼠标、图像传感器、麦克风、加速度计、陀螺仪等的输入装置606;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置607;包括例如磁带、硬盘等的存储装置608;以及通信装置609。通信装置609可以允许电子设备与其他设备进行无线或有线通信以交换数据。虽然图6示出了具有各种装置的电子设备,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置309从网络上被下载和安装,或者从存储装置608被安装,或者从ROM 602被安装。在该计算机程序被处理装置601执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:根据音频信号对应的频域信号确定各频段对应的第一语音频谱参数;根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数;根据所述各频段对应的第二语音频谱参数确定起始点位置。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定,例如,拖拽点确定模块还可以被描述为“用于在模板图像上确定拖拽点的模块”。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (10)
1.一种音频始点检测方法,其特征在于,包括:
根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数;
针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数;
根据所述各频段对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置。
2.如权利要求1所述的音频起始点检测方法,其特征在于,所述针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数,包括:
针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值,将所述均值作为所述当前频段的第二语音频谱参数。
3.如权利要求1所述的音频起始点检测方法,其特征在于,所述针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数,包括:
针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定第一语音频谱参数的均值;
根据所述当前频段的第一语音频谱参数和所述均值确定所述当前频段的第二语音频谱参数。
4.如权利要求3所述的音频起始点检测方法,其特征在于,所述根据所述当前频段的第一语音频谱参数和所述均值确定所述当前频段的第二语音频谱参数,包括:
计算所述当前频段的第一语音频谱参数与所述均值的差值;
根据所述差值确定所述当前频段的第二语音频谱参数。
5.如权利要求4所述的音频起始点检测方法,其特征在于,所述根据所述差值确定所述当前频段的第二语音频谱参数,包括:
根据所述当前频段对应的差值和按照时序位于所述当前频段之前的各频段对应的差值确定差值的均值,将所述差值的均值作为所述当前频段的第二语音频谱参数。
6.如权利要求1-5任一项所述的音频起始点检测方法,其特征在于,所述根据所述各频段对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置,包括:
根据所述各频段对应的第二语音频谱参数绘制语音频谱参数曲线;
根据所述语音频谱参数曲线确定局部最高点,根据所述局部最高点对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置。
7.如权利要求1-5任一项所述的音频起始点检测方法,其特征在于,所述根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数包括:
将所述音频的音频信号切分为多个子音频信号,将各子音频信号转换为频域信号,每个子音频信号对应一个频段;
确定各频段对应的第一语音频谱参数。
8.一种音频起始点检测装置,其特征在于,包括:
第一参数确定模块,用于根据与音频的音频信号对应的频域信号确定各频段对应的第一语音频谱参数;
第二参数确定模块,用于针对各频段,根据当前频段的第一语音频谱参数和按照时序位于所述当前频段之前的各频段的第一语音频谱参数确定所述当前频段的第二语音频谱参数;
起始点确定模块,用于根据所述各频段对应的第二语音频谱参数确定所述音频中的音符和音节的一个或多个起始点位置。
9.一种电子设备,包括:
存储器,用于存储非暂时性计算机可读指令;以及
处理器,用于运行所述计算机可读指令,使得所述处理器执行时实现根据权利要求1-7中任意一项所述的音频起始点检测方法。
10.一种计算机可读存储介质,用于存储非暂时性计算机可读指令,当所述非暂时性计算机可读指令由计算机执行时,使得所述计算机执行权利要求1-7中任意一项所述的音频起始点检测方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910151015.0A CN110070884B (zh) | 2019-02-28 | 2019-02-28 | 音频起始点检测方法和装置 |
US17/434,628 US20220358956A1 (en) | 2019-02-28 | 2020-02-27 | Audio onset detection method and apparatus |
PCT/CN2020/077024 WO2020173488A1 (zh) | 2019-02-28 | 2020-02-27 | 音频起始点检测方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910151015.0A CN110070884B (zh) | 2019-02-28 | 2019-02-28 | 音频起始点检测方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110070884A true CN110070884A (zh) | 2019-07-30 |
CN110070884B CN110070884B (zh) | 2022-03-15 |
Family
ID=67366002
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910151015.0A Active CN110070884B (zh) | 2019-02-28 | 2019-02-28 | 音频起始点检测方法和装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220358956A1 (zh) |
CN (1) | CN110070884B (zh) |
WO (1) | WO2020173488A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111091849A (zh) * | 2020-03-03 | 2020-05-01 | 龙马智芯(珠海横琴)科技有限公司 | 鼾声识别的方法及装置、存储介质止鼾设备和处理器 |
CN111145779A (zh) * | 2019-12-26 | 2020-05-12 | 腾讯科技(深圳)有限公司 | 一种音频文件的目标检测方法及相关设备 |
WO2020173488A1 (zh) * | 2019-02-28 | 2020-09-03 | 北京字节跳动网络技术有限公司 | 音频起始点检测方法和装置 |
CN112509601A (zh) * | 2020-11-18 | 2021-03-16 | 中电海康集团有限公司 | 一种音符起始点检测方法及系统 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114678037B (zh) * | 2022-04-13 | 2022-10-25 | 北京远鉴信息技术有限公司 | 一种重叠语音的检测方法、装置、电子设备及存储介质 |
Citations (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1773605A (zh) * | 2004-11-12 | 2006-05-17 | 中国科学院声学研究所 | 一种应用于语音识别系统的语音端点检测方法 |
CN101031958A (zh) * | 2005-06-15 | 2007-09-05 | Qnx软件操作系统(威美科)有限公司 | 语音端点指示器 |
US20080201150A1 (en) * | 2007-02-20 | 2008-08-21 | Kabushiki Kaisha Toshiba | Voice conversion apparatus and speech synthesis apparatus |
JP2011053565A (ja) * | 2009-09-03 | 2011-03-17 | Nippon Telegr & Teleph Corp <Ntt> | 信号分析装置、信号分析方法、プログラム、及び記録媒体 |
CN104143324A (zh) * | 2014-07-14 | 2014-11-12 | 电子科技大学 | 一种乐音音符识别方法 |
CN104681038A (zh) * | 2013-11-29 | 2015-06-03 | 清华大学 | 音频信号质量检测方法及装置 |
CN105280196A (zh) * | 2015-11-19 | 2016-01-27 | 科大讯飞股份有限公司 | 副歌检测方法及系统 |
CN105304073A (zh) * | 2014-07-09 | 2016-02-03 | 中国科学院声学研究所 | 一种敲击弦乐器的音乐多音符估计方法及系统 |
CN106663449A (zh) * | 2014-08-06 | 2017-05-10 | 索尼公司 | 编码装置和方法、解码装置和方法以及程序 |
EP3182413A1 (en) * | 2015-12-16 | 2017-06-21 | Ruhr-Universität Bochum | Adaptive line enhancer based method |
CN107251137A (zh) * | 2015-02-26 | 2017-10-13 | 纳宝株式会社 | 利用语音改善至少一种语义单元的集合的方法、装置及计算机可读记录介质 |
CN107704447A (zh) * | 2017-08-23 | 2018-02-16 | 海信集团有限公司 | 一种中文分词方法、中文分词装置和终端 |
CN108256307A (zh) * | 2018-01-12 | 2018-07-06 | 重庆邮电大学 | 一种智能商务旅居房车的混合增强智能认知方法 |
CN108510987A (zh) * | 2018-03-26 | 2018-09-07 | 北京小米移动软件有限公司 | 语音处理方法及装置 |
EP3392882A1 (en) * | 2017-04-20 | 2018-10-24 | Thomson Licensing | Method for processing an input audio signal and corresponding electronic device, non-transitory computer readable program product and computer readable storage medium |
CN109256146A (zh) * | 2018-10-30 | 2019-01-22 | 腾讯音乐娱乐科技(深圳)有限公司 | 音频检测方法、装置及存储介质 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2181874B (en) * | 1985-09-06 | 1989-08-16 | Ricoh Kk | Voice recognition system |
JPH02230296A (ja) * | 1989-03-03 | 1990-09-12 | Seiko Instr Inc | 音声信号における周期検出方法 |
JP5293817B2 (ja) * | 2009-06-19 | 2013-09-18 | 富士通株式会社 | 音声信号処理装置及び音声信号処理方法 |
CN101996628A (zh) * | 2009-08-21 | 2011-03-30 | 索尼株式会社 | 提取语音信号的韵律特征的方法和装置 |
JP6891736B2 (ja) * | 2017-08-29 | 2021-06-18 | 富士通株式会社 | 音声処理プログラム、音声処理方法および音声処理装置 |
CN108320730B (zh) * | 2018-01-09 | 2020-09-29 | 广州市百果园信息技术有限公司 | 音乐分类方法及节拍点检测方法、存储设备及计算机设备 |
CN108198547B (zh) * | 2018-01-18 | 2020-10-23 | 深圳市北科瑞声科技股份有限公司 | 语音端点检测方法、装置、计算机设备和存储介质 |
CN108962226B (zh) * | 2018-07-18 | 2019-12-20 | 百度在线网络技术(北京)有限公司 | 用于检测语音的端点的方法和装置 |
CN110070884B (zh) * | 2019-02-28 | 2022-03-15 | 北京字节跳动网络技术有限公司 | 音频起始点检测方法和装置 |
CN110085214B (zh) * | 2019-02-28 | 2021-07-20 | 北京字节跳动网络技术有限公司 | 音频起始点检测方法和装置 |
CN110070885B (zh) * | 2019-02-28 | 2021-12-24 | 北京字节跳动网络技术有限公司 | 音频起始点检测方法和装置 |
-
2019
- 2019-02-28 CN CN201910151015.0A patent/CN110070884B/zh active Active
-
2020
- 2020-02-27 WO PCT/CN2020/077024 patent/WO2020173488A1/zh active Application Filing
- 2020-02-27 US US17/434,628 patent/US20220358956A1/en active Pending
Patent Citations (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1773605A (zh) * | 2004-11-12 | 2006-05-17 | 中国科学院声学研究所 | 一种应用于语音识别系统的语音端点检测方法 |
CN101031958A (zh) * | 2005-06-15 | 2007-09-05 | Qnx软件操作系统(威美科)有限公司 | 语音端点指示器 |
US20080201150A1 (en) * | 2007-02-20 | 2008-08-21 | Kabushiki Kaisha Toshiba | Voice conversion apparatus and speech synthesis apparatus |
JP2011053565A (ja) * | 2009-09-03 | 2011-03-17 | Nippon Telegr & Teleph Corp <Ntt> | 信号分析装置、信号分析方法、プログラム、及び記録媒体 |
CN104681038A (zh) * | 2013-11-29 | 2015-06-03 | 清华大学 | 音频信号质量检测方法及装置 |
CN105304073A (zh) * | 2014-07-09 | 2016-02-03 | 中国科学院声学研究所 | 一种敲击弦乐器的音乐多音符估计方法及系统 |
CN104143324A (zh) * | 2014-07-14 | 2014-11-12 | 电子科技大学 | 一种乐音音符识别方法 |
CN106663449A (zh) * | 2014-08-06 | 2017-05-10 | 索尼公司 | 编码装置和方法、解码装置和方法以及程序 |
CN107251137A (zh) * | 2015-02-26 | 2017-10-13 | 纳宝株式会社 | 利用语音改善至少一种语义单元的集合的方法、装置及计算机可读记录介质 |
CN105280196A (zh) * | 2015-11-19 | 2016-01-27 | 科大讯飞股份有限公司 | 副歌检测方法及系统 |
EP3182413A1 (en) * | 2015-12-16 | 2017-06-21 | Ruhr-Universität Bochum | Adaptive line enhancer based method |
EP3392882A1 (en) * | 2017-04-20 | 2018-10-24 | Thomson Licensing | Method for processing an input audio signal and corresponding electronic device, non-transitory computer readable program product and computer readable storage medium |
CN107704447A (zh) * | 2017-08-23 | 2018-02-16 | 海信集团有限公司 | 一种中文分词方法、中文分词装置和终端 |
CN108256307A (zh) * | 2018-01-12 | 2018-07-06 | 重庆邮电大学 | 一种智能商务旅居房车的混合增强智能认知方法 |
CN108510987A (zh) * | 2018-03-26 | 2018-09-07 | 北京小米移动软件有限公司 | 语音处理方法及装置 |
CN109256146A (zh) * | 2018-10-30 | 2019-01-22 | 腾讯音乐娱乐科技(深圳)有限公司 | 音频检测方法、装置及存储介质 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020173488A1 (zh) * | 2019-02-28 | 2020-09-03 | 北京字节跳动网络技术有限公司 | 音频起始点检测方法和装置 |
CN111145779A (zh) * | 2019-12-26 | 2020-05-12 | 腾讯科技(深圳)有限公司 | 一种音频文件的目标检测方法及相关设备 |
CN111091849A (zh) * | 2020-03-03 | 2020-05-01 | 龙马智芯(珠海横琴)科技有限公司 | 鼾声识别的方法及装置、存储介质止鼾设备和处理器 |
CN112509601A (zh) * | 2020-11-18 | 2021-03-16 | 中电海康集团有限公司 | 一种音符起始点检测方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
US20220358956A1 (en) | 2022-11-10 |
WO2020173488A1 (zh) | 2020-09-03 |
CN110070884B (zh) | 2022-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110070884A (zh) | 音频起始点检测方法和装置 | |
CN109670074B (zh) | 一种节奏点识别方法、装置、电子设备及存储介质 | |
CN109543064B (zh) | 歌词显示处理方法、装置、电子设备及计算机存储介质 | |
US11587593B2 (en) | Method and apparatus for displaying music points, and electronic device and medium | |
CN109729004A (zh) | 会话消息置顶处理方法和装置 | |
CN107666638B (zh) | 一种估计录音延迟的方法及终端设备 | |
CN110070885A (zh) | 音频起始点检测方法和装置 | |
CN109545192A (zh) | 用于生成模型的方法和装置 | |
CN110413812A (zh) | 神经网络模型的训练方法、装置、电子设备及存储介质 | |
CN109545193A (zh) | 用于生成模型的方法和装置 | |
CN110189743A (zh) | 波形拼接中的拼接点平滑方法、装置及存储介质 | |
CN110865734B (zh) | 目标对象显示方法、装置、电子设备和计算机可读介质 | |
CN110275659A (zh) | 一种图像切换方法、装置、电子设备及存储介质 | |
CN110189394A (zh) | 口型生成方法、装置及电子设备 | |
CN109961141A (zh) | 用于生成量化神经网络的方法和装置 | |
CN109918530A (zh) | 用于推送图像的方法和装置 | |
CN109800041A (zh) | 小程序背景模糊实现方法、装置、电子设备及存储介质 | |
CN109408754A (zh) | 网页操作数据的处理方法、装置、电子设备及存储介质 | |
CN112309414B (zh) | 基于音频编解码的主动降噪方法、耳机及电子设备 | |
CN109979418A (zh) | 音频处理方法、装置、电子设备及存储介质 | |
CN109491742A (zh) | 页面表格渲染方法及装置 | |
CN110489159A (zh) | 安装包精简方法及数据解析方法、装置、介质和设备 | |
CN110489165A (zh) | 获取调用栈栈帧指令偏移的方法、装置、介质和设备 | |
CN110085214A (zh) | 音频起始点检测方法和装置 | |
CN108597527A (zh) | 多声道音频处理方法、装置、计算机可读存储介质和终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |