CN108335688B - 音乐中主节拍点检测方法及计算机存储介质、终端 - Google Patents
音乐中主节拍点检测方法及计算机存储介质、终端 Download PDFInfo
- Publication number
- CN108335688B CN108335688B CN201711464046.9A CN201711464046A CN108335688B CN 108335688 B CN108335688 B CN 108335688B CN 201711464046 A CN201711464046 A CN 201711464046A CN 108335688 B CN108335688 B CN 108335688B
- Authority
- CN
- China
- Prior art keywords
- beat
- music
- points
- point
- beat point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 230000033764 rhythmic process Effects 0.000 claims abstract description 24
- 230000000694 effects Effects 0.000 claims description 17
- 230000015654 memory Effects 0.000 claims description 17
- 238000001514 detection method Methods 0.000 claims description 11
- 238000012163 sequencing technique Methods 0.000 claims description 4
- 238000004590 computer program Methods 0.000 claims description 3
- 230000005236 sound signal Effects 0.000 abstract description 4
- 230000008569 process Effects 0.000 abstract description 2
- 230000006870 function Effects 0.000 description 4
- 230000008451 emotion Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000005034 decoration Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000036651 mood Effects 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/40—Rhythm
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
- G10H2210/076—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for extraction of timing, tempo; Beat detection
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Auxiliary Devices For Music (AREA)
- Electrophonic Musical Instruments (AREA)
Abstract
本发明涉及音频信号处理领域，具体涉及一种音乐中主节拍点检测方法及计算机存储介质、终端，所述方法包括：获取音乐的节拍点序列；计算所述节拍点序列中每两个相邻节拍点的距离值；统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期；从所述节拍点序列中获取一个节拍点，统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；判断所述数量是否符合条件，若是，确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点。本发明通过检测音乐的主节拍点，准确地表示音乐的节奏信息，以利用音乐的节奏信息对音乐进一步加工。
Description
技术领域
本发明涉及音频信号处理领域，具体涉及一种音乐中主节拍点检测方法及计算机存储介质、终端。
背景技术
音乐的不同节奏可以表达出不同的音乐情绪，随着互联网技术以及音频、图像处理技术的不断发展，用户在录制视频时会加播音乐以提高视频的音视觉体验，然而现有技术中，音乐仅仅是简单的加入到视频中，没有与视频很好的融合，究其原因是音乐的节拍没能准确地被检测出来，现有的音频检测方法，都把重点放在了单个节拍点的检测上，无论是利用时域信号包络的峰值，还是利用频域信号变化的差、异检测节拍点，而音乐的节拍点主要由特定的乐器引领，因而该种检测方法存在以下2点问题：
1.人声和其他乐器引入的干扰。由于乐曲和乐器的多样性，上述方法总会存在一定的把人声判为节拍点的可能；同时，如果节拍点前后存在较多的人声和其他乐器，也容易造成漏检。
2.没有利用音乐自身的规律性。音乐是人类创造的，用来表达自身情感的一种方式，因此其节奏一定有人类听觉和表达的一些基本规律，比如音乐中相邻两个节拍的间隔应在一定范围内，过大或过小的节拍间隔都是不正常的。
现有技术中仅简单地使用低通滤波获取信号时域包络后利用包络的变化获取音乐的节拍，这种方法对于很多音乐，特别是舞曲来说，音乐信号时域包络抖动很小，如图2所示，这种方法是无法检测出节拍的，假使能检测出音乐的节拍，这样检测出的节拍点，没有统一的规律，再加上误检和漏检的可能，导致最终的节拍点序列很杂乱，无法有效的表现音乐的特点，进而无法跟视频有效地结合。
发明内容
为克服以上技术问题，特别是现有技术无法准确地检测出音乐中的主节拍点的问题，特提出以下技术方案：
本发明的实施例根据一个方面，提供了一种音乐中主节拍点检测方法，包括：
获取音乐的节拍点序列；
计算所述节拍点序列中每两个相邻节拍点的距离值；
统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期；
从所述节拍点序列中获取一个节拍点，统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；
判断所述数量是否符合条件，若是，确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点。
进一步地，所述统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期，包括：
统计相同的距离值出现的次数，把所述出现的次数最大值的距离值作为节拍周期。
进一步的，所述从所述节拍点序列中获取一个节拍点，包括：
从所述节拍点序列中获取第一个节拍点；
所述判断所述数量是否符合条件之后，还包括：
若否，判断所述节拍点序列中节拍点是否取完，若节拍点没取完，从所述节拍点序列中获取下一个节拍点，继续所述统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；若节拍点已取完，确认所述音乐没有主节拍点。
进一步地，所述统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期，包括：
统计相同的距离值出现的次数，按所述次数由大到小对所述距离值进行排序，形成距离值序列，从距离值序列中获取第一个距离值，把所述获取的距离值作为节拍周期。
更进一步地，所述从所述节拍点序列中获取一个节拍点，包括：
从所述节拍点序列中获取第一个节拍点；
所述判断所述数量是否符合条件之后，还包括：
若否，判断所述节拍点序列中节拍点是否取完，若节拍点没取完，从所述节拍点序列中获取下一个节拍点，继续所述统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；
若节拍点已取完，判断所述距离值序列中距离值是否取完，若距离值没取完，从所述距离值序列中获取下一个距离值，把所述获取的距离值作为节拍周期，继续所述从所述节拍点序列中获取第一个节拍点的步骤，若距离值已取完，确认所述音乐没有主节拍点。
具体地，所述判断所述数量是否符合条件，包括：
判断所述数量与总节拍点的比值是否大于阈值；
或
判断所述数量是否大于预设数量。
可选地，所述节拍点为音乐中的军鼓节拍点，所述获取音乐的节拍点序列，包括：
获取音乐的军鼓节拍点序列。
进一步地，所述确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点之后，还包括：
根据所述主节拍点得到所述音乐的节奏类型，获取所述节奏类型对应主节拍点的特效和光影；
在播放所述音乐时，在主节拍点的位置，对视频添加所述特效和光影。
本发明的实施例根据另一个方面，还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现上述的音乐中主节拍点检测方法。
本发明的实施例根据又一个方面，还提供了一种终端，所述终端包括一个或多个处理器；存储器；一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行上述的音乐中主节拍点检测方法。
本发明与现有技术相比，具有以下有益效果：
本发明通过节拍点序列和节拍周期选取音乐的节拍点序列中满足周期性的节拍点作为音乐的主节拍点，过滤音乐中的人声或其它乐器形成的节拍点造成的误检和干扰，主节拍点构成了音乐中最主要的节奏，从音乐的节拍点序列中获取主节拍点，更准确地表示音乐的节奏信息，同时方便后续利用这个节奏信息对音乐进行进一步的加工。
此外，本发明通过选取节拍点序列中不同的节拍点作为起始节拍点及不同的节拍周期，一步步地精确主节拍点的条件，在所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量符合条件时，才确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点，以此准确地检测出音乐中的主节拍点。
再者，本发明所述主节拍点为军鼓节拍点，基于音乐的节奏、军鼓在音乐中的表现特性检测出音乐中的军鼓节拍点，更好地体现音乐所表达情绪，并且为后续的音视频特效处理做准备。
本发明附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1为本发明音乐中主节拍点检测方法的一实施例流程示意图；
图2为音乐信号的时域包络抖动示例图；
图3为本发明终端的一实施例结构示意图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能解释为对本发明的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作。
本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样被特定定义，否则不会用理想化或过于正式的含义来解释。
在一种实施例中，本发明提供一种音乐中主节拍点检测方法，如图1所示，该方法包括：
S100：获取音乐的节拍点序列。
节拍点是音乐中鼓或其它乐器敲击时形成的人耳能明显感知、与音乐中其它部分差异较大的位置，在音乐的音频信号会有明显特征，本实施例获取音乐信号的每一帧的频谱，然后通过比较每一帧信号的频谱在特定频段的能量、能量变化值、能量平坦度确定音乐信号中满足特征条件的帧，该些帧即对应了音乐中的节拍点，各节拍点在音乐信号的时域上均有对应的时间值，将所有节拍点以其时间值的前后排序便得到音乐的节拍点序列，本实施例中以B(n)表示。
S200：计算所述节拍点序列中每两个相邻节拍点的距离值。
在获取了音乐的节拍点序列后，本实施例定义两个节拍点的时间值的差值为两个节拍点的距离值，然后计算所述节拍点序列中每两个相邻节拍点的距离值，以D(n)表示。节拍点序列B(n)为{B(1),B(2),B(3)…,B(n)}，则相邻节拍点的距离值D(n)＝B(n+1)–B(n)，比如B(1)＝-1.7,B(2)＝0,B(3)＝1，B(4)＝2，B(5)＝4，B(6)＝4.3，B(7)＝5，B(8)＝7，B(9)＝9，则D(1)＝1.7,D(2)＝D(3)＝D(4)＝1,D(5)＝0.3,D(6)＝0.7,D(7)＝D(8)＝2。
S300：统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期。
在计算得到所述节拍点序列中每两个相邻节拍点的距离值之后，统计相同的距离值出现的次数，然后根据所述次数确定相应的距离值为节拍周期，以T(n)表示。例如上述实施例中，D(1)＝1.7，D(2)＝D(3)＝D(4)＝1，D(5)＝0.3，D(6)＝0.7，D(7)＝D(8)＝2，其中，D(n)为1出现了3次，D(n)为2出现了2次，D(n)为其他值都是1次，当根据距离值出现3次确定节拍周期时，此时节拍周期为1；当根据距离值出现2次确定节拍周期时，此时节拍周期为2，则节拍周期可表示为T(1)＝1，T(2)＝2，T(3)＝1.7。
S400：从所述节拍点序列中获取一个节拍点，统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量。
在获取音乐的节拍点序列和选定了节拍周期后，从所述节拍点序列中获取一个节拍点，即从B(n)从选取B(1)或B(2)或B(3)等任意一个节拍点，每个节拍点都有相应的时间值，再根据选定的节拍周期确定基准时间点序列，本实施例中，通过所述获取的节拍点加上整数倍节拍周期确定基准时间点序列，以{B(i),B(i)+T(j),B(i)+2T(j),…,B(i)+mT(j)}表示所述基准时间点序列，其中m为整数，基准时间点序列中的每一个基准时间点对应一个时间值，然后再将节拍点序列中的其它节拍点的时间值与所述基准时间点的时间值比较，当节拍点的时间值与基准时间点的时间值相同时，表示节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置上，以此统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量。
S500：判断所述数量是否符合条件，若是，确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点。
在统计得到节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量后，判断该数量是否符合条件，若是，则确定所获取的节拍点及落入到整数倍节拍周期位置的其它节拍点为音乐的主节拍点，例如所获取的节拍点为B(1)，其它节拍点落入到整数倍节拍周期位置B(1)+2T(1)、B(1)+3T(1)、B(1)+5T(1)中，该些节拍点包括B(1)、B(2)、B(4)、B(5)，则节拍点序列中的B(1)、B(2)、B(4)、B(5)为音乐的主节拍点。
主节拍点就构成了音乐中最主要的节奏，后续便可利用这个节奏信息，对音乐进行进一步的加工。本实施例中，当检测得到音乐的主节拍点后，利用主节拍点在音乐中出现的位置，即主节拍点出现的时间，在该位置处添加一些音视频特效或光影效果，以此增强音乐/视频的表现力。例如，用户在客户端录制视频时，选定了一首音乐作为背景音乐，客户端通过上述方法检测出背景音乐的主节拍点，当所述播放背景音乐到达主节拍点对应的时间，在视频录制界面上渲染出视频特效，如添加烟花效果、鼓敲击效果，以此增强视频的表现形式，提高视频的观看效果。
优选的，本发明的一种实施例，所述统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期，包括：
统计相同的距离值出现的次数，把所述出现的次数最大值的距离值作为节拍周期。
由于音乐中主节拍点在一定程度上表现了一首音乐作品的整体节奏，主节拍点出现的次数比其它节拍点出现的次数多，本实施例基于该音乐特征，在统计相同的距离值出现的次数时，把所述出现的次数最大值的距离值作为节拍周期。例如，D(n)为1出现了3次，D(n)为2出现了2次，D(n)为其他值都是1次，则以D(n)为1作为节拍周期。
本发明的一种实施例，所述从所述节拍点序列中获取一个节拍点，包括：
从所述节拍点序列中获取第一个节拍点；
所述判断所述数量是否符合条件之后，还包括：
若否，判断所述节拍点序列中节拍点是否取完；
若节拍点没取完，从所述节拍点序列中获取下一个节拍点，继续所述统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；若节拍点已取完，确认所述音乐没有主节拍点。
本实施例中，节拍点序列的节拍点以其时间值的前后排序，即节拍点序列B(n)为{B(1),B(2),B(3)…,B(n)}，然后从所述节拍点序列中选取第一个节拍点，即选取B(1)，以B(1)为起始节拍点加上整数倍节拍周期确定基准时间点序列{B(1),B(1)+T(j),B(1)+2T(j),…,B(1)+mT(j)}，然后再将节拍点序列中的其它节拍点B(2),B(3)…,B(n)的时间值与所述基准时间点的时间值比较，当节拍点的时间值与基准时间点的时间值相同时，表示节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置上，统计出所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量，然后判断所述数量是否符合条件，当所述数量不符合条件时，判断所述节拍点序列中节拍点是否取完，若节拍点没取完，从所述节拍点序列中获取下一个节拍点，即取下一个节拍点B(2)，此时的基准时间点序列为{B(2),B(2)+T(j),B(2)+2T(j),…,B(2)+mT(j)}，同样地，统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量，再次判断所述数量是否符合条件，若是，则确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点；否则，依次取节拍点序列中的下一个节拍点直到取完所有的节拍点，当取完所有的节拍点后所述数量仍然不满足条件，则确认所述音乐没有主节拍点。
本发明的一种实施例，所述统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期，包括：
统计相同的距离值出现的次数，按所述次数由大到小对所述距离值进行排序，形成距离值序列，从距离值序列中获取第一个距离值，把所述获取的距离值作为节拍周期。
本实施例中，在统计相同的距离值出现的次数后，按次数由大到小对所述距离值进行排序，形成距离值序列，以T(n)表示，然后从距离值序列中获取第一个距离值，将该距离值作为节拍周期。例如上述实施例中，D(1)＝1.7，D(2)＝D(3)＝D(4)＝1，D(5)＝0.3，D(6)＝0.7，D(7)＝D(8)＝2，其中，D(n)为1出现了3次，D(n)为2出现了2次，D(n)为其他值都是1次，按次数由大到小对所述距离值进行排序，形成距离值序列T(1)＝1，T(2)＝2，T(3)＝1.7，T(4)＝0.3，取距离值序列中的第一个距离值即T(1)＝1作为节拍周期，即以距离值出现次数最多的距离值为节拍周期。
进一步的，上述实施例中，所述从所述节拍点序列中获取一个节拍点，包括：
从所述节拍点序列中获取第一个节拍点；
所述判断所述数量是否符合条件之后，还包括：
若否，判断所述节拍点序列中节拍点是否取完，若节拍点没取完，从所述节拍点序列中获取下一个节拍点，继续所述统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；
本实施例中，节拍点序列的节拍点以其时间值的前后排序，即节拍点序列B(n)为{B(1),B(2),B(3)…,B(n)}，然后从所述节拍点序列中选取第一个节拍点，即选取B(1)，再从距离值序列中选取第一个节拍周期T(1)，以B(1)为起始节拍点加上整数倍节拍周期确定基准时间点序列{B(1),B(1)+T(1),B(1)+2T(1),…,B(1)+mT(1)}，然后再将节拍点序列中的其它节拍点B(2),B(3)…,B(n)的时间值与所述基准时间点的时间值比较，当节拍点的时间值与基准时间点的时间值相同时，表示节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置上，统计出所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量，然后判断所述数量是否符合条件，当所述数量不符合条件时，判断所述节拍点序列中节拍点是否取完，若节拍点没取完，从所述节拍点序列中获取下一个节拍点，即取下一个节拍点B(2)，此时的基准时间点序列为{B(2),B(2)+T(1),B(2)+2T(1),…,B(2)+mT(1)}，同样地，统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量，再次判断所述数量是否符合条件，若是，则确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点；否则，依次取节拍点序列中的下一个节拍点直到取完所有的节拍点，当取完所有的节拍点后所述数量仍然不满足条件，执行下述操作：
若节拍点已取完，判断所述距离值序列中距离值是否取完，若距离值没取完，从所述距离值序列中获取下一个距离值，把所述获取的距离值作为节拍周期，继续执行所述从所述节拍点序列中获取第一个节拍点，若距离值已取完，确认所述音乐没有主节拍点。
进一步的，本实施例中，当节拍点已取完所述数量仍不符合条件，再判断所述距离值序列中距离值是否取完，若距离值没取完，从所述距离值序列中获取下一个距离值T(2)，把所述获取的距离值T(2)作为节拍周期，然后继续所述从所述节拍点序列中获取第一个节拍点的步骤，以B(1)为起始节拍点加上整数倍节拍周期T(2)确定基准时间点序列{B(1),B(1)+T(2),B(1)+2T(2),…,B(1)+mT(2)}，然后再将节拍点序列中的其它节拍点B(2),B(3)…,B(n)的时间值与所述基准时间点的时间值比较，统计出所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量，当所述数量不符合条件时，判断所述距离值序列中距离值是否取完，若距离值已取完，所述数量仍然没有满足条件，则确认所述音乐没有主节拍点。
可选的，本发明实施例中，所述判断所述数量是否符合条件，包括：
判断所述数量与总节拍点的比值是否大于阈值；
或
判断所述数量是否大于预设数量。
一种实施方式中，判断所述数量与总节拍点的比值是否大于阈值，例如所述数量与节拍点序列中总节拍点的数量的比值应大于80％，才确定所述数量符合条件；在另一种实施方式中，判断所述数量是否大于预设数量，例如希望找出音乐中的10个主节拍点，则当所述数量大于预设数量10时，确定所述数量符合条件，确定相应节拍点为音乐的主节拍点。
优选的，本发明实施例中，所述节拍点为音乐中的军鼓节拍点，所述获取音乐的节拍点序列，包括：
获取音乐的军鼓节拍点序列。
本实施例中，在开始获取的军鼓节拍点序列为精度较粗糙的候选军鼓节拍点序列，然后通过上述实施例的方法得到音乐中的主节拍点，也即获得精确的军鼓节拍点序列，在包含架子鼓演奏的音乐中，军鼓音色清晰、明快，通过各种敲击效果(如轻、重、缓、急的区别)可以表达出不同的音乐情绪，本实施例以军鼓节拍点作为音乐的主节拍点以更好地体现音乐所表达情绪，并且为后续的音视频特效处理做准备。
进一步的，本发明在获取音乐的节拍点序列，包括：
获取检测出的候选节拍点，根据候选节拍点的强度值提取节拍点，按位置从前到后对节拍点进行排序，形成节拍点序列。
本实施例中，第一次检测到的候选节拍点，再通过节拍点的强度进行筛选，对于强度满足预设值的节拍点才确定为音乐的节拍点，然后按节拍点在时域上出现的位置从前到后对节拍点进行排序，形成所述节拍点序列。
进一步的，本发明的一种实施例，所述确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点之后，还包括：
根据所述主节拍点得到所述音乐的节奏类型，获取所述节奏类型对应主节拍点的特效和光影；
在播放所述音乐时，在主节拍点的位置，对视频添加所述特效和光影。
在确定了音乐的主节拍点后，根据所出现的主节拍点确定音乐的节奏类型，尤其是电子音乐或舞曲，在节拍点上有明显的特征，同时具有增强音乐情绪的作用，然后本实施例获取所述节奏类型对应主节拍点的特效和光影，在播放所述音乐时，在主节拍点的位置，对视频添加所述特效和光影。例如用户在录制视频时，播放的音乐中出现主节拍点，此时在视频录制界面上渲染出“军鼓敲击”的图形特效以及相应的光影效果，以此增强视频的表现形式，提高视频的观看效果。
在另一种实施例中，本发明提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现上述实施例所述的音乐中主节拍点检测方法。其中，所述计算机可读存储介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、CD-ROM、和磁光盘)、ROM(Read-Only Memory，只读存储器)、RAM(Random AcceSSMemory，随即存储器)、EPROM(EraSable Programmable Read-Only Memory，可擦写可编程只读存储器)、EEPROM(Electrically EraSable Programmable Read-Only Memory，电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是，存储设备包括由设备(例如，计算机、手机)以能够读的形式存储或传输信息的任何介质，可以是只读存储器，磁盘或光盘等。
本发明实施例提供的一种计算机可读存储介质，可实现获取音乐的节拍点序列；计算所述节拍点序列中每两个相邻节拍点的距离值；统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期；从所述节拍点序列中获取一个节拍点，统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；判断所述数量是否符合条件，若是，确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点。通过节拍点序列和节拍周期选取音乐的节拍点序列中满足周期性的节拍点作为音乐的主节拍点，过滤音乐中的人声或其它乐器形成的节拍点造成的误检和干扰，主节拍点构成了音乐中最主要的节奏，从音乐的节拍点序列中获取主节拍点，更准确地表示音乐的节奏信息，同时方便后续利用这个节奏信息对音乐进行进一步的加工。此外，本发明提供的计算机可读存储介质还可实现通过选取节拍点序列中不同的节拍点作为起始节拍点及不同的节拍周期，一步步地精确主节拍点的条件，在所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量符合条件时，才确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点，以此准确地检测出音乐中的主节拍点。
本发明实施例提供的计算机可读存储介质可以实现上述音乐中主节拍点检测方法的实施例，具体功能实现请参见方法实施例中的说明，在此不再赘述。
此外，在又一种实施例中，本发明还提供一种终端，如图3所示，所述终端可以包括一个或者一个以上的处理器301，还包括存储器302、WiFi(wireless fidelity，无线保真)电路303、RF(Radio Frequency，射频)电路304、音频电路305、传感器306、输出设备307、输入设备304、电源309，处理器301是终端的控制中心，利用各种接口和线路连接以上各部分。本领域技术人员可以理解，图3中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
WiFi电路303可为用户提供无线局域网或互联网访问；其可包括天线、WiFi模块等。RF电路304可收发信息，或在通话过程中信号的接收和发送；其可包括天线、至少一个放大器、调谐器、一个或多个振荡器、耦合器、双工器等。音频电路305可将接收到的音频数据转换成电信号，传输到扬声器，也可将传声器收集的声音信号转换为音频数据，发给处理器301处理；其可设置扬声器、传声器、耳机接口等。传感器306可用于感应外界信号，并发给处理器301处理；其可包括运动传感器、光传感器等。输出设备307可用于显示各种信号；其可为采用LCD(Liquid Crystal Display，液晶显示器)、OLED(Organic Light-EmittingDiode，有机发光二极管)等形式来配置显示面板。输入设备304可用于输入数字和字符等信息；其可为物理按键、触控面板等。电源309可为终端各部分供电，通过电源管理系统与处理器309逻辑连接；其可包括一个或一个以上的直流或交流电源、充电系统、电源状态指示器等组件。存储器302可用于存储软件程序以及模块；其可为计算机可读存储介质，具体的为硬盘、闪存等。处理器是终端的控制中心，通过运行或执行存储在存储器302内的软件程序和/或模块，以及调用存储在存储器302的数据，执行终端各种功能、处理终端数据。
作为一个实施例，终端包括：一个或多个处理器301，存储器302，一个或多个应用程序，其中所述一个或多个应用程序被存储在存储器302中并被配置为由所述一个或多个处理器301执行，所述一个或多个程序配置用于执行以上实施例所述的音乐中主节拍点检测方法。
本发明实施例提供的一种终端，可实现获取音乐的节拍点序列；计算所述节拍点序列中每两个相邻节拍点的距离值；统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期；从所述节拍点序列中获取一个节拍点，统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；判断所述数量是否符合条件，若是，确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点。通过节拍点序列和节拍周期选取音乐的节拍点序列中满足周期性的节拍点作为音乐的主节拍点，过滤音乐中的人声或其它乐器形成的节拍点造成的误检和干扰，主节拍点构成了音乐中最主要的节奏，从音乐的节拍点序列中获取主节拍点，更准确地表示音乐的节奏信息，同时方便后续利用这个节奏信息对音乐进行进一步的加工。此外，本发明提供的终端还可实现通过选取节拍点序列中不同的节拍点作为起始节拍点及不同的节拍周期，一步步地精确主节拍点的条件，在所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量符合条件时，才确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点，以此准确地检测出音乐中的主节拍点。
本发明实施例提供的终端可以实现上述提供的音乐中主节拍点检测方法的实施例，具体功能实现请参见方法实施例中的说明，在此不再赘述。
以上所述仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (9)
1.一种音乐中主节拍点检测方法，其特征在于，包括：
获取音乐的节拍点序列；
计算所述节拍点序列中每两个相邻节拍点的距离值，其中，两个节拍点的距离值被定义为两个节拍点的时间值的差值；
统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期；
从所述节拍点序列中获取一个节拍点，统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；
判断所述数量与总节拍点的比值是否大于阈值；
或
判断所述数量是否大于预设数量；
若是，确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点。
2.根据权利要求1所述的方法，其特征在于，所述统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期，包括：
统计相同的距离值出现的次数，把所述出现的次数最大值的距离值作为节拍周期。
3.根据权利要求1所述的方法，其特征在于，所述从所述节拍点序列中获取一个节拍点，包括：
从所述节拍点序列中获取第一个节拍点；
所述判断所述数量与总节拍点的比值是否大于阈值，或判断所述数量是否大于预设数量之后，还包括：
若否，判断所述节拍点序列中节拍点是否取完，若节拍点没取完，从所述节拍点序列中获取下一个节拍点，继续所述统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；若节拍点已取完，确认所述音乐没有主节拍点。
4.根据权利要求1所述的方法，其特征在于，所述统计相同的距离值出现的次数，根据所述次数确定对应的距离值为节拍周期，包括：
统计相同的距离值出现的次数，按所述次数由大到小对所述距离值进行排序，形成距离值序列，从距离值序列中获取第一个距离值，把所述获取的距离值作为节拍周期。
5.根据权利要求4所述的方法，其特征在于，所述从所述节拍点序列中获取一个节拍点，包括：
从所述节拍点序列中获取第一个节拍点；
所述判断所述数量与总节拍点的比值是否大于阈值，或判断所述数量是否大于预设数量之后，还包括：
若否，判断所述节拍点序列中节拍点是否取完，若节拍点没取完，从所述节拍点序列中获取下一个节拍点，继续所述统计所述节拍点序列中其它节拍点的位置落到所述获取的节拍点加上整数倍节拍周期的位置的数量；
若节拍点已取完，判断所述距离值序列中距离值是否取完，若距离值没取完，从所述距离值序列中获取下一个距离值，把所述获取的距离值作为节拍周期，继续所述从所述节拍点序列中获取第一个节拍点的步骤，若距离值已取完，确认所述音乐没有主节拍点。
6.根据权利要求1所述的方法，其特征在于，所述节拍点为音乐中的军鼓节拍点，所述获取音乐的节拍点序列，包括：
获取音乐的军鼓节拍点序列。
7.根据权利要求1所述的方法，其特征在于，所述确认所述获取的节拍点和落到整数倍节拍周期位置的其它节拍点为音乐的主节拍点之后，还包括：
根据所述主节拍点得到所述音乐的节奏类型，获取所述节奏类型对应主节拍点的特效和光影；
在播放所述音乐时，在主节拍点的位置，对视频添加所述特效和光影。
8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现权利要求1至7任一项所述的音乐中主节拍点检测方法。
9.一种终端，其特征在于，包括：
一个或多个处理器；
存储器；
一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个应用程序配置用于执行根据权利要求1～7任一项所述的音乐中主节拍点检测方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711464046.9A CN108335688B (zh) | 2017-12-28 | 2017-12-28 | 音乐中主节拍点检测方法及计算机存储介质、终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711464046.9A CN108335688B (zh) | 2017-12-28 | 2017-12-28 | 音乐中主节拍点检测方法及计算机存储介质、终端 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108335688A CN108335688A (zh) | 2018-07-27 |
| CN108335688B true CN108335688B (zh) | 2021-07-06 |
Family
ID=62924779
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711464046.9A Active CN108335688B (zh) | 2017-12-28 | 2017-12-28 | 音乐中主节拍点检测方法及计算机存储介质、终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108335688B (zh) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108108457B (zh) * | 2017-12-28 | 2020-11-03 | 广州市百果园信息技术有限公司 | 从音乐节拍点中提取大节拍信息的方法、存储介质和终端 |
| CN109545249B (zh) * | 2018-11-23 | 2020-11-03 | 广州酷狗计算机科技有限公司 | 一种处理音乐文件的方法及装置 |
| CN110890083B (zh) * | 2019-10-31 | 2022-09-02 | 北京达佳互联信息技术有限公司 | 音频数据的处理方法、装置、电子设备及存储介质 |
| CN111835986B (zh) * | 2020-07-09 | 2021-08-24 | 腾讯科技（深圳）有限公司 | 视频编辑处理方法、装置及电子设备 |
| CN112489681B (zh) * | 2020-11-23 | 2024-08-16 | 瑞声新能源发展(常州)有限公司科教城分公司 | 节拍识别方法、装置及存储介质 |
| CN112908289B (zh) * | 2021-03-10 | 2023-11-07 | 百果园技术(新加坡)有限公司 | 节拍确定方法、装置、设备和存储介质 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPWO2007004541A1 (ja) * | 2005-07-01 | 2009-01-29 | パイオニア株式会社 | コンピュータプログラム、並びに情報再生装置及び方法 |
| CN101399035A (zh) * | 2007-09-27 | 2009-04-01 | 三星电子株式会社 | 从音频文件提取节拍的方法和设备 |
| JP5481798B2 (ja) * | 2008-03-31 | 2014-04-23 | ヤマハ株式会社 | ビート位置検出装置 |
| JP5625235B2 (ja) * | 2008-11-21 | 2014-11-19 | ソニー株式会社 | 情報処理装置、音声解析方法、及びプログラム |
| JP6047985B2 (ja) * | 2012-07-31 | 2016-12-21 | ヤマハ株式会社 | 伴奏進行生成装置及びプログラム |
| US8829322B2 (en) * | 2012-10-26 | 2014-09-09 | Avid Technology, Inc. | Metrical grid inference for free rhythm musical input |
| US9293124B2 (en) * | 2013-01-22 | 2016-03-22 | Gibson Brands, Inc. | Tempo-adaptive pattern velocity synthesis |
| CN103578478B (zh) * | 2013-11-11 | 2016-08-17 | 科大讯飞股份有限公司 | 实时获取音乐节拍信息的方法及系统 |
| CN105513583B (zh) * | 2015-11-25 | 2019-12-17 | 福建星网视易信息系统有限公司 | 一种歌曲节奏的显示方法及其系统 |
| CN106057192A (zh) * | 2016-07-07 | 2016-10-26 | Tcl集团股份有限公司 | 一种实时语音转换方法和装置 |
-
2017
- 2017-12-28 CN CN201711464046.9A patent/CN108335688B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN108335688A (zh) | 2018-07-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108335688B (zh) | 音乐中主节拍点检测方法及计算机存储介质、终端 | |
| CN110012169B (zh) | 天线切换方法、装置、存储介质及电子设备 | |
| EP2945045B1 (en) | Electronic device and method of playing music in electronic device | |
| US20190026068A1 (en) | Sound effect configuration method and system and related device | |
| CN108108457B (zh) | 从音乐节拍点中提取大节拍信息的方法、存储介质和终端 | |
| CN110618933A (zh) | 性能分析方法与系统、电子设备与存储介质 | |
| WO2019015575A1 (zh) | 解锁控制方法及相关产品 | |
| WO2019019891A1 (en) | METHOD, MOBILE TERMINAL, AND NON-TRANSITORY COMPUTER-READABLE STORAGE MEDIUM USED TO ADJUST THE SCAN FREQUENCY OF A TOUCH SCREEN | |
| CN106022069B (zh) | 一种解锁控制方法及移动终端 | |
| US20210141878A1 (en) | Unlocking control method and related products | |
| CN109460364A (zh) | 应用程序检测方法、装置、存储介质及移动终端 | |
| CN110392298A (zh) | 一种音量调节方法、装置、设备及介质 | |
| CN108388340A (zh) | 电子设备控制方法及相关产品 | |
| CN108881875A (zh) | 图像白平衡处理方法、装置、存储介质及终端 | |
| CN115702993A (zh) | 跳绳状态的检测方法及电子设备 | |
| CN114282169A (zh) | 一种异常数据的检测方法以及相关装置 | |
| CN108960213A (zh) | 目标跟踪方法、装置、存储介质及终端 | |
| CN107679870A (zh) | 刷量资源确定方法及装置 | |
| CN106791108A (zh) | 一种接近传感器的阈值更新方法、装置及终端 | |
| CN108680181B (zh) | 无线耳机、基于耳机检测的计步方法及相关产品 | |
| CN111159551A (zh) | 用户生成内容的显示方法、装置及计算机设备 | |
| CN107945777B (zh) | 一种音频制作方法、移动终端及计算机可读存储介质 | |
| CN114333905A (zh) | 耳机佩戴检测方法和装置、电子设备、存储介质 | |
| CN111739493B (zh) | 音频处理方法、装置及存储介质 | |
| CN111063372B (zh) | 确定音高特征的方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20220517 Address after: 31a, 15th floor, building 30, maple commercial city, bangrang Road, Brazil Patentee after: Baiguoyuan Technology (Singapore) Co.,Ltd. Address before: Building B-1, North District, Wanda Commercial Plaza, Wanbo business district, No. 79, Wanbo 2nd Road, Nancun Town, Panyu District, Guangzhou City, Guangdong Province Patentee before: GUANGZHOU BAIGUOYUAN INFORMATION TECHNOLOGY Co.,Ltd. |