CN106132040B - 歌唱环境的灯光控制方法和装置 - Google Patents
歌唱环境的灯光控制方法和装置 Download PDFInfo
- Publication number
- CN106132040B CN106132040B CN201610452257.XA CN201610452257A CN106132040B CN 106132040 B CN106132040 B CN 106132040B CN 201610452257 A CN201610452257 A CN 201610452257A CN 106132040 B CN106132040 B CN 106132040B
- Authority
- CN
- China
- Prior art keywords
- sequence
- audio signal
- voice
- loudness
- emotion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 230000008451 emotion Effects 0.000 claims abstract description 106
- 230000005236 sound signal Effects 0.000 claims abstract description 104
- 238000013507 mapping Methods 0.000 claims description 48
- 238000005070 sampling Methods 0.000 claims description 19
- 238000012545 processing Methods 0.000 claims description 11
- 238000009432 framing Methods 0.000 claims description 10
- 230000001755 vocal effect Effects 0.000 claims description 8
- 238000009499 grossing Methods 0.000 claims description 7
- 230000000694 effects Effects 0.000 abstract description 9
- 230000008569 process Effects 0.000 description 12
- 238000004364 calculation method Methods 0.000 description 10
- 230000001795 light effect Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 6
- 230000033764 rhythmic process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000002996 emotional effect Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
- H05B47/10—Controlling the light source
- H05B47/105—Controlling the light source in response to determined parameters
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2210/00—Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
- G10H2210/031—Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Hospice & Palliative Care (AREA)
- Psychiatry (AREA)
- General Health & Medical Sciences (AREA)
- Child & Adolescent Psychology (AREA)
- Signal Processing (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
本发明提出一种歌唱环境的灯光控制方法和装置,该方法包括:获取歌唱者的人声音频信号和伴奏音频信号;根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。该方法不需要投入专业技能的人力,可以降低人力成本,提高灯光控制的普适性,另外还可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
Description
技术领域
本发明涉及语音信号处理技术领域,尤其涉及一种歌唱环境的灯光控制方法和装置。
背景技术
随着科技和人们水平的提高,当人们处于歌唱环境时,如在KTV唱歌时,不仅追求高质量的音质和画面效果,对舒适、合适的歌唱环境的氛围灯的需求也逐渐凸显。
相关技术中,歌唱环境的灯光控制方式主要包括人工控制方式和脚本化的控制方式。人工控制方式是通过人工根据现场气氛需要手动地控制灯光的跟踪或者灯光的方向、明暗、颜色等。脚本化的控制方式根据是否有声音来启动或关闭灯光,在启动灯光后,采用预先内置的几套灯光效果进行切换播放。
但是,人工控制方式需要投入专业技能的人力,人力成本高,不具有普适性。脚本化的控制方式灯光效果固定单一,难以贴合现场氛围。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本发明的一个目的在于提出一种歌唱环境的灯光控制方法,该方法不需要投入专业技能的人力,可以降低人力成本,提高灯光控制的普适性,另外还可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
本发明的另一个目的在于提出一种歌唱环境的灯光控制装置。
为达到上述目的,本发明第一方面实施例提出的歌唱环境的灯光控制方法,包括:获取歌唱者的人声音频信号和伴奏音频信号;根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。
本发明第一方面实施例提出的歌唱环境的灯光控制方法,通过确定歌唱者情感序列和人声响度值序列,以及确定伴奏响度值序列,以及根据上述的三种序列中的一种或多种进行灯光控制,可以实现自动进行灯光控制而不是由人工进行控制,从而不需要投入专业技能的人力,降低人力成本,提高灯光控制的普适性;另外,根据上述的三种序列中的一种或多种进行灯光控制,可以在采用的序列不同时,产生不同的灯光控制效果,从而可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
为达到上述目的,本发明第二方面实施例提出的歌唱环境的灯光控制装置,包括:获取模块,用于获取歌唱者的人声音频信号和伴奏音频信号;确定模块,用于根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;控制模块,用于根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。
本发明第二方面实施例提出的歌唱环境的灯光控制装置,通过确定歌唱者情感序列和人声响度值序列,以及确定伴奏响度值序列,以及根据上述的三种序列中的一种或多种进行灯光控制,可以实现自动进行灯光控制而不是由人工进行控制,从而不需要投入专业技能的人力,降低人力成本,提高灯光控制的普适性;另外,根据上述的三种序列中的一种或多种进行灯光控制,可以在采用的序列不同时,产生不同的灯光控制效果,从而可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是本发明一个实施例提出的歌唱环境的灯光控制方法的流程示意图;
图2是本发明实施例中根据人声音频信号确定歌唱者情感序列的流程示意图;
图3是本发明实施例中计算人声音频信号的基频均值的流程示意图;
图4是本发明实施例中基频均值与情感之间的映射曲线的示意图;
图5是本发明实施例中根据人声音频信号确定人声响度值序列的流程示意图;
图6是本发明另一个实施例提出的歌唱环境的灯光控制方法的流程示意图;
图7是本发明一个实施例提出的歌唱环境的灯光控制装置的结构示意图;
图8是本发明一个实施例提出的歌唱环境的灯光控制装置的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的模块或具有相同或类似功能的模块。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。相反,本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
图1是本发明一个实施例提出的歌唱环境的灯光控制方法的流程示意图。
参见图1,本实施例的流程包括:
S11:获取歌唱者的人声音频信号和伴奏音频信号。
其中,歌唱者的人声音频信号可以通过麦克风进行采集、降噪后得到。
伴奏音频信号由于通常是由购买方(如KTV)购买得到,因此,伴奏音频信号是确定,直接可以获取到购买的伴奏音频信号。
可以理解的是,人声音频信号和伴奏音频信号的获取方式并不限于上述方式,还可以采用其他方式。例如,对歌唱现场进行收音,再通过现有或将来出现的人声分离技术分别得到人声音频信号和伴奏音频信号。
S12:根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列。
其中,歌唱者情感序列是由一系列情感组成的序列,情感例如包括:悲伤、平静、愤怒、恐惧、高兴或惊讶等。
人声响度值序列是由人声音频信号对应的一系列的音频响度值组成的序列。
伴奏响度值序列是由伴奏音频信号对应的一系列的音频响度值组成的序列。
具体的情感以及音频响度值的确定方式可以参见后续描述。
S13:根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。
其中,灯光控制可以包括如下三个方面中的一种或多种的控制:转速、颜色和亮度。
具体的,可以根据歌唱者情感序列控制灯光的转速和/或颜色,根据人声响度值序列和伴奏响度值序列控制灯光的亮度。
具体的灯光控制内容可以参见后续描述。
本实施例中,通过确定歌唱者情感序列和人声响度值序列,以及确定伴奏响度值序列,以及根据上述的三种序列中的一种或多种进行灯光控制,可以实现自动进行灯光控制而不是由人工进行控制,从而不需要投入专业技能的人力,降低人力成本,提高灯光控制的普适性;另外,根据上述的三种序列中的一种或多种进行灯光控制,可以在采用的序列不同时,产生不同的灯光控制效果,从而可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
一些实施例中,参见图2,根据人声音频信号确定歌唱者情感序列的流程可以包括:
S21:计算人声音频信号的基频均值。
其中,本实施例中基频均值的计算方式不进行限制。
一种基频均值的计算流程可以如图3所示。
S22:获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系。
其中,人声音频信号可以包括:男声的人声音频信号,或者,女声的人声音频信号,相应的,参见图4,上述的映射关系可以具体是映射曲线,映射曲线具体包括:男声对应的映射曲线41和女声对应的映射曲线42。
因此,可以根据基频均值确定所述人声音频信号属于男声或者女声;
如果所述人声音频信号属于男声,则获取男声对应的所述映射关系;或者,
如果所述人声音频信号属于女声,则获取女声对应的所述映射关系。
进一步的,如果所述基频均值大于预设值,则确定所述人声音频信号属于女声;或者,如果所述基频均值小于或等于预设值,则确定所述人声音频信号属于男声。
进一步的,上述的预设值可以选为200Hz。
S23:根据所述映射关系,确定与计算得到的基频均值对应的情感,并根据确定出的情感组成歌唱者情感序列。
其中,根据如图4所示的映射曲线,可以确定出每个基频均值对应的情感。
在得到每个基频均值对应的情感后,可以直接将这些情感组成歌唱者情感序列。或者,
在根据映射曲线确定出基频均值对应的情感后,可以对确定出的情感进行平滑处理,将平滑处理后的情感组成歌唱者情感序列。
具体的,平滑处理包括:如果当前值的上一个和下一个情绪一样,且和当前值不同时,将当前值更正为上一个值。例如:
平滑处理前的一组情绪序列:[平静,平静,平静,平静,愤怒,平静,平静,平静,愤怒,愤怒,愤怒,平静],其中第5个值是“愤怒”,它的上一个值以及下一个值都为“平静”,但自己是“愤怒”,所以,将其更正为上一个值(第4个),即“平静”;第9个值是愤怒,但其上一个和下一个值不一样,所以无需更正。
本实施例中,通过计算基频均值,可以根据基频均值确定出歌词者情感序列。
一些实施例中,参见图3,计算人声音频信号的基频均值的流程可以包括:
S31:对人声音频信号进行数字化处理。
例如,数字化处理时采用脉冲编码调制(Pulse Code Modulation,PCM)处理,将人声音频信号从模拟信号转换为数字信号。
在PCM处理时,采样率可以选为16kHz,量化位数可以选为16bit,因此,得到每秒16k*16bit=32k字节(byte)的音频信号。
S32:对数字化处理后的音频信号进行分帧处理。
例如,可以将640字节作为1帧,因此,每帧音频信号长度=640/32k=20ms。另外,可以将帧移选为320字节。
S33:对每帧音频信号进行加窗处理。
例如,可以将滑动窗选为矩形窗。
S34:根据加窗处理后的音频信号计算人声音频信号的基频均值。
其中,可以对应每帧音频信号计算出一个基频,之后再将预设帧数的音频信号对应的基频进行取平均计算,得到基频均值。
上述的预设帧数例如选为10帧,则可以分别对应每帧音频数据计算出一个基频,之后将10个基频进行取平均计算,得到10*320字节/(32000字节/秒)=0.1s=100ms的音频数据对应的基频均值。
可以理解的是,在计算每帧音频数据对应的基频时,可以采用各种已有或将来出现的计算方式进行计算。
一种计算基频的方式是根据音频信号的短时平均幅度差函数计算得到,通过对短时平均幅度差函数进行谷点搜索,将两个相邻谷点的距离作为基音周期,将基音周期的倒数作为基频,从而计算得到基频。可以理解的是,由于根据短时平均幅度差函数计算基频是常用技术,本实施例不再详细描述。
因此,通过本实施例的流程可以计算出基频均值,之后可以依据基频均值采用上述实施例中的描述,可以确定出歌唱者情感序列。
一些实施例中,参见图5,根据人声音频信号确定人声响度值序列的流程可以包括:
S51:对所述人声音频信号进行数字化、分帧和加窗处理。
其中,数字化、分帧和加窗处理的具体内容可以参见上述计算基频均值时,对音频信号的处理,在此不再详细说明。
S52:计算处理后的每个采样点的声音响度值。
其中,每个采样点的声音响度值与该采样点的幅度值成正比。
一种计算方式为:
声音响度值(db)=20*lg(x/2^15)
其中,声音响度值以分贝(db)为单位,x是采样点的幅度值。
当然,可以理解的是,上述的计算公式只是一种具体示例,还可以采用其他计算方式。
S53:根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成人声响度值序列。
其中,可以将同一个窗口内的采样点的声音响度值的均值,确定为该窗口对应的音频响度值,因此,每个窗口会对应一个音频响度值,从而可以由每个窗口对应的音频响度值组成人声响度值序列。
本实施例中,通过上述流程可以计算出人声响度值序列。
一些实施例中,可以根据伴奏音频信号计算出伴奏响度值序列。该计算流程与人声响度值序列的计算流程的原理相同,不同的是,用伴奏音频信号替代上述的人声音频信号。即,根据伴奏音频信号计算伴奏响度值序列的流程可以包括:
对所述伴奏音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成伴奏响度值序列。
其中,具体内容可以参照对人声响度值序列的计算流程,在此不再详细说明。
如上所示,通过上述的实施例,可以计算出歌唱者情感序列、人声响度值序列和伴奏响度值序列。
在计算出上述三个序列后,可以采用其中的一种或多种进行灯光控制。
下面以根据上述三个序列进行灯光控制为例,可以理解的是,还可以根据其中的一个或两个序列进行灯光控制。另外,当采用其中的一个或两个序列进行灯光控制时,每个序列的具体控制内容可以参见下面实施例中的描述。
一些实施例中,参见图6,根据上述三个序列进行灯光控制的流程包括:
S61:根据所述歌唱者情感序列,控制灯光的转速和/或颜色;以及
S62:根据所述人声响度值序列和所述伴奏响度值序列,控制灯光的亮度。
具体的,可以根据预先构建的情感与转速和/或颜色的映射关系,控制灯光的转速和/或颜色与所述歌唱者情感序列中的情感对应。
下面以根据歌唱者情感序列控制灯光的转速和颜色为例,可以理解的是,也可以根据歌唱者情感序列控制转速或颜色。
当根级歌唱者情感序列控制灯光的转速和颜色时,例如,上述的情感与转速及颜色的映射关系具体是映射表,该映射表可以如表1所示。
表1
转速 | 颜色 | |
悲伤 | 0.1转/秒 | 白色 |
平静 | 0.2转/秒 | 白色,蓝色 |
愤怒 | 0.8转/秒 | 红色,蓝色 |
恐惧 | 1.2转/秒 | 黄色,蓝色 |
高兴 | 1.5转/秒 | 白色,红色 |
惊讶 | 1转/秒 | 黄色 |
在得到如表1所示的映射表后,可以据此映射表进行转速及颜色的控制。例如,当情感是悲伤时,可以控制转速为0.1转/秒,控制颜色为白色。当颜色为多个时,可以是控制不同灯的灯光颜色分别为一种颜色,具体的灯与颜色的对应关系可以预先配置。
具体的,根据预先构建的第一响度与亮度的映射关系,控制第一组灯光的亮度与所述人声响度值序列中的响度值对应;以及,根据预先构建的第二响度与亮度的映射关系,控制第二组灯光的亮度与所述伴奏响度值序列中的响度值对应。
其中,上述的第一响度与亮度的映射关系,以及,第二响度与亮度的映射关系中,亮度值与响度值成正比关系,即响度越大,则对应的亮度越大。
另外,如上描述的,人声响度值序列和伴奏响度值序列可以分别控制不同的灯光组,比如,人声响度值序列控制包括第一灯光和第二灯光的第一组灯光,伴奏响度值序列控制包括第三灯光和第四灯光的第二组灯光等,从而可以实现依据响度值完成对灯光亮度的控制。
进一步的,在灯光控制时,可以分为情感灯光控制器、人声节奏灯光控制器和伴奏节奏灯光控制器。具体的,可以在确定出歌唱者情感序列后,将该歌唱者情感序列发送给情感灯光控制器,由情感灯光控制器根据歌唱者情感序列进行上述的转速和颜色的控制。在确定出人声响度值序列后,将该人声响度值序列发送给人声节奏灯光控制器,由人声节奏灯光控制器根据人声响度值序列进行上述的第一组灯光的亮度控制。在确定出伴奏响度值序列后,将该伴奏响度值序列发送给伴奏节奏灯光控制器,由伴奏节奏灯光控制器根据伴奏响度值序列进行上述的第二组灯光的亮度控制。
本实施例中,根据歌唱者情感序列可以完成对灯光的转速和颜色的控制,根据人声响度值序列和伴奏响度值序列可以完成对灯光亮度的控制。
图7是本发明一个实施例提出的歌唱环境的灯光控制装置的结构示意图。如图7所示,该装置70包括:获取模块71、确定模块72和控制模块73。
获取模块71,用于获取歌唱者的人声音频信号和伴奏音频信号;
确定模块72,用于根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;
控制模块73,用于根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。
一些实施例中,参见图8,所述确定模块72包括:第一确定单元721,所述第一确定单元721用于:
计算所述人声音频信号的基频均值;
获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系;
根据所述映射关系,确定与计算得到的基频均值对应的情感,并根据确定出的情感组成歌唱者情感序列。
一些实施例中,所述映射关系包括:男声对应的映射关系和女声对应的映射关系,所述第一确定单元721用于获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系,包括:
根据所述基频均值确定所述人声音频信号属于男声或者女声;
如果所述人声音频信号属于男声,则获取男声对应的所述映射关系;或者,
如果所述人声音频信号属于女声,则获取女声对应的所述映射关系。
一些实施例中,所述第一确定单元721用于根据所述基频均值确定所述人声音频信号属于男声或者女声,包括:
如果所述基频均值大于预设值,则确定所述人声音频信号属于女声;或者,
如果所述基频均值小于或等于预设值,则确定所述人声音频信号属于男声。
一些实施例中,所述第一确定单元721用于根据确定出的情感组成歌唱者情感序列,包括:
将确定出的情感直接组成歌唱者情感序列;或者,
对确定出的情感进行平滑处理,将平滑处理后的情感组成歌唱者情感序列。
一些实施例中,参见图8,所述确定模块72包括:第二确定单元722,所述第二确定单元722用于:
对所述人声音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成人声响度值序列。
一些实施例中,参见图8,所述确定模块72包括:第三确定单元723,所述第三确定单元723用于:
对所述伴奏音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成伴奏响度值序列。
一些实施例中,参见8,当根据所述歌唱者情感序列和所述人声响度值序列,以及所述伴奏响度值序列,进行灯光控制时,所述控制模块73包括:
第一控制单元731,用于根据所述歌唱者情感序列,控制灯光的转速和/或颜色;以及
第二控制单元732,用于根据所述人声响度值序列和所述伴奏响度值序列,控制灯光的亮度。
一些实施例中,所述第一控制单元731具体用于:
根据预先构建的情感与转速和/或颜色的映射关系,控制灯光的转速和/或颜色与所述歌唱者情感序列中的情感对应。
一些实施例中,所述第二控制单元732具体用于:
根据预先构建的第一响度与亮度的映射关系,控制第一组灯光的亮度与所述人声响度值序列中的响度值对应;
根据预先构建的第二响度与亮度的映射关系,控制第二组灯光的亮度与所述伴奏响度值序列中的响度值对应。
可以理解的是,本实施例的装置与方法实施例对应,具体内容可以参见方法实施例中的描述,在此不再详细说明。
本实施例中,通过确定歌唱者情感序列和人声响度值序列,以及确定伴奏响度值序列,以及根据上述的三种序列中的一种或多种进行灯光控制,可以实现自动进行灯光控制而不是由人工进行控制,从而不需要投入专业技能的人力,降低人力成本,提高灯光控制的普适性;另外,根据上述的三种序列中的一种或多种进行灯光控制,可以在采用的序列不同时,产生不同的灯光控制效果,从而可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
需要说明的是,在本发明的描述中,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本发明的描述中,除非另有说明,“多个”的含义是指至少两个。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。
Claims (16)
1.一种歌唱环境的灯光控制方法,其特征在于,包括:
获取歌唱者的人声音频信号和伴奏音频信号;
根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;
根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制;其中,所述灯光的转速和/或颜色由所述歌唱者情感序列控制,所述灯光的亮度由所述声响度值序列和伴奏响度值序列控制,所述灯光包括第一组灯光和第二组灯光,所述第一组灯光的亮度由所述人声响度值序列中的响度值以及预先构建的第一响度和亮度的映射关系控制的,所述第二组灯光的亮度由预先构建的第二响度与亮度的映射关系以及所述伴奏响度值序列中的响度值。
2.根据权利要求1所述的方法,其特征在于,所述根据所述人声音频信号确定歌唱者情感序列,包括:
计算所述人声音频信号的基频均值;
获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系;
根据所述映射关系,确定与计算得到的基频均值对应的情感,并根据确定出的情感组成歌唱者情感序列。
3.根据权利要求2所述的方法,其特征在于,所述映射关系包括:男声对应的映射关系和女声对应的映射关系,所述获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系,包括:
根据所述基频均值确定所述人声音频信号属于男声或者女声;
如果所述人声音频信号属于男声,则获取男声对应的所述映射关系;或者,
如果所述人声音频信号属于女声,则获取女声对应的所述映射关系。
4.根据权利要求3所述的方法,其特征在于,所述根据所述基频均值确定所述人声音频信号属于男声或者女声,包括:
如果所述基频均值大于预设值,则确定所述人声音频信号属于女声;或者,
如果所述基频均值小于或等于预设值,则确定所述人声音频信号属于男声。
5.根据权利要求2所述的方法,其特征在于,所述根据确定出的情感组成歌唱者情感序列,包括:
将确定出的情感直接组成歌唱者情感序列;或者,
对确定出的情感进行平滑处理,将平滑处理后的情感组成歌唱者情感序列。
6.根据权利要求1所述的方法,其特征在于,根据所述人声音频信号确定人声响度值序列,包括:
对所述人声音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成人声响度值序列。
7.根据权利要求1所述的方法,其特征在于,所述根据所述伴奏音频信号确定伴奏响度值序列,包括:
对所述伴奏音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成伴奏响度值序列。
8.根据权利要求1所述的方法,其特征在于,
根据预先构建的情感与转速和/或颜色的映射关系,控制灯光的转速和/或颜色与所述歌唱者情感序列中的情感对应。
9.一种歌唱环境的灯光控制装置,其特征在于,包括:
获取模块,用于获取歌唱者的人声音频信号和伴奏音频信号;
确定模块,用于根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;
控制模块,用于根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制;其中,所述灯光的转速和/或颜色由所述歌唱者情感序列控制,所述灯光的亮度由所述声响度值序列和伴奏响度值序列控制,所述灯光包括第一组灯光和第二组灯光,所述第一组灯光的亮度由所述人声响度值序列中的响度值以及预先构建的第一响度和亮度的映射关系控制的,所述第二组灯光的亮度由预先构建的第二响度与亮度的映射关系以及所述伴奏响度值序列中的响度值。
10.根据权利要求9所述的装置,其特征在于,所述确定模块包括:第一确定单元,所述第一确定单元用于:
计算所述人声音频信号的基频均值;
获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系;
根据所述映射关系,确定与计算得到的基频均值对应的情感,并根据确定出的情感组成歌唱者情感序列。
11.根据权利要求10所述的装置,其特征在于,所述映射关系包括:男声对应的映射关系和女声对应的映射关系,所述第一确定单元用于获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系,包括:
根据所述基频均值确定所述人声音频信号属于男声或者女声;
如果所述人声音频信号属于男声,则获取男声对应的所述映射关系;或者,
如果所述人声音频信号属于女声,则获取女声对应的所述映射关系。
12.根据权利要求11所述的装置,其特征在于,所述第一确定单元用于根据所述基频均值确定所述人声音频信号属于男声或者女声,包括:
如果所述基频均值大于预设值,则确定所述人声音频信号属于女声;或者,
如果所述基频均值小于或等于预设值,则确定所述人声音频信号属于男声。
13.根据权利要求10所述的装置,其特征在于,所述第一确定单元用于根据确定出的情感组成歌唱者情感序列,包括:
将确定出的情感直接组成歌唱者情感序列;或者,
对确定出的情感进行平滑处理,将平滑处理后的情感组成歌唱者情感序列。
14.根据权利要求9所述的装置,其特征在于,所述确定模块包括:第二确定单元,所述第二确定单元用于:
对所述人声音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成人声响度值序列。
15.根据权利要求9所述的装置,其特征在于,所述确定模块包括:第三确定单元,所述第三确定单元用于:
对所述伴奏音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成伴奏响度值序列。
16.根据权利要求9所述的装置,其特征在于,所述控制模块具体用于:
根据预先构建的情感与转速和/或颜色的映射关系,控制灯光的转速和/或颜色与所述歌唱者情感序列中的情感对应。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610452257.XA CN106132040B (zh) | 2016-06-20 | 2016-06-20 | 歌唱环境的灯光控制方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610452257.XA CN106132040B (zh) | 2016-06-20 | 2016-06-20 | 歌唱环境的灯光控制方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106132040A CN106132040A (zh) | 2016-11-16 |
CN106132040B true CN106132040B (zh) | 2019-03-19 |
Family
ID=57471110
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610452257.XA Active CN106132040B (zh) | 2016-06-20 | 2016-06-20 | 歌唱环境的灯光控制方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106132040B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106128479B (zh) * | 2016-06-30 | 2019-09-06 | 福建星网视易信息系统有限公司 | 一种演唱情感识别方法及装置 |
CN107613608A (zh) * | 2017-09-22 | 2018-01-19 | 上海韵焰智能科技有限公司 | 灯光生成方法及装置 |
CN107610716A (zh) * | 2017-09-22 | 2018-01-19 | 上海韵焰智能科技有限公司 | 音乐分析方法及装置 |
CN108495402A (zh) * | 2018-02-26 | 2018-09-04 | 广东小天才科技有限公司 | 麦克风氛围灯的调节方法、装置、麦克风及存储介质 |
CN110155075A (zh) * | 2018-06-01 | 2019-08-23 | 腾讯大地通途(北京)科技有限公司 | 氛围设备控制方法及相关装置 |
CN109859729B (zh) * | 2019-01-21 | 2021-03-05 | 北京小唱科技有限公司 | 对音频进行波形幅度控制方法及装置 |
CN118175705B (zh) * | 2024-05-07 | 2024-09-10 | 广州市锐丰文化传播有限公司 | 一种基于声音变化的舞台灯光智能控制方法及系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1901281A1 (en) * | 2005-06-09 | 2008-03-19 | A.G.I. Inc. | Speech analyzer detecting pitch frequency, speech analyzing method, and speech analyzing program |
CN101252801A (zh) * | 2008-03-21 | 2008-08-27 | 中兴通讯股份有限公司 | 一种灯光控制方法及装置 |
CN101536609A (zh) * | 2006-10-31 | 2009-09-16 | 皇家飞利浦电子股份有限公司 | 响应音频信号控制光 |
CN102053998A (zh) * | 2009-11-04 | 2011-05-11 | 周明全 | 一种利用声音方式检索歌曲的方法及系统装置 |
CN102693721A (zh) * | 2012-06-26 | 2012-09-26 | 苏州科技学院 | 简易语音性别检测装置及方法 |
-
2016
- 2016-06-20 CN CN201610452257.XA patent/CN106132040B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1901281A1 (en) * | 2005-06-09 | 2008-03-19 | A.G.I. Inc. | Speech analyzer detecting pitch frequency, speech analyzing method, and speech analyzing program |
CN101536609A (zh) * | 2006-10-31 | 2009-09-16 | 皇家飞利浦电子股份有限公司 | 响应音频信号控制光 |
CN101252801A (zh) * | 2008-03-21 | 2008-08-27 | 中兴通讯股份有限公司 | 一种灯光控制方法及装置 |
CN102053998A (zh) * | 2009-11-04 | 2011-05-11 | 周明全 | 一种利用声音方式检索歌曲的方法及系统装置 |
CN102693721A (zh) * | 2012-06-26 | 2012-09-26 | 苏州科技学院 | 简易语音性别检测装置及方法 |
Non-Patent Citations (1)
Title |
---|
基于音乐情感驱动的舞台灯光控制研究;武宇;《中国优秀硕士学位论文全文数据库 信息科技辑》;20150215;I136-233 * |
Also Published As
Publication number | Publication date |
---|---|
CN106132040A (zh) | 2016-11-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106132040B (zh) | 歌唱环境的灯光控制方法和装置 | |
CN106304539B (zh) | 一种基于节奏跟随的音乐彩灯控制器设计方法 | |
CN101252801B (zh) | 一种灯光控制方法及装置 | |
CN106332393B (zh) | 一种音乐灯光律动系统及方法 | |
TWI492216B (zh) | 顯示控制裝置、方法及電腦可讀取之記憶媒體 | |
Bloothooft et al. | The sound level of the singer’s formant in professional singing | |
CN109640465A (zh) | 自动识别音乐的灯光控制方法、装置、设备及存储介质 | |
CN110488225B (zh) | 声音方位的指示方法、装置、可读存储介质及移动终端 | |
US20120310650A1 (en) | Voice synthesis apparatus | |
CN110634462B (zh) | 一种声音调整系统及调整方法 | |
CN102123546A (zh) | 一种全彩声光转换控制方法及系统 | |
Hacki | Comparative speaking, shouting and singing voice range profile measurement: physiological and pathological aspects | |
Sundberg | Flow glottogram and subglottal pressure relationship in singers and untrained voices | |
CN105611693B (zh) | 音响与调光灯的控制方法及装置 | |
JP2006017946A (ja) | 音声処理装置およびプログラム | |
CN116714512A (zh) | 一种基于dms和车载ktv的车内氛围灯调节方法、系统 | |
CN112927713A (zh) | 音频特征点的检测方法、装置和计算机存储介质 | |
JP5412204B2 (ja) | 適応的な話速変換装置及びプログラム | |
Delviniotis | Acoustic characteristics of modern Greek Orthodox Church music | |
US11211039B2 (en) | Musical instrument tuning | |
CN115212589B (zh) | 设备控制方法、车模及存储介质 | |
CN113905307A (zh) | 彩色滑块 | |
US20040054524A1 (en) | Speech transformation system and apparatus | |
Gavran1a et al. | Features of sound recording in open space | |
Andrews et al. | Contribution of nasally emitted sound to the perception of hypernasality of vowels |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |