CN106132040B - 歌唱环境的灯光控制方法和装置 - Google Patents

歌唱环境的灯光控制方法和装置 Download PDF

Info

Publication number
CN106132040B
CN106132040B CN201610452257.XA CN201610452257A CN106132040B CN 106132040 B CN106132040 B CN 106132040B CN 201610452257 A CN201610452257 A CN 201610452257A CN 106132040 B CN106132040 B CN 106132040B
Authority
CN
China
Prior art keywords
voice
sequence
emotion
value
audio signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610452257.XA
Other languages
English (en)
Other versions
CN106132040A (zh
Inventor
卢明敬
史峰
章继东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
iFlytek Co Ltd
Original Assignee
iFlytek Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by iFlytek Co Ltd filed Critical iFlytek Co Ltd
Priority to CN201610452257.XA priority Critical patent/CN106132040B/zh
Publication of CN106132040A publication Critical patent/CN106132040A/zh
Application granted granted Critical
Publication of CN106132040B publication Critical patent/CN106132040B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05BELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10Controlling the light source
    • H05B47/105Controlling the light source in response to determined parameters
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Child & Adolescent Psychology (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

本发明提出一种歌唱环境的灯光控制方法和装置,该方法包括:获取歌唱者的人声音频信号和伴奏音频信号;根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。该方法不需要投入专业技能的人力,可以降低人力成本,提高灯光控制的普适性,另外还可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。

Description

歌唱环境的灯光控制方法和装置
技术领域
本发明涉及语音信号处理技术领域,尤其涉及一种歌唱环境的灯光控制方法和装置。
背景技术
随着科技和人们水平的提高,当人们处于歌唱环境时,如在KTV唱歌时,不仅追求高质量的音质和画面效果,对舒适、合适的歌唱环境的氛围灯的需求也逐渐凸显。
相关技术中,歌唱环境的灯光控制方式主要包括人工控制方式和脚本化的控制方式。人工控制方式是通过人工根据现场气氛需要手动地控制灯光的跟踪或者灯光的方向、明暗、颜色等。脚本化的控制方式根据是否有声音来启动或关闭灯光,在启动灯光后,采用预先内置的几套灯光效果进行切换播放。
但是,人工控制方式需要投入专业技能的人力,人力成本高,不具有普适性。脚本化的控制方式灯光效果固定单一,难以贴合现场氛围。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本发明的一个目的在于提出一种歌唱环境的灯光控制方法,该方法不需要投入专业技能的人力,可以降低人力成本,提高灯光控制的普适性,另外还可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
本发明的另一个目的在于提出一种歌唱环境的灯光控制装置。
为达到上述目的,本发明第一方面实施例提出的歌唱环境的灯光控制方法,包括:获取歌唱者的人声音频信号和伴奏音频信号;根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。
本发明第一方面实施例提出的歌唱环境的灯光控制方法,通过确定歌唱者情感序列和人声响度值序列,以及确定伴奏响度值序列,以及根据上述的三种序列中的一种或多种进行灯光控制,可以实现自动进行灯光控制而不是由人工进行控制,从而不需要投入专业技能的人力,降低人力成本,提高灯光控制的普适性;另外,根据上述的三种序列中的一种或多种进行灯光控制,可以在采用的序列不同时,产生不同的灯光控制效果,从而可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
为达到上述目的,本发明第二方面实施例提出的歌唱环境的灯光控制装置,包括:获取模块,用于获取歌唱者的人声音频信号和伴奏音频信号;确定模块,用于根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;控制模块,用于根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。
本发明第二方面实施例提出的歌唱环境的灯光控制装置,通过确定歌唱者情感序列和人声响度值序列,以及确定伴奏响度值序列,以及根据上述的三种序列中的一种或多种进行灯光控制,可以实现自动进行灯光控制而不是由人工进行控制,从而不需要投入专业技能的人力,降低人力成本,提高灯光控制的普适性;另外,根据上述的三种序列中的一种或多种进行灯光控制,可以在采用的序列不同时,产生不同的灯光控制效果,从而可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是本发明一个实施例提出的歌唱环境的灯光控制方法的流程示意图;
图2是本发明实施例中根据人声音频信号确定歌唱者情感序列的流程示意图;
图3是本发明实施例中计算人声音频信号的基频均值的流程示意图;
图4是本发明实施例中基频均值与情感之间的映射曲线的示意图;
图5是本发明实施例中根据人声音频信号确定人声响度值序列的流程示意图;
图6是本发明另一个实施例提出的歌唱环境的灯光控制方法的流程示意图;
图7是本发明一个实施例提出的歌唱环境的灯光控制装置的结构示意图;
图8是本发明一个实施例提出的歌唱环境的灯光控制装置的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的模块或具有相同或类似功能的模块。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。相反,本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
图1是本发明一个实施例提出的歌唱环境的灯光控制方法的流程示意图。
参见图1,本实施例的流程包括:
S11:获取歌唱者的人声音频信号和伴奏音频信号。
其中,歌唱者的人声音频信号可以通过麦克风进行采集、降噪后得到。
伴奏音频信号由于通常是由购买方(如KTV)购买得到,因此,伴奏音频信号是确定,直接可以获取到购买的伴奏音频信号。
可以理解的是,人声音频信号和伴奏音频信号的获取方式并不限于上述方式,还可以采用其他方式。例如,对歌唱现场进行收音,再通过现有或将来出现的人声分离技术分别得到人声音频信号和伴奏音频信号。
S12:根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列。
其中,歌唱者情感序列是由一系列情感组成的序列,情感例如包括:悲伤、平静、愤怒、恐惧、高兴或惊讶等。
人声响度值序列是由人声音频信号对应的一系列的音频响度值组成的序列。
伴奏响度值序列是由伴奏音频信号对应的一系列的音频响度值组成的序列。
具体的情感以及音频响度值的确定方式可以参见后续描述。
S13:根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。
其中,灯光控制可以包括如下三个方面中的一种或多种的控制:转速、颜色和亮度。
具体的,可以根据歌唱者情感序列控制灯光的转速和/或颜色,根据人声响度值序列和伴奏响度值序列控制灯光的亮度。
具体的灯光控制内容可以参见后续描述。
本实施例中,通过确定歌唱者情感序列和人声响度值序列,以及确定伴奏响度值序列,以及根据上述的三种序列中的一种或多种进行灯光控制,可以实现自动进行灯光控制而不是由人工进行控制,从而不需要投入专业技能的人力,降低人力成本,提高灯光控制的普适性;另外,根据上述的三种序列中的一种或多种进行灯光控制,可以在采用的序列不同时,产生不同的灯光控制效果,从而可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
一些实施例中,参见图2,根据人声音频信号确定歌唱者情感序列的流程可以包括:
S21:计算人声音频信号的基频均值。
其中,本实施例中基频均值的计算方式不进行限制。
一种基频均值的计算流程可以如图3所示。
S22:获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系。
其中,人声音频信号可以包括:男声的人声音频信号,或者,女声的人声音频信号,相应的,参见图4,上述的映射关系可以具体是映射曲线,映射曲线具体包括:男声对应的映射曲线41和女声对应的映射曲线42。
因此,可以根据基频均值确定所述人声音频信号属于男声或者女声;
如果所述人声音频信号属于男声,则获取男声对应的所述映射关系;或者,
如果所述人声音频信号属于女声,则获取女声对应的所述映射关系。
进一步的,如果所述基频均值大于预设值,则确定所述人声音频信号属于女声;或者,如果所述基频均值小于或等于预设值,则确定所述人声音频信号属于男声。
进一步的,上述的预设值可以选为200Hz。
S23:根据所述映射关系,确定与计算得到的基频均值对应的情感,并根据确定出的情感组成歌唱者情感序列。
其中,根据如图4所示的映射曲线,可以确定出每个基频均值对应的情感。
在得到每个基频均值对应的情感后,可以直接将这些情感组成歌唱者情感序列。或者,
在根据映射曲线确定出基频均值对应的情感后,可以对确定出的情感进行平滑处理,将平滑处理后的情感组成歌唱者情感序列。
具体的,平滑处理包括:如果当前值的上一个和下一个情绪一样,且和当前值不同时,将当前值更正为上一个值。例如:
平滑处理前的一组情绪序列:[平静,平静,平静,平静,愤怒,平静,平静,平静,愤怒,愤怒,愤怒,平静],其中第5个值是“愤怒”,它的上一个值以及下一个值都为“平静”,但自己是“愤怒”,所以,将其更正为上一个值(第4个),即“平静”;第9个值是愤怒,但其上一个和下一个值不一样,所以无需更正。
本实施例中,通过计算基频均值,可以根据基频均值确定出歌词者情感序列。
一些实施例中,参见图3,计算人声音频信号的基频均值的流程可以包括:
S31:对人声音频信号进行数字化处理。
例如,数字化处理时采用脉冲编码调制(Pulse Code Modulation,PCM)处理,将人声音频信号从模拟信号转换为数字信号。
在PCM处理时,采样率可以选为16kHz,量化位数可以选为16bit,因此,得到每秒16k*16bit=32k字节(byte)的音频信号。
S32:对数字化处理后的音频信号进行分帧处理。
例如,可以将640字节作为1帧,因此,每帧音频信号长度=640/32k=20ms。另外,可以将帧移选为320字节。
S33:对每帧音频信号进行加窗处理。
例如,可以将滑动窗选为矩形窗。
S34:根据加窗处理后的音频信号计算人声音频信号的基频均值。
其中,可以对应每帧音频信号计算出一个基频,之后再将预设帧数的音频信号对应的基频进行取平均计算,得到基频均值。
上述的预设帧数例如选为10帧,则可以分别对应每帧音频数据计算出一个基频,之后将10个基频进行取平均计算,得到10*320字节/(32000字节/秒)=0.1s=100ms的音频数据对应的基频均值。
可以理解的是,在计算每帧音频数据对应的基频时,可以采用各种已有或将来出现的计算方式进行计算。
一种计算基频的方式是根据音频信号的短时平均幅度差函数计算得到,通过对短时平均幅度差函数进行谷点搜索,将两个相邻谷点的距离作为基音周期,将基音周期的倒数作为基频,从而计算得到基频。可以理解的是,由于根据短时平均幅度差函数计算基频是常用技术,本实施例不再详细描述。
因此,通过本实施例的流程可以计算出基频均值,之后可以依据基频均值采用上述实施例中的描述,可以确定出歌唱者情感序列。
一些实施例中,参见图5,根据人声音频信号确定人声响度值序列的流程可以包括:
S51:对所述人声音频信号进行数字化、分帧和加窗处理。
其中,数字化、分帧和加窗处理的具体内容可以参见上述计算基频均值时,对音频信号的处理,在此不再详细说明。
S52:计算处理后的每个采样点的声音响度值。
其中,每个采样点的声音响度值与该采样点的幅度值成正比。
一种计算方式为:
声音响度值(db)=20*lg(x/2^15)
其中,声音响度值以分贝(db)为单位,x是采样点的幅度值。
当然,可以理解的是,上述的计算公式只是一种具体示例,还可以采用其他计算方式。
S53:根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成人声响度值序列。
其中,可以将同一个窗口内的采样点的声音响度值的均值,确定为该窗口对应的音频响度值,因此,每个窗口会对应一个音频响度值,从而可以由每个窗口对应的音频响度值组成人声响度值序列。
本实施例中,通过上述流程可以计算出人声响度值序列。
一些实施例中,可以根据伴奏音频信号计算出伴奏响度值序列。该计算流程与人声响度值序列的计算流程的原理相同,不同的是,用伴奏音频信号替代上述的人声音频信号。即,根据伴奏音频信号计算伴奏响度值序列的流程可以包括:
对所述伴奏音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成伴奏响度值序列。
其中,具体内容可以参照对人声响度值序列的计算流程,在此不再详细说明。
如上所示,通过上述的实施例,可以计算出歌唱者情感序列、人声响度值序列和伴奏响度值序列。
在计算出上述三个序列后,可以采用其中的一种或多种进行灯光控制。
下面以根据上述三个序列进行灯光控制为例,可以理解的是,还可以根据其中的一个或两个序列进行灯光控制。另外,当采用其中的一个或两个序列进行灯光控制时,每个序列的具体控制内容可以参见下面实施例中的描述。
一些实施例中,参见图6,根据上述三个序列进行灯光控制的流程包括:
S61:根据所述歌唱者情感序列,控制灯光的转速和/或颜色;以及
S62:根据所述人声响度值序列和所述伴奏响度值序列,控制灯光的亮度。
具体的,可以根据预先构建的情感与转速和/或颜色的映射关系,控制灯光的转速和/或颜色与所述歌唱者情感序列中的情感对应。
下面以根据歌唱者情感序列控制灯光的转速和颜色为例,可以理解的是,也可以根据歌唱者情感序列控制转速或颜色。
当根级歌唱者情感序列控制灯光的转速和颜色时,例如,上述的情感与转速及颜色的映射关系具体是映射表,该映射表可以如表1所示。
表1
转速 颜色
悲伤 0.1转/秒 白色
平静 0.2转/秒 白色,蓝色
愤怒 0.8转/秒 红色,蓝色
恐惧 1.2转/秒 黄色,蓝色
高兴 1.5转/秒 白色,红色
惊讶 1转/秒 黄色
在得到如表1所示的映射表后,可以据此映射表进行转速及颜色的控制。例如,当情感是悲伤时,可以控制转速为0.1转/秒,控制颜色为白色。当颜色为多个时,可以是控制不同灯的灯光颜色分别为一种颜色,具体的灯与颜色的对应关系可以预先配置。
具体的,根据预先构建的第一响度与亮度的映射关系,控制第一组灯光的亮度与所述人声响度值序列中的响度值对应;以及,根据预先构建的第二响度与亮度的映射关系,控制第二组灯光的亮度与所述伴奏响度值序列中的响度值对应。
其中,上述的第一响度与亮度的映射关系,以及,第二响度与亮度的映射关系中,亮度值与响度值成正比关系,即响度越大,则对应的亮度越大。
另外,如上描述的,人声响度值序列和伴奏响度值序列可以分别控制不同的灯光组,比如,人声响度值序列控制包括第一灯光和第二灯光的第一组灯光,伴奏响度值序列控制包括第三灯光和第四灯光的第二组灯光等,从而可以实现依据响度值完成对灯光亮度的控制。
进一步的,在灯光控制时,可以分为情感灯光控制器、人声节奏灯光控制器和伴奏节奏灯光控制器。具体的,可以在确定出歌唱者情感序列后,将该歌唱者情感序列发送给情感灯光控制器,由情感灯光控制器根据歌唱者情感序列进行上述的转速和颜色的控制。在确定出人声响度值序列后,将该人声响度值序列发送给人声节奏灯光控制器,由人声节奏灯光控制器根据人声响度值序列进行上述的第一组灯光的亮度控制。在确定出伴奏响度值序列后,将该伴奏响度值序列发送给伴奏节奏灯光控制器,由伴奏节奏灯光控制器根据伴奏响度值序列进行上述的第二组灯光的亮度控制。
本实施例中,根据歌唱者情感序列可以完成对灯光的转速和颜色的控制,根据人声响度值序列和伴奏响度值序列可以完成对灯光亮度的控制。
图7是本发明一个实施例提出的歌唱环境的灯光控制装置的结构示意图。如图7所示,该装置70包括:获取模块71、确定模块72和控制模块73。
获取模块71,用于获取歌唱者的人声音频信号和伴奏音频信号;
确定模块72,用于根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;
控制模块73,用于根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制。
一些实施例中,参见图8,所述确定模块72包括:第一确定单元721,所述第一确定单元721用于:
计算所述人声音频信号的基频均值;
获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系;
根据所述映射关系,确定与计算得到的基频均值对应的情感,并根据确定出的情感组成歌唱者情感序列。
一些实施例中,所述映射关系包括:男声对应的映射关系和女声对应的映射关系,所述第一确定单元721用于获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系,包括:
根据所述基频均值确定所述人声音频信号属于男声或者女声;
如果所述人声音频信号属于男声,则获取男声对应的所述映射关系;或者,
如果所述人声音频信号属于女声,则获取女声对应的所述映射关系。
一些实施例中,所述第一确定单元721用于根据所述基频均值确定所述人声音频信号属于男声或者女声,包括:
如果所述基频均值大于预设值,则确定所述人声音频信号属于女声;或者,
如果所述基频均值小于或等于预设值,则确定所述人声音频信号属于男声。
一些实施例中,所述第一确定单元721用于根据确定出的情感组成歌唱者情感序列,包括:
将确定出的情感直接组成歌唱者情感序列;或者,
对确定出的情感进行平滑处理,将平滑处理后的情感组成歌唱者情感序列。
一些实施例中,参见图8,所述确定模块72包括:第二确定单元722,所述第二确定单元722用于:
对所述人声音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成人声响度值序列。
一些实施例中,参见图8,所述确定模块72包括:第三确定单元723,所述第三确定单元723用于:
对所述伴奏音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成伴奏响度值序列。
一些实施例中,参见8,当根据所述歌唱者情感序列和所述人声响度值序列,以及所述伴奏响度值序列,进行灯光控制时,所述控制模块73包括:
第一控制单元731,用于根据所述歌唱者情感序列,控制灯光的转速和/或颜色;以及
第二控制单元732,用于根据所述人声响度值序列和所述伴奏响度值序列,控制灯光的亮度。
一些实施例中,所述第一控制单元731具体用于:
根据预先构建的情感与转速和/或颜色的映射关系,控制灯光的转速和/或颜色与所述歌唱者情感序列中的情感对应。
一些实施例中,所述第二控制单元732具体用于:
根据预先构建的第一响度与亮度的映射关系,控制第一组灯光的亮度与所述人声响度值序列中的响度值对应;
根据预先构建的第二响度与亮度的映射关系,控制第二组灯光的亮度与所述伴奏响度值序列中的响度值对应。
可以理解的是,本实施例的装置与方法实施例对应,具体内容可以参见方法实施例中的描述,在此不再详细说明。
本实施例中,通过确定歌唱者情感序列和人声响度值序列,以及确定伴奏响度值序列,以及根据上述的三种序列中的一种或多种进行灯光控制,可以实现自动进行灯光控制而不是由人工进行控制,从而不需要投入专业技能的人力,降低人力成本,提高灯光控制的普适性;另外,根据上述的三种序列中的一种或多种进行灯光控制,可以在采用的序列不同时,产生不同的灯光控制效果,从而可以丰富灯光效果,并且使得灯光效果与现场氛围贴合。
需要说明的是,在本发明的描述中,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本发明的描述中,除非另有说明,“多个”的含义是指至少两个。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (16)

1.一种歌唱环境的灯光控制方法,其特征在于,包括:
获取歌唱者的人声音频信号和伴奏音频信号;
根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;
根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制;其中,所述灯光的转速和/或颜色由所述歌唱者情感序列控制,所述灯光的亮度由所述声响度值序列和伴奏响度值序列控制,所述灯光包括第一组灯光和第二组灯光,所述第一组灯光的亮度由所述人声响度值序列中的响度值以及预先构建的第一响度和亮度的映射关系控制的,所述第二组灯光的亮度由预先构建的第二响度与亮度的映射关系以及所述伴奏响度值序列中的响度值。
2.根据权利要求1所述的方法,其特征在于,所述根据所述人声音频信号确定歌唱者情感序列,包括:
计算所述人声音频信号的基频均值;
获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系;
根据所述映射关系,确定与计算得到的基频均值对应的情感,并根据确定出的情感组成歌唱者情感序列。
3.根据权利要求2所述的方法,其特征在于,所述映射关系包括:男声对应的映射关系和女声对应的映射关系,所述获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系,包括:
根据所述基频均值确定所述人声音频信号属于男声或者女声;
如果所述人声音频信号属于男声,则获取男声对应的所述映射关系;或者,
如果所述人声音频信号属于女声,则获取女声对应的所述映射关系。
4.根据权利要求3所述的方法,其特征在于,所述根据所述基频均值确定所述人声音频信号属于男声或者女声,包括:
如果所述基频均值大于预设值,则确定所述人声音频信号属于女声;或者,
如果所述基频均值小于或等于预设值,则确定所述人声音频信号属于男声。
5.根据权利要求2所述的方法,其特征在于,所述根据确定出的情感组成歌唱者情感序列,包括:
将确定出的情感直接组成歌唱者情感序列;或者,
对确定出的情感进行平滑处理,将平滑处理后的情感组成歌唱者情感序列。
6.根据权利要求1所述的方法,其特征在于,根据所述人声音频信号确定人声响度值序列,包括:
对所述人声音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成人声响度值序列。
7.根据权利要求1所述的方法,其特征在于,所述根据所述伴奏音频信号确定伴奏响度值序列,包括:
对所述伴奏音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成伴奏响度值序列。
8.根据权利要求1所述的方法,其特征在于,
根据预先构建的情感与转速和/或颜色的映射关系,控制灯光的转速和/或颜色与所述歌唱者情感序列中的情感对应。
9.一种歌唱环境的灯光控制装置,其特征在于,包括:
获取模块,用于获取歌唱者的人声音频信号和伴奏音频信号;
确定模块,用于根据所述人声音频信号确定歌唱者情感序列和人声响度值序列,以及,根据所述伴奏音频信号确定伴奏响度值序列;
控制模块,用于根据所述歌唱者情感序列、所述人声响度值序列、所述伴奏响度值序列中的一种或多种,进行灯光控制;其中,所述灯光的转速和/或颜色由所述歌唱者情感序列控制,所述灯光的亮度由所述声响度值序列和伴奏响度值序列控制,所述灯光包括第一组灯光和第二组灯光,所述第一组灯光的亮度由所述人声响度值序列中的响度值以及预先构建的第一响度和亮度的映射关系控制的,所述第二组灯光的亮度由预先构建的第二响度与亮度的映射关系以及所述伴奏响度值序列中的响度值。
10.根据权利要求9所述的装置,其特征在于,所述确定模块包括:第一确定单元,所述第一确定单元用于:
计算所述人声音频信号的基频均值;
获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系;
根据所述映射关系,确定与计算得到的基频均值对应的情感,并根据确定出的情感组成歌唱者情感序列。
11.根据权利要求10所述的装置,其特征在于,所述映射关系包括:男声对应的映射关系和女声对应的映射关系,所述第一确定单元用于获取与所述人声音频信号对应的预先构建的基频均值与情感的映射关系,包括:
根据所述基频均值确定所述人声音频信号属于男声或者女声;
如果所述人声音频信号属于男声,则获取男声对应的所述映射关系;或者,
如果所述人声音频信号属于女声,则获取女声对应的所述映射关系。
12.根据权利要求11所述的装置,其特征在于,所述第一确定单元用于根据所述基频均值确定所述人声音频信号属于男声或者女声,包括:
如果所述基频均值大于预设值,则确定所述人声音频信号属于女声;或者,
如果所述基频均值小于或等于预设值,则确定所述人声音频信号属于男声。
13.根据权利要求10所述的装置,其特征在于,所述第一确定单元用于根据确定出的情感组成歌唱者情感序列,包括:
将确定出的情感直接组成歌唱者情感序列;或者,
对确定出的情感进行平滑处理,将平滑处理后的情感组成歌唱者情感序列。
14.根据权利要求9所述的装置,其特征在于,所述确定模块包括:第二确定单元,所述第二确定单元用于:
对所述人声音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成人声响度值序列。
15.根据权利要求9所述的装置,其特征在于,所述确定模块包括:第三确定单元,所述第三确定单元用于:
对所述伴奏音频信号进行数字化、分帧和加窗处理;
计算处理后的每个采样点的声音响度值;
根据同一个窗口内的采样点的声音响度值,计算每个窗口对应的音频响度值,并将计算出的音频响度值组成伴奏响度值序列。
16.根据权利要求9所述的装置,其特征在于,所述控制模块具体用于:
根据预先构建的情感与转速和/或颜色的映射关系,控制灯光的转速和/或颜色与所述歌唱者情感序列中的情感对应。
CN201610452257.XA 2016-06-20 2016-06-20 歌唱环境的灯光控制方法和装置 Active CN106132040B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610452257.XA CN106132040B (zh) 2016-06-20 2016-06-20 歌唱环境的灯光控制方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610452257.XA CN106132040B (zh) 2016-06-20 2016-06-20 歌唱环境的灯光控制方法和装置

Publications (2)

Publication Number Publication Date
CN106132040A CN106132040A (zh) 2016-11-16
CN106132040B true CN106132040B (zh) 2019-03-19

Family

ID=57471110

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610452257.XA Active CN106132040B (zh) 2016-06-20 2016-06-20 歌唱环境的灯光控制方法和装置

Country Status (1)

Country Link
CN (1) CN106132040B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106128479B (zh) * 2016-06-30 2019-09-06 福建星网视易信息系统有限公司 一种演唱情感识别方法及装置
CN107613608A (zh) * 2017-09-22 2018-01-19 上海韵焰智能科技有限公司 灯光生成方法及装置
CN107610716A (zh) * 2017-09-22 2018-01-19 上海韵焰智能科技有限公司 音乐分析方法及装置
CN108495402A (zh) * 2018-02-26 2018-09-04 广东小天才科技有限公司 麦克风氛围灯的调节方法、装置、麦克风及存储介质
CN110155075A (zh) * 2018-06-01 2019-08-23 腾讯大地通途(北京)科技有限公司 氛围设备控制方法及相关装置
CN109859729B (zh) * 2019-01-21 2021-03-05 北京小唱科技有限公司 对音频进行波形幅度控制方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1901281A1 (en) * 2005-06-09 2008-03-19 A.G.I. Inc. Speech analyzer detecting pitch frequency, speech analyzing method, and speech analyzing program
CN101252801A (zh) * 2008-03-21 2008-08-27 中兴通讯股份有限公司 一种灯光控制方法及装置
CN101536609A (zh) * 2006-10-31 2009-09-16 皇家飞利浦电子股份有限公司 响应音频信号控制光
CN102053998A (zh) * 2009-11-04 2011-05-11 周明全 一种利用声音方式检索歌曲的方法及系统装置
CN102693721A (zh) * 2012-06-26 2012-09-26 苏州科技学院 简易语音性别检测装置及方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1901281A1 (en) * 2005-06-09 2008-03-19 A.G.I. Inc. Speech analyzer detecting pitch frequency, speech analyzing method, and speech analyzing program
CN101536609A (zh) * 2006-10-31 2009-09-16 皇家飞利浦电子股份有限公司 响应音频信号控制光
CN101252801A (zh) * 2008-03-21 2008-08-27 中兴通讯股份有限公司 一种灯光控制方法及装置
CN102053998A (zh) * 2009-11-04 2011-05-11 周明全 一种利用声音方式检索歌曲的方法及系统装置
CN102693721A (zh) * 2012-06-26 2012-09-26 苏州科技学院 简易语音性别检测装置及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于音乐情感驱动的舞台灯光控制研究;武宇;《中国优秀硕士学位论文全文数据库 信息科技辑》;20150215;I136-233 *

Also Published As

Publication number Publication date
CN106132040A (zh) 2016-11-16

Similar Documents

Publication Publication Date Title
CN106132040B (zh) 歌唱环境的灯光控制方法和装置
CN103889109B (zh) 一种情绪控制led灯光颜色和亮度变化的驱动装置
CN111836437B (zh) 一种灯光显示的控制方法及装置
US5395123A (en) System for marking a singing voice and displaying a marked result for a karaoke machine
CN106304539A (zh) 一种基于节奏跟随的音乐彩灯控制器设计方法
JP6171711B2 (ja) 音声解析装置および音声解析方法
Sundberg et al. Effects on the glottal voice source of vocal loudness variation in untrained female and male voices
WO2021103314A1 (zh) 一种构造听音场景的方法和相关装置
CN106383676B (zh) 用于声音的即时光色渲染系统及其应用
US7446252B2 (en) Music information calculation apparatus and music reproduction apparatus
DE602004023134D1 (de) Spracherkennungsverfahren und -system, das an die eigenschaften von nichtmuttersprachlern angepasst ist
CN106887233A (zh) 音频数据处理方法及系统
Dong et al. Loudness and pitch of Kunqu Opera
US20200357407A1 (en) Speech recognition with image signal
JP6390690B2 (ja) 音声合成方法および音声合成装置
CN108492807B (zh) 展示修音状态的方法及装置
IT202000006025A1 (it) Metodo e sistema per la generazione di effetti luminosi
WO2023144269A1 (en) Determining global and local light effect parameter values
CN105611693A (zh) 音响与调光灯的控制方法及装置
CN104007951B (zh) 一种信息处理方法及电子设备
JP5960635B2 (ja) 楽器音出力装置
JP5412204B2 (ja) 適応的な話速変換装置及びプログラム
CN112863530A (zh) 一种声音作品的生成方法和装置
JP3197975B2 (ja) ピッチ制御方法及び装置
CN100359559C (zh) 自动音源相似度比对方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant