CN117528872A - 灯光信号律动控制方法、装置、设备及存储介质 - Google Patents

Abstract

本发明涉及灯光控制技术领域，公开了一种灯光信号律动控制方法、装置、设备及存储介质。该方法包括：获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；对分类后的初始音频数据进行音频特征提取，得到各音频类型对应的音频特征数据，并匹配各音频特征数据对应的音乐律动特征；基于预设音频类型权重，对各音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；基于融合结果，生成初始音频数据对应的律动控制信息，并基于律动控制信息，调整灯珠的灯光初始状态，以及生成灯光律动的控制结果。本申请提高了用户在游戏时相关灯光随音乐律动的氛围感和体验感。

Description

灯光信号律动控制方法、装置、设备及存储介质

技术领域

本发明涉及灯光控制技术领域，尤其涉及一种灯光信号律动控制方法、装置、设备及存储介质。

背景技术

随着科学技术的发展和人民生活水平的提高，人们对生活品质的要求也越来越高，从而在利用电脑游戏玩端游和家中举办派对等场景下，通过基于当前场景下游戏音乐或者外放音乐来调整耳机灯光和房间灯光，从而提高人们在玩端游时的乐趣和在房间活动时的气氛。

现今，端游游戏时所播放的音乐与耳机灯光或者房间灯光之间的控制关系，通常是提前设置好相关灯光变化程序，由用户自己根据个人喜好来调节相关灯光变化模式。但是，这种灯光控制模式始终固定的灯光变化方式，不能很好的跟随音乐的律动来进行相关灯光的变化，以致用户在打游戏或者播放音乐等音频时不能根据当前播放音频的各种音频特征来来调整灯光的变化，不能很好提高用户的灯光体验。即当前灯光的控制不能很好的随音乐律动而变化，以致用户在游戏或者听音乐时灯光效果的体验较差。

发明内容

本发明的主要目的在于解决当前灯光的控制不能很好的随音乐律动而变化，以致用户在游戏或者听音乐时灯光效果的体验较差的问题。

本发明第一方面提供了一种灯光信号律动控制方法，所述灯光信号律动控制方法包括：获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对所述初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；对所述分类后的初始音频数据进行音频特征提取，得到各所述音频类型对应的音频特征数据，并匹配各所述音频特征数据对应的音乐律动特征；基于预设音频类型权重，对各所述音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；基于所述融合结果，生成所述初始音频数据对应的律动控制信息，并基于所述律动控制信息，调整所述灯珠的灯光初始状态，以及生成灯光律动的控制结果。

可选的，在本发明第一方面的第一种实现方式中，所述对所述初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据，包括：对所述初始音频数据进行时频变换，得到音频频域信号，并计算出所述音频频域信号对应的音频能量谱；划分所述音频能量谱中第一掩蔽特征在不同能量强度的第一音频频域片段以及划分所述音频能量谱中第二掩蔽特征在不同能量强度的第二音频频域片段，并利用满足预设强度值的第一音频频域片段对不满足所述强度值的第一音频频域片段进行第一掩蔽，以及利用满足预设强度值的第二音频频域片段对不满足所述强度值的第二音频频域片段进行第二掩蔽，得到音频掩蔽结果；对所述音频掩蔽结果进行时频逆变换，并基于各种音频类型对应的音频参数特征，提取逆变换后的音频掩蔽结果对应音频类型的音频数据，得到分类后的初始音频数据。

可选的，在本发明第一方面的第二种实现方式中，所述对所述分类后的初始音频数据进行音频特征提取，得到各所述音频类型对应的音频特征数据，包括：基于预设时间窗口，分别对所述分类后的初始音频数据中各种音频类型进行频谱的加权平均计算，得到频谱质心值；基于所述频谱质心值，确定所述分类后的初始音频数据中各所述音频类型的频率变化状态，并基于所述频率变化状态，提取各种音频类型的音频特征数据。

可选的，在本发明第一方面的第三种实现方式中，所述匹配各所述音频特征数据对应的音乐律动特征，包括：匹配所述初始音频数据对应的应用程序和程序模式；基于所述应用程序和所述程序模式，分别计算所述各所述音频特征数据的特征相似度；选取满足预设的相似度阈值的特征相似度，并匹配选取后的特征相似度的音乐律动特征。

可选的，在本发明第一方面的第四种实现方式中，所述基于预设音频类型权重，对各所述音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果，包括：基于所述应用程序和程序模式，确定所述初始音频数据的操作阶段，并基于所述操作阶段，确定各所述音频类型对应的融合权重值；基于所述融合权重值，分别对各所述音频类型对应的音乐律动特征进行加权融合计算，得到融合结果。

可选的，在本发明第一方面的第五种实现方式中，所述基于所述融合权重值，分别对各所述音频类型对应的音乐律动特征进行加权融合计算，得到融合结果，包括：提取各所述音频类型对应的音乐律动特征的特征向量；基于所述融合权重值，分别计算出所述音乐律动特征在所述操作阶段时新的特征向量；匹配所述新的特征向量对应的融合律动特征，得到融合结果。

可选的，在本发明第一方面的第六种实现方式中，所述基于所述融合结果，生成所述初始音频数据对应的律动控制信息，并基于所述律动控制信息，调整所述灯珠的灯光初始状态，以及生成灯光律动的控制结果，包括：基于所述融合结果，确定所述初始音频数据的音频属性，并基于所述音频属性，匹配所述初始音频数据的灯光律动属性表；基于所述灯光律动属性表，生成所述融合结果对应灯光变化的律动控制信息；基于所述律动控制信息，调整所述灯珠中灯光初始状态的多种灯光参数，基于所述灯光参数，调整所述灯光的律动状态，生成灯光律动的控制结果。

本发明第二方面提供了一种灯光信号律动控制装置，所述灯光信号律动控制装置包括：音频分类模块，用于获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对所述初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；特征匹配模块，用于对所述分类后的初始音频数据进行音频特征提取，得到各所述音频类型对应的音频特征数据，并匹配各所述音频特征数据对应的音乐律动特征；特征融合模块，用于基于预设音频类型权重，对各所述音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；状态调整模块，用于基于所述融合结果，生成所述初始音频数据对应的律动控制信息，并基于所述律动控制信息，调整所述灯珠的灯光初始状态，以及生成灯光律动的控制结果。

可选的，在本发明第二方面的第一种实现方式中，所述音频分类模块包括：时频变换单元，用于对所述初始音频数据进行时频变换，得到音频频域信号，并计算出所述音频频域信号对应的音频能量谱；音频掩蔽单元，用于划分所述音频能量谱中第一掩蔽特征在不同能量强度的第一音频频域片段以及划分所述音频能量谱中第二掩蔽特征在不同能量强度的第二音频频域片段，并利用满足预设强度值的第一音频频域片段对不满足所述强度值的第一音频频域片段进行第一掩蔽，以及利用满足预设强度值的第二音频频域片段对不满足所述强度值的第二音频频域片段进行第二掩蔽，得到音频掩蔽结果；音频提取单元，用于对所述音频掩蔽结果进行时频逆变换，并基于各种音频类型对应的音频参数特征，提取逆变换后的音频掩蔽结果对应音频类型的音频数据，得到分类后的初始音频数据。

可选的，在本发明第二方面的第二种实现方式中，所述特征匹配模块包括：质心值计算单元，用于基于预设时间窗口，分别对所述分类后的初始音频数据中各种音频类型进行频谱的加权平均计算，得到频谱质心值；特征提取单元，用于基于所述频谱质心值，确定所述分类后的初始音频数据中各所述音频类型的频率变化状态，并基于所述频率变化状态，提取各种音频类型的音频特征数据。

可选的，在本发明第二方面的第三种实现方式中，所述特征匹配模块还包括：程序匹配单元，用于匹配所述初始音频数据对应的应用程序和程序模式；相似度计算单元，用于基于所述应用程序和所述程序模式，分别计算所述各所述音频特征数据的特征相似度；相似度选取单元，用于选取满足预设的相似度阈值的特征相似度，并匹配选取后的特征相似度的音乐律动特征。

可选的，在本发明第二方面的第四种实现方式中，所述特征融合模块包括：权重确定单元，用于基于所述应用程序和程序模式，确定所述初始音频数据的操作阶段，并基于所述操作阶段，确定各所述音频类型对应的融合权重值；融合计算单元，用于基于所述融合权重值，分别对各所述音频类型对应的音乐律动特征进行加权融合计算，得到融合结果。

可选的，在本发明第二方面的第五种实现方式中，所述融合计算单元包括：提取各所述音频类型对应的音乐律动特征的特征向量；基于所述融合权重值，分别计算出所述音乐律动特征在所述操作阶段时新的特征向量；匹配所述新的特征向量对应的融合律动特征，得到融合结果。

可选的，在本发明第二方面的第六种实现方式中，所述状态调整模块包括：属性匹配单元，用于基于所述融合结果，确定所述初始音频数据的音频属性，并基于所述音频属性，匹配所述初始音频数据的灯光律动属性表；信息生成单元，用于基于所述灯光律动属性表，生成所述融合结果对应灯光变化的律动控制信息；参数调整单元，用于基于所述律动控制信息，调整所述灯珠中灯光初始状态的多种灯光参数，基于所述灯光参数，调整所述灯光的律动状态，生成灯光律动的控制结果。

本发明第三方面提供了一种灯光信号律动控制设备，包括：存储器和至少一个处理器，所述存储器中存储有指令；所述至少一个处理器调用所述存储器中的所述指令，以使得所述灯光信号律动控制设备执行上述的灯光信号律动控制方法的各个步骤。

本发明的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述的灯光信号律动控制方法的各个步骤。

本发明提供的技术方案中，获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；对分类后的初始音频数据进行音频特征提取，得到各音频类型对应的音频特征数据，并匹配各音频特征数据对应的音乐律动特征；基于预设音频类型权重，对各音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；基于融合结果，生成初始音频数据对应的律动控制信息，并基于律动控制信息，调整灯珠的灯光初始状态，以及生成灯光律动的控制结果。相比于现有技术，本申请获取当前待播放的初始音频数据，从初始音频数据中提取人声、应用程序声和音乐声对应的音频特征数据，并匹配音频特征数据对应的音乐律动特征，进而对各音频类型对应的音乐律动特征进行多种律动特征的融合，从而基于融合结果，生成对应的律动控制信息来调整灯光初始状态的各种灯光参数，从而实现利用音频律动信息来控制灯光的律动，提高了用户在游戏时相关灯光随音乐律动的氛围感和体验感。

附图说明

图1为本发明实施例中灯光信号律动控制方法的第一个实施例示意图；

图2为本发明实施例中灯光信号律动控制方法的第二个实施例示意图；

图3为本发明实施例中灯光信号律动控制方法的第三个实施例示意图；

图4为本发明实施例中灯光信号律动控制装置的一个实施例示意图；

图5为本发明实施例中灯光信号律动控制装置的另一个实施例示意图；

图6为本发明实施例中灯光信号律动控制设备的一个实施例示意图。

具体实施方式

本发明实施例提供了一种灯光信号律动控制方法、装置、设备及存储介质，该方法包括：获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；对分类后的初始音频数据进行音频特征提取，得到各音频类型对应的音频特征数据，并匹配各音频特征数据对应的音乐律动特征；基于预设音频类型权重，对各音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；基于融合结果，生成初始音频数据对应的律动控制信息，并基于律动控制信息，调整灯珠的灯光初始状态，以及生成灯光律动的控制结果。本申请提高了用户在游戏时相关灯光随音乐律动的氛围感和体验感。

本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等（如果存在）是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”或“具有”及其任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

为便于理解，下面对本发明实施例的具体流程进行描述，请参阅图1，本发明实施例中灯光信号律动控制方法的第一个实施例包括：

101、获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；

本申请实施例可以基于人工智能技术对相关的数据进行获取和处理。其中，人工智能（Artificial Intelligence，AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。

人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、机器人技术、生物识别技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。

本实施例中，这里的初始音频数据包括了当前使用应用程序（如手游、端游等）内的操作音频、音乐程序播放的音乐音频和用户操作APP时自己和相关人员（如游戏队友）产生的交流音频等（此外这里的初始音频数据也可根据应用场景的需要进行组成调整，如还可包括当前空间内交流的音频等等）；这里的灯光初始状态，指的是当前需要随着音乐律动，来控制灯珠灯光进行对应律动变化前，各个灯珠对应的初始灯光状态（本申请以游戏耳机、相关电脑灯管和房间灯组成的灯珠为例进行说明）；这里的音频类型，指的是根据当前所要分析的音频数据所确定的音频类型（这里包括游戏本身的音频类型、用户操作和交流的音频类型和播放歌曲的音频类型为例进行说明）。

在实际应用中，通过实时捕捉当前程序中播放的游戏音频、音乐播放音频和用户交流音频，以及获取当前待进行灯光律动控制灯珠的灯光初始状态，进而对初始音频数据进行时频变换，得到音频频域信号，并计算出音频频域信号对应的音频能量谱；进而划分音频能量谱中第一掩蔽特征在不同能量强度的第一音频频域片段以及划分音频能量谱中第二掩蔽特征在不同能量强度的第二音频频域片段，并利用满足预设强度值的第一音频频域片段对不满足强度值的第一音频频域片段进行第一掩蔽，以及利用满足预设强度值的第二音频频域片段对不满足强度值的第二音频频域片段进行第二掩蔽，得到音频掩蔽结果；进而对音频掩蔽结果进行时频逆变换，并按照当前程序中播放的游戏音频、音乐播放音频和用户交流音频三种音频类型和基于各种音频类型对应的音频参数特征，提取逆变换后的音频掩蔽结果对应音频类型的音频数据，得到分类后的初始音频数据。

102、对分类后的初始音频数据进行音频特征提取，得到各音频类型对应的音频特征数据，并匹配各音频特征数据对应的音乐律动特征；

本实施例中，这里的音频特征提取，指的是音频中于音强、音速和音长等音频特征的提取；这里的音乐律动特征，指的是音乐中与节奏和节拍有关的特征（如节拍、节奏、速度和拍子等等）。

在实际应用中，基于预设时间窗口，分别对分类后的初始音频数据中各种音频类型进行频谱的加权平均计算，得到频谱质心值；进而基于频谱质心值，确定分类后的初始音频数据中各音频类型的频率变化状态，并基于频率变化状态，提取各种音频类型的音频特征数据；进而匹配初始音频数据对应的应用程序和程序模式，并基于应用程序和程序模式，分别计算各音频特征数据的特征相似度；从而选取满足预设的相似度阈值的特征相似度，并匹配选取后的特征相似度的音乐律动特征。

103、基于预设音频类型权重，对各音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；

本实施例中，这里的音频类型权重，指的是根据当前用户游戏状态、游戏模式进度和用户交流状态等确定音频数据中各种音频类型对应的计算权重值；这里的律动特征的融合，指的是将各种音频类型对应的音乐律动特征，按照对应的权重值进行融合，以融合得到新的音乐律动特征。

在实际应用中，基于应用程序和程序模式，确定初始音频数据的操作阶段，并基于操作阶段，确定各音频类型对应的融合权重值；进而基于融合权重值，分别对各音频类型对应的音乐律动特征进行加权融合计算，最终得到融合结果，即通过提取各音频类型对应的音乐律动特征的特征向量；进而基于融合权重值，分别计算出音乐律动特征在操作阶段时新的特征向量；从而匹配新的特征向量对应的融合律动特征，得到融合结果。

104、基于融合结果，生成初始音频数据对应的律动控制信息，并基于律动控制信息，调整灯珠的灯光初始状态，以及生成灯光律动的控制结果。

本实施例中，这里的律动控制信息，指的是灯光律动变化的控制信息。

在实际应用中，基于融合结果，确定初始音频数据的音频属性，并基于音频属性，匹配初始音频数据的灯光律动属性表；进而基于灯光律动属性表，生成融合结果对应灯光变化的律动控制信息；从而基于律动控制信息，调整灯珠中灯光初始状态的多种灯光参数，基于灯光参数，调整灯光的律动状态，生成灯光律动的控制结果。

本发明实施例中，获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；对分类后的初始音频数据进行音频特征提取，得到各音频类型对应的音频特征数据，并匹配各音频特征数据对应的音乐律动特征；基于预设音频类型权重，对各音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；基于融合结果，生成初始音频数据对应的律动控制信息，并基于律动控制信息，调整灯珠的灯光初始状态，以及生成灯光律动的控制结果。相比于现有技术，本申请获取当前待播放的初始音频数据，从初始音频数据中提取人声、应用程序声和音乐声对应的音频特征数据，并匹配音频特征数据对应的音乐律动特征，进而对各音频类型对应的音乐律动特征进行多种律动特征的融合，从而基于融合结果，生成对应的律动控制信息来调整灯光初始状态的各种灯光参数，从而实现利用音频律动信息来控制灯光的律动，提高了用户在游戏时相关灯光随音乐律动的氛围感和体验感。

请参阅图2，本发明实施例中灯光信号律动控制方法的第二个实施例包括：

201、对初始音频数据进行时频变换，得到音频频域信号，并计算出音频频域信号对应的音频能量谱；

本实施例中，这里的音频能量谱，指的是音频信号在不同频率上的能量信息，用于描述音频信号在频率域上的特征。

在实际应用中，在获取待播放的初始音频数据以及对应灯珠的灯光初始状态之后，通过将音频数据分成小的时间片段（即帧），如每个帧的长度通常在10毫秒至100毫秒之间，可以根据需要进行调整。进而对每个帧应用窗函数（如汉宁窗或矩形窗）；进而对每个窗口应用傅里叶变换（FFT），将时域信号转换为频域信号，得到每个帧的频谱表示，并对每个帧的频域信号计算音频能量谱。

202、划分音频能量谱中第一掩蔽特征在不同能量强度的第一音频频域片段以及划分音频能量谱中第二掩蔽特征在不同能量强度的第二音频频域片段，并利用满足预设强度值的第一音频频域片段对不满足强度值的第一音频频域片段进行第一掩蔽，以及利用满足预设强度值的第二音频频域片段对不满足强度值的第二音频频域片段进行第二掩蔽，得到音频掩蔽结果；

本实施例中，这里的第一掩蔽特征，指的是时间掩蔽特征；这里的第二掩蔽特征，指的是频率掩蔽特征。

在实际应用中，根据音频能量谱中的第一掩蔽特征，在不同能量强度下划分出第一音频频域片段，即找到能量较大的片段和能量较小的片段并作为第一音频频域片段，以及类似的根据音频能量谱中的第二掩蔽特征，在不同能量强度下划分出第二音频频域片段，即找到能量较大的片段和能量较小的片段并作为第二音频频域片段；进而将满足预设强度值的第一音频频域片段用于掩蔽不满足强度值的第一音频频域片段，以实现对低能量信号的掩蔽效果，以及利用满足预设强度值的第二音频频域片段对不满足强度值的第二音频频域片段进行掩蔽操作，进而掩蔽操作后的音频信号，其中低能量的部分被掩蔽或者降低了编码精度，以便后续对各种类型的音频数据进行分类。

203、对音频掩蔽结果进行时频逆变换，并基于各种音频类型对应的音频参数特征，提取逆变换后的音频掩蔽结果对应音频类型的音频数据，得到分类后的初始音频数据；

本实施例中，这里的时频逆变换，指的是傅里叶逆变换；这里的音频参数特征，指的是各种音频类型对应的特征参数，如歌曲对应的各种音频参数、人声对应的各种音频参数和游戏音对应的的各种音频参数。

在实际应用中，通过对掩蔽处理后的音频信号进行傅里叶逆变换，将其从频域重新转换为时域表示，以还原出与原始音频数据相似的时域信号，进而根据各种音频类型对应的音频参数特征，从逆变换后的音频掩蔽结果中提取与特定音频类型相关的音频数据，如根据不同音频类型的频率、强度、谱线等特征进行提取，得到分类后的初始音频数据，其中这些数据应当与特定音频类型（如游戏声、人声和音乐声等）相对应。

204、基于预设时间窗口，分别对分类后的初始音频数据中各种音频类型进行频谱的加权平均计算，得到频谱质心值；

本实施例中，这里的时间窗口，指的是上述时频变化时的汉宁窗或矩形窗；这里的频谱质心值，指的是在音频频谱上，音频信号的频谱分布的中心位置，即反映音频信号在频率上的主要能量所在的位置。

在实际应用中，基于预设时间窗口和频谱质心的计算公式（其中X(f)表示频率f处的频谱幅度，Σ表示对所有频率的求和），对每个时间窗口内的频谱，进行加权平均计算，即将不同频率处的幅度值乘以相应的权重，并将它们相加求和，从而得到频谱质心值。

205、基于频谱质心值，确定分类后的初始音频数据中各音频类型的频率变化状态，并基于频率变化状态，提取各种音频类型的音频特征数据；

本实施例中，基于频谱质心值，确定每个音频类型的频率变化状态，进而推断出音频在不同时间段内的频率分布情况，并基于频率变化状态，提取各种音频类型的音频特征数据。比如，对于音乐音频和游戏音频等周期性的音频信号，可以提取出其基频、谐波频率等特征；对于人声音频非周期性的音频信号，可以提取出其频谱形态、能量分布等特征。

206、匹配初始音频数据对应的应用程序和程序模式；

本实施例中，通过确定当前初始音频数据中用户所操作的应用程序和该应用程序对应程序模式（如游戏的对战模式等）。由于不同游戏和游戏中不同的对战模式，其对应的游戏音频都不具相同，通过确定初始音频数据对应的应用程序和程序模式，可以提取出更加准确的音乐律动特征。

207、基于应用程序和程序模式，分别计算各音频特征数据的特征相似度；

本实施例中，利用特定的应用程序和程序模式，针对每种音频特征数据进行比较分析，即通过选择适当的比较算法和相似度度量方法，以确保对音频特征数据进行准确的比较，进而针对每组音频特征数据，通过所选的应用程序和程序模式，分别计算它们之间的特征相似度，如通过计算特征向量之间的距离、相关性或其他相似性度量指标来确定它们在特征空间中的相对位置和关系，得到特征相似度。

208、选取满足预设的相似度阈值的特征相似度，并匹配选取后的特征相似度的音乐律动特征；

本实施例中，根据预设的相似度阈值，从计算得到的特征相似度中筛选出符合条件的数据，进而针对选定的特征相似度，进行音乐节奏特征的匹配分析，如确定当前用户游戏时的游戏状态特征、游戏进度特征、用户音频的情绪特征等。

209、基于预设音频类型权重，对各音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；

210、基于融合结果，生成初始音频数据对应的律动控制信息，并基于律动控制信息，调整灯珠的灯光初始状态，以及生成灯光律动的控制结果。

本发明实施例中，通过获取当前待播放的初始音频数据，从初始音频数据中提取人声、应用程序声和音乐声对应的音频特征数据，并匹配音频特征数据对应的音乐律动特征，进而对各音频类型对应的音乐律动特征进行多种律动特征的融合，从而基于融合结果，生成对应的律动控制信息来调整灯光初始状态的各种灯光参数，从而实现利用音频律动信息来控制灯光的律动，提高了用户在游戏时相关灯光随音乐律动的氛围感和体验感。

请参阅图3，本发明实施例中灯光信号律动控制方法的第三个实施例包括：

301、获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；

302、对分类后的初始音频数据进行音频特征提取，得到各音频类型对应的音频特征数据，并匹配各音频特征数据对应的音乐律动特征；

303、基于应用程序和程序模式，确定初始音频数据的操作阶段，并基于操作阶段，确定各音频类型对应的融合权重值；

本实施例中，这里的操作阶段，指的是用户操作应用程序完成对应任务的状态，如游戏的对战状态。

在实际应用中，基于当前用户所操作的应用程序和程序模式，确定初始音频数据在应用处理流程中经历的具体操作阶段（如游戏的前中后阶段对应的对战状态），进而基于确定的操作阶段，为每种音频类型确定对应操作阶段相应的融合权重值。以更好的为游戏用户提供更佳的音乐律动和灯光律动的氛围感。

304、基于融合权重值，分别对各音频类型对应的音乐律动特征进行加权融合计算，得到融合结果；

本实施例中，根据预先确定的融合权重值，针对每种音频类型所对应的音乐律动特征，进行相应的加权计算，从而基于加权计算的结果，将不同音频类型在音乐律动中的影响按照对应权重融合为相关音频属性（如响度、强度、节奏快慢等），得到融合结果。

305、基于融合结果，确定初始音频数据的音频属性，并基于音频属性，匹配初始音频数据的灯光律动属性表；

本实施例中，这里的音频属性，指的是音频对应的响度、强度、节奏快慢、游戏情感等。

在实际应用中，通过融合结果确定初始音频数据的音频属性，包括音调、节奏、音量、音频情感等方面；进而基于音频属性，匹配对应游戏APP和用户游戏情感的灯光律动属性表。其中，这个表格将描述灯光在不同音频属性下的变化规律和特点。

306、基于灯光律动属性表，生成融合结果对应灯光变化的律动控制信息；

本实施例中，依据灯光律动属性表中的数据，生成与融合结果对应的灯光变化的律动控制信息（包括灯光亮度、颜色、闪烁模式等方面的控制参数），其中生成的律动控制信息将确保灯光效果与音乐的节奏和情感相匹配，使得游戏耳机、相关电脑灯管和房间灯等的灯光能够与用户游戏对战的状态（游戏声和音乐声）和用户游戏时的情感相对应，从而增强用户在游戏时整体的视觉冲击力和表现力，并使观众能够更直观地感受到游戏相关音乐与灯光的完美结合。

307、基于律动控制信息，调整灯珠中灯光初始状态的多种灯光参数，基于灯光参数，调整灯光的律动状态，生成灯光律动的控制结果。

本实施例中，根据律动控制信息，对灯珠中的灯光初始状态进行多种参数调整，包括亮度、颜色、灯光模式等方面的参数；进而根据调整后的灯光参数，进一步调整灯光的律动状态（这包括灯光的闪烁频率、渐变速度、跳动节奏等方面的调整，以确保灯光与音乐的节奏和情感相匹配），从而经过参数调整和律动状态的调整，最终生成灯光律动的控制结果。

本发明实施例中，通过获取当前待播放的初始音频数据，从初始音频数据中提取人声、应用程序声和音乐声对应的音频特征数据，并匹配音频特征数据对应的音乐律动特征，进而对各音频类型对应的音乐律动特征进行多种律动特征的融合，从而基于融合结果，生成对应的律动控制信息来调整灯光初始状态的各种灯光参数，从而实现利用音频律动信息来控制灯光的律动，提高了用户在游戏时相关灯光随音乐律动的氛围感和体验感。

上面对本发明实施例中灯光信号律动控制方法进行了描述，下面对本发明实施例中灯光信号律动控制装置进行描述，请参阅图4，本发明实施例中灯光信号律动控制装置一个实施例包括：

音频分类模块401，用于获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对所述初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；

特征匹配模块402，用于对所述分类后的初始音频数据进行音频特征提取，得到各所述音频类型对应的音频特征数据，并匹配各所述音频特征数据对应的音乐律动特征；

特征融合模块403，用于基于预设音频类型权重，对各所述音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；

状态调整模块404，用于基于所述融合结果，生成所述初始音频数据对应的律动控制信息，并基于所述律动控制信息，调整所述灯珠的灯光初始状态，以及生成灯光律动的控制结果。

本发明实施例中，获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；对分类后的初始音频数据进行音频特征提取，得到各音频类型对应的音频特征数据，并匹配各音频特征数据对应的音乐律动特征；基于预设音频类型权重，对各音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；基于融合结果，生成初始音频数据对应的律动控制信息，并基于律动控制信息，调整灯珠的灯光初始状态，以及生成灯光律动的控制结果。相比于现有技术，本申请获取当前待播放的初始音频数据，从初始音频数据中提取人声、应用程序声和音乐声对应的音频特征数据，并匹配音频特征数据对应的音乐律动特征，进而对各音频类型对应的音乐律动特征进行多种律动特征的融合，从而基于融合结果，生成对应的律动控制信息来调整灯光初始状态的各种灯光参数，从而实现利用音频律动信息来控制灯光的律动，提高了用户在游戏时相关灯光随音乐律动的氛围感和体验感。

请参阅图5，本发明实施例中灯光信号律动控制装置的另一个实施例包括：

音频分类模块401，用于获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对所述初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；

特征匹配模块402，用于对所述分类后的初始音频数据进行音频特征提取，得到各所述音频类型对应的音频特征数据，并匹配各所述音频特征数据对应的音乐律动特征；

特征融合模块403，用于基于预设音频类型权重，对各所述音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；

状态调整模块404，用于基于所述融合结果，生成所述初始音频数据对应的律动控制信息，并基于所述律动控制信息，调整所述灯珠的灯光初始状态，以及生成灯光律动的控制结果。

进一步的，所述音频分类模块401包括：

时频变换单元，用于对所述初始音频数据进行时频变换，得到音频频域信号，并计算出所述音频频域信号对应的音频能量谱；音频掩蔽单元，用于划分所述音频能量谱中第一掩蔽特征在不同能量强度的第一音频频域片段以及划分所述音频能量谱中第二掩蔽特征在不同能量强度的第二音频频域片段，并利用满足预设强度值的第一音频频域片段对不满足所述强度值的第一音频频域片段进行第一掩蔽，以及利用满足预设强度值的第二音频频域片段对不满足所述强度值的第二音频频域片段进行第二掩蔽，得到音频掩蔽结果；音频提取单元，用于对所述音频掩蔽结果进行时频逆变换，并基于各种音频类型对应的音频参数特征，提取逆变换后的音频掩蔽结果对应音频类型的音频数据，得到分类后的初始音频数据。

进一步的，所述特征匹配模块402包括：

质心值计算单元4021，用于基于预设时间窗口，分别对所述分类后的初始音频数据中各种音频类型进行频谱的加权平均计算，得到频谱质心值；特征提取单元4022，用于基于所述频谱质心值，确定所述分类后的初始音频数据中各所述音频类型的频率变化状态，并基于所述频率变化状态，提取各种音频类型的音频特征数据。

进一步的，所述特征匹配模块402还包括：

程序匹配单元4023，用于匹配所述初始音频数据对应的应用程序和程序模式；相似度计算单元4024，用于基于所述应用程序和所述程序模式，分别计算所述各所述音频特征数据的特征相似度；相似度选取单元4025，用于选取满足预设的相似度阈值的特征相似度，并匹配选取后的特征相似度的音乐律动特征。

进一步的，所述特征融合模块403包括：

权重确定单元，用于基于所述应用程序和程序模式，确定所述初始音频数据的操作阶段，并基于所述操作阶段，确定各所述音频类型对应的融合权重值；融合计算单元，用于基于所述融合权重值，分别对各所述音频类型对应的音乐律动特征进行加权融合计算，得到融合结果。

进一步的，所述融合计算单元包括：

提取各所述音频类型对应的音乐律动特征的特征向量；基于所述融合权重值，分别计算出所述音乐律动特征在所述操作阶段时新的特征向量；匹配所述新的特征向量对应的融合律动特征，得到融合结果。

进一步的，所述状态调整模块404包括：

属性匹配单元，用于基于所述融合结果，确定所述初始音频数据的音频属性，并基于所述音频属性，匹配所述初始音频数据的灯光律动属性表；信息生成单元，用于基于所述灯光律动属性表，生成所述融合结果对应灯光变化的律动控制信息；参数调整单元，用于基于所述律动控制信息，调整所述灯珠中灯光初始状态的多种灯光参数，基于所述灯光参数，调整所述灯光的律动状态，生成灯光律动的控制结果。

本发明实施例中，获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；对分类后的初始音频数据进行音频特征提取，得到各音频类型对应的音频特征数据，并匹配各音频特征数据对应的音乐律动特征；基于预设音频类型权重，对各音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；基于融合结果，生成初始音频数据对应的律动控制信息，并基于律动控制信息，调整灯珠的灯光初始状态，以及生成灯光律动的控制结果。相比于现有技术，本申请获取当前待播放的初始音频数据，从初始音频数据中提取人声、应用程序声和音乐声对应的音频特征数据，并匹配音频特征数据对应的音乐律动特征，进而对各音频类型对应的音乐律动特征进行多种律动特征的融合，从而基于融合结果，生成对应的律动控制信息来调整灯光初始状态的各种灯光参数，从而实现利用音频律动信息来控制灯光的律动，提高了用户在游戏时相关灯光随音乐律动的氛围感和体验感。

上面图4和图5从模块化功能实体的角度对本发明实施例中的灯光信号律动控制装置进行详细描述，下面从硬件处理的角度对本发明实施例中灯光信号律动控制设备进行详细描述。

图6是本发明实施例提供的一种灯光信号律动控制设备的结构示意图，该灯光信号律动控制设备600可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器（central processing units，CPU）610（例如，一个或一个以上处理器）和存储器620，一个或一个以上存储应用程序633或数据632的存储介质630（例如一个或一个以上海量存储设备）。其中，存储器620和存储介质630可以是短暂存储或持久存储。存储在存储介质630的程序可以包括一个或一个以上模块（图示没标出），每个模块可以包括对灯光信号律动控制设备600中的一系列指令操作。更进一步地，处理器610可以设置为与存储介质630通信，在灯光信号律动控制设备600上执行存储介质630中的一系列指令操作。

灯光信号律动控制设备600还可以包括一个或一个以上电源640，一个或一个以上有线或无线网络接口650，一个或一个以上输入输出接口660，和/或，一个或一个以上操作系统631，例如Windows Serve，Mac OS X，Unix，Linux，FreeBSD等等。本领域技术人员可以理解，图6示出的灯光信号律动控制设备结构并不构成对灯光信号律动控制设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

本发明还提供一种灯光信号律动控制设备，所述计算机设备包括存储器和处理器，存储器中存储有计算机可读指令，计算机可读指令被处理器执行时，使得处理器执行上述各实施例中的所述灯光信号律动控制方法的各个步骤。

本发明还提供一种计算机可读存储介质，该计算机可读存储介质可以为非易失性计算机可读存储介质，该计算机可读存储介质也可以为易失性计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在计算机上运行时，使得计算机执行所述灯光信号律动控制方法的各个步骤。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（read-only memory，ROM）、随机存取存储器（random access memory，RAM）、磁碟或者光盘等各种可以存储程序代码的介质。

本申请可用于众多通用或专用的计算机系统环境或配置中。例如：个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、置顶盒、可编程的消费电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等。本申请可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本申请，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。

以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种灯光信号律动控制方法，其特征在于，所述灯光信号律动控制方法包括：

获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对所述初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；

对所述分类后的初始音频数据进行音频特征提取，得到各所述音频类型对应的音频特征数据，并匹配各所述音频特征数据对应的音乐律动特征；

基于预设音频类型权重，对各所述音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；

基于所述融合结果，生成所述初始音频数据对应的律动控制信息，并基于所述律动控制信息，调整所述灯珠的灯光初始状态，以及生成灯光律动的控制结果。

2.根据权利要求1所述灯光信号律动控制方法，其特征在于，所述对所述初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据，包括：

对所述初始音频数据进行时频变换，得到音频频域信号，并计算出所述音频频域信号对应的音频能量谱；

划分所述音频能量谱中第一掩蔽特征在不同能量强度的第一音频频域片段以及划分所述音频能量谱中第二掩蔽特征在不同能量强度的第二音频频域片段，并利用满足预设强度值的第一音频频域片段对不满足所述强度值的第一音频频域片段进行第一掩蔽，以及利用满足预设强度值的第二音频频域片段对不满足所述强度值的第二音频频域片段进行第二掩蔽，得到音频掩蔽结果；

对所述音频掩蔽结果进行时频逆变换，并基于各种音频类型对应的音频参数特征，提取逆变换后的音频掩蔽结果对应音频类型的音频数据，得到分类后的初始音频数据。

3.根据权利要求1所述灯光信号律动控制方法，其特征在于，所述对所述分类后的初始音频数据进行音频特征提取，得到各所述音频类型对应的音频特征数据，包括：

基于预设时间窗口，分别对所述分类后的初始音频数据中各种音频类型进行频谱的加权平均计算，得到频谱质心值；

基于所述频谱质心值，确定所述分类后的初始音频数据中各所述音频类型的频率变化状态，并基于所述频率变化状态，提取各种音频类型的音频特征数据。

4.根据权利要求1所述灯光信号律动控制方法，其特征在于，所述匹配各所述音频特征数据对应的音乐律动特征，包括：

匹配所述初始音频数据对应的应用程序和程序模式；

基于所述应用程序和所述程序模式，分别计算所述各所述音频特征数据的特征相似度；

选取满足预设的相似度阈值的特征相似度，并匹配选取后的特征相似度的音乐律动特征。

5.根据权利要求4所述灯光信号律动控制方法，其特征在于，所述基于预设音频类型权重，对各所述音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果，包括：

基于所述应用程序和程序模式，确定所述初始音频数据的操作阶段，并基于所述操作阶段，确定各所述音频类型对应的融合权重值；

基于所述融合权重值，分别对各所述音频类型对应的音乐律动特征进行加权融合计算，得到融合结果。

6.根据权利要求5所述灯光信号律动控制方法，其特征在于，所述基于所述融合权重值，分别对各所述音频类型对应的音乐律动特征进行加权融合计算，得到融合结果，包括：

提取各所述音频类型对应的音乐律动特征的特征向量；

基于所述融合权重值，分别计算出所述音乐律动特征在所述操作阶段时新的特征向量；

匹配所述新的特征向量对应的融合律动特征，得到融合结果。

7.根据权利要求1所述灯光信号律动控制方法，其特征在于，所述基于所述融合结果，生成所述初始音频数据对应的律动控制信息，并基于所述律动控制信息，调整所述灯珠的灯光初始状态，以及生成灯光律动的控制结果，包括：

基于所述融合结果，确定所述初始音频数据的音频属性，并基于所述音频属性，匹配所述初始音频数据的灯光律动属性表；

基于所述灯光律动属性表，生成所述融合结果对应灯光变化的律动控制信息；

基于所述律动控制信息，调整所述灯珠中灯光初始状态的多种灯光参数，基于所述灯光参数，调整所述灯光的律动状态，生成灯光律动的控制结果。

8.一种灯光信号律动控制装置，其特征在于，所述灯光信号律动控制装置包括：

音频分类模块，用于获取待播放的初始音频数据以及对应灯珠的灯光初始状态，并对所述初始音频数据进行对应音频类型的分类，得到分类后的初始音频数据；

特征匹配模块，用于对所述分类后的初始音频数据进行音频特征提取，得到各所述音频类型对应的音频特征数据，并匹配各所述音频特征数据对应的音乐律动特征；

特征融合模块，用于基于预设音频类型权重，对各所述音频类型对应的音乐律动特征进行多种律动特征的融合，得到融合结果；

状态调整模块，用于基于所述融合结果，生成所述初始音频数据对应的律动控制信息，并基于所述律动控制信息，调整所述灯珠的灯光初始状态，以及生成灯光律动的控制结果。

9.一种灯光信号律动控制设备，其特征在于，所述灯光信号律动控制设备包括：存储器和至少一个处理器，所述存储器中存储有指令；

所述至少一个处理器调用所述存储器中的所述指令，以使得所述灯光信号律动控制设备执行如权利要求1-7中任一项所述的灯光信号律动控制方法的各个步骤。

10.一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，其特征在于，所述指令被处理器执行时实现如权利要求1-7中任一项所述灯光信号律动控制方法的各个步骤。