CN115134706A - 音频播放设备及阵列、相关方法和介质 - Google Patents
音频播放设备及阵列、相关方法和介质 Download PDFInfo
- Publication number
- CN115134706A CN115134706A CN202110318048.7A CN202110318048A CN115134706A CN 115134706 A CN115134706 A CN 115134706A CN 202110318048 A CN202110318048 A CN 202110318048A CN 115134706 A CN115134706 A CN 115134706A
- Authority
- CN
- China
- Prior art keywords
- light
- bark domain
- bark
- audio
- lamp
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 230000005236 sound signal Effects 0.000 claims abstract description 119
- 239000011159 matrix material Substances 0.000 claims description 84
- 238000013139 quantization Methods 0.000 claims description 42
- 230000001795 light effect Effects 0.000 claims description 32
- 230000033764 rhythmic process Effects 0.000 claims description 31
- 230000000694 effects Effects 0.000 claims description 25
- 230000003993 interaction Effects 0.000 claims description 24
- 238000009499 grossing Methods 0.000 claims description 8
- 230000008451 emotion Effects 0.000 claims description 7
- 230000008859 change Effects 0.000 abstract description 10
- 230000002452 interceptive effect Effects 0.000 abstract description 3
- 230000004397 blinking Effects 0.000 description 20
- 238000001228 spectrum Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 230000008901 benefit Effects 0.000 description 7
- 241000287828 Gallus gallus Species 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 238000004020 luminiscence type Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 230000036651 mood Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 206010011878 Deafness Diseases 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000002996 emotional effect Effects 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 208000023514 Barrett esophagus Diseases 0.000 description 1
- 206010034203 Pectus Carinatum Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 210000000481 breast Anatomy 0.000 description 1
- 210000003477 cochlea Anatomy 0.000 description 1
- 210000003027 ear inner Anatomy 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000000147 hypnotic effect Effects 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 210000000697 sensory organ Anatomy 0.000 description 1
- 230000013707 sensory perception of sound Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 230000000638 stimulation Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11C—STATIC STORES
- G11C7/00—Arrangements for writing information into, or reading information out from, a digital store
- G11C7/16—Storage of analogue signals in digital stores using an arrangement comprising analogue/digital [A/D] converters, digital memories and digital/analogue [D/A] converters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Circuit Arrangement For Electric Light Sources In General (AREA)
Abstract
本公开提供了一种音频播放设备及阵列、相关方法和介质。该音频播放设备包括：无线通信单元，用以接收音频信号；解码单元，用以解码接收的音频信号；播放模组，用以播放解码的音频信号；控制模组，用以根据音频信号产生发光控制参数；发光单元，用以根据发光控制参数与播放模组播放的音频信号同步地发光。本公开实施例提供的音频播放设备发出的光能够根据播放的内容实时变化，从而增强音频播放设备的实时性体验，提升音频播放设备的互动效果。
Description
技术领域
本公开涉及智能设备领域，具体而言，涉及一种音频播放设备及阵列、相关方法和介质。
背景技术
目前，音箱的主要功能就是播放。随着智能音箱用户量增长，用户对智能音箱播放功能需求也出现多样化需求，会传统音箱的单一播放模式提出挑战。虽然某些音箱会采用一些装饰灯，但装饰灯闪烁的内容与播放的内容完全无关，用户听音箱时的体验较差。
发明内容
有鉴于此，本公开的一个目的在于提供一种能发光的音频播放设备，使得发出的光根据播放的内容实时变化，增强音频播放设备的实时性体验，提升音频播放设备的互动效果。
根据本公开的一方面，提供了一种音频播放设备，包括：
无线通信单元，用以接收音频信号；
解码单元，用以解码接收的音频信号；
播放模组，用以播放解码的音频信号；
控制模组，用以根据音频信号产生发光控制参数；
发光单元，用以根据发光控制参数与播放模组播放的音频信号同步地发光。
可选地，所述控制模组进一步用于：
获取灯效控制参数；
根据所述发光控制参数和所述灯效控制参数，控制所述发光单元。
可选地，所述发光单元为灯带或灯矩阵，所述灯带包括多个灯，所述灯矩阵的每行或每列有多个灯，所述根据音频信号产生发光控制参数，包括：
基于所述音频信号预定时长内的音频数值，得到对应的频域信号；
将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；
根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
可选地，所述灯效参数包括发光单元颜色、发光单元闪烁频率、发光单元闪烁占空比中的至少一个。
可选地，该音频播放设备还包括：交互单元，用于显示灯效参数输入页面，并接收输入的灯效参数。
可选地，所述控制模组从接收的音频信号中获取声音属性数据，并基于所述声音属性数据，确定所述灯效参数。
可选地，所述声音属性数据包括节奏数据、流派数据、声音情感数据、音调数据中的至少一个。
可选地，所述基于所述音频信号预定时长内的音频数值，得到对应的频域信号，包括：所述基于所述音频信号中单音轨数据预定时长内的音频数值，得到该单音轨数据对应的频域信号；所述将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值，包括：将该单音轨数据对应的频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；所述根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数，包括：根据单音轨数据对应的各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
可选地，所述发光单元包括多个与音轨对应的子发光单元，所述根据单音轨数据对应的各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数，包括：根据每轨单音轨数据对应的各Bark域维度上的Bark域子带值，分别确定所述音轨对应的子发光单元中的灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
可选地，所述发光单元包括多个灯区，所述多个灯区连成预定形状，所述灯区包括多个灯，所述发光控制参数是灯区内点亮的灯的数量，所述根据发光控制参数与播放模组播放的音频信号同步地发光，包括：在各灯区内以所述点亮的灯的数量点亮灯。
可选地，所述音频播放设备关联有关联装置，所述关联装置也具有发光单元，所述关联装置的发光单元也根据发光控制参数与播放模组播放的音频信号同步地发光。
可选地，所述根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数，包括：
当Bark域维度数等于所述灯带的灯数或所述灯矩阵的列数，则每个Bark域维度对应于所述灯带中的一个灯或所述灯矩阵的一列灯，根据各Bark域维度上的Bark域子带值，确定该灯或该一列灯的发光控制参数；
当Bark域维度数大于所述灯带的灯数或所述灯矩阵的列数，则根据第一规则从Bark域维度中选择有效Bark域维度，使每个有效Bark域维度对应于所述灯带中的一个灯或所述灯矩阵的一列灯，根据各有效Bark域维度上的Bark域子带值，确定该灯或一列灯的发光控制参数；
当Bark域维度数小于所述灯带的灯数或所述灯矩阵的列数，则根据第二规则选择灯带的有效灯或所述灯矩阵的有效列，使每个Bark域维度对应于所述灯带中的一个有效灯或所述灯矩阵的一个有效列，根据各Bark域维度上的Bark域子带值，确定该有效灯或有效列的发光控制参数。
可选地，所述将所述频域信号转换到Bark域，包括：查找频率范围与Bark域维度对应关系表，将所述频域信号转换到Bark域。
可选地，所述交互单元还接收以下中的至少一个：
第一规则；
第二规则；
设置的Bark域维度数目；
频率范围与Bark域维度对应关系表。
可选地，如果交互单元接收设置的Bark域维度数目，则所述控制模组根据预定的对应关系产生规则，产生频率范围与Bark域维度对应关系表。
可选地，所述根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，包括：基于量化峰值、量化峰值所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数。
可选地，所述根据各Bark域维度上的Bark域子带值，分别确定所述灯矩阵中各列点亮的灯数作为所述发光控制参数，包括：基于灯矩阵中每列灯数、每列灯数所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
可选地，所述量化峰值根据所述Bark子带值与所述量化峰值的比较而更新。
可选地，所述量化峰值通过以下方式更新：
当所述Bark域子带值大于所述量化峰值，则以所述Bark域子带值更新所述量化峰值；
当所述Bark域子带值不大于所述量化峰值，则以按照均衡因子获得在所述Bark域子带值和所述量化峰值之间的均衡值，作为更新的量化峰值。
可选地，所述基于量化峰值、量化峰值所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，包括：
基于量化峰值、量化峰值所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值；
从所述声音数据中获取节奏数据；
利用与所述节奏数据对应的平滑因子对所述量化后Bark域子带值进行平滑，平滑后的量化后Bark域子带值作为所述发光控制参数。。
根据本公开的一方面，提供了一种音频播放设备阵列，包括控制模组和多个音频播放设备，其中，每个音频播放设备对应于一个或多个Bark域维度；所述控制模组用于：基于待播放音频信号预定时长内的音频数值，得到对应的频域信号；将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；根据各Bark域维度上的Bark域子带值，分别确定各Bark域维度对应的发光控制参数；向各音频播放设备发送该音频播放设备对应的Bark域维度的发光控制参数和待播放音频信号中该Bark域维度中的音频数据；所述音箱包括：无线通信单元，用于接收该音箱对应的Bark域维度的发光控制参数和待播放音频信号中该Bark域维度中的音频数据；解码单元，用于解码接收的音频数据；播放模组，用于播放解码的音频数据；发光单元，用于根据发光控制参数与播放模组播放的音频信号同步地发光。
根据本公开的一方面，提供了一种音频播放设备的发光控制方法，包括：
无线接收音频信号；
根据所述音频信号，产生发光单元控制参数；
根据所述发光控制参数，与播放的音频信号同步地，使所述音频播放设备的发光单元发光。
可选地，所述根据所述发光控制参数，与播放的音频信号同步地，使所述音频播放设备的发光单元发光，包括：
获取灯效控制参数；
根据所述发光控制参数和所述灯效控制参数，控制所述发光单元发光。
可选地，所述发光单元为灯带或灯矩阵，所述灯带包括多个灯，所述灯矩阵的每行或每列有多个灯，所述根据音频信号产生发光控制参数，包括：
基于所述音频信号预定时长内的音频数值，得到对应的频域信号；
将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；
根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
可选地，所述灯效参数包括发光单元颜色、发光单元闪烁频率、发光单元闪烁占空比中的至少一个。
可选地，该音频播放设备还包括：交互单元，用于显示灯效参数输入页面，并接收输入的灯效参数。
根据本公开的一方面，提供了一种计算机可读介质，存储计算机可执行代码，所述计算机可执行代码被处理器执行，以实现如上所述的方法。
本公开实施例的音频播放设备中，控制模组根据接收的音频信号产生发光控制参数，发光单元根据该发光控制参数与播放模组播放的音频信号同步地发光。这样，发光单元发出的光和播放模组播放的声音都同步来自于接收的音频信号，两者互相呼应(例如播放的声音强时发出的光也强)，提高了音频播放设备对于用户的实时性体验，提升音频播放设备的互动效果。
附图说明
通过参考以下附图对本发明实施例的描述，本发明的上述以及其它目的、特征和优点将更为清楚，在附图中：
图1示出了根据本公开一个实施例的音频播放设备的结构图；
图2A-D分别示出了带有单点发光单元、环状发光单元、灯带发光单元、灯矩阵发光单元的音频播放设备示意图；
图3示出了图2D的灯矩阵发光单元的被点亮的各列的示意图；
图4示出了带有交互单元的音频播放设备的示意图；
图5A-C示出了图4的交互单元的交互界面的示意图；
图6示例性地示出了频域与Bark域的对应关系曲线；
图7示例性地示出了各Bark域子带对应的频率范围；
图8示出了根据本公开一个实施例的音频播放设备阵列的结构图；
图9示出了根据本公开一个实施例的音频播放设备的发光控制方法的流程图。
具体实施方式
以下基于实施例对本发明进行描述，但是本发明并不仅仅限于这些实施例。在下文对本发明的细节描述中，详尽描述了一些特定的细节部分。对本领域技术人员来说没有这些细节部分的描述也可以完全理解本发明。为了避免混淆本发明的实质，公知的方法、过程、流程没有详细叙述。另外附图不一定是按比例绘制的。
本公开实施例的音频播放设备
根据本公开的一个实施例，提供了一种音频播放设备。音频播放设备是指其主要功能是播放音频的设备，包括音箱、外用传声喇叭、能同时放音的麦克风、放音笔等。它们能够独立使用，内置放音功能，且主要用途是播放音频。
如图1所示，根据本公开的一个实施例，音频播放设备100包括无线通信单元110、解码单元120、控制模组140、播放模组130、发光单元150、交互单元160，其中交互单元160是可省略的。
无线通信单元110是音频播放设备100中接收待播放的音频信号的部件。它可以体现为天线等形式。本公开实施例的音频播放设备100独立使用。无线通信是独立设备从外界获取信号的普遍的一种方式。
解码单元120是对接收的音频信号进行解码的单元。音频信号为了能够在音箱等音频播放设备100播放，一般需要经过解码的过程。
播放模组130是播放解码的音频信号的模组。模组一般是芯片的最小系统的集合，一般由多颗芯片和PCB构成，其可以由芯片厂家或第三方公司开发，大大方便芯片的使用。
控制模组130是根据音频信号产生发光控制参数的模组。发光控制参数是对发光单元150发光进行控制的参数，例如单点发光单元的发光亮度、环状发光单元的环点亮比例、灯带发光单元的各频域特征值或Bark域子带值、灯矩阵发光单元的各列点亮的灯数等等。
发光单元150是根据发光控制参数与播放模组130播放的音频信号同步地发光的单元。下面结合图2A-D描述4种不同的发光单元150类型以及对应的发光控制参数。应当理解，上述类型只是示例，本领域技术人员还能够构想出其它类型的发光单元150。
图2A示出了带有单点发光单元150的音频播放设备100的示意图。单点发光单元150即只有一个点发光的发光单元，如图2A的音箱上部中央的小方灯。在单点发光单元150的情况下，发光控制参数可以是单点发光单元150的发光亮度。控制模组130根据音频信号产生该发光亮度的方法可以是从音频信号中提取时域特征值并据此产生发光亮度，也可以是从音频信号提取单个频段的频域特征值或多个频段的频域特征值的某个综合指标并据此产生发光亮度，等等。
在从音频信号中提取时域特征值并据此产生发光亮度的情况下，时域特征值可以是所述音频信号预定时长内的包络值。该预定时长是发光单元150亮度值每变化一次的周期，它等于发光单元150灯效刷新频率(例如每秒发光单元亮度值变多少次)的倒数。该预定时长乘以音频信号的采样率(例如每秒采多少个样，一般为48k/s)，得到该预定时长中的采样数。将该预定时长中的音频信号的采样值求均方根，就得到了该预定时长中的包络值。为了防止灯效变化过快、显示不稳定的情况，可以将该包络值进行平滑处理，得到时域特征值。
在一个实施例中，可以让发光亮度与时域特征值成正比。因此，得到时域特征值之后，让其乘以一个预定系数，就得到了发光亮度。该预定系数可以等于发光单元150能够发出的最大发光亮度除以一般音频信号的最大时域特征值。
在从音频信号提取单个频段的频域特征值或多个频段的频域特征值的某个综合指标并据此产生发光亮度的情况下，该频域特征值可以是单个频段的中心频点的频谱值，多个频段的频域特征值的某个综合指标可以是指多个频段的中心频点的频谱值的平均数或和等。之所以采用某单个频段的频域特征值或多个频段的频域特征值的某个综合指标来产生发光亮度，是因为这些频段是所关心的频段(例如人耳敏感的频段或某音频播放设备播放效果最清晰的频段)。因此，在某些情况下，让发光单元的闪烁跟踪这些关键频段或频点的值的变化，使用户更具有临场代入感。得到频域特征值或综合指标后，在一个实施例中，确定发光亮度时，可以让发光亮度与频域特征值或上述综合指标值成正比。因此，得到频域特征值或综合指标值之后，让其乘以一个预定系数，就得到了发光亮度。该预定系数可以等于发光单元150能够发出的最大发光亮度除以一般音频信号的该单个频段的最大频域特征值或多个频段的频域特征值的某个综合指标的最大值。
图2B示出了带有环状发光单元150的音频播放设备100的示意图。环状发光单元150即呈环状的发光单元。环状发光单元150的环可以部分被点亮，也可以整个环被点亮。在环状发光单元150的情况下，发光控制参数可以是环状发光单元150的环点亮比例。控制模组130根据音频信号产生该环点亮比例的方法可以是从音频信号中提取时域特征值并据此产生环点亮比例，也可以是从音频信号提取单个频段的频域特征值或多个频段的频域特征值的某个综合指标并据此产生环点亮比例，等等。它们与在单点发光单元150的情况下，从音频信号中提取时域特征值并据此产生发光亮度，也可以是从音频信号提取单个频段的频域特征值或多个频段的频域特征值的某个综合指标并据此产生发光亮度的方法基本相同，不同之处仅在于用环点亮比例取代了发光亮度，故不赘述。
图2C示出了带有灯带发光单元150的音频播放设备100的示意图。灯带发光单元150是由多个灯排成一排形成的带。在灯带发光单元150的情况下，发光控制参数可以是音频信号转换成的频域信号中某频点的频谱值，或者Bark域信号的子带值。
在发光控制参数是音频信号转换成的频域信号中某频点的频谱值的情况下，发光控制参数可以如下获得：基于所述音频信号预定时长内的音频数值，得到对应的频域信号；在所述频域信号中获取预定频点的频谱值，作为发光控制参数。之所以要基于所述音频信号预定时长内的音频数值来获得频域信号，也是由于同上所述需要考虑一个发光单元变化周期内音频信号的情况造成的。
从时域信号转换成频域信号，可以采用已有方法。然后，可以在频域信号中取预定数目个频点的频谱值。该预定数目与灯带的灯数一致。每个频点的频谱值对应一个灯。根据该频点的频谱值，就可以确定相应灯的亮度。在一个实施例中，确定灯的发光亮度时，可以让发光亮度与相应频点的频谱值成正比。用相应频点的频谱值乘以一个预定系数，就得到了相应灯的发光亮度。该预定系数可以等于灯带的灯能够发出的最大发光亮度除以一般音频信号的频点的最大频谱值。该灯带的实施例相对于单点或环状发光单元的实施例，获得的好处是，可以反映不同频点或频率段音频信号的强弱，使得用户对不同音频段(如低频端、高频端)的声音强弱，在视觉上都形成各自的刺激，从而提高用户收听体验。
然而，由于人耳对不同频段的声音敏感性不同，具有临界频带，因而用Bark域特征值与用频域特征值更能接近于人耳对于声音的感知。本公开实施例还首次将Bark域特征值引入到与音频信号一致的发光单元的闪烁中。临界频带是听觉学和心理声学的专业名词，它于19世纪40年代被Harvey Fletcher提出。耳蜗是内耳中的传感器官，临界频带指的是由于耳蜗构造产生的听觉滤波器的频率带宽。简单来说，临界频带是声音频率带，在临界频带中第一个单音感知性会被第二单音的听觉掩蔽所干扰。声学研究中，人们使用听觉滤波器来模拟不同的临界频带。后来研究者发现人耳结构大致会对24个频率点产生共振，根据这个结论Eberhard Zwicker在1961年针对人耳特殊结构提出，音频信号在频带上也呈现出24个临界频带，分别从1到24。这就是Bark域。每个Bark域的临界频带叫做Bark域子带，其子带上的声音强度数值就是Bark域子带值。本公开一个实施例采用Bark域信号的子带值，作为发光控制参数。
在发光控制参数是音频信号转换成的Bark域信号的子带值的情况下，发光控制参数可以如下获得：基于所述音频信号预定时长内的音频数值，得到对应的频域信号；将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数。
基于所述音频信号预定时长内的音频数值，得到对应的频域信号的方法与前述频域转换相同。
图6示例性地示出了频域与Bark域的对应关系曲线。该曲线的横轴表示音频信号的各种频率，纵轴表示对应的Bark域子带，例如上面的24个子带中的一个。应当理解，上述Bark域子带数也可以不是24个，而可以由用户进行设置。图6中曲线上(2.5kHz,15)这个点就代表频率2.5kHz对应于Bark域子带15。图7是一个频率范围与Bark域维度对应关系表，其更加明确了每个Bark域子带对应的频率范围。将所述频域信号转换到Bark域可以采取查找如图7所示的频率范围与Bark域维度对应关系表的方式进行。
在一个实施例中，根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，可以采用以下方式：基于量化峰值、量化峰值所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数。量化是将音频信号的模拟数值转换成数字数值的过程。该数字数值能表示的最大数值即量化峰值。例如，16位数字信号的情况下，2^15-1＝32767，则32767就是量化峰值，它对应的模拟数值的最大值即量化峰值所对应的声音强度最大值。用各Bark域子带值除以量化峰值所对应的声音强度最大值，再乘以量化峰值，就得到Bark域子带值对应的量化值，即量化后Bark域子带值，作为所述发光控制参数。例如，量化峰值所对应的声音强度最大值的一半的Bark域子带值，对应的量化后子带值为32767*50％＝16383。用它来控制灯带中相应灯的亮度时，其调节的灯亮度等于最大灯亮度除以量化峰值，再乘以上述量化后Bark域子带值。例如，量化后子带值为16383，其对应的灯亮度是最大灯亮度的一半。
图2D示出了带有灯矩阵发光单元150的音频播放设备100的示意图。灯矩阵发光单元150包括由多行和多列的灯组成的矩阵。在灯矩阵发光单元150的情况下，发光控制参数可以是所述灯矩阵中各列点亮的灯数。如图3所示，灯矩阵有17列，5行。每列点亮的灯数不同，最大可以点亮5个灯。
该实施例中，与图2C的实施例中类似，基于所述音频信号预定时长内的音频数值，得到对应的频域信号。将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值。图2D的实施例与图2C的实施例的区别在于，其是根据各Bark域维度上的Bark域子带值，分别确定所述灯矩阵中各列点亮的灯数作为所述发光控制参数，而不是确定各灯的量化后Bark域子带值作为所述发光控制参数。
所述灯矩阵中各列点亮的灯数可以基于灯矩阵中每列灯数、每列灯数所对应的声音强度最大值、以及各Bark域子带值确定。可以认为，每列灯数所对应的声音强度最大值对应着灯矩阵中每列灯数。即，当该Bark域子带的声音强度达到最大值时，该列的所有灯应该全点亮。因此，用各Bark域子带值除以每列灯数所对应的声音强度最大值，再乘以每列灯数，就得到了该列点亮的灯数。该实施例的好处是，用每列点亮的灯数来形象地表明各种频段或频点的声音信号强弱，进一步提高了用户收听体验。
如上所述，Bark域子带数，或者说Bark域维度数，一般是24个，但也可以根据用户需要灵活设置。如果不是24个，那么如图7所示的频率范围与Bark域维度对应关系表就要重新调整。实践中，尽量让Bark域维度数等于图2C中所述灯带的灯数或图2D中所述灯矩阵的列数。这时，每个Bark域维度对应于所述灯带中的一个灯或所述灯矩阵的一列灯。根据各Bark域维度上的Bark域子带值，确定该灯或该一列灯的发光控制参数。这样，灯带中各灯或灯矩阵中各列灯的变化情况，就直观反映了音频信号的各Bark域子带值。
但是，在实践中，存在着实际中图2C中所述灯带的灯数或图2D中所述灯矩阵的列数不凑巧等于预先设置的Bark域维度数的情况。这种情况下，一种调整的手段则是去除一些Bark域维度，或忽略灯带中的某些灯或灯矩阵中的某些列(例如让其保持不被点亮)。另一种调整的手段是重新按照实际中图2C中所述灯带的灯数或图2D中所述灯矩阵的列数来重新设置如图7所示的频率范围与Bark域维度对应关系表。
先讨论前一种调整的手段。当Bark域维度数大于所述灯带的灯数或所述灯矩阵的列数时，可以根据第一规则从Bark域维度中选择有效Bark域维度。有效Bark域维度即被选择用于控制发光的Bark域维度。一般会选取一些人耳感知比较强烈的Bark域维度，或者音频播放设备识别得比较充分的Bark域维度，作为有效Bark域维度。如何选取由第一规则进行规定。选择出的Bark域维度数等于所述灯带的灯数或所述灯矩阵的列数，这样，每个有效Bark域维度对应于所述灯带中的一个灯或所述灯矩阵的一列灯。根据各有效Bark域维度上的Bark域子带值，就可以确定该灯或一列灯的发光控制参数。类似地，当Bark域维度数小于所述灯带的灯数或所述灯矩阵的列数时，可以根据第二规则选择灯带的有效灯或所述灯矩阵的有效列，使得Bark域维度数等于灯带的有效灯数或所述灯矩阵的有效列数。如何选取由第二规则规定。选择后，每个Bark域维度对应于所述灯带中的一个有效灯或所述灯矩阵的一个有效列。然后，根据各Bark域维度上的Bark域子带值，就可以确定该有效灯或有效列的发光控制参数。上述实施例的好处是，不用重新规定频率范围与Bark域维度对应关系表，简单易行，实施效率高。
上述第一规则和第二规则可以由管理员事先设置，也可以由用户通过交互单元160设置。通过交互单元160设置的好处是，使得用户根据实际需要灵活设置规则，该规则更能够反映出应用的具体需求，提高应用可移植性和可扩展性。
交互单元160是用户与音频播放设备100交互的接口。其可以体现为如图4所示音频播放设备100上的触摸显示屏，也可以是声控装置等。声控装置可以接收用户说出的语音信号，识别语音信号中的第一规则或第二规则等。另外，交互单元160也可以体现为聋哑人手势识别装置，其通过图像识别的方式识别出聋哑人的手势，从识别的手势中获取第一规则或第二规则。
在重新按照实际中图2C中所述灯带的灯数或图2D中所述灯矩阵的列数来重新设置如图7所示的频率范围与Bark域维度对应关系表的实施方式中，可以通过交互单元160接收用户设置的频率范围与Bark域维度对应关系表。由于该对应关系表是用户设置的，其保证了对应关系表中的Bark域维度数与实际中图2C中所述灯带的灯数或图2D中所述灯矩阵的列数是一致的。在一个更加自动化的实施例中，可以仅通过交互单元160接收用户设置的Bark域维度数目。如图4所示，用户在交互单元160中选择“Bark域维度数设置”选项，出现图5C所示的界面，提示用户输入期望的Bark域维度数。用户会根据实际中图2C中所述灯带的灯数或图2D中所述灯矩阵的列数来输入期望的Bark域维度数。在这种情况下，所述控制模组140可以根据预定的对应关系产生规则，产生频率范围与Bark域维度对应关系表。
上述Bark域的实施例中，发光控制参数与各Bark域维度上的Bark域子带值成正比。各Bark域维度上的Bark域子带值越大，发光控制参数越大，发光亮度越大，或者所述灯矩阵中各列点亮的灯数越多。然而，音乐具有不同类型。对于一些普遍舒缓的音乐，如大自然音乐、催眠音乐等，量化输出的值始终在最低阶附近浮动，体现在发光控制上时，用户一方面感觉到律动节奏分辨率不足，另一方面感觉灯效持续在低亮度区显示，无法感知到灯效变化，用户体验差。
因此，在一个实施例中，提出一种对每个Bark域子带值动态跟踪并动态更新峰值的方案。它的优势在于无论播放内容音源数值大小、无论当前系统音量大小，量化峰值均可随播放内容自适应调整，以使律动特征显示在灯效上能够获得更大的分辨率和律动感。
在该实施例中，所述量化峰值根据所述Bark子带值与所述量化峰值的比较而更新。k表示第几个发光变化周期。下面是量化峰值的实时更新的公式：
其中，rhythm_vector[k]代表第k个发光变化周期的Bark子带值，dynamic_max[k]代表第k个发光变化周期的量化峰值。当所述Bark域子带值rhythm_vector[k]大于dynamic_max[k]时，则以所述Bark域子带值rhythm_vector[k]更新所述量化峰值dynamic_max[k]。当所述Bark域子带值rhythm_vector[k]不大于所述量化峰值dynamic_max[k]，则以按照均衡因子release_para获得在所述Bark域子带值rhythm_vector[k]和所述量化峰值dynamic_max[k]之间的均衡值，作为更新的量化峰值dynamic_max[k]。例如，当均衡因子release_para＝0.4时，0.4dynamic_max[k]+0.6rhythm_vector[k]是介于dynamic_max[k]和rhythm_vector[k]之间的一个值，以该值更新dynamic_max[k]，使dynamic_max[k]向着rhythm_vector[k]靠拢。这样，当播放比较轻柔舒缓的大自然音乐时，由于所述Bark域子带值rhythm_vector[k]会小于所述量化峰值dynamic_max[k]，这时会根据均衡因子release_para在所述Bark域子带值rhythm_vector[k]和所述量化峰值dynamic_max[k]之间找到一个均衡值，作为新的量化峰值dynamic_max[k]，其会比原来的量化峰值dynamic_max[k]小一些。在下一个发光变化周期，这个调整后的量化峰值dynamic_max[k]可能还会比下一个发光变化周期的Bark域子带值rhythm_vector[k]大，因此还是会根据均衡因子release_para进一步缩小所述Bark域子带值rhythm_vector[k]和所述量化峰值dynamic_max[k]之间的距离。这样，达到了平缓调整量化峰值dynamic_max[k]的目的，使得量化峰值dynamic_max[k]可随播放内容自适应调整，以使律动特征显示在灯效上能够获得更大的分辨率和律动感。
另外，当播放律动性比较强的音乐时，人们往往希望灯光随之快节奏地闪烁；反之，当播放律动性不强的音乐时，人们往往希望灯光慢慢地闪烁，这样能够帮助人融于到各种音乐的情绪中，提高收听体验。因此，在本公开进一步的实施例中，采用了一种根据声音数据的节奏调整发光控制参数的方式，使得发光单元闪烁的节奏与声音的律动更加统一，提高用户的沉浸式体验。
在该实施例中，在上述基于量化峰值、量化峰值所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数的过程中，基于量化峰值、量化峰值所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值，从所述声音数据中获取节奏数据，并利用与所述节奏数据对应的平滑因子对所述量化后Bark域子带值进行平滑，平滑后的量化后Bark域子带值作为所述发光控制参数。从所述声音数据中获取节奏数据可以采用已有方法。根据节奏数据确定对应的平衡因子可以采用查表的方式，等等。利用与所述节奏数据对应的平滑因子sm_para对所述量化后Bark域子带值quantify_vector(k)进行平滑可以采用以下公式：
final_vector[k]＝final_vector[k-1]*sm_para+quantify_vector(k)*(1-sm_para)
其中，final_vector[k]是第k个发光变化周期平滑后的Bark域子带值，final_vector[k-1]是第k-1个发光变化周期平滑后的Bark域子带值，quantify_vector(k)是上述量化出的Bark域子带值。假设设final_vector[0]＝0，这样，final_vector[1]就只与quantify_vector(1)有关。之后，每个发光变化周期的平滑后的Bark域子带值就既与量化出的Bark域子带值，又与前一个周期累计的平滑后Bark域子带值有关。由于前一个周期累计的平滑后Bark域子带值是无法改变的，在本发光变化周期，量化出的Bark域子带值决定了最后平滑出的Bark域子带值。
在上述实施例中，控制模组140产生发光控制参数，并据此控制发光单元150发光。发光控制参数控制的仅仅是发光的具体参数，如亮度，不控制具体发光的灯效。例如，发送控制参数控制发光单元的亮度，但发出什么颜色的光是预先设置好的，不在控制范围之内。灯闪烁频率等也是预先设置好的，不在控制范围之内。它们是灯效控制的内容。灯效为发光单元150的发光效果。灯效参数是指示灯效的参数，其包括发光单元颜色、发光单元闪烁频率、发光单元闪烁占空比等等。发光单元闪烁频率是指每单位时间闪烁的次数。例如，发光变化周期为1秒，在这1秒内发光单元150以发光控制参数指示的亮度发光，但可以一直发光，也可以闪烁着发光，例如1秒内以以发光控制参数指示的亮度闪5次，灭5次，其闪烁频率为5次/秒。发光单元闪烁占空比是指闪烁时闪的持续时间与灭的持续时间的比。
在本公开的另一个实施例中，控制模组140除产生发光控制参数外，还获取灯效控制参数，并根据所述发光控制参数和所述灯效控制参数，控制所述发光单元。该实施例中，不但能对发光的参数(对亮度等)进行控制，还能对灯效进行控制，提高发光控制的灵活性。
在一个实施例中，灯效控制参数是用户设置的。交互单元160显示灯效参数输入页面，并接收用户输入的灯效参数。如图4所示，交互单元160显示的界面上具有“灯颜色设置”、“灯闪烁设置”的选择。当用户在图4的界面中选择“灯颜色设置”时，出现图5A所示的灯颜色设置下拉式菜单，用户可以在该下拉式菜单中选择其需要设置的颜色。当用户在图4的界面中选择“灯闪烁设置”时，出现图5B所示的闪烁频率设置下拉式菜单和闪烁占空比设置下拉式菜单，用户可以在相应下拉式菜单中选择其需要设置的闪烁频率或闪烁占空比。该实施例可以实现灯效参数的个性化定制，提高用户控制的灵活性。
在另一个实施例中，灯效参数不是由用户输入的，而是由声音属性数据决定的。例如，在听悲伤的音乐的时候，暗色的灯光(例如深蓝色)更能把用户的情绪代入到音乐中；在听喜悦的音乐的时候，欢快的颜色(例如红色)更能把用户的情绪代入到音乐中。因此，基于声音属性数据确定灯效参数，使得发光的感情色彩与声音的感情色彩一致，进一步提高用户体验。
该实施例中，控制模组140从接收的音频信号中获取声音属性数据，并基于所述声音属性数据，确定所述灯效参数。所述声音属性数据是指示声音的属性的数据，其包括节奏数据、流派数据、声音情感数据、音调数据等。节奏数据是指示声音的节奏的数据。通常，节奏越快的音乐，可以闪烁频率设置得越高，使得灯光的体验与音乐的体验统一。流派数据是指示音乐流派的数据。音乐流派包括古典、流行、民谣、爵士、R&B等。对于比较舒缓的古典等流派的音乐，可以将发光的颜色调成暗色，如深蓝色，深紫色。对于流行等流派的音乐，可以将发光的颜色调成红色、黄色等。声音情感数据是指示声音中流露的情感的数据，例如悲伤、快乐、平静等。如果声音情感是悲伤的音乐，可以将发光的颜色设置成深蓝、深紫等颜色。如果声音情感是平静的音乐，可以将发光的颜色设置成白色等。音调数据是指示声音的音高的数据。例如，对于声音的音调较高的歌曲(如女高音演唱的歌曲)，可以将发光的颜色调成明亮色系的颜色，例如红色、黄色。对于声音的音调较低的歌曲(如男低音演唱的歌曲)，可以将发光的颜色调成深蓝、深紫等暗色系的颜色。从音频信息中识别声音属性，可以通过已有方法。基于所述声音属性数据，确定所述灯效参数，可以采用查找预先设置的对应关系表的方法。
上述实施例中，都是根据完全的音频信号确定发光控制参数来控制发光单元的发光。在另外的实施例中，还可以根据音频信号中的一轨确定发光控制参数来控制发光单元的发光。这在某些场景下更加有意义，例如对于歌曲来说，按照人声这一轨的音频信号控制发光可能比按照整体人声来控制发光，更容易使用户对人声有代入感。因此，该实施例在基于所述音频信号预定时长内的音频数值，得到对应的频域信号时，是基于所述音频信号中单音轨数据(例如人声数据)预定时长内的音频数值，得到该单音轨数据对应的频域信号。在音频信号中获取预定的一轨的音轨数据，可以通过已有方法。该实施例在将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值时，也是将该单音轨数据(例如人声数据)对应的频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值。该实施例中，在根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数时，也是根据单音轨数据(例如人声数据)对应的各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
在另一个实施例中，不仅可以根据音频信号中的一轨确定发光控制参数来控制发光单元的发光，还能够根据音频信号中的每一轨确定发光控制参数来控制发光单元的发光。这样，对于音频中的各种音轨，例如人声、钢琴、吉他、大提琴、小提琴等，分别有发出的光与其对应，使得用户的感知更丰富，进一步提升了用户的沉浸式体验。
在该实施例中，发光单元150可以包括多个与音轨对应的子发光单元。每个音轨可以对应于一个子发光单元。例如，人声音轨对应于一个子发光单元，钢琴音轨对应于另一个子发光单元，吉他音轨对应于又一个子发光单元等等。对于单点型发光方式来说，发光单元150就包含了多个类似于图2A中的单点发光单元150的单点子发光单元，例如，音箱有多个发光的方点。每个单点子发光单元负责一轨相应的发光。对于环状发光方式来说，发光单元150就包含了多个类似于图2B中的环状发光单元150的环状子发光单元，例如音箱有多个环。每个环状子发光单元负责一轨相应的发光。对于灯带发光方式来说，发光单元150就包含了多个类似于图2C中的灯带发光单元150的灯带子发光单元，例如音箱有多个灯带。每个灯带子发光单元负责一轨相应的发光。对于灯矩阵发光方式来说，发光单元150就包含了多个类似于图2D中的灯矩阵发光单元150的灯矩阵子发光单元，例如音箱有多个灯矩阵。每个灯矩阵子发光单元负责一轨相应的发光。在确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数时，可以根据每轨单音轨数据对应的各Bark域维度上的Bark域子带值，分别确定所述音轨对应的子发光单元中的灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
在另一个实施例中，发光单元150包括多个灯区，多个灯区连成预定图形，例如雄鸡的形状。每个灯区包括多个灯。这些灯连成所述预定形状的一部分，如鸡头、鸡胸、鸡尾、鸡脚等等。所述发光控制参数是灯区内点亮的灯的数量。在根据发光控制参数与播放模组播放的音频信号同步地发光时，可以在各灯区内以所述点亮的灯的数量点亮灯。还以上述雄鸡为例，虽然鸡头、鸡胸、鸡尾、鸡脚的部位都有灯点亮，但每个部位点亮的灯不同，每个部位的胖瘦不同，造成整个雄鸡给人的感官不同。通过这样的方式，可以通过形象地控制整体形状的各个部分的胖瘦，来反映出例如每个Bark域子带值的高低，从而给用户与声音适配的形象的灯光代入感体验。
所述灯区内点亮的灯的数量可以基于该灯区内的灯数、该灯数所对应的声音强度最大值、以及各Bark域子带值确定。可以认为，声音强度最大值对应着一个灯区内的灯数。即，当该Bark域子带的声音强度达到最大值时，该灯区内的所有灯应该全点亮。因此，用各Bark域子带值除以所述声音强度最大值，再乘以灯区中的灯数，就得到了该灯区内点亮的灯的数量。
在智能家居等应用场景中，可能在各种家居设备上都存在发光单元150。如果这些发光单元能够一起随着主设备的音频信号来发出与该音频信号适配的光，则在整个的家居环境中将产生对用户来说更强烈的代入式体验。因此，在一个实施例中，音频播放设备100关联有关联装置。关联装置可以是智能家居中其它具有发光单元150的设备，例如门上发光的电冰箱、柜体上发光的洗衣机、机壳上发光的电视机、装饰有灯的窗帘、安装有灯的门，等等。这些关联装置内部有无线通信单元，与音频播放设备100的无线通信单元110通信，接收音频播放设备100的无线通信单元110发送的发光控制参数。然后，这些关联装置的发光单元就可以按照接收的发光控制参数，与音频播放设备100播放的音频信号同步地发光。这样，所有关联装置的发光单元都按照接收的发光控制参数发光，它们一起按照同样的亮度、同样的模式来发光，使得用户获得统一的临场感体验。该实施例的优点除了使得各个关联装置同步发光，增强用户的临场体验外，还在音频播放设备100本身不具有发光单元150或发光单元150坏掉时，借助其它关联装置的发光单元获得了同样的光声配合效果。
本公开实施例的音频播放设备阵列
上述单一音频播放设备的实施例中，通过灯带中不同灯的亮度，或者灯矩阵中不同列中点亮的灯的个数，来反映在一个发光变化周期内的各Bark域子带值。根据本公开的一个实施例，还提出了一种音频播放设备阵列，其中有多个音频播放设备100，每个音频播放设备100的发光单元150发出的光反映一个Bark域子带值，这样，多个音频播放设备100的发光单元150发出的光就反映了在一个发光变化周期内的音频信号的所有Bark域子带值。另外，也可以让每个音频播放设备100的播放模组130只播放其对应的Bark域子带的音频信号部分。这样，如果用户想专门听某个Bark域子带的声音，感受相关的发光变化，则可以到相应音频播放设备100的附近去收听感受。如果用户想听整体的音效和感受音乐对应的整体发光效果，可以在一个离各音频播放设备100都稍远的位置去倾听感受，从而达到用户既能够感受到声音中的某一部分，又能感受到整体音效的效果，给用户带来多元化体验。
如图8所示，该实施例中，音频播放设备阵列包括控制模组140和多个音频播放设备100。每个音频播放设备100对应于一个或多个Bark域维度。可以让一个音频播放设备100同时对应于其中多个Bark域维度，是由于音频播放设备阵列包含的音频播放设备的个数可能小于Bark域维度数，或者某些Bark域维度听起来比较近似，不需要区分得十分精确，等等。
图8中的控制模组140基于待播放音频信号预定时长内的音频数值，得到对应的频域信号。控制模组140内部可能具有无线通信单元(图8未示)，用于接收待播放音频信号。接收该待播放音频信号后，控制模组140基于其得到对应的频域信号。然后，控制模组140将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值。接着，控制模组140根据各Bark域维度上的Bark域子带值，分别确定各Bark域维度对应的发光控制参数。确定发光控制参数的具体做法同之前的实施例。之后，控制模组140向各音频播放设备100发送该音频播放设备100对应的Bark域维度的发光控制参数和接收的待播放音频信号中该Bark域维度中的音频数据。另外，控制模组140还可以具有交互单元160，用于接收用户输入的灯效参数。在有灯效参数的情况下，控制模组140在向各音频播放设备100发送该音频播放设备100对应的Bark域维度的发光控制参数和接收的待播放音频信号中该Bark域维度中的音频数据的同时，还发送灯效参数到各音频播放设备100。
如图8所示，音频播放设备100可以包括无线通信单元110、解码单元120、播放模组130、和发光单元150。无线通信单元110接收该音频播放设备100对应的Bark域维度的发光控制参数、待播放音频信号中该Bark域维度中的音频数据、以及还可能有的灯效参数。解码单元120解码接收的音频数据。播放模组130播放解码的音频数据。发光单元150根据所述发光控制参数和所述灯效参数，与播放模组130播放的音频信号同步地发光。
本公开实施例的音频播放设备的发光控制方法
根据本公开的一个实施例，提供了一种音频播放设备100的发光控制方法。它由音频播放设备100的控制模组140执行。如图9所示，该方法包括：
步骤210、获取音频信号；
步骤220、根据所述音频信号，产生发光单元控制参数；
步骤230、根据所述发光控制参数，与播放的音频信号同步地，使所述音频播放设备100的发光单元发光。
可选地，所述根据所述发光控制参数，与播放的音频信号同步地，使所述音频播放设备100的发光单元发光，包括：
获取灯效控制参数；
根据所述发光控制参数和所述灯效控制参数，控制所述发光单元150发光。
可选地，所述发光单元150为灯带或灯矩阵，所述灯带包括多个灯，所述灯矩阵的每行或每列有多个灯，所述根据音频信号产生发光控制参数，包括：
基于所述音频信号预定时长内的音频数值，得到对应的频域信号；
将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；
根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
可选地，所述灯效参数包括发光单元颜色、发光单元闪烁频率、发光单元闪烁占空比中的至少一个。
可选地，该音频播放设备还包括：交互单元160，用于显示灯效参数输入页面，并接收输入的灯效参数。
该方法实施例的其它方面和实现细节已经在前面的装置实施例中充分描述，故不赘述。
通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施方式的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干计算机可执行代码，当计算机可执行代码被控制模组140调用执行时，可以实现如图9所示的实施例中的方法。
根据本公开的一个实施例，还提供了一种用于实现上述方法实施例中的方法的程序产品，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在音频播放设备上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
此外，尽管在附图中以特定顺序描述了本公开中方法的各个步骤，但是，这并非要求或者暗示必须按照该特定顺序来执行这些步骤，或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选的，可以省略某些步骤，将多个步骤合并为一个步骤执行，以及/或者将一个步骤分解为多个步骤执行等。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由所附的权利要求指出。
Claims (27)
1.一种音频播放设备，包括：
无线通信单元，用以接收音频信号；
解码单元，用以解码接收的音频信号；
播放模组，用以播放解码的音频信号；
控制模组，用以根据音频信号产生发光控制参数；
发光单元，用以根据发光控制参数与播放模组播放的音频信号同步地发光。
2.根据权利要求1所述的音频播放设备，其中，所述控制模组进一步用于：
获取灯效控制参数；
根据所述发光控制参数和所述灯效控制参数，控制所述发光单元。
3.根据权利要求2所述的音频播放设备，其中，所述发光单元为灯带或灯矩阵，所述灯带包括多个灯，所述灯矩阵的每行或每列有多个灯，所述根据音频信号产生发光控制参数，包括：
基于所述音频信号预定时长内的音频数值，得到对应的频域信号；
将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；
根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
4.根据权利要求2所述的音频播放设备，其中，所述灯效参数包括发光单元颜色、发光单元闪烁频率、发光单元闪烁占空比中的至少一个。
5.根据权利要求3所述的音频播放设备，还包括：交互单元，用于显示灯效参数输入页面，并接收输入的灯效参数。
6.根据权利要求2所述的音频播放设备，其中，所述控制模组从接收的音频信号中获取声音属性数据，并基于所述声音属性数据，确定所述灯效参数。
7.根据权利要求6所述的音频播放设备，其中，所述声音属性数据包括节奏数据、流派数据、声音情感数据、音调数据中的至少一个。
8.根据权利要求3所述的音频播放设备，其中，所述基于所述音频信号预定时长内的音频数值，得到对应的频域信号，包括：所述基于所述音频信号中单音轨数据预定时长内的音频数值，得到该单音轨数据对应的频域信号；
所述将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值，包括：将该单音轨数据对应的频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；
所述根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数，包括：根据单音轨数据对应的各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
9.根据权利要求8所述的音频播放设备，其中，所述发光单元包括多个与音轨对应的子发光单元，
所述根据单音轨数据对应的各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数，包括：根据每轨单音轨数据对应的各Bark域维度上的Bark域子带值，分别确定所述音轨对应的子发光单元中的灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
10.根据权利要求1所述的音频播放设备，其中，所述发光单元包括多个灯区，所述多个灯区连成预定形状，所述灯区包括多个灯，所述发光控制参数是灯区内点亮的灯的数量，
所述根据发光控制参数与播放模组播放的音频信号同步地发光，包括：在各灯区内以所述点亮的灯的数量点亮灯。
11.根据权利要求1所述的音频播放设备，其中，所述音频播放设备关联有关联装置，所述关联装置也具有发光单元，所述关联装置的发光单元也根据发光控制参数与播放模组播放的音频信号同步地发光。
12.根据权利要求5所述的音频播放设备，其中，所述根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数，包括：
当Bark域维度数等于所述灯带的灯数或所述灯矩阵的列数，则每个Bark域维度对应于所述灯带中的一个灯或所述灯矩阵的一列灯，根据各Bark域维度上的Bark域子带值，确定该灯或该一列灯的发光控制参数；
当Bark域维度数大于所述灯带的灯数或所述灯矩阵的列数，则根据第一规则从Bark域维度中选择有效Bark域维度，使每个有效Bark域维度对应于所述灯带中的一个灯或所述灯矩阵的一列灯，根据各有效Bark域维度上的Bark域子带值，确定该灯或一列灯的发光控制参数；
当Bark域维度数小于所述灯带的灯数或所述灯矩阵的列数，则根据第二规则选择灯带的有效灯或所述灯矩阵的有效列，使每个Bark域维度对应于所述灯带中的一个有效灯或所述灯矩阵的一个有效列，根据各Bark域维度上的Bark域子带值，确定该有效灯或有效列的发光控制参数。
13.根据权利要求5所述的音频播放设备，其中，所述将所述频域信号转换到Bark域，包括：查找频率范围与Bark域维度对应关系表，将所述频域信号转换到Bark域。
14.根据权利要求12或13所述的音频播放设备，其中，所述交互单元还接收以下中的至少一个：
第一规则；
第二规则；
设置的Bark域维度数目；
频率范围与Bark域维度对应关系表。
15.根据权利要求14所述的音频播放设备，其中，如果交互单元接收设置的Bark域维度数目，则所述控制模组根据预定的对应关系产生规则，产生频率范围与Bark域维度对应关系表。
16.根据权利要求3所述的音频播放设备，其中，所述根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，包括：
基于量化峰值、量化峰值所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数。
17.根据权利要求3所述的音频播放设备，其中，所述根据各Bark域维度上的Bark域子带值，分别确定所述灯矩阵中各列点亮的灯数作为所述发光控制参数，包括：
基于灯矩阵中每列灯数、每列灯数所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
18.根据权利要求16所述的音频播放设备，其中，所述量化峰值根据所述Bark子带值与所述量化峰值的比较而更新。
19.根据权利要求18所述的音频播放设备，其中，所述量化峰值通过以下方式更新：
当所述Bark域子带值大于所述量化峰值，则以所述Bark域子带值更新所述量化峰值；
当所述Bark域子带值不大于所述量化峰值，则以按照均衡因子获得在所述Bark域子带值和所述量化峰值之间的均衡值，作为更新的量化峰值。
20.根据权利要求16所述的音频播放设备，其中，所述基于量化峰值、量化峰值所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，包括：
基于量化峰值、量化峰值所对应的声音强度最大值、以及各Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值；
从所述声音数据中获取节奏数据；
利用与所述节奏数据对应的平滑因子对所述量化后Bark域子带值进行平滑，平滑后的量化后Bark域子带值作为所述发光控制参数。
21.一种音频播放设备阵列，包括控制模组和多个音频播放设备，其中，每个音频播放设备对应于一个或多个Bark域维度；
所述控制模组用于：基于待播放音频信号预定时长内的音频数值，得到对应的频域信号；将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；根据各Bark域维度上的Bark域子带值，分别确定各Bark域维度对应的发光控制参数；向各音频播放设备发送该音频播放设备对应的Bark域维度的发光控制参数和待播放音频信号中该Bark域维度中的音频数据；
所述音频播放设备包括：无线通信单元，用于接收该音频播放设备对应的Bark域维度的发光控制参数和待播放音频信号中该Bark域维度中的音频数据；解码单元，用于解码接收的音频数据；播放模组，用于播放解码的音频数据；发光单元，用于根据发光控制参数与播放模组播放的音频信号同步地发光。
22.一种音频播放设备的发光控制方法，包括：
获取音频信号；
根据所述音频信号，产生发光单元控制参数；
根据所述发光控制参数，与播放的音频信号同步地，使所述音频播放设备的发光单元发光。
23.根据权利要求22所述的方法，其中，所述根据所述发光控制参数，与播放的音频信号同步地，使所述音频播放设备的发光单元发光，包括：
获取灯效控制参数；
根据所述发光控制参数和所述灯效控制参数，控制所述发光单元发光。
24.根据权利要求23所述的方法，其中，所述发光单元为灯带或灯矩阵，所述灯带包括多个灯，所述灯矩阵的每行或每列有多个灯，所述根据音频信号产生发光控制参数，包括：
基于所述音频信号预定时长内的音频数值，得到对应的频域信号；
将所述频域信号转换到Bark域，在Bark域的每个维度上得到一个Bark域子带值；
根据各Bark域维度上的Bark域子带值，分别确定所述灯带中各灯的量化后Bark域子带值作为所述发光控制参数，或者所述灯矩阵中各列点亮的灯数作为所述发光控制参数。
25.根据权利要求23所述的方法，其中，所述灯效参数包括发光单元颜色、发光单元闪烁频率、发光单元闪烁占空比中的至少一个。
26.根据权利要求23所述的音频播放设备，还包括：交互单元，用于显示灯效参数输入页面，并接收输入的灯效参数。
27.一种计算机可读介质，存储计算机可执行代码，所述计算机可执行代码被处理器执行，以实现根据权利要求22-26任一个所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110318048.7A CN115134706A (zh) | 2021-03-25 | 2021-03-25 | 音频播放设备及阵列、相关方法和介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110318048.7A CN115134706A (zh) | 2021-03-25 | 2021-03-25 | 音频播放设备及阵列、相关方法和介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115134706A true CN115134706A (zh) | 2022-09-30 |
Family
ID=83374757
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110318048.7A Pending CN115134706A (zh) | 2021-03-25 | 2021-03-25 | 音频播放设备及阵列、相关方法和介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115134706A (zh) |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1218251A (zh) * | 1997-11-21 | 1999-06-02 | 日本胜利株式会社 | 音频信号的编码装置、唱盘以及盘重放装置 |
| US20030115041A1 (en) * | 2001-12-14 | 2003-06-19 | Microsoft Corporation | Quality improvement techniques in an audio encoder |
| KR20030072060A (ko) * | 2002-03-05 | 2003-09-13 | 한국전자통신연구원 | 디지털 오디오 부호화/복호화 장치 및 방법 |
| CN101536609A (zh) * | 2006-10-31 | 2009-09-16 | 皇家飞利浦电子股份有限公司 | 响应音频信号控制光 |
| WO2010138309A1 (en) * | 2009-05-26 | 2010-12-02 | Dolby Laboratories Licensing Corporation | Audio signal dynamic equalization processing control |
| CN201742515U (zh) * | 2010-06-23 | 2011-02-09 | 曹木群 | 无线照明音箱系统及其无线照明音箱 |
| CN103793010A (zh) * | 2014-02-28 | 2014-05-14 | 苏州三星电子电脑有限公司 | 随韵律动态变换外壳色彩的多媒体播放设备及其控制方法 |
| CN203942632U (zh) * | 2014-06-24 | 2014-11-12 | 深圳万德仕科技发展有限公司 | 一种真场景还原音箱 |
| CN105744431A (zh) * | 2016-01-29 | 2016-07-06 | 深圳市因为科技有限公司 | 声光匹配系统及方法 |
| US20190258451A1 (en) * | 2018-02-20 | 2019-08-22 | Dsp Group Ltd. | Method and system for voice analysis |
| CN110461077A (zh) * | 2019-08-27 | 2019-11-15 | 合肥惠科金扬科技有限公司 | 一种灯光控制方法、灯光控制装置及可读存储介质 |
| CN110574289A (zh) * | 2017-05-04 | 2019-12-13 | 哈曼国际工业有限公司 | 用于调整音频信号的方法和装置以及音频系统 |
| CN111508519A (zh) * | 2020-04-03 | 2020-08-07 | 北京达佳互联信息技术有限公司 | 一种音频信号人声增强的方法及装置 |
-
2021
- 2021-03-25 CN CN202110318048.7A patent/CN115134706A/zh active Pending
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1218251A (zh) * | 1997-11-21 | 1999-06-02 | 日本胜利株式会社 | 音频信号的编码装置、唱盘以及盘重放装置 |
| US20030115041A1 (en) * | 2001-12-14 | 2003-06-19 | Microsoft Corporation | Quality improvement techniques in an audio encoder |
| KR20030072060A (ko) * | 2002-03-05 | 2003-09-13 | 한국전자통신연구원 | 디지털 오디오 부호화/복호화 장치 및 방법 |
| CN101536609A (zh) * | 2006-10-31 | 2009-09-16 | 皇家飞利浦电子股份有限公司 | 响应音频信号控制光 |
| WO2010138309A1 (en) * | 2009-05-26 | 2010-12-02 | Dolby Laboratories Licensing Corporation | Audio signal dynamic equalization processing control |
| CN201742515U (zh) * | 2010-06-23 | 2011-02-09 | 曹木群 | 无线照明音箱系统及其无线照明音箱 |
| CN103793010A (zh) * | 2014-02-28 | 2014-05-14 | 苏州三星电子电脑有限公司 | 随韵律动态变换外壳色彩的多媒体播放设备及其控制方法 |
| CN203942632U (zh) * | 2014-06-24 | 2014-11-12 | 深圳万德仕科技发展有限公司 | 一种真场景还原音箱 |
| CN105744431A (zh) * | 2016-01-29 | 2016-07-06 | 深圳市因为科技有限公司 | 声光匹配系统及方法 |
| CN110574289A (zh) * | 2017-05-04 | 2019-12-13 | 哈曼国际工业有限公司 | 用于调整音频信号的方法和装置以及音频系统 |
| US20190258451A1 (en) * | 2018-02-20 | 2019-08-22 | Dsp Group Ltd. | Method and system for voice analysis |
| CN110461077A (zh) * | 2019-08-27 | 2019-11-15 | 合肥惠科金扬科技有限公司 | 一种灯光控制方法、灯光控制装置及可读存储介质 |
| CN111508519A (zh) * | 2020-04-03 | 2020-08-07 | 北京达佳互联信息技术有限公司 | 一种音频信号人声增强的方法及装置 |
Non-Patent Citations (4)
| Title |
|---|
| GUOPING YOU ET AL: "Electronic music box design", 2016 2ND IEEE INTERNATIONAL CONFERENCE ON COMPUTER AND COMMUNICATIONS (ICCC), 17 October 2016 (2016-10-17), pages 966 - 969, XP033094615, DOI: 10.1109/CompComm.2016.7924848 * |
| 吕德深: "基于白光LED可见光通信的音频传输系统设计与实现", 《电子世界》, 8 November 2018 (2018-11-08), pages 131 - 132 * |
| 梁平原 等: "嵌入式音乐同步智能灯效系统的实现", 《机电产品开发与创新》, vol. 19, no. 04, 28 July 2006 (2006-07-28), pages 84 - 86 * |
| 陈小平 等: "听觉临界频带及其在声频信号处理中的应用", 《 北京广播学院学报(自然科学版)》, vol. 11, no. 02, 15 June 2004 (2004-06-15), pages 28 - 35 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11357431B2 (en) | Methods and apparatus to identify a mood of media | |
| US20210295811A1 (en) | Mapping characteristics of music into a visual display | |
| RU2513772C2 (ru) | Система и способ автоматического создания атмосферы, подходящей для общественной обстановки и настроя в окружающей среде | |
| US7228190B2 (en) | Method and apparatus for controlling a lighting system in response to an audio input | |
| JP6504165B2 (ja) | 情報処理装置及び情報処理方法並びにプログラム | |
| CN107135578B (zh) | 基于TonaLighting调节技术的智能音乐和弦-氛围灯系统 | |
| CN103793010A (zh) | 随韵律动态变换外壳色彩的多媒体播放设备及其控制方法 | |
| US10170090B2 (en) | Music information generating device, music information generating method, and recording medium | |
| US12035431B2 (en) | Methods and apparatus to control lighting effects based on media content | |
| JPH06102877A (ja) | 音響構成装置 | |
| CN106383676B (zh) | 用于声音的即时光色渲染系统及其应用 | |
| JP7259817B2 (ja) | 電子楽器、方法及びプログラム | |
| CN114128299A (zh) | 多媒体表演的基于模板的摘录和呈现 | |
| CN113936629A (zh) | 音乐文件处理方法和装置、音乐演唱设备 | |
| KR101452451B1 (ko) | 모바일 장치를 이용한 오디오 및 조명 감성 제어 시스템 및 방법 | |
| CN115134706A (zh) | 音频播放设备及阵列、相关方法和介质 | |
| CN116198415A (zh) | 利用音乐控制灯光的系统和方法、以及车机系统 | |
| JP2005189658A (ja) | 発光演出システム及び発光演出装置 | |
| JP5667279B1 (ja) | 照明装置、及び、この照明装置が取り付けられてなる額縁 | |
| WO2022054618A1 (ja) | 照明制御システム、照明制御方法、及び、プログラム | |
| EP3928594B1 (en) | Enhancing a user's recognition of a light scene | |
| JP5316822B2 (ja) | カラオケ装置 | |
| CN114126158A (zh) | 灯效控制方法、装置、电子设备及可读存储介质 | |
| CN117755165A (zh) | 车辆控制方法、装置以及车辆 | |
| CN117573245A (zh) | 用户界面自适应调整方法、介质以及电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20240307 Address after: # 03-06, Lai Zan Da Building 1, 51 Belarusian Road, Singapore Applicant after: Alibaba Innovation Co. Country or region after: Singapore Address before: Room 01, 45th Floor, AXA Building, 8 Shanton Road, Singapore Applicant before: Alibaba Singapore Holdings Ltd. Country or region before: Singapore |
|
| TA01 | Transfer of patent application right |