CN110085253A - 一种音乐可视化信息的控制方法、装置、车辆及存储介质 - Google Patents

一种音乐可视化信息的控制方法、装置、车辆及存储介质 Download PDF

Info

Publication number
CN110085253A
CN110085253A CN201910383499.1A CN201910383499A CN110085253A CN 110085253 A CN110085253 A CN 110085253A CN 201910383499 A CN201910383499 A CN 201910383499A CN 110085253 A CN110085253 A CN 110085253A
Authority
CN
China
Prior art keywords
information
data
interpolation
data information
processed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910383499.1A
Other languages
English (en)
Inventor
张喜龙
陈凌奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Xiaopeng Motors Technology Co Ltd
Original Assignee
Guangzhou Xiaopeng Motors Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Xiaopeng Motors Technology Co Ltd filed Critical Guangzhou Xiaopeng Motors Technology Co Ltd
Priority to CN201910383499.1A priority Critical patent/CN110085253A/zh
Publication of CN110085253A publication Critical patent/CN110085253A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/04—Time compression or expansion
    • G10L21/043—Time compression or expansion by changing speed
    • G10L21/045—Time compression or expansion by changing speed using thinning out or insertion of a waveform
    • G10L21/047—Time compression or expansion by changing speed using thinning out or insertion of a waveform characterised by the type of waveform to be thinned out or inserted
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • G10L21/10—Transforming into visible information
    • G10L21/12—Transforming into visible information by displaying time domain information
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/091—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
    • G10H2220/101—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters
    • G10H2220/126—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters for graphical editing of individual notes, parts or phrases represented as variable length segments on a 2D or 3D representation, e.g. graphical edition of musical collage, remix files or pianoroll representations of MIDI-like files

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请提供了一种音乐可视化信息的控制方法、装置、车辆及存储介质，该方法包括：获取待处理音乐信号；根据预设采样频率，生成待处理音乐信号所对应的第一数据信息；根据显示刷新频率，对第一数据信息进行插值处理，以获取第二数据信息；根据第二数据信息，生成目标图像信息，以将目标图像信息作为待处理音乐信号的可视化信息进行输出。因此，能够将通过较低的预设采样频率采集的第一数据信息，利用插值处理，转换为与显示刷新频率所对应的高频的第二数据信息，以满足在对可视化信息进行展示时，动画图像所需的高频需求，进而在保证可视化信息的连贯性的同时，不增加对系统资源的负担。

Description

一种音乐可视化信息的控制方法、装置、车辆及存储介质
技术领域
本申请涉及数据处理领域，特别是涉及一种音乐可视化信息的控制方法、装置、车辆及存储介质。
背景技术
随着科学技术的发展，音乐数据不仅能够被听到，还可以被“看到”，音乐的可视化技术已广泛应用于音乐播放场景中。即通过实时采集音乐波形数据，在进行傅里叶变换后分解出离散的频域信号并计算出各频段的声强，然后将各频段的声强以图像的形式表现出来，进而实现音乐数据的动画视觉效果。
在进行频谱分析时需要设定一个采样频率，采样频率越高，输出的动画视觉效果就越连贯。但是，由于频谱分析需要抓取全频段的样本(消耗内存)并执行傅里叶变换的计算，因此，高采样频率会造成系统资源的消耗。通常会对频谱分析的采样频率设置上限频率。比如安卓系统的频谱分析工具visualizer的最大采样率为20Hz；而连贯的动画视觉效果一般要求60Hz的刷新频率(即LED显示屏的刷新频率)。
现有技术中，通过提高所设置的上限频率，以采用较高的采样频率，进而满足动画视觉效果的连贯性要求，但造成了系统资源的消耗，提升系统的计算负担，从而影响系统计算效率。
发明内容
本申请提供一种音乐可视化信息的控制方法、装置、车辆及存储介质，以解决现有技术中采用高采样频率所造成的系统资源的消耗问题。
依据本申请实施例的第一方面，提供了一种音乐可视化信息的控制方法，该方法可以包括：
获取待处理音乐信号；
根据预设采样频率，生成所述待处理音乐信号所对应的第一数据信息；
根据显示刷新频率，对所述第一数据信息进行插值处理，以获取第二数据信息，所述显示刷新频率是进行所述待处理音乐信号的可视化信息输出所需的频率，所述显示刷新频率高于所述预设采样频率；
根据所述第二数据信息，生成目标图像信息，以将所述目标图像信息作为所述待处理音乐信号的可视化信息进行输出。
依据本申请实施例的第二方面，提供了一种用音乐可视化信息的控制装置，该装置可以包括：
信号获取模块，用于获取待处理音乐信号；
信息生成模块，用于根据预设采样频率，生成所述待处理音乐信号所对应的第一数据信息；
插值处理模块，用于根据显示刷新频率，对所述第一数据信息进行插值处理，以获取第二数据信息，所述显示刷新频率是进行所述待处理音乐信号的可视化信息输出所需的频率，所述显示刷新频率高于所述预设采样频率；
信息生成模块，用于根据所述第二数据信息，生成目标图像信息，以将所述目标图像信息作为所述待处理音乐信号的可视化信息进行输出。
依据本申请实施例的第三方面，提供了一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的音乐可视化信息的控制方法的步骤。
依据本申请实施例的第四方面，提供了一种车辆，所述车辆包括如第二方面任一项所述的音乐可视化信息的控制装置。
与现有技术相比，本申请包括以下优点：
获取待处理音乐信号；根据预设采样频率，生成所述待处理音乐信号所对应的第一数据信息；根据显示刷新频率，对所述第一数据信息进行插值处理；根据所述第二数据信息，生成目标图像信息，以将所述目标图像信息作为所述待处理音乐信号的可视化信息进行输出。因此，能够将通过较低的预设采样频率采集到的第一数据信息，利用插值处理，转换为与显示刷新频率所对应的高频的第二数据信息，以满足在对可视化信息进行输出时，动画图像所需的高频需求，进而在保证可视化信息的连贯性的同时，不增加系统资源的负担。
上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂，以下特举本申请的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本申请的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1是本申请实施例提供的一种音乐可视化信息的控制方法的步骤流程图；
图2是本申请实施例提供的一种第一数据信息组成的曲线示意图；
图3是本申请实施例提供的一种音乐可视化信息的控制方法的具体步骤流程图；
图4是本申请实施例提供的另一种第一数据信息组成的曲线示意图；
图5是本申请实施例提供的一种音乐可视化信息的控制方法的具体步骤流程图；
图6是本申请实施例提供的一种音乐可视化信息的控制方法的具体步骤流程图；
图7是本申请实施例提供的一种插值数据集合组成的曲线示意图；
图8是本申请实施例提供的一种音乐可视化信息的控制方法的具体步骤流程图；
图9是本申请实施例提供的一种第二数据信息组成的曲线示意图；
图10是本申请实施例提供的一种音乐可视化信息的控制装置的框图；
图11是本申请实施例提供的一种信息生成模块的框图；
图12是本申请实施例提供的一种插值处理模块的框图；
图13是本申请实施例提供的一种数据生成子模块的框图；
图14是本申请实施例提供的一种数据确定子模块的框图。
具体实施方式
为使本申请的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本申请作进一步详细的说明。
参照图1，示出了本申请一种音乐可视化信息的控制方法的步骤流程图，如图1所示，该方法可以包括：
步骤101，获取待处理音乐信号。
示例地，在进行音乐可视化信息的确定时，将从音乐播放器中获取到的待处理音乐的片段，作为待处理音乐信号，该待处理音乐信号通常为经PCM(中文：脉冲编码调制，英文：Pulse Code Modulation)处理的信号，PCM是把一个时间连续，取值连续的模拟信号变换成时间离散、取值离散的数字信号后在信道中传输的过程，即利用PCM对模拟信号进行抽样，再对抽样后的样值的振幅值进行量化以及编码后输出的离散的时域信号。本申请实施例优选的应用于车辆场景下，直接利用车载已有硬件，实现本申请实施例所述的方法。具体的，该待处理音乐信号例如是从车载音乐播放设备发出的音乐信号，或者是在车辆内的其他移动终端，例如手机、平板电脑、可穿戴设备上的音乐播放应用程序发出的音乐信号，通过将车载信号采集设备(如麦克风)采集到上述的音乐信号，作为待处理音乐信号，进而执行下面的步骤。
步骤102，根据预设采样频率，生成待处理音乐信号所对应的第一数据信息。
优选的，第一数据信息包括采样时间和与采样时间对应的振幅信息，采样时间是对待处理音乐信号进行预设采样频率的采样后所确定的。
示例地，将步骤101获取到的待处理音乐信号进行预设采样频率的采样后，获取到频域信息作为第一数据信息。例如，设置最大采样频率为20Hz，也就是对待处理音乐信号进行每秒采样20次后，即生成第一数据信息，如图2所示，其中，横轴为时间轴(采样时间t)，纵轴为振幅轴(振幅信息A)，用于表示在对应时间点(采样时间)下的振幅值(振幅信息)。
此外，为了进一步提升可视化效果的逼真性，可以对进行采样后的上述采样信号进行滤波处理，进而滤除采样信号中可能存在的噪音，保证第一数据信息的稳定性。
步骤103，根据显示刷新频率，对第一数据信息进行插值处理，以获取第二数据信息。
其中，显示刷新频率是与待处理音乐信号的可视化信息所对应的频率，显示刷新频率高于预设采样频率。
在具体应用中，插值处理是基于离散且频率较低(预设采样频率)的第一数据信息进行的多个插值数据的插入操作，即在第一数据信息的相邻振幅信息之间插入若干数值，以提升第一数据信息对应的频率(单位时间内的数据个数)，即将步骤102在预设采样频率下获取的第一数据信息变为与显示刷新频率所对应的第二数据信息，使得在利用下面步骤中，根据第二数据信息所生成的可视化信息满足对频率的要求，即显示刷新频率对应显示屏的刷新频率，可以理解的是，此时的显示刷新频率是高于预设采样频率的，在第二数据信息中包括第一数据信息和根据显示刷新频率和第一数据信息确定的目标插值数据。
步骤104，根据第二数据信息，生成目标图像信息，以将目标图像信息作为待处理音乐信号的可视化信息进行输出。
示例地，在生成目标图像信息后，即作为待处理音乐信号的可视化结果，所生成的可视化信息可以以柱状体的方式、水波波纹的方式等进行输出，进而实现音乐的可视化处理，将以声音的方式之外，还利用视觉的多维形式表现音乐信号。由于经过上述步骤，将低频率的第一数据信息转换为高频率的第二数据信息，进而可以满足输出可视化信息时对频率的要求，即实现将较低的预设采样频率下采集到的第一数据信息转换为较高频率，使得输出的可视化信息的动画效果连贯，提升用户体验。在具体应用中，根据本申请实施例的步骤所确定的与待处理音乐信号对应的可视化信息，可以采用柱状图、水纹图的方式输出。
综上所述，本申请实施例所述的音乐可视化信息的控制方法，获取待处理音乐信号；根据预设采样频率，生成待处理音乐信号所对应的第一数据信息；对第一数据信息进行插值处理，以获取第二数据信息；根据第二数据信息，生成目标图像信息，以将目标图像信息作为待处理音乐信号的可视化信息进行输出。因此，能够将通过较低的预设采样频率采集的第一数据信息，利用插值处理，转换为与显示刷新频率所对应的高频的第二数据信息，以满足在对可视化信息进行展示时，动画图像所需的高频需求，进而保证可视化信息的连贯性的同时，不增加对系统资源的负担。
可选的，参照图3，示出了本申请一种音乐可视化信息的控制方法的具体步骤流程图，如图3所示，步骤102所述的根据预设采样频率，生成待处理音乐信号所对应的第一数据信息，可以包括：
步骤1021，在预设采样频率下，获取待处理音乐信号对应的采样信号。
在具体应用中，利用预设采样频率对待处理音乐信号进行采样，可以通过利用傅里叶变换，将时域下的待处理音乐信号进行分解，生成待处理音乐信号在预设采样频率下的振幅信息，即作为采样信号，即如图2所示。
步骤1022，将采样信号中满足滤波条件的振幅信息，作为第一数据信息。
在具体应用中，可以将采样音乐信息中满足滤波条件的振幅信息，作为第一数据信息。
其中，滤波条件包括采样信号中的振幅信息的数值大于或者等于预设的滤波阈值，滤波阈值是根据采样信号中的振幅信息的区域最大值确定的。
示例地，将图2中的采样信号进行过滤，将采样信号中的振幅信息的区域最大值Amax乘以一个预设的过滤系数K，即Amax*K作为滤波阈值，对采样信号进行过滤，以将上述步骤确定的采样信号中的振幅信息的数值小于Amax*K的采样信号丢弃(将振幅设置为0)，从而得到如图4所示的过滤后的采样信号，即作为第一数据信息。可以看出，与图2相比，在图4中的采样信号(未被过滤掉的)变得更加离散(分布稀疏，单位时间内的振幅信息非零的数据较少)，增加了振幅信息的数值为0即横轴上点的个数，这些增加的横轴上的点表明其被作为噪音滤掉，以保证所生成的第一数据信息的质量。
可选的，参照图5，示出了本申请一种音乐可视化信息的控制方法的具体步骤流程图，如图5所示，步骤103所述的根据显示刷新频率，对第一数据信息进行插值处理，以获取第二数据信息，可以包括：
步骤1031，根据待处理音乐信号的可视化信息对应的输出形式，确定用于对第一数据信息进行插值处理的目标插值算法。
示例地，预先设置多个插值算法，如：基于阻尼函数的插值算法、线性插值算法、基于圆面积公式的非线性插值算法等，进而将与可视化信息对应的输出形式所匹配的插值算法，作为目标插值算法，以进行下面的插值处理。优选的，在输出形式为拉伸形式时，对应的目标插值算法为基于阻尼函数的插值算法，在输出形式为单纯线条(心电图式)时，对应的目标插值算法为线性插值算法，在输出形式为弹跳形式时，对应的目标插值算法为基于圆面积公式的非线性插值算法，进而通过与输出形式对应的目标插值算法，使得利用该目标插值算法进行插值处理后生成的第二数据信息，再确定的可视化信息在输出时，效果更逼真且连贯。
优选的，线性插值算法所采用的公式可以如下：
f(x)＝min+(max-min)*x；
可以理解的是，由于线性插值算法中的数据变化为匀速，对应的插值数据变化不够平滑，但是实时性更高，适应于心电图形式的可视化信息的输出，能够即时的反应出待处理音乐信号的变化特性。
示例地，当采用非线性插值算法时，可以采用如下的基于圆面积公式所确定的插值计算公式：
f(x)＝((max-min)-x2)0.5；
进而实现可视化信息的变换速度由慢至快，更好的模拟弹跳形式的可视化信息的输出效果。
步骤1032，利用目标插值算法，生成与第一数据信息对应的插值数据信息。
示例地，本实施例将以输出形式为拉伸形式，其对应的目标插值算法即为基于阻尼函数的插值算法为例，进行具体说明。
可选的，该步骤如图6所示，可以包括如下子步骤：
步骤10321：确定插值范围集合。
其中，插值范围集合中包括根据第一数据信息中各个相邻采样时间所确定的多个时间范围。
示例地，若第一数据信息中包括N个采样时间(采样N次)，插值范围集合中包括N-1个时间范围。
步骤10322：确定与插值范围集合中各个时间范围分别对应的振幅信息的区域最大值和振幅信息的区域最小值。
步骤10323：根据插值范围集合、振幅信息的区域最小值以及振幅信息的区域最大值，利用插值计算策略，分别计算与各个时间范围对应的待插值集合，以获取插值数据信息。
在具体应用中，在实施例中根据第一数据信息，基于标准的阻尼函数所生成的插值计算策略，该插值计算策略表示如下：
f(x)＝min+(1-cos(x×π×2×a)×(1-xb))×(max-min)；
其中，min表示在第一时间范围内振幅信息的区域最小值，max表示在第一时间范围内振幅信息的区域最大值，a、b表示插值计算参数，x表示第一时间范围内的任一时间值，f(x)表示与x对应的插值数据信息，即振幅信息的数值，第一时间范围时该插值范围集合中的任一时间范围。
在具体应用中，本实施采用周期函数用来模拟阻尼效果，约束函数让数值逼近最终结果，min和max表示在第一时间范围内，振幅信息的数值变化。例如，第一时间范围内振幅信息的数值从1变换到0，则min取0，max取1。其中，a用于控制数据变换过程中的阻尼比，b用来控制刚性。利用上述插值计算策略计算各个时间范围(N-1个)对应的待插值集合，将与N-1个时间范围分别对应的N-1个待插值集合作为插值数据信息。
优选的，a的取值可以为3.5，b的取值可以为0.5，在第一时间范围内，在将a＝3.5和b＝0.5带入到第一时间范围中，可以得到如图7所示的振幅值的示意图，其中x表示采样时间，即x从0到1(1秒之内)确定了多个插值数据，即为与第一时间范围对应的待插值集合，当x＝0.2秒(采样时间)时，f(x)(振幅信息的数值)约为-0.3；而x＝0.5秒时，f(x)约为0，可以作为待插值集合中的插值数据，进行下面步骤的操作。
需要说明的是，对于其他已有的插值算法也可以被应用于本申请实施例所述的实现步骤中，具体不做限制。
步骤1033，根据显示刷新频率，从插值数据信息中确定目标插值数据。
其中，目标插值数据是将对应插入第一数据信息的数据。
在具体应用中，通过上述插值计算策略，如图7中可知，f(x)模拟出在第一插值范围内振幅信息的数值从max(1)平滑逼近到min(0)，不难理解的是，这个变化可以映射到任意时间范围内，以便于显示器在进行音乐可视化显示时，能够根据其对应的目标采集频率进行数值变换。
可选的，该步骤如图8所示，可以包括如下子步骤：
步骤10331，根据显示刷新频率和插值范围集合，分别确定各个时间范围对应的待插入数据量。
示例地，每个时间范围内对应的待插入数据量与显示刷新频率相关，也就是说，通过加入待插入数据量的插值数据，可以将预设采样频率的目标频域数据变为显示刷新频率对应的第二数据信息。若预设采样频率为20Hz，显示刷新频率为60Hz时，第一时间范围为0.1秒时，目标频域数据在该时间范围内有2个振幅信息，对应的待插入数据量为4个。
步骤10332，根据各个时间范围对应的待插入数据量，从插值数据信息中选择目标插值数据。
示例地，根据与每个时间范围内对应的待插值数据量，从各个时间范围对应的待插值集合，选择对应的目标插值数据，即从该第一时间范围对应的第一待插值集合中(图7所示的曲线)，选择4个数据：0.02秒、0.04秒、0.06秒以及0.08秒所对应的振幅信息(A)，即作为第一时间范围对应的第一目标插值数据。类似的，将各个(N-1)时间范围在其对应的插值数据集合中选择目标插值数据选择完成后，即进行步骤1033的操作。
步骤1034，将对应插入目标插值数据的第一数据信息作为第二数据信息。
示例地，对将图4的第一数据信息进行上述步骤的插值处理后，生成的第二数据信息如图9所示，相较于图4中的第一数据信息，在图9中的第二数据信息所生成的曲线，更为平滑且第二数据信息更为密集。
图10是本申请实施例提供的一种音乐可视化信息的控制装置的框图，如10所示，该装置1000包括：
信号获取模块1010，用于获取待处理音乐信号。
信息生成模块1020，用于根据预设采样频率，生成待处理音乐信号所对应的第一数据信息。
插值处理模块1030，用于根据显示刷新频率，对第一数据信息进行插值处理，以获取第二数据信息，显示刷新频率是进行待处理音乐信号的可视化信息输出所需的频率，显示刷新频率高于预设采样频率。
信息生成模块1040，用于根据第二数据信息，生成目标图像信息，以将目标图像信息作为待处理音乐信号的可视化信息进行输出。
可选的，待处理音乐信号为通过脉冲编码调制后的音乐信号，第一数据信息包括采样时间和与采样时间对应的振幅信息，采样时间是对待处理音乐信号进行预设采样频率的采样后所确定的，图11是本申请实施例提供的一种信息生成模块的框图，如11所示，该信息生成模块1020，包括：
采样处理子模块1021，用于在预设采样频率下，获取待处理音乐信号对应的采样信号。
滤波处理子模块1022，用于将采样信号中满足滤波条件的振幅信息，作为第一数据信息。
其中，滤波条件包括采样信号中振幅信息的数值大于或等于预设的滤波阈值，滤波阈值是根据采样信号中所有振幅信息的最大值所确定的。
可选的，图12是本申请实施例提供的一种插值处理模块的框图，如12所示，该插值处理模块1030，包括：
算法确定子模块1031，用于根据待处理音乐信号的可视化信息对应的输出形式，确定用于对第一数据信息进行插值处理的目标插值算法。
数据生成子模块1032，用于利用目标插值算法，生成与第一数据信息对应的插值数据信息。
数据确定子模块1033，用于根据显示刷新频率，确定插值数据信息中的目标插值数据，目标插值数据是将对应插入第一数据信息的数据。
信息生成子模块1034，用于将对应插入目标插值数据的第一数据信息作为第二数据信息。
可选的，图13是本申请实施例提供的一种数据生成子模块的框图，如13所示，该数据生成子模块1032，包括：
范围确定单元10321，用于确定插值范围集合，插值范围集合中包括根据第一数据信息中各个相邻采样时间所确定的多个时间范围。
振幅确定单元10322，用于确定与插值范围集合中各个时间范围分别对应的振幅信息的区域最大值和振幅信息的区域最小值。
数值计算单元10323，用于根据插值范围集合、振幅信息的区域最小值以及振幅信息的区域最大值，利用插值计算策略，分别计算与各个时间范围对应的待插值集合，以获取插值数据信息。
可选的，图14是本申请实施例提供的一种数据确定子模块的框图，如14所示，该数据确定子模块1033，包括：
数据量确定单元10331，用于根据显示刷新频率和插值范围集合，分别确定各个时间范围对应的待插入数据量。
数据选择单元10332，用于根据各个时间范围对应的待插入数据量，从插值数据信息中选择目标插值数据。
综上所述，本申请实施例所述的音乐可视化信息的控制装置，通过获取待处理音乐信号；根据预设采样频率，生成待处理音乐信号所对应的第一数据信息；根据显示刷新频率，对第一数据信息进行插值处理，以获取第二数据信息；根据第二数据信息，生成目标图像信息，以将目标图像信息作为待处理音乐信号的可视化信息进行输出。因此，能够将通过较低的预设采样频率采集的第一数据信息，利用插值处理，转换为与显示刷新频率所对应的高频的第二数据信息，以满足在对可视化信息进行展示时，动画图像所需的高频需求，进而保证可视化信息的连贯性的同时，不增加对系统资源的负担。
另外，本申请实施例还提供一种车辆，该车辆包括上述实施例所述的音乐可视化信息的控制装置，且能达到相同的技术效果，为避免重复，这里不再赘述。
本申请实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述的音乐可视化信息的控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，可以为只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(RandomAccess Memory，简称RAM)、磁碟或者光盘等。
本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
以上对本申请所提供的一种音乐可视化信息的控制方法、装置、存储介质以及车辆，进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (12)

1.一种音乐可视化信息的控制方法，其特征在于，所述方法包括：
获取待处理音乐信号；
根据预设采样频率，生成所述待处理音乐信号所对应的第一数据信息；
根据显示刷新频率，对所述第一数据信息进行插值处理，以获取第二数据信息，所述显示刷新频率是进行所述待处理音乐信号的可视化信息输出所需的频率，所述显示刷新频率高于所述预设采样频率；
根据所述第二数据信息，生成目标图像信息，以将所述目标图像信息作为所述待处理音乐信号的可视化信息进行输出。
2.根据权利要求1所述的方法，其特征在于，所述待处理音乐信号为通过脉冲编码调制后的音乐信号，所述第一数据信息包括采样时间和与所述采样时间对应的振幅信息，所述采样时间是对所述待处理音乐信号进行所述预设采样频率的采样后所确定的，所述根据预设采样频率，生成所述待处理音乐信号所对应的第一数据信息，包括：
在所述预设采样频率下，获取所述待处理音乐信号对应的采样信号；
将所述采样信号中满足滤波条件的振幅信息，作为所述第一数据信息；
其中，所述滤波条件包括所述采样信号中振幅信息的数值大于或等于预设的滤波阈值，所述滤波阈值是根据所述采样信号中所有振幅信息中的最大值确定的。
3.根据权利要求2所述的方法，其特征在于，所述根据显示刷新频率，对所述第一数据信息进行插值处理，以获取第二数据信息，包括：
根据所述待处理音乐信号的可视化信息对应的输出形式，确定用于对所述第一数据信息进行所述插值处理的目标插值算法；
利用所述目标插值算法，生成与所述第一数据信息对应的插值数据信息；
根据所述显示刷新频率，从所述插值数据信息中确定目标插值数据，所述目标插值数据是将对应插入所述第一数据信息的数据；
将对应插入所述目标插值数据的所述第一数据信息作为所述第二数据信息。
4.根据权利要求3所述的方法，其特征在于，利用所述目标插值算法，生成与所述第一数据信息对应的插值数据信息，包括：
确定插值范围集合，所述插值范围集合中包括根据所述第一数据信息中各个相邻采样时间所确定的多个时间范围；
确定与所述插值范围集合中各个时间范围分别对应的振幅信息的区域最大值和振幅信息的区域最小值；
根据所述插值范围集合、所述振幅信息的区域最小值以及所述振幅信息的区域最大值，利用所述插值计算策略，分别计算与所述各个时间范围对应的待插值集合，以获取所述插值数据信息。
5.根据权利要求4所述的方法，其特征在于，所述根据所述显示刷新频率，从所述插值数据信息中确定目标插值数据，包括：
根据所述显示刷新频率和所述插值范围集合，分别确定所述各个时间范围对应的待插入数据量；
根据所述各个时间范围对应的待插入数据量，从所述插值数据信息中选择所述目标插值数据。
6.一种音乐可视化信息的控制装置，其特征在于，所述装置包括：
信号获取模块，用于获取待处理音乐信号；
信息生成模块，用于根据预设采样频率，生成所述待处理音乐信号所对应的第一数据信息；
插值处理模块，用于根据显示刷新频率，对所述第一数据信息进行插值处理，以获取第二数据信息，所述显示刷新频率是进行所述待处理音乐信号的可视化信息输出所需的频率，所述显示刷新频率高于所述预设采样频率；
信息生成模块，用于根据所述第二数据信息，生成目标图像信息，以将所述目标图像信息作为所述待处理音乐信号的可视化信息进行输出。
7.根据权利要求6所述的装置，其特征在于，所述待处理音乐信号为通过脉冲编码调制后的音乐信号，所述第一数据信息包括采样时间和与所述采样时间对应的振幅信息，所述采样时间是对所述待处理音乐信号进行所述预设采样频率的采样后所确定的，所述信息生成模块，包括：
采样处理子模块，用于将所述采样信号中满足滤波条件的振幅信息，作为所述第一数据信息；
滤波处理子模块，用于将所述采样信号中满足滤波条件的振幅信息，作为所述第一数据信息；
其中，所述滤波条件包括所述采样信号中振幅信息的数值大于或等于预设的滤波阈值，所述滤波阈值是根据所述采样信号中所有振幅信息中的最大值确定的。
8.根据权利要求7所述的装置，其特征在于，所述插值处理模块，包括：
算法确定子模块，用于根据所述待处理音乐信号的可视化信息对应的输出形式，确定用于对所述第一数据信息进行所述插值处理的目标插值算法；
数据生成子模块，用于利用所述目标插值算法，生成与所述第一数据信息对应的插值数据信息；
数据确定子模块，用于根据所述显示刷新频率，从所述插值数据信息中确定目标插值数据，所述目标插值数据是将对应插入所述第一数据信息的数据；
信息生成子模块，用于将对应插入所述目标插值数据的所述第一数据信息作为所述第二数据信息。
9.根据权利要求8所述的装置，其特征在于，所述数据生成子模块，包括：
范围确定单元，用于确定插值范围集合，所述插值范围集合中包括根据所述第一数据信息中各个相邻采样时间所确定的多个时间范围；
振幅确定单元，用于确定与所述插值范围集合中各个时间范围分别对应的振幅信息的区域最大值和振幅信息的区域最小值；
数值计算单元，用于根据所述插值范围集合、所述振幅信息的区域最小值以及所述振幅信息的区域最大值，利用所述插值计算策略，分别计算与所述各个时间范围对应的待插值集合，以获取所述插值数据信息。
10.根据权利要求9所述的装置，其特征在于，所述数据确定子模块，包括：
数据量确定单元，用于根据所述显示刷新频率和所述插值范围集合，分别确定所述各个时间范围对应的待插入数据量；
数据选择单元，用于根据所述各个时间范围对应的待插入数据量，从所述插值数据信息中选择所述目标插值数据。
11.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的音乐可视化信息的控制方法的步骤。
12.一种车辆，其特征在于，所述车辆包括根据权利要求6至10中任一项所述音乐可视化信息的控制装置。
CN201910383499.1A 2019-05-09 2019-05-09 一种音乐可视化信息的控制方法、装置、车辆及存储介质 Pending CN110085253A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910383499.1A CN110085253A (zh) 2019-05-09 2019-05-09 一种音乐可视化信息的控制方法、装置、车辆及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910383499.1A CN110085253A (zh) 2019-05-09 2019-05-09 一种音乐可视化信息的控制方法、装置、车辆及存储介质

Publications (1)

Publication Number Publication Date
CN110085253A true CN110085253A (zh) 2019-08-02

Family

ID=67419373

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910383499.1A Pending CN110085253A (zh) 2019-05-09 2019-05-09 一种音乐可视化信息的控制方法、装置、车辆及存储介质

Country Status (1)

Country Link
CN (1) CN110085253A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110580912A (zh) * 2019-10-21 2019-12-17 腾讯音乐娱乐科技（深圳）有限公司 音乐可视化的方法、装置及系统
CN113709578A (zh) * 2021-09-14 2021-11-26 上海幻电信息科技有限公司 弹幕展示方法及装置
CN115035909A (zh) * 2022-05-31 2022-09-09 中国第一汽车股份有限公司 音乐可视化展示方法及装置
CN117319291A (zh) * 2023-11-27 2023-12-29 深圳市海威恒泰智能科技有限公司 一种低延时网络音频传输方法及系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101901595A (zh) * 2010-05-05 2010-12-01 北京中星微电子有限公司 一种根据音频音乐生成动画的方法和系统
CN103002197A (zh) * 2012-09-27 2013-03-27 深圳市创维群欣安防科技有限公司 一种信号数据处理方法、装置及智能终端
CN103107813A (zh) * 2012-11-13 2013-05-15 长沙景嘉微电子股份有限公司 一种带Class-AB输出的音频DAC电路
CN105513583A (zh) * 2015-11-25 2016-04-20 福建星网视易信息系统有限公司 一种歌曲节奏的显示方法及其系统
CN106575424A (zh) * 2014-07-31 2017-04-19 三星电子株式会社 使音乐信息可视化的方法和装置
CN108305604A (zh) * 2018-01-30 2018-07-20 浙江省公众信息产业有限公司 音乐可视化方法、装置及计算机可读存储介质
US20180225081A1 (en) * 2017-02-03 2018-08-09 Facebook, Inc. Music playback for affiliated services

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101901595A (zh) * 2010-05-05 2010-12-01 北京中星微电子有限公司 一种根据音频音乐生成动画的方法和系统
CN103002197A (zh) * 2012-09-27 2013-03-27 深圳市创维群欣安防科技有限公司 一种信号数据处理方法、装置及智能终端
CN103107813A (zh) * 2012-11-13 2013-05-15 长沙景嘉微电子股份有限公司 一种带Class-AB输出的音频DAC电路
CN106575424A (zh) * 2014-07-31 2017-04-19 三星电子株式会社 使音乐信息可视化的方法和装置
CN105513583A (zh) * 2015-11-25 2016-04-20 福建星网视易信息系统有限公司 一种歌曲节奏的显示方法及其系统
US20180225081A1 (en) * 2017-02-03 2018-08-09 Facebook, Inc. Music playback for affiliated services
CN108305604A (zh) * 2018-01-30 2018-07-20 浙江省公众信息产业有限公司 音乐可视化方法、装置及计算机可读存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
吴援明等: "《电视墙显示及控制技术》", 30 June 2000 *
陈学伟: "面向HDTV高刷新率的视频帧速率变化算法研究", 《新型工业化》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110580912A (zh) * 2019-10-21 2019-12-17 腾讯音乐娱乐科技（深圳）有限公司 音乐可视化的方法、装置及系统
CN110580912B (zh) * 2019-10-21 2022-02-22 腾讯音乐娱乐科技（深圳）有限公司 音乐可视化的方法、装置及系统
CN113709578A (zh) * 2021-09-14 2021-11-26 上海幻电信息科技有限公司 弹幕展示方法及装置
CN113709578B (zh) * 2021-09-14 2023-08-11 上海幻电信息科技有限公司 弹幕展示方法、装置、设备及介质
CN115035909A (zh) * 2022-05-31 2022-09-09 中国第一汽车股份有限公司 音乐可视化展示方法及装置
CN117319291A (zh) * 2023-11-27 2023-12-29 深圳市海威恒泰智能科技有限公司 一种低延时网络音频传输方法及系统
CN117319291B (zh) * 2023-11-27 2024-03-01 深圳市海威恒泰智能科技有限公司 一种低延时网络音频传输方法及系统

Similar Documents

Publication Publication Date Title
CN110085253A (zh) 一种音乐可视化信息的控制方法、装置、车辆及存储介质
JP4527287B2 (ja) オーディオ信号の時間スケール及び／又は基本周波数を変更するための信号処理技術
US8320583B2 (en) Noise reducing device and noise determining method
US11045150B2 (en) Method of sonifying brain electrical activity
US10832693B2 (en) Sound synthesis for data sonification employing a human auditory perception eigenfunction model in Hilbert space
CN104077746B (zh) 灰度图像处理方法及其装置
Pradhan et al. Use of running fractal dimension for the analysis of changing patterns in electroencephalograms
CN114241078A (zh) 一种加速磁共振超分辨率成像方法、装置、设备及介质
Natarajan et al. Spectral decomposition and illustration-inspired visualisation of highly disturbed cerebrovascular blood flow dynamics
Jeong et al. Implementation of a new algorithm using the STFT with variable frequency resolution for the time-frequency auditory model
DE60018246T2 (de) System zur übertragung eines audiosignals
Voss Hypersampling of pseudo-periodic signals by analytic phase projection
CN101645167A (zh) 帧相关系数控制及帧相关处理方法、装置及超声成像系统
US7558686B1 (en) Method and apparatus for displaying a representation of a signal
CN114027825B (zh) 一种呼吸信号获取方法、装置和计算机设备
CN113593594B (zh) 语音增强模型的训练方法和设备及语音增强方法和设备
MacDonald Data-driven sonification of CFD aneurysm models
JPWO2016207951A1 (ja) シャント音解析装置、シャント音解析方法、コンピュータプログラム及び記録媒体
EP3105753B1 (de) Verfahren zur synthetischen erzeugung eines digitalen audiosignals
Temor et al. Perceptually-motivated sonification of spatiotemporally-dynamic CFD data
Swider et al. Comparison of delayless digital filtering algorithms and their application to multi-sensor signal processing
JP5251381B2 (ja) 音処理装置およびプログラム
Mäkinen et al. The use of stationarity and nonstationarity in the detection and analysis of neural oscillations
CN117423347A (zh) 一种泛音列提取方法及相关装置
Van der Tweel et al. Measurement of evoked potentials

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190802

RJ01 Rejection of invention patent application after publication