CN110097618A - 一种音乐动画的控制方法、装置、车辆及存储介质 - Google Patents

一种音乐动画的控制方法、装置、车辆及存储介质 Download PDF

Info

Publication number
CN110097618A
CN110097618A CN201910383498.7A CN201910383498A CN110097618A CN 110097618 A CN110097618 A CN 110097618A CN 201910383498 A CN201910383498 A CN 201910383498A CN 110097618 A CN110097618 A CN 110097618A
Authority
CN
China
Prior art keywords
music
information
played
snatch
animation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910383498.7A
Other languages
English (en)
Other versions
CN110097618B (zh
Inventor
钟华
陈凌奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Xiaopeng Motors Technology Co Ltd
Original Assignee
Guangzhou Xiaopeng Motors Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Xiaopeng Motors Technology Co Ltd filed Critical Guangzhou Xiaopeng Motors Technology Co Ltd
Priority to CN201910383498.7A priority Critical patent/CN110097618B/zh
Publication of CN110097618A publication Critical patent/CN110097618A/zh
Application granted granted Critical
Publication of CN110097618B publication Critical patent/CN110097618B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/2053D [Three Dimensional] animation driven by audio data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/802D [Two Dimensional] animation, e.g. using sprites

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供了一种音乐动画的控制方法、装置、车辆及存储介质,该方法包括:根据待播放音乐片段,确定待播放音乐片段的特征信息;根据特征信息,确定与待播放音乐片段对应的动画元素;根据特征信息,确定用于对待播放音乐片段进行采样处理的采样设置信息;根据采样设置信息和动画元素,生成与待播放音乐片段对应的动画图像信息,以在待播放音乐片段的播放期间输出动画图像信息。因此,能够利用待播放音乐片段的特征信息确定对待播放音乐片段进行信号采集以及输出的对应动画图像信息,无需用户手动操作,并且能够提升动画效果的匹配度,提升用户对音乐的感知,有利于音乐的可视化表达。

Description

一种音乐动画的控制方法、装置、车辆及存储介质
技术领域
本申请涉及数据处理技术领域,特别是涉及一种音乐动画的控制方法、装置、车辆及存储介质。
背景技术
随着科学技术的发展,音乐不光可以被听到,还可以被“看到”,音乐的可视化技术已广泛应用于音乐播放场景中。现有技术中,在对音乐的可视化的动画效果进行配置时,采用用户手动从预置的若干种效果中选择切换或者按照某种规则(顺序或随机)进行自动切换。
但是,现有技术中可视化动画效果的配置是预设在音乐播放装置中的,无法对每首歌曲生成对应的动画表现效果。
发明内容
本申请提供一种音乐动画的控制方法、装置、车辆及存储介质,以生成与音乐歌曲更匹配的动画效果,提升音乐播放效果。
依据本申请实施例的第一方面,提供了一种音乐动画的控制方法,该方法可以包括:
根据待播放音乐片段,获取所述待播放音乐片段的特征信息;
根据所述特征信息,确定与所述待播放音乐片段对应的动画元素;
根据所述特征信息,确定用于对所述待播放音乐片段进行采样处理的采样设置信息;
根据所述采样设置信息和所述动画元素,生成与所述待播放音乐片段对应的动画图像信息,以在所述待播放音乐片段的播放期间输出所述动画图像信息。
依据本申请实施例的第二方面,提供了一种用音乐动画的控制装置,该装置可以包括:
信息获取模块,用于根据待播放音乐片段,获取所述待播放音乐片段的特征信息;
属性确定模块,用于根据所述特征信息,确定与所述待播放音乐片段对应的动画元素;
信息确定模块,用于根据所述特征信息,确定用于对所述待播放音乐片段进行采样处理的采样设置信息;
信息生成模块,用于根据所述采样设置信息和所述动画元素,生成与所述待播放音乐片段对应的动画图像信息,以在所述待播放音乐片段的播放期间输出所述动画图像信息。
依据本申请实施例的第三方面,提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的音乐动画的控制方法的步骤。
依据本申请实施例的第四方面,提供了一种车辆,所述车辆包括如第二方面项所述的音乐动画的控制装置。
与现有技术相比,本申请包括以下优点:
根据待播放音乐片段,获取所述待播放音乐片段的特征信息;根据所述特征信息,确定与所述待播放音乐片段对应的动画元素;根据所述特征信息,确定用于对所述待播放音乐片段进行采样处理的采样设置信息;根据所述采样设置信息和所述动画元素,生成与所述待播放音乐片段对应的动画图像信息,以在所述待播放音乐片段的播放期间输出所述动画图像信息。因此,能够利用待播放音乐片段的特征信息确定对待播放音乐片段进行信号采集以及输出的对应动画图像信息,无需用户手动操作,并且能够提升动画效果的匹配度,提升用户对音乐的感知,有利于音乐的可视化表达。
附图说明
图1是本申请实施例提供的一种音乐动画的控制方法的步骤流程图;
图2是本申请实施例提供的一种音乐动画的控制方法的具体步骤流程图;
图3是本申请实施例提供的一种音乐动画的控制方法的具体步骤流程图;
图4是本申请实施例提供的一种音乐动画的控制方法的具体步骤流程图;
图5是本申请实施例提供的一种音乐动画的控制装置的框图;
图6是本申请实施例提供的一种属性确定模块的框图;
图7是本申请实施例提供的一种信息确定模块的框图;
图8是本申请实施例提供的一种信息生成模块的框图。
具体实施方式
为使本申请的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本申请作进一步详细的说明。
参照图1,示出了本申请实施例的一种音乐动画的控制方法的步骤流程图,如图1所示,该方法可以包括:
步骤101,获取待播放音乐片段的特征信息。
在具体应用中,特征信息包括分类信息、艺术家信息以及风格信息中的至少一者,示例地,分类信息包括:摇滚、流行、说唱、爵士、民谣、纯音乐等分类信息、艺术家信息包括:男/女(高/中/低音)等信息、风格信息包括:悲伤、励志、抒情、催眠等信息。
示例地,该待播放音乐片段可以是音乐播放器即将播放的某一歌曲,在音乐播放器进行待播放音乐片段的播放之前,可以从歌曲压缩文件的媒体信息头或者存储音乐数据的数据库中查询到与待播放音乐片段对应的特征信息。
优选的,从存储有待播放音乐片段的数据库中获取与待播放音乐片段对应的特征信息。示例地,在存储有待播放音乐片段的数据库中包括大量的音乐歌曲及其特征信息,在音乐播放器获取待播放音乐片段的同时获取其对应的特征信息,以便于下面步骤根据该特征信息确定对应的动画图像信息。
此外,需要说明的是,也可以利用预先训练的特征信息确定模型(神经网络模型),进而确定待播放音乐片段的特征信息,具体本申请实施例不做限制。
步骤102,根据特征信息,确定与待播放音乐片段对应的动画元素。
示例地,在特征信息为流行、女中音、抒情时,对应的动画元素可以设置为蓝色、水波纹效果;若特征信息为摇滚、男/女、励志,可以对应设置动画元素为红色、火花爆裂效果;特征信息为流行、男/女、悲伤,可以对应设置动画元素为白色、雪花融化效果等等。
其中,特征信息的不同组合可以使用不同的动画效果,也可以使用相同的动画效果,本申请实施例不做具体限制。
在具体应用中,可以预先设置特征信息与动画元素之间的映射关系,在获取到对应的特征信息之后,在该映射关系中查找与之匹配的,进而确定其对应的动画元素,且该映射关系可以动态进行更新和调整,并且可以基于云端所获取到的用户喜好对映射关系中所设置的动画元素进行个性化定制。
步骤103,根据特征信息,确定用于对待播放音乐片段进行采样处理的采样设置信息。
其中,采样设置信息中包括频率权重和采样频率。
示例地,本申请实施例可以基于特征信息确定对待播放音乐片段进行信号采集和频谱分析的设置信息,也就是说,根据特征信息所生成的采样设置信息,是针对待播放音乐片段的,例如,对于特征信息为流行、女中音、抒情时,可以加大采样频率中的中频频段(160Hz-1280Hz之间)的权重值,而对于男高音可以加大频率权重中的高频频段(大于1289Hz)的权重值,对于特征信息中包括民谣的情况下,可以加大低频频段(小于160Hz)的权重,以突出体现鼓点节拍;此外,对于采样频率的选择如可以对于对节拍频率较高的例如说唱类的待播放音乐片段,可以采用较高的采样频率,而对于节拍频率低且轻柔类的待播放音乐片段,如催眠类小夜曲等可以采用较低的采样频率。
需要说明的是,由于人耳反应最为灵敏的频段为:3kHz—4kHz,且在频率小于20Hz或大于20KHz时,人耳几乎完全听不到。因此,对于待播放音乐片段所生成的频率信息进行人耳有效频率范围内的筛选,例如仅采集频率范围在20Hz-20KHz的待播放音乐片段,将不在此预设频率范围内的频率信息过滤掉,进而降低计算量的同时不影响动画图像信息的真实度。
此外,步骤102和步骤103的执行顺序可以是顺序执行,即先执行步骤102,再执行步骤103,或者是先执行步骤103再执行步骤102;优选的,将步骤102和步骤103同步执行,同时根据特征信息确定对应的采样设置信息和动画元素,进而执行步骤104,具体本申请实施例不做限制。
步骤104,根据采样设置信息和动画元素,生成与待播放音乐片段对应的动画图像信息,以在待播放音乐片段的播放期间输出动画图像信息。
在具体应用中,利用上述步骤所确定的采样设置信息,对待播放音乐片段进行采样处理,与现有技术中所采用的固有采样频率相比,能够通过利用根据待播放音乐片段的特征信息确定对应的采样频率,对待播放音乐片段进行采样处理时,更加具有针对性的进行采样信号的获取,且采样频率的设置,能够考虑到系统性能,即对于节奏舒缓的待播放音乐片段,如催眠曲,采样较低的采样频率以节省系统资源(计算资源、内存);对于节奏较快振幅变化较大的待播放音乐片段,如摇滚说唱歌曲,则采用较高的采样频率,以减少动画绘制时的中间插值。
此外,在输出动画图像信息之前,可以利用插值方法对利用较低的采样频率所获取到的待播放音乐片段的采样信号进行插值处理,以提升采样信号的逼真度,保证动画图像信息在输出时的连贯性。
综上所述,本申请实施例所述的音乐动画的控制方法,根据待播放音乐片段,确定待播放音乐片段的特征信息;根据特征信息,确定与待播放音乐片段对应的动画元素;根据特征信息,确定用于对待播放音乐片段进行采样处理的采样设置信息;根据采样设置信息和动画元素,生成与待播放音乐片段对应的动画图像信息,以在待播放音乐片段的播放期间输出动画图像信息。因此,能够利用待播放音乐片段的特征信息确定对待播放音乐片段进行信号采集以及输出的对应动画图像信息,无需用户进行手动操作,并且能够提升动画效果的匹配度,提升用户对音乐的感知,有利于音乐的可视化效果的表达。
可选的,参照图2,示出了本申请一种音乐动画的控制方法的具体步骤流程图,如图2所示,步骤102所述的根据特征信息,确定与待播放音乐片段对应的动画元素,可以包括:
步骤1021,根据预先确定的特征信息与动画元素的映射关系,查找与特征信息匹配的目标动画元素。
其中,动画元素包括动画颜色、动画形状、动画效果中的至少一者,该映射关系用于表明多个不同特征信息与多个不同动画元素之间的映射关系,目标动画元素是多个动画元素中的任一一者。
在具体应用中,目标动画元素是动画元素映射关系中涉及的多个动画元素中的与特征信息相匹配的动画元素。由于特征信息中包括多个不同的分类信息、艺术家信息、风格信息,进而由这些不同的分类信息、艺术家信息、风格信息组合而成的特征信息也有不同,可以在云端服务器上设置与各个特征信息所对应的动画颜色、动画形状、动画效果中的至少一者的动画元素映射关系,且该动画元素映射关系是针对在云端服务器上保存的与每个用户对应的喜好特征进行个性化定制的映射关系,例如,云端服务器在向待播放音乐片段的音乐播放装置下发待播放音乐片段的压缩包时,同时获取该音乐播放装置上登录的用户信息,进而将与该用户信息对应的动画元素映射关系下载至音乐播放装置,以在其中查找与当前的特征信息匹配的目标动画元素。
步骤1022,将目标动画元素作为与待播放音乐片段对应的动画元素。
在具体应用中,动画颜色可以包括:红色、白色、蓝色、绿色等,能够利用现有显示设备进行输出的颜色均可以作为动画元素,动画形状例如可以为三角形、圆形、正方形、圆柱形、水纹形、人形等不同形状,动画效果包括爆炸式效果、流动式效果、静止式效果、喷泉式效果等,本申请实施例不做具体不限制。通过将动画元素映射关系中与特征信息匹配的目标动画元素作为待播放音乐片段的动画元素,使得与待播放音乐片段同时输出的动画元素与待播放音乐片段相对应,匹配度更高,进而加深用户对歌曲的感受。
此外,需要说明的是,动画元素的映射关系中所预设的动画元素与特征信息之间的映射关系是可以进行更新;当出现新的动画元素时,可以对动画元素的映射关系中已有的动画元素进行更新。
可选的,参照图3,示出了本申请一种音乐动画的控制方法的具体步骤流程图,如图3所示,步骤103所述的根据特征信息,确定用于对待播放音乐片段进行采样处理的采样设置信息,可以包括:
步骤1031,利用预先设置的采样策略,确定与特征信息对应的频率权重和采样权重。
其中,频率权重中包括多个频率分别对应的权重值。
示例地,频率权重中的每个频率所对应的权重值,可以先根据人耳的敏感度设置默认权重值,例如人耳的敏感度越高则对应的权重越大,即频率在3kHz—4kHz范围内对应权重最大,如40Hz对应的默认权重值为0.0003,100Hz对应的默认权重值为0.01,400Hz对应的默认权重值为0.33,1kHz对应的默认权重值为1,2kHz对应的默认权重值为1.32,10kHz对应的默认权重值为0.56等。
可选的,在特征信息中包括第一分类信息的情况下,确定采样权重为第一采样权重;在特征信息中包括第二分类信息的情况下,确定采样权重为第二采样权重;其中,第一采样权重大于第二采样权重。
示例地,节奏舒缓的歌曲(如催眠曲),可以选择较低的采样频率以节省系统资源(CPU、内存),并且还可以通过在动画绘制模块中多做一些中间插值来模拟待播放音乐片段,以避免出现失真;而对于节奏较快振幅变化较大的歌曲(如摇滚说唱类的待播放音乐片段),则选择较高的采样频率,以减少动画绘制时的中间插值而导致的输出动画图像信息的失真。因此,第一分类信息可以包括摇滚、说唱的信息,其对应的第一采样权重大于第二采样权重,如为2.5;第二分类信息可以包括纯音乐、舒缓的信息,其对应的第二采样权重小于上述第一采样权重,例如是1.5或者1,进而避免浪费系统资源。
需要说明的是,当上述步骤未能够获取到待播放音乐片段的特征信息时,可以在本步骤直接采用默认权重值和基础采样频率,以对应生成动画图像信息进而输出。与不同的特征信息所对应的权重信息,可以是进行多次调试后确定的最优数值,以保证动画图像信息的最优效果。
在具体应用中,根据采样策略确定与特征信息对应权重信息,作为下面步骤生成对应的动画图像信息依据,采样策略中包括与不同的特征信息对应的权重信息,例如,在特征信息为民谣,女艺术家时,增加中频频段(160Hz-1280Hz之间)的权重值,即将400Hz的权重值调整到默认权重值的1.3倍,即为0.33*1.3=0.429;将1kHz的权重值调整到默认权重值的1.3倍,即为1*1.3=1.3;其他频段下的频率对应的权重值可以不变。
步骤1032,将采样权重与预设的基础采样频率之积,作为采样频率。
示例地,可以设置基础采样频率为20Hz,若根据采样策略确定的采样权重为1.5,则对待播放音乐片段进行采样处理的采样频率即为20*1.5=30Hz。
可选的,参照图4,示出了本申请一种音乐动画的控制方法的具体步骤流程图,如图4所示,步骤104所述的根据采样设置信息和动画元素,生成与待播放音乐片段对应的动画图像信息,以在待播放音乐片段的播放期间输出动画图像信息,可以包括:
步骤1041,在根据采样频率对待播放音乐片段进行采样后,获得采样信号集合。
其中,采样信号集合中包括待播放音乐片段对应的多个采样信号。
步骤1042,根据频率权重,确定采样信号集合中每个采样信号对应的目标振幅。
示例地,根据采样信号集合的频率信息和与频率信息对应的振幅信息,对每个采样信号对应的多个频率值下的振幅值进行加权后,确定采样信号集合中每个采样信号的目标振幅。其中,频率信息中包括采样信号集合中每个采样信号对应的多个频率值,振幅信息中包括每个采样信号对应的多个频率值下的振幅值。
示例地,若采样频率为20Hz,也就是对待播放音乐片段进行每秒采样20次,进而将获取到的采样信号作为采样信号集合中所包括的采样信号。示例地,待播放音乐片段为44.1kHz频率的mp3音频,以1024个采样点进行频谱抓取,则获取到:22K/1024Hz、2*22K/1024Hz、3*22K/1024Hz……1023**22k/1024Hz、22kHz频率下的实部和虚部(44.1kHz变为22kHz是由于傅里叶变换对称性),对实部虚部做取模运算,即可得到每个频率下的振幅值。
示例地,在频率权重中包括与各个频率值所对应的权重值,进而基于如下公式可以确定目标振幅:
A=Kf1*Af1+Kf2*Af2+……+Kfn*Afn
其中,Kfn表示频率为fn对应的权重值,Afn表示频率为fn所对应的振幅值。
步骤1043,根据目标振幅,基于动画元素生成对应的目标动画图像信息。
示例地,根据每个采样信号的目标振幅以及待播放音乐片段对应的动画元素,生成具有该动画元素的动画图像信息,该动画元素可以是Java语言格式的代码文件,其中包括了动画效果实现库、参数列表,该参数列表中包括对动画颜色、动画拉伸速率等进行设置的参数,此外,还包括图片资源,例如是动画图像信息的背景图片,进而基于包括动画元素的Java文件,将目标振幅作为输入参数,进而生成符合步骤102所确定的动画元素的目标动画图像信息,作为输出。
步骤1044,将目标动画图像信息作为动画图像信息与待播放音乐片段进行同步输出。
示例地,在播放播放音乐片段的同时输出该目标动画图像信息,以实现对待播放音乐片段的可视化。
综上所述,根据本申请所述的音乐动画的控制方法,能够根据待播放音乐片段的特征信息,分别确定采样设置信息和动画元素后,进而根据采样设置信息中的采样频率对待播放音乐片段进行采样处理处理,确定用于生成动画图像信息的目标振幅,进而生成与目标振幅对应的,即与待播放音乐片段同步的,且具有动画元素中所确定的动画颜色、动画形状、动画效果的目标动画图像信息,以进行输出。因此,能够将待播放音乐片段的可视化信息,即动画图像信息以与待播放音乐片段相对应的方式进行输出,加深待播放音乐片段的可视化表达效果,丰富音乐的表达形式的同时提升用户对音乐信号的感知。
图5是本申请实施例提供的一种音乐动画的控制装置的框图,如5所示,该装置500包括:
信息获取模块510,用于根据待播放音乐片段,获取待播放音乐片段的特征信息;
元素确定模块520,用于根据特征信息,确定与待播放音乐片段对应的动画元素;
信息确定模块530,用于根据特征信息,确定用于对待播放音乐片段进行采样处理的采样设置信息。
信息生成模块540,用于根据采样设置信息和动画元素,生成与待播放音乐片段对应的动画图像信息,以在待播放音乐片段的播放期间输出动画图像信息。
可选的,特征信息包括分类信息、艺术家信息以及风格信息中的至少一者,信息获取模块510,用于:
从存储有待播放音乐片段的数据库中获取与待播放音乐片段对应的特征信息。
可选的,图6是本申请实施例提供的一种属性确定模块的框图,如6所示,属性确定模块520,包括:
查找子模块521,用于根据预先确定的特征信息与动画元素的映射关系,查找与特征信息匹配的目标动画元素。
属性确定子模块522,用于将目标动画元素作为与待播放音乐片段对应的动画元素。
其中,动画元素包括动画颜色、动画形状、动画效果中的至少一者,动画元素映射关系用于表明多个不同特征信息与多个不同动画元素之间的映射关系,目标动画元素是多个动画元素中的任一一者。
可选的,采样设置信息中包括频率权重和采样频率,图7是本申请实施例提供的一种信息确定模块的框图,如7所示,信息确定模块530,包括:
信息确定子模块531,用于利用预先设置的采样策略,确定与特征信息对应的频率权重和采样权重。
频率确定子模块532,用于将采样权重与预设的基础采样频率之积,作为采样频率。
可选的,信息确定子模块531,用于:
在特征信息中包括第一分类信息的情况下,确定采样权重为第一采样权重;
在特征信息中包括第二分类信息的情况下,确定采样权重为第二采样权重;
其中,第一采样权重大于第二采样权重。
可选的,频率权重中包括多个频率分别对应的权重值,图8是本申请实施例提供的一种信息生成模块的框图,如8所示,信息生成模块540,包括:
采样子模块541,用于在根据采样频率对待播放音乐片段进行采样后,获得采样信号集合,采样信号集合中包括待播放音乐片段对应的多个采样信号。
振幅确定子模块542,用于根据频率权重,确定采样信号集合中每个采样信号对应的目标振幅。
信息生成子模块543,用于根据目标振幅,基于动画元素生成对应的目标动画图像信息。
信息输出子模块544,用于将目标动画图像信息作为动画图像信息与待播放音乐片段进行同步输出。
综上所述,本申请实施例所述的音乐动画的控制装置,根据待播放音乐片段,确定待播放音乐片段的特征信息;根据特征信息,确定与待播放音乐片段对应的动画元素;根据特征信息,确定用于对待播放音乐片段进行采样处理的采样设置信息;根据采样设置信息和动画元素,生成与待播放音乐片段对应的动画图像信息,以在待播放音乐片段的播放期间输出动画图像信息。因此,能够利用待播放音乐片段的特征信息确定对待播放音乐片段进行信号采集以及输出的对应动画图像信息,无需用户手动操作,并且能够提升动画效果的匹配度,提升用户对音乐的感知,有利于音乐的可视化效果的表达。
另外,本申请实施例还提供一种车辆,该车辆包括上述实施例所述的音乐动画的控制装置的实施例所述的装置,且能达到相同的技术效果,为避免重复,这里不再赘述。
本申请实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述的音乐动画的控制方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,可以为只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random AccessMemory,简称RAM)、磁碟或者光盘等。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
以上对本申请所提供的一种音乐动画的控制方法、装置、车辆及存储介质,进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (14)

1.一种音乐动画的控制方法,其特征在于,所述方法包括:
获取待播放音乐片段的特征信息;
根据所述特征信息,确定与所述待播放音乐片段对应的动画元素;
根据所述特征信息,确定用于对所述待播放音乐片段进行采样处理的采样设置信息;
根据所述采样设置信息和所述动画元素,生成与所述待播放音乐片段对应的动画图像信息,以在所述待播放音乐片段的播放期间输出所述动画图像信息。
2.根据权利要求1所述的方法,其特征在于,所述特征信息包括分类信息、艺术家信息以及风格信息中的至少一者,所述根据待播放音乐片段,获取所述待播放音乐片段的特征信息,包括:
从存储有所述待播放音乐片段的数据库中获取与所述待播放音乐片段对应的特征信息。
3.根据权利要求1所述的方法,其特征在于,所述根据所述特征信息,确定与所述待播放音乐片段对应的动画元素,包括:
根据预先确定的特征信息与动画元素的映射关系,查找与所述特征信息匹配的目标动画元素;
将所述目标动画元素作为与所述待播放音乐片段对应的动画元素;
其中,所述动画元素包括动画颜色、动画形状、动画效果中的至少一者,所述映射关系用于表明多个不同特征信息与多个不同动画元素之间的映射关系,所述目标动画元素是所述多个动画元素中的任一一者。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述采样设置信息中包括频率权重和采样频率,所述根据所述特征信息,确定用于对所述待播放音乐片段进行采样处理的采样设置信息,包括:
利用预先设置的采样策略,确定与所述特征信息对应的所述频率权重和采样权重;
将所述采样权重与预设的基础采样频率之积,作为所述采样频率。
5.根据权利要求4所述的方法,其特征在于,所述利用预先设置的采样策略,确定与所述特征信息对应的所述频率权重和采样权重,包括:
在所述特征信息中包括第一分类信息的情况下,确定所述采样权重为第一采样权重;
在所述特征信息中包括第二分类信息的情况下,确定所述采样权重为第二采样权重;
其中,所述第一采样权重大于所述第二采样权重。
6.根据权利要求5所述的方法,其特征在于,所述频率权重中包括多个频率分别对应的权重值,所述根据所述采样设置信息和所述动画元素,生成与所述待播放音乐片段对应的动画图像信息,以在所述待播放音乐片段的播放期间输出所述动画图像信息,包括:
在根据所述采样频率对所述待播放音乐信号进行采样后,获得采样信号集合,所述采样信号集合中包括所述待播放音乐信号对应的多个采样信号;
根据所述频率权重,确定所述采样信号集合中每个采样信号对应的目标振幅;
根据所述目标振幅,基于所述动画元素生成对应的目标动画图像信息;
将所述目标动画图像信息作为所述动画图像信息与所述待播放音乐信号进行同步输出。
7.一种音乐动画的控制装置,其特征在于,所述装置包括:
信息获取模块,用于根据待播放音乐片段,获取所述待播放音乐片段的特征信息;
元素确定模块,用于根据所述特征信息,确定与所述待播放音乐片段对应的动画元素;
信息确定模块,用于根据所述特征信息,确定用于对所述待播放音乐片段进行采样处理的采样设置信息;
信息生成模块,用于根据所述采样设置信息和所述动画元素,生成与所述待播放音乐片段对应的动画图像信息,以在所述待播放音乐片段的播放期间输出所述动画图像信息。
8.根据权利要求7所述的装置,其特征在于,所述特征信息包括分类信息、艺术家信息以及风格信息中的至少一者,所述信息获取模块,用于:
从存储有所述待播放音乐片段的数据库中获取与所述待播放音乐片段对应的特征信息。
9.根据权利要求7所述的装置,其特征在于,所述属性确定模块,包括:
查找子模块,用于根据预先确定的特征信息与动画元素的映射关系,查找与所述特征信息匹配的目标动画元素;
属性确定子模块,用于将所述目标动画元素作为与所述待播放音乐片段对应的动画元素;
其中,所述动画元素包括动画颜色、动画形状、动画效果中的至少一者,所述动画元素映射关系用于表明多个不同特征信息与多个不同动画元素之间的映射关系,所述目标动画元素是所述多个动画元素中的任一一者。
10.根据权利要求7-9中任一项所述的装置,其特征在于,所述采样设置信息中包括频率权重和采样频率,所述信息确定模块,包括:
信息确定子模块,用于利用预先设置的采样策略,确定与所述特征信息对应所述频率权重和采样权重;
频率确定子模块,用于将所述采样权重与预设的基础采样频率之积,作为所述采样频率。
11.根据权利要求10所述的装置,其特征在于,所述信息确定子模块,用于:
在所述特征信息中包括第一分类信息的情况下,确定所述采样权重为第一采样权重;
在所述特征信息中包括第二分类信息的情况下,确定所述采样权重为第二采样权重;
其中,所述第一采样权重大于所述第二采样权重。
12.根据权利要求11所述的装置,其特征在于,所述频率权重中包括多个频率分别对应的权重值,所述信息生成模块,包括:
采样子模块,用于在根据所述采样频率对所述待播放音乐片段进行采样后,获得采样信号集合,所述采样信号集合中包括所述待播放音乐片段对应的多个采样信号;
振幅确定子模块,用于根据所述频率权重,确定所述采样信号集合中每个采样信号对应的目标振幅;
信息生成子模块,用于根据所述目标振幅,基于所述动画元素生成对应的目标动画图像信息;
信息输出子模块,用于将所述目标动画图像信息作为所述动画图像信息与所述待播放音乐片段进行同步输出。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的音乐动画的控制方法的步骤。
14.一种车辆,其特征在于,所述车辆包括如权利要求7至12中任一项所述音乐动画的控制装置。
CN201910383498.7A 2019-05-09 2019-05-09 一种音乐动画的控制方法、装置、车辆及存储介质 Active CN110097618B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910383498.7A CN110097618B (zh) 2019-05-09 2019-05-09 一种音乐动画的控制方法、装置、车辆及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910383498.7A CN110097618B (zh) 2019-05-09 2019-05-09 一种音乐动画的控制方法、装置、车辆及存储介质

Publications (2)

Publication Number Publication Date
CN110097618A true CN110097618A (zh) 2019-08-06
CN110097618B CN110097618B (zh) 2023-05-12

Family

ID=67447435

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910383498.7A Active CN110097618B (zh) 2019-05-09 2019-05-09 一种音乐动画的控制方法、装置、车辆及存储介质

Country Status (1)

Country Link
CN (1) CN110097618B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110750743A (zh) * 2019-09-25 2020-02-04 腾讯科技(深圳)有限公司 一种动画播放方法、装置、设备及存储介质
CN111127598A (zh) * 2019-12-04 2020-05-08 网易(杭州)网络有限公司 动画播放速度的调整方法、装置、电子设备和介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005056101A (ja) * 2003-08-04 2005-03-03 Matsushita Electric Ind Co Ltd 音楽データと連動したcgアニメーション装置
US20080158231A1 (en) * 2006-12-28 2008-07-03 Samsung Electronics Co., Ltd Apparatus and method for managing music files
US20080255688A1 (en) * 2007-04-13 2008-10-16 Nathalie Castel Changing a display based on transients in audio data
US20110213475A1 (en) * 2009-08-28 2011-09-01 Tilman Herberger System and method for interactive visualization of music properties
US20110273455A1 (en) * 2010-05-04 2011-11-10 Shazam Entertainment Ltd. Systems and Methods of Rendering a Textual Animation
US20120124473A1 (en) * 2010-11-12 2012-05-17 Electronics And Telecommunications Research Institute System and method for playing music using music visualization technique
CN108182047A (zh) * 2016-12-08 2018-06-19 武汉斗鱼网络科技有限公司 一种音量信息的显示方法及装置
CN109615682A (zh) * 2018-12-07 2019-04-12 北京微播视界科技有限公司 动画生成方法、装置、电子设备及计算机可读存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005056101A (ja) * 2003-08-04 2005-03-03 Matsushita Electric Ind Co Ltd 音楽データと連動したcgアニメーション装置
US20080158231A1 (en) * 2006-12-28 2008-07-03 Samsung Electronics Co., Ltd Apparatus and method for managing music files
US20080255688A1 (en) * 2007-04-13 2008-10-16 Nathalie Castel Changing a display based on transients in audio data
US20110213475A1 (en) * 2009-08-28 2011-09-01 Tilman Herberger System and method for interactive visualization of music properties
US20110273455A1 (en) * 2010-05-04 2011-11-10 Shazam Entertainment Ltd. Systems and Methods of Rendering a Textual Animation
US20120124473A1 (en) * 2010-11-12 2012-05-17 Electronics And Telecommunications Research Institute System and method for playing music using music visualization technique
CN108182047A (zh) * 2016-12-08 2018-06-19 武汉斗鱼网络科技有限公司 一种音量信息的显示方法及装置
CN109615682A (zh) * 2018-12-07 2019-04-12 北京微播视界科技有限公司 动画生成方法、装置、电子设备及计算机可读存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110750743A (zh) * 2019-09-25 2020-02-04 腾讯科技(深圳)有限公司 一种动画播放方法、装置、设备及存储介质
CN111127598A (zh) * 2019-12-04 2020-05-08 网易(杭州)网络有限公司 动画播放速度的调整方法、装置、电子设备和介质
CN111127598B (zh) * 2019-12-04 2023-09-15 网易(杭州)网络有限公司 动画播放速度的调整方法、装置、电子设备和介质

Also Published As

Publication number Publication date
CN110097618B (zh) 2023-05-12

Similar Documents

Publication Publication Date Title
CN110265064B (zh) 音频爆音检测方法、装置和存储介质
US20090307594A1 (en) Adaptive User Interface
WO2021103314A1 (zh) 一种构造听音场景的方法和相关装置
CN109120983A (zh) 一种音频处理方法和装置
CN103187046A (zh) 显示控制装置及方法
CN106383676B (zh) 用于声音的即时光色渲染系统及其应用
JP3560936B2 (ja) 感性データ算出方法および感性データ算出装置
CN114073854A (zh) 基于多媒体文件的游戏方法和系统
CN112995736A (zh) 语音字幕合成方法、装置、计算机设备及存储介质
CN110097618A (zh) 一种音乐动画的控制方法、装置、车辆及存储介质
Moffat et al. Sound effect synthesis
US9445210B1 (en) Waveform display control of visual characteristics
CN110751935A (zh) 乐器演奏点的确定及节奏评分的方法
JP2017027070A (ja) 評価装置及びプログラム
Durr et al. Implementation and evaluation of dynamic level of audio detail
CN105487788B (zh) 一种音乐信息实时获取方法及装置
US20220076687A1 (en) Electronic device, method and computer program
EP3860156A1 (en) Information processing device, method, and program
JP2001265330A (ja) 旋律抽出装置および旋律抽出方法
CN113395577A (zh) 变声播放方法和装置、存储介质及电子设备
WO2023273440A1 (zh) 一种生成多种音效的方法、装置和终端设备
JP2006163264A (ja) 音響信号分析装置、音響信号分析方法及び音響信号分析プログラム
JP5742472B2 (ja) データ検索装置およびプログラム
Wilson Perceptually-motivated generation of electric guitar timbres using an interactive genetic algorithm
CN112954481A (zh) 特效处理方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant