CN113920225A - 动画特效生成方法、介质、装置和计算设备 - Google Patents

动画特效生成方法、介质、装置和计算设备 Download PDF

Info

Publication number
CN113920225A
CN113920225A CN202111223346.4A CN202111223346A CN113920225A CN 113920225 A CN113920225 A CN 113920225A CN 202111223346 A CN202111223346 A CN 202111223346A CN 113920225 A CN113920225 A CN 113920225A
Authority
CN
China
Prior art keywords
target
audio
special effect
audio clip
frame number
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111223346.4A
Other languages
English (en)
Inventor
朱一闻
谢劲松
张方
金东�
闫冰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Netease Cloud Music Technology Co Ltd
Original Assignee
Hangzhou Netease Cloud Music Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Netease Cloud Music Technology Co Ltd filed Critical Hangzhou Netease Cloud Music Technology Co Ltd
Priority to CN202111223346.4A priority Critical patent/CN113920225A/zh
Publication of CN113920225A publication Critical patent/CN113920225A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/2053D [Three Dimensional] animation driven by audio data

Abstract

本公开提供了一种动画特效生成方法、介质、装置和计算设备。该动画特效生成方法包括:接收面向音频数据的播放操作,音频数据包括至少一个音频片段;响应于播放操作,获取音频片段对应的目标帧数,以及播放音频片段时显示的动态特效的目标尺寸,目标尺寸和目标帧数均是根据音频片段中的属于低音设定范围的部分确定的;在播放音频片段时,根据音频片段对应的目标尺寸以及目标帧数,显示音频片段对应的动画特效。本公开可以使动态特效跟随音频的低音部分进行放大缩小的律动,实现对音频的低音部分进行可视化,从而使用户在收听音频时,可以“看”到音乐,达到听觉与视觉的全新体验。

Description

动画特效生成方法、介质、装置和计算设备
技术领域
本公开涉及计算机技术领域,更具体地,涉及动画特效生成方法、介质、装置和计算设备。
背景技术
本部分旨在为权利要求书中陈述的本公开的技术方案提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
目前,在终端设备播放音频时,通常在终端设备的屏幕上显示固定的画面。其中,屏幕上显示的画面无法随播放的音频而动,进而降低用户的对音频的体验感。
为解决上述问题,在先技术根据音频的节奏的快慢,显示动画特效,但是在音频包含低音部分时,无法对低音部分进行音频可视化。
发明内容
本公开提供一种动画特效生成方法、介质、装置和计算设备,以解决在先技术在音频包含低音部分时,无法对低音部分进行音频可视化的问题。
在本公开的第一方面中,提供了一种动画特效生成方法,包括:接收面向音频数据的播放操作,音频数据包括至少一个音频片段;响应于播放操作,获取音频片段对应的目标帧数,以及播放音频片段时显示的动态特效的目标尺寸,目标尺寸和目标帧数均是根据音频片段中的属于低音设定范围的部分确定的;在播放音频片段时,根据音频片段对应的目标尺寸以及目标帧数,显示音频片段对应的动画特效。
在本公开的一个实施例中,该获取音频片段对应的目标帧数,以及播放音频片段时显示的动态特效的目标尺寸,包括:对音频片段进行采样,得到多个采样点;对多个采样点进行傅里叶变换,得到音频片段对应的频域信号,频域信号包括各采样点对应的频率信息和幅度信息;确定频率信号属于低音设定范围的目标频率信息,以及目标频率信息对应的目标幅度信息;根据目标频率信息和目标幅度信息,确定目标尺寸以及目标帧数。
在本公开的另一实施例中,该根据目标频率信息和目标幅度信息,确定目标尺寸以及目标帧数,包括:根据目标频率信息和目标幅度信息,确定响度值;根据响度值,获取音频数据的幅度系数;根据幅度系数、响度值和初始尺寸,确定音频片段对应的目标尺寸;根据响度值,确定目标帧数。
在本公开的又一个实施例中,该根据目标频率信息和目标幅度信息,确定响度值,包括:根据预设的等响曲线,确定目标频率信息对应的加权系数;根据目标幅度信息和加权系数,确定对应采样点的加权响度值;根据各个采样点的加权响度值,确定音频片段对应的响度值。
在本公开的再一个实施例中,该根据响度值,获取音频数据的幅度系数,包括:确定各音频片段对应的响度值中的最大响度值;根据最大响度值和第一阈值,确定音频数据的幅度系数。
在本公开的再一个实施例中,该根据响度值,确定目标帧数,包括:获取音频数据对应的帧率系数;根据响度值和帧率系数,确定音频片段的音频帧数;根据音频帧数,确定目标帧数。
在本公开的再一个实施例中,该获取音频数据对应的帧率系数,包括:根据各音频片段对应的响度值中的最大响度值和预设的第二阈值,确定音频数据的帧率系数。
在本公开的再一个实施例中,该根据音频帧数,确定目标帧数,包括:获取音频片段对应的设定帧数;若音频帧数大于或等于设定帧数,则确定音频帧数为目标帧数;若音频帧数小于设定帧数,则确定设定帧数为目标帧数。
在本公开的再一个实施例中,该根据音频片段对应的目标尺寸以及目标帧数,显示音频片段对应的动画特效,包括:播放目标帧数的音频帧时,动画特效从初始尺寸逐渐扩大至目标尺寸,或者动画特效从目标尺寸逐渐缩小至初始尺寸。
在本公开的再一个实施例中,该动画特效的动画包括第一动画元素和第二动画元素,第二动画元素设置在第一动画元素的外周,第二动画元素包括预设圈数的第三动画元素,动画特效生成方法还包括:显示预设圈数的第三动画元素,其中,预设圈数的第三动画元素随着第一动画元素的变化而延迟变化,各圈第三动画元素变化的延迟时间与第三动画元素至第一动画元素的距离呈正相关。
在本公开的第二方面中,提供了一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序指令,计算机程序指令被执行时,实现如上述第一方面中任一项的动画特效生成方法。
在本公开的第三方面中,提供了一种动画特效生成装置,包括:
接收模块,用于接收面向音频数据的播放操作,音频数据包括至少一个音频片段;
获取模块,用于响应于播放操作,获取音频片段对应的目标帧数,以及播放音频片段时显示的动态特效的目标尺寸,目标尺寸和目标帧数均是根据音频片段中的属于低音设定范围的部分确定的;
第一显示模块,用于在播放音频片段时,根据音频片段对应的目标尺寸以及目标帧数,显示音频片段对应的动画特效。
在本公开的再一个实施例中,获取模块,包括:
采样单元,用于对音频片段进行采样,得到多个采样点;
变换单元,用于对多个采样点进行傅里叶变换,得到音频片段对应的频域信号,频域信号包括各采样点对应的频率信息和幅度信息;
第一确定单元,用于确定频率信号属于低音设定范围的目标频率信息,以及目标频率信息对应的目标幅度信息;
第二确定单元,用于根据目标频率信息和目标幅度信息,确定目标尺寸以及目标帧数。
在本公开的再一个实施例中,第二确定单元,包括:
第一确定子单元,用于根据目标频率信息和目标幅度信息,确定响度值;
获取子单元,用于根据响度值,获取音频数据的幅度系数;
第二确定子单元,用于根据幅度系数、响度值和初始尺寸,确定音频片段对应的目标尺寸;
第三确定子单元,用于根据响度值,确定目标帧数。
在本公开的再一个实施例中,第一确定子单元,具体用于:根据预设的等响曲线,确定目标频率信息对应的加权系数;根据目标幅度信息和加权系数,确定对应采样点的加权响度值;根据各个采样点的加权响度值,确定音频片段对应的响度值。
在本公开的再一个实施例中,获取子单元,具体用于:确定各音频片段对应的响度值中的最大响度值;根据最大响度值和第一阈值,确定音频数据的幅度系数。
在本公开的再一个实施例中,第三确定子单元,具体用于:获取音频数据对应的帧率系数;根据响度值和帧率系数,确定音频片段的音频帧数;根据音频帧数,确定目标帧数。
在本公开的再一个实施例中,第三确定子单元在获取音频数据对应的帧率系数时,具体用于:根据各音频片段对应的响度值中的最大响度值和预设的第二阈值,确定音频数据的帧率系数。
在本公开的再一个实施例中,第三确定子单元在根据音频帧数,确定目标帧数时,具体用于:获取音频片段对应的设定帧数;若音频帧数大于或等于设定帧数,则确定音频帧数为目标帧数;若音频帧数小于设定帧数,则确定设定帧数为目标帧数。
在本公开的再一个实施例中,第一显示模块,包括:显示单元,用于播放目标帧数的音频帧时,动画特效从初始尺寸逐渐扩大至目标尺寸,或者动画特效从目标尺寸逐渐缩小至初始尺寸。
在本公开的再一个实施例中,动画特效的动画包括第一动画元素和第二动画元素,第二动画元素设置在第一动画元素的外周,第二动画元素包括预设圈数的第三动画元素,动画特效生成装置还包括:第二显示模块,用于显示预设圈数的第三动画元素,其中,预设圈数的第三动画元素随着第一动画元素的变化而延迟变化,各圈第三动画元素变化的延迟时间与第三动画元素至第一动画特效的距离呈正相关。
在本公开的第四方面中,提供了一种计算设备,包括:存储器和处理器;存储器用于存储程序指令;处理器用于调用存储器中的程序指令执行如上述第一方面中任一项的动画特效生成方法。
本公开通过音频片段中属于低音设定范围的部分确定动态特效的目标尺寸,以及播放动态特效时对应的目标帧数,可以使动态特效跟随音频的低音部分进行放大缩小的律动,实现对音频的低音部分进行可视化,从而使用户在收听音频时,可以“看”到音乐,达到听觉与视觉的全新体验。
附图说明
通过参考附图阅读下文的详细描述,本公开示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中,以示例性而非限制性的方式示出了本公开的若干实施方式,其中:
图1示意性地示出了一种动画特效的显示示意图;
图2示意性地示出了根据本公开实施方式的应用场景图;
图3示意性地示出了根据本公开一实施例的动画特效生成方法的步骤流程图;
图4示意性地示出了根据本公开另一实施例的动画特效生成方法的步骤流程图;
图5示意性地示出了根据本公开一实施例的确定目标尺寸以及目标帧数的步骤流程图;
图6示意性地示出了根据本公开一实施例的动画特效显示效果的示意图;
图7示意性地示出了根据本公开一实施例的存储介质的结构示意图;
图8示意性地示出了根据本公开一实施例的动画特效生成装置的结构框图;
图9示意性地示出了根据本公开一实施例的电子设备的结构框图。
在附图中,相同或对应的标号表示相同或对应的部分。
具体实施方式
下面将参考若干示例性实施方式来描述本公开的原理和精神。应当理解,给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本公开,而并非以任何方式限制本公开的范围。相反,提供这些实施方式是为了使本公开更加透彻和完整,并且能够将本公开的范围完整地传达给本领域的技术人员。
本领域技术人员知道,本公开的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此,本公开可以具体实现为以下形式,即:完全的硬件、完全的软件(包括固件、驻留软件、微代码等),或者硬件和软件结合的形式。
根据本公开的实施方式,提出了一种动画特效生成方法、介质、装置和计算设备。
在本文中,需要理解的是,附图中的任何元素数量均用于示例而非限制,以及任何命名都仅用于区分,而不具有任何限制含义。
下面参考本公开的若干代表性实施方式,详细阐释本公开的原理和精神。
发明概述
本发明人发现,一种跟随音频(如音乐)震动的动画特效,是在一圆形区域显示不会变化的音乐封面,在圆形区域的外圈有一圈跟随音乐节奏震动的动效。参照图1,在电子设备10上播放音乐由“FJ”演唱的“My King”时,同时在电子设备10的显示界面11上显示播放音乐的相关信息以及对应的动画特效12,该动画特效包括不变化的音乐封面A,和动效B。其中,该动画特效12对于低音部分的音乐,由于没有明显的节奏,因此动效B没有区别于高音部分的动效。进而导致对于低音部分的音频,无法达到音频可视化的效果。
基于上述问题,本公开提供一种动画特效的生成方法,可以使播放低音部分的音频时,也可以显示对应的动画特效,进而提高低音部分的音频可视化的效果。
在介绍了本公开的基本原理之后,下面具体介绍本公开的各种非限制性实施方式。
应用场景总览
首先参考图2,为本公开提供的动画特效生成方法的应用场景图,具体为在图2中的电子设备20在播放由“FJ”演唱的“My King”。其中,该音乐“My King”总时长为3分44秒。在图2(a)中播放至20秒,此时对应的动画特效22为原始尺寸R1(是指动画特效22尺寸最小时的半径),在图2(b)中播放至24秒,此时对应的动画特效22为目标尺寸R2。
本公开中,示例性的,电子设备20播放的音乐从22秒至24秒的过程中,动画特效22从原始尺寸R1逐渐增大至目标尺寸R2。则在音乐从24秒至26秒的过程中,动画特效22可以从目标尺寸R2逐渐缩小至原始尺寸R1。实现低音部分的音频的可视化。
示例性方法
下面结合图2的应用场景,参考图3来描述根据本公开示例性实施方式的用于动画特效生成方法。需要注意的是,上述应用场景仅是为了便于理解本公开的精神和原理而示出,本公开的实施方式在此方面不受任何限制。相反,本公开的实施方式可以应用于适用的任何场景。
图3示出了本公开提供的一种动画特效生成方法的步骤流程图,具体包括如下步骤:
S301,接收面向音频数据的播放操作,音频数据包括至少一个音频片段。
在本公开中,用户通过显示界面选择要播放的音频数据。示例性的,在图2中,用户可以通过显示界面搜索歌曲“My King”,然后点击播放按钮,电子设备播放该歌曲“MyKing”。
在本公开中,音频数据可以只包括一个音频片段,其中,在音频数据的时长较短时,例如小于5秒时,可以使音频数据可以只包括一个音频片段,则后续对该一个音频片段进行处理。
此外,若音频片段的时长较长时,还可以将音频数据进行切分,使音频数据可以包括多个时间相同的音频片段,则后续针对每个音频片段进行处理,这样可以使每个音频片段都有对应的动画特效,进一步提高该音频数据的可视化效果。示例性的,参照图2,对于音频数据“My King”的时长为3分44秒,若一个音频片段的时长为1秒,则音频数据“My King”包括:224个音频片段。此外,也可以使切分的各音频片段的时长不同,如第一个音频片段1秒,第二个音频片段2秒,第三个音频片段3秒等。本公开实施例中可根据需要将音频数据切分成多个音频片段,在此对于音频片段的时长与个数不加以限定。
S302,响应于播放操作,获取音频片段对应的目标帧数,以及播放音频片段时显示的动态特效的目标尺寸。
其中,目标尺寸和目标帧数均是根据音频片段中的属于低音设定范围的部分确定的。
具体的,该低音设定范围的部分是指音频频率大于第一频率阈值,且小于或等于第二频率阈值的音频片段的部分。其中,第一频率阈值可以是15HZ至40HZ中的任一个数值,第二频率阈值可以是150HZ至400HZ中的任一个数值。
示例性的,将音频片段进行采样,得到多个采样点,通常为2的整数次幂,如8192。然后将该音频片段的多个采样点进行傅里叶变换,使该音频片段的时域信号转换为频域信号。然后在该频域信号中确定小于或等于200HZ,且大于20HZ的音频频率对应为音频片段中属于低音设定范围的部分。
在本公开中,可以预先根据音频片段的低音设定范围的部分,确定播放音频片段时显示的动态特效的目标尺寸以及音频片段对应的目标帧数,然后存储对应的音频片段与目标尺寸和目标帧数的对应关系。则在播放音频片段时,可以直接获取对应的目标尺寸和目标帧数。
S303,在播放音频片段时,根据音频片段对应的目标尺寸以及目标帧数,显示音频片段对应的动画特效。
其中,动画特效可以是如图2中的22,其中,动画特效的形状可以是圆形,正方形或者三角形等规则或不规则形状,在此不加以限定。本公开中以圆形举例说明。
在本公开中,动画特效具有原始尺寸,目标尺寸是指动画特效变化过程中能够达到的最大尺寸,目标帧数是指动画特效从原始尺寸逐渐增大到目标尺寸,或者从目标尺寸逐渐减小到原始尺寸,同时播放音频片段的帧数。
此外,每个音频片段对应有自身的目标尺寸和目标帧数,能够基于各音频片段显示对应的动画特效。
示例性的,若音频数据的时长为3分44秒,分割成相同时长的224个音频片段,每个音频片段的时长为1秒,每个音频片段包括60个音频帧,则播放一个音频帧需要1/60秒的时间。若第一个音频片段对应的目标尺寸是R2,目标帧数为6,则在播放第一个音频片段的前6帧音频帧时,动画特效从原始尺寸R1逐渐增大到目标尺寸R2,使用的时间为6/60秒,然后在播放第一个音频片段的第7帧至第12帧音频帧时,动画特效从目标尺寸R2逐渐减小到原始尺寸R1,也就是说,第一个音频片段对应的动画特效从原始尺寸R1逐渐增大到目标尺寸R2,再从目标尺寸R2逐渐减小到原始尺寸R1,这样5个循环后,第一音频片段也播放完成。
若第二个音频片段对应的目标尺寸是R3,目标帧数为10,则在播放第二个音频片段的前10帧音频帧时,动画特效从原始尺寸R1逐渐增大到目标尺寸R3,使用的时间为10/60秒,然后在播放第二个音频片段的第11帧至第20帧音频帧时,动画特效从目标尺寸R3逐渐减小到原始尺寸R1,也就是说,第二个音频片段对应的动画特效从原始尺寸R1逐渐增大到目标尺寸R3,在从目标尺寸R3逐渐减小到原始尺寸R1,这样3个循环后,第二音频片段也播放完成。其他音频片段采用同样的方式在播放时,同时显示动画特效。
本公开通过音频片段中低音设定范围的部分,确定目标帧数和目标尺寸,则在显示动画特效时,能够对音频片段的低音部分进行扩大缩小显示,给予用户震动的视觉感受,进而提升用户在收听音频数据时,具有很强的节奏感、互动感和趣味性。
本公开实施方式通过音频片段中属于低音设定范围的部分确定动态特效的目标尺寸,以及播放动态特效时对应的目标帧数,可以使动态特效跟随音频的低音部分进行放大缩小的律动,实现对音频的低音部分进行可视化,从而使用户在收听音频时,可以“看”到音乐,达到听觉与视觉的全新体验。
图4示出本公开提供的另一种动画特效生成方法的步骤流程图,具体包括如下步骤:
S401,接收面向音频数据的播放操作,音频数据包括至少一个音频片段。
该步骤的具体实现方式参照S301,在此不再赘述。
S402,响应于播放操作,对音频片段进行采样,得到多个采样点。
其中,对音频片段进行采样,得到了音频片段对应的时域信号。此外,采样的数量可以根据需要确定,通常为2的整数次幂。
S403,对多个采样点进行傅里叶变换,得到音频片段对应的频域信号。
其中,频域信号包括各采样点对应的频率信息和幅度信息。
在本公开中,可以通过调用快速傅里叶算法,对采样点进行傅里叶变换,将音频片段的时域信号转换为频域信号。频域信号是指多个采样点对应的频域信号。
S404,确定频率信号属于低音设定范围的目标频率信息,以及目标频率信息对应的目标幅度信息。
其中,将频域信号中的频率信息小于或等于第二频率阈值(可以是150HZ至400HZ中的任一个数值),且大于第一频率阈值(可以是15HZ至40HZ中的任一个数值)的频率信号确定为目标频率信息。其中,包括多个目标采样点的目标频率信息。
进一步的,目标采样点包括其对应的目标频率信息和目标幅度信息。以此,确定与目标频率信息属于同一目标采样点的目标幅度信息,得到多组目标频率信息和目标幅度信息。
S405,根据目标频率信息和目标幅度信息,确定目标尺寸以及目标帧数。
在本公开中,参照图5,S405具体包括以下步骤:
S4051,根据目标频率信息和目标幅度信息,确定响度值。
具体的,根据目标频率信息和目标幅度信息,确定响度值,包括:根据预设的等响曲线,确定目标频率信息对应的加权系数;根据目标幅度信息和加权系数,确定对应采样点的加权响度值;根据各个采样点的加权响度值,确定音频片段对应的响度值。
在本公开中,等响曲线是指通过主观测定所得出的声音响度主观感量(响度级)相等的一簇曲线。当某一声音的响度与标准音的响度相同时,标准音的这个声强级就是该声音的响度级。便建立了响度和响度值理论,并用实验方法测出感觉一样响的声音,绘成的一组曲线即称为等响曲线,其中每一条曲线都标志出具有同样响度的声音,即相当于一定响度级的声音。
其中,在等响曲线上,不同的目标频率信息对应的加权系数不同,其中,随着目标频率信息的增大,加权系数增大。例如,对于40方的等响区域,目标频率信息为20HZ时,对应的加权系数为1,目标频率信息为50HZ时,对应的加权系数为100。
具体的,确定各个目标采样点的目标幅度信息t和目标频率信息f。根据等响曲线,确定目标频率信息f对应的加权系数n。然后根据目标幅度信息t和加权系数n,确定对应采样点的加权响度值D=t×n。
进一步的,对应采样点是指目标频率信息对应的采样点,即上述目标采样点。响度值N是各个目标采样点的加权响度值D的和,示例性的,各个目标采样点的加权响度值分别为D1,D2,…DM,M为正整数。则N=D1+D2+…+DM
在本公开中,每个音频片段对应一个响度值N。示例性的,若音频数据包括224个音频片段,则音频数据对应有224个响度值。
S4052,根据响度值,获取音频数据的幅度系数。
其中,根据响度值,获取音频数据的幅度系数,包括:确定各音频片段对应的响度值中的最大响度值;根据最大响度值和第一阈值,确定音频数据的幅度系数。
具体的,比较各音频片段对应的响度值N的大小,从中选取最大响度值Nmax。其中,第一阈值是预设的值,可以设定第一阈值x小于1,例如取第一阈值x为0.5。则幅度系数m可根据需要取值为小于或等于x/Nmax,在本公开实施例中取m=x/Nmax进行示例。
在本公开中,每个音频数据具有对应的幅度系数,则音频数据切分后的各音频片段对应的幅度系数相同。
S4053,根据幅度系数、响度值和初始尺寸,确定音频片段对应的目标尺寸。
其中,目标尺寸R2=R1×(1+N×m)。其中,R1为动画特效的初始尺寸。
示例性的,在本公开中音频数据包括224个音频片段,每个音频片段具有自身对应的响度值N,同一音频数据的各音频片段对应同一幅度系数m。则当第一阈值x为0.5时,响度值N最大的音频片段对应的目标尺寸R2最大为1.5倍的R1。则可以理解,响度值越大的音频片段的动画特效能够增大到的目标尺寸越大,进一步提高动画特效随音频响度震动的节奏感,增强用户体验。
S4054,根据响度值,确定目标帧数。
其中,根据响度值,确定目标帧数,包括:获取音频数据对应的帧率系数;根据响度值和帧率系数,确定音频片段的音频帧数;根据音频帧数,确定目标帧数。
进一步的,获取音频数据对应的帧率系数,包括:根据各音频片段对应的响度值中的最大响度值Nmax和预设的第二阈值y,确定音频数据的帧率系数s。
在本公开中,每个音频数据具有对应的帧率系数,则音频数据切分后的各音频片段对应的帧率系数相同。
其中,第二阈值y是预先设置的数值,如10。其中,帧率系数s小于或等于y/Nmax。在本公开采用s=y/Nmax进行示例性描述。则各音频片段对应的音频帧数V1=N×s,其中V1为小于或等于第二阈值y的整数。
具体的,根据音频帧数,确定目标帧数,包括:获取音频片段对应的设定帧数;若音频帧数大于或等于设定帧数,则确定音频帧数为目标帧数;若音频帧数小于设定帧数,则确定设定帧数为目标帧数。
其中,设定帧数V0可预先设定为大于或等于1的整数,如取4。则目标帧数V=MAX(V0,V1)。其中,目标帧数取设定帧数和音频帧数中的较大值。进而可以保证在音频片段的响度值非常小时,依旧可以使动画特效有明显的变化。
S406,播放目标帧数的音频帧时,动画特效从初始尺寸逐渐扩大至目标尺寸,或者动画特效从目标尺寸逐渐缩小至初始尺寸。
具体的,动画特效在一个变化范围内,对应播放目标帧数的音频帧。其中,一个变化范围是指动画特效从初始尺寸逐渐扩大至目标尺寸或者动画特效从目标尺寸逐渐缩小至初始尺寸。
示例性的,若第一音频片段对应的目标帧数是6帧,则在播放第一音频片段时,动画特效的一个变化范围,对应播放6帧音频帧。若第二音频片段对应的目标帧数是10帧,则在播放第二音频片段时,动画特效的一个变化范围,对应播放10帧音频帧。若第三音频片段对应的目标帧数是4帧,则在播放第三音频片段时,动画特效的一个变化范围,对应播放4帧音频帧。
进一步的,参照图6,动画特效22的动画包括第一动画元素221和第二动画元素222,第二动画元素222设置在第一动画元素221的外周,第二动画元素222包括预设圈数的第三动画元素(C1、C2和C3),动画特效生成方法还包括:显示预设圈数的第三动画元素,其中,预设圈数的第三动画元素随着第一动画元素的变化而延迟变化,各圈第三动画元素变化的延迟时间与第三动画元素至第一动画元素的距离呈正相关。
其中,各第三动画元素的延迟时间可以预先设置为0至1秒。示例性的,第三动画元素C1的延迟时间为0.05秒,则在第一动画元素开始扩大或缩小0.05秒后,第三动画元素C1开始跟随变化。第三动画元素C2的延迟时间为0.1秒,则在第一动画元素开始扩大或缩小0.1秒后,第三动画元素C2开始跟随变化。第三动画元素C3的延迟时间为0.15秒,则在第一动画元素开始扩大或缩小0.15秒后,第三动画元素C3开始跟随变化。
在本公开中,第一动画元素221按照S406的方式显示。第二动画元素222随着第一动画元素221的扩大延迟扩大,或者第二动画元素222随着第一动画元素221的缩小延迟缩小,进而达到类似水波纹涟漪的效果,丰富动画特效的显示效果。
本公开实施方式通过音频片段中属于低音设定范围的部分确定动态特效的目标尺寸,以及播放动态特效时对应的目标帧数,可以使动态特效跟随音频的低音部分进行放大缩小的律动,实现对音频的低音部分进行可视化,从而使用户在收听音频时,可以“看”到音乐,达到听觉与视觉的全新体验。
示例性介质
在介绍了本公开示例性实施方式的方法之后,接下来,参考图7对本公开示例性实施方式的存储介质进行说明。
参考图7所示,描述了根据本公开的实施方式的用于实现上述方法的程序产品70,其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本公开的程序产品不限于此。
程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质。
可以以一种或多种程序设计语言的任意组合来编写用于执行本公开公开操作的程序代码,程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备。
示例性装置
在介绍了本公开示例性实施方式的介质之后,接下来,参考图8对本公开示例性实施方式的动画特效生成装置进行说明。
图8示出本公开提供的一种动画特效生成装置80的结构框图,该动画特效生成装置80包括:接收模块81,获取模块82和第一显示模块83。其中:
接收模块81,用于接收面向音频数据的播放操作,音频数据包括至少一个音频片段;
获取模块82,用于响应于播放操作,获取音频片段对应的目标帧数,以及播放音频片段时显示的动态特效的目标尺寸,目标尺寸和目标帧数均是根据音频片段中的属于低音设定范围的部分确定的;
第一显示模块83,用于在播放音频片段时,根据音频片段对应的目标尺寸以及目标帧数,显示音频片段对应的动画特效。
在本公开的一个实施例中,获取模块82,包括:
采样单元,用于对音频片段进行采样,得到多个采样点;
变换单元,用于对多个采样点进行傅里叶变换,得到音频片段对应的频域信号,频域信号包括各采样点对应的频率信息和幅度信息;
第一确定单元,用于确定频率信号属于低音设定范围的目标频率信息,以及目标频率信息对应的目标幅度信息;
第二确定单元,用于根据目标频率信息和目标幅度信息,确定目标尺寸以及目标帧数。
在本公开的一个实施例中,第二确定单元,包括:
第一确定子单元,用于根据目标频率信息和目标幅度信息,确定响度值;
获取子单元,用于根据响度值,获取音频数据的幅度系数;
第二确定子单元,用于根据幅度系数、响度值和初始尺寸,确定音频片段对应的目标尺寸;
第三确定子单元,用于根据响度值,确定目标帧数。
在本公开的再一个实施例中,第一确定子单元,具体用于:根据预设的等响曲线,确定目标频率信息对应的加权系数;根据目标幅度信息和加权系数,确定对应采样点的加权响度值;根据各个采样点的加权响度值,确定音频片段对应的响度值。
在本公开的再一个实施例中,获取子单元,具体用于:确定各音频片段对应的响度值中的最大响度值;根据最大响度值和第一阈值,确定音频数据的幅度系数。
在本公开的再一个实施例中,第三确定子单元,具体用于:获取音频数据对应的帧率系数;根据响度值和帧率系数,确定音频片段的音频帧数;根据音频帧数,确定目标帧数。
在本公开的再一个实施例中,第三确定子单元在获取音频数据对应的帧率系数时,具体用于:根据各音频片段对应的响度值中的最大响度值和预设的第二阈值,确定音频数据的帧率系数。
在本公开的再一个实施例中,第三确定子单元在根据音频帧数,确定目标帧数时,具体用于:获取音频片段对应的设定帧数;若音频帧数大于或等于设定帧数,则确定音频帧数为目标帧数;若音频帧数小于设定帧数,则确定设定帧数为目标帧数。
在本公开的再一个实施例中,第一显示模块83,包括:显示单元,用于播放目标帧数的音频帧时,动画特效从初始尺寸逐渐扩大至目标尺寸,或者动画特效从目标尺寸逐渐缩小至初始尺寸。
在本公开的再一个实施例中,动画特效的动画包括第一动画元素和第二动画元素,第二动画元素设置在第一动画元素的外周,第二动画元素包括预设圈数的第三动画元素,动画特效生成装置80还包括:第二显示模块(未示出),用于显示预设圈数的第三动画元素,其中,预设圈数的第三动画元素随着第一动画元素的变化而延迟变化,各圈第三动画元素变化的延迟时间与第三动画元素至第一动画特效的距离呈正相关。
本公开提供的多媒体处理装置可以执行图3和/或图4所示的多媒体处理方法,具体内容参照上述多媒体处理方法的说明,在此不再赘述。
示例性计算设备
在介绍了本公开示例性实施方式的方法、介质和装置之后,接下来,参考图9对本公开示例性实施方式的计算设备进行说明。
图9显示的计算设备90仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图9所示,计算设备90以通用计算设备的形式表现。计算设备90的组件可以包括但不限于:上述至少一个处理单元91、上述至少一个存储单元92,连接不同系统组件(包括处理单元91和存储单元92)的总线93。
总线93包括数据总线、控制总线和地址总线。
存储单元92可以包括易失性存储器形式的可读介质,例如随机存取存储器(RAM)921和/或高速缓存存储器922,可以进一步包括非易失性存储器形式的可读介质,例如只读存储器(ROM)923。
存储单元92还可以包括具有一组(至少一个)程序模块924的程序/实用工具925,这样的程序模块924包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
计算设备90也可以与一个或多个外部设备94(例如键盘、指向设备等)通信。这种通信可以通过输入/输出(I/O)接口95进行。并且,计算设备90还可以通过网络适配器96与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图9所示,网络适配器96通过总线93与计算设备90的其它模块通信。应当理解,尽管图中未示出,可以结合计算设备90使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
应当注意,尽管在上文详细描述中提及了动效生成装置的若干单元/模块或子单元/模块,但是这种划分仅仅是示例性的并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多单元/模块的特征和功能可以在一个单元/模块中具体化。反之,上文描述的一个单元/模块的特征和功能可以进一步划分为由多个单元/模块来具体化。
此外,尽管在附图中以特定顺序描述了本公开方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
虽然已经参考若干具体实施方式描述了本公开的精神和原理,但是应该理解,本公开并不限于所公开的具体实施方式,对各方面的划分也不意味着这些方面中的特征不能组合以进行受益,这种划分仅是为了表述的方便。本公开旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。

Claims (10)

1.一种动画特效生成方法,包括:
接收面向音频数据的播放操作,所述音频数据包括至少一个音频片段;
响应于所述播放操作,获取所述音频片段对应的目标帧数,以及播放所述音频片段时显示的动态特效的目标尺寸,所述目标尺寸和所述目标帧数均是根据所述音频片段中的属于低音设定范围的部分确定的;
在播放所述音频片段时,根据所述音频片段对应的目标尺寸以及目标帧数,显示所述音频片段对应的动画特效。
2.根据权利要求1所述的动画特效生成方法,所述获取所述音频片段对应的目标帧数,以及播放所述音频片段时显示的动态特效的目标尺寸,包括:
对所述音频片段进行采样,得到多个采样点;
对所述多个采样点进行傅里叶变换,得到所述音频片段对应的频域信号,所述频域信号包括各采样点对应的频率信息和幅度信息;
确定所述频率信号属于所述低音设定范围的目标频率信息,以及所述目标频率信息对应的目标幅度信息;
根据所述目标频率信息和目标幅度信息,确定所述目标尺寸以及所述目标帧数。
3.根据权利要求2所述的动画特效生成方法,所述根据所述目标频率信息和目标幅度信息,确定所述目标尺寸以及所述目标帧数,包括:
根据所述目标频率信息和目标幅度信息,确定响度值;
根据所述响度值,获取所述音频数据的幅度系数;
根据所述幅度系数、所述响度值和初始尺寸,确定所述音频片段对应的目标尺寸;
根据所述响度值,确定所述目标帧数。
4.根据权利要求3所述的动画特效生成方法,所述根据所述目标频率信息和目标幅度信息,确定响度值,包括:
根据预设的等响曲线,确定所述目标频率信息对应的加权系数;
根据所述目标幅度信息和所述加权系数,确定对应采样点的加权响度值;
根据各个采样点的加权响度值,确定所述音频片段对应的响度值。
5.根据权利要求3所述的动画特效生成方法,所述根据所述响度值,获取所述音频数据的幅度系数,包括:
确定各音频片段对应的响度值中的最大响度值;
根据所述最大响度值和第一阈值,确定所述音频数据的幅度系数。
6.根据权利要求3所述的动画特效生成方法,所述根据所述响度值,确定所述目标帧数,包括:
获取所述音频数据对应的帧率系数;
根据所述响度值和所述帧率系数,确定所述音频片段的音频帧数;
根据所述音频帧数,确定所述目标帧数。
7.根据权利要求1至6任一项所述的动画特效生成方法,所述根据所述音频片段对应的目标尺寸以及目标帧数,显示所述音频片段对应的动画特效,包括:
播放所述目标帧数的音频帧时,所述动画特效从初始尺寸逐渐扩大至所述目标尺寸,或者所述动画特效从所述目标尺寸逐渐缩小至所述初始尺寸。
8.一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序指令,所述计算机程序指令被执行时,实现如权利要求1至7中任一项所述的动画特效生成方法。
9.一种动画特效生成装置,包括:
接收模块,用于接收面向音频数据的播放操作,所述音频数据包括至少一个音频片段;
获取模块,用于响应于所述播放操作,获取所述音频片段对应的目标帧数,以及播放所述音频片段时显示的动态特效的目标尺寸,所述目标尺寸和所述目标帧数均是根据所述音频片段中的属于低音设定范围的部分确定的;
第一显示模块,用于在播放所述音频片段时,根据所述音频片段对应的目标尺寸以及目标帧数,显示所述音频片段对应的动画特效。
10.一种计算设备,包括:存储器和处理器;
所述存储器用于存储程序指令;
所述处理器用于调用所述存储器中的程序指令执行如权利要求1至7中任一项所述的动画特效生成方法。
CN202111223346.4A 2021-10-20 2021-10-20 动画特效生成方法、介质、装置和计算设备 Pending CN113920225A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111223346.4A CN113920225A (zh) 2021-10-20 2021-10-20 动画特效生成方法、介质、装置和计算设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111223346.4A CN113920225A (zh) 2021-10-20 2021-10-20 动画特效生成方法、介质、装置和计算设备

Publications (1)

Publication Number Publication Date
CN113920225A true CN113920225A (zh) 2022-01-11

Family

ID=79241697

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111223346.4A Pending CN113920225A (zh) 2021-10-20 2021-10-20 动画特效生成方法、介质、装置和计算设备

Country Status (1)

Country Link
CN (1) CN113920225A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024077492A1 (zh) * 2022-10-11 2024-04-18 广州酷狗计算机科技有限公司 播放界面的显示方法、装置、设备、介质及程序产品
WO2024082083A1 (zh) * 2022-10-17 2024-04-25 广州酷狗计算机科技有限公司 特效显示方法、装置、终端设备及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024077492A1 (zh) * 2022-10-11 2024-04-18 广州酷狗计算机科技有限公司 播放界面的显示方法、装置、设备、介质及程序产品
WO2024082083A1 (zh) * 2022-10-17 2024-04-25 广州酷狗计算机科技有限公司 特效显示方法、装置、终端设备及存储介质

Similar Documents

Publication Publication Date Title
JP7387891B2 (ja) 動画ファイルの生成方法、装置、端末及び記憶媒体
JP6026751B2 (ja) 振幅値を利用した音響−触覚効果変換システム
CN113920225A (zh) 动画特效生成方法、介质、装置和计算设备
EP1915027B1 (en) Audio reproducing apparatus
US10559323B2 (en) Audio and video synchronizing perceptual model
US8204239B2 (en) Audio processing method and audio processing apparatus
CN107168518B (zh) 一种用于头戴显示器的同步方法、装置及头戴显示器
EP2487557A2 (en) Sound to haptic effect conversion system using amplitude value
WO2020113733A1 (zh) 动画生成方法、装置、电子设备及计算机可读存储介质
JP2019204074A (ja) 音声対話方法、装置及びシステム
EP2624099A1 (en) Sound to haptic effect conversion system using waveform
WO2022001027A1 (zh) 网络教学中投屏画面自适应的方法以及装置
JP2019015951A (ja) 電子機器のウェイクアップ方法、装置、デバイス及びコンピュータ可読記憶媒体
WO2023051293A1 (zh) 一种音频处理方法、装置、电子设备和存储介质
WO2020097824A1 (zh) 音频处理方法、装置、存储介质及电子设备
CN112822431A (zh) 一种私密音视频通话的方法与设备
CN108829370B (zh) 有声资源播放方法、装置、计算机设备及存储介质
CN110704015A (zh) 音频播放的调速方法、存储介质及电子设备
CN113641330A (zh) 录音控制方法及装置、计算机可读介质、电子设备
CN113031907A (zh) 音效参数生成方法及装置、存储介质、电子设备
CN112433697B (zh) 一种资源展示方法、装置、电子设备及存储介质
JP2022095689A (ja) 音声データノイズ低減方法、装置、機器、記憶媒体及びプログラム
CN113395577A (zh) 变声播放方法和装置、存储介质及电子设备
CN109495786B (zh) 视频处理参数信息的预配置方法、装置及电子设备
CN111147655A (zh) 模型生成方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination