CN109599083B - 用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质 - Google Patents
用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN109599083B CN109599083B CN201910055029.2A CN201910055029A CN109599083B CN 109599083 B CN109599083 B CN 109599083B CN 201910055029 A CN201910055029 A CN 201910055029A CN 109599083 B CN109599083 B CN 109599083B
- Authority
- CN
- China
- Prior art keywords
- audio
- sound
- spectrum
- energy
- different
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 26
- 238000001228 spectrum Methods 0.000 claims abstract description 205
- 238000012545 processing Methods 0.000 claims abstract description 127
- 230000000694 effects Effects 0.000 claims abstract description 33
- 238000000034 method Methods 0.000 claims abstract description 25
- 230000000007 visual effect Effects 0.000 claims abstract description 17
- 230000008859 change Effects 0.000 claims description 62
- 150000002500 ions Chemical class 0.000 claims description 60
- 230000003595 spectral effect Effects 0.000 claims description 19
- 238000010586 diagram Methods 0.000 claims description 11
- 239000002245 particle Substances 0.000 claims description 8
- 238000000059 patterning Methods 0.000 claims description 8
- 230000005236 sound signal Effects 0.000 claims description 7
- 230000003044 adaptive effect Effects 0.000 claims description 6
- 238000004891 communication Methods 0.000 claims description 4
- 238000003384 imaging method Methods 0.000 claims description 2
- 230000008030 elimination Effects 0.000 claims 2
- 238000003379 elimination reaction Methods 0.000 claims 2
- 239000000126 substance Substances 0.000 claims 1
- 230000008569 process Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 2
- 235000019800 disodium phosphate Nutrition 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000002829 reductive effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000003313 weakening effect Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
- G10H1/366—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems with means for modifying or correcting the external signal, e.g. pitch correction, reverberation, changing a singer's voice
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
- G10L21/10—Transforming into visible information
- G10L21/12—Transforming into visible information by displaying time domain information
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/005—Non-interactive screen display of musical or status data
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
本申请公开了一种用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质。该方法包括接收混音处理指令；根据所述混音处理指令生成声音频谱线；以及根据所述声音频谱线生成对应的音频能量，以使所述音频能量在唱歌应用中通过可视化图形进行显示。本申请解决了缺少针对于音频数据处理后的音频能量进行直观显示的功能的的技术问题。本申请中采用音频离子的方式对混音处理结果进行展示，从而使得处理效果比较直观进行体现。
Description
技术领域
本申请涉及音频数据处理领域，具体而言，涉及一种用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质。
背景技术
唱歌应用，是指可以在手机终端上使用的计算机应用程序。通过唱歌应用提供的伴奏用户可以进行演唱录制等。
发明人发现，目前的唱歌应用中缺少针对于音频数据处理后的音频能量进行直观显示的功能。进一步，无法获知经过混音、母带处理后的效果，用户体验较差。
针对相关技术中缺少针对于音频数据处理后的音频能量进行直观显示的功能的问题，目前尚未提出有效的解决方案。
发明内容
本申请的主要目的在于提供一种用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质，以解决缺少针对于音频数据处理后的音频能量进行直观显示的功能的问题。
为了实现上述目的，根据本申请的一个方面，提供了一种用于唱歌应用的音频数据处理方法。
根据本申请的用于唱歌应用的音频数据处理方法包括：接收混音处理指令；根据所述混音处理指令生成声音频谱线；以及根据所述声音频谱线生成对应的音频能量，以使所述音频能量在唱歌应用中通过可视化图形进行显示。
进一步地，根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量包括：获取所述声音频谱线在不同时刻时的变化幅度；以及根据所述变化幅度生成不同密度的音频能量，以使所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行显示。
进一步地，根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量包括：获取所述声音频谱线在不同时刻时的变化速度；以及根据所述变化速度生成不同速度的音频能量，以使所述声音频谱线在唱歌应用中通过不同速度的能量离子点状图形进行显示。
进一步地，根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量包括：通过预先配置在所述唱歌应用中的音效调节区域显示用于接收混音处理指令的混音开关插件；当检测到所述混音开关插件为打开状态时，则根据所述声音频谱生成对应的音频谱展区域；根据所述声音频谱线生成对应的音频能量之后还包括：检测到所述混音开关插件为打开状态且生成滑动条关联控件；根据检测到所述滑动条关联控件的调节混音处理不同强度变化，根据所述声音频谱生成对应的音频谱展区域的变换速度变化显示，以使所述音频能量在唱歌应用中执行不同强度变化混音调节指令时通过可视化图形进行显示。
进一步地，接收混音处理指令之前还包括：接收音频数据，其中，所述音频数据用于作为用户输入到唱歌应用中的人声音频信号；根据所述音频数据生成第一声音频谱，其中，所述第一声音频谱用于显示原始声音的频谱波形；接收混音处理指令之后还包括：根据所述混音处理指令生成第二声音频谱，其中，所述第二声音频谱用于显示混音处理后声音的频谱波形；以及获取所述第一声音频谱和所述第二声音频谱的波形数据，以使在所述唱歌应用中执行所述混音处理指令前后的所述音频数据在同一显示界面通过波形图向用户进行实时显示。
为了实现上述目的，根据本申请的另一方面，提供了一种用于唱歌应用的音频数据处理装置。
根据本申请的用于唱歌应用的音频数据处理装置包括：接受模块，用于接收混音处理指令；音频谱生成模块，用于根据所述混音处理指令生成声音频谱线；音频能量图形化模块，根据所述声音频谱线生成对应的音频能量，以使所述音频能量在唱歌应用中通过可视化图形进行显示。
进一步地，所述音频能量图形化模块包括：幅度变化单元，用于获取所述声音频谱线在不同时刻的变化幅度；粒子能量密度单元，用于根据所述变化幅度生成不同密度的音频能量，以使所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行显示。
进一步地，所述音频能量图形化模块包括：速度变化单元，用于获取所述声音频谱线在不同时刻时的变化速度；粒子能量速度单元，用于根据所述变化速度生成不同速度的音频能量，以使所述声音频谱线在唱歌应用中通过不同速度的能量离子点状图形进行显示。
为了实现上述目的，根据本申请的又一方面，提供了子设备，其特征在于，包括：至少一个处理器；以及与所述处理器连接的至少一个存储器、总线；其中，所述处理器、存储器通过所述总线完成相互间的通信；所述处理器用于调用所述存储器中的程序指令，以执行项所述的音频数据处理方法。
为了实现上述目的，根据本申请的再一方面，提供了非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行所述的音频数据处理方法。
在本申请实施例中用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质，采用接收混音处理指令的方式，通过根据所述混音处理指令生成声音频谱线，达到了根据所述声音频谱线生成对应的音频能量，以使所述音频能量在唱歌应用中通过可视化图形进行显示的目的，从而实现了音频能量转化为点状图的技术效果，进而解决了缺少针对于音频数据处理后的音频能量进行直观显示的功能的技术问题。此外，由于采用音频离子的方式对混音处理结果进行展示，从而使得处理效果比较直观进行体现。而将音频离子的多少和运动速度与音频频谱速度和幅度相关进行显示，提升显示效果。展示效果更佳动感，能提升用户对于混音处理效果的体验。
附图说明
构成本申请的一部分的附图用来提供对本申请的进一步理解，使得本申请的其它特征、目的和优点变得更明显。本申请的示意性实施例附图及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：
图1是根据本申请第一实施例的用于唱歌应用的音频数据处理方法流程示意图；
图2是根据本申请第二实施例的用于唱歌应用的音频数据处理方法流程示意图；
图3是根据本申请第三实施例的用于唱歌应用的音频数据处理方法流程示意图；
图4是根据本申请第四实施例的用于唱歌应用的音频数据处理方法流程示意图；
图5是根据本申请第五实施例的用于唱歌应用的音频数据处理方法流程示意图；
图6是根据本申请第一实施例的用于唱歌应用的音频数据处理装置结构示意图；
图7是根据本申请第二实施例的用于唱歌应用的音频数据处理装置结构示意图；
图8是根据本申请第三实施例的用于唱歌应用的音频数据处理装置结构示意图；
图9是根据本申请实施例的电子设备结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本申请中，术语“上”、“下”、“左”、“右”、“前”、“后”、“顶”、“底”、“内”、“外”、“中”、“竖直”、“水平”、“横向”、“纵向”等指示的方位或位置关系为基于附图所示的方位或位置关系。这些术语主要是为了更好地描述本申请及其实施例，并非用于限定所指示的装置、元件或组成部分必须具有特定方位，或以特定方位进行构造和操作。
并且，上述部分术语除了可以用于表示方位或位置关系以外，还可能用于表示其他含义，例如术语“上”在某些情况下也可能用于表示某种依附关系或连接关系。对于本领域普通技术人员而言，可以根据具体情况理解这些术语在本申请中的具体含义。
此外，术语“安装”、“设置”、“设有”、“连接”、“相连”、“套接”应做广义理解。例如，可以是固定连接，可拆卸连接，或整体式构造；可以是机械连接，或电连接；可以是直接相连，或者是通过中间媒介间接相连，又或者是两个装置、元件或组成部分之间内部的连通。对于本领域普通技术人员而言，可以根据具体情况理解上述术语在本申请中的具体含义。
需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
如图1所示，该方法包括如下的步骤S102至步骤S106：
步骤S102，接收混音处理指令；
在预先安装唱歌应用的终端上接收到混音处理指令是指，当接收到相关处理指令后会触发通过预先配置的混音处理操作。
具体地，当终端通过唱歌应用接收到人声音频信号以后，用户完成歌曲的录制以后，需要进行混音操作时会通过终端接收到混音处理指令。
需要注意的是，接收的混音处理指令中可以包含对于伴奏音频的混音处理过程，消除回声、去除鼻音、去除齿音、自适应母带处理、在音频时域上自适应混响等混音处理步骤，在本申请中并不进行限定，只要能够满足混音处理指令即可。
具体地，可以通过在唱歌应用中将上述混音处理操作封装配置成音频处理算法，并通过唱歌应用执行。
步骤S104，根据所述混音处理指令生成声音频谱线；
声音频谱线用于显示混音处理后声音的频谱波形。对于得到的第声音频谱线通常可以存放至终端进行后续调用。
通过所述混音处理指令在终端生成声音频谱线，并且可以根据每次选择的歌曲的对混音处理后的结果进行实时显示变化。
步骤S106，根据所述声音频谱线生成对应的音频能量，以使所述音频能量在唱歌应用中通过可视化图形进行显示。
当所述声音频谱线在不同波动状态下时，并根据不同变化程度生成具有投射处理效果的对应音频能量。即在终端的唱歌应用上生成对应的音频数据能量离子并能够展示出音频数据能量离子的变化效果，以使所述音频能量在唱歌应用中通过可视化图形进行显示。
具体地，每当声音频谱的线条在不同波动状态下时会呈现“发射”能量离子的作用效果。需要注意的是呈现“发射”的作用效果仅仅是一种本申请中的实现方式，还可以包括多种可行的实施方式，只要满足对音频数据能量离子的处理效果即可，在本申请中并不进行限定。
从以上的描述中，可以看出，本申请实现了如下技术效果：
在本申请实施例中用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质，采用接收混音处理指令的方式，通过根据所述混音处理指令生成声音频谱线，达到了根据所述声音频谱线生成对应的音频能量，以使所述音频能量在唱歌应用中通过可视化图形进行显示的目的，从而实现了音频能量转化为点状图的技术效果，进而解决了缺少针对于音频数据处理后的音频能量进行直观显示的功能的技术问题。
根据本申请实施例，作为本实施例中的优选，如图2所示，根据所述声音频谱线生成对应的音频能量包括：
步骤S202，获取所述声音频谱线在不同时刻时的变化幅度；以及
根据所述声音频谱线在不同时刻时的不同变化程度可以进一步获取声音频谱线在不同时刻的变化幅度。
需要注意的是，可采用多种方式获取声音频谱线处在不同时刻时的变化幅度。在本申请中并不进行限定，只要符合获取所述声音频谱线在不同时刻时的变化幅度的要求即可。
步骤S204，根据所述变化幅度生成不同密度的音频能量，以使所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行显示。
根据声音频谱线在不同时刻时的变化幅度，可以生成不同密度的音频能量。通过所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行相应的显示。
需要注意的是，由于音频能量离子的密度跟音频谱线的变化幅度有关，当变化幅度大则发射的离子多，最终所有的音频能量离子都收集到音谱线上方的歌曲时间轴中。通过在展示音谱曲线时加入音频能量离子处理效果，在终端的用户可以更加清晰地区分原声的谱线和处理后谱线的差异。
根据本申请实施例，作为本实施例中的优选，如图3所示，根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量包括：
步骤S302，获取所述声音频谱线在不同时刻时的变化速度；以及
根据所述声音频谱线在不同时刻时的不同变化速度可以进一步获取声音频谱线在不同时刻时的变化速度。
需要注意的是，可采用多种方式获取声音频谱线处在不同时刻时的变化速度。在本申请中并不进行限定，只要符合获取所述声音频谱线在不同时刻时的变化速度的要求即可。
步骤S304，根据所述变化速度生成不同速度的音频能量，以使所述声音频谱线在唱歌应用中通过不同速度的能量离子点状图形进行显示。
根据声音频谱线在不同时刻时的变化速度，可以生成不同速度的音频能量。通过所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行相应的显示。
需要注意的是，由于音频能量离子的速度跟音频谱线的变化幅度有关，当变化速度快则离子的运动速度快，最终所有的音频能量离子都收集到音谱线上方的歌曲时间轴中。通过在展示音谱曲线时加入音频能量离子处理效果，在终端的用户可以更加清晰地区分原声的谱线和处理后谱线的差异。
根据本申请实施例，作为本实施例中的优选，如图4所示，根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量包括：
步骤S402，通过预先配置在所述唱歌应用中的音效调节区域显示用于接收混音处理指令的混音开关插件；
接收到的混音处理指令是指，通过在唱歌应用中预先配置的音效调节区域中，可以显示当终端接收到混音处理指令后的混音开关插件。进而，用户通过终端唱歌应用中的混音开关插件可以选择打开或者关闭混音处理。
步骤S404，当检测到所述混音开关插件为打开状态时，则根据所述声音频谱生成对应的音频谱展区域；
当混音开关插件为打开状态时，则根据所述声音频谱生成对应的音频谱展区域。
根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量之后还包括：
步骤S406，检测到所述混音开关插件为打开状态且生成滑动条关联控件；
当混音开关插件为打开状态且生成滑动条关联控件时，可以通过所述滑动条关联控件调节混音处理的强度，并根据声音频谱生成对应的音频谱展区域。通过声音频谱的变化程度生成对应的音频谱展区域。优选地，声音频谱的变化程度可以通过音频数据能量离子进行音频数据处理显示，当所述声音频谱变化不同波形状态时，生成对应的音频数据能量离子；并收集所述音频数据能量离子并保存在当前音频数据播放的时间轴中，以使在所述唱歌应用中执行所述混音处理指令时，将音频数据能量离子通过可视化点状图形在时间轴上向用户进行实时显示。
步骤S408，根据检测到所述滑动条关联控件的调节混音处理不同强度变化，根据所述声音频谱生成对应的音频谱展区域的变换速度变化显示，以使所述音频能量在唱歌应用中执行不同强度变化混音调节指令时通过可视化图形进行显示。
当检测到所述滑动条关联控件的调节混音处理强度为增强时，则所述根据所述声音频谱生成对应的音频谱展区域的变换速度加快显示，以使在所述唱歌应用中执行增强混音调节指令时实时显示变化波形图；当检测到所述滑动条关联控件的调节混音处理强度为减弱时，则所述根据所述声音频谱生成对应的音频谱展区域的变换速度减慢显示，以使在所述唱歌应用中执行减弱混音调节指令时实时显示变化波形图。
具体地，当通过唱歌应用中的混音处理的强度调节滑动条配置控件，调节处理强度时，可以根据情况增强或减弱混音处理的强度。从而，对应的声音频谱曲线也会跟着变化，同时音频数据能量离子效果也会跟着变化。如果强度越强幅度变化越大，变化速度也会加快，反之则减小和变慢。
根据本申请实施例，作为本实施例中的优选，如图5所示，接收混音处理指令之前还包括：
步骤S502，接收音频数据，
所述音频数据用于作为用户输入到唱歌应用中的人声音频信号。
通常在唱歌应用中带有伴奏音频，通过接收音频数据能够得到人声音频。
通常可以通过终端设备上的麦克风进行采集接收，并将音频数据在后台服务器进行存放，用于后续的调用。
步骤S504，根据所述音频数据生成第一声音频谱，
所述第一声音频谱用于显示原始声音波形。
具体地，可以在预先安装唱歌应用的终端上根据音频数据生成声音频谱。需要注意的是，根据音频数据生成声音频谱的方式可以包括多种，在本申请的实施例中并不进行限定。
当在终端根据音频数据生成第一声音频谱后，通常可以保存在终端本地，便于后续的调用。
接收混音处理指令之后还包括：
步骤S506，根据所述混音处理指令生成第二声音频谱，其中，所述第二声音频谱用于显示混音处理后声音波形；以及
所述第二声音频谱用于显示混音处理后声音波形。
通过所述混音处理指令生成第二音频谱，通过第二音频谱可以作为展示混音处理后声音波形的展示。对于得到的第二声音频谱通常可以存放至终端进行后续调用。
步骤S508，获取所述第一声音频谱和所述第二声音频谱的波形数据，以使在所述唱歌应用中执行所述混音处理指令前后的所述音频数据在同一显示界面通过波形图向用户进行实时显示。
唱歌应用通过调用终端中的相关访问权限后，可以获取第一声音频谱的波形数据和第二声音频谱的波形数据。在获取第一声音频谱的波形数据和第二声音频谱的波形数据之后可以在同一显示界面通过波形图向用户进行实时显示。
具体地，当用户通过终端执行混音处理操作后，通过生成两条音谱线，可以分别表示原声和混音处理后的结果。如此，两条音谱线根据每首歌接收到的接收音频数据将对其混音处理后的混音变化结果进行实时展示。
需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
根据本申请实施例，还提供了一种用于实施上述用于唱歌应用的音频数据处理方法的装置，如图6所示，该装置包括：接受模块10，用于接收混音处理指令；音频谱生成模块20，用于根据所述混音处理指令生成声音频谱线；音频能量图形化模块30，根据所述声音频谱线生成对应的音频能量，以使所述音频能量在唱歌应用中通过可视化图形进行显示。
本申请实施例的接受模块10中在预先安装唱歌应用的终端上接收到混音处理指令是指，当接收到相关处理指令后会触发通过预先配置的混音处理操作。
具体地，当终端通过唱歌应用接收到人声音频信号以后，用户完成歌曲的录制以后，需要进行混音操作时会通过终端接收到混音处理指令。
需要注意的是，接收的混音处理指令中可以包含对于伴奏音频的混音处理过程，消除回声、去除鼻音、去除齿音、自适应母带处理、在音频时域上自适应混响等混音处理步骤，在本申请中并不进行限定，只要能够满足混音处理指令即可。
具体地，可以通过在唱歌应用中将上述混音处理操作封装配置成音频处理算法，并通过唱歌应用执行。
本申请实施例的音频谱生成模块20中声音频谱线用于显示混音处理后声音波形。对于得到的第声音频谱线通常可以存放至终端进行后续调用。
通过所述混音处理指令在终端生成声音频谱线，并且可以根据每次选择的歌曲的对混音处理后的结果进行实时显示变化。
本申请实施例的音频能量图形化模块30中每当所述声音频谱线在不同时刻状态下时，并根据不同变化程度生成具有投射处理效果的对应音频能量。即在终端的唱歌应用上生成对应的音频数据能量离子并能够展示出音频数据能量离子的变化效果，以使所述音频能量在唱歌应用中通过可视化图形进行显示。
具体地，每当声音频谱的线条变换往上运动即呈不同波动状态下时会呈现“发射”能量离子的作用效果。需要注意的是呈现“发射”的作用效果仅仅是一种本申请中的实现方式，还可以包括多种可行的实施方式，只要满足对音频数据能量离子的处理效果即可，在本申请中并不进行限定。
根据本申请实施例，作为本实施例中的优选，如图7所示，所述音频能量图形化模块30包括：幅度变化单元301，用于获取所述声音频谱线在不同时刻时的变化幅度；粒子能量密度单元302，用于根据所述变化幅度生成不同密度的音频能量，以使所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行显示。
本申请实施例的幅度变化单元301中根据所述声音频谱线在不同时刻时的不同变化程度可以进一步获取声音频谱线在对应时刻时的变化幅度。
需要注意的是，可采用多种方式获取声音频谱线处在不同时刻时的变化幅度。在本申请中并不进行限定，只要符合获取所述声音频谱线在不同时刻时的变化幅度的要求即可。
本申请实施例的粒子能量密度单元302中根据声音频谱线在不同时刻时的变化幅度，可以生成不同密度的音频能量。通过所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行相应的显示。
需要注意的是，由于音频能量离子的密度跟音频谱线的变化幅度有关，当变化幅度大则发射的离子多，最终所有的音频能量离子都收集到音谱线上方的歌曲时间轴中。通过在展示音谱曲线时加入音频能量离子处理效果，在终端的用户可以更加清晰地区分原声的谱线和处理后谱线的差异。
根据本申请实施例，作为本实施例中的优选，如图8所示，所述音频能量图形化模块30包括：速度变化单元303，用于获取所述声音频谱线在不同时刻时的变化速度；粒子能量速度单元304，用于根据所述变化速度生成不同速度的音频能量，以使所述声音频谱线在唱歌应用中通过不同速度的能量离子点状图形进行显示。
本申请实施例的速度变化单元303中根据所述声音频谱线在不同时刻时的不同变化速度可以进一步获取声音频谱线在不同时刻时的变化速度。
需要注意的是，可采用多种方式获取声音频谱线处在不同时刻时的变化速度。在本申请中并不进行限定，只要符合获取所述声音频谱线在不同时刻时的变化速度的要求即可。
本申请实施例的粒子能量速度单元304中根据声音频谱线在不同时刻时的变化速度，可以生成不同速度的音频能量。通过所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行相应的显示。
需要注意的是，由于音频能量离子的速度跟音频谱线的变化幅度有关，当变化速度快则离子的运动速度快，最终所有的音频能量离子都收集到音谱线上方的歌曲时间轴中。通过在展示音谱曲线时加入音频能量离子处理效果，在终端的用户可以更加清晰地区分原声的谱线和处理后谱线的差异。
根据本申请实施例，作为本实施例中的优选，所述音频能量图形化模块包括：插件显示单元，用于通过预先配置在所述唱歌应用中的音效调节区域显示用于接收混音处理指令的混音开关插件；频谱生成单元，用于当检测到所述混音开关插件为打开状态时，则根据所述声音频谱生成对应的音频谱展区域；还包括：关联控件单元，用于检测到所述混音开关插件为打开状态且生成滑动条关联控件；强度控制单元，用于根据检测到所述滑动条关联控件的调节混音处理不同强度变化，根据所述声音频谱生成对应的音频谱展区域的变换速度变化显示，以使所述音频能量在唱歌应用中执行不同强度变化混音调节指令时通过可视化图形进行显示。
本申请实施例的插件显示单元中接收到的混音处理指令是指，通过在唱歌应用中预先配置的音效调节区域中，可以显示当终端接收到混音处理指令后的混音开关插件。进而，用户通过终端唱歌应用中的混音开关插件可以选择打开或者关闭混音处理。
本申请实施例的频谱生成单元中当混音开关插件为打开状态时，则根据所述声音频谱生成对应的音频谱展区域。
本申请实施例的关联控件单元中当混音开关插件为打开状态且生成滑动条关联控件时，可以通过所述滑动条关联控件调节混音处理的强度，并根据声音频谱生成对应的音频谱展区域。通过声音频谱的变化程度生成对应的音频谱展区域。优选地，声音频谱的变化程度可以通过音频数据能量离子进行音频数据处理显示，当所述声音频谱变化到不同波动状态时，生成对应的音频数据能量离子；并收集所述音频数据能量离子并保存在当前音频数据播放的时间轴中，以使在所述唱歌应用中执行所述混音处理指令时，将音频数据能量离子通过可视化点状图形在时间轴上向用户进行实时显示。
本申请实施例的强度控制单元中当检测到所述滑动条关联控件的调节混音处理强度为增强时，则所述根据所述声音频谱生成对应的音频谱展区域的变换速度加快显示，以使在所述唱歌应用中执行增强混音调节指令时实时显示变化波形图；当检测到所述滑动条关联控件的调节混音处理强度为减弱时，则所述根据所述声音频谱生成对应的音频谱展区域的变换速度减慢显示，以使在所述唱歌应用中执行减弱混音调节指令时实时显示变化波形图。
具体地，当通过唱歌应用中的混音处理的强度调节滑动条配置控件，调节处理强度时，可以根据情况增强或减弱混音处理的强度。从而，对应的声音频谱曲线也会跟着变化，同时音频数据能量离子效果也会跟着变化。如果强度越强幅度变化越大，变化速度也会加快，反之则减小和变慢。
根据本申请实施例，作为本实施例中的优选，装置中还包括：接收单元，用于接收音频数据，其中，所述音频数据用于作为用户输入到唱歌应用中的人声音频信号；第一声音频谱单元，用于根据所述音频数据生成第一声音频谱，其中，所述第一声音频谱用于显示原始声音波形；第二声音频谱单元，用于根据所述混音处理指令生成第二声音频谱，其中，所述第二声音频谱用于显示混音处理后声音波形；以及获取单元，用于获取所述第一声音频谱和所述第二声音频谱的波形数据，以使在所述唱歌应用中执行所述混音处理指令前后的所述音频数据在同一显示界面通过波形图向用户进行实时显示。
本申请实施例的接收单元中所述音频数据用于作为用户输入到唱歌应用中的人声音频信号。
通常在唱歌应用中带有伴奏音频，通过接收音频数据能够得到人声音频。
通常可以通过终端设备上的麦克风进行采集接收，并将音频数据在后台服务器进行存放，用于后续的调用。
本申请实施例的第一声音频谱单元中所述第一声音频谱用于显示原始声音波形。
具体地，可以在预先安装唱歌应用的终端上根据音频数据生成声音频谱。需要注意的是，根据音频数据生成声音频谱的方式可以包括多种，在本申请的实施例中并不进行限定。
当在终端根据音频数据生成第一声音频谱后，通常可以保存在终端本地，便于后续的调用。
本申请实施例的第二声音频谱单元中所述第二声音频谱用于显示混音处理后声音波形。
通过所述混音处理指令生成第二音频谱，通过第二音频谱可以作为展示混音处理后声音波形的展示。对于得到的第二声音频谱通常可以存放至终端进行后续调用。
本申请实施例的获取单元中唱歌应用通过调用终端中的相关访问权限后，可以获取第一声音频谱的波形数据和第二声音频谱的波形数据。在获取第一声音频谱的波形数据和第二声音频谱的波形数据之后可以在同一显示界面通过波形图向用户进行实时显示。
具体地，当用户通过终端执行混音处理操作后，通过生成两条音谱线，可以分别表示原声和混音处理后的结果。如此，两条音谱线根据每首歌接收到的接收音频数据将对其混音处理后的混音变化结果进行实时展示。
如图9所示，在本申请的另一实施例中，提供了一种电子设备，包括：至少一个处理器1001；以及与所述处理器连接的至少一个存储器1003、总线1002；其中，所述处理器1001、存储器1003通过所述总线1002完成相互间的通信；所述处理器1001用于调用所述存储器1003中的程序指令，以执行所述的音频数据处理方法。
处理器1001和存储器1003。其中，处理器1001和存储器4003相连，如通过总线1002相连。可选地，电子设备1000还可以包括收发器1004。需要说明的是，实际应用中收发器1004不限于一个，该终端设备4000的结构并不构成对本申请实施例的限定。
其中，处理器1001可以是CPU，通用处理器，DSP，ASIC，FPGA或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器1001也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
总线1002可包括一通路，在上述组件之间传送信息。总线1002可以是PCI总线或EISA总线等。总线1002可以分为地址总线、数据总线、控制总线等。为便于表示，图9中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器1003可以是ROM或可存储静态信息和指令的其他类型的静态存储设备，RAM或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM、CD-ROM或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。
可选地，存储器1003用于存储执行本申请方案的应用程序代码，并由处理器1001来控制执行。处理器1001用于执行存储器1003中存储的应用程序代码，以实现图1所示实施例提供的用于唱歌应用的音频数据处理方法。
在本申请的再一实施例中，提供了非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行所述的音频数据处理方法。
显然，本领域的技术人员应该明白，上述的本申请的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本申请不限制于任何特定的硬件和软件结合。
显然，本领域的技术人员应该明白，上述的本申请的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本申请不限制于任何特定的硬件和软件结合。
以上所述仅为本申请的优选实施例而已，并不用于限制本申请，对于本领域的技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。
Claims (8)
1.一种用于唱歌应用的音频数据处理方法，其特征在于，包括：
接收混音处理指令，其中，接收的混音处理指令中包含对于伴奏音频的混音处理过程，消除回声、去除鼻音、去除齿音、自适应母带处理、在音频时域上自适应混响在内的混音处理步骤；
根据所述混音处理指令生成声音频谱线；以及
根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量，以使所述音频能量在唱歌应用中通过可视化图形进行显示；
根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量包括：
获取所述声音频谱线在不同时刻时的变化幅度；以及
根据所述变化幅度生成不同密度的音频能量，以使所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行显示；
当变化幅度大则发射的离子多，最终所有的音频能量离子都收集到音谱线上方的歌曲时间轴中，通过在展示音谱曲线时加入音频能量离子处理效果，区分原声的谱线和处理后谱线的差异。
2.根据权利要求1所述的音频数据处理方法，其特征在于，根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量包括：
获取所述声音频谱线在不同时刻时的变化速度；以及
根据所述变化速度生成不同速度的音频能量，以使所述声音频谱线在唱歌应用中通过不同速度的能量离子点状图形进行显示。
3.根据权利要求1所述的音频数据处理方法，其特征在于，根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量包括：
通过预先配置在所述唱歌应用中的音效调节区域显示用于接收混音处理指令的混音开关插件；
当检测到所述混音开关插件为打开状态时，则根据所述声音频谱生成对应的音频谱展区域；
根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量之后还包括：
检测到所述混音开关插件为打开状态且生成滑动条关联控件；
根据检测到所述滑动条关联控件的调节混音处理不同强度变化，根据所述声音频谱生成对应的音频谱展区域的变换速度变化显示，以使所述音频能量在唱歌应用中执行不同强度变化混音调节指令时通过可视化图形进行显示。
4.根据权利要求1所述的音频数据处理方法，其特征在于，接收混音处理指令之前还包括：
接收音频数据，其中，所述音频数据用于作为用户输入到唱歌应用中的人声音频信号；
根据所述音频数据生成第一声音频谱，其中，所述第一声音频谱用于显示原始声音的频谱波形；
接收混音处理指令之后还包括：
根据所述混音处理指令生成第二声音频谱，其中，所述第二声音频谱用于显示混音处理后声音的频谱波形；以及
获取所述第一声音频谱和所述第二声音频谱的波形数据，以使在所述唱歌应用中执行所述混音处理指令前后的所述音频数据在同一显示界面通过波形图向用户进行实时显示。
5.一种用于唱歌应用的音频数据处理装置，其特征在于，包括：
接受模块，用于接收混音处理指令，其中，接收的混音处理指令中包含对于伴奏音频的混音处理过程，消除回声、去除鼻音、去除齿音、自适应母带处理、在音频时域上自适应混响在内的混音处理步骤；
音频谱生成模块，用于根据所述混音处理指令生成声音频谱线；
音频能量图形化模块，根据所述声音频谱线在不同时刻时的不同变化程度生成对应的音频能量，以使所述音频能量在唱歌应用中通过可视化图形进行显示；
所述音频能量图形化模块包括：
幅度变化单元，用于获取所述声音频谱线在不同时刻时的变化幅度；
粒子能量密度单元，用于根据所述变化幅度生成不同密度的音频能量，以使所述声音频谱线在唱歌应用中通过不同密度的能量离子点状图形进行显示；
当变化幅度大则发射的离子多，最终所有的音频能量离子都收集到音谱线上方的歌曲时间轴中，通过在展示音谱曲线时加入音频能量离子处理效果，区分原声的谱线和处理后谱线的差异。
6.根据权利要求5所述的音频数据处理装置，其特征在于，所述音频能量图形化模块包括：
速度变化单元，用于获取所述声音频谱线在不同时刻时的变化速度；
粒子能量速度单元，用于根据所述变化速度生成不同速度的音频能量，以使所述声音频谱线在唱歌应用中通过不同速度的能量离子点状图形进行显示。
7.一种电子设备，其特征在于，包括：
至少一个处理器；
以及与所述处理器连接的至少一个存储器、总线；其中，
所述处理器、存储器通过所述总线完成相互间的通信；
所述处理器用于调用所述存储器中的程序指令，以执行权利要求1至4中任一项所述的音频数据处理方法。
8.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行权利要求1至4中任一项所述的音频数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910055029.2A CN109599083B (zh) | 2019-01-21 | 2019-01-21 | 用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910055029.2A CN109599083B (zh) | 2019-01-21 | 2019-01-21 | 用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109599083A CN109599083A (zh) | 2019-04-09 |
| CN109599083B true CN109599083B (zh) | 2022-07-29 |
Family
ID=65966455
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910055029.2A Active CN109599083B (zh) | 2019-01-21 | 2019-01-21 | 用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109599083B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20230267899A1 (en) * | 2020-03-11 | 2023-08-24 | Nusic Limited | Automatic audio mixing device |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW200923676A (en) * | 2007-11-21 | 2009-06-01 | Inventec Besta Co Ltd | System and method for chorusing songs by single person |
| CN106062746A (zh) * | 2014-01-06 | 2016-10-26 | 哈曼国际工业有限公司 | 用于用户可控制的听觉环境定制的系统和方法 |
| CN109120983A (zh) * | 2018-09-28 | 2019-01-01 | 腾讯音乐娱乐科技（深圳）有限公司 | 一种音频处理方法和装置 |
| CN109147745A (zh) * | 2018-07-25 | 2019-01-04 | 北京达佳互联信息技术有限公司 | 歌曲编辑处理方法、装置、电子设备及存储介质 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8929561B2 (en) * | 2011-03-16 | 2015-01-06 | Apple Inc. | System and method for automated audio mix equalization and mix visualization |
-
2019
- 2019-01-21 CN CN201910055029.2A patent/CN109599083B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW200923676A (en) * | 2007-11-21 | 2009-06-01 | Inventec Besta Co Ltd | System and method for chorusing songs by single person |
| CN106062746A (zh) * | 2014-01-06 | 2016-10-26 | 哈曼国际工业有限公司 | 用于用户可控制的听觉环境定制的系统和方法 |
| CN109147745A (zh) * | 2018-07-25 | 2019-01-04 | 北京达佳互联信息技术有限公司 | 歌曲编辑处理方法、装置、电子设备及存储介质 |
| CN109120983A (zh) * | 2018-09-28 | 2019-01-01 | 腾讯音乐娱乐科技（深圳）有限公司 | 一种音频处理方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109599083A (zh) | 2019-04-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20190005782A1 (en) | Method, system, and device for converting audio signal to one or more haptic effects | |
| CN108874144B (zh) | 使用映射的声音-触觉效应转换系统 | |
| CN109887523B (zh) | 用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质 | |
| CN110785809A (zh) | 重放攻击的磁检测 | |
| CN109120983A (zh) | 一种音频处理方法和装置 | |
| EP3622730B1 (en) | Spatializing audio data based on analysis of incoming audio data | |
| KR20150085032A (ko) | 사운드의 유형의 제어를 제공하기 위한 방법들 및 장치들 | |
| EP3920516B1 (en) | Voice call method and apparatus, electronic device, and computer-readable storage medium | |
| CN105025182B (zh) | 一种降噪方法及终端 | |
| CN104205212A (zh) | 听觉场景中的讲话者冲突 | |
| CN109599083B (zh) | 用于唱歌应用的音频数据处理方法及装置、电子设备及存储介质 | |
| CN109979418A (zh) | 音频处理方法、装置、电子设备及存储介质 | |
| CN110070884A (zh) | 音频起始点检测方法和装置 | |
| CN108874363A (zh) | 用于ar场景的对象控制方法、装置、设备及存储介质 | |
| JP5703807B2 (ja) | 信号処理装置 | |
| CN114089806B (zh) | 波形序列创建装置、方法、电子设备及存储介质 | |
| CN110070885A (zh) | 音频起始点检测方法和装置 | |
| JP2007188502A (ja) | パーティクルのレンダリング方法およびシステム | |
| CN104007951B (zh) | 一种信息处理方法及电子设备 | |
| US9886939B2 (en) | Systems and methods for enhancing a signal-to-noise ratio | |
| JP2013172231A (ja) | オーディオミキシング装置 | |
| CN112433697A (zh) | 一种资源展示方法、装置、电子设备及存储介质 | |
| CN107808655B (zh) | 音频信号处理方法、装置、电子设备及存储介质 | |
| CN104184886A (zh) | 一种信息处理方法和电子设备 | |
| CN104008753A (zh) | 一种信息处理方法和电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |