CN108492807A - 展示修音状态的方法及装置 - Google Patents

Abstract

本申请公开了一种展示修音状态的方法及装置。该展示修音状态的方法及装置包括采集用户演唱的歌曲的原始音符；获取所述歌曲的标准音符，在显示区中创建标准音符图标，并显示其位置；比较所述原始音符和所述标准音符的差异；提取所述原始音符中与所述标准音符有差异的音符和无差异的音符，在显示区中创建对应的错误音符图标和正确音符图标，并显示其位置；依据所述标准音符修正所述有差异的音符。本申请解决了用户K歌过程中修音过程无法直观显示、用户使用体验差的技术问题。

Description

展示修音状态的方法及装置

技术领域

本申请涉及音频处理技术领域，具体而言，涉及一种展示修音状态的方法及装置。

背景技术

随着移动互联网K歌应用的不断发展，用户对于K歌录音流程中的体验要求越来越高。但由于不同的人对乐感和旋律的感知能力参差不齐，跑调或者节奏跟不上的情况时有发生，严重影响用户的心情。

解决跑调或者跟不上节奏的方法，主要是找到专业录音棚进行后期修音处理，以修正跑调。虽然录音棚修音的专业性高，但是周期长、制作费用高等条件的限制下，普通民众大都很难接受，导致人们K歌兴趣大大下降。虽然现阶段有一些修音软件能够对跑调或者跟不上节奏的音频进行简单的修音，但是无法对修音过程进行展示，用户无法直观的查看到自己的演唱水平与标准歌曲之间的差别，用户的体验大大降低，致使修音功能使用率极低。

根据相关技术领域中用户K歌过程中修音过程无法直观显示、用户使用体验差的技术问题，目前尚未提出有效的解决方案。

发明内容

本申请的主要目的在于提供一种展示修音状态的方法及装置，以解决用户K歌过程中修音过程无法直观显示、用户使用体验差的问题。

为了实现上述目的，根据本申请的一个方面，提供了一种展示修音状态的方法。

根据本申请的展示修音状态的方法包括，如下步骤：

采集用户演唱的歌曲的原始音符；

获取所述歌曲的标准音符，在显示区中创建标准音符图标，并显示其位置；

比较所述原始音符和所述标准音符的差异；

提取所述原始音符中与所述标准音符有差异的音符和无差异的音符，在显示区中创建对应的错误音符图标和正确音符图标，并显示其位置；

依据所述标准音符修正所述有差异的音符。

进一步的，所述采集用户演唱的歌曲的原始音符，包括：

采集用户演唱的歌曲的声音，得到原始音频；

转换所述原始音频为原始音符。

进一步的，所述获取所述歌曲的标准音符，包括：

获取所述歌曲的音频的特征，并依据所述特征，获取具有相同所述特征的标准音频；

进一步的，所述比较所述原始音符和所述标准音符的差异，包括：

比较所述原始音符和所述标准音符的速度差值、节拍差值或者音高频率差值中的至少一种差值。

进一步的，所述依据所述标准音符修正所述有差异的音符前，所述错误音符图标与所述正确音符图标在所述显示区中同步显示，根据差异原因确定错误音符图标的位置。

进一步的，所述错误音符图标为半透明图标，所述错误音符图标与所述标准音符图标重合状态，所述错误音符图标位于所述标准音符图标的上层。

进一步的，所述依据所述标准音符修正所述有差异的音符，包括：

在所述显示区域内创建修音线，所述修音线的一侧为修正后的所述正确音符图标，所述修音线的另一侧为修正前的所述标准音符图标、所述正确音符图标和所述错误音符图标；

经过所述修音线的所述错误音符图标修正为所述正确音符图标呈动画流动感。

为了实现上述目的，根据本申请的另一方面，提供了一种展示修音状态的装置。

根据本申请的展示修音状态的装置包括：采集单元、标准音处理单元、比较单元、原始音处理单元和修正单元，

所述采集单元用于采集用户演唱的歌曲的原始音符；

所述标准音处理单元用于获取所述歌曲的标准音符，在显示区中创建标准音符图标，并显示其位置；

所述比较单元用于比较所述原始音符和所述标准音符的差异；

所述原始音处理单元用于提取所述原始音符中与所述标准音符有差异的音符和无差异的音符，在显示区中创建对应的错误音符图标和正确音符图标，并显示其位置；

所述修正单元用于将所述错误音符图标经过所述修音线修正为所述正确音符图标以动画流动感呈现。

进一步的，所述采集单元包括原始音频获取模块和原始音频转换模块，

所述原始音频获取模块用于采集用户演唱的歌曲的声音，得到原始音频；

所述原始音频转换模块用于转换所述原始音频为原始音符。

进一步的，所述修正单元包括显示模块和特效模块，

所述显示模块用于在所述显示区域内创建修音线，所述修音线的一侧为修正后的所述正确音符图标，所述修音线的另一侧为修正前的所述标准音符图标、所述正确音符图标和所述错误音符图标；

所述特效模块用于将所述错误音符图标经过所述修音线修正为所述正确音符图标以动画流动感呈现。

在本申请实施例中，将用户演唱的原始音符与标准音符对比，并提取出有差异的音符和无差异的音符，分别对标准音符、有差异的音符和无差异的音符创建不同的图标。将显示标准音符、有差异的音符和无差异的不同图标在同一显示区被同时显示，使用户直观了解自身的演唱水平与标准歌曲之间差距和不足，便于用户及时修正自身的演唱方法。从而实现了对歌曲修音过程的直观显示的技术效果，便于客户充分了解自身演唱的音符与标注音符之间的差异点，有利于客户对自身演唱方法进行修正，同时极大的提高修音过程与用户之间的互动，提高用户体验。进而解决了用户K歌过程中修音过程无法直观显示、用户使用体验差的技术问题。

附图说明

构成本申请的一部分的附图用来提供对本申请的进一步理解，使得本申请的其它特征、目的和优点变得更明显。本申请的示意性实施例附图及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1是本发明展示修音状态的方法的流程图；

图2是本发明展示修音状态的装置结构连接框图；

图3是本发明展示修音状态的装置中实施例一的结构连接框图；

图4是本发明展示修音状态的装置中实施例二的结构连接框图；

图5是本发明展示修音状态的装置中实施例四的结构连接框图；

图6是本发明展示修音状态的装置中实施例五的结构连接框图；以及

图7是本发明一优选实施例的展示修音的界面状态示意图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。

需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

在本申请中，术语“上”、“下”、“左”、“右”、“前”、“后”、“顶”、“底”、“内”、“外”、“中”、“竖直”、“水平”、“横向”、“纵向”等指示的方位或位置关系为基于附图所示的方位或位置关系。这些术语主要是为了更好地描述本发明及其实施例，并非用于限定所指示的装置、元件或组成部分必须具有特定方位，或以特定方位进行构造和操作。

并且，上述部分术语除了可以用于表示方位或位置关系以外，还可能用于表示其他含义，例如术语“上”在某些情况下也可能用于表示某种依附关系或连接关系。对于本领域普通技术人员而言，可以根据具体情况理解这些术语在本发明中的具体含义。

此外，术语“安装”、“设置”、“设有”、“连接”、“相连”、“套接”应做广义理解。例如，可以是固定连接，可拆卸连接，或整体式构造；可以是机械连接，或电连接；可以是直接相连，或者是通过中间媒介间接相连，又或者是两个装置、元件或组成部分之间内部的连通。对于本领域普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。

如图1所示，该方法包括如下步骤：

步骤S101：采集用户演唱的歌曲的原始音符；

具体的，采集用户演唱的歌曲的声音，从而得到待修音的原始音频。

在本申请的一些实施例中，移动终端可通过麦克风获取用户演唱歌曲的原始音频，该原始音频可以为干声，干声又称为裸声，属于音频术语，一般指录音以后未经过后期处理和加工的原始人声。

在本申请的一些实施例中，移动终端可以是具有录音功能、存储音频功能和播放音频功能的电子设备，如手机或者平板电脑。

具体的，将采集到的待修音的原始音频转换为音符形式，即原始音符。

在本申请的一些实施例中，可以通过频谱、功率、过零等处理方法将该歌曲的原始音频转换为音符形式。

步骤S102：获取所述歌曲的标准音符，在显示区中创建标准音符图标，并显示其位置；

具体的，获取用户演唱的歌曲的音频特征，并依据该特征，获取具有相同特征的标准音频。标准音频是完全按照乐谱演唱和/或演奏的音频，通俗的说就是不跑调的音频。该标准音频的特征可以包括：歌名、原唱歌手名和版本，例如歌名为“曹操”，原唱歌手名为“林俊杰”，版本为录音棚版。标准音频也可以包括翻唱歌手名。可以依据上述特征，在移动终端的本地曲库中查找具有相同特征的标准音频，标准音频可以使原唱歌手演唱的音频。本地曲库中也可以存储有一个歌手演唱的不同版本的标准音频，例如录音棚版、现场版、演唱会版等，优选录音棚版音频。

具体的，转换标准音频为标准音符。

在本申请的一些实施例中，可以通过频谱、功率、过零等处理方法将该歌曲的原始音频转换为音符形式。

具体的，显示区中以时间轴为横坐标，以旋律音高轴为纵坐标，并创建灰色长条形色块作为标准音符图标替代标准音符，放入显示区内标准音符对应的位置上。

步骤S103：比较所述原始音符和所述标准音符的差异；

本申请的一些实施例中，通过比较原始音符和标准音符在显示区内的节奏和音高来判断原始音符是否跑调。节奏表示的是音乐快慢和激烈缓柔程度，节奏可以包括速度和节拍两部分。因此，比较原始音符和标准音符的速度差值、节拍差值或者音高频率差值中的至少一种差值。

具体的，可以在移动终端本地比较原始音符和标准音符的速度、节拍或者音高频率中的至少一种，获得速度差值、节拍差值或者音高频率差值中的至少一种差值。

步骤S104：提取所述原始音符中与所述标准音符有差异的音符和无差异的音符，在显示区中创建对应的错误音符图标和正确音符图标，并显示其位置；

具体的，分别提取与标准音符比较后有差异的音符和无差异的音符，并创建红色长条状色块作为错误音符图标替代有差异音符，创建绿色长条状色块作为正确音符图标替代无差异音符，放入显示区内原始音符对应的位置上。

本申请的一些实施例中，错误音符图标与标准音符图标可以有部分重合的位置，而且错误音符图标具有一定的透明度，错误音符图标与标准音符图标重合状态下，错误音符图标位于标准音符图标的上层，可以在错误音符图标的下层显示标准音符图标的轮廓。

具体的，错误音符图标与正确音符图标在显示区中同步显示，根据差异原因确定错误音符图标的位置。其中，以标准音符图标为基准，错误音符图标根据与标准音符的差异原因确定在显示区中的位置。如果有差异的音符比标准音符的音高频率高，则错误音符图标位于标准音符图标的上方，反之错误音符图标位于标准音符图标的下方；如果有差异的音符比标准音符的节奏块，则错误音符图标位于标准音符图标的左侧，反之错误音符图标位于标准音符图标的右侧。

步骤S105：依据所述标准音符修正所述有差异的音符。

具体的，在显示区域内创建修音线，修音线为绿色线条，修音线与横轴相垂直，修音线左侧为修正后的正确音符图标显示区，修音线右侧为修正前音符图标显示区，位于修音线左侧的修正后的正确音符图标，都显示为绿色长条状色块；位于修音线右侧的修正前的标准音符图标、正确音符图标和错误音符图标，其中，标准音符图标显示为灰色长条状色块，正确音符图标显示为绿色长条状色块，错误音符图标显示为红色长条状色块。

具体的，错误音符图标经过修音线修正为正确音符图标过程中呈现动画流动感，增加用户的感知效果；正确音符图标经过修音线过程中不显示动画流动感。动画流动感类似于水流的形式，错误音符图标以水流的形式移动到对应的标准音符图标的位置。

本申请的一些实施例中，修音过程中，移动终端退出到后台运行时，主界面不显示修音状态，但是修音过程继续进行。再次进入修音界面，如果已完成修音，则直接显示修音完成后的正确音符图标；如果未完成修音，则继续显示修音过程。

本申请的一些实施例中，退出移动终端，修音过程停止运行，用户的原始音频停止采集。

本申请的一些实施例中，存在无法修复的错误音符图标，无法修复的错误音符图标直接经过修音线不做动画流动感，无法修复的错误音符图标经过修音线后仍显示为灰色长条形色块。具体的，经过修音线时，移动终端对有差异的错误音符图标无法进行识别，其中，无法识别的情况为原始音频内容多字、少字或者发音错误等，提示“无法识别”，歌词灰色显示；原始音频的音高频率超出修音范围，提示“偏差过大”，歌词红色显示。

本申请的一些实施例中，对某句原始音频取消修音，在错误音符图标经过修音线的过程中，不对错误音符图标进行动画流动感处理，不进行提示，错误音符图标对应的歌词红色显示。

本申请的一些实施例中，采集用户的原始音频节奏过快或者过慢，超出一个音符显示的范围时，单独对错误音符图标经过修音线进行动画流动感处理。其中，采集用户的原始音频节奏过慢时，标准音符图标和错误音符图标经过修音线后，错误音符图标直接消失。

从以上的描述中，可以看出，本发明实现了如下技术效果：将用户演唱的原始音符与标准音符对比，并提取出有差异的音符和无差异的音符，分别对标准音符、有差异的音符和无差异的音符创建不同的图标，将显示标准音符、有差异的音符和无差异的不同图标在同一显示区被同时显示，使用户直观了解自身的演唱水平与标准歌曲之间差距和不足，便于用户及时修正自身的演唱方法。从而实现了对歌曲修音过程的直观显示的技术效果，便于客户充分了解自身演唱的音符与标注音符之间的差异点，有利于客户对自身演唱方法进行修正，同时极大的提高修音过程与用户之间的互动，提高用户体验。

需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

根据本发明实施例，还提供了一种用于实施上述展示修音状态的方法的装置，如图2所示，该装置包括：采集单元1、标准音处理单元2、比较单元3、原始音处理单元4和修正单元5，采集单元1用于采集用户演唱的歌曲的原始音符；标准音处理单元2用于获取歌曲的标准音符，在显示区中创建标准音符图标，并显示其位置；比较单元3用于比较原始音符和标准音符的差异；原始音处理单元4用于提取原始音符中与标准音符有差异的音符和无差异的音符，在显示区中创建对应的错误音符图标和正确音符图标，并显示其位置；修正单元5用于将错误音符图标经过修音线修正为正确音符图标以动画流动感呈现。

本申请的实施例一中，采集单元1包括原始音频获取模块10和原始音频转换模块11，原始音频获取模块10用于采集用户演唱的歌曲的声音，得到原始音频；原始音频转换模块11用于转换原始音频为原始音符。

具体的，原始音频获取模块10可以为移动终端通过麦克风获取用户演唱歌曲的原始音频。移动终端可以是具有录音功能、存储音频功能和播放音频功能的电子设备，如手机或者平板电脑。原始音频转换模块11可为通过频谱、功率、过零等处理方法将歌曲的原始音频转换为音符形式的设备或者现有的功能性软件。

本申请的实施例二中，标准音处理模块2包括标准音频获取模块20和标准音频转换模块21，标准音频获取模块20用于获取歌曲的音频的特征，并依据特征，获取具有相同特征的标准音频；标准音频转换模块21用于转换标准音频为标准音符。

具体的，标准音频获取模块20获取用户演唱的歌曲的音频的特征，并依据该特征，获取具有相同特征的标准音频。标准音频是完全按照乐谱演唱和/或演奏的音频，通俗的说就是不跑调的音频，优选录音棚版音频。标准音频转换模块21可为通过频谱、功率、过零等处理方法将该歌曲的原始音频转换为音符形式的设备或者现有的功能性软件。

具体的，标准音处理单元2在显示区中以时间轴为横坐标，以旋律音高轴为纵坐标，并创建灰色长条形色块作为标准音符图标替代标准音符，放入显示区内标准音符对应的位置上。

本申请的实施例三中，比较单元3通过移动终端比较原始音符和标准音符的速度、节拍或者音高频率中的至少一种，获得速度差值、节拍差值或者音高频率差值中的至少一种差值。

本申请的实施例四中，原始音处理单元4包括提取模块40和位置标定模块41，提取模块40用于分别提取与标准音符比较后有差异的音符和无差异的音符，并创建错误音符图标替代有差异音符，创建正确音符图标替代无差异音符。其中错误音符图标为红色长条状色块，正确音符图标为绿色长条状色块，错误音符图标和正确音符图标分别放入显示区内原始音符对应的位置上。位置标定模块41用于根据有差异的音符与标准音符的差异原因确定错误音符图标的位置。

优选的，错误音符图标具有一定的透明度，错误音符图标与标准音符图标重合状态下，错误音符图标位于标准音符图标的上层，可以在错误音符图标的下层显示标准音符图标的轮廓。

具体的，以标准音符图标为基准，错误音符图标根据与标准音符的差异原因确定在显示区中的位置。如果有差异的音符比标准音符的音高频率高，则错误音符图标位于标准音符图标的上方，反之错误音符图标位于标准音符图标的下方；如果有差异的音符比标准音符的节奏块，则错误音符图标位于标准音符图标的左侧，反之错误音符图标位于标准音符图标的右侧。

本申请的实施例五中，修正单元5包括显示模块50和特效模块51，显示模块50用于在显示区域内创建修音线，修音线的一侧为修正后的正确音符图标，修音线的另一侧为修正前的标准音符图标、正确音符图标和错误音符图标；特效模块51用于将错误音符图标经过修音线修正为正确音符图标以动画流动感呈现。

具体的，如图7所示，显示模块50在显示区域内创建修音线，修音线为绿色线条，修音线与横轴相垂直，修音线左侧为修正后的正确音符图标显示区，修音线右侧为修正前音符图标显示区，位于修音线左侧的修正后的正确音符图标；位于修音线右侧的修正前的标准音符图标、正确音符图标和错误音符图标。

具体的，特效模块51在错误音符图标经过修音线修正为正确音符图标过程中呈现动画流动感，增加用户的感知效果；正确音符图标经过修音线过程中不显示动画流动感，错误音符图标以水流的形式移动到对应的标准音符图标的位置。

显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。

以上所述仅为本申请的优选实施例而已，并不用于限制本申请，对于本领域的技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (10)

1.一种展示修音状态的方法，其特征在于，包括如下步骤：

采集用户演唱的歌曲的原始音符；

获取所述歌曲的标准音符，在显示区中创建标准音符图标，并显示其位置；

比较所述原始音符和所述标准音符的差异；

提取所述原始音符中与所述标准音符有差异的音符和无差异的音符，在显示区中创建对应的错误音符图标和正确音符图标，并显示其位置；

依据所述标准音符修正所述有差异的音符。

2.根据权利要求1所述的展示修音状态的方法，其特征在于，所述采集用户演唱的歌曲的原始音符，包括：

采集用户演唱的歌曲的声音，得到原始音频；

转换所述原始音频为原始音符。

3.根据权利要求1所述的展示修音状态的方法，其特征在于，所述获取所述歌曲的标准音符，包括：

获取所述歌曲的音频的特征，并依据所述特征，获取具有相同所述特征的标准音频。

4.根据权利要求1所述的展示修音状态的方法，其特征在于，所述比较所述原始音符和所述标准音符的差异，包括：

比较所述原始音符和所述标准音符的速度差值、节拍差值或者音高频率差值中的至少一种差值。

5.根据权利要求1所述的展示修音状态的方法，其特征在于，所述依据所述标准音符修正所述有差异的音符前，所述错误音符图标与所述正确音符图标在所述显示区中同步显示，根据差异原因确定错误音符图标的位置。

6.根据权利要求5所述的展示修音状态的方法，其特征在于，所述错误音符图标为半透明图标，所述错误音符图标与所述标准音符图标重合状态，所述错误音符图标位于所述标准音符图标的上层。

7.根据权利要求1所述的展示修音状态的方法，其特征在于，所述依据所述标准音符修正所述有差异的音符，包括：

在所述显示区域内创建修音线，所述修音线的一侧为修正后的所述正确音符图标，所述修音线的另一侧为修正前的所述标准音符图标、所述正确音符图标和所述错误音符图标；

经过所述修音线的所述错误音符图标修正为所述正确音符图标呈动画流动感。

8.一种展示修音状态的装置，其特征在于，包括采集单元、标准音处理单元、比较单元、原始音处理单元和修正单元，

所述采集单元用于采集用户演唱的歌曲的原始音符；

所述标准音处理单元用于获取所述歌曲的标准音符，在显示区中创建标准音符图标，并显示其位置；

所述比较单元用于比较所述原始音符和所述标准音符的差异；

所述原始音处理单元用于提取所述原始音符中与所述标准音符有差异的音符和无差异的音符，在显示区中创建对应的错误音符图标和正确音符图标，并显示其位置；

所述修正单元用于将所述错误音符图标经过所述修音线修正为所述正确音符图标以动画流动感呈现。

9.根据权利要求8所述的展示修音状态的装置，其特征在于，所述采集单元包括原始音频获取模块和原始音频转换模块，

所述原始音频获取模块用于采集用户演唱的歌曲的声音，得到原始音频；

所述原始音频转换模块用于转换所述原始音频为原始音符。

10.根据权利要求8所述的展示修音状态的装置，其特征在于，所述修正单元包括显示模块和特效模块，

所述显示模块用于在所述显示区域内创建修音线，所述修音线的一侧为修正后的所述正确音符图标，所述修音线的另一侧为修正前的所述标准音符图标、所述正确音符图标和所述错误音符图标；

所述特效模块用于将所述错误音符图标经过所述修音线修正为所述正确音符图标以动画流动感呈现。