CN111292772A - 关联音频片段与视频片段的方法、装置及存储介质 - Google Patents

Abstract

本申请是关于一种关联音频片段与视频片段的方法、装置及存储介质，属于多媒体领域。所述方法包括：显示多个第一多媒体片段以及多个第二多媒体片段，第一多媒体片段为音频片段且第二多媒体片段为视频片段，或者，所述第一多媒体片段为视频片段且所述第二多媒体片段为音频片段；针对任一个第一多媒体片段，在检测到所述任一个第一多媒体片段被移动至一个第二多媒体片段对应的区域时，关联所述任一个第一多媒体片段和所述一个第二多媒体片段。本申请能够提高制作音乐短片的效率。

Description

关联音频片段与视频片段的方法、装置及存储介质

技术领域

本申请涉及多媒体领域，特别涉及一种关联音频片段与视频片段的方法、装置及存储介质。

背景技术

音乐短片(music video，MV)是音乐搭配视频的短片。也就是说MV即包括音频部分的内容，也包括视频部分的内容。这样在制作音乐短片时，将音频部分的内容与视频部分的内容进行关联，即可形成音乐短片。

目前在制作音频短片时，发现关联音频部分的内容和视频部分的内容比较费时费力，导致制作音乐短片的效率较低。

发明内容

本申请提供了一种关联音频片段与视频片段的方法、装置及存储介质，以提高制作音乐短片的效率。所述技术方案如下：

一方面，本申请实施例提供了一种关联音频片段与视频片段的方法，所述方法包括：

显示多个第一多媒体片段以及多个第二多媒体片段，第一多媒体片段为音频片段且第二多媒体片段为视频片段，或者，所述第一多媒体片段为视频片段且所述第二多媒体片段为音频片段；

针对任一个第一多媒体片段，在检测到所述任一个第一多媒体片段被移动至一个第二多媒体片段对应的区域时，关联所述任一个第一多媒体片段和所述一个第二多媒体片段。

可选的，所述方法还包括：

在检测到对所述任一个第一多媒体片段的选择操作的情况下，监测被选择的所述任一个第一多媒体片段被移动的实时位置，基于所述实时位置检测所述任一个第一多媒体片段是否被移动至一个第二多媒体片段对应的区域。

可选的，所述方法还包括：

在检测到对所述任一个第一多媒体片段的选择操作的情况下，获取所述任一个第一多媒体片段的标识信息；

所述关联所述任一个第一多媒体片段和所述一个第二多媒体片段，包括：

获取所述一个第二多媒体片段的标识信息；

将所述任一个第一多媒体片段的标识信息和所述一个第二多媒体片段的标识信息对应保存在第一多媒体片段的标识信息与第二多媒体片段的标识信息的对应关系中。

可选的，所述显示多个第二多媒体片段之后，还包括：

根据所述多个第二多媒体片段中的每个第二多媒体片段的显示位置，确定所述每个第二多媒体片段对应的区域。

可选的，所述第一多媒体片段为音频片段，所述显示多个第一多媒体片段之前，还包括：

根据音频文件的歌曲信息，将所述音频文件划分成所述多个第一多媒体片段，所述歌曲信息包括所述音频文件的快慢节拍数据、鼓点数据或歌词信息中的至少一个。

可选的，对所述任一个第一多媒体片段的选择操作为长按操作、单击操作或勾选操作。

另一方面，本申请实施例提供了一种关联音频片段与视频片段的装置，所述装置包括：

显示模块，用于显示多个第一多媒体片段以及多个第二多媒体片段，第一多媒体片段为音频片段且第二多媒体片段为视频片段，或者，所述第一多媒体片段为视频片段且所述第二多媒体片段为音频片段；

关联模块，用于针对任一个第一多媒体片段，在检测到所述任一个第一多媒体片段被移动至一个第二多媒体片段对应的区域时，关联所述任一个第一多媒体片段和所述一个第二多媒体片段。

可选的，所述装置还包括：

检测模块，用于在检测到对所述任一个第一多媒体片段的选择操作的情况下，监测被选择的所述任一个第一多媒体片段被移动的实时位置，基于所述实时位置检测所述任一个第一多媒体片段是否被移动至一个第二多媒体片段对应的区域。

可选的，所述装置还包括：

获取模块，用于在检测到对所述任一个第一多媒体片段的选择操作的情况下，获取所述任一个第一多媒体片段的标识信息；

所述关联模块，用于获取所述一个第二多媒体片段的标识信息；将所述任一个第一多媒体片段的标识信息和所述一个第二多媒体片段的标识信息对应保存在第一多媒体片段的标识信息与第二多媒体片段的标识信息的对应关系中。

可选的，所述装置还包括：

确定模块，用于根据所述多个第二多媒体片段中的每个第二多媒体片段的显示位置，确定所述每个第二多媒体片段对应的区域。

可选的，所述装置还包括：

划分模块，用于根据音频文件的歌曲信息，将所述音频文件划分成所述多个第一多媒体片段，所述歌曲信息包括所述音频文件的快慢节拍数据、鼓点数据或歌词信息中的至少一个。

可选的，对所述任一个第一多媒体片段的选择操作为长按操作、单击操作或勾选操作。

另一方面，本申请实施例提供了一种关联音频片段与视频片段装置，包括：

处理器和存储器，所述存储器用于存储一个或多个程序，所述处理器用于执行所述存储器中的一个或多个程序，以完成一方面或一方面中的任一项可选的方式。

另一方面，本申请实施例提供了一种计算机可读存储介质，所述存储介质中存储有至少一条指令，所述至少一条指令由处理器加载并执行以实现上述关联音频片段与视频片段的方法所执行的操作。

本申请实施例提供的技术方案可以包括以下有益效果：

通过显示多个第一多媒体片段以及多个第二多媒体片段。当用户需要关联某一个第一多媒体片段和某一个第二多媒体片段时，用户只需要将该某一个第一多媒体片段移动至某一个第二多媒体片段对应的区域，这样在检测到该某一个第一多媒体片段被移动至某一个第二多媒体片段对应的区域时，关联该某一个第一多媒体片段和该某一个第二多媒体片段。当每个第一多媒体片段与一个第二多媒体片段关联之后，即制作出音乐短片，如此方便用户制作音乐短片，提高了制作音乐短片的效率。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。

图1是本申请实施例提供的一种关联音频片段与视频片段的方法流程图；

图2是本申请实施例提供的另一种关联音频片段与视频片段的方法流程图；

图3是本申请实施例提供的一种音频文件的结构示意图；

图4是本申请实施例提供的第一界面的示意图；

图5是本申请实施例提供的第二界面的示意图；

图6是本申请实施例提供的一种关联音频片段与视频片段的装置结构示意图；

图7是本申请实施例提供的另一种关联音频片段与视频片段的装置结构示意图。

通过上述附图，已示出本申请明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围，而是通过参考特定实施例为本领域技术人员说明本申请的概念。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。

参见图1，本申请实施例提供了一种关联音频片段与视频片段的方法，所述方法包括：

步骤101：显示多个第一多媒体片段以及多个第二多媒体片段。

其中，第一多媒体片段为音频片段且第二多媒体片段为视频片段，或者，第一多媒体片段为视频片段且第二多媒体片段为音频片段。

步骤102：针对任一个第一多媒体片段，在检测到该任一个第一多媒体片段被移动至一个第二多媒体片段对应的区域时，关联该任一个第一多媒体片段和该一个第二多媒体片段。

在本申请实施例中，终端设备显示多个第一多媒体片段以及多个第二多媒体片段。当用户需要关联某一个第一多媒体片段和某一个第二多媒体片段时，用户只需要将该某一个第一多媒体片段移动至某一个第二多媒体片段对应的区域，这样终端设备在检测到该某一个第一多媒体片段被移动至某一个第二多媒体片段对应的区域时，关联该某一个第一多媒体片段和该某一个第二多媒体片段。当每个第一多媒体片段与一个第二多媒体片段关联之后，即制作出音乐短片，如此方便用户制作音乐短片，提高了制作音乐短片的效率。

参见图2，本申请实施例提供了一种关联音频片段与视频片段的方法，所述方法的执行主体可以为终端设备，包括：

步骤201：显示多个第一多媒体片段以及多个第二多媒体片段。

第一多媒体片段为音频片段且第二多媒体片段为视频片段，或者，第一多媒体片段为视频片段且第二多媒体片段为音频片段。

对于多个音频片段，在执行本步骤之前，终端设备获取音频文件的歌曲信息，根据该音频文件的歌曲信息，将该音频文件划分成多个音频片段，该歌曲信息包括音频文件的结构信息、鼓点数据或歌词信息等中的至少一个。

在该歌曲信息为音频文件的结构信息的情况下，音频文件的音频数据可以分为主歌、副歌、前奏和间奏等部分组成，音频文件的结构信息包括音频文件的每个部分的边界信息。终端设备将该音频文件划分成多个音频片段的操作，可以为：

根据音频文件的结构信息，可以确定音频文件的每部分，将每部分的音频数据组成不同的音频片段。

在该歌曲信息为音频文件的鼓点数据的情况下，音频文件中包括多个鼓点数据，该多个鼓点数据分布在该音频文件包括的音频数据中，相邻两个鼓点数据之间间隔一段时间。例如，参见图3所示的音频文件，该音频文件包括A、B、C和D四个鼓点数据，A、B、C和D分布在音频文件包括的音频数据中。

相应的，终端设备将该音频文件划分成多个音频片段的操作，可以为：

终端设备从该音频文件包括的鼓点数据中选择多个鼓点数据，将任意被选择的相邻两个鼓点数据之间的音频数据组成一个音频片段，将该音频文件包括的音频数据的起始位置和第一鼓点数据之间的音频数据组成一个音频片段，以及，将该音频文件包括的音频数据的结束位置和第二鼓点数据之间的音频数据组成一个音频片段。

第一鼓点数据是音频文件中的与该起始位置最近的被选择的鼓点数据，第二鼓点数据是音频文件中的与该结束位置最近的被选择的鼓点数据。

例如，参见图3所示的音频文件，终端设备可以从该音频文件中选择鼓点数据A、B、C和D，将该音频文件包括的音频数据的起始位置与鼓点数据A之间的音频数据组成第一音频片段，将鼓点数据A和B之间的音频数据组成第二音频片段，将鼓点数据B和C之间的音频数据组成第三音频片段，将鼓点数据C和D之间的音频数据组成第四音频片段，以及将鼓点数据D与该音频文件包括的音频数据的结束位置组成第五音频片段。

在该歌曲信息为音频文件的歌词信息的情况下，该歌词信息包括多句歌词，每句歌词的起始标识符和结束标识符，以及每句歌词包括的每个文字对应的时刻等信息。

相应的，终端设备将该音频文件划分成多个音频片段的操作，可以包括如下两种方式，该两种方式分别为：

第一种方式，终端设备根据该歌词信息包括的每句歌词的起始标识符和结束标识符，确定该歌词信息包括的每句歌词，从该歌词信息中选择第i*N句歌词，i＝1、2、3、……，*为乘法运算，N为大于0的整数值。根据选择的每句歌词，确定每句歌词对应的一个时刻，为了便于说明，将确定的时刻数目表示为M。将该音频文件的音频数据的起始位置至第一个时刻之间的音频数据组成一个音频片段，将该M个时刻中的任意相邻的两个时刻之间的音频数据组成一个音频片段，以及将第M个时刻至该音频文件的音频数据的结束位置之间的音频数据组成一个音频片段。

针对选择任一句歌词，确定该句歌词对应的时刻的操作，可以为：将该句歌词包括的第一个文字对应的时刻或最后一个文字对应的时刻，作为该句歌词对应的时刻。

第二种方式，终端设备从该歌词信息中选择第i*X个文字，i＝1、2、3、……，*为乘法运算，X为大于0的整数值。为了便于说明，将选择的文字数目表示为Y，获取选择的每个文字对应的时刻，即得到Y个时刻。将该音频文件的音频数据的起始位置至第一个时刻之间的音频数据组成一个音频片段，将该Y个时刻中的相邻的两个时刻之间的音频数据组成一个音频片段，以及将第Y个时刻至该音频文件的音频数据的结束位置之间的音频数据组成一个音频片段。

对于多个视频片段，在执行本步骤之前，终端设备可以从视频片段数据库中获取多个视频片段。

在实现时，终端设备可以显示多个视频片段数据库中的视频片段，用户可以从选择的视频片段中选择多个视频片段。终端设备从视频片段数据库获取被选择的视频片段。

在本步骤中，终端设备可以通过如下两种方式显示该多个第一多媒体片段和该多个第二多媒体片段。该两种方式分别为：

第一种方式，终端设备显示第一界面，第一界面包括第一部分和第二部分，第一部分包括该多个第一多媒体片段中的每个第一多媒体片段对应的图标，第二部分包括该多个第二多媒体片段中的每个第二多媒体片段对应的图标。

每个第一多媒体片段对应的图标的尺寸相等，以及每个第二多媒体片段对应的图标的尺寸相等。例如，参见图4，第一界面包括上下两部分，在第一部分中等间隔地显示该多个第一多媒体片段中的每个第一多媒体片段对应的图标(分别为第一多媒体片段A1、A2、A3和A4对应的图标)，以及在第二部分中等间隔地显示该多个第二多媒体片段中的每个第二多媒体片段对应的图标(分别为第二多媒体片段B1、B2、B3和B4对应的图标)。

在第一种方式中，在显示该多个第二多媒体片段后，根据该多个第二多媒体片段中的每个第二多媒体片段的显示位置，确定每个第二多媒体片段对应的区域。

可选的，针对任一个第二多媒体片段，从第一界面中获取该任一个第二多媒体片段对应的图标的中心位置，根据第一宽度和第一高度，确定该任一个第二多媒体片段对应的区域，该区域的中心与该中心位置重合，该区域的宽度和高度分别为第一宽度和第一高度。

第二种方式，终端设备显示第二界面，第二界面包括第一部分和第二部分，第一部分包括每个第一多媒体片段对应的图标，第一多媒体片段对应的图标的高度等于第一高度，第一多媒体片段对应的图标的长度是基于该第一多媒体片段的时间长度确定的。第二部分包括该多个第二多媒体片段中的每个第二多媒体片段对应的区域，第二多媒体片段对应的区域的高度等于第一高度，第二多媒体片段对应的区域的长度是基于该第二多媒体片段的时间长度确定的。

第二多媒体片段的时间长度越长，第二多媒体片段对应的区域的长度越长；第二多媒体片段的时间长度越短，第二多媒体片段对应的区域的长度越短。

例如，参见图5，第二界面包括上下两部分，在第一部分中显示该多个第一多媒体片段中的每个第一多媒体片段对应的图标(分别为第一多媒体片段A1、A2、A3和A4对应的图标)，以及在第二部分中显示该多个第二多媒体片段中的每个第二多媒体片段对应的区域(分别为第二多媒体片段B1、B2、B3和B4对应的区域)。

在显示出多个第一多媒体片段和多个第二多媒体片段之后，针对任一个第一多媒体片段，如果用户需要关联该任一个第一多媒体片段和某个第二多媒体片段时，用户可以选择中该任一个第一多媒体片段，向该某个第二多媒体片段拖动该任一个第一多媒体片段。实现过程如下：

步骤202：针对任一个第一多媒体片段，在检测到对该任一个第一多媒体片段的选择操作的情况下，获取该任一个第一多媒体片段的标识信息，以及监测该任一个第一多媒体片段被移动的实时位置。

在检测到用户对该任一个第一多媒体片段执行的选择操作的情况下，终端设备将该任一个第一多媒体片段的状态设置为可移动状态。然后用户可以在终端设备显示的界面中移动该任一个第一多媒体片段。

可选的，对该任一个第一多媒体片段的选择操作为长按操作、单击操作或勾选操作等。

在该选择操作为长按操作时，用户可以按压该任一个第一多媒体片段对应的图标上。终端设备当检测到用户按压该任一个第一多媒体片段的时间长度达到时长阈值时，确定该任一个第一多媒体片段被用户选择，并将该任一个第一多媒体片段对应的图标的状态设置可移动状态，然后用户可以拖动该任一个第一多媒体片段对应的图标。

在该选择操作为单击操作时，用户可以单击该任一个第一多媒体片段对应的图标上。终端设备当检测到用户单击该任一个第一多媒体片段对应的图标时，确定该任一个第一多媒体片段被用户选择，并将该任一个第一多媒体片段对应的图标的状态设置可移动状态，然后用户可以拖动该任一个第一多媒体片段对应的图标。

在该选择操作为勾选操作时，终端设备在显示任一个第一多媒体片段对应的图标时，还在该图标的附近显示该任一个多媒体片段对应的勾选框。用户可以单击该勾选框，以选择该任一个第一多媒体片段对应的图标。终端设备当检测到该勾选框被用户勾选时，确定该任一个第一多媒体片段被用户选择，并将该任一个第一多媒体片段对应的图标的状态设置可移动状态，然后用户可以拖动该任一个第一多媒体片段对应的图标。

步骤203：基于该实时位置检测该任一个第一多媒体片段是否被移动至一个第二多媒体片段对应的区域。

在本步骤中，当该实时位置位于某个第二多媒体片段对应的区域时，检测出该任一个第一多媒体片段被移动至该某个第二多媒体片段对应的区域。

步骤204：在检测到该任一个第一多媒体片段被移动至一个第二多媒体片段对应的区域时，关联该任一个第一多媒体片段和该一个第二多媒体片段。

在本步骤中，可以获取该一个第二多媒体片段对应的标识信息，将该任一个第一多媒体片段的标识信息和该一个第二多媒体片段的标识信息对应保存在第一多媒体片段的标识与第二多媒体片段的标识信息的对应关系中。

重复执行上述步骤202至204的操作，直至将每个第一多媒体片段关联到一个第二多媒体片段，从而制作出一个音乐短片。

在本申请实施例中，终端设备显示多个第一多媒体片段以及多个第二多媒体片段。在检测到对该任一个第一多媒体片段的选择操作的情况下，获取该任一个第一多媒体片段的标识信息，以及监测该任一个第一多媒体片段被移动的实时位置，基于该实时位置检测该任一个第一多媒体片段是否被移动至一个第二多媒体片段对应的区域，在检测到该任一个第一多媒体片段被移动至一个第二多媒体片段对应的区域时，关联该任一个第一多媒体片段和该一个第二多媒体片段。这样，用户只需要将该某一个第一多媒体片段移动至某一个第二多媒体片段对应的区域，就可关联该某一个第一多媒体片段和该某一个第二多媒体片段。当每个第一多媒体片段与一个第二多媒体片段关联之后，即制作出音乐短片，如此方便用户制作音乐短片，提高了制作音乐短片的效率。

下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。

参见图6，本申请实施例提供了一种关联音频片段与视频片段的装置300，所述装置300包括：

显示模块301，用于显示多个第一多媒体片段以及多个第二多媒体片段，第一多媒体片段为音频片段且第二多媒体片段为视频片段，或者，所述第一多媒体片段为视频片段且所述第二多媒体片段为音频片段；

关联模块302，用于针对任一个第一多媒体片段，在检测到所述任一个第一多媒体片段被移动至一个第二多媒体片段对应的区域时，关联所述任一个第一多媒体片段和所述一个第二多媒体片段。

可选的，所述装置300还包括：

检测模块，用于在检测到对所述任一个第一多媒体片段的选择操作的情况下，监测被选择的所述任一个第一多媒体片段被移动的实时位置，基于所述实时位置检测所述任一个第一多媒体片段是否被移动至一个第二多媒体片段对应的区域。

可选的，所述装置300还包括：

获取模块，用于在检测到对所述任一个第一多媒体片段的选择操作的情况下，获取所述任一个第一多媒体片段的标识信息；

所述关联模块302，用于获取所述一个第二多媒体片段的标识信息；将所述任一个第一多媒体片段的标识信息和所述一个第二多媒体片段的标识信息对应保存在第一多媒体片段的标识信息与第二多媒体片段的标识信息的对应关系中。

可选的，所述装置300还包括：

确定模块，用于根据所述多个第二多媒体片段中的每个第二多媒体片段的显示位置，确定所述每个第二多媒体片段对应的区域。

可选的，所述装置300还包括：

划分模块，用于根据音频文件的歌曲信息，将所述音频文件划分成所述多个第一多媒体片段，所述歌曲信息包括所述音频文件的快慢节拍数据、鼓点数据或歌词信息中的至少一个。

可选的，对所述任一个第一多媒体片段的选择操作为长按操作、单击操作或勾选操作。

在本申请实施例中，显示模块显示多个第一多媒体片段以及多个第二多媒体片段。当用户需要关联某一个第一多媒体片段和某一个第二多媒体片段时，用户只需要将该某一个第一多媒体片段移动至某一个第二多媒体片段对应的区域，这样关联模块在检测到该某一个第一多媒体片段被移动至某一个第二多媒体片段对应的区域时，关联该某一个第一多媒体片段和该某一个第二多媒体片段。当每个第一多媒体片段与一个第二多媒体片段关联之后，即制作出音乐短片，如此方便用户制作音乐短片，提高了制作音乐短片的效率。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

图7示出了本发明一个示例性实施例提供的终端400的结构框图。该终端400可以是便携式移动终端，比如：智能手机、平板电脑、MP3播放器(Moving Picture ExpertsGroup Audio Layer III，动态影像专家压缩标准音频层面3)、MP4(Moving PictureExperts Group Audio Layer IV，动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端400还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。

通常，终端400包括有：处理器401和存储器402。

处理器401可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器401可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器401也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central ProcessingUnit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器401可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器401还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。

存储器402可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器402还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器402中的非暂态的计算机可读存储介质用于存储至少一个指令，该至少一个指令用于被处理器401所执行以实现本申请中方法实施例提供的关联音频片段与视频片段的方法。

在一些实施例中，终端400还可选包括有：外围设备接口403和至少一个外围设备。处理器401、存储器402和外围设备接口403之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口403相连。具体地，外围设备包括：射频电路404、触摸显示屏405、摄像头406、音频电路407、定位组件408和电源409中的至少一种。

外围设备接口403可被用于将I/O(Input/Output，输入/输出)相关的至少一个外围设备连接到处理器401和存储器402。在一些实施例中，处理器401、存储器402和外围设备接口403被集成在同一芯片或电路板上；在一些其他实施例中，处理器401、存储器402和外围设备接口403中的任意一个或两个可以在单独的芯片或电路板上实现，本实施例对此不加以限定。

射频电路404用于接收和发射RF(Radio Frequency，射频)信号，也称电磁信号。射频电路404通过电磁信号与通信网络以及其他通信设备进行通信。射频电路404将电信号转换为电磁信号进行发送，或者，将接收到的电磁信号转换为电信号。可选地，射频电路404包括：天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路404可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于：万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity，无线保真)网络。在一些实施例中，射频电路404还可以包括NFC(Near Field Communication，近距离无线通信)有关的电路，本申请对此不加以限定。

显示屏405用于显示UI(User Interface，用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏405是触摸显示屏时，显示屏405还具有采集在显示屏405的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器401进行处理。此时，显示屏405还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在一些实施例中，显示屏405可以为一个，设置终端400的前面板；在另一些实施例中，显示屏405可以为至少两个，分别设置在终端400的不同表面或呈折叠设计；在再一些实施例中，显示屏405可以是柔性显示屏，设置在终端400的弯曲表面上或折叠面上。甚至，显示屏405还可以设置成非矩形的不规则图形，也即异形屏。显示屏405可以采用LCD(LiquidCrystal Display，液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。

摄像头组件406用于采集图像或视频。可选地，摄像头组件406包括前置摄像头和后置摄像头。通常，前置摄像头设置在终端的前面板，后置摄像头设置在终端的背面。在一些实施例中，后置摄像头为至少两个，分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality，虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中，摄像头组件406还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。

音频电路407可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波，并将声波转换为电信号输入至处理器401进行处理，或者输入至射频电路404以实现语音通信。出于立体声采集或降噪的目的，麦克风可以为多个，分别设置在终端400的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器401或射频电路404的电信号转换为声波。扬声器可以是传统的薄膜扬声器，也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时，不仅可以将电信号转换为人类可听见的声波，也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中，音频电路407还可以包括耳机插孔。

定位组件408用于定位终端400的当前地理位置，以实现导航或LBS(LocationBased Service，基于位置的服务)。定位组件408可以是基于美国的GPS(GlobalPositioning System，全球定位系统)、中国的北斗系统或俄罗斯的伽利略系统的定位组件。

电源409用于为终端400中的各个组件进行供电。电源409可以是交流电、直流电、一次性电池或可充电电池。当电源409包括可充电电池时，该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池，无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。

在一些实施例中，终端400还包括有一个或多个传感器410。该一个或多个传感器410包括但不限于：加速度传感器411、陀螺仪传感器412、压力传感器413、指纹传感器414、光学传感器415以及接近传感器416。

加速度传感器411可以检测以终端400建立的坐标系的三个坐标轴上的加速度大小。比如，加速度传感器411可以用于检测重力加速度在三个坐标轴上的分量。处理器401可以根据加速度传感器411采集的重力加速度信号，控制触摸显示屏405以横向视图或纵向视图进行用户界面的显示。加速度传感器411还可以用于游戏或者用户的运动数据的采集。

陀螺仪传感器412可以检测终端400的机体方向及转动角度，陀螺仪传感器412可以与加速度传感器411协同采集用户对终端400的3D动作。处理器401根据陀螺仪传感器412采集的数据，可以实现如下功能：动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。

压力传感器413可以设置在终端400的侧边框和/或触摸显示屏405的下层。当压力传感器413设置在终端400的侧边框时，可以检测用户对终端400的握持信号，由处理器401根据压力传感器413采集的握持信号进行左右手识别或快捷操作。当压力传感器413设置在触摸显示屏405的下层时，由处理器401根据用户对触摸显示屏405的压力操作，实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。

指纹传感器414用于采集用户的指纹，由处理器401根据指纹传感器414采集到的指纹识别用户的身份，或者，由指纹传感器414根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时，由处理器401授权该用户执行相关的敏感操作，该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器414可以被设置终端400的正面、背面或侧面。当终端400上设置有物理按键或厂商Logo时，指纹传感器414可以与物理按键或厂商Logo集成在一起。

光学传感器415用于采集环境光强度。在一个实施例中，处理器401可以根据光学传感器415采集的环境光强度，控制触摸显示屏405的显示亮度。具体地，当环境光强度较高时，调高触摸显示屏405的显示亮度；当环境光强度较低时，调低触摸显示屏405的显示亮度。在另一个实施例中，处理器401还可以根据光学传感器415采集的环境光强度，动态调整摄像头组件406的拍摄参数。

接近传感器416，也称距离传感器，通常设置在终端400的前面板。接近传感器416用于采集用户与终端400的正面之间的距离。在一个实施例中，当接近传感器416检测到用户与终端400的正面之间的距离逐渐变小时，由处理器401控制触摸显示屏405从亮屏状态切换为息屏状态；当接近传感器416检测到用户与终端400的正面之间的距离逐渐变大时，由处理器401控制触摸显示屏405从息屏状态切换为亮屏状态。

本领域技术人员可以理解，图7中示出的结构并不构成对终端400的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。

在示例性实施例中，还提供了一种计算机可读存储介质，例如包括指令的存储器，上述指令可由终端中的处理器执行以完成上述实施例中关联音频片段与视频片段的方法。例如，所述计算机可读存储介质可以是只读存储器(Read-only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

本领域技术人员在考虑说明书及实践这里公开的申请后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本申请的真正范围和精神由下面的权利要求指出。

应当理解的是，本申请并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。

Claims (10)

1.一种关联音频片段与视频片段的方法，其特征在于，所述方法包括：

显示多个第一多媒体片段以及多个第二多媒体片段，第一多媒体片段为音频片段且第二多媒体片段为视频片段，或者，所述第一多媒体片段为视频片段且所述第二多媒体片段为音频片段；

针对任一个第一多媒体片段，在检测到所述任一个第一多媒体片段被移动至一个第二多媒体片段对应的区域时，关联所述任一个第一多媒体片段和所述一个第二多媒体片段。

2.如权利要求1所述的方法，其特征在于，所述方法还包括：

在检测到对所述任一个第一多媒体片段的选择操作的情况下，监测被选择的所述任一个第一多媒体片段被移动的实时位置，基于所述实时位置检测所述任一个第一多媒体片段是否被移动至一个第二多媒体片段对应的区域。

3.如权利要求1所述的方法，其特征在于，所述方法还包括：

在检测到对所述任一个第一多媒体片段的选择操作的情况下，获取所述任一个第一多媒体片段的标识信息；

所述关联所述任一个第一多媒体片段和所述一个第二多媒体片段，包括：

获取所述一个第二多媒体片段的标识信息；

将所述任一个第一多媒体片段的标识信息和所述一个第二多媒体片段的标识信息对应保存在第一多媒体片段的标识信息与第二多媒体片段的标识信息的对应关系中。

4.如权利要求1所述的方法，其特征在于，所述显示多个第二多媒体片段之后，还包括：

根据所述多个第二多媒体片段中的每个第二多媒体片段的显示位置，确定所述每个第二多媒体片段对应的区域。

5.如权利要求1至4任一项所述的方法，其特征在于，所述第一多媒体片段为音频片段，所述显示多个第一多媒体片段之前，还包括：

根据音频文件的歌曲信息，将所述音频文件划分成所述多个第一多媒体片段，所述歌曲信息包括所述音频文件的快慢节拍数据、鼓点数据或歌词信息中的至少一个。

6.如权利要求2或3所述的方法，其特征在于，对所述任一个第一多媒体片段的选择操作为长按操作、单击操作或勾选操作。

7.一种关联音频片段与视频片段的装置，其特征在于，所述装置包括：

显示模块，用于显示多个第一多媒体片段以及多个第二多媒体片段，第一多媒体片段为音频片段且第二多媒体片段为视频片段，或者，所述第一多媒体片段为视频片段且所述第二多媒体片段为音频片段；

关联模块，用于针对任一个第一多媒体片段，在检测到所述任一个第一多媒体片段被移动至一个第二多媒体片段对应的区域时，关联所述任一个第一多媒体片段和所述一个第二多媒体片段。

8.如权利要求7所述的装置，其特征在于，所述装置还包括：

检测模块，用于在检测到对所述任一个第一多媒体片段的选择操作的情况下，监测被选择的所述任一个第一多媒体片段被移动的实时位置，基于所述实时位置检测所述任一个第一多媒体片段是否被移动至一个第二多媒体片段对应的区域。

9.一种关联音频片段与视频片段装置，其特征在于，包括：

处理器和存储器，所述存储器用于存储一个或多个程序，所述处理器用于执行所述存储器中的一个或多个程序，以完成如权利要求1至6任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述存储介质中存储有至少一条指令，所述至少一条指令由处理器加载并执行以实现如权利要求1至权利要求6任一项所述的关联音频片段与视频片段的方法所执行的操作。

Images