CN117995146A - 音乐创作方法、装置、电子设备及可读存储介质 - Google Patents

Abstract

本公开涉及一种音乐创作方法、装置、电子设备及可读存储介质，其中，该方法通过将第一音频轨道按照时间线划分为多个候选轨道片段，每个候选轨道片段对应一节拍，此外，通过建立第一音频轨道上的多个候选轨道片段与音频片段之间的对应关系，用户通过针对其中一个或多个候选轨道片段执行简单的选中操作便可在相应音乐节拍中添加音频片段，方便用户理解和创作音乐；之后，响应混音指令，按照时间线将多个第一音频轨道上添加的音频片段进行混音合成并播放，供用户预览创作的音频。且通过提供利用抽象音乐数据模型和数字化创作链路来降低用户创作音乐和编辑音乐门槛的音乐创作工具，可在任意移动端设备进行创作，打破传统创作方式对于硬件设备限制。

Description

音乐创作方法、装置、电子设备及可读存储介质

技术领域

本公开涉及计算机技术领域，尤其涉及一种音乐创作方法、装置、电子设备及可读存储介质。

背景技术

目前用户对短视频发布的背景音仍然是从专业歌手的曲库中选取，曲库本身的存量歌曲有限。用户即使时而有迸发创作热情和灵感，面对需要组织乐队，乐器采购和培训，反复排练，录制，后期混音等一系列环节，由于链路长成本高使大多数用户最终也望而却步，无从下手。音乐创作和编辑的门槛高，成本高，链路长且繁琐，不利于用户灵感的发挥，因此，如何降低音乐创作门槛，帮助用户从零开始创作一首音乐是当前亟待解决的问题。

发明内容

为了解决上述技术问题，本公开提供了一种音乐创作方法、装置、电子设备及可读存储介质。

第一方面，本公开提供了一种音乐创作方法，包括：

展示多个第一音频轨道，其中，各所述第一音频轨道按照时间线划分为多个候选轨道片段；每个所述候选轨道片段与一个音频片段相对应；

响应针对在所述多个第一音频轨道的候选轨道片段中一个或多个候选轨道片段的选中操作，将被选中的所述一个或多个候选轨道片段确定为目标轨道片段并确定所述目标轨道片段对应的音频片段被添加在所述目标轨道片段所在的第一音频轨道上与所述目标轨道片段对应的时间线位置；其中，属于同一所述第一音频轨道的多个目标轨道片段添加的音频片段相同；不同所述第一音频轨道的目标轨道片段上添加的音频片段不同；

响应混音指令，按照时间线对所述多个第一音频轨道上添加的音频片段进行混音合成并播放。

在一些实施例中，所述展示多个第一音频轨道之前，还包括：

获取用户指定的音乐风格，并基于所述用户指定的音乐风格确定与所述音乐风格匹配的乐器组合；

生成所述乐器组合包括的各乐器分别对应的所述第一音频轨道，并确定各所述分别对应的第一音频轨道上的多个候选轨道片段分别对应的音频片段；其中，所述第一音频轨道上的多个轨道片段分别对应的音频片段为所述第一音频轨道对应的乐器的音频片段。

在一些实施例中，还包括：调整所述多个第一音频轨道包括的目标轨道片段在时间线上覆盖的位置范围，且基于调整后所述目标轨道片段在时间线上覆盖的位置范围调整相应音频片段的速度，使得所述音频片段的时长与调整后的目标轨道片段在时间线上覆盖的位置范围相匹配。

在一些实施例中，还包括：响应针对新增轨道控件的触发操作，生成并展示新增第一音频轨道，并确定与所述新增第一音频轨道的多个候选轨道片段分别对应的音频片段。

在一些实施例中，还包括：响应针对删除轨道控件的触发操作，删除与所述删除轨道控件对应的所述第一音频轨道。

在一些实施例中，还包括：响应导出指令，将所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据导出并存储为指定格式的音频文件。

在一些实施例中，还包括：将用户导入的音频素材添加在第二音频轨道上，用于与所述第一音频轨道上添加的音频片段进行混音；其中，所述音频素材在所述时间线上覆盖的位置区间的起始时刻位置与所述时间线的起始时刻位置对齐；

响应所述混音指令，按照所述时间线将所述第二音频轨道上的音频素材与所述多个第一音频轨道上的音频片段进行混音合成并播放。

在一些实施例中，所述将用户导入的音频素材添加在第二音频轨道上之后，还包括：对所述第二音频轨道上的音频素材进行音频处理，音频处理包括：裁剪、变速、变调、变声中的一项或多项。

在一些实施例中，还包括：在播放所述多个第一音频轨道上的音频片段通过混音合成得到的混音数据的过程中，响应第一时刻针对自定义音频片段的触发操作，将所述自定义音频片段与所述触发操作对应的播放时刻之后播放的混音数据进行合成并播放合成得到的音频数据。

在一些实施例中，还包括：获取录制音频，并按照时间线将所述录制音频与所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据再进行合成并播放合成得到的音频数据。

在一些实施例中，还包括：获取视频素材，并按照时间线将所述视频素材与所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据进行合成，并播放得到的视频数据。

在一些实施例中，还包括：对所述视频素材进行图像处理得到具有目标图像效果的视频素材。

第二方面，本公开提供了一种音乐创作装置，包括：

展示模块，用于展示多个第一音频轨道，其中，各所述第一音频轨道按照时间线划分为多个候选轨道片段；每个所述候选轨道片段与一个音频片段相对应；

音轨处理模块，用于响应针对在所述多个第一音频轨道的候选轨道片段中一个或多个候选轨道片段的选中操作，将被选中的所述一个或多个候选轨道片段确定为目标轨道片段并确定所述目标轨道片段对应的音频片段被添加在所述目标轨道片段所在的第一音频轨道上与所述目标轨道片段对应的时间线位置；其中，属于同一所述第一音频轨道的多个目标轨道片段添加的音频片段相同；不同所述第一音频轨道的目标轨道片段上添加的音频片段不同；

合成模块，用于响应混音指令，按照时间线对所述多个第一音频轨道上添加的音频片段进行混音合成；

播放模块，用于播放混音合成生成的混音数据。

第三方面，本公开提供了一种电子设备，包括：存储器和处理器；

所述存储器被配置为存储计算机程序指令；

所述处理器被配置为执行所述计算机程序指令，使得所述电子设备实现第一方面以及第一方面任一项所述的音乐创作方法。

第四方面，本公开提供了一种可读存储介质，包括：计算机程序指令，电子设备的至少一个处理器执行所述计算机程序指令，使得所述电子设备实现第一方面以及第一方面任一项所述的音乐创作方法。

第五方面，本公开提供了一种计算机程序产品，电子设备运行所述计算机程序产品，使得所述电子设备实现第一方面以及第一方面任一项所述的音乐创作方法。

本公开提供一种音乐创作方法、装置、电子设备及可读存储介质，其中，该方法通过将第一音频轨道按照时间线划分为多个候选轨道片段，每个候选轨道片段对应一个音乐节拍，此外，通过预先建立第一音频轨道上的多个候选轨道片段与音频片段之间的对应关系，用户通过针对其中一个或多个候选轨道片段执行简单的选中操作便可在相应音乐节拍中添加音频片段，方便用户理解和创作音乐；之后，响应混音指令，按照时间线将多个第一音频轨道上添加的音频片段进行混音合成并播放，供用户预览创作的音频。且通过提供利用抽象音乐数据模型和数字化创作链路来降低用户创作音乐和编辑音乐门槛的音乐创作工具，只需要移动端设备就可以进行创作，打破了现有的音乐创作对于硬件设备限制。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本公开一实施例提供的音乐创作方法的流程图；

图2为本公开另一实施例提供的音乐创作方法的流程图；

图3为本公开另一实施例提供的音乐创作方法的流程图；

图4A至图4E为本公开一实施例提供的交互界面示意图；

图5为本公开一实施例提供的音乐创作装置的结构示意图。

具体实施方式

为了能够更清楚地理解本公开的上述目的、特征和优点，下面将对本公开的方案进行进一步描述。需要说明的是，在不冲突的情况下，本公开的实施例及实施例中的特征可以相互组合。

在下面的描述中阐述了很多具体细节以便于充分理解本公开，但本公开还可以采用其他不同于在此描述的方式来实施；显然，说明书中的实施例只是本公开的一部分实施例，而不是全部的实施例。

示例性地，本公开提供一种音乐创作方法、装置、电子设备、可读存储介质及计算机程序产品，其中，本公开通过提供利用抽象音乐数据模型和数字化创作链路来降低用户创作音乐和编辑音乐门槛的音乐创作工具，只需要移动端设备就可以完整创作一首音乐。此外，该音乐创作工具在为用户提供了原子创作能力的基础上加入了节奏、风格以及音色的选择，用户可根据自己的喜好进行创作，同时将硬件设备能力迁移至软件，脱离了昂贵繁重的硬件设备，完全模拟前者所带来的沉浸式音乐体验，用户可随时随地进行创作。此外，该音乐创作工具还提供了音乐再创作(remix)能力，在已有作品的基础上进行二次创作，满足用户的音乐创作需求。此外，该音乐创工具能够根据用户选择的音乐风格自动初始化相应乐器轨道匹配音乐风格，进一步方便用户上手，减少用户创作障碍，更大程度地为用户创作提供原始能力。且该音乐创作工具还建立了完整的音乐创作链路，打通创作过程中从0到1的整个流程，包含音乐创作、语音输入(录制音频)、实时视频(录制视频)、特效渲染、作品预览以及作品保存等各种节点，能够较为全面地满足用户在创作过程中的各种需求，极大提高了用户创作兴趣，使音乐创作全面化成为可能。

其中，本公开提供的音乐创作工具提供了乐器对应的第一音频轨道、音乐再创作对应的第二音频轨道，音乐创作工具提供了添加自由音效能力、音频录制、音频处理、视频录制、图像处理等功能，用于实现至少以下几种创作能力：

1、原子创作能力：把一首创作乐曲分为乐器轨，时间线，节奏，片段调。用户可自行选择乐器，节奏，音乐风格等，通过简单的操作即可进行创作，极大降低了创作门槛，激发了用户创作兴趣。同时提供实时即兴演奏，如电子音，人声特效，在实时录制的时候也可以直接方便的加入。

2、根据所选音乐风格自动生成乐器组合：一键解决用户乐器匹配问题，例如，用户想要创作中国风的音乐，可以为用户直接匹配二胡、古筝以及琵琶等中国传统乐器，确保用户能够创作出符合预期的音乐风格的音乐。

3、音乐再创作(remix)：音乐再创作指对现有的音乐再次进行创作，此外，对导入的音频素材还可以提供变速、变声、变调等音频处理能力。再次创作既保留了原有的音乐风格，又能够加入用户对作品的理解和想法，极大地激发了用户创作潜能。

4、实时录音、录像：提供完整的音视频创作工具，打通从音乐制作、原声输入到音频录制和保存音乐短片(MV)的完整链路，同时还加入了视频录制以及图像处理，如滤镜、特效渲染等，提供视频音频创作一站式解决方案。

其中，本公开的音乐创作方法由电子设备来执行。电子设备可以是平板电脑、手机(如折叠屏手机、大屏手机等)、可穿戴设备、车载设备、增强现实(augmented reality，AR)/虚拟现实(virtual reality，VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobilepersonal computer，UMPC)、上网本、个人数字助理(personal digital assistant，PDA)、等等设备，本公开对电子设备的具体类型不作任何限制。

基于前述描述，本公开以实施例将以电子设备为例，结合附图和应用场景，对本公开提供的音乐创作方法进行详细阐述。

请参阅图1，图1为本公开实施例提供的音乐创作方法的流程示意图。如图1所示，本公开提供的音乐创作方法可以包括：

S101、展示多个第一音频轨道，其中，各第一音频轨道按照时间线划分为多个候选轨道片段，每个候选轨道片段与一个音频片段对应。

电子设备中可以安装音乐创作工具，音乐创作工具能够提供多种类型的音频轨道，电子设备响应用户的操作可以在音频轨道上添加用于混音合成的音频片段。其中，每种类型可以对应一个或多个音频轨道，且不同类型的音频轨道数量可以相同也可以不同，且在创作过程中一些类型对应的音频轨道数量支持用户调整。

其中，音乐创作工具提供的多种类型的音频轨道可以包括但不限于：乐器对应的第一音频轨道、音乐再创作(remix能力)对应的第二音频轨道等等。其中，每种类型可以包括一个或多个音频轨道，本公开对于音乐创作工具提供的音频轨道的类型以及各类型包括的音频轨道数量不作限定。

其中，音乐创作工具可以提供乐器对应的第一音频轨道，第一音频轨道可以按照时间线被划分为多个候选轨道片段，且多个第一音频轨道上的候选轨道片段在时间线上覆盖的位置区间可以相同，或者，也可以理解为多个第一音频轨道的候选轨道片段的长度一致。可以按照设定的音乐节奏对多个第一音频轨道进行划分，每个候选轨道片段及即对应一个节拍，其中，设定的音乐节奏越慢，候选轨道片段在时间线上覆盖的区间较长，设定的音乐节奏越快，候选轨道片段在时间线上覆盖的区间较短。其中，音乐节奏支持用户调整。

其中，属于同一第一音频轨道的多个候选轨道片段对应的音频片段相同，即对应同一乐器的音频片段；属于不同第一音频轨道上的候选轨道片段对应的音频片段不同，即对应不同乐器的音频片段。需要说明的是，候选轨道片段在时间线上对应的时间范围(以下称为候选轨道片段对应的时长)、候选轨道片段对应的音频片段的时长，两者可以一致，也可以不一致。

各第一音频轨道上的候选轨道片段分别对应的音频片段可以是预先采用相应的乐器演奏进行录制并处理再存储至电子设备的存储空间中。基于用户对候选轨道片段的选中操作可以从电子设备的存储空间中读取相应的音频片段并添加至当前操作候选轨道片段所在的第一音频轨道上相应候选轨道片段在时间线上对应的位置。

音乐创作工具可以通过电子设备展示多个第一音频轨道以及各第一音频轨道包括的多个候选轨道片段。其中，本公开对于展示样式不做限定。例如，在电子设备展示的用户界面中，每个第一音频轨道可以对应一展示区域，在第一音频轨道对应的展示区域内每个候选轨道片段分别对应一展示区域，该第一音频轨道包括的多个候选轨道片段分别对应的展示区域可以按照多个候选轨道片段在时间线上的位置的先后顺序依次排列，如由左向右依次排列、由上至下依次排列等等，属于同一第一音频轨道的多个候选轨道片段分别对应的展示区域相互之间不存在重叠，方便用户能够清楚区分多个候选轨道片段以及方便用户执行选中操作。

在一些实施例中，多个第一音频轨道可以是用户手动一一触发生成并设置的，用户通过设置第一音频轨道对应的乐器设置各第一音频轨道上的各候选轨道片段对应的音频片段。

另一些实施例中，音乐创作工具可以根据用户所选的音乐风格自动匹配乐器组合，生成与乐器组合包括的多个乐器分别对应的多个第一音频轨道，并且各第一音频轨道均按时间线划分为多个候选轨道；并基于各第一音频轨道对应的乐器分别确定每个第一音频轨道上的多个候选轨道片段对应的音频片段。

其中，可以预先在音乐创作工具中设置多种音乐风格，每种音乐风格对应一乐器组合，进行音乐创作时，得到用户输入的音乐风格信息，可以查询预先设置的音乐风格与乐器组合之间的对应关系，确定用户输入的音乐风格信息所指定的音乐风格对应的乐器组合，并针对乐器组合中的各乐器分别建立相对应的第一音频轨道，因此，本实施例中，第一音频轨道的数量可以为一个或者多个，其数量与音乐风格(音乐风格对应的乐器组合所包括的乐器数量)相关。

需要说明的是，每种乐器可以对应多个音频片段，不同音频片段的时长、音调、音量大小等等可以不同，可基于不同的策略响应用户的选中操作自动从乐器对应的多个音频片段中选择适配的音频片段添加至相应的候选轨道片段在时间线上所在的位置。此处提及的策略可以但不限于基于候选轨道片段的时长选择，尽可能选择时长与候选轨道片段的时长接近的等等。

例如，用户想要创作中国风的音乐，向音乐创作工具输入音乐风格信息指示要创作的音乐风格为中国风，则音乐创作工具可以为用户匹配二胡、古筝以及琵琶三种中国传统乐器，且建立二胡、古筝以及琵琶分别对应的第一音频轨道，用户在二胡对应的第一音频轨道上可以添加二胡对应的节奏音频片段，在古筝对应的第一音频轨道上可以添加古筝对应的节奏音频片段，在琵琶对应的第一音频轨道上可以添加琵琶对应的节奏音频片段。

通过音乐风格可以一键解决用户乐器匹配问题，降低对于用户乐器以及音乐风格之间的理解能力的要求。

需要说明的是，第一音频轨道可以理解为是支持预编辑的音频轨道，在时间线上，可以在所需要时间触发播放，每个节奏点(即目标轨道片段)上的音频片段都可以增加，删除，修改。且第一音频轨道可以任意增加、删除。

当然，还可以通过其他方式确定多个第一音频轨道，并不限于上述示例的实现方式。

S102、响应针对在所述多个第一音频轨道的候选轨道片段中一个或多个候选轨道片段的选中操作，将被选中的所述一个或多个候选轨道片段确定为目标轨道片段并确定所述目标轨道片段对应的音频片段被添加在所述目标轨道片段所在的第一音频轨道上与所述目标轨道片段对应的时间线位置。

针对候选轨道片段的选中操作可以但不限于是点击、双击、长按、滑动等类型的操作。且针对不同第一音频轨道上的候选轨道片段的选中操作可以是相同或者不同类型的操作，本公开对此不做限定。

其中，被选中的候选轨道片段为目标轨道片段。被选中的候选轨道片段对应的音频片段为添加在第一音频轨道上的音频片段，能够参与混音合成。未被选中的候选轨道片段对应的音频片段可以理解为不是添加在第一音频轨道上的音频片段，无法参与混音合成。

响应针对候选轨道片段的选中操作，被选中的候选轨道片段和未被选中的候选轨道片段可以采用不同的显示样式，且不同第一音频轨道上被选中的候选轨道片段可以采用不同的显示样式，以便用户区分，例如，采用不同颜色填充用户界面中候选轨道片段对应的展示区域。

结合步骤S101所述，目标轨道片段对应的时长与相应音频片段的时长两者可以一致，也可以不一致。若目标轨道片段对应的时长与相应音频片段的时长两者一致，则音频片段将添加在目标轨道片段在时间线上的位置区间内，且音频片段的起始时刻与目标轨道片段在时间线上的起始时刻一致，例如，用户选中某个第一音频轨道上的第一个候选轨道片段，则音频片段1添加在第一个轨道片段在时间线上的位置区间内，即音频片段1占据一个轨道片段。若目标轨道片段对应的时长与相应音频片段的时长两者不一致，则音频片段将添加在被选中的候选轨道片段以及相邻的一个或多个候选轨道片段在时间线上的位置区间内，且音频片段的起始时刻与被选中的候选轨道片段在时间线上的起始时刻一致，例如，用户选中某个第一音频轨道上的第一个轨道片段，则音频片段2的时长为选轨道片段对应的时长的1.5倍，则将音频片段2添加在第一个轨道片段和第二个轨道片段在时间线上的位置区间内，即音频片段占据2个轨道片段，也可以理解为目标轨道片段包括多个候选轨道片段。

S103、响应混音指令，按照时间线对所述多个第一音频轨道上添加的音频片段进行混音合成并播放。

音乐创作工具可以获取用户输入的混音指令，并响应混音指令按照时间线将多个第一音频轨道上添加的音频片段进行混音合成并播放。其中，混音指令可以但不限于是用户通过操作音乐创作工具提供的交互界面上的一个或多个按钮触发的。

一些实施例中，音乐创作工具可以提供启动混音控件和结束混音控件，当用户操作启动混音控件，音乐创作工具可以自动开始对各第一音频轨道上的音频片段进行混音合成，直至用户操作结束混音控件时停止混音合成。

另一些实施例中，音乐创作工具可以提供启动混音控件、结束混音控件以及控制多个第一音频轨道同步播放以及暂停的播放按钮，当用户依次操作启动混音控件和播放按钮，音乐创作工具开始对各第一音频轨道上的音频片段进行混音合成，直至用户操作结束混音控件时停止混音合成。需要说明的是，由于用户操作启动混音控件和播放按钮之间会存在时间先后顺序，这一时间段无混音输入数据，在导出的音频文件中，该时间段对应的音频片段可以理解为静音片段。

其中，各第一音频轨道的起始位置在时间线上是对齐的，响应混音指令，可以从时间线的起始时刻位置开始对各第一音频轨道上的音频片段进行混音合成，并播放合成得到的音频数据。在合成时，针对合成的时刻位置，将各第一音频轨道上位置区间覆盖该时刻位置的音频片段在相应时刻位置的音频数据进行混合。

应理解，还可以通过其他方式触发混音，并不限于上述示例示出的实现方式。

在进行混音合成时，可以基于各音频片段在时间线上的关系进行混音合成得到混音数据再将混音数据输入至声卡转换并播放；也可以将各第一音频轨道上的音频片段以不同通道输入至声卡进行播放，并录制声卡输出的声音从而得到混音数据。

本实施例提供的方法，通过将第一音频轨道按照时间线划分为多个候选轨道片段，每个候选轨道片段对应一个节拍，此外，通过预先建立第一音频轨道上的多个候选轨道片段与音频片段之间的对应关系，用户通过针对其中一个或多个候选轨道片段执行简单的选中操作便可在相应节拍中添加音频片段，方便用户理解和创作音乐；之后，响应针对所述多个第一音频轨道的播放指令，按照时间线将多个第一音频轨道上添加的音频片段进行混音合成播放，供用户预览创作的合成音频。且通过提供利用抽象音乐数据模型和数字化创作链路来降低用户创作音乐和编辑音乐门槛的音乐创作工具，只需要移动端设备就可以完整创作一首音乐，打破了现有的音乐创作对于硬件设备限制。

在图1所示实施例的基础上，音乐创作工具还可以响应导出指令，将按照时间线对多个第一音频轨道上的音频片段进行混音合成得到的混音数据导出并存储为指格式的音频文件。

其中，音频文件的时长可以根据第一音频轨道的长度决定，或者，也可以为预设时长，或者，还可以根据用户控制启动混音的时刻至结束混音的时刻而定。

请参阅图2，图2为本公开另一实施例提供的音乐创作方法的流程图。如图2所示，本实施例的方法可以包括：

S201、展示多个第一音频轨道，其中，各第一音频轨道按照时间线划分为多个候选轨道片段，每个候选轨道片段与一个音频片段对应。

S202、响应针对在所述多个第一音频轨道的候选轨道片段中一个或多个候选轨道片段的选中操作，将被选中的所述一个或多个候选轨道片段确定为目标轨道片段并确定所述目标轨道片段对应的音频片段被添加在所述目标轨道片段所在的第一音频轨道上与所述目标轨道片段对应的时间线位置。

步骤S201与步骤S202可参照图1所示实施例中步骤S101、S102的详细描述，简明起见，此处不再赘述。

S203、获取用户导入的音频素材，将所述音频素材添加在第二音频轨道上。

音频素材可以是已有的、通过用户导入的歌曲，且可以经过剪裁、变速、变调、变音等音频处理后作为混音组合的一部分，也可以是纯已有的人声，例如freestyle的说唱，清唱。第二音频轨道便于用户对已有作品做二次创作。

在一些实施例中，音乐创作工具可以通过电子设备向用户展示导入用于混音的音频素材的入口，通过该入口可以进入音频素材选择页面进行选择，其中，音频素材选择页面中可以缩略聚合展示可供用户选择的音频素材。且音乐创作工具可以通过电子设备向用户提供用户音频处理对应的控件或者功能面板，方便用户对选择的音频素材进行音频处理。当然，也可以不做音频处理，直接将用户导入原始的音频素材与多个第一音频轨道上添加的音频素材进行混音合成。

需要说明的是，第二音频轨道也可以理解为是支持预编辑的音频轨道，在时间线上，可以在所需要时间触发播放，且第二音频轨道上的音频素材可以随时进行删除、替换以及音频处理。

其中，对第一音频轨道的操作和对第二音频轨道的操作可以不分先后顺序，且可以反复执行。

S204、响应混音指令，按照时间线将多个第一音频轨道上添加的音频片段与第二音频轨道上添加的音频素材进行混音合成并播放。

音乐创作工具可以获取用户输入的混音指令，并响应混音指令对多个第一音频轨道上添加的音频片段和第二音频轨道上的音频素材进行混音合成并播放。其中，混音指令可以但不限于是用户通过操作音乐创作工具提供的交互界面上的一个或多个按钮触发的。

一些实施例中，音乐创作工具可以提供启动混音控件和结束混音控件，当用户操作启动混音控件，音乐创作工具可以自动开始对各第一音频轨道上的音频片段和第二音频轨道上的音频素材进行混音合成，直至用户操作结束混音控件时停止混音合成。采用该方式，可以理解为第一音频轨道和第二音频轨道在时间线上是对齐的，且第二音频轨道上的音频素材是从时间线的起始时刻位置开始。

另一些实施例中，音乐创作工具可以提供启动混音控件、结束混音控件、控制多个第一音频轨道同步播放以及暂停的播放按钮1、可控制第二音频轨道播放以及暂停的播放按钮2；当用户依次操作启动混音控件、播放按钮1和播放按钮2，其中，操作播放按钮1和播放按钮2的先后顺序不限，音乐创作工具按照用户操作顺序对相应音频轨道上的音频片段进行混音合成，直至用户操作结束混音控件时停止混音合成。需要说明的是，由于用户操作启动混音控件、播放按钮1和播放按钮2之间会存在时间先后顺序，从用户操作启动混音控件至操作第一个播放按钮时这一时间段无混音输入数据，在导出的音频文件中，该时间段对应的音频可以理解为静音片段。在用户操作第一个播放按钮至操作第二个播放按钮这一时间段内只有第一个播放按钮对应的音频轨道参与混音，因此，在导出的音频文件中，该时间段对应的音频为第一个播放按钮对应的音频轨道上的音频片段混音而成。

在进行混音合成时，可以基于各第一音频轨道上的音频片段以及第二音频轨道上的音频素材在时间线上的关系进行混音合成得到混音数据再将混音数据输入至声卡转换并播放；也可以将各第一音频轨道上的音频片段以及第二音频轨道上的音频素材通过不同通道输入至声卡进行播放，并录制声卡输出的声音从而得到混音数据。

在图2所示实施例的基础上，音乐创作工具还可以响应导出指令，将按照时间线对多个第一音频轨道上的音频片段以及第二音频轨道上的音频素材进行混音合成得到的混音数据导出并存储为指格式的音频文件。

图3为本公开另一实施例提供的音乐创作方法的流程示意图。请参阅图3所示，本实施例的方法包括：

S301、展示多个第一音频轨道，其中，各第一音频轨道按照时间线划分为多个候选轨道片段，每个候选轨道片段与一个音频片段对应。

S302、响应针对在所述多个第一音频轨道的候选轨道片段中一个或多个候选轨道片段的选中操作，将被选中的所述一个或多个候选轨道片段确定为目标轨道片段并确定所述目标轨道片段对应的音频片段被添加在所述目标轨道片段所在的第一音频轨道上与所述目标轨道片段对应的时间线位置。

S303、响应混音指令，按照时间线对所述多个第一音频轨道上添加的音频片段进行混音合成并播放。

S304、在播放所述多个第一音频轨道上的音频片段通过混音合成得到的混音数据的过程中，响应针对自定义音频片段的触发操作，获取自定义音频片段，用于与所述触发操作对应的播放时刻之后播放的混音数据进行合成。

在播放多个第一音频轨道上的音频片段通过混音合成得到的混音数据的过程中，用户可以同步添加自定义音频片段，以增加自由音效。其中，自由音效(即自定义音频片段)的添加不受最小单位时间的限制，即不受第一音频轨道上包括的候选轨道片段的限制，可以在任意时间节点，通过用户实时触发。且用户可以在不同播放时刻添加不同的自定义音频片段。

其中，自定义音频片段可以包括但不限于一些私有厂牌和个人标识的人声，电子音，特效音等。音乐创作工具可以通过电子设备向用户展示不同自定义音频片段对应的图标，用户通过操作图标添加自定义音频片段，操作可以但不限于为单击、双击、长按等等。

结合图2所示实施例，若第二音频轨道上也添加了音频素材，则在播放多个第一音频轨道上的音频片段与第二音频轨道上的音频素材进行混音合成得到的混音数据的过程中，若用户触发添加自定义音频片段，则可以将自定义音频片段与触发操作对应的播放时刻之后的混音数据进行合成并播放合成得到的音频数据，此处的混音数据为多个第一音频轨道上的音频片段与第二音频轨道上的音频素材进行混音合成得到。

通过提供实时即兴演奏，如电子音，人声特效，在混音的时候也可以直接方便的加入，能够提高用户创作兴趣，也能够保证创作的音频满足用户预期。此外，音乐创作工具还可以响应导出指令，将按照时间线对多个第一音频轨道上的音频片段以及自定义音频片段进行混音合成得到的音频数据导出并存储为指格式的音频文件。

可选地，在图3所示实施例的基础上，还包括：

S305、获取录制音频，录制音频用于与所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据进行混音合成。

一些实施例中，播放多个第一音频轨道上的音频片段混音合成得到的混音数据时，可以打开语音拾取模块(如麦克风)同步实时录制获取录制音频，以为合成的音乐增加人声效果，或者，也可以理解为多个第一音频轨道合成的混音数据是录制音频的背景音乐呈现。

此外，在混音的过程中，用户可以随时打开或者关闭音频录制。

通过步骤S305可以实现音乐创作以及原声输入之间的链路打通，满足用户创作需求。此外，音乐创作工具还可以响应导出指令，将按照时间线对多个第一音频轨道上的音频片段以及录制音频进行混音合成得到的音频数据导出并存储为指格式的音频文件。

可选地，在图3所示实施例的基础上，还包括：

S306、获取视频素材，视频素材用于与多个第一音频轨道上的音频片段进行混音合成得到的混音数据进行合成得到视频数据。

其中，视频素材可以是用户可以导入的电子设备中已有视频，也可以是在播放的过程中通过启动电子设备的摄像头实时录制的，也可以是两者结合得到的，本公开对此不作限定。若即包含用户导入的视频素材，也启动实时录制视频，在实时录制视频，用户从电子设备中导入的已有视频可以作为录制的画中画播放，也可以完全取代录制的视频，即画中画的画幅占整个视频画面。此外，若包含用户导入的已有的视频素材，则可以在启动混音，即用户输入混音指令之前导入。

其中，将视频素材与混音数据合成时，混音数据可以作为背景音与视频素材融合。通过还方式能够方便用户创作音乐短片(MV)，满足用户的创作需求。在图3所示实施例的基础上，合成之前，还可以对视频素材进行图像处理，图像处理的方式包括但不限于：滤镜、特效、画面增强、旋转等等。若视频素材是实时录制的，则可以在录制的过程中对摄像头采集的每一帧视频图像进行处理并同步与音频轨道合成；若视频素材是用户导入的，则可以在合成的过程中逐帧对视频帧图像进行图像处理并同步与音频轨道合成。

本实施例的方法，再通过音乐创作工具提供视频录制功能，完全打通从音乐创作、原声输入到音频录制的完整链路，同时还加入了视频录制、特效渲染以及保存MV的功能，提供视频音频创作一站式解决方案。

此外，音乐创作工具还可以响应导出指令，将按照时间线对多个第一音频轨道上的音频片段以及视频素材进行合成得到的视频数据导出并存储为指格式的视频文件。

在图3所示实施例的基础上，在播放多个第一音频轨道上的音频片段进行混音合成得到的混音数据的过程中，可以并行执行上述步骤S304至S306。

结合前述图1至图3所示实施例，通过使用该音乐创作工具提供的功能进行音乐创作，能够实现低门槛的音乐创作，丰富原创音乐资源，提高创作乐趣以及提高用户创作兴趣，激发用户创作潜能，丰富音乐创作形式。此外，该音乐创作工具可以部署在移动端设备，通过在移动端实现音乐创作器能力，使得音乐创作不受限制，用户可以随时随地表达灵感。此外，音乐创作工具具有的上述多种能力能够实现创作的专业性以及简化音乐创作流程，从而激发大众兴趣，使创作全面化成为可能。

基于前述描述，将结合图4A至图4E示出的交互界面示意图，对本公开提供的音乐创作方法进行详细阐述。为了便于说明，图4A至图4E中，以电子设备为手机，手机中安装音乐创作工具，通过应用1进行音乐创作为例进行举例说明。

请参阅图4A至图4E，图4A至图4E为本公开实施例提供的人机交互界面示意图。

启动音乐创作工具，选择了音乐风格并且在第一音频轨道上的轨道片段上添加了相应乐器的音频片段和第二音频轨道上添加了音频素材，音乐创作工具可以在手机上显示如图4A所示的用户界面11，其中，用户界面11包括：区域101、区域102、区域103以及区域104。

其中，区域101可以理解为是原子音频创作区，在区域101中用户可以选择的音乐风格并基于音乐风格自动确定并显示乐器组合以及对应的第一音频轨道、且可新增或者删除第一音频轨道、改变时间线长度增加或者减少节拍、调整节奏快慢等等。

示例性地，参阅图4A所示，区域101中包括：标签101a和区域101b，标签101a用于触发显示音乐风格列表，区域101b用于显示与当前选择的音乐风格对应的第一音频轨道以及与第一音频轨道相关的组件或者信息。

示例性地，音乐创作工具通过响应针对标签101a的触发操作可以显示如图4B所示的用户界面12，用户界面12中包含音乐风格列表，音乐风格列表中包括多种音乐风格选项供用户选择，用户可以通过上下滑动或者其他方式查看更多音乐风格选项以切换音乐风格，并在区域101b中显示与所选择的音乐风格选项对应的乐器组合的一个或多个第一音频轨道。一些情况下，音乐创作工具启动时，可以默认显示指定音乐风格对应的乐器组合所对应的多个第一音频轨道，且各第一音频轨道上的候选轨道片段均为未选中状态，且第一音频轨道的时间线长度也可以是按照默认长度显示，如默认显示10个时间单元。此外，在进入音乐风格列表时，可以显示当前选中的音乐风格为选中状态，其他为未选中状态。

在图4B所示实施例基础上，假设音乐创作工具相应用户针对音乐风格列表中摇滚选项的触发操作(如点击)，则音乐创作工具可以在手机上示例性地显示如图4C所示的用户界面13，区域101b中显示摇滚风格对应的乐器，分别为贝斯、吉他、架子鼓、键盘分别对应的第一音频轨道。之后，可以通过点击音乐风格列表之外的其他任意位置退出音乐风格列表。

参照图4B所示，音乐风格列表中还可以包括自定义风格选项，如图4B所示的“自定义1”选项。一些实施例中，自定义风格选项可以包括用户之前已定义好的乐器组合，当用户选择自定义风格选项，可以显示相应乐器组合对应的多个第一音频轨道；另一些实施例中，区域101b中可以不显示任何第一音频轨道，而是由用户通过触发添加自定义风格生成自定义风格选项，并采用新增音频轨道的方式向生成的自定义风格选项中添加第一音频轨道并设置关联的乐器类型，并保存自定义风格选项的乐器组合信息至音乐风格列表，方便用户再次使用。不同自定义风格选项可以通过音乐风格名称区域，音乐风格名称可以由用户编辑。

请继续参阅图4A所示，区域101b中可以包括每个第一音频轨道对应的显示区域，第一音频轨道对应的显示区域中可以包括设置音频片段音量的标签s1、修改乐器类型的标签s2、轨道s3以及删除标签s4。

其中，轨道s3按照时间划分为多个轨道片段，如图4A中所示的的按照从左到右排列显示多个方形区域，每个方形区域表示一轨道片段，用户可以通过操作方形区域选中轨道片段，并向第一音频轨道上该轨道在时间线上对应的位置添加相应的音频片段，且被选中的轨道片段的显示样式可以与其他未被选中的轨道片段的显示样式不同，例如，图4A所示，被选中的轨道片段对应的方形区域为灰色，未被选中的轨道片段对应的方形区域为白色。此外，不同第一音频轨道上被选中的轨道片段的显示样式可以不同，例如，颜色不同；不同第一音频轨道上未被选中的轨道片段可以采用相同的显示样式，例如，均为白色。

示例性地，如图4A中所示的用户界面11中各第一音频轨道上灰色区域为被选中的轨道片段。由于不同乐器对应的音频片段的时间长度可能不同，可能需要占用一个或多个轨道片段，当需要占用多个轨道片段时，响应用户的选中操作可以将多个轨道片段的方形区域合并，例如，最后一行钢琴对应的第一音频轨道上第1至第3个时间单元合并，第8至第10个时间单元合并，钢琴对应的音频片段在时间线上的对应三个轨道片段对应的时间范围。

此外，用户可以多次操作(如连续点击)同一轨道片段对应的方形区域，调整音频片段的音调，在用户界面中可以但不限于通过颜色亮度区分，颜色越亮，音调越高，颜色越暗，音调越低。

此外，区域101中还可以包括新增音频轨道的标签s5。通过操作标签s5可以增加第一音频轨道，在一些实施例中，新增第一音频轨道可以按照音频轨道的排列顺序添加在最后一行，之后，可以通过操作新增第一音频轨道对应的修改乐器类型的标签s2设置该轨道对应的乐器。

其中，针对任一第一音频轨道对应的标签s2，音乐创作工具可以响应用户针对标签s2的触发操作(如点击)，在手机上显示如图4D所示的用户界面14，用户界面14中显示乐器列表，用户可从乐器列表选择想要的乐器。选择之后，可以通过触发显示屏幕中列表区域之外的任意位置退出乐器列表。其中，乐器列表中各乐器可以按照设定的顺序依次显示，或者也可以按照乐器类别分类显示，且在乐器列表中显示每个类别的名称，本公开对此不作限定，图4D中示出的是前者情形。

此外，区域101中还包括区域101c，区域101c中用于显示原子创作区域对应的时间线，区域101c中当前的时间线包括的时间单元按照顺序排列，用户可以通过操作其中增加节拍的标签s6和减少节拍的标签s7增加时间单元或者删除时间单元从而改变时间线长度，若要增加或者删除多个时间单元，可以连续多次操作(如连续点击)标签s6和s7即可。

需要说明的是，用户针对区域101c中时间线的修改会使用户界面11中区域101b中各第一音频轨道的长度发生变化，区域101c中的第一音频轨道上同步增加或者删除相应数量的候选轨道片段。

此外，区域101中还包括区域101d，区域101d用于展示速度调节轴，也可以理解为音乐节奏快慢调节轴或者音乐节拍快慢调节轴，用户可以通过拖动速度调节轴上的调节按钮调整音乐节奏，区域101d中可以显示当前速度值，速度值越大表示音乐节奏越快。例如，图4A中所示，当前速度为：120，向左拖动调节按钮可以降低速度，向右拖动调节按钮可以加大速度，在调节的过程中，区域101d中显示的速度值随调节而同步变化。

需要说明的是，当调整速度之后，时间线上每个时间单元的长度会发生变化，各第一音频轨道上的候选轨道片段在时间线上覆盖的区间也会发生变化；速度值越高，时间单元的时长越短，候选轨道片段在时间线上覆盖的区间越小；速度值越低，时间单元的时长越长，候选轨道片段在时间线上覆盖的区间越大。调整速度之后，用户界面的区域101b和区域101c中所显示的时间单元的标识的显示样式可以不变(如表示时间单元和候选轨道片段的方形区域的大小不变)，也可以发生变化(如表示时间单元和候选轨道片段的方形区域的大小随节奏变慢而变长或者随节奏变慢而变短)。

此外，由于调整了整体音乐节奏，被选中的候选轨道片段对应的音频片段的速度也需要进行调整，使得节奏音频片段的速度与调整后的音乐节奏一致，从而适配调整后的时间单元的时长。

此外，区域101中还包括：播放按钮101e，通过操作播放按钮101e可以控制电子设备播放区域101中的多个第一音频轨道上的音频片段供用户预览混音效果。在预览播放时，可以按照时间线播放，在用户界面中，可以理解为按照区域101b中按照从左到右的顺序按列并播放。且随着播放位置可以突出显示播放位置对应的一列轨道片段对应的方形区域，例如，这列轨道片段对应的方形区域的位置以及大小可以发生变化。

区域102可以理解为本地音频BGM创作区，通过操作区域102用户可以上传本地音频文件进行二次创作。通过操作区域102上传的音频文件添加在第二音频轨道上。通过操作区域102还可以对上传的音频文件进行变速、变声、裁剪、变调、音量设置等等。示例性地，如图4A所示，区域102中包括：标签x1、时间轴x2、音量设置按钮x3、播放按钮x4以及展示特效的区域x5。其中，标签x1用于进入音频文件选择页，通过音频文件选择页可以选择要导入的用于二次创作的音频素材，并添加在第二音频轨道。时间轴x2可以展示用户添加的音频素材的总时长以及播放进度。通过音量设置按钮x3可以增加或者降低合成时第二音频轨道上的音频素材的音量。此外，区域102中还可以包括：标签x6，用于进入音频处理功能面板，音频处理功能面板可以提供裁剪、变速、变声、变调等一项或多项音频处理功能对应的按钮或者组件，通过触发相应按钮或者组件对第二音频轨道上的音频素材进行裁剪、变速、变声等处理。音频处理功能面板中还可以提供下载功能，以下载经过音频处理所得到的音频素材。在一些实施例中，或者，也可以将一些音频处理功能对应的标签设置在区域102中，例如，将裁剪、变速、变声、变调分别对应的按钮或者组件设置在区域102中(如标签x2、x3、x4以及x6所在区域的黑色框的下方)，方便用户使用，则可以不设置标签x6，且在区域102中设置下载按钮，方便用户下载经过也音频处理得到的音频素材。

通过区域101和区域102可以实现对第一音频轨道以及第二音频轨道进行预编辑。

区域103为自由音效创作区域，通过操作区域103提供的按键盘中的按键，在第三音频轨道上的任意时间点添加与按键相对应的自由音效。且按键盘中各按键对应的自由音效支持用户自定义，用户可根据需求将喜欢的音效的自定义音频片段与按键绑定，在创作时使用。示例性地，区域103中包括区域103a以及多个按键103b，区域103a用于展示区域103的主题内容，例如，区域103a中显示区域名称“自由音效创作区”和区域的详情介绍“按键盘对应按键，提供时间轨道上更为自由的创作能力”；此外，多个按键130b可以分别对应不同的厂牌音乐，例如，图4A所示，按照由左向右的顺序，多个按键103b依次对应FUHH、UFO、STRIKE、LONDON、MOON、WIPE、TIMER、FLASH、ORDER厂牌音乐，且依次对应标识A、S、D、F、G、H、J、K。本公开对于按键盘中的按键数量不作限定，用户可以根据需求自定义进行增加和删除，且按键盘的显示样式不做限定，除图4A所示的方式之外，还可以采用其他显示样式，例如按键形状可以为圆形、颜色可以为彩色，其中的标识也可以为其他字体和字号。

其中，可以通过触发区域101中的播放按钮以及区域102中的播放按钮播放第一音频轨道和第二音频轨道上的音频片段，在播放的过程中，通过操作区域103中的按键盘中的按键在时间线上的任意时间线添加自由音效。

区域104为音视频创作区域，用户通过操作区域104中的按钮可以实现实时录制环境音频和视频，也可以通过操作区域104中的按钮从电子设备中导入已存在的视频素材。且可以通过预览窗口预览录制的视频/导入的视频；此外，还可以通过图像处理相关按钮对视频素材进行处理。示例性地，如图4A所示，区域104包括区域y1、预览窗口y2、开始预览标签y3、结束预览标签y4、开始录制标签y5、结束录制标签y6、下载素材标签y7、特效标签y8、旋转组件y9以及移动组件y10。

其中，区域y1中用户显示区域104的主题以及详情介绍，例如显示文字内容“音视频创作区”和“提供视频轨道+麦克风轨道+混音轨道集合融合能力和视频特效编辑”，当然也可以显示其他内容，本公开对不作限定。

预览窗口y2可以显示实时录制的视频画面，也可以用于在结束录制之后预览播放视频素材与其他音频轨道合成得到的视频数据。本公开对于预览窗口y2的尺寸以及显示样式不作限定。

开始预览标签y3用于触发在预览窗口y2中播放视频素材与其他音频轨道合成得到的视频数据；类似地，结束预览标签y4用于触发在预览窗口y2中结束播放视频素材与其他音频轨道合成得到的视频。

开始录制标签y5用于触发录制音频和/或视频素材以及触发开始混音录制。在一些实施例中，还可以设置启用麦克风录制音频的选项和启用摄像头录制视频的选项，用户可以选择单独启用麦克风或者单独启动摄像头录制，或者，也可以同时选择，如此设置灵活性更高。或者，还可以分别设置禁用麦克风和摄像头的按钮，在未选择禁用时，默认同时启用麦克风和摄像头进行混音录制，需要禁用时基于需求进行设置。

结束录制标签y6用户触发停止录制音频和/或视频素材以及结束混音录制。

用户触发开始录制标签y5输入混音指令，触发开始混音录制并同步启动录制视频和音频，点击标签101e和标签x4播放第一音频轨道上的音频片段以及用户导入的音频素材，在播放录制的混音数据的过程中，还可以加入自由音效。之后，用户触发开始录制标签y6停止混音录制以及停止录制音频和视频。并跳转至预览界面，预览最终的混音数据/视频数据。

下载素材标签y7用于将最终得到的混音数据/视频数据导出为指定格式的音频文件/视频文件。

特效标签y8用于进入特效列表。示例性地，音乐创作工具相应用户1针对特效标签y8的触发操作，可显示如图4E所示的用户界面15，用户界面15中显示特效列表，在特效列表中以特效名称展示各特效，用户可以选择使用特效，其中，在用户界面15中，用户可以但不限于通过上下滑动屏幕、滚动鼠标滚轮的方式查看更多特效。其中，可以在开始录制之前选定要使用的特效，也可以在录制的过程中选择使用特效，若在录制的过程中选择使用特效，触发选择使用特效的录制时刻之后录制的视频图像应用特效，之前录制的视频图像未应用特效。且用户在选择特效之后，音乐创作工具可以响应用户的操作可以为当前预览窗口中显示的视频帧图像应用特效，并将添加了特效的视频帧图像显示在预览窗口中，供用户预览效果。

旋转组件y9用于旋转视频素材的视频帧图像，旋转时可以顺时针旋转，也可以逆时针旋转，旋转方向不作限定。旋转角度范围为0-360度。在录制视频的过程中，可以实时触发旋转组件y9，以将视频画面旋转。

移动组件y10用于移动视频帧图像，移动组件可以包括用于沿X轴移动视频帧图像的组件和沿Y轴移动视频帧图像的组件。由于移动视频帧图像会使部分图像区域移出预览窗口，预览窗口中会存在一部分区域未被视频帧图像覆盖，该部分未被覆盖的窗口区域可以显示预先设定的背景颜色，如黑色、灰色等等。在录制视频的过程中，可以实时触发移动组件y10，以将视频画面水平或者竖直移动。

此外，区域104中还可以包括：用于控制预览播放以及暂停预览播放的播放控件、时间轴、音量按钮、全屏按钮以及进入视频相关的功能面板入口等等，功能面板中可以包括下载功能对应的控件、设置画中画的组件等等。

结合图4A至图4E所实施例，本公开通过提供利用抽象音乐数据模型和数字化创作链路来降低用户创作音乐和编辑音乐门槛的音乐创作工具，只需要移动端设备就可以完整创作一首音乐。此外，该音乐创作工具在为用户提供了原子创作能力的基础上加入了，节奏、风格以及音色的选择，用户可根据自己的喜好进行创作，同时将硬件设备能力迁移至软件，脱离了昂贵繁重的硬件设备，完全模拟前者所带来的沉浸式音乐体验，用户可随时随地进行创作。此外，该音乐创作工具还提供了音乐再创作(remix)能力，在已有作品的基础上进行二次创作，满足用户的音乐创作需求。同时根据用户选择风格，自动初始化相应乐器轨道匹配风格，进一步方便上手，减少用户创作障碍，更大程度地为用户创作提供原始能力。且该音乐创作工具建立了完整的音乐创作链路，打通创作过程中从0到1的整个流程，包含音乐创作、语音输入、实时视频、特效渲染以及作品保存等各种节点，极大提高了用户创作兴趣，使音乐创作全面化成为可能。

图5为本公开一实施例提供的音乐创作装置的结构示意图。请参阅图5所示，本实施例提供的音乐创作装置500包括：

展示模块501，用于展示多个第一音频轨道，其中，各所述第一音频轨道按照时间线划分为多个候选轨道片段；每个所述候选轨道片段与一个音频片段相对应。

音轨处理模块502，用于响应针对在所述多个第一音频轨道的候选轨道片段中一个或多个候选轨道片段的选中操作，将被选中的所述一个或多个候选轨道片段确定为目标轨道片段并确定所述目标轨道片段对应的音频片段被添加在所述目标轨道片段所在的第一音频轨道上与所述目标轨道片段对应的时间线位置；其中，属于同一所述第一音频轨道的多个轨道片段添加的音频片段相同；不同所述第一音频轨道的轨道片段上添加的音频片段不同。

合成模块503，用于响应混音指令，按照时间线对所述多个第一音频轨道上添加的音频片段进行混音合成.

播放模块504，用于播放混音合成生成的混音数据。

在一些实施例中，音轨处理模块502，还用于获取用户指定的音乐风格，并基于所述用户指定的音乐风格确定与所述音乐风格匹配的乐器组合；生成所述乐器组合包括的各乐器分别对应的所述第一音频轨道，并确定各所述分别对应的第一音频轨道上的多个候选轨道片段分别对应的音频片段；其中，所述第一音频轨道上的多个轨道片段分别对应的音频片段为所述第一音频轨道对应的乐器的音频片段。

在一些实施例中，音轨处理模块502，还用于调整所述多个第一音频轨道包括的目标轨道片段在时间线上覆盖的位置范围，且基于调整后所述目标轨道片段在时间线上覆盖的位置范围调整相应音频片段的速度，使得所述音频片段的时长与调整后的目标轨道片段在时间线上覆盖的位置范围相匹配。

在一些实施例中，音轨处理模块502，还用于响应针对新增轨道控件的触发操作，生成并展示新增第一音频轨道，并确定与所述新增第一音频轨道的多个候选轨道片段分别对应的音频片段。

在一些实施例中，音轨处理模块502，还用于响应针对删除轨道控件的触发操作，删除与所述删除轨道控件对应的所述第一音频轨道。

在一些实施例中，还包括：导出模块505，用于响应导出指令，将所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据导出并存储为指定格式的音频文件。

在一些实施例中，音轨处理模块502，还用于将用户导入的音频素材添加在第二音频轨道上，用于与所述第一音频轨道上添加的音频片段进行混音；其中，所述音频素材在所述时间线上覆盖的位置区间的起始时刻位置与所述时间线的起始时刻位置对齐；

合成模块503，用于响应混音指令，按照所述时间线将所述第二音频轨道上的音频素材与所述多个第一音频轨道上的音频片段进行混音合成得到混音数据；播放模块504，用于播放相应的混音数据。

在一些实施例中，音轨处理模块502，还用于对所述第二音频轨道上的音频素材进行音频处理，音频处理包括：裁剪、变速、变调、变声中的一项或多项。

在一些实施例中，合成模块503，还用于在播放所述多个第一音频轨道上的音频片段通过混音合成得到的混音数据的过程中，响应针对自定义音频片段的触发操作，将所述自定义音频片段与所述触发操作对应的播放时刻之后播放的混音数据进行合成；播放模块504，用于播放合成得到的音频数据。

在一些实施例中，装置500还包括：音频录制模块506，用于获取录制音频。合成模块503，还用于按照时间线将所述录制音频与所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据再进行合成并播放合成得到的音频数据。

在一些实施例中，装置500还包括：视频处理模块507，用于获取视频素材。合成模块503，还用于按照时间线将所述视频素材与所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据进行合成，并播放得到的视频数据。

在一些实施例中，视频处理模块507，还用于对所述视频素材进行图像处理得到具有目标图像效果的视频素材。

本实施例的装置可以用于执行前述任一方法实施例的技术方案，其实现原理以及技术效果类似，可参照前述方法实施例的详细描述，简明起见，此处不再赘述。

示例性地，本公开提供一种电子设备，包括：一个或多个处理器；存储器；以及一个或多个计算机程序；其中一个或多个计算机程序被存储在存储器中；一个或多个处理器在执行一个或多个计算机程序时，使得电子设备实现前文实施例的音乐创作方法。

示例性地，本公开提供一种芯片系统，芯片系统应用于包括存储器和传感器的电子设备；芯片系统包括：处理器；当处理器执行前文实施例的音乐创作方法。

示例性地，本公开提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器使得电子设备执行时实现前文实施例的音乐创作方法。

示例性地，本公开提供一种计算机程序产品，当计算机程序产品在计算机上运行时，使得计算机执行前文实施例的音乐创作方法。

需要说明的是，在本文中，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上所述仅是本公开的具体实施方式，使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下，在其它实施例中实现。因此，本公开将不会被限制于本文所述的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (16)

1.一种音乐创作方法，其特征在于，包括：

展示多个第一音频轨道，其中，各所述第一音频轨道按照时间线划分为多个候选轨道片段；每个所述候选轨道片段与一个音频片段相对应；

响应针对在所述多个第一音频轨道的候选轨道片段中一个或多个候选轨道片段的选中操作，将被选中的所述一个或多个候选轨道片段确定为目标轨道片段，并确定所述目标轨道片段对应的音频片段被添加在所述目标轨道片段所在的第一音频轨道上与所述目标轨道片段对应的时间线位置；其中，属于同一所述第一音频轨道的多个目标轨道片段添加的音频片段相同；不同所述第一音频轨道的目标轨道片段上添加的音频片段不同；

响应混音指令，按照时间线对所述多个第一音频轨道上添加的音频片段进行混音合成并播放。

2.根据权利要求1所述的方法，其特征在于，所述展示多个第一音频轨道之前，还包括：

获取用户指定的音乐风格，并基于所述用户指定的音乐风格确定与所述音乐风格匹配的乐器组合；

生成所述乐器组合包括的各乐器分别对应的所述第一音频轨道，并确定各所述分别对应的第一音频轨道上的多个候选轨道片段分别对应的音频片段；其中，所述第一音频轨道上的多个轨道片段分别对应的音频片段为所述第一音频轨道对应的乐器的音频片段。

3.根据权利要求1所述的方法，其特征在于，还包括：

调整所述多个第一音频轨道包括的目标轨道片段在时间线上覆盖的位置范围，且基于调整后所述目标轨道片段在时间线上覆盖的位置范围调整相应音频片段的速度，使得所述音频片段的时长与调整后的目标轨道片段在时间线上覆盖的位置范围相匹配。

4.根据权利要求1所述的方法，其特征在于，还包括：

响应针对新增轨道控件的触发操作，生成并展示新增第一音频轨道，并确定与所述新增第一音频轨道的多个候选轨道片段分别对应的音频片段。

5.根据权利要求1所述的方法，其特征在于，还包括：

响应针对删除轨道控件的触发操作，删除与所述删除轨道控件对应的所述第一音频轨道。

6.根据权利要求1至5任一项所述的方法，其特征在于，还包括：

响应导出指令，将所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据导出并存储为指定格式的音频文件。

7.根据权利要求1所述的方法，其特征在于，还包括：

将用户导入的音频素材添加在第二音频轨道上，用于与所述第一音频轨道上添加的音频片段进行混音；其中，所述音频素材在所述时间线上覆盖的位置区间的起始时刻位置与所述时间线的起始时刻位置对齐；

响应所述混音指令，按照所述时间线将所述第二音频轨道上的音频素材与所述多个第一音频轨道上的音频片段进行混音合成并播放。

8.根据权利要求7所述的方法，其特征在于，所述将用户导入的音频素材添加在第二音频轨道上之后，还包括：

对所述第二音频轨道上的音频素材进行音频处理，音频处理包括：裁剪、变速、变调、变声中的一项或多项。

9.根据权利要求1所述的方法，其特征在于，还包括：

在播放所述多个第一音频轨道上的音频片段通过混音合成得到的混音数据的过程中，响应针对自定义音频片段的触发操作，将所述自定义音频片段与所述触发操作对应的播放时刻之后播放的混音数据进行合成并播放合成得到的音频数据。

10.根据权利要求1所述的方法，其特征在于，还包括：

获取录制音频，并按照时间线将所述录制音频与所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据再进行合成并播放合成得到的音频数据。

11.根据权利要求1所述的方法，其特征在于，还包括：

获取视频素材，并按照时间线将所述视频素材与所述多个第一音频轨道上的音频片段进行混音合成得到的混音数据进行合成，并播放得到的视频数据。

12.根据权利要求11所述的方法，其特征在于，还包括：

对所述视频素材进行图像处理得到具有目标图像效果的视频素材。

13.一种音乐创作装置，其特征在于，包括：

展示模块，用于展示多个第一音频轨道，其中，各所述第一音频轨道按照时间线划分为多个候选轨道片段；每个所述候选轨道片段与一个音频片段相对应；

音轨处理模块，用于响应针对在所述多个第一音频轨道的候选轨道片段中一个或多个候选轨道片段的选中操作，将被选中的所述一个或多个候选轨道片段确定为目标轨道片段并确定所述目标轨道片段对应的音频片段被添加在所述目标轨道片段所在的第一音频轨道上与所述目标轨道片段对应的时间线位置；其中，属于同一所述第一音频轨道的多个轨道片段添加的音频片段相同；不同所述第一音频轨道的轨道片段上添加的音频片段不同；

合成模块，用于响应混音指令，按照时间线对所述多个第一音频轨道上添加的音频片段进行混音合成；

播放模块，用于播放混音合成生成的混音数据。

14.一种电子设备，其特征在于，包括：存储器和处理器；

所述存储器被配置为存储计算机程序指令；

所述处理器被配置为执行所述计算机程序指令，使得所述电子设备实现如权利要求1至12任一项所述的音乐创作方法。

15.一种可读存储介质，其特征在于，包括：计算机程序指令；

电子设备执行所述计算机程序指令，使得所述电子设备实现如权利要求1至12任一项所述的音乐创作方法。

16.一种计算机程序产品，其特征在于，电子设备运行所述计算机程序产品，使得所述电子设备实现如权利要求1至12任一项所述的音乐创作方法。