CN109859739A - 基于语音合成的旋律生成方法、装置及终端设备 - Google Patents

基于语音合成的旋律生成方法、装置及终端设备 Download PDF

Info

Publication number
CN109859739A
CN109859739A CN201910008136.XA CN201910008136A CN109859739A CN 109859739 A CN109859739 A CN 109859739A CN 201910008136 A CN201910008136 A CN 201910008136A CN 109859739 A CN109859739 A CN 109859739A
Authority
CN
China
Prior art keywords
chord
note
target
combination
lyrics
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910008136.XA
Other languages
English (en)
Other versions
CN109859739B (zh
Inventor
梅亚琦
刘奡智
王健宗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201910008136.XA priority Critical patent/CN109859739B/zh
Publication of CN109859739A publication Critical patent/CN109859739A/zh
Application granted granted Critical
Publication of CN109859739B publication Critical patent/CN109859739B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明适用于数据处理技术领域,提供了基于语音合成的旋律生成方法、装置、终端设备以及计算机可读存储介质,包括:获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集;从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。本发明基于目标歌词自动生成旋律,提升了旋律生成的效果和准确性。

Description

基于语音合成的旋律生成方法、装置及终端设备
技术领域
本发明属于数据处理技术领域,尤其涉及基于语音合成的旋律生成方法、装置、终端设备以及计算机可读存储介质。
背景技术
随着时代发展,音乐已成为人们日常生活必不可少的一部分。音乐创作包括作词和作曲,由于作词较为简单,比较容易掌握,故根据已创作的歌词来进行谱曲是当今常见的音乐创作方式。
在现有技术中,除了人为谱曲之外,通常是将歌词输入已训练的模型,如隐马尔可夫模型,并将模型的输出结果作为与歌词对应的旋律。但是,旋律的好听与否主要取决于训练集的类型和模型的精度,并且通过模型生成旋律容易导致旋律的节拍和节奏无法控制。综上,现有技术中旋律生成的效果差,容易导致旋律与歌词不契合。
发明内容
有鉴于此,本发明实施例提供了基于语音合成的旋律生成方法、装置、终端设备以及计算机可读存储介质,以解决现有技术中旋律生成效果差,旋律与歌词不契合的问题。
本发明实施例的第一方面提供了一种基于语音合成的旋律生成方法,包括:
获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;
根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系;
从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
本发明实施例的第二方面提供了一种基于语音合成的旋律生成装置,包括:
分词单元,用于获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;
组合单元,用于根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系;
输出单元,用于从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
本发明实施例的第三方面提供了一种终端设备,所述终端设备包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如下步骤:
获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;
根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系;
从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
本发明实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如下步骤:
获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;
根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系;
从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
本发明实施例与现有技术相比存在的有益效果是:
本发明实施例通过对目标歌词进行分词得到至少两个分词结果,并根据音符模板集为每个分词结果分配音符模板,将分配的所有音符模板组合为目标音符集,并将设置好音阶的组合和弦添加至目标音符集生成目标旋律,本发明实施例通过执行分词、音符分配以及添加和弦的操作,使得生成的旋律贴合于已有的目标歌词,提升了旋律生成的效果和准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的基于语音合成的旋律生成方法的实现流程图;
图2是本发明实施例二提供的基于语音合成的旋律生成方法的实现流程图;
图3是本发明实施例三提供的基于语音合成的旋律生成方法的实现流程图;
图4是本发明实施例四提供的基于语音合成的旋律生成方法的实现流程图;
图5是本发明实施例五提供的基于语音合成的旋律生成方法的实现流程图;
图6是本发明实施例六提供的目标音符集的示意图;
图7是本发明实施例七提供的目标旋律的五线谱示意图;
图8是本发明实施例八提供的基于语音合成的旋律生成装置的结构框图;
图9是本发明实施例九提供的终端设备的示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
图1示出了本发明实施例提供的基于语音合成的旋律生成方法的实现流程,详述如下:
在S101中,获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果。
在本发明实施例中,针对待生成旋律的场景,首先获取目标歌词,并对目标歌词进行分词得到至少两个分词结果,其中,目标歌词为文本格式,分词结果为连词,即具有含义的词组,如“运动”、“生命”或“飞翔”等。在对目标歌词进行分词时,可调用开源的分词接口或基于预设的分词库进行分词,具体内容在后文进行详细阐述。值得一提的是,在进行分词时优先选取字数较多的分词结果,如分词时存在“长城”和“万里长城”的分词结果,则选取字数更多的“万里长城”的分词结果,以使分词结果更贴近目标歌词原有的含义。优选地,目标歌词为一句歌词,若存在整首歌的歌词,则可通过标点符号(如逗号或句号等)将整首歌的歌词拆分为至少两个目标歌词,从而对每个目标歌词进行单独分析。
在S102中,根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系。
在本发明实施例中,预先设置音符模板集,音符模板集中包括至少两个音符模板,并且每个音符模板与一个预设的字数存在映射关系,音符模板可根据实际应用场景进行设置,同时,为了提升旋律的多样性,可设置一个字数对应的音符模板包括至少一种结果,为了便于说明,假设一种设置方式如下:
(1)设置为1的字数对应的音符模板为一个二分音符或一个四分音符;
(2)设置为2的字数对应的音符模板为两连音(即两个音符连续弹奏,中间不中断),具体为两个八分音符或两个十六分音符;
(3)设置为3的字数对应的音符模板为三连音(即三个音符连续弹奏,中间不中断),具体为一个八分音符加上两个十六分音符或两个十六分音符加上一个八分音符,上述两者的顺序不同。
对于得到的每个分词结果,根据分词结果的字数从音符模板集中分配对应的音符模板,若音符模板中包括至少两个结果,则从对应的音符模板中随机选择一个分配给分词结果。假设目标歌词为“你是我生命的翅膀”,并假设进行分词后得到的分词结果包括“你”、“是”、“我”、“生命”、“的”以及“翅膀”,以上述例子中设置的音符模板集进行分配,则得到的音符模板的一种分配方式为:为字数为1的分词结果“你”分配一个二分音符;为字数为1的分词结果“是”分配一个四分音符;为字数为1的分词结果“我”分配一个四分音符;为字数为2的分词结果“生命”分配两个八分音符;为字数为1的分词结果“的”分配一个四分音符;为字数为2的分词结果“翅膀”分配两个八分音符。在音符模板分配完成后,将分配的所有音符模板组合为目标音符集,其中,组合的顺序为分词结果在原目标歌词中的顺序,以上述例子举例,则组合出的目标音符集为“二分音符-四分音符-四分音符-八分音符*2-四分音符-八分音符*2”。
在S103中,从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
为了保证生成的旋律的音乐性,除了预先设置音符模板集之外,在本发明实施例中还设置和声库,和声库内包括至少两个组合和弦,和弦是指将三个或三个以上的音在纵向上加以结合构成的音,而组合和弦包括至少两个和弦。本发明实施例中的和声库可自由设置,为了便于说明,假设设置的和声库包括六种组合和弦:
①C和弦、Am和弦、F和弦和G和弦;
②Am和弦、Dm和弦、E和弦和Am和弦;
③Am和弦、F和弦、C和弦、和G和弦;
④C和弦、G和弦、F和弦和G和弦;
⑤C和弦、Em和弦、F和弦和G和弦;
⑥F和弦、G和弦和C和弦。
对于预设的和声库,可从中随机挑选组合和弦添加至目标音符集中,生成并输出目标旋律,其中,在将组合和弦添加至目标音符集时,组合和弦内的每一个和弦都对应至少一个音符,另外,在添加至目标音符集前,还为挑选出的组合和弦中的每一个和弦设置音阶,音阶可随机设置或应用其他的设置方式。
可选地,获取所述组合和弦内每个所述和弦对应的所有和弦内音,并随机选择一个所述和弦内音作为所述和弦的音阶。为了保证生成的目标旋律不突兀,具有可听性,在本发明实施例中,由于和弦至少由三个音组成,故获取组合和弦内每个和弦对应的所有和弦内音(一个和弦对应的所有和弦内音的数量为三个或三个以上),和弦内音即为组成和弦的音的音阶。然后从某一个和弦对应的所有和弦内音中随机选择一个作为该和弦的音阶,在对挑选出的组合和弦内每个和弦都设置完音阶后,将组合和弦添加至目标音符集。在此基础上,由于组合和弦内某一个和弦对应的可能是至少两个音符,故对于和弦对应的每一个音符(不包括连音),都随机设置一次该和弦的音阶,并将设置了音阶的和弦应用在该音符的音符时值中,以提升目标旋律的多样性。举例来说,假设随机挑选出的组合和弦为①,且目标音符集与组合和弦①的对应关系为“二分音符(C和弦)-四分音符(Am和弦)-四分音符(Am和弦)-八分音符*2(F和弦)-四分音符(F和弦)-八分音符*2(G和弦)”,对于组合和弦①内的每个和弦,随机选择对应的三个和弦内音中的一个作为该和弦的音阶,具体地,C和弦对应的和弦内音包括1、3和5,Am和弦对应的和弦内音包括1、3和6,F和弦对应的和弦内音包括1、4和6,G和弦对应的和弦内音包括2、5和7,则一种选择结果是“二分音符(C和弦,音阶为5)-四分音符(Am和弦,音阶为3)-四分音符(Am和弦,音阶为6)-八分音符*2(F和弦,音阶为1)-四分音符(F和弦,音阶为4)-八分音符*2(G和弦,音阶为5)”。在输出目标旋律时,还可提供重新选择的选项,便于在用户不满意目标旋律时,通过重新选择的选项发出重新挑选和弦音阶的指令。
通过图1所示实施例可知,在本发明实施例中,通过获取目标歌词,并对目标歌词进行分词得到至少两个分词结果,根据预设的音符模板集和分词结果的字数为每个分词结果分配音符模板,并将已分配的所有音符模板组合为目标音符集,从预设的和声库挑选出组合和弦,为组合和弦中的每个和弦设置音阶,并将已设置音阶的组合和弦添加至目标音符集,生成并输出目标旋律。本发明实施例基于目标歌词自动生成旋律,提升了旋律生成的效果和准确性。
图2所示,是在本发明实施例一的基础上,将对目标歌词进行分词得到至少两个分词结果的过程进行细化后得到的一种方法。本发明实施例提供了基于语音合成的旋律生成方法的实现流程图,如图2所示,该旋律生成方法可以包括以下步骤:
在S201中,重复根据预设的分词词长对所述目标歌词的末尾进行截取得到截取歌词,并将所述截取歌词与预设的分词库中的所有所述比对分词进行匹配,直到所述目标歌词全部被匹配完毕为止,其中,所述分词库包括至少两个所述比对分词。
在进行分词时,为了提升分词准确性,从目标歌词的末尾开始进行分词,具体根据预设的分词词长对目标歌词的末尾进行截取得到截取歌词,并将截取歌词与预设的分词库中的所有比对分词进行匹配,直到目标歌词全部被匹配完毕为止,其中,分词词长可根据实际应用场景进行设置,但设置的分词词长应大于或等于2,分词库包括有至少两个比对分词,该比对分词为连词或单个的字。
在S202中,若所述截取歌词与所有所述比对分词均不匹配,则重复删除所述截取歌词起始的第一个字,并将删除后的所述截取歌词与所有所述比对分词进行匹配,直到所述截取歌词与其中一个所述比对分词匹配成功为止。
若截取歌词与分词库中的所有比对分词均不匹配,则重复删除截取歌词起始的第一个字,并将删除后的截取歌词与所有比对分词进行匹配,直到截取歌词与一个比对分词匹配成功为止。为了便于说明,假设目标歌词为“你是我生命的翅膀”,分词词长为5,则第一个截取后得到的截取歌词为“生命的翅膀”,则示例的根据“生命的翅膀”进行的匹配过程如下:
(1)将“生命的翅膀”与分词库中的所有比对分词进行匹配,“生命的翅膀”无法匹配,将“生命的翅膀”最起始的第一个字去掉,更新截取歌词为“命的翅膀”;
(2)“命的翅膀”仍与所有比对分词都无法匹配,将“命的翅膀”最起始的第一个字去掉,更新截取歌词为“的翅膀”;
(3)“的翅膀”仍与所有比对分词都无法匹配,将“的翅膀”最起始的第一个字去掉,更新截取歌词为“翅膀”;
(4)“翅膀”存在匹配的比对分词,确定截取歌词“翅膀”匹配成功。
在S203中,将匹配成功的所述截取歌词确定为所述分词结果,并从所述目标歌词中删除所述截取歌词。
若截取歌词匹配成功,则将匹配成功的截取歌词确定为分词结果,并从目标歌词中删除截取歌词,并再次对更新后的目标歌词执行上述的截取、匹配和删除的操作,直到目标歌词全部被分为分词结果为止。
通过图2所示实施例可知,在本发明实施例中,通过重复根据预设的分词词长对目标歌词的末尾进行截取得到截取歌词,并将截取歌词与预设的分词库中的所有比对分词进行匹配,直到目标歌词全部被匹配完毕为止,若截取歌词与所有比对分词均不匹配,则重复删除截取歌词起始的第一个字,并将删除后的截取歌词与所有比对分词进行匹配,直到截取歌词与其中一个比对分词匹配成功为止,将匹配成功的截取歌词确定为分词结果,并从目标歌词中删除截取歌词。本发明实施例通过从目标歌词的末尾开始进行分词,提升了分词的准确性。
图3所示,是在本发明实施例一的基础上,对将已分配的所有音符模板组合为目标音符集的过程进行细化后得到的一种方法。本发明实施例提供了基于语音合成的旋律生成方法的实现流程图,如图3所示,该旋律生成方法可以包括以下步骤:
在S301中,获取预设的节拍类型,分析出与所述节拍类型对应的小节时值。
节拍类型用于指示强拍和弱拍的组合规律,在本发明实施例中,可预先制定待生成的旋律的节拍类型,节拍类型包括但不限于四分之四拍(即以一个四分音符为一拍,一个音符小节包括四个拍),八分之三拍和八分之六拍。在获取到预设的节拍类型后,分析出该节拍类型对应的一个音符小节的音符时值之和,作为小节时值。音符时值是指音符的持续时间,为了便于说明,在本发明实施例中将一个四分音符作为基本单位,即是将一个四分音符的音符时值设置为1,并假设节拍类型为四分之四拍,则小节时值为4。
在S302中,按照所述小节时值将已分配的所有所述音符模板组合为至少一个音符小节。
对于已分配的所有音符模板,按照小节时值将其组合为至少一个音符小节。具体地,获取已分配的所有音符模板的音符时值之和,并将音符时值之和与小节时值进行相除运算,将相除得到的结果再进行进一运算得到音符小节的数量。举例来说,假设目标歌词为“你是我生命的翅膀”,已分配的所有音符模板包括一个二分音符、三个四分音符和四个八分音符,则可计算出音符时值之和为7,由于示例的小节时值为4,则进行相除运算得到的结果为1.75,进行进一运算后得到的音符小节的数量为2。
在S303中,若所述音符模板未填充满最后一个所述音符小节,则基于休止符填充最后一个所述音符小节,并将填充满的所有所述音符小节确定为所述目标音符集。
在确定音符小节的数量后,将已分配的所有音符模板按照目标歌词的顺序进行填充,由于音符小节的数量是经过进一运算后得到的,故音符模板可能并不足以填充最后一个音符小节,针对该情况,在本发明实施例中基于休止符填充最后一个音符小节,直到最后一个音符小节被填充满为止,其中,优选将休止符填充至最后一个音符小节的末尾。在填充完成后,将填充满的所有音符小节确定为目标音符集,当然,若音符模板能够填充满所有的音符小节,则直接将填充后的所有音符小节确定为目标音符集,不再基于休止符进行填充。以步骤S302中的例子进行举例,即基于目标歌词“你是我生命的翅膀”生成的一种目标音符集如图6所示,在图6中,最后一个音符小节通过一个四分休止符进行填充。在此基础上,假设基于图6所示的目标音符集进行音阶挑选的结果为“二分音符(C和弦,音阶为5)-四分音符(Am和弦,音阶为3)-四分音符(Am和弦,音阶为6)-八分音符*2(F和弦,音阶为1)-四分音符(F和弦,音阶为4)-八分音符*2(G和弦,音阶为5)”,则可得到如图7所示的目标旋律的五线谱示意图,其中,由于休止符是用于表示停顿,故不为休止符配置音阶。
通过图3所示实施例可知,在本发明实施例中,通过分析与预设的节拍类型对应的小节时值,按照小节时值将已分配的所有音符模板组合为至少一个音符小节,若音符模板未填充满最后一个音符小节,则基于休止符填充最后一个音符小节,并将填充满的所有音符小节确定为目标音符集。本发明实施例根据节拍类型分析音符小节的数量,并在音符小节未填充满时通过休止符进行填充,提升了生成的目标音符集的完整性。
图4所示,是在本发明实施例三的基础上,对从预设的和声库挑选出组合和弦的过程进行细化后得到的一种方法。本发明实施例提供了基于语音合成的旋律生成方法的实现流程图,如图4所示,该旋律生成方法可以包括以下步骤:
在S401中,获取所述和声库内每个所述组合和弦对应的和弦数量,并获取所述节拍类型对应的小节拍数,其中,所述和弦数量是指所述组合和弦内和弦的数量。
在从和声库挑选组合和弦时,根据目标音符集相关的节拍类型进行挑选。具体地,获取和声库内每个组合和弦对应的和弦数量,该和弦数量是指组合和弦内和弦的数量,比如包括C和弦、Am和弦、F和弦和G和弦的组合和弦的和弦数量为4,同时获取节拍类型对应的小节拍数,小节拍数是指一个小节中所含的拍数,比如在节拍类型为四分之四拍时,一个小节中含有4个拍,则小节拍数为4;在节拍类型为四分之三拍时,一个小节中含有3个拍,则小节拍数为3。
在S402中,将所述小节拍数与每个所述和弦数量进行比值运算得到和弦配比值,并在为整数的所述和弦配比值所对应的至少一个所述组合和弦中进行随机挑选。
将得到的小节拍数和每个和弦数量进行比值运算得到和弦配比值,在比值运算中,将小节拍数作为被除数,将和弦数量作为除数,如小节拍数为4,而和弦数量为3,则可得到和弦配比值为4/3。为了使生成的目标旋律的节奏感更强,在本发明实施例中,仅在为整数的和弦配比值所对应的至少一个组合和弦中进行随机挑选,挑选出的组合和弦即为待添加至目标音符集的组合和弦。
通过图4所示实施例可知,在本发明实施例中,通过获取和声库内每个组合和弦对应的和弦数量,并获取节拍类型对应的小节拍数,将小节拍数与每个和弦数量进行比值运算得到和弦配比值,并在为整数的和弦配比值所对应的至少一个组合和弦中进行随机挑选。本发明实施例通过挑选与节拍类型更为匹配的组合和弦,提升了生成的目标旋律的节奏感,提升了用户体验。
图5所示,是在本发明实施例四的基础上,对将已设置音阶的组合和弦添加至目标音符集,生成并输出目标旋律的过程进行细化后得到的一种方法。本发明实施例提供了基于语音合成的旋律生成方法的实现流程图,如图5所示,该旋律生成方法可以包括以下步骤:
在S501中,获取预设的与所述和弦对应的和弦时值,并根据所述和弦时值计算已设置音阶的所述组合和弦的组合时值,所述和弦时值是指所述和弦所占的音符时值。
为了规范目标旋律的生成,在本发明实施例中,还预先设置每个和弦对应的和弦时值,该和弦是指和弦所占的音符时值,比如可设置和弦时值为两个四分音符的音符时值之和,即为2。在得到和弦时值后,计算已设置音阶的组合和弦的组合时值,具体将和弦时值与组合和弦的和弦数量进行乘积运算,将乘积运算的结果确定为组合时值。
在S502中,以所述组合时值为单位将所述目标音符集划分为至少一个时值区间,并将已设置音阶的所述组合和弦添加至每个所述时值区间,生成并输出所述目标旋律。
以组合时值为单位,将目标音符集划分为至少一个时值区间,其中每个时值区间内所有音符的音符时值之和与组合时值相等。然后将已设置音阶的组合和弦分别添加至每个时值区间,生成并输出所述目标旋律。
通过图5所示实施例可知,在本发明实施例中,通过获取预设的与和弦对应的和弦时值,根据和弦时值计算已设置音阶的组合和弦的组合时值,并以组合时值为单位将目标音符集划分为至少一个时值区间,将已设置音阶的组合和弦添加至每个时值区间,生成并输出目标旋律,提升了生成目标旋律的规律性。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
对应于上文实施例所述的基于语音合成的旋律生成方法,图8示出了本发明实施例提供的基于语音合成的旋律生成装置的结构框图,参照图8,该旋律生成装置包括:
分词单元81,用于获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;
组合单元82,用于根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系;
输出单元83,用于从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
可选地,分词单元81包括:
截取单元,用于重复根据预设的分词词长对所述目标歌词的末尾进行截取得到截取歌词,并将所述截取歌词与预设的分词库中的所有所述比对分词进行匹配,直到所述目标歌词全部被匹配完毕为止,其中,所述分词库包括至少两个所述比对分词;
第一删除单元,用于若所述截取歌词与所有所述比对分词均不匹配,则重复删除所述截取歌词起始的第一个字,并将删除后的所述截取歌词与所有所述比对分词进行匹配,直到所述截取歌词与其中一个所述比对分词匹配成功为止;
第二删除单元,用于将匹配成功的所述截取歌词确定为所述分词结果,并从所述目标歌词中删除所述截取歌词。
可选地,组合单元82包括:
类型获取单元,用于获取预设的节拍类型,分析出与所述节拍类型对应的小节时值;
组合单元,用于按照所述小节时值将已分配的所有所述音符模板组合为至少一个音符小节;
填充单元,用于若所述音符模板未填充满最后一个所述音符小节,则基于休止符填充最后一个所述音符小节,并将填充满的所有所述音符小节确定为所述目标音符集。
可选地,输出单元83包括:
获取单元,用于获取所述和声库内每个所述组合和弦对应的和弦数量,并获取所述节拍类型对应的小节拍数,其中,所述和弦数量是指所述组合和弦内和弦的数量;
运算单元,用于将所述小节拍数与每个所述和弦数量进行比值运算得到和弦配比值,并在为整数的所述和弦配比值所对应的至少一个所述组合和弦中进行随机挑选。
可选地,输出单元83包括:
时值计算单元,用于获取预设的与所述和弦对应的和弦时值,并根据所述和弦时值计算已设置音阶的所述组合和弦的组合时值,所述和弦时值是指所述和弦所占的音符时值;
添加单元,用于以所述组合时值为单位将所述目标音符集划分为至少一个时值区间,并将已设置音阶的所述组合和弦添加至每个所述时值区间,生成并输出所述目标旋律。
可选地,输出单元83包括:
随机选择单元,用于获取所述组合和弦内每个所述和弦对应的所有和弦内音,并随机选择一个所述和弦内音作为所述和弦的音阶。
因此,本发明实施例提供的基于语音合成的旋律生成装置通过执行分词、音符分配以及添加和弦的操作,使得生成的目标旋律贴合于目标歌词,提升了旋律生成的效果和准确性。
图9是本发明实施例提供的终端设备的示意图。如图9所示,该实施例的终端设备9包括:处理器90、存储器91以及存储在所述存储器91中并可在所述处理器90上运行的计算机程序92,例如基于语音合成的旋律生成程序。所述处理器90执行所述计算机程序92时实现上述各个基于语音合成的旋律生成方法实施例中的步骤,例如图1所示的步骤S101至S103。或者,所述处理器90执行所述计算机程序92时实现上述各基于语音合成的旋律生成实施例中各单元的功能,例如图8所示单元81至83的功能。
示例性的,所述计算机程序92可以被分割成一个或多个单元,所述一个或者多个单元被存储在所述存储器91中,并由所述处理器90执行,以完成本发明。所述一个或多个单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序92在所述终端设备9中的执行过程。例如,所述计算机程序92可以被分割成分词单元、组合单元以及输出单元,各单元具体功能如下:
分词单元,用于获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;
组合单元,用于根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系;
输出单元,用于从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
所述终端设备9可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端设备可包括,但不仅限于,处理器90、存储器91。本领域技术人员可以理解,图9仅仅是终端设备9的示例,并不构成对终端设备9的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述终端设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器90可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器91可以是所述终端设备9的内部存储单元,例如终端设备9的硬盘或内存。所述存储器91也可以是所述终端设备9的外部存储设备,例如所述终端设备9上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器91还可以既包括所述终端设备9的内部存储单元也包括外部存储设备。所述存储器91用于存储所述计算机程序以及所述终端设备所需的其他程序和数据。所述存储器91还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元完成,即将所述终端设备的内部结构划分成不同的功能单元,以完成以上描述的全部或者部分功能。实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的终端设备和方法,可以通过其它的方式实现。例如,以上所描述的终端设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random AccessMemory,RAM)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于语音合成的旋律生成方法,其特征在于,包括:
获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;
根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系;
从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
2.如权利要求1所述的旋律生成方法,其特征在于,所述对所述目标歌词进行分词得到至少两个分词结果,包括:
重复根据预设的分词词长对所述目标歌词的末尾进行截取得到截取歌词,并将所述截取歌词与预设的分词库中的所有所述比对分词进行匹配,直到所述目标歌词全部被匹配完毕为止,其中,所述分词库包括至少两个所述比对分词;
若所述截取歌词与所有所述比对分词均不匹配,则重复删除所述截取歌词起始的第一个字,并将删除后的所述截取歌词与所有所述比对分词进行匹配,直到所述截取歌词与其中一个所述比对分词匹配成功为止;
将匹配成功的所述截取歌词确定为所述分词结果,并从所述目标歌词中删除所述截取歌词。
3.如权利要求1所述的旋律生成方法,其特征在于,所述将已分配的所有所述音符模板组合为目标音符集,包括:
获取预设的节拍类型,分析出与所述节拍类型对应的小节时值;
按照所述小节时值将已分配的所有所述音符模板组合为至少一个音符小节;
若所述音符模板未填充满最后一个所述音符小节,则基于休止符填充最后一个所述音符小节,并将填充满的所有所述音符小节确定为所述目标音符集。
4.如权利要求3所述的旋律生成方法,其特征在于,所述从预设的和声库挑选出组合和弦,包括:
获取所述和声库内每个所述组合和弦对应的和弦数量,并获取所述节拍类型对应的小节拍数,其中,所述和弦数量是指所述组合和弦内和弦的数量;
将所述小节拍数与每个所述和弦数量进行比值运算得到和弦配比值,并在为整数的所述和弦配比值所对应的至少一个所述组合和弦中进行随机挑选。
5.如权利要求4所述的旋律生成方法,其特征在于,所述将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,包括:
获取预设的与所述和弦对应的和弦时值,并根据所述和弦时值计算已设置音阶的所述组合和弦的组合时值,所述和弦时值是指所述和弦所占的音符时值;
以所述组合时值为单位将所述目标音符集划分为至少一个时值区间,并将已设置音阶的所述组合和弦添加至每个所述时值区间,生成并输出所述目标旋律。
6.如权利要求1所述的旋律生成方法,其特征在于,所述为所述组合和弦中的每个和弦设置音阶,包括:
获取所述组合和弦内每个所述和弦对应的所有和弦内音,并随机选择一个所述和弦内音作为所述和弦的音阶。
7.一种基于语音合成的旋律生成装置,其特征在于,包括:
分词单元,用于获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;
组合单元,用于根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系;
输出单元,用于从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
8.一种终端设备,其特征在于,所述终端设备包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如下步骤:
获取目标歌词,并对所述目标歌词进行分词得到至少两个分词结果;
根据预设的音符模板集和所述分词结果的字数为每个所述分词结果分配音符模板,并将已分配的所有所述音符模板组合为目标音符集,其中,所述音符模板集包括至少两个所述音符模板,并且每个所述音符模板与一个预设的字数存在映射关系;
从预设的和声库挑选出组合和弦,为所述组合和弦中的每个和弦设置音阶,并将已设置音阶的所述组合和弦添加至所述目标音符集,生成并输出目标旋律,其中,所述和声库包括至少两个所述组合和弦。
9.如权利要求8所述的终端设备,其特征在于,所述将已分配的所有所述音符模板组合为目标音符集,包括:
获取预设的节拍类型,分析出与所述节拍类型对应的小节时值;
按照所述小节时值将已分配的所有所述音符模板组合为至少一个音符小节;
若所述音符模板未填充满最后一个所述音符小节,则基于休止符填充最后一个所述音符小节,并将填充满的所有所述音符小节确定为所述目标音符集。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至6任一项所述旋律生成方法的步骤。
CN201910008136.XA 2019-01-04 2019-01-04 基于语音合成的旋律生成方法、装置及终端设备 Active CN109859739B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910008136.XA CN109859739B (zh) 2019-01-04 2019-01-04 基于语音合成的旋律生成方法、装置及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910008136.XA CN109859739B (zh) 2019-01-04 2019-01-04 基于语音合成的旋律生成方法、装置及终端设备

Publications (2)

Publication Number Publication Date
CN109859739A true CN109859739A (zh) 2019-06-07
CN109859739B CN109859739B (zh) 2023-12-22

Family

ID=66893873

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910008136.XA Active CN109859739B (zh) 2019-01-04 2019-01-04 基于语音合成的旋律生成方法、装置及终端设备

Country Status (1)

Country Link
CN (1) CN109859739B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111681631A (zh) * 2020-04-30 2020-09-18 平安科技(深圳)有限公司 搭配和声的方法、装置、电子设备及计算机可读介质
CN111696500A (zh) * 2020-06-17 2020-09-22 不亦乐乎科技(杭州)有限责任公司 一种midi序列和弦进行识别方法和装置
CN113035161A (zh) * 2021-03-17 2021-06-25 平安科技(深圳)有限公司 基于和弦的歌曲旋律生成方法、装置、设备及存储介质
CN111681631B (zh) * 2020-04-30 2024-05-10 平安科技(深圳)有限公司 搭配和声的方法、装置、电子设备及计算机可读介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000163057A (ja) * 1998-11-26 2000-06-16 Casio Comput Co Ltd 音声割当装置及び音声割当方法並びに音声割当処理のプログ ラムを記録した記録媒体
JP3239897B1 (ja) * 2001-03-14 2001-12-17 ヤマハ株式会社 作詞作曲装置及びプログラム
CN101694772A (zh) * 2009-10-21 2010-04-14 北京中星微电子有限公司 将文本文字转换成说唱音乐的方法及装置
CN101916240A (zh) * 2010-07-08 2010-12-15 福建天晴在线互动科技有限公司 一种基于已知歌词及音乐旋律产生新音乐旋律的方法
CN105513607A (zh) * 2015-11-25 2016-04-20 网易传媒科技(北京)有限公司 一种谱曲作词的方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000163057A (ja) * 1998-11-26 2000-06-16 Casio Comput Co Ltd 音声割当装置及び音声割当方法並びに音声割当処理のプログ ラムを記録した記録媒体
JP3239897B1 (ja) * 2001-03-14 2001-12-17 ヤマハ株式会社 作詞作曲装置及びプログラム
CN101694772A (zh) * 2009-10-21 2010-04-14 北京中星微电子有限公司 将文本文字转换成说唱音乐的方法及装置
CN101916240A (zh) * 2010-07-08 2010-12-15 福建天晴在线互动科技有限公司 一种基于已知歌词及音乐旋律产生新音乐旋律的方法
CN105513607A (zh) * 2015-11-25 2016-04-20 网易传媒科技(北京)有限公司 一种谱曲作词的方法和装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111681631A (zh) * 2020-04-30 2020-09-18 平安科技(深圳)有限公司 搭配和声的方法、装置、电子设备及计算机可读介质
CN111681631B (zh) * 2020-04-30 2024-05-10 平安科技(深圳)有限公司 搭配和声的方法、装置、电子设备及计算机可读介质
CN111696500A (zh) * 2020-06-17 2020-09-22 不亦乐乎科技(杭州)有限责任公司 一种midi序列和弦进行识别方法和装置
CN111696500B (zh) * 2020-06-17 2023-06-23 不亦乐乎科技(杭州)有限责任公司 一种midi序列和弦进行识别方法和装置
CN113035161A (zh) * 2021-03-17 2021-06-25 平安科技(深圳)有限公司 基于和弦的歌曲旋律生成方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN109859739B (zh) 2023-12-22

Similar Documents

Publication Publication Date Title
Liebman et al. Dj-mc: A reinforcement-learning agent for music playlist recommendation
CN109166564A (zh) 为歌词文本生成乐曲的方法、装置及计算机可读存储介质
US7249142B2 (en) Automatic machine for production of sequences based on profiles as well as method for automatic production of sequences
Garcia Growing sound synthesizers using evolutionary methods
US20040181401A1 (en) Method and apparatus for automatically generating a general extraction function calculable on an input signal, e.g. an audio signal to extract therefrom a predetermined global characteristic value of its contents, e.g. a descriptor
Eigenfeldt et al. Considering Vertical and Horizontal Context in Corpus-based Generative Electronic Dance Music.
CN109346045A (zh) 基于长短时神经网络的多声部音乐生成方法及装置
CN105513607A (zh) 一种谱曲作词的方法和装置
CN105679324A (zh) 一种声纹识别相似度评分的方法和装置
CN103678436A (zh) 信息处理系统和信息处理方法
CN109859739A (zh) 基于语音合成的旋律生成方法、装置及终端设备
Macret et al. Automatic design of sound synthesizers as pure data patches using coevolutionary mixed-typed cartesian genetic programming
CN110599985A (zh) 一种音频内容生成方法、服务端设备和客户端设备
CN108170676A (zh) 故事创作的方法、系统和终端
CN110427459A (zh) 语音识别网络的可视化生成方法、系统及平台
CN107993636B (zh) 基于递归神经网络的乐谱建模与生成方法
CN112967705A (zh) 一种混音歌曲生成方法、装置、设备及存储介质
CN105718486A (zh) 在线哼唱检索方法及系统
Bruford et al. Groove Explorer: An Intelligent Visual Interface for Drum Loop Library Navigation.
CN109697083A (zh) 数据的定点化加速方法、装置、电子设备及存储介质
CN110517655A (zh) 一种旋律生成方法及系统
CN106649703B (zh) 音频数据可视化方法及装置
Schankler et al. Emergent formal structures of factor oracle-driven musical improvisations
CN114756706A (zh) 一种资源合成方法、装置、设备及存储介质
CN107871489A (zh) 和弦判定装置、和弦判定方法以及非暂时性的记录介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant