CN112447155B - 一种电子乐谱翻页方法、装置及存储介质 - Google Patents

一种电子乐谱翻页方法、装置及存储介质 Download PDF

Info

Publication number
CN112447155B
CN112447155B CN201910837944.7A CN201910837944A CN112447155B CN 112447155 B CN112447155 B CN 112447155B CN 201910837944 A CN201910837944 A CN 201910837944A CN 112447155 B CN112447155 B CN 112447155B
Authority
CN
China
Prior art keywords
electronic
score
music score
electronic music
musical instrument
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910837944.7A
Other languages
English (en)
Other versions
CN112447155A (zh
Inventor
李宏杰
许茜
钱瑾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Suzhou Software Technology Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Suzhou Software Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Suzhou Software Technology Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN201910837944.7A priority Critical patent/CN112447155B/zh
Publication of CN112447155A publication Critical patent/CN112447155A/zh
Application granted granted Critical
Publication of CN112447155B publication Critical patent/CN112447155B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10GREPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G1/00Means for the representation of music

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Auxiliary Devices For Music (AREA)

Abstract

本申请公开了一种电子乐谱翻页方法,方法包括:获取目标音频文件,将所述目标音频文件转换为第一电子乐谱;确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置;基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理。本申请还公开了一种电子乐谱翻页装置及存储介质;通过本申请实施例,使得在独奏或乐团合奏中,演奏到当前显示界面所显示的电子乐谱的结尾时,能够对电子乐谱进行翻页。

Description

一种电子乐谱翻页方法、装置及存储介质
技术领域
本申请涉及计算机技术领域,尤其涉及一种电子乐谱翻页方法、装置及存储介质。
背景技术
在只有一种乐器演奏的独奏场景、以及在多种乐器演奏的合奏场景下,如何精准的实现电子乐谱的自动翻页,目前尚无有效解决方案。
发明内容
本申请实施例提供一种电子乐谱翻页方法、装置及存储介质,使得在独奏或乐团合奏中,演奏到当前显示界面所显示的电子乐谱的结尾时,能够对电子乐谱进行翻页。
本申请实施例提供一种电子乐谱翻页方法,所述方法包括:
获取目标音频文件,将所述目标音频文件转换为第一电子乐谱,所述目标音频文件为源音频文件中的部分音频文件;
确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置;
基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理。
上述方案中,所述基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理,包括:
在所述第一电子乐谱在所述第二电子乐谱当前显示界面的末端的情况下,确认对所述第二电子乐谱进行翻页处理。
上述方案中,所述将所述目标音频文件转换为第一电子乐谱,包括:
基于机器学习的方式获取所述乐器中第一乐器对应的子音频文件;
将所述子音频文件转换为第一电子乐谱。
上述方案中,所述基于机器学习的方式获取演奏所述目标音频文件的乐器中第一乐器对应的子音频文件,包括:
采集第一乐器的独奏音频文件;
从所述第一乐器的独奏音频文件中提取第一乐器演奏的音频的特征;
以所述目标音频文件的数据为输入,以第一乐器演奏的音频的特征为特征,训练机器学习模型;所述训练机器学习模型的训练结果为第一乐器对应的子音频文件。
上述方案中,所述确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置,包括:
将所述第一电子乐谱与所述第二电子乐谱中的第三电子乐谱进行比对,在所述第三电子乐谱与所述第一电子乐谱的误差小于第一阈值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。
上述方案中,所述方法还包括:在所述第三电子乐谱与所述第一电子乐谱的误差大于或等于第一阈值的情况下,将所述第一电子乐谱与所述第二电子乐谱中的第四电子乐谱进行比对;
其中,所述第四电子乐谱位于所述第三电子乐谱之后;
基于所述第一电子乐谱与所述第四电子乐谱的比对结果,确认所述第一电子乐谱在所述第二电子乐谱中的位置。
上述方案中,所述基于所述第一电子乐谱与所述第四电子乐谱的比对结果,确认所述第一电子乐谱在所述第二电子乐谱中的位置,包括:
在所述第一电子乐谱与第四电子乐谱的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值小于预设值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置;
或者,在所述第一电子乐谱与第四电子乐谱的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值大于或等于预设值的情况下,确认所述第一电子乐谱不在所述第二电子乐谱中。
上述方案中,所述确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置之后,所述方法还包括:
获取第二乐器对应的演奏位置;
将所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置进行比较;
在所述第一乐器对应的演奏位置与第二乐器对应的演奏位置的距离小于第三阈值的情况下,确认所述第一乐器的演奏位置与所述第二乐器对应的演奏位置同步。
上述方案中,所述在所述第一乐器的演奏位置与第二乐器对应的演奏位置的差值大于或等于第三阈值的情况下,将所述第一乐器的演奏位置发送至源音频文件对应的主电子乐谱,基于所述主电子乐谱的演奏位置,确认所述第一乐器的演奏位置。
本申请实施例还提供一种电子乐谱翻页装置,所述装置包括:
获取单元,用于获取目标音频文件;
转换单元,用于将所述目标音频文件转换为第一电子乐谱,所述目标音频文件为源音频文件中的部分音频文件;
定位单元,用于确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置;
翻页单元,用于基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理。
上述方案中,所述翻页单元还用于:所述第一电子乐谱在所述第二电子乐谱当前显示界面的末端的情况下,确认对所述第二电子乐谱进行翻页处理。
上述方案中,所述装置还包括:机器学习单元,用于基于机器学习的方式获取演奏所述目标音频文件的乐器中第一乐器对应的子音频文件;
所述转换单元,还用于将所述子音频文件转换为第一电子乐谱。
上述方案中,所述机器学习单元,还用于:采集第一乐器的独奏音频文件;
从所述包含第一乐器的独奏音频文件中提取第一乐器的特征;
以所述目标音频文件的数据为输入,以第一乐器的特征为特征,训练机器学习模型;所述训练机器学习模型的训练结果为第一乐器对应的子音频文件。
上述方案中,所述装置还包括:比对单元,用于将所述第一电子乐谱与所述第二电子乐谱中的第三电子乐谱进行比对,在所述第三电子乐谱与所述第一电子乐谱的误差小于第一阈值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。
上述方案中,所述比对单元还用于:在所述第三电子乐谱与所述第一电子乐谱的误差大于或等于第一阈值的情况下,将所述第一电子乐谱与所述第二电子乐谱中的第四电子乐谱进行比对;
其中,所述第四电子乐谱位于所述第三电子乐谱之后;
基于所述第一电子乐谱与所述第四电子乐谱的比对结果,确认所述第一电子乐谱在所述第二电子乐谱中的位置。
上述方案中,定位单元还用于:在所述第一电子乐谱与第四电子乐谱的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值小于预设值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置;
或者,在所述第一电子乐谱与第四电子乐谱的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值大于或等于预设值的情况下,确认所述第一电子乐谱不在所述第二电子乐谱中。
上述方案中,所述获取单元,还用于获取第二乐器对应的演奏位置;
所述比对单元,还用于将所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置进行比较;
所述定位单元,还用于在所述第一乐器对应的演奏位置与第二乐器对应的演奏位置的距离小于第三阈值的情况下,确认所述第一乐器的演奏位置与所述第二乐器对应的演奏位置同步。
上述方案中,所述定位单元还用于:在所述第一乐器的演奏位置与第二乐器对应的演奏位置的差值大于或等于第三阈值的情况下,将所述第一乐器的演奏位置发送至源音频文件对应的主电子乐谱,基于所述主电子乐谱的演奏位置,确认所述第一乐器的演奏位置。本申请实施例还提供一种存储介质,存储有可执行程序,所述可执行程序被处理器执行时,实现上述的电子乐谱翻页方法。
本申请实施例还提供一种电子乐谱翻页装置,包括存储器、处理器及存储在存储器上并能够由所述处理器运行的可执行程序,所述处理器运行所述可执行程序时实现所述电子乐谱翻页方法的步骤。
本申请实施例提供一种电子乐谱翻页方法、装置及存储介质,通过获取目标音频文件,将所述目标音频文件转换为第一电子乐谱,所述目标音频文件为源音频文件中的部分音频文件;确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置;基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理。如此,使得演奏到当前第二电子乐谱结尾处,确认对所述第二电子乐谱进行翻页处理,解放演奏者的双手。针对乐团合奏或独奏的场景,本申请实施例还提供用机器学习的方法识别演奏所述目标音频文件的乐器,在所述乐器中的第一乐器演奏进度为显示第二电子乐谱的显示界面的结尾时,确认对所述第二电子乐谱进行翻页处理。
附图说明
图1为本申请实施例提供的电子乐谱翻页方法的可选流程示意图一;
图1a为本申请实施例提供的获取目标文件的可选流程示意图;
图2为本申请实施例提供的第一乐器对应的电子乐谱翻页装置与第二乐器对应的电子乐谱翻页装置通信,判断所述第一乐器的演奏进度的方法的可选流程示意图;
图2a为本申请实施例提供的第一小提琴当前演奏位置的示意图;
图2b为本申请实施例提供的第二小提琴当前演奏位置的示意图;
图3为本申请实施例提供的确认所述第一电子乐谱在所述第一乐器对应的第二电子乐谱中的位置的可选流程示意图一;
图3a为本申请实施例提供的确认所述第一电子乐谱在所述第一乐器对应的第二电子乐谱中的位置的示意图;
图4为本申请实施例提供的确认所述第一电子乐谱在所述第一乐器对应的第二电子乐谱中的位置的可选流程示意图二;
图4a为本申请实施例提供的第一小提琴的第一电子乐谱在第一小提琴的第二电子乐谱中的位置示意图;
图4b为本申请实施例提供的第一小提琴的在第一电子乐谱中出现错误的位置示意图;
图4c为本申请实施例提供的第一电子乐谱与第三电子乐谱比对示意图;
图4d为本申请实施例提供的第一电子乐谱与第四电子乐谱比对示意图;
图4e为本申请实施例提供的第一电子乐谱与第五电子乐谱比对示意图;
图5为本申请实施例提供的电子乐谱翻页装置的组成结构示意图;
图6为本申请实施例电子乐谱翻页装置的硬件组成结构示意图。
具体实施方式
以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本申请,并不用于限定本申请。
由于单页乐谱的容量有限,且翻页时又会造成演奏中断,乐谱的翻页一直以来都是困扰演奏者的难题。
针对纸质乐谱翻页的方法,最常见的现行的解决方案是人工翻页,包括:演奏者自己翻页;请助手在演奏者旁边帮助翻页;合奏中,主位演奏者与副位演奏者共用一份乐谱,由副位演奏者负责翻页。但上述人工翻页方案存在如下问题:
1、助手辅助翻页的人工成本高;
2、自己翻页或是副位演奏者协助翻页会导致演奏中断;
3、纸质乐谱的翻页会产生噪音;
为了解决上述人工翻页方案中存在的问题,还可以在谱架上安装翻页装置,如类似于打印机的吸纸设备,并在谱架底部加装脚踏板,由演奏者自行踩踏脚踏板进行翻页的方式。但安装翻页装置的方案存在如下问题:
1、机械式翻页的翻页速度可能无法赶上演奏速度;
2、机械式翻页可能会卡纸(打印机会卡纸,翻页设备也同样有可能);
3、有可能翻多页,无法保证翻页动作不出错;
4、脚踏的动作同样会产生噪音,并且诸如竖琴、钢琴、管风琴、架子鼓等乐器均涉及脚部动作。
由于纸质乐谱翻页时会产生噪声,翻页时也会有多余的动作,会导致演奏中断。同时,翻页时,无论是人工翻页还是机械翻页,均无法保证翻页的准确性,可能会一次翻多张乐谱,也无法依据音乐,以不同的速度翻页。为了解决纸质乐谱的翻页缺陷,开始使用电子乐谱。
针对电子乐谱的自动翻页,可依据乐谱上标记的速度,所述速度为演奏开始前,接收的演奏速度,乐器将按照所述速度进行演奏。在演奏开始后计时,达到一定时间后翻页。或者,通过乐器上的传感器检测乐器震动,并与电子乐谱校对的方式实现自动翻页。
或者,通过语音命令进行翻页;或者,通过手势或是目光识别,通过摄像头采集目光,实现可操控的自动翻页。
上述电子乐谱自动翻页的解决方案的缺点同样显而易见:
1、音乐的演奏速度是不精确的,基于表现的需要会做不同的调整,此外曲谱中的散板部分本身就不存在固定速度,定时翻页方式无法解决这些问题;
2、手势或是目光识别的方式容易导致误操作,并且无法保证100%识别,容易导致误翻页或是不翻页;
3、由于音乐本身就是音频文件,演奏过程发出其它声音是难以想象的,语音识别方式近乎无法应用;
4、实时音频文件分析仅能分析单一乐器,目前没有看到针对乐团演奏的解决方案以及相应的抗干扰设计。
上述的纸质乐谱翻页方法及电子乐谱翻页方法还存在诸如没有考虑演奏错误规避等问题,并且没有考虑到乐团演奏场景,存在较大的局限性。且现有技术均聚焦于单人演奏场景,并多针对单人练习、音乐教育等场景设计,没有针对乐团演奏的解决方案。
显而易见,纸质乐谱翻页的方法均无法满足演奏过程中对环境的要求(如翻页时产生的噪声和动作会影响演奏效果),也不能保证翻页的准确性。而对于现有的电子乐谱的解决方案,基于音频文件识别的解决方案能够满足独奏演奏场景的要求,但无法满足乐团演奏场景。
针对上述现有纸质乐谱翻页方法和电子乐谱翻页方法中存在的问题,本申请提供一种电子乐谱翻页方法,能够解决现有技术方案中无法解决的技术难题和缺点。
图1示出了本申请实施例提供的电子乐谱翻页方法的可选流程示意图一,将根据各个步骤进行说明。
步骤S101,获取目标音频文件,将所述目标音频文件转换为第一电子乐谱。
电子乐谱翻页装置获取目标音频文件。所述获取方式可以是根据音频采集装置实时获取,如麦克风。所述目标文件为源音频文件中的当前一段时间正在演奏的部分音频文件,或当前正在演奏的若干连续小节的部分音频文件。所述表征目标音频文件长度的一段时间或若干连续小节可以根据实际情况设置。所述源音频文件可以为第一乐器从开始演奏到结束演奏这一时间段内演奏的全部音频文件,也可以为包含第一乐器的乐团从开始演奏到结束演奏这一时间段内演奏的全部音频文件。
如演奏钢琴独奏曲目《野蜂飞舞》,源音频文件为从开始演奏起到演奏结束所述钢琴独奏的全部音频文件。所述目标音频文件为演奏过程中,当前正在演奏的一段时间或若干连续小节演奏的音频文件,如当前第31秒到第40秒这10秒内演奏的音频文件。
如乐团演奏合奏曲目《Nightingale》,所述源音频文件为从开始演奏起到演奏结束乐团演奏的全部音频文件;目标音频文件为乐团所有乐器在当前演奏过程中,一段时间或若干连续小节演奏的音频文件,乐团在当前第31秒至第40秒这10秒内演奏的音频文件。
在一些可选实施例中,演奏环境为第一乐器的独奏,则源音频文件中仅包括第一乐器演奏的全部音频文件,目标音频文件为第一乐器正在演奏的一段时间或若干连续小节演奏的音频文件。则在本步骤中,可以直接将获取的目标音频文件转换为第一电子乐谱。
在一些可选实施例中,演奏环境为包括多种乐器的合奏,则源音频文件或目标音频文件中都包括多种乐器演奏的音频文件,此时,可以基于机器学习的方式将所述目标音频文件转换为第一电子乐谱,基于机器学习的方式将所述目标音频文件转换为第一电子乐谱的可选流程示意图如图1a所示,包括步骤S1011至步骤S1014。
步骤S1011,采集第一乐器的独奏音频文件。
这里,采集至少一首所述第一乐器的独奏音频文件。所述第一乐器的独奏音频文件,可以是第一乐器现场演奏,通过麦克风等音乐采集装置直接接收的音频文件,也可以为存储的独奏音频文件。
步骤S1012,基于机器学习的方式从所述包含第一乐器的独奏音频文件中提取第一乐器的音频特征。
这里,采用单独提取特征的方式提取不同乐器演奏的音频的特征。例如,通过大量小提琴的独奏音频文件提取小提琴音频的特征;通过大量钢琴的独奏音频文件提取钢琴音频的特征。
在一些可选实施例中,可以使用语谱图方法提取特征,对应地,提取出来的特征为语谱图特征。
步骤S1013,获取所述乐器中第一乐器对应的子音频文件。
以所述目标音频文件的数据为输入,以第一乐器的音频特征为特征,提取所述乐器中第一乐器对应的子音频文件;所述目标音频文件为包括第一乐器演奏的音频文件,以第一乐器的特征为特征,将第一乐器演奏的音频文件从目标音频文件中提取出来。
所述第一乐器演奏的音频文件为第一乐器对应的子音频文件,即第一乐器当前演奏的音频文件。
在一些可选实施例中,所述合奏场景可以为存在至少两种乐器同时演奏的场景,所述至少两种乐器可以为:第一乐器、第二乐器和第三乐器。此时上述至少两种乐器分别对应的电子乐谱翻页设备接收的音频文件为混合的第一乐器、第二乐器和第三乐器演奏的音频文件。所述至少两种乐器分别对应的电子乐谱翻页设备,以相应的乐器的音频特征为特征,识别出电子乐谱翻页装置对应的乐器的演奏子音频文件。
例如,合奏场景中,第一大提琴、第一小提琴和第一竹笛同时演奏位于总谱的第5行至第6行的内容,此时第一大提琴、第一小提琴和第一竹笛分别对应的电子乐谱翻页装置接收的目标音频文件为混合的第一大提琴、第一小提琴、第一竹笛的演奏音频文件,所述第一大提琴、第一小提琴、第一竹笛对应的电子乐谱翻页装置接收目标音频文件后,以电子乐谱翻页装置对应的乐器的音频特征为特征,分别识别出电子乐谱翻页装置对应的乐器的演奏子音频文件。例如,第一大提琴对应的电子乐谱翻页装置接收目标音频文件,以第一大提琴的音频特征为特征,识别出大提琴的演奏子音频文件。第一小提琴对应的电子乐谱翻页装置接收目标音频文件,以第一小提琴的音频特征为特征,识别出小提琴的演奏子音频文件。
在一些可选实施例中,所述合奏还可以为单独乐器演奏的场景,所述单独乐器为第一乐器,此时第一乐器对应的电子乐谱翻页装置接收目标音频文件,以第一乐器的音频特征为特征,提取出第一乐器的演奏子音频文件。合奏中,第一乐器以外的其他乐器暂停演奏,第一乐器以外的其他乐器对应的电子乐谱翻页装置接收目标音频文件后,以相应乐器的音频特征为特征,无法识别出相应乐器的子音频文件,所述第一乐器以外的其他乐器对应的电子乐谱翻页装置不做处理。
例如第一钢琴演奏总谱的第5行至第6行的内容,则第一钢琴的电子乐谱翻页装置接收当前第一钢琴的独奏后,以第一钢琴的音频特征为特征,识别出当前接收的音频文件即为第一钢琴的子音频文件,随后通过转换模块将第一钢琴的子音频文件转换为电子乐谱。合奏中第一钢琴以外的其他乐器此时暂停演奏,第一钢琴以外的其他乐器对应的电子乐谱翻页装置接收当前第一钢琴的独奏后,以相应乐器的音频特征为特征,无法识别出相应乐器的子音频文件,所述第一钢琴以外的其他乐器对应的电子乐谱翻页装置不做处理。
步骤S1014,将所述子音频文件转换为第一电子乐谱。
这里,将所述子音频文件转换为第一电子乐谱,由于每一个音符都对应波形中特定的频率,例如,钢琴的中央C基频约为261.63Hz,对应音符“do”;每一个音符位置都会对应波形中的波峰或是波谷,例如,在安静条件下,波形是一条直线,出现声音,波形会出现波峰或是波谷;每一个音符对应的频率在波形中的持续时间对应音符的时长。例如音符“do”对应的频率为261.63Hz,波形中频率为261.63Hz的波形片段持续时间为2秒,即音符“do”的持续时长为2秒。根据频率、波峰或波谷、持续时间分别对应的音符、音符的位置、持续时间,建立声波与音乐要素之间的关系,根据所述声波与音乐要素之间的关系,将目标音频文件转换为第一电子乐谱。
步骤S102,电子乐谱翻页装置确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置。
在一些可选实施例中,演奏环境为独奏,所述第二电子乐谱为预先存储在相应演奏乐器对应电子乐谱翻页装置中的乐谱。所述第二电子乐谱为从总谱中分离出来的乐谱。
例如总谱中共有4小节,第一乐器演奏第1小节和第2小节,第二乐器演奏第3小节和第4小节。所述第二电子乐谱为第一乐器演奏的总谱中的第1小节和第2小节。
在一些可选实施例中,所述第二电子乐谱在所述电子乐谱翻页装置的显示单元显示时,紧密排列,不存在空节、空行及空页。对一些重复的小节、段落做合并处理,尽量以最少的页数显示所述第二电子乐谱。所述第二电子乐谱对应的乐器凭借经验,知晓在何处开始演奏,何处暂停演奏,无需将所述电子乐谱从总谱中拆出,留出空节、空行、空页,在总谱翻页时,电子乐谱也随之翻页。
在一些可选实施例中,确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置,即确认第一乐器在第二电子乐谱中的演奏进度。
在步骤S101中已经说明,第一电子乐谱为第一乐器在当前一段时间内演奏的音频文件转换成的电子乐谱,或第一乐器在当前演奏若干小节时产生的音频文件转换成的电子乐谱。所述电子乐谱翻页装置确认所述第一电子乐谱在所述第二电子乐谱中的位置,即电子乐谱翻页装置确认第一乐器演奏的音频文件在第二电子乐谱中的位置。
因此在上述步骤S1013的合奏中存在单独乐器演奏的场景中,只有第一钢琴对应的电子乐谱翻页装置显示的电子乐谱和指挥对应的电子乐谱翻页装置显示的主电子乐谱上,才有第一钢琴独奏的乐谱,第一钢琴以外的其他乐器对应的电子乐谱翻页装置显示的电子乐谱上,不存在第一钢琴独奏的乐谱。第一钢琴以外的其他乐器对应的电子乐谱翻页装置依据目标音频文件无法识别出相应乐器的演奏音频文件,认为相应乐器当前没有参与演奏,不做后续处理。
步骤S103,所述电子乐谱翻页装置基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理。
在一些可选实施例中,所述第一电子乐谱在所述第二电子乐谱当前显示界面的末端的情况下,所述电子乐谱翻页装置对所述第二电子乐谱进行翻页处理。所述第一电子乐谱在所述第二电子乐谱在当前显示界面的除末端以外的其他位置的情况下,所述电子乐谱翻页装置不对所述第二电子乐谱进行翻页处理。
如此,就可以在独奏或乐团合奏的环境下,将第一乐器的子音频文件从目标音频文件中提取出来,转换成第一电子乐谱,并将第一电子乐谱与存储的第二电子乐谱比对,确认演奏进度,当演奏至第二电子乐谱当前显示页面的结尾处,实现对电子乐谱自动翻页。
在一些可选实施例中,在步骤S102,所述电子乐谱翻页装置确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置之后,所述方法还包括:
第一乐器对应的电子乐谱翻页装置与第一乐器对应的电子乐谱翻页装置以外的电子乐谱翻页装置进行通信,判断所述第一乐器对应的电子乐谱翻页装置是否与所述第一乐器以外的其他乐器对应的电子乐谱翻页装置同步或者确认所述第一乐器的演奏进度是否正确。具体地,所述第一乐器对应的电子乐谱翻页装置与第二乐器对应的电子乐谱翻页装置通信,判断所述第一乐器的演奏进度的方法包括步骤S201至步骤S206。
图2示出了本申请实施例提供的第一乐器对应的电子乐谱翻页装置与第二乐器的电子乐谱翻页装置通信,判断所述第一乐器的演奏进度的方法的可选流程示意图,将根据各个步骤进行说明。
步骤S201,获取第二乐器对应的演奏位置。
这里,所述第二乐器为乐团合奏中除所述第一乐器以外的其他乐器。所述第二乐器的演奏位置,是指第二乐器当前演奏至第二乐器对应的电子乐谱的位置。所述获取第二乐器对应的演奏位置,是指,通过乐谱间互联,所述第一乐器对应的电子乐谱翻页装置接收所述第二乐器对应的电子乐谱翻页装置发送的第二乐器对应的演奏位置。
步骤S202,将所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置进行比较。
这里,所述第一乐器对应的演奏位置是指当前第一乐器的演奏位置。所述第一乐器与第二乐器的演奏位置进行比较,是指比较当前演奏位置所处的页数、行数和小节数。
图2a示出了本申请实施例中,第一小提琴对应的演奏位置P1;图2b示出了本申请实施例中,第二小提琴对应的演奏位置P2。根据图2a和图2b可以得知,所述第一乐器对应的演奏位置为第6小节最后一拍,所述第二乐器对应的演奏位置为第7小节第2拍。所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置的距离为2拍。
步骤S203,电子乐谱翻页装置判断所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置的距离是否小于第三阈值。
这里,所述第三阈值为预设的距离,表征允许不同乐谱之间演奏距离的容错程度。例如通信传输时延或电子乐谱翻页装置的处理时延,都可能导致第一乐器对应的演奏位置与第二乐器对应的演奏位置存在距离。但通信传输时延或电子乐谱翻页装置的处理时延都是允许的,不需要处理。
所述第三阈值的大小可以根据源音频文件的长度设定。在源音频文件长的情况下,容错程度高,第三阈值可以大;在源音频文件短的情况下,容错程度低,第三阈值应尽量小。例如,源音频文件为《义勇军进行曲》,包括32小节,此时可以设置第三阈值为2小节。源音频文件为《野蜂飞舞》,包括105小节,此时可以设置第三阈值为5小节。
在所述第一乐器对应的演奏位置与第二乐器对应的演奏位置的距离小于第三阈值的情况下,执行步骤S204。所述第一乐器对应的演奏位置与第二乐器对应的演奏位置的距离小于第三阈值,说明此时的距离在第三阈值容许范围内,没有对演奏造成影响,不处理也不会影响演奏效果。
在所述第一乐器对应的演奏位置与第二乐器对应的演奏位置的距离大于或等于第三阈值的情况下,执行步骤S205。所述第一乐器对应的演奏位置与第二乐器对应的演奏位置的距离大于或等于第三阈值,说明此时的距离在第三阈值容许范围之外,已经对演奏造成影响,如果不及时处理,会影响演奏效果。
步骤S204,所述电子乐谱翻页装置确认所述第一乐器的演奏位置与所述第二乐器对应的演奏位置同步。
这里,所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置的距离小于第三阈值,说明所述距离可能是传输时延或处理时延导致的误差,可以忽略不计,所述电子乐谱翻页装置确认所述第一乐器的演奏位置与所述第二乐器对应的演奏位置同步。
步骤S205,所述电子乐谱翻页装置将所述第一乐器的演奏位置发送至源音频文件对应的主电子乐谱,基于所述主电子乐谱的演奏位置,确认所述第一乐器的演奏位置。
这里,所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置的距离大于或等于第三阈值说明第一乐器和/或第二乐器的演奏进度错误,并且无法确定哪一个乐器的演奏进度错误,因此,将第一乐器对应的演奏位置发送至主电子乐谱,基于所述主电子乐谱的演奏位置,确认所述第一乐器的演奏位置。
在一些可选实施例中,所述主电子乐谱可以是具有仲裁功能的乐谱,如指挥的乐谱,通过与主电子乐谱的进度比较,确认所述第一乐器的演奏位置。
在一些可选实施例中,所述将第一乐器对应的演奏位置发送至主电子乐谱。还包括:将第一乐器对应的演奏位置及第二乐器对应的演奏位置均发送至主电子乐谱,基于所述主电子乐谱的演奏位置,确认所述第一乐器的演奏位置和所述第二乐器的演奏位置。
如此,就可以在乐团合奏中,第一乐器对应的电子乐谱与第一乐器以外的其他乐器对应的电子乐谱进行通信,确认演奏进度,若两份乐谱对应的演奏进度的距离小于第三阈值,所述电子乐谱翻页装置认为受到传输时延或处理时延影响,导致两份乐谱对应的演奏进度出现误差,所述电子乐谱翻页装置认为两份乐谱对应的演奏进度均正确。若两份乐谱对应的演奏进度的距离大于或等于第三阈值,所述电子乐谱翻页装置认为是两份乐谱中至少一份乐谱对应的演奏进度出错,将第一乐谱对应的演奏进度或第一乐谱和第二乐谱对应的演奏进度发送至主电子乐谱,根据主电子乐谱的进度调整第一乐谱对应的演奏进度或第一乐谱和第二乐谱对应的演奏进度,实现全乐团的演奏进度的统一。
在一些可选实施例中,所述步骤S102,所述电子乐谱翻页装置确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置,包括步骤S301至步骤S305。
图3示出了本申请实施例提供的确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置的可选流程示意图一,将根据各个步骤进行说明。
步骤S301,所述电子乐谱翻页装置将所述第一电子乐谱与所述第二电子乐谱中的第三电子乐谱进行比对。
其中,所述第三电子乐谱是位于所述第二电子乐谱内的乐谱片段,所述第三电子乐谱为所述第二电子乐谱中可能与第一电子乐谱相同的乐谱片段。可选地,所述第三电子乐谱长度与第一乐谱的长度相同,例如第一电子乐谱为第2行第6小节,所述第三电子乐谱为第二电子乐谱的第2行第6小节。
所述第三电子乐谱与所述第一电子乐谱的误差为第三电子乐谱与第一电子乐谱的不同之处,所述误差可以为节奏相同,且若干音符不同;也可以为节奏不同;当所述误差为节奏不同时,无论第一电子乐谱的音符与第三电子乐谱的音符是否相同,均认为第三电子乐谱与第一电子乐谱之间存在误差。
步骤S302,所述电子乐谱翻页装置将所述第三电子乐谱与所述第一电子乐谱的误差与第一阈值比较。
所述第一阈值为设置的,在节奏相同的情况下,容许第一电子乐谱与第三电子乐谱的误差的值,若误差小于第一阈值,认为误差是可以忽略的,若误差大于或等于第一阈值,认为演奏出错。例如,第一阈值为3个音符,第一电子乐谱与第三电子乐谱的误差是“节奏相同,且小于3个音符不同”,认为所述误差是可以忽略的。
若所述误差为节奏不同,所述电子乐谱翻页装置认为所述第三电子乐谱与所述第一电子乐谱的误差大于所述第一阈值。若所述误差为节奏相同,且若干音符不同,则将所述第三电子乐谱与所述第一电子乐谱的误差与所述第一阈值进行比对。比较结果可以为所述第三电子乐谱与所述第一电子乐谱的误差小于第一阈值,进行步骤S303。若所述第三电子乐谱与所述第一电子乐谱的误差大于或等于第一阈值,进行步骤S304。
步骤S303,所述电子乐谱翻页装置确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。
所述第三电子乐谱与所述第一电子乐谱的误差小于第一阈值的情况,说明所述第三电子乐谱与所述第一电子乐谱的误差在容许范围内,所述电子乐谱翻页装置确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。
步骤S304,所述电子乐谱翻页装置将所述第一电子乐谱与所述第二电子乐谱中的第四电子乐谱进行比对,确认所述第一电子乐谱在所述第二电子乐谱中的位置。
这里,所述第四乐谱位于所述第三电子乐谱之后。所述第四电子乐谱可以与所述第三电子乐谱部分重合,也可以完全不重合,若第四电子乐谱与第三电子乐谱完全不重合,则第四电子乐谱与第三电子乐谱相邻。例如,所述第三电子乐谱为所述第二电子乐谱的第2行第6、7小节,所述第四电子乐谱可以为所述第二电子乐谱的第2行第7、8小节,也可以为所述第二电子乐谱的第2行第8、9小节。所述第四电子乐谱相对第三电子乐谱的位置可以根据实际情况调整。
所述第四电子乐谱与所述第一电子乐谱比对得到的误差为第四电子乐谱与第一电子乐谱的不同之处,所述误差可以为节奏相同,且若干音符不同;也可以为节奏不同;当所述误差为节奏不同时,无论第一电子乐谱的音符与第四电子乐谱的音符是否相同,均认为第四电子乐谱与第一电子乐谱之间存在误差。
在一些可选实施例中,所述第三乐谱和第四乐谱的长度可以根据实际情况设置。
在一些可选实施例中,将所述第一电子乐谱与所述第四电子乐谱的比对,确认所述第一电子乐谱在所述第二电子乐谱中的位置的示意图如图3a所示,包括步骤S3051至步骤S3053。
步骤S3051,所述电子乐谱翻页装置将所述第一电子乐谱与第四电子乐谱比对的误差与第二阈值比较。
所述第四电子乐谱与所述第一电子乐谱的误差为第四电子乐谱与第一电子乐谱的不同之处,所述误差可以为节奏相同,且若干音符不同;也可以为节奏不同;当所述误差为节奏不同时,无论第一电子乐谱的音符与第四电子乐谱的音符是否相同,均认为第四电子乐谱与第一电子乐谱之间存在误差。
所述第二阈值为设置的,在节奏相同的情况下,容许第一电子乐谱与第四电子乐谱的误差的值,例如,第二阈值为3个音符,则第一电子乐谱与第四电子乐谱的误差为“节奏相同,且小于3个音符不同”,所述电子乐谱翻页装置认为所述误差是可以忽略的。所述第二阈值与所述第一阈值的类型一致。
在所述第一电子乐谱与第四电子乐谱比对的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值小于预设值的情况下,执行步骤S3052,在所述第一电子乐谱与第四电子乐谱比对的误差大于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值大于预设值的情况下,执行步骤S3053。
步骤S3052,所述电子乐谱翻页装置确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。
这里,所述第一电子乐谱与第四电子乐谱比对的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值小于预设值,意味着所述第一电子乐谱与第四电子乐谱的误差大于所述第一电子乐谱与第三电子乐谱的误差,即所述第一电子乐谱与第三电子乐谱的误差更小,且小于预设值,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。
步骤S3053,所述电子乐谱翻页装置确认所述第一电子乐谱不在所述第二电子乐谱中。
这里,所述第一电子乐谱与第四电子乐谱比对的误差大于第二阈值,进而也大于第一阈值和预设值,认为所述第一电子乐谱不在所述第二电子乐谱中。
在一些可选实施例中,确认所述第一电子乐谱不在所述第二电子乐谱中,停止第一电子乐谱在第二电子乐谱中位置的确认,且不进行翻页处理。在所述第二乐谱上显示第一标识,所述第一标识用于提醒演奏进度定位失败,接收翻页指令后才能翻页。所述接收指令可以是通过触摸屏幕下达,也可以通过所述电子乐谱翻页装置外部的按键下达。
如此,在第一乐器演奏出现失误或即兴表演,导致无法确认第一电子乐谱在第二电子乐谱中的位置的情况下,所述电子乐谱翻页装置重新确认第一乐器的演奏位置。经过多次比对,第一乐器演奏失误的误差小于第一阈值则判定所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置;第一乐器的演奏失误的误差大于或等于第一阈值,第一电子乐谱与第四电子乐谱继续比对。若第一电子乐谱与第四电子乐谱比对的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值小于预设值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。若所述第一电子乐谱与第四电子乐谱比对的误差大于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值大于预设值的情况下,确认所述第一电子乐谱不在所述第二电子乐谱中,认为是第一乐器即兴演奏,演奏内容不是第二乐谱当前显示的内容,在第二乐谱的屏幕上显示第一标识,提醒当前演奏进度定位失败,等待翻页指令。
图4示出了本申请实施例提供的确认第一小提琴的第一电子乐谱在第一小提琴的第二电子乐谱中的位置的可选流程示意图二,将根据各个步骤进行说明。
步骤S401,小提琴的电子乐谱翻页装置将第一小提琴的第一电子乐谱与第一小提琴的第二电子乐谱中的第三电子乐谱进行比对。
图4a示出了在乐团演奏中,最近一次第一小提琴的电子乐谱翻页装置确认的第一小提琴的第一电子乐谱在第一小提琴的第二电子乐谱中的位置示意图。图4a中位置Q1即为最近一次确认的第一小提琴的第一电子乐谱在第一小提琴的第二电子乐谱中的位置。此时位于第二行第1小节。
在第二行第2小节的演奏中出现了错误,因此第一小提琴的电子乐谱翻页装置根据接收的目标音频文件无法确认第一小提琴的第一电子乐谱在第二电子乐谱中的位置。图4b示出了在乐团演奏中,第一小提琴的演奏至第一电子乐谱中Q2位置处出现错误,此时无法确认第一小提琴的第一电子乐谱在第一小提琴的第二电子乐谱中的位置。出错的位置在第2行第2小节。
第一小提琴的电子乐谱翻页装置需要重新确认第一小提琴的第一电子乐谱在第二电子乐谱中的位置,首先电子乐谱翻页装置将第一小提琴的第一电子乐谱与第一小提琴的第二电子乐谱中的第三电子乐谱进行比对。
在本实施例中,第一电子乐谱的位置为第二电子乐谱的第2行第2小节和第2行第3小节。所述第三电子乐谱为第二电子乐谱中的第2行第2小节和第2行第3小节。将所述第一电子乐谱与所述第二电子乐谱中的第三电子乐谱进行比对,即将第一电子乐谱与第三电子乐谱比对。
图4c示出了本申请实施例提供的第一电子乐谱与第三电子乐谱比对示意图。图4c中,第一电子乐谱与第三电子乐谱相比较,误差为1个音符。
步骤S402,所述第三电子乐谱与所述第一电子乐谱的误差与第一阈值比较。
在本实施例中,所述第三电子乐谱与所述第一电子乐谱的误差为:节奏一致,错1个音符。
第一阈值为:0个音符。
因此,本实施例中第三电子乐谱与所述第一电子乐谱的误差大于第一阈值,此时进行步骤S403。
步骤S403,将所述第一电子乐谱与所述第二电子乐谱中的第四电子乐谱进行比对。
所述第四电子乐谱与所述第三电子乐谱部分重合、且位于所述第三电子乐谱之后;在本实施例中,所述第四电子乐谱为第二行第3小节和第二行第4小节。
步骤S404,基于所述第一电子乐谱与所述第四电子乐谱的比对,确认所述第一电子乐谱在所述第二电子乐谱中的位置。
图4d示出了本申请实施例提供的第一电子乐谱与第四电子乐谱比对示意图。图4d中,可以发现第四电子乐谱的第1小节与第一电子乐谱的第1小节的节奏不同。
在本实施例中,所述第二阈值为:4个音符。
则第一电子乐谱与第四电子乐谱比对的误差大于第二阈值,且第二阈值大于第一阈值,假设预设值为2个音符,显然第一阈值小于预设值,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。即,确认所述第一电子乐谱的位置在第二行第2小节和第3小节。
在一些可选实施例中,所述步骤S404之后,还包括步骤S405:将所述第一电子乐谱与所述第二电子乐谱中的第五电子乐谱进行比对。
所述第五电子乐谱与所述第三电子乐谱相邻、且位于所述第四电子乐谱之后;在本实施例中,所述第五电子乐谱为第二行第4小节和第二行第5小节。
图4e示出了本申请实施例提供的第一电子乐谱与第五电子乐谱比对示意图。图4e中,可以得出第五电子乐谱的第1小节和第2小节,与第一电子乐谱的节奏不同,大于第二阈值。
如此,在第一乐器演奏出现失误或即兴表演,导致无法确认第一电子乐谱在第二电子乐谱中的位置的情况下,所述电子乐谱翻页装置重新确认第一乐器的演奏位置。
图5示出了本申请实施例提供的电子乐谱翻页装置的结构示意图。
获取单元501,用于获取目标音频文件;
转换单元502,用于将所述目标音频文件转换为第一电子乐谱,所述目标音频文件为源音频文件中的部分音频文件;
定位单元503,用于确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置;
翻页单元504,用于基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理。
所述翻页单元504,还用于第一电子乐谱在所述第二电子乐谱当前显示界面的末端的情况下,确认对所述第二电子乐谱进行翻页处理。
机器学习单元505,用于基于机器学习模型识别演奏所述目标音频文件的乐器;
所述获取单元501,还用于获取所述乐器中第一乐器对应的子音频文件;
所述转换单元502,还用于将所述子音频文件转换为第一电子乐谱。
所述机器学习单元505,用于采集第一乐器的独奏音频文件;从所述包含第一乐器的独奏音频文件中提取第一乐器演奏的音频的特征;以所述目标音频文件的数据为输入,以第一乐器演奏的音频的特征为特征,训练机器学习模型;所述训练机器学习模型的训练结果为第一乐器对应的子音频文件。
比对单元506,用于将所述第一电子乐谱与所述第二电子乐谱中的第三电子乐谱进行比对,在所述第三电子乐谱与所述第一电子乐谱的误差小于第一阈值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。
所述比对单元506,还用于在所述第三电子乐谱与所述第一电子乐谱的误差大于或等于第一阈值的情况下,将所述第一电子乐谱与所述第二电子乐谱中的第四电子乐谱进行比对;
其中,所述第四电子乐谱与所述第三电子乐谱相邻、且位于所述第三电子乐谱之后;
基于所述第一电子乐谱与所述第四电子乐谱的比对,确认所述第一电子乐谱在所述第二电子乐谱中的位置。
所述定位单元503,还用于在所述第一电子乐谱与第四电子乐谱比对的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值小于预设值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置。在所述第一电子乐谱与第四电子乐谱比对的误差大于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值大于预设值的情况下,确认所述第一电子乐谱不在所述第二电子乐谱中。
所述获取单元,还用于获取第二乐器对应的演奏位置;
所述比对单元,还用于将所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置进行比较;
所述定位单元,还用于在所述第一乐器对应的演奏位置与第二乐器对应的演奏位置的距离小于第三阈值的情况下,确认所述第一乐器的演奏位置与所述第二乐器对应的演奏位置同步。用于:所述在所述第一乐器的演奏位置与第二乐器对应的演奏位置的差值大于或等于第三阈值的情况下,将所述第一乐器的演奏位置发送至源音频文件对应的主电子乐谱,基于所述主电子乐谱的演奏位置,确认所述第一乐器的演奏位置。
图6是本申请实施例的电子乐谱翻页装置的硬件组成结构示意图,电子乐谱翻页装置700包括:至少一个处理器701、存储器702和至少一个网络接口704。电子乐谱翻页装置700中的各个组件通过总线系统705耦合在一起。可理解,总线系统705用于实现这些组件之间的连接通信。总线系统705除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图6中将各种总线都标为总线系统705。
可以理解,存储器702可以是易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是ROM、可编程只读存储器(PROM,Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM,ErasableProgrammable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM,ElectricallyErasable Programmable Read-Only Memory)、磁性随机存取存储器(FRAM,ferromagneticrandom access memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD-ROM,Compact Disc Read-Only Memory);磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(RAM,Random Access Memory),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(SRAM,Static Random Access Memory)、同步静态随机存取存储器(SSRAM,SynchronousStatic Random Access Memory)、动态随机存取存储器(DRAM,Dynamic Random AccessMemory)、同步动态随机存取存储器(SDRAM,Synchronous Dynamic Random AccessMemory)、双倍数据速率同步动态随机存取存储器(DDRSDRAM,Double Data RateSynchronous Dynamic Random Access Memory)、增强型同步动态随机存取存储器(ESDRAM,Enhanced Synchronous Dynamic Random Access Memory)、同步连接动态随机存取存储器(SLDRAM,SyncLink Dynamic Random Access Memory)、直接内存总线随机存取存储器(DRRAM,Direct Rambus Random Access Memory)。本申请实施例描述的存储器702旨在包括但不限于这些和任意其它适合类型的存储器。
本申请实施例中的存储器702用于存储各种类型的数据以支持电子乐谱翻页装置700的操作。这些数据的示例包括:用于在电子乐谱翻页装置700上操作的任何计算机程序,如应用程序7022。实现本申请实施例方法的程序可以包含在应用程序7022中。
上述本申请实施例揭示的方法可以应用于处理器701中,或者由处理器701实现。处理器701可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器701中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器701可以是通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。处理器701可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的方法的步骤,可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中,该存储介质位于存储器702,处理器701读取存储器702中的信息,结合其硬件完成前述方法的步骤。
在示例性实施例中,电子乐谱翻页装置700可以被一个或多个应用专用集成电路(ASIC,Application Specific Integrated Circuit)、DSP、可编程逻辑器件(PLD,Programmable Logic Device)、复杂可编程逻辑器件(CPLD,Complex Programmable LogicDevice)、FPGA、通用处理器、控制器、MCU、MPU、或其他电子元件实现,用于执行前述方法。
本申请实施例还提供了一种存储介质,用于存储计算机程序。
可选的,该存储介质可应用于本申请实施例中的终端设备,并且该计算机程序使得计算机执行本申请实施例的各个方法中的相应流程,为了简洁,在此不再赘述。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本申请的较佳实施例而已,并非用于限定本申请的保护范围,凡在本申请的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本申请的保护范围之内。

Claims (14)

1.一种电子乐谱翻页方法,其特征在于,所述方法包括:
获取目标音频文件,将所述目标音频文件转换为第一电子乐谱,所述目标音频文件为源音频文件中的部分音频文件;
其中,所述源音频文件为包含第一乐器的乐团从开始演奏到结束演奏这一时间段内演奏的全部音频文件;
确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置;
所述确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置,包括:
将所述第一电子乐谱与所述第二电子乐谱中的第三电子乐谱进行比对,在所述第三电子乐谱与所述第一电子乐谱的误差小于第一阈值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置;
所述确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置之后,所述方法还包括:
获取第二乐器对应的演奏位置;
其中,所述第二乐器为乐团合奏中除所述第一乐器以外的乐器;
将所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置进行比较;
在所述第一乐器对应的演奏位置与第二乐器对应的演奏位置的距离小于第三阈值的情况下,确认所述第一乐器的演奏位置与所述第二乐器对应的演奏位置同步;
在所述第一乐器的演奏位置与第二乐器对应的演奏位置的差值大于或等于第三阈值的情况下,将所述第一乐器的演奏位置发送至源音频文件对应的主电子乐谱,基于所述主电子乐谱的演奏位置,确认所述第一乐器的演奏位置;
基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理,包括:
在所述第一电子乐谱在所述第二电子乐谱当前显示界面的末端的情况下,确认对所述第二电子乐谱进行翻页处理。
3.根据权利要求1所述的方法,其特征在于,所述将所述目标音频文件转换为第一电子乐谱,包括:
基于机器学习的方式获取演奏所述目标音频文件的乐器中第一乐器对应的子音频文件;
将所述子音频文件转换为第一电子乐谱。
4.根据权利要求3所述的方法,其特征在于,所述基于机器学习的方式获取演奏所述目标音频文件的乐器中第一乐器对应的子音频文件,包括:
采集第一乐器的独奏音频;
从所述第一乐器的独奏音频中提取第一乐器演奏的音频的特征;
以所述目标音频文件的数据为输入,以第一乐器演奏的音频的特征为特征,训练机器学习模型;所述训练机器学习模型的训练结果为第一乐器对应的子音频文件。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述第三电子乐谱与所述第一电子乐谱的误差大于或等于第一阈值的情况下,将所述第一电子乐谱与所述第二电子乐谱中的第四电子乐谱进行比对;
其中,所述第四电子乐谱位于所述第三电子乐谱之后;
基于所述第一电子乐谱与所述第四电子乐谱的比对结果,确认所述第一电子乐谱在所述第二电子乐谱中的位置。
6.根据权利要求5所述的方法,其特征在于,所述基于所述第一电子乐谱与所述第四电子乐谱的比对结果,确认所述第一电子乐谱在所述第二电子乐谱中的位置,包括:
在所述第一电子乐谱与第四电子乐谱的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值小于预设值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置;
或者,在所述第一电子乐谱与第四电子乐谱的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值大于或等于预设值的情况下,确认所述第一电子乐谱不在所述第二电子乐谱中。
7.一种电子乐谱翻页装置,其特征在于,所述装置包括:
获取单元,用于获取目标音频文件;
所述获取单元,还用于获取第二乐器对应的演奏位置;其中,所述第二乐器为乐团合奏中除第一乐器以外的乐器;
转换单元,用于将所述目标音频文件转换为第一电子乐谱,所述目标音频文件为源音频文件中的部分音频文件;
其中,所述源音频文件为包含所述第一乐器的乐团从开始演奏到结束演奏这一时间段内演奏的全部音频文件;
比对单元,用于将所述第一电子乐谱与第二电子乐谱中的第三电子乐谱进行比对,在所述第三电子乐谱与所述第一电子乐谱的误差小于第一阈值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置;
所述比对单元,还用于将所述第一乐器对应的演奏位置与所述第二乐器对应的演奏位置进行比较;
定位单元,用于确认所述第一电子乐谱在所述源音频文件对应的第二电子乐谱中的位置;
所述定位单元,还用于在所述第一乐器对应的演奏位置与第二乐器对应的演奏位置的距离小于第三阈值的情况下,确认所述第一乐器的演奏位置与所述第二乐器对应的演奏位置同步;
所述定位单元,还用于在所述第一乐器的演奏位置与第二乐器对应的演奏位置的差值大于或等于第三阈值的情况下,将所述第一乐器的演奏位置发送至源音频文件对应的主电子乐谱,基于所述主电子乐谱的演奏位置,确认所述第一乐器的演奏位置;
翻页单元,用于基于所述第一电子乐谱在所述第二电子乐谱中的位置,确认是否对所述第二电子乐谱进行翻页处理。
8.根据权利要求7所述的装置,其特征在于,所述翻页单元还用于:
所述第一电子乐谱在所述第二电子乐谱当前显示界面的末端的情况下,确认对所述第二电子乐谱进行翻页处理。
9.根据权利要求7所述的装置,其特征在于,所述装置还包括:
机器学习单元,用于基于机器学习的方式获取演奏所述目标音频文件的乐器中第一乐器对应的子音频文件;
所述转换单元,还用于将所述子音频文件转换为第一电子乐谱。
10.根据权利要求9所述的装置,其特征在于,所述机器学习单元,还用于:
采集第一乐器的独奏音频;
从包含所述第一乐器的独奏音频中提取第一乐器的特征;
以所述目标音频文件的数据为输入,以第一乐器的特征为特征,训练机器学习模型;所述训练机器学习模型的训练结果为第一乐器对应的子音频文件。
11.根据权利要求7所述的装置,其特征在于,所述比对单元还用于:
在所述第三电子乐谱与所述第一电子乐谱的误差大于或等于第一阈值的情况下,将所述第一电子乐谱与所述第二电子乐谱中的第四电子乐谱进行比对;
其中,所述第四电子乐谱位于所述第三电子乐谱之后;
基于所述第一电子乐谱与所述第四电子乐谱的比对结果,确认所述第一电子乐谱在所述第二电子乐谱中的位置。
12.根据权利要求11所述的装置,其特征在于,定位单元还用于:
在所述第一电子乐谱与第四电子乐谱的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值小于预设值的情况下,确认所述第三电子乐谱所在的位置为所述第一电子乐谱在所述第二电子乐谱中的位置;
或者,在所述第一电子乐谱与第四电子乐谱的误差大于或等于第二阈值、且所述第二阈值大于所述第一阈值、所述第一阈值大于或等于预设值的情况下,确认所述第一电子乐谱不在所述第二电子乐谱中。
13.一种存储介质,其上存储有可执行程序,其特征在于,所述可执行程序被处理器执行时实现如权利要求1至6任一项所述电子乐谱翻页方法的步骤。
14.一种电子乐谱翻页装置,包括存储器、处理器及存储在存储器上并能够由所述处理器运行的可执行程序,其特征在于,所述处理器运行所述可执行程序时执行如权利要求1至6任一项所述电子乐谱翻页方法的步骤。
CN201910837944.7A 2019-09-05 2019-09-05 一种电子乐谱翻页方法、装置及存储介质 Active CN112447155B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910837944.7A CN112447155B (zh) 2019-09-05 2019-09-05 一种电子乐谱翻页方法、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910837944.7A CN112447155B (zh) 2019-09-05 2019-09-05 一种电子乐谱翻页方法、装置及存储介质

Publications (2)

Publication Number Publication Date
CN112447155A CN112447155A (zh) 2021-03-05
CN112447155B true CN112447155B (zh) 2023-08-15

Family

ID=74733157

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910837944.7A Active CN112447155B (zh) 2019-09-05 2019-09-05 一种电子乐谱翻页方法、装置及存储介质

Country Status (1)

Country Link
CN (1) CN112447155B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117501360A (zh) * 2021-06-23 2024-02-02 雅马哈株式会社 装置、合奏系统、音播放方法及程序

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10319950A (ja) * 1997-05-22 1998-12-04 Yamaha Corp データ送受信方法およびシステム
CN1264106A (zh) * 1999-02-16 2000-08-23 科乐美股份有限公司 音乐游戏系统、其演奏指示连动控制方法及可读记录介质
WO2005062289A1 (ja) * 2003-12-18 2005-07-07 Kashioka, Seiji コンピュータを用いた楽譜の表示方法
WO2010006639A1 (en) * 2008-07-15 2010-01-21 Gueneux Roland Conductor centric electronic music stand system
CH705416A2 (de) * 2011-08-22 2013-02-28 Roland Gueneux Softwarebasiertes Notenblattsystem.
JP2014071137A (ja) * 2012-09-27 2014-04-21 Xing Inc 楽器音出力装置
CN104183171A (zh) * 2013-05-23 2014-12-03 杭州灵机科技有限公司 一种基于电子乐谱的乐器演奏水平精准评判的系统和方法
CN105070301A (zh) * 2015-07-14 2015-11-18 福州大学 单通道音乐人声分离中的多种特定乐器强化分离方法
US9747876B1 (en) * 2015-07-28 2017-08-29 Amazon Technologies, Inc. Adaptive layout of sheet music in coordination with detected audio
CN108045127A (zh) * 2017-12-15 2018-05-18 惠州市敦雅科技有限公司 一种乐谱自动翻页方法
CN108962202A (zh) * 2018-07-17 2018-12-07 广州丰谱信息技术有限公司 基于同步域自广播的电子指挥曲谱机组装置
CN109192185A (zh) * 2018-08-20 2019-01-11 咪咕数字传媒有限公司 一种乐谱的处理方法、装置及计算机可读存储介质
CN109859770A (zh) * 2019-01-04 2019-06-07 平安科技(深圳)有限公司 音乐分离方法、装置及计算机可读存储介质
CN109961800A (zh) * 2017-12-26 2019-07-02 中国移动通信集团山东有限公司 一种乐谱翻页处理方法及装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI229845B (en) * 2003-10-15 2005-03-21 Sunplus Technology Co Ltd Electronic musical score apparatus
JP5190157B1 (ja) * 2012-01-26 2013-04-24 キャスティングメディア株式会社 音楽支援装置および音楽支援システム
US20150352879A1 (en) * 2014-06-10 2015-12-10 Hsiu-Ju Lin Electronic applaratus and method for assisting instrument playing
US20150364122A1 (en) * 2014-06-13 2015-12-17 Bin Ye Music Note Indicating Method And System For Electronic Piano, Mobile Terminal And Electronic Piano

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10319950A (ja) * 1997-05-22 1998-12-04 Yamaha Corp データ送受信方法およびシステム
CN1264106A (zh) * 1999-02-16 2000-08-23 科乐美股份有限公司 音乐游戏系统、其演奏指示连动控制方法及可读记录介质
WO2005062289A1 (ja) * 2003-12-18 2005-07-07 Kashioka, Seiji コンピュータを用いた楽譜の表示方法
WO2010006639A1 (en) * 2008-07-15 2010-01-21 Gueneux Roland Conductor centric electronic music stand system
CH705416A2 (de) * 2011-08-22 2013-02-28 Roland Gueneux Softwarebasiertes Notenblattsystem.
JP2014071137A (ja) * 2012-09-27 2014-04-21 Xing Inc 楽器音出力装置
CN104183171A (zh) * 2013-05-23 2014-12-03 杭州灵机科技有限公司 一种基于电子乐谱的乐器演奏水平精准评判的系统和方法
CN105070301A (zh) * 2015-07-14 2015-11-18 福州大学 单通道音乐人声分离中的多种特定乐器强化分离方法
US9747876B1 (en) * 2015-07-28 2017-08-29 Amazon Technologies, Inc. Adaptive layout of sheet music in coordination with detected audio
CN108045127A (zh) * 2017-12-15 2018-05-18 惠州市敦雅科技有限公司 一种乐谱自动翻页方法
CN109961800A (zh) * 2017-12-26 2019-07-02 中国移动通信集团山东有限公司 一种乐谱翻页处理方法及装置
CN108962202A (zh) * 2018-07-17 2018-12-07 广州丰谱信息技术有限公司 基于同步域自广播的电子指挥曲谱机组装置
CN109192185A (zh) * 2018-08-20 2019-01-11 咪咕数字传媒有限公司 一种乐谱的处理方法、装置及计算机可读存储介质
CN109859770A (zh) * 2019-01-04 2019-06-07 平安科技(深圳)有限公司 音乐分离方法、装置及计算机可读存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
段美钰.计算机绘谱在电子音乐创作及教学中的应用实践.中国优秀硕士学位论文全文数据库.2016,第46页. *

Also Published As

Publication number Publication date
CN112447155A (zh) 2021-03-05

Similar Documents

Publication Publication Date Title
US10283099B2 (en) Vocal processing with accompaniment music input
US9847078B2 (en) Music performance system and method thereof
US7482529B1 (en) Self-adjusting music scrolling system
EP3211637B1 (en) Speech synthesis device and method
Gupta et al. Automatic lyrics alignment and transcription in polyphonic music: Does background music help?
US8481839B2 (en) System and methods for synchronizing audio and/or visual playback with a fingering display for musical instrument
US9355634B2 (en) Voice synthesis device, voice synthesis method, and recording medium having a voice synthesis program stored thereon
CN103810992A (zh) 语音合成方法和语音合成设备
US20060112812A1 (en) Method and apparatus for adapting original musical tracks for karaoke use
JP5257966B2 (ja) 音楽再生制御システム、音楽演奏プログラム、および演奏データの同期再生方法
US9711121B1 (en) Latency enhanced note recognition method in gaming
CN109961800B (zh) 一种乐谱翻页处理方法及装置
RU2673599C2 (ru) Способ передачи информации музыкального исполнения и система передачи информации музыкального исполнения
JP6776788B2 (ja) 演奏制御方法、演奏制御装置およびプログラム
CN112447155B (zh) 一种电子乐谱翻页方法、装置及存储介质
CN107122493B (zh) 歌曲播放方法和装置
US10298192B2 (en) Sound processing device and sound processing method
EP3709290B1 (en) Acoustic device and acoustic control program
WO2019208193A1 (ja) 発音変換装置、ピッチマーク時刻抽出装置、それらの方法、およびプログラム
WO2018173295A1 (ja) ユーザインタフェース装置及び方法、並びに音操作システム
JP4048249B2 (ja) カラオケ装置
JP6252517B2 (ja) 音声合成装置、及びプログラム
JP5962925B2 (ja) 音声合成装置、楽曲再生装置、音声合成プログラム及び楽曲再生プログラム
JP2005107332A (ja) カラオケ装置
JP6077492B2 (ja) 情報処理装置、情報処理方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant