CN107767847B - 一种智能钢琴演奏测评方法及系统 - Google Patents

一种智能钢琴演奏测评方法及系统 Download PDF

Info

Publication number
CN107767847B
CN107767847B CN201710912292.XA CN201710912292A CN107767847B CN 107767847 B CN107767847 B CN 107767847B CN 201710912292 A CN201710912292 A CN 201710912292A CN 107767847 B CN107767847 B CN 107767847B
Authority
CN
China
Prior art keywords
note
user
playing
played
master
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710912292.XA
Other languages
English (en)
Other versions
CN107767847A (zh
Inventor
夏雨
应笕
闫召曦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiaoyezi Beijing Technology Co ltd
Original Assignee
Xiaoyezi Beijing Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiaoyezi Beijing Technology Co ltd filed Critical Xiaoyezi Beijing Technology Co ltd
Priority to CN201710912292.XA priority Critical patent/CN107767847B/zh
Publication of CN107767847A publication Critical patent/CN107767847A/zh
Application granted granted Critical
Publication of CN107767847B publication Critical patent/CN107767847B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/32Constructional details
    • G10H1/34Switch arrangements, e.g. keyboards or mechanical switches specially adapted for electrophonic musical instruments
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0033Recording/reproducing or transmission of music for electrophonic musical instruments
    • G10H1/0041Recording/reproducing or transmission of music for electrophonic musical instruments in coded form
    • G10H1/0058Transmission between separate instruments or between individual components of a musical system
    • G10H1/0066Transmission between separate instruments or between individual components of a musical system using a MIDI interface

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Auxiliary Devices For Music (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

本发明公开了一种智能钢琴演奏测评方法,包括:采集用户的MIDI音频数字信号转换成演奏数据;将用户演奏时间序列和大师演奏时间序列在时间轴上匹配;将用户演奏的音符组和大师演奏的音符组进行音准判定;将用户演奏的音符相对时值与大师演奏的音符相对时值进行节奏判定;计算用户演奏速度和大师演奏速度的相对速度进行速度判定;将用户演奏的音符力度与大师演奏的音符力度进行力度判定;将演奏音准、演奏节奏、演奏速度和演奏力度进行综合评估;将综合评估的结果在智能终端的五线谱上进行标识。本发明还提供了一种智能钢琴演奏测评系统。本发明的有益效果:把用户准确声音源文件与专业演奏的曲谱进行准确、客观、多方面对比,真实反映用户演奏水平。

Description

一种智能钢琴演奏测评方法及系统
技术领域
本发明涉及乐器技术领域,具体而言,涉及一种智能钢琴演奏测评方法及系统。
背景技术
传统的钢琴学习需要有专业老师从启蒙阶段就开始指导,按照按部就班的教材随时对钢琴学习者在演奏过程中发生的错误进行纠正,同时在学习者大量的自主练习过程中往往都会遇到因为没有老师的实时指导而反复错误练习,造成时间的浪费和效率的低下。
在现有技术中,通常都是通过MIDI识别乐谱从而通过对应钢琴按键指示灯给初学者提供了入门的弹奏和学习方法,但是在真正钢琴乐曲练习过程中,学习者需要掌握乐曲识谱、节奏、速度、力度和表现力等多方面技巧才能更加完美地演绎。
目前,有通过节拍器固定节奏跟灯学习的评测方法,这种方式有一定的局限性,违背用户基本的演奏逻辑和习惯。因为,跟着节拍器演奏出来的不是音乐而是机械,且无法对用户对速度、节奏、以及乐曲情感处理进行评测,仅限于纠正错音。另外,也有采用声音识别的方法结合DTW算法等进行乐谱的演奏测评,但是目前理论价值可能高于实用价值,同时,由于涉及复音,加上外环境音嘈杂、钢琴缺乏调率等都会导致声音识别的准确率大大降低,从而严重影响到实际的演奏测评结果。现有评测方法的计算维度,以及综合评分缺乏准确率和客观性,不能真实反映用户演奏水平。
发明内容
为解决上述问题,本发明的目的在于提供一种智能钢琴演奏测评方法及系统,把MIDI采集的用户准确声音源文件与专业演奏的曲谱在音准、节奏、速度和力度等维度上进行准确、客观、多方面对比,真实反映用户演奏水平,提高演奏学习效率。
本发明提供了一种智能钢琴演奏测评方法,包括:
步骤1,通过智能钢琴上的MIDI接口采集用户演奏钢琴的MIDI音频数字信号,并通过网络将MIDI音频数字信号传输至智能终端中,智能终端将MIDI音频数字信号转换成用户的演奏数据,演奏数据由所有音符的音符数据组成;
其中,每个音符的音符数据包括:音符开始时间、音高、音符时值、音符力度和演奏中第几个音符;
步骤2,将用户演奏的音符数据组成用户演奏时间序列和智能终端中存储的大师演奏时间序列在时间轴上进行匹配,识别出用户演奏的每个音符组分别对应的大师演奏的音符组;
其中,时间序列为若干音符组组成的数组,每个音符组包括同时演奏的音符的音符数据;
步骤3,将用户演奏的每个音符组和对应大师演奏的音符组进行对比判定,评估用户的演奏音准,,得到用户的演奏音准信息,包括错音和丢音;
步骤4,将用户演奏的音符组中的每个音符的相对时值与大师演奏的音符组中对应音符的相对时值进行对比判定,评估用户的演奏节奏,得到用户的演奏节奏信息;
步骤5,通过滑动窗口算法,计算用户演奏的速度和大师演奏的速度之间的相对速度,获取用户演奏的平均速度曲线,评估用户的演奏速度,得到用户的演奏速度信息;
步骤6,将用户演奏的音符组中的每个音符的音符力度与大师演奏的音符组中对应音符的音符力度进行对比判定,评估用户的演奏力度,得到用户的演奏力度信息;
步骤7,将步骤3-步骤6中的演奏音准、演奏节奏、演奏速度和演奏力度进行综合评估;
步骤8,将综合评估的结果在智能终端的五线谱上进行标识,包括演奏音准信息、演奏节奏信息、演奏速度信息、演奏力度信息。
作为本发明进一步的改进,步骤3中,在判定评估演奏音准时:
对于用户演奏的每个音符组,如果在对应大师演奏的音符组中可以找到对应的音符,则标记为音准正确,反之则标记为音准错误;
对于大师演奏的每个音符组,如果在用户演奏的对应音符组中无法找到与大师演奏的音符组相匹配的音符,则标记为丢音。
作为本发明进一步的改进,步骤4中,相对时值为该音符时值和前后音符时值的相对比例。
作为本发明进一步的改进,步骤5中,计算相对速度的方法为:
取用户演奏的当前时间点,对应的滑动窗口大小;
截取在该滑动窗口内的用户演奏窗口片段;
在在智能终端中存储的大师演奏录音中找到相匹配的大师演奏片段;
计算当前时间点用户演奏速度和大师演奏速度的相对速度。
本发明还提供了一种智能钢琴演奏测评系统,包括:
数据采集模块,其用于通过智能钢琴上的MIDI接口采集用户演奏钢琴的MIDI音频数字信号,并通过网络将MIDI音频数字信号传输至智能终端中,智能终端将MIDI音频数字信号转换成用户的演奏数据,演奏数据由所有音符的音符数据组成;
其中,每个音符的音符数据包括:音符开始时间、音高、音符时值、音符力度和演奏中第几个音符;
数据匹配模块,其用于将用户演奏的音符数据组成用户演奏时间序列和智能终端中存储的大师演奏时间序列在时间轴上进行匹配,识别出用户演奏的每个音符组分别对应的大师演奏的音符组;
其中,时间序列为若干音符组组成的数组,每个音符组包括同时演奏的音符的音符数据;
音准判定模块,其用于将用户演奏的每个音符组和对应大师演奏的音符组进行对比判定,评估用户的演奏音准,得到用户的演奏音准信息,包括错音和丢音;
节奏判定模块,其用于将用户演奏的音符组中的每个音符的相对时值与大师演奏的音符组中对应音符的相对时值进行对比判定,评估用户的演奏节奏,得到用户的演奏节奏信息;
速度判定模块,其用于通过滑动窗口算法,计算用户演奏的速度和大师演奏的速度之间的相对速度,获取用户演奏的平均速度曲线,评估用户的演奏速度,得到用户的演奏速度信息;
力度判定模块,其用于将用户演奏的音符组中的每个音符的音符力度与大师演奏的音符组中对应音符的音符力度进行对比判定,评估用户的演奏力度,得到用户的演奏力度信息;
综合评估模块,其用于将演奏音准、演奏节奏、演奏速度和演奏力度进行综合评估;
结果显示模块,其用于将综合评估的结果在智能终端的五线谱上进行标识,包括演奏音准信息、演奏节奏信息、演奏速度信息、演奏力度信息。
作为本发明进一步的改进,音准判定模块中,在判定评估演奏节奏时:
对于用户演奏的每个音符组,如果在对应大师演奏的音符组中可以找到对应的音符,则标记为音准正确,反之则标记为音准错误;
对于大师演奏的每个音符组,如果在用户演奏的对应音符组中无法找到与大师演奏的音符组相匹配的音符,则标记为丢音。
作为本发明进一步的改进,节奏判定模块中,相对时值为该音符时值和前后音符时值的相对比例。
作为本发明进一步的改进,速度判定模块中,计算相对速度的方法为:
取用户演奏的当前时间点,对应的滑动窗口大小;
截取在该滑动窗口内的用户演奏窗口片段;
在智能终端中存储的大师演奏录音中找到相匹配的大师演奏片段;
计算当前时间点时,用户演奏速度和大师演奏速度的相对速度。
本发明的有益效果为:
1、从音准、节奏、速度和力度等多个维度上反映了用户的演奏水平,客观准确;
2、考虑了复音的匹配,提高测评的准确性;
3、通过相对比例来判定节奏,能准确反映节奏信息,进一步提高了测评的准确性;
4、通过相对速度来判定速度,平滑整个速度曲线,进一步提高了测评的准确性;
5、可将评测出来的结果数据曲线,包括弹奏的速度、音符准确性等在五线谱上直接进行标注,更加直观地让用户了解自己演奏的实际情况。
附图说明
图1为本发明实施例所述的一种智能钢琴演奏测评方法的流程示意图。
具体实施方式
下面通过具体的实施例并结合附图对本发明做进一步的详细描述。
实施例1,如图1所示,本发明实施例所述的一种智能钢琴演奏测评方法,包括:
步骤1,通过智能钢琴上的MIDI接口采集用户演奏钢琴的MIDI音频数字信号,并通过网络将MIDI音频数字信号传输至智能终端中,智能终端将MIDI音频数字信号转换成用户的演奏数据,演奏数据由所有音符的音符数据组成。
上述步骤中,在传输MIDI音频数字信号时,智能钢琴和智能终端之间通过USB连接线相连,不断检测其内存缓冲区,当检测到有MIDI音频序列数据时,传输至智能终端中并进行实时播放。
其中,MIDI接口乐器数字接口仅仅是一个通信标准,用以确定电脑音乐程序、合成器和其他电子音响的设备互相交换信息与控制信号的方法。MIDI是一种电子乐器之间以及电子乐器与电脑之间的统一交流协议。MIDI传输的不是声音信号,而是音符、控制参数等指令。MIDI文件是一种描述性的“音乐语言”,它将所要演奏的乐曲信息用字节进行描述,譬如在某一时刻,使用什么乐器,以什么音符开始,以什么音调结束,加以什么伴奏等等。
因此,本发明中在采集MIDI音频数字信号时,包含整首演奏曲谱的所有音符数据,而每个音符的音符数据包括:音符开始时间、音高、音符时值、音符力度和演奏中第几个音符等等。
步骤2,将用户演奏的音符数据组成用户演奏时间序列和智能终端中存储的大师演奏时间序列在时间轴上进行匹配,识别出用户演奏的每个音符组分别对应的大师演奏的音符组。
由于钢琴为多声部乐器,在同一个时间内会有多个音符同时弹奏,在匹配时,不能单一对单个音符进行匹配,需要将同时按下的音符例如和弦一起进行匹配。因此,本发明将需要匹配的时间序列分成若干音符组组成的数组,每个音符组包括同时演奏的音符的音符数据,这样可以保证复音的匹配,提高后续测评的准确性。
步骤3,将用户演奏的每个音符组和对应大师演奏的音符组进行对比判定,评估用户的演奏音准,得到用户的演奏音准信息,包括错音和丢音。
音准,即用户是否正确演奏了五线谱上标注的音符,音准正确,是正确演奏一首曲目的基础。因此,音准从一个方面、一个维度上反映了用户的演奏水平。在对音准进行测评时,需要将用户演奏的音符组和对应大师演奏的音符组,针对每一个音符组逐一判定,具体为:
对于用户演奏的每个音符组,如果在对应大师演奏的音符组中可以找到对应的音符,则标记为音准正确,反之则标记为音准错误;
对于大师演奏的每个音符组,如果在用户演奏的对应音符组中无法找到与大师演奏的音符组相匹配的音符,则标记为丢音。
步骤4,将用户演奏的音符组中的每个音符的相对时值与大师演奏的音符组中对应音符的相对时值进行对比判定,评估用户的演奏节奏,得到用户的演奏节奏信息。
节奏是音乐中的基本概念之一,正确演奏节奏是钢琴演奏者的基本技能。节奏正确,即用户演奏的音的时值是否和大师演奏的时值相匹配。比如四分音符的长度是八分音符的一倍,如果把四分音符的长度演奏为八分音符的长度,则为节奏错误。然而,每个音符的时值是相对而不是绝对的。比如曲目整体速度加快,每个音符的时值也会缩短。甚至在单个乐曲中速度也不是恒定的,在测评时,需要考虑速度的变化,将速度变化对节奏判断准确性的影响降到最低。因此,本发明采用相对比例来判定节奏,不以音符的绝对时值为判定基础,而是以该音符时值和前后音符时值的相对比例,来作为判定的依据。经过反复测试,这种判定方法能准确反映用户演奏的节奏信息。
步骤5,通过滑动窗口算法,计算用户演奏的速度和大师演奏的速度之间的相对速度,获取用户演奏的平均速度曲线,评估用户的演奏速度,得到用户的演奏速度信息。
演奏速度是演奏者对节拍的控制能力,以及对乐曲音乐表达能力判定的重要指标。速度判定的难点在于演奏者的演奏速度通常不固定,而且不会线性变化,如何定义在某个时间点的“速度”是比较困难的。本发明通过滑动窗口算法,计算用户演奏的相对速度,通过计算整首曲谱的相对速度,获取用户演奏的速度曲线。通过相对速度的计算,可以准确反映用户演奏的速度,不会因为某个时间点的速度提取不正确导致整体测评的准确性降低。
在计算相对速度时,采用的方法具体为:
取用户演奏的当前时间点为t,对应的滑动窗口大小为size;
截取在该滑动窗口内的用户演奏窗口片段为userPart=userPlay.sub(t-size/2,t+size/2);其中,userPlay.sub为用户演奏的整段曲谱,userPart为根据滑动窗口提取的用户演奏片段,size/2、t+size/2分别为用户演奏片段中的演奏起始和结束时间;
在智能终端中存储的大师演奏录音中找到相匹配的大师演奏片段expertPart=exportPlay.sub(t1,t2);其中,exportPlay.sub为大师演奏的整段曲谱,expertPart为根据窗口大小提取的大师演奏片段,t1、t2分别为大师演奏片段中的演奏起始和结束时间;
计算当前时间点t时,用户演奏速度和大师演奏速度的相对速度为size/(t2-t1)。
因此,采用相对速度的评测方法,通过动态调整窗口大小,可以消除某个时间点的毛刺即提取的错误速度,平滑整个速度曲线,避免了速度不固定导致的测评准确性降低。
步骤6,将用户演奏的音符组中的每个音符的音符力度与大师演奏的音符组中对应音符的音符力度进行对比判定,评估用户的演奏力度,得到用户的演奏力度信息。
演奏力度的测评只需从获取的音符组的音符数据中逐一匹配判定即可。
步骤7,将步骤3-步骤6中的演奏音准、演奏节奏、演奏速度和演奏力度进行综合评估,计算用户的演奏总得分,对演奏总体水平客观的评判。
需要预先对演奏音准、演奏节奏、演奏速度和演奏力度设置得分标准,根据用户演奏的相应音准、节奏、速度和力度在标准中对应找到应得的分值,根据相应的加权系数计算出最后的总得分,整体客观反映用户的演奏水平。
步骤8,将综合评估的结果在智能终端的五线谱上以瀑布流的形式进行标识,包括演奏音准信息(正确,错误,遗漏级丢音)、演奏节奏信息(早,晚,以及定量分析)、演奏速度信息(快,慢)、演奏力度信息(轻,重)等等,通过这些在五线谱上直接标注的信息,更加直观地让用户了解自己演奏的实际情况。
本发明还提供了一种智能钢琴演奏测评系统,包括:
数据采集模块,其用于通过智能钢琴上的MIDI接口采集用户演奏钢琴的MIDI音频数字信号,并通过网络将MIDI音频数字信号传输至智能终端中,智能终端将MIDI音频数字信号转换成用户的演奏数据,演奏数据由所有音符的音符数据组成;
其中,每个音符的音符数据包括:音符开始时间、音高、音符时值、音符力度和演奏中第几个音符;
数据匹配模块,其用于将用户演奏的音符数据组成用户演奏时间序列和智能终端中存储的大师演奏时间序列在时间轴上进行匹配,识别出用户演奏的每个音符组分别对应的大师演奏的音符组;
其中,时间序列为若干音符组组成的数组,每个音符组包括同时演奏的音符的音符数据;
音准判定模块,其用于将用户演奏的每个音符组和对应大师演奏的音符组进行对比判定,评估用户的演奏音准,得到用户的演奏音准信息,包括错音和丢音;在判定评估演奏节奏时:
对于用户演奏的每个音符组,如果在对应大师演奏的音符组中可以找到对应的音符,则标记为音准正确,反之则标记为音准错误;
对于大师演奏的每个音符组,如果在用户演奏的对应音符组中无法找到与大师演奏的音符组相匹配的音符,则标记为丢音;
节奏判定模块,其用于将用户演奏的音符组中的每个音符的相对时值与大师演奏的音符组中对应音符的相对时值进行对比判定,评估用户的演奏节奏,得到用户的演奏节奏信息;其中,相对时值为该音符时值和前后音符时值的相对比例;
速度判定模块,其用于通过滑动窗口算法,计算用户演奏的速度和大师演奏的速度之间的相对速度,获取用户演奏的平均速度曲线,评估用户的演奏速度,得到用户的演奏速度信息;其中,计算相对速度的方法为:
取用户演奏的当前时间点,对应的滑动窗口大小;
截取在该滑动窗口内的用户演奏窗口片段;
在智能终端中存储的大师演奏录音中找到相匹配的大师演奏片段;
计算当前时间点时,用户演奏速度和大师演奏速度的相对速度;
力度判定模块,其用于将用户演奏的音符组中的每个音符的音符力度与大师演奏的音符组中对应音符的音符力度进行对比判定,评估用户的演奏力度,得到用户的演奏力度信息;
综合评估模块,其用于演奏音准、演奏节奏、演奏速度和演奏力度进行综合评估;
结果显示模块,其用于将综合评估的结果在智能终端的五线谱上进行标识,包括演奏音准信息、演奏节奏信息、演奏速度信息、演奏力度信息。
本发明从音准、节奏、速度和力度等多个维度上反映了用户的演奏水平,避免了单一的测评标准,更加客观更加准确。在对用户数据和大师数据进行匹配时,充分考虑了复音即同时按下的音符,提高测评的准确性。判定节奏时,采用相对比例计算,能准确反映节奏信息,进一步提高了测评的准确性。判定速度时,采用相对速度计算,平滑整个速度曲线,进一步提高了测评的准确性。本发明可将评测出来的结果数据曲线,包括弹奏的速度、音符准确性等在智能终端上的五线谱上直接进行标注,更加直观地让用户了解自己演奏的实际情况。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (6)

1.一种智能钢琴演奏测评方法,其特征在于,包括:
步骤1,通过智能钢琴上的MIDI接口采集用户演奏钢琴的MIDI音频数字信号,并通过网络将MIDI音频数字信号传输至智能终端中,智能终端将MIDI音频数字信号转换成用户的演奏数据,演奏数据由所有音符的音符数据组成;
其中,每个音符的音符数据包括:音符开始时间、音高、音符时值、音符力度和演奏中第几个音符;
步骤2,将用户演奏的音符数据组成用户演奏时间序列和智能终端中存储的大师演奏时间序列在时间轴上进行匹配,识别出用户演奏的每个音符组分别对应的大师演奏的音符组;
其中,时间序列为若干音符组组成的数组,每个音符组包括同时演奏的音符的音符数据;
步骤3,将用户演奏的每个音符组和对应大师演奏的音符组进行对比判定,评估用户的演奏音准,得到用户的演奏音准信息,包括错音和丢音;
步骤4,将用户演奏的音符组中的每个音符的相对时值与大师演奏的音符组中对应音符的相对时值进行对比判定,评估用户的演奏节奏,得到用户的演奏节奏信息;
步骤5,通过滑动窗口算法,计算用户演奏的速度和大师演奏的速度之间的相对速度,获取用户演奏的平均速度曲线,评估用户的演奏速度,得到用户的演奏速度信息;
其中,计算相对速度的方法为:
取用户演奏的当前时间点,对应的滑动窗口大小;
截取在该滑动窗口内的用户演奏窗口片段;
在智能终端中存储的大师演奏录音中找到相匹配的大师演奏片段;
计算当前时间点时,用户演奏速度和大师演奏速度的相对速度;
步骤6,将用户演奏的音符组中的每个音符的音符力度与大师演奏的音符组中对应音符的音符力度进行对比判定,评估用户的演奏力度,得到用户的演奏力度信息;
步骤7,将步骤3-步骤6中的演奏音准、演奏节奏、演奏速度和演奏力度进行综合评估;
步骤8,将综合评估的结果在智能终端的五线谱上进行标识,包括演奏音准信息、演奏节奏信息、演奏速度信息、演奏力度信息。
2.根据权利要求1所述的智能钢琴演奏测评方法,其特征在于,步骤3中,在判定评估演奏音准时:
对于用户演奏的每个音符组,如果在对应大师演奏的音符组中可以找到对应的音符,则标记为音准正确,反之则标记为音准错误;
对于大师演奏的每个音符组,如果在用户演奏的对应音符组中无法找到与大师演奏的音符组相匹配的音符,则标记为丢音。
3.根据权利要求1所述的智能钢琴演奏测评方法,其特征在于,步骤4中,相对时值为该音符时值和前后音符时值的相对比例。
4.一种智能钢琴演奏测评系统,其特征在于,包括:
数据采集模块,其用于通过智能钢琴上的MIDI接口采集用户演奏钢琴的MIDI音频数字信号,并通过网络将MIDI音频数字信号传输至智能终端中,智能终端将MIDI音频数字信号转换成用户的演奏数据,演奏数据由所有音符的音符数据组成;
其中,每个音符的音符数据包括:音符开始时间、音高、音符时值、音符力度和演奏中第几个音符;
数据匹配模块,其用于将用户演奏的音符数据组成用户演奏时间序列和智能终端中存储的大师演奏时间序列在时间轴上进行匹配,识别出用户演奏的每个音符组分别对应的大师演奏的音符组;
其中,时间序列为若干音符组组成的数组,每个音符组包括同时演奏的音符的音符数据;
音准判定模块,其用于将用户演奏的每个音符组和对应大师演奏的音符组进行对比判定,评估用户的演奏音准,得到用户的演奏音准信息,包括错音和丢音;
节奏判定模块,其用于将用户演奏的音符组中的每个音符的相对时值与大师演奏的音符组中对应音符的相对时值进行对比判定,评估用户的演奏节奏,得到用户的演奏节奏信息;
速度判定模块,其用于通过滑动窗口算法,计算用户演奏的速度和大师演奏的速度之间的相对速度,获取用户演奏的平均速度曲线,评估用户的演奏速度,得到用户的演奏速度信息;其中,计算相对速度的方法为:
取用户演奏的当前时间点,对应的滑动窗口大小;
截取在该滑动窗口内的用户演奏窗口片段;
在智能终端中存储的大师演奏录音中找到相匹配的大师演奏片段;
计算当前时间点时,用户演奏速度和大师演奏速度的相对速度;
力度判定模块,其用于将用户演奏的音符组中的每个音符的音符力度与大师演奏的音符组中对应音符的音符力度进行对比判定,评估用户的演奏力度,得到用户的演奏力度信息;
综合评估模块,其用于将演奏音准、演奏节奏、演奏速度和演奏力度进行综合评估;
结果显示模块,其用于将综合评估的结果在智能终端的五线谱上进行标识,包括演奏音准信息、演奏节奏信息、演奏速度信息、演奏力度信息。
5.根据权利要求4所述的智能钢琴演奏测评系统,其特征在于,音准判定模块中,在判定评估演奏节奏时:
对于用户演奏的每个音符组,如果在对应大师演奏的音符组中可以找到对应的音符,则标记为音准正确,反之则标记为音准错误;
对于大师演奏的每个音符组,如果在用户演奏的对应音符组中无法找到与大师演奏的音符组相匹配的音符,则标记为丢音。
6.根据权利要求4所述的智能钢琴演奏测评系统,其特征在于,节奏判定模块中,相对时值为该音符时值和前后音符时值的相对比例。
CN201710912292.XA 2017-09-29 2017-09-29 一种智能钢琴演奏测评方法及系统 Active CN107767847B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710912292.XA CN107767847B (zh) 2017-09-29 2017-09-29 一种智能钢琴演奏测评方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710912292.XA CN107767847B (zh) 2017-09-29 2017-09-29 一种智能钢琴演奏测评方法及系统

Publications (2)

Publication Number Publication Date
CN107767847A CN107767847A (zh) 2018-03-06
CN107767847B true CN107767847B (zh) 2020-10-27

Family

ID=61266813

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710912292.XA Active CN107767847B (zh) 2017-09-29 2017-09-29 一种智能钢琴演奏测评方法及系统

Country Status (1)

Country Link
CN (1) CN107767847B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108899004B (zh) * 2018-07-20 2021-10-08 广州市雅迪数码科技有限公司 五线谱音符与midi文件音符同步和评分的方法及装置
CN109035969A (zh) * 2018-07-26 2018-12-18 广州市雅迪数码科技有限公司 五线谱识键的方法
CN109817192A (zh) * 2019-01-21 2019-05-28 深圳蜜蜂云科技有限公司 一种智能陪练方法
CN110070847B (zh) * 2019-03-28 2023-09-26 深圳市芒果未来科技有限公司 乐音测评方法及相关产品
CN110265051A (zh) * 2019-06-04 2019-09-20 福建小知大数信息科技有限公司 应用于基础音乐视唱教育的视唱音频智能评分建模方法
CN110444226A (zh) * 2019-08-14 2019-11-12 山东浪潮人工智能研究院有限公司 一种基于深度学习的钢琴远程调音诊断方法及系统
CN113763991B (zh) * 2019-09-02 2024-04-19 深圳市平均律科技有限公司 一种演奏声音信息和曲谱信息的比对方法及系统
CN111354327A (zh) * 2020-03-06 2020-06-30 森兰信息科技(上海)有限公司 一种辅助弹奏方法、介质及智能钢琴
CN113112972A (zh) * 2021-04-15 2021-07-13 代明瞳 一种钢琴智能陪练系统及方法
CN113450741B (zh) * 2021-06-15 2024-09-20 吴昊臻 一种基于音频和手部关节的钢琴陪练评价方法及系统
CN113851146A (zh) * 2021-09-26 2021-12-28 平安科技(深圳)有限公司 一种基于特征分解的演奏评测方法及其装置
CN114417915B (zh) * 2021-12-29 2024-08-13 星星趣弹(苏州)科技有限公司 一种用于翻谱的二维序列相似度评估系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102317991A (zh) * 2009-01-21 2012-01-11 缪莎有限公司 用于演奏音乐的教学的基于计算机的系统
CN103531189A (zh) * 2013-09-25 2014-01-22 熊世林 一种用于智能电钢琴的演奏评价器
CN104464701A (zh) * 2013-09-20 2015-03-25 卡西欧计算机株式会社 演奏练习装置及方法
CN204695600U (zh) * 2015-04-10 2015-10-07 广州艾茉森电子有限公司 教学钢琴
CN205541849U (zh) * 2016-04-14 2016-08-31 安徽克洛斯威智能乐器科技有限公司 一种具有评分和调音功能的智能钢琴系统
CN106228961A (zh) * 2016-07-21 2016-12-14 赵洪云 演奏评价方法及装置
CN107067879A (zh) * 2017-04-07 2017-08-18 济宁学院 一种智能钢琴教学系统
CN107103895A (zh) * 2017-03-29 2017-08-29 华东交通大学 一种钢琴弹奏音准的检测装置
CN107146497A (zh) * 2016-08-02 2017-09-08 浙江大学 一种钢琴考级评分系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102317991A (zh) * 2009-01-21 2012-01-11 缪莎有限公司 用于演奏音乐的教学的基于计算机的系统
CN104464701A (zh) * 2013-09-20 2015-03-25 卡西欧计算机株式会社 演奏练习装置及方法
CN103531189A (zh) * 2013-09-25 2014-01-22 熊世林 一种用于智能电钢琴的演奏评价器
CN204695600U (zh) * 2015-04-10 2015-10-07 广州艾茉森电子有限公司 教学钢琴
CN205541849U (zh) * 2016-04-14 2016-08-31 安徽克洛斯威智能乐器科技有限公司 一种具有评分和调音功能的智能钢琴系统
CN106228961A (zh) * 2016-07-21 2016-12-14 赵洪云 演奏评价方法及装置
CN107146497A (zh) * 2016-08-02 2017-09-08 浙江大学 一种钢琴考级评分系统
CN107103895A (zh) * 2017-03-29 2017-08-29 华东交通大学 一种钢琴弹奏音准的检测装置
CN107067879A (zh) * 2017-04-07 2017-08-18 济宁学院 一种智能钢琴教学系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
钢琴考级应注意的基本问题;刘清;《中国校外教育》;20101120;80 *

Also Published As

Publication number Publication date
CN107767847A (zh) 2018-03-06

Similar Documents

Publication Publication Date Title
CN107767847B (zh) 一种智能钢琴演奏测评方法及系统
CN106340286B (zh) 一种通用的实时乐器演奏评价系统
Yamada et al. A rhythm practice support system with annotation-free real-time onset detection
CN102610222B (zh) 音乐转录的方法,系统和装置
CN101123086B (zh) 节奏检测装置
Dixon On the computer recognition of solo piano music
US6930236B2 (en) Apparatus for analyzing music using sounds of instruments
US9492756B2 (en) System and method for analyzing a digitalized musical performance
CN108038146B (zh) 音乐演奏人工智能分析方法、系统及设备
CN110070847B (zh) 乐音测评方法及相关产品
US12046221B2 (en) User interface for displaying written music during performance
CN109979488A (zh) 基于重音分析的人声转乐谱系统
CN106971743B (zh) 用户演唱数据处理方法和装置
US9613542B2 (en) Sound source evaluation method, performance information analysis method and recording medium used therein, and sound source evaluation apparatus using same
Wu et al. Towards the objective assessment of music performances
JP2008040259A (ja) 楽曲練習支援装置、動的時間整合モジュールおよびプログラム
Grubb et al. Enhanced vocal performance tracking using multiple information sources
Lerch Software-based extraction of objective parameters from music performances
WO2019180830A1 (ja) 歌唱評価方法及び装置、プログラム
CN105244021A (zh) 哼唱旋律到midi旋律的转换方法
CN111554257A (zh) 一种传统中国民族乐器的音符比对系统及其使用方法
CN110956870A (zh) 一种视唱练耳教学方法及装置
CN113823270B (zh) 节奏评分的确定方法、介质、装置和计算设备
KR20190004215A (ko) 시창평가 시스템 및 그것을 이용한 시창평가방법
CN115331648A (zh) 音频数据处理方法、装置、设备、存储介质及产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant