CN108074441A - 一种钢琴演奏的纠错方法及系统 - Google Patents

一种钢琴演奏的纠错方法及系统 Download PDF

Info

Publication number
CN108074441A
CN108074441A CN201611035851.5A CN201611035851A CN108074441A CN 108074441 A CN108074441 A CN 108074441A CN 201611035851 A CN201611035851 A CN 201611035851A CN 108074441 A CN108074441 A CN 108074441A
Authority
CN
China
Prior art keywords
piano
piano key
file
video features
player
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611035851.5A
Other languages
English (en)
Inventor
王辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kuwo Technology Co Ltd
Original Assignee
Beijing Kuwo Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kuwo Technology Co Ltd filed Critical Beijing Kuwo Technology Co Ltd
Priority to CN201611035851.5A priority Critical patent/CN108074441A/zh
Publication of CN108074441A publication Critical patent/CN108074441A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B15/00Teaching music

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

本发明涉及一种钢琴演奏的纠错方法及系统。该方法包括步骤:预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件;第一钢琴键序列携带有钢琴按键位置、按键时长和按键力度信息;获取演奏者的钢琴弹奏视频文件,根据视频文件获取演奏者在进行钢琴弹奏时的按键信息,将按键信息转换为对应的第二钢琴键序列,生成第二视频特征文件;将第一视频特征文件和第二视频特征文件进行比较,根据比较结果对演奏者进行纠错。该系统包括第一转换模块、第二转换模块和处理模块。本发明能够帮助演奏者找到自己弹奏过程中的错误,在一定程度上实现了钢琴的辅助教学,同时增加了弹奏的趣味性,提高了演奏者的积极性。

Description

一种钢琴演奏的纠错方法及系统
技术领域
本发明涉及视频图像处理技术领域,尤其涉及一种钢琴演奏的纠错方法及系统。
背景技术
音乐是人类灵魂的一部分,钢琴被誉为“乐器之王”,随着社会的进步和时代的发展,人们开始注重精神上的追求和个人的修养,各个年龄阶层的人中都涌现出大量的钢琴学习者,大批的培训机构也应运而生。
但是,钢琴教学工作者的音乐素养和教学水平各异,对钢琴爱好者寻找一个合适的钢琴老师造成了困扰。同时,跟随老师学习钢琴的花费往往不菲,钢琴学习者需要承受较大的经济压力。而钢琴的学习主要在于学习者平时的练习,在单独的练习过程中可能无法较好的判断自己的弹奏过程中的错误,如根据曲谱弹奏的琴键的位置以及时长是否正确。
发明内容
本发明的目的在于,为解决现有技术中的上述问题,提供了一种钢琴演奏的纠错方法及系统,能够帮助演奏者对自己的弹奏水平有更加清晰的认知,增加了弹奏的趣味性,提高了演奏者的弹琴的积极性;同时能在一定程度上辅助钢琴教学。
为了实现上述目的,一方面,本发明提供了一种钢琴演奏的纠错方法。该方法包括以下步骤:预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件;第一钢琴键序列携带有钢琴按键位置、按键时长和按键力度信息;获取演奏者的钢琴弹奏视频文件,根据视频文件获取演奏者在进行钢琴弹奏时的按键信息,将按键信息转换为对应的第二钢琴键序列,生成第二视频特征文件;第二钢琴键序列同样携带有钢琴按键位置、按键时长和按键力度信息;将第一视频特征文件和第二视频特征文件进行比较,根据比较结果对演奏者进行纠错。
优选地,将第一视频特征文件和第二视频特征文件进行比较,根据比较结果对演奏者进行纠错步骤,包括:将第一视频特征文件中的第一钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息与第二视频特征文件中的第二钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息进行比较;根据比较结果对演奏者进行纠错。
优选地,比较结果包括自定义时间区段内演奏者弹奏的弹奏的按键准、时长和力度是否正确。
优选地,根据比较结果确定演奏错误并对所述曲谱中与所述演奏错误相应位置的音符进行标记。
优选地,预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件步骤,包括:人工将曲谱中的音符转变为对应的第一钢琴键序列,并生成第一视频特征文件。
另一方面,本发明提供了一种钢琴演奏的纠错系统。该系统包括:第一转换模块用于预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件;第一钢琴键序列携带有钢琴按键位置、按键时长和按键力度信息;第二转换模块用于获取演奏者的钢琴弹奏视频文件,根据视频文件获取演奏者在进行钢琴弹奏时的按键信息,将按键信息转换为对应的第二钢琴键序列,生成第二视频特征文件;第二钢琴键序列同样携带有钢琴按键位置、按键时长和按键力度信息;处理模块用于将第一视频特征文件和第二视频特征文件进行比较,根据比较结果对演奏者进行纠错。
优选地,处理模块具体用于:将第一视频特征文件中的第一钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息与第二视频特征文件中的第二钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息进行比较;根据比较结果对演奏者进行纠错。
优选地,比较结果包括自定义时间区段内演奏者弹奏的弹奏的按键准、时长和力度是否正确。
优选地,处理模块具体用于:根据比较结果确定演奏错误并对所述曲谱中与所述演奏错误相应位置的音符进行标记。
优选地,通过人工预先将曲谱中的视频转变为对应的第一钢琴键序列,并生成第一视频特征文件。
本发明提供的一种钢琴演奏的纠错方法及系统,能够帮助演奏者找到自己弹奏过程中的错误,在一定程度上实现了钢琴的辅助教学,同时增加了弹奏的趣味性,提高了演奏者的积极性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍。显而易见地,下面描述中的附图仅仅是本发明的一些实施例。
图1为本发明实施例提供的一种钢琴演奏的纠错方法流程示意图;
图2为本发明实施例提供的钢琴曲谱片段;
图3为本发明实施例提供的钢琴曲谱片段的错误标记图;
图4为本发明实施例提供的一种钢琴演奏的纠错系统结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为便于对本发明实施例的理解,下面将结合附图以具体实施例做进一步的解释说明,实施例并不构成对本发明实施例的限定。
图1为本发明实施例提供的一种钢琴演奏的纠错方法流程示意图。如图1所示,该方法包括以下步骤:
步骤S101,预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件;第一钢琴键序列携带有钢琴按键位置、按键时长和按键力度信息。
具体地,预先人工将曲谱中的音符转变为对应的第一钢琴键序列,并生成第一视频特征文件,第一钢琴键序列携带有钢琴按键位置、按键时长和按键力度信息。
例如,图2为本发明实施例提供的钢琴曲谱片段,将此片段转化为钢琴键序列,并生成第一视频特征文件。其中,钢琴序列为:
[4/4](40,1/4,8)(41,2/4,10)(42,3/4,9)(40,4/4,9)
[4/4](40,1/4,9)(41,2/4,8)(42,3/4,9)(40,4/4,7)
[4/4](42,1/4,9)(43,2/4,9)(44,3/4,9)(44,4/4,9)
[4/4](42,1/4,9)(43,2/4,9)(44,3/4,9))(44,4/4,9)
其中,每一行表示一个小节,[4/4]表示该小节为4/4拍,(40,1/4,8)表示第一拍弹奏的是88个键的标准钢琴键盘上从左往右数的第40个琴键,按键时长为1/4拍,按键深度为8mm。(41,2/4,10)表示第二拍弹奏的是第41个琴键,按键时长为1/4拍,按键深度为10mm。(42,3/4,9)表示第三拍弹奏的是第42个琴键,按键时长为1/4拍,按键深度为9mm。(40,4/4,9)第四拍弹奏的是第40个琴键,按键时长为1/4拍,按键深度为9mm。(44,3/4,9))(44,4/4,9)表示第三拍弹奏的是第44个琴键,第四拍弹奏的是第44个琴键并且此处第44个琴键是延续的前一拍中弹奏第44个琴键的时值。
步骤S102,获取演奏者的钢琴弹奏视频文件,根据视频文件获取演奏者在进行钢琴弹奏时的按键信息,将按键信息转换为对应的第二钢琴键序列,生成第二视频特征文件;第二钢琴键序列同样携带有钢琴按键位置、按键时长和按键力度信息。
具体地,利用深度相机获取演奏者的钢琴视频文件,根据视频文件获取演奏者在进行钢琴弹奏时的按键信息,将按键信息转换为对应的第二钢琴键序列,生成第二视频特征文件;第二钢琴键序列同样携带有钢琴按键位置、按键时长和按键力度信息。其中,深度相机可以为满足精度的任何相机。例如,TOF(Time of Flight)相机,TOF相机利用传感器发出经调制的近红外光,遇物体后反射,传感器通过计算光线发射和反射时间差或相位差,来换算被拍摄景物的距离,以产生深度信息。其测量范围可达数米、精度小于2cm,每秒更新频率可达30-60fps。
步骤S103,将第一视频特征文件和第二视频特征文件进行比较,根据比较结果对演奏者进行纠错。
具体地,将第一视频特征文件中的第一钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息与第二视频特征文件中的第二钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息进行比较。得到的比较结果包括自定义时间区段内演奏者弹奏的弹奏的按键准、时长和力度是否正确。根据比较结果确定演奏错误并对所述曲谱中与所述演奏错误相应位置的音符进行标记。例如,对于显示为黑字白底曲谱,如果弹奏的曲谱上的音的音高不对,则将该音符标记为橙色;如果弹奏的曲谱上的在该音高上的保持时长不对,则将该音符上标记为黄色;如果弹奏的曲谱上的对该音的按键力度不对,则将该音符上标记为绿色;如果弹奏的曲谱上的对该音的弹奏方式不对,则将该音符上标记为蓝色;如果弹奏的曲谱上的对该音的弹奏出现2两种以上的错误,则标记为红色。演奏者根据标记后的曲谱,了解自己的演奏的错误。如图2所示,演奏者从标记为绿色的音符可知,弹奏这两个音符时的按键力度不对。其中,还可以选择在错误处进行语音提示的方式,来告知演奏者演奏的错误。例如,在回放演奏者的演奏音频时,在按键力度错误对应的位置语音提示:此处按键力度不对。
本发明实施例提供的一种钢琴演奏的纠错方法,能够帮助演奏者找到自己弹奏过程中的错误,在一定程度上实现了钢琴的辅助教学,同时增加了弹奏的趣味性,提高了演奏者的积极性。
图4为本发明实施例提供的一种钢琴演奏的纠错系统结构示意图。如图所示,该系统20包括:第一转换模块21,第二转换模块22和处理模块23。
第一转换模块21用于预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件;第一钢琴键序列携带有钢琴按键位置、按键时长和按键力度信息。其中,预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件可以为:通过人工预先将曲谱中的视频转变为对应的第一钢琴键序列,并生成第一视频特征文件。
第二转换模块22用于获取演奏者的钢琴弹奏视频文件,根据视频文件获取演奏者在进行钢琴弹奏时的按键信息,将按键信息转换为对应的第二钢琴键序列,生成第二视频特征文件;第二钢琴键序列同样携带有钢琴按键位置、按键时长和按键力度信息。
处理模块23用于将第一视频特征文件和第二视频特征文件进行比较,根据比较结果对演奏者进行纠错。
处理模块具体用于:将第一视频特征文件中的第一钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息与第二视频特征文件中的第二钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息进行比较,获得比较结果;比较结果包括自定义时间区段内演奏者弹奏的弹奏的按键准、时长和力度是否正确。根据比较结果确定演奏错误并对所述曲谱中与所述演奏错误相应位置的音符进行标记。
本发明实施例提供的一种钢琴演奏的纠错系统,能够帮助演奏者找到自己弹奏过程中的错误,在一定程度上实现了钢琴的辅助教学,同时增加了弹奏的趣味性,提高了演奏者的积极性。
本领域普通技术人员应该还可以进一步意识到,结合本文中所公开的实施例描述的各示例的模块及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执轨道,取决于技术方案的特定应用和设计约束条件。本领域普通技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
以上所述的具体实施方式,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施方式而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种钢琴演奏的纠错方法,其特征在于,包括以下步骤:
预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件;所述第一钢琴键序列携带有钢琴按键位置、按键时长和按键力度信息;
获取演奏者的钢琴弹奏视频文件,根据所述视频文件获取演奏者在进行钢琴弹奏时的按键信息,将所述按键信息转换为对应的第二钢琴键序列,生成第二视频特征文件;所述第二钢琴键序列同样携带有钢琴按键位置、按键时长和按键力度信息;
将所述第一视频特征文件和所述第二视频特征文件进行比较,根据比较结果对演奏者进行纠错。
2.根据权利要求1所述的方法,其特征在于,所述将所述第一视频特征文件和所述第二视频特征文件进行比较,根据比较结果对演奏者进行纠错步骤,包括:
将所述第一视频特征文件中的第一钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息与所述第二视频特征文件中的第二钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息进行比较;
根据所述比较结果对演奏者进行纠错。
3.根据权利要求2所述的方法,其特征在于,所述比较结果包括自定义时间区段内演奏者弹奏的按键准、时长和力度是否正确。
4.根据权利要求1-3中任一权利要求所述的方法,其特征在于,所述根据比较结果对演奏者进行纠错步骤,包括:
根据比较结果确定演奏错误并对所述曲谱中与所述演奏错误相应位置的音符进行标记。
5.根据权利要求1所述的方法,其特征在于,所述预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件步骤,包括:
人工将曲谱中的音符转变为对应的第一钢琴键序列,并生成第一视频特征文件。
6.一种钢琴演奏的纠错系统,其特征在于,包括:
第一转换模块,用于预先将曲谱中的音符转换为对应的第一钢琴键序列,生成第一视频特征文件;所述第一钢琴键序列携带有钢琴按键位置、按键时长和按键力度信息;
第二转换模块,用于获取演奏者的钢琴弹奏视频文件,根据所述视频文件获取演奏者在进行钢琴弹奏时的按键信息,将所述按键信息转换为对应的第二钢琴键序列,生成第二视频特征文件;所述第二钢琴键序列同样携带有钢琴按键位置、按键时长和按键力度信息;
处理模块,用于将所述第一视频特征文件和所述第二视频特征文件进行比较,根据比较结果对演奏者进行纠错。
7.根据权利要求6所述的系统,其特征在于,所述处理模块具体用于:
将所述第一视频特征文件中的第一钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息与所述第二视频特征文件中的第二钢琴键序列携带的钢琴按键位置、按键时长和按键力度信息进行比较;
根据所述比较结果对演奏者进行纠错。
8.根据权利要求7所述的系统,其特征在于,所述比较结果包括自定义时间区段内演奏者弹奏的弹奏的按键准、时长和力度是否正确。
9.根据权利要求6-8中任一权利要求所述的系统,其特征在于,所述处理模块具体用于:
根据比较结果确定演奏错误并对所述曲谱中与所述演奏错误相应位置的音符进行标记。
10.根据权利要求6所述的系统,其特征在于,通过人工预先将曲谱中的视频转变为对应的第一钢琴键序列,并生成第一视频特征文件。
CN201611035851.5A 2016-11-18 2016-11-18 一种钢琴演奏的纠错方法及系统 Pending CN108074441A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611035851.5A CN108074441A (zh) 2016-11-18 2016-11-18 一种钢琴演奏的纠错方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611035851.5A CN108074441A (zh) 2016-11-18 2016-11-18 一种钢琴演奏的纠错方法及系统

Publications (1)

Publication Number Publication Date
CN108074441A true CN108074441A (zh) 2018-05-25

Family

ID=62161401

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611035851.5A Pending CN108074441A (zh) 2016-11-18 2016-11-18 一种钢琴演奏的纠错方法及系统

Country Status (1)

Country Link
CN (1) CN108074441A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110781820A (zh) * 2019-10-25 2020-02-11 网易(杭州)网络有限公司 游戏角色的动作生成方法、装置、计算机设备及存储介质
CN114613232A (zh) * 2022-03-21 2022-06-10 四川雅蓉科技有限公司 一种钢琴练习的智能纠错方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103377647A (zh) * 2012-04-24 2013-10-30 中国科学院声学研究所 一种基于音视频信息的自动音乐记谱方法及系统
CN104183171A (zh) * 2013-05-23 2014-12-03 杭州灵机科技有限公司 一种基于电子乐谱的乐器演奏水平精准评判的系统和方法
KR101535814B1 (ko) * 2014-11-06 2015-07-15 이성준 연주를 용이하게 하는 피아노
CN105118352A (zh) * 2015-09-14 2015-12-02 刘健婷 一种全自动乐器演奏纠错方法
CN205541849U (zh) * 2016-04-14 2016-08-31 安徽克洛斯威智能乐器科技有限公司 一种具有评分和调音功能的智能钢琴系统
CN106128439A (zh) * 2016-08-03 2016-11-16 王警仪 一种钢琴智能演奏训练系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103377647A (zh) * 2012-04-24 2013-10-30 中国科学院声学研究所 一种基于音视频信息的自动音乐记谱方法及系统
CN104183171A (zh) * 2013-05-23 2014-12-03 杭州灵机科技有限公司 一种基于电子乐谱的乐器演奏水平精准评判的系统和方法
KR101535814B1 (ko) * 2014-11-06 2015-07-15 이성준 연주를 용이하게 하는 피아노
CN105118352A (zh) * 2015-09-14 2015-12-02 刘健婷 一种全自动乐器演奏纠错方法
CN205541849U (zh) * 2016-04-14 2016-08-31 安徽克洛斯威智能乐器科技有限公司 一种具有评分和调音功能的智能钢琴系统
CN106128439A (zh) * 2016-08-03 2016-11-16 王警仪 一种钢琴智能演奏训练系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110781820A (zh) * 2019-10-25 2020-02-11 网易(杭州)网络有限公司 游戏角色的动作生成方法、装置、计算机设备及存储介质
CN110781820B (zh) * 2019-10-25 2022-08-05 网易(杭州)网络有限公司 游戏角色的动作生成方法、装置、计算机设备及存储介质
CN114613232A (zh) * 2022-03-21 2022-06-10 四川雅蓉科技有限公司 一种钢琴练习的智能纠错方法及系统

Similar Documents

Publication Publication Date Title
CN108074440A (zh) 一种钢琴演奏的纠错方法及系统
CN108074438A (zh) 一种钢琴演奏的纠错方法及系统
CN108074441A (zh) 一种钢琴演奏的纠错方法及系统
Pelliccia Two points about rhapsodes
CN108074437A (zh) 一种钢琴演奏的纠错方法及系统
CN108074555A (zh) 一种钢琴演奏的评价方法及系统
Swanson Composing democracy: Collective identity formation in small group composition
Manganello Movement in the middle school choral rehearsal
Alsalhi Ṣaut in Bahrain and Kuwait: History and Creativity in Concept and Practice
Rojas Reprising craftsmanship: An expressive approach to skill
Reali Music and mystique in Muscle Shoals
Turner Mentoring music educators in gospel music pedagogy in the classroom
Simeon Exploring Rungus Longoi Dot Pongizap (Counting Songs) of Sabah
Calleros Reading, Writing, and Rhythm: A Whimsical, Musical Way of Thinking About Teaching Legal Method and Writing
Gardiner et al. What makes a good maths teacher?
Chung Intercultural Musicking: A study of the dizi from a Western flute perspective
Nestor Fife and Drum as a Secondary Ensemble within the Public Schools
Gumataotao Na’la’la’i taotao tano’: Navigating the Performative Terrain of CHamoru Reclamations
Tamberino Uke Can Do It!: Developing Your School Ukulele Program
Westby Crowned in Glory: The Beyond Band Approach
Steele An investigation into the background and implications of the Yale Seminar on Music Education
McNair III Preserving the Craft: An Exploration of the Performance Techniques of Marching Bands at Historically Black Colleges and Universities
FESTIVAL Welcome to
Meddegoda Oral Teaching systems versus Ongoing Canonization in Hindustani Vocal Practice.
Chang Cognitively deconstructing musical free improvisation to inform on performance and applied improvisation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180525

RJ01 Rejection of invention patent application after publication