CN109671332A - 一种乐器辅助智能教学系统及其教学方法 - Google Patents

一种乐器辅助智能教学系统及其教学方法 Download PDF

Info

Publication number
CN109671332A
CN109671332A CN201910134812.8A CN201910134812A CN109671332A CN 109671332 A CN109671332 A CN 109671332A CN 201910134812 A CN201910134812 A CN 201910134812A CN 109671332 A CN109671332 A CN 109671332A
Authority
CN
China
Prior art keywords
signal
musical instrument
pickup assembly
tutoring system
analysis device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201910134812.8A
Other languages
English (en)
Inventor
江超
张向东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Muse Talking About Technology Co Ltd
Original Assignee
Suzhou Muse Talking About Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Muse Talking About Technology Co Ltd filed Critical Suzhou Muse Talking About Technology Co Ltd
Priority to CN201910134812.8A priority Critical patent/CN109671332A/zh
Publication of CN109671332A publication Critical patent/CN109671332A/zh
Priority to PCT/CN2019/106622 priority patent/WO2020168709A1/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B15/00Teaching music
    • G09B15/02Boards or like means for providing an indication of notes
    • G09B15/023Electrically operated
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B15/00Teaching music
    • G09B15/02Boards or like means for providing an indication of notes
    • G09B15/04Boards or like means for providing an indication of notes with sound emitters
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/091Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for performance evaluation, i.e. judging, grading or scoring the musical qualities or faithfulness of a performance, e.g. with respect to pitch, tempo or other timings of a reference performance
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2250/00Aspects of algorithms or signal processing methods without intrinsic musical character, yet specifically adapted for or used in electrophonic musical processing
    • G10H2250/311Neural networks for electrophonic musical instruments or musical processing, e.g. for musical recognition or control, automatic composition or improvisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Electrophonic Musical Instruments (AREA)
  • Auxiliary Devices For Music (AREA)

Abstract

一种乐器辅助智能教学系统及其教学方法,所述乐器辅助智能教学系统至少包括连接的用于采集信号的信号采集装置以及用于接收信号并进行分析、反馈和教学指导的信号分析装置,所述信号采集装置包括至少一个拾振器,所述信号分析装置为电脑或手机。所述教学方法通过对拾取的振动信号直接分析,利用深度神经网络模型提取演奏者按键信息的方式,具有通用、便捷和准确的优点。

Description

一种乐器辅助智能教学系统及其教学方法
技术领域
本发明涉及乐器教学领域,特别涉及一种乐器辅助智能教学系统及其教学方法。
背景技术
钢琴是一种键盘乐器,用键拉动琴槌以敲打琴弦。钢琴通常包括踏板、调音钉、琴槌、制音器、击弦机、音板和琴键构成。当钢琴上的琴键被按下时,钢琴内部的琴槌会敲击在对应琴弦上,琴弦的振动耦合到音板上发出声音。整个琴键都是由黑键和白键组合而成,通常包括黑键36个,白键52个,共88个。一个乐曲的演奏过程可以看成是一个或多个琴槌组合以不同的力度和速度敲击琴弦发出声音的过程。
随着技术的不断发展,现代钢琴不断与新技术相结合,对如何利用新技术帮助钢琴的演奏和指导钢琴的教学方面不断提出新的要求。2018年3月6日申请的申请号为CN201710912292.X的中国专利一种智能钢琴演奏测评方法及系统,公开了一种智能钢琴演奏测评方法,该方法通过midi采集,来作为系统输入与大师数据进行分析比对评估,给出反馈,进行音乐教育。但是,该方法要求使用者在专用的midi键盘或电子琴上进行演奏,适用范围窄。2017年6月27号申请的申请号为CN201710497916.6的中国专利一种智能钢琴学习机及其控制方法,公开了一种智能钢琴学习机,利用一种光电二级管式的工具,进行按键检测,该学习机可以安放在任意钢琴键盘上,通过光电二级管检测琴键按下/释放状态进行分析评估,并给出反馈。该学习机缺点是安放在琴键上占用琴键空间,影响弹奏,同时,只能对按键与否进行检测,无法进行力度检测。
乐器的学习需要大量的重复性练习,如何更好的为乐器练习者提供教学辅助用具是本领域技术人员亟待解决的技术问题。
发明内容
本发明的目的是提供一种乐器辅助智能教学系统及其教学方法,通过对振动信号直接分析,利用深度学习方法提取演奏者按键信息的方式,具有通用、便捷和准确的优点。
为了解决上述技术问题,本发明的技术方案是:
一种乐器辅助智能教学系统,至少包括信号采集装置和信号分析装置,所述信号采集装置用于采集信号,所述信号分析装置用于接收信号,并进行分析、反馈以及教学指导。所述信号采集装置通过有线或无线方式连接所述信号分析装置。所述信号采集装置包括至少一个拾振器。所述信号分析装置为电脑或手机。
当所述信号采集装置与所述信号分析装置有线方式连接,所述信号采集装置与信号分析装置电连接。当所述信号采集装置与信号分析装置通过无线方式连接,所述信号采集装置与信号分析装置之间通过蓝牙、红外、WiFi、WiMAX和无线电波等方式连接。
所述信号采集装置与信号分析装置之间设有音箱。所述信号采集装置、音箱和信号分析装置之间采用有线方式连接,所述信号采集装置与所述音箱电连接,所述音箱与所述信号分析装置电连接。所述信号采集装置、音箱和信号分析装置之间采用有线方式和无线方式结合的连接方式,具体的,所述信号采集装置与所述音箱电连接,所述音箱与所述信号分析装置之间通过无线方式连接,进一步的,所述音箱与所述信号分析装置之间通过蓝牙、红外、WiFi、WiMAX和无线电波等方式连接。
本发明还公开了上述乐器辅助智能教学系统的教学方法,其步骤如下:
步骤一:将所述信号采集装置安装在演奏乐器上,并建立所述信号采集装置和信号分析装置之间的连接,构建信号传输系统。
步骤二:所述信号采集装置拾取演奏振动信号,并转换为演奏电信号,输出至所述信号分析装置。
步骤三:所述信号分析装置将演奏电信号切分为等时间长的若干片段,将每个片段输入所述深度神经网络模型中进行节奏、力度、按键等信号的提取。
步骤四:所述电脑将提取的信号与标准信号进行比对,并输出比对结果。
作为优选,演奏电信号存储在所述信号分析装置中,记录下的数据作为之后检视演奏者演奏音准的依据,也可以用于追踪演奏者的表现。
与现有技术相比,本发明具有以下优点:本发明所述乐器辅助智能教学系统通过对拾取的振动信号直接分析,利用深度神经网络模型提取演奏者按键信息的方式,提供了一种通用、便捷、准确的智能钢琴学习系统。所述乐器辅助智能教学系统结构简单,适用范围广。
附图说明
在此描述的附图仅用于解释目的,而不意图以任何方式来限制本发明公开的范围。另外,图中的各部件的形状和比例尺寸等仅为示意性的,用于帮助对本发明的理解,并不是具体限定本发明各部件的形状和比例尺寸。本领域的技术人员在本发明的教导下,可以根据具体情况选择各种可能的形状和比例尺寸来实施本发明。在附图中:
图1是本发明实施例一的乐器辅助智能教学系统的结构示意图;
图2是本发明实施例二的乐器辅助智能教学系统的结构示意图;
图3是本发明实施例二的乐器辅助智能教学系统的教学方法示意图。
图中所示:1-拾振器、2-电脑、3-音箱。
具体实施方式
为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,当元件被称为“设置于”另一个元件,它可以直接在另一个元件上或者也可以存在居中的元件。当一个元件被认为是“连接”另一个元件,它可以是直接连接到另一个元件或者可能同时存在居中元件。本文所使用的术语“垂直的”、“水平的”、“左”、“右”以及类似的表述只是为了说明的目的,并不表示是唯一的实施例。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。本文所使用的术语“和/或”包括一个或多个相关的所列项目的任意的和所有的组合。
实施例一
请参见图1,一种乐器辅助智能教学系统,包括信号采集装置和信号分析装置,所述信号采集装置用于采集演奏振动信号,所述信号分析装置用于接收演奏振动信号,并进行分析、反馈以及教学指导。所述信号采集装置通过有线或无线方式连接所述信号分析装置。本实施例中,所述信号采集装置包括至少一个拾振器1。所述信号分析装置为电脑2。
每个所述拾振器1贴于钢琴琴板表面拾取钢琴振动信号,每个所述拾振器1与所述电脑2电连接或者通过蓝牙连接。所述电脑2设置有已经训练好的深度神经网络模型,且所述电脑2内设置有标准信号。
所述乐器辅助智能教学系统的教学方法如下:
步骤一:将所述拾振器1安装在钢琴上,并建立所述拾振器1和电脑2之间的连接,构建信号传输系统。
步骤二:所述拾振器1拾取演奏振动信号,并转换为演奏电信号,输出至所述电脑2。
步骤三:所述电脑2将演奏电信号切分为等时间长的若干片段,将每个片段输入所述深度神经网络模型中,进行节奏、力度、按键等信号的提取。
步骤四:所述电脑2将提取的信号与标准信号进行比对,并输出比对结果。
步骤五:演奏电信号存储在所述电脑2中,记录下的数据作为之后检视演奏者演奏音准的依据,也可以用于追踪演奏者的表现。
实施例二
请参见图2,一种乐器辅助智能教学系统,包括依次连接的信号采集装置、音箱3和信号分析装置,本实施例中,所述信号采集装置包括至少一个拾振器1。所述信号分析装置为电脑2。所述信号采集装置用于采集演奏信号,所述信号分析装置用于接收演奏信号,并进行分析、反馈以及教学指导,所述音箱3用于播放所述电脑传输的如教学指导语音、伴奏和节拍等信息进行教学指导。
每个所述拾振器1贴于钢琴琴板表面拾取钢琴振动信号,每个所述拾振器1和音箱3电连接,所述音箱3和电脑2之间电连接或者通过蓝牙连接。每个所述拾振器1拾取的演奏振动信号经所述音箱3传输给所述电脑2。所述电脑2设置有已经训练好的深度神经网络模型,且所述电脑2内设置有标准信号。
请参见图3,所述乐器辅助智能教学系统的教学方法如下:
步骤一:将所述拾振器1安装在钢琴上,并建立所述拾振器1、音箱3和电脑2之间的连接,构建信号传输系统。
步骤二:所述电脑2将需要输出的音频信号,如教学指导语音、伴奏和节拍等信息输出至音箱3进行播放。同时,所述拾振器1拾取演奏振动信号,并转换为演奏电信号,通过所述音箱3输出至所述电脑2。
步骤三:所述电脑2将演奏电信号切分为等时间长的若干片段,将每个片段输入所述深度神经网络模型中,进行节奏、力度、按键等信号的提取。
步骤四:所述电脑2将提取的信号与标准信号进行比对,并输出比对结果。
步骤五:演奏电信号存储在所述电脑2中,记录下的数据作为之后检视演奏者演奏音准的依据,也可以用于追踪演奏者的表现。
应该理解,以上描述是为了进行图示说明而不是为了进行限制。通过阅读上述描述,在所提供的示例之外的许多实施例和许多应用对本领域技术人员来说都将是显而易见的。因此,本教导的范围不应该参照上述描述来确定,而是应该参照前述权利要求以及这些权利要求所拥有的等价物的全部范围来确定。出于全面之目的,所有文章和参考包括专利申请和公告的公开都通过参考结合在本文中。在前述权利要求中省略这里公开的主题的任何方面并不是为了放弃该主体内容,也不应该认为申请人没有将该主题考虑为所公开的发明主题的一部分。

Claims (10)

1.一种乐器辅助智能教学系统,其特征在于,至少包括连接的用于采集信号的信号采集装置以及用于接收信号并进行分析、反馈和教学指导的信号分析装置。
2.根据权利要求1所述的乐器辅助智能教学系统,其特征在于,所述信号采集装置和信号分析装置通过有线方式连接。
3.根据权利要求1所述的乐器辅助智能教学系统,其特征在于,所述信号采集装置和信号分析装置通过无线方式连接。
4.根据权利要求1所述的乐器辅助智能教学系统,其特征在于,所述信号采集装置和信号分析装置之间设有扬声器,所述信号采集装置、扬声器和信号分析装置依次连接。
5.根据权利要求4所述的乐器辅助智能教学系统,其特征在于,所述信号采集装置和扬声器之间通过有线方式连接,所述扬声器和信号分析装置之间通过有线方式连接。
6.根据权利要求4所述的乐器辅助智能教学系统,其特征在于,所述信号采集装置和扬声器之间通过有线方式连接,所述扬声器和信号分析装置之间通过无线方式连接。
7.根据权利要求1所述的乐器辅助智能教学系统,其特征在于,所述信号采集装置包括至少一个拾振器。
8.根据权利要求1所述的乐器辅助智能教学系统,其特征在于,所述信号分析装置为电脑或手机。
9.一种如权利要求1~8任一所述的乐器辅助智能教学系统的教学方法,其特征在于,步骤如下:
步骤一:将所述信号采集装置安装在演奏乐器上,并建立所述信号采集装置和信号分析装置之间的连接,构建信号传输系统;
步骤二:所述信号采集装置采集演奏振动信号,并转换为演奏电信号,输出至所述信号分析装置;
步骤三:所述信号分析装置将演奏电信号切分为等时间长的若干片段,将每个片段输入深度神经网络模型中进行节奏、力度、按键等信号的提取;
步骤四:所述信号分析装置将提取的信号与标准信号进行比对,并输出比对结果。
10.根据权利要求9所述的教学方法,其特征在于,还包括如下步骤:
步骤五:演奏电信号存储在所述信号分析装置中。
CN201910134812.8A 2019-02-24 2019-02-24 一种乐器辅助智能教学系统及其教学方法 Withdrawn CN109671332A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910134812.8A CN109671332A (zh) 2019-02-24 2019-02-24 一种乐器辅助智能教学系统及其教学方法
PCT/CN2019/106622 WO2020168709A1 (zh) 2019-02-24 2019-09-19 一种乐器辅助智能教学系统及其教学方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910134812.8A CN109671332A (zh) 2019-02-24 2019-02-24 一种乐器辅助智能教学系统及其教学方法

Publications (1)

Publication Number Publication Date
CN109671332A true CN109671332A (zh) 2019-04-23

Family

ID=66152360

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910134812.8A Withdrawn CN109671332A (zh) 2019-02-24 2019-02-24 一种乐器辅助智能教学系统及其教学方法

Country Status (2)

Country Link
CN (1) CN109671332A (zh)
WO (1) WO2020168709A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020168709A1 (zh) * 2019-02-24 2020-08-27 苏州缪斯谈谈科技有限公司 一种乐器辅助智能教学系统及其教学方法
WO2022222840A1 (zh) * 2021-04-19 2022-10-27 黄志坚 乐器教学系统、方法及可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105070298A (zh) * 2015-07-20 2015-11-18 科大讯飞股份有限公司 复调乐器的评分方法和装置
CN108549675A (zh) * 2018-03-31 2018-09-18 陈振奎 一种基于大数据及神经网络的钢琴教学方法
CN108711336A (zh) * 2018-04-27 2018-10-26 山东英才学院 一种钢琴演奏评分系统及其方法
CN108961919A (zh) * 2018-07-27 2018-12-07 山西师范大学 一种钢琴弹奏教学辅助装置
CN208422152U (zh) * 2018-03-14 2019-01-22 方惟佳 智能化乐谱识别与显示装置
CN210348878U (zh) * 2019-02-24 2020-04-17 苏州缪斯谈谈科技有限公司 一种乐器辅助智能教学系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1746938A (zh) * 2005-10-08 2006-03-15 深圳市迪索音乐科技有限公司 一种数字化智能音乐教学仪器
US9292789B2 (en) * 2012-03-02 2016-03-22 California Institute Of Technology Continuous-weight neural networks
CN109817192A (zh) * 2019-01-21 2019-05-28 深圳蜜蜂云科技有限公司 一种智能陪练方法
CN109671332A (zh) * 2019-02-24 2019-04-23 苏州缪斯谈谈科技有限公司 一种乐器辅助智能教学系统及其教学方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105070298A (zh) * 2015-07-20 2015-11-18 科大讯飞股份有限公司 复调乐器的评分方法和装置
CN208422152U (zh) * 2018-03-14 2019-01-22 方惟佳 智能化乐谱识别与显示装置
CN108549675A (zh) * 2018-03-31 2018-09-18 陈振奎 一种基于大数据及神经网络的钢琴教学方法
CN108711336A (zh) * 2018-04-27 2018-10-26 山东英才学院 一种钢琴演奏评分系统及其方法
CN108961919A (zh) * 2018-07-27 2018-12-07 山西师范大学 一种钢琴弹奏教学辅助装置
CN210348878U (zh) * 2019-02-24 2020-04-17 苏州缪斯谈谈科技有限公司 一种乐器辅助智能教学系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020168709A1 (zh) * 2019-02-24 2020-08-27 苏州缪斯谈谈科技有限公司 一种乐器辅助智能教学系统及其教学方法
WO2022222840A1 (zh) * 2021-04-19 2022-10-27 黄志坚 乐器教学系统、方法及可读存储介质

Also Published As

Publication number Publication date
WO2020168709A1 (zh) 2020-08-27

Similar Documents

Publication Publication Date Title
CN1172291C (zh) 共振峰转换装置、应用该转换装置的方法和卡拉ok装置
US9224375B1 (en) Musical modification effects
CN104766603A (zh) 构建个性化歌唱风格频谱合成模型的方法及装置
CN109671332A (zh) 一种乐器辅助智能教学系统及其教学方法
CN108038146B (zh) 音乐演奏人工智能分析方法、系统及设备
JP6420345B2 (ja) 音源評価方法、これに使用される演奏情報分析方法及び記録媒体並びにこれを利用した音源の評価装置
JP4639795B2 (ja) 楽器の演奏駆動装置、鍵盤楽器の演奏駆動システム及び鍵盤楽器。
CN105469669A (zh) 唱歌辅助教学设备
CN103474082A (zh) 多路麦克风伴唱评分系统及其方法
CN106485983A (zh) 乐器演奏分析和评测方法
CN112992109A (zh) 辅助歌唱系统、辅助歌唱方法及其非瞬时计算机可读取记录媒体
CN107371075A (zh) 麦克风
JP7157377B2 (ja) 演奏情報表示装置及び演奏情報表示方法、演奏情報表示プログラム、並びに、電子楽器
CN103425901B (zh) 原创声响数据整理器
CN210348878U (zh) 一种乐器辅助智能教学系统
CN110010106A (zh) 一种音乐演奏自动打谱系统
CN101344996B (zh) 一种拉弦乐电子辅助教学系统
CN110930803A (zh) 一种音乐教具用音符模拟训练装置
CN110956870A (zh) 一种视唱练耳教学方法及装置
CN209199588U (zh) 一种弹拨类乐器
CN113990349A (zh) 一种钢琴新型弹奏数据采集装置
WO2003100766A3 (en) Dynamic time warping of speech
KR20190121080A (ko) 미디어 컨텐츠 서비스 시스템
KR20130058384A (ko) 휴대용 드럼연주시스템
KR100317478B1 (ko) 실시간 음악 교습 시스템 및 그 시스템에서의 음악 정보 처리방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20190423

WW01 Invention patent application withdrawn after publication