CN109564756A - 一种智能钢琴系统 - Google Patents

一种智能钢琴系统 Download PDF

Info

Publication number
CN109564756A
CN109564756A CN201780045874.0A CN201780045874A CN109564756A CN 109564756 A CN109564756 A CN 109564756A CN 201780045874 A CN201780045874 A CN 201780045874A CN 109564756 A CN109564756 A CN 109564756A
Authority
CN
China
Prior art keywords
music
user
snatch
display
content item
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780045874.0A
Other languages
English (en)
Other versions
CN109564756B (zh
Inventor
燕斌
周敏
刘晓露
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Senlan Information Technology (shanghai) Co Ltd
Original Assignee
Senlan Information Technology (shanghai) Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Senlan Information Technology (shanghai) Co Ltd filed Critical Senlan Information Technology (shanghai) Co Ltd
Publication of CN109564756A publication Critical patent/CN109564756A/zh
Application granted granted Critical
Publication of CN109564756B publication Critical patent/CN109564756B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B15/00Teaching music
    • G09B15/02Boards or like means for providing an indication of notes
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10CPIANOS, HARPSICHORDS, SPINETS OR SIMILAR STRINGED MUSICAL INSTRUMENTS WITH ONE OR MORE KEYBOARDS
    • G10C3/00Details or accessories
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10CPIANOS, HARPSICHORDS, SPINETS OR SIMILAR STRINGED MUSICAL INSTRUMENTS WITH ONE OR MORE KEYBOARDS
    • G10C3/00Details or accessories
    • G10C3/26Pedals or pedal mechanisms; Manually operated sound modification means
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0008Associated control or indicating means
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/36Accompaniment arrangements
    • G10H1/361Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • G10H1/368Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems displaying animated or moving pictures synchronized with the music or audio part
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10GREPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G1/00Means for the representation of music
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/061Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for extraction of musical phrases, isolation of musically relevant segments, e.g. musical thumbnail generation, or for temporal structure analysis of a musical piece, e.g. determination of the movement sequence of a musical work
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/005Non-interactive screen display of musical or status data
    • G10H2220/015Musical staff, tablature or score displays, e.g. for score reading during a performance.
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/091Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
    • G10H2220/096Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith using a touch screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Electrophonic Musical Instruments (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请涉及一种提供教学功能的系统和方法。该方法包括以下步骤:获取用户选择的一个音乐片段(510);确定在用户界面上配置一个或以上显示类别和所述一个或以上显示类别的布局的显示模式(520);分别获取与所述一个或以上显示类别相对应的一个或以上内容项目,所述一个或以上内容项目与所述音乐片段相关联(530);根据所述布局生成用于在所述用户界面上显示所述一个或以上内容项目的指令(540);以及执行所述指令以根据所述布局使得所述一个或以上内容项目被显示在所述用户界面上(550)。

Description

一种智能钢琴系统
技术领域
本申请涉及一种钢琴的系统以及方法,尤其是涉及一种具有教学功能的钢琴的系统和方法。
背景技术
作为世界上最流行的乐器之一,今天钢琴被广泛演奏和研究。钢琴演奏可以为钢琴家提供教育和健康益处。有许多人学习或练习钢琴演奏。希望提供带有教学功能的钢琴。
发明内容
根据本申请的一个方面,一个钢琴系统可以包括显示器、容纳可供用户操作的至少两个琴键的键盘、至少一个处理器与至少一个存储了向用户呈现内容的一组指令的计算机可读存储介质。其中当执行所述指令时,所述至少一个处理器执行:获取用户选择的音乐片段;获取在用户界面上配置一个或以上显示类别和所述一个或以上显示类别的布局的显示模式;分别获取与所述一个或以上显示类别相对应的一个或以上内容项目,所述一个或以上内容项目与所述音乐片段相关联;以及根据所述布局生成用于在所述用户界面上显示所述一个或以上内容项的指令。
根据本申请的一个方面,一个方法可以包括本申请涉及一种确定当前订单相关信息的系统和方法。该方法包括以下步骤:获取用户选择的音乐片段;获取在用户界面上配置一个或以上显示类别和所述一个或以上显示类别的布局的显示模式;分别获取与所述一个或以上显示类别相对应的一个或以上内容项目,所述一个或以上内容项目与所述音乐片段相关联;以及根据所述布局生成用于在所述用户界面上显示所述一个或以上内容项的指令。
根据本申请的一个方面,一个非暂时性计算机可读介质可以包含经配置以致使计算系统执行以下操作的指令:获取用户选择的音乐片段;获取在用户界面上配置一个或以上显示类别和所述一个或以上显示类别的布局的显示模式;分别获取与所述一个或以上显示类别相对应的一个或以上内容项目,所述一个或以上内容项目与所述音乐片段相关联;以及根据所述布局生成用于在所述用户界面上显示所述一个或以上内容项的指令。
本申请的一部分附加特性可以在下面的描述中进行说明。通过对以下描述和相应附图的检查或者对实施例的生产或操作的了解,本申请的一部分附加特性对于本领域技术人员是明显的。本披露的特性可以通过对以下描述的具体实施例的各种方面的方法、手段和组合的实践或使用得以实现和达到。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单的介绍。显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图将本申请应用于其它类似情景。除非从语言环境中显而易见或另做说明,图中相同标号代表相同结构和操作。
图1是根据本申请的一些实施例所示的钢琴系统的一种示例性网络环境图;
图2是根据本申请的一些实施例所示的计算设备的硬件和软件组件的一种示例性结构图;
图3是根据本申请的一些实施例所示的物理模块的一种示例性结构图;
图4是根据本申请的一些实施例所示的键盘和显示器的一种示例性结构图;
图5是根据本申请的一些实施例所示的确定在用户界面上显示内容项目的指令的一种示例性流程图;
图6是根据本申请的一些实施例所示的确定钢琴系统的显示模式的一种示例性流程图;
图7是根据本申请的一些实施例所示的针对音乐片段的两个或以上阶段中的一个生成阶段性指令的一种示例性流程图;
图8是根据本申请的一些实施例所示的确定音乐片段的内容项目的一种示例性流程图
图9A-9H是根据本申请的一些实施例所示的钢琴系统的不同显示模式的示意图。
实施方式
为了更清楚地说明本申请的实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单的介绍。显而易见地,对于本领域技术人员来讲,本披露可以在不采用所述细节的情况下实施。在其他情况下,为了避免不必要地模糊本披露的一些方面,本披露以相对高级别且不添加细节的方式描述了公知的方法、程序、系统、组件和/或电路。对于本领域的普通技术人员来讲,对本申请披露的实施例进行的各种修改是显而易见的,并且本文中定义的通则在不背离本申请的精神及范围的情况下,可以适用于其他实施例及应用。因此,本申请不限于所示的实施例,而是符合与申请专利范围一致的最广泛范围。
应当理解的是,本文使用的“系统”、“单元”、“模块”、“和/或”、“数据块”是用于按升序区分不同级别的不同构件、元素、部件、部分或组件的方法。然而,如果其他词语可以实现相同的目的,则可通过其他表达来替换所述词语。
应当理解的是,当一个单元、模块或区块被称为在另一个单元、模块或区块“上”,或是“连接到”或“耦合到”另一个单元、模块或区块时,其可以直接在另一个单元、模块或是区块上,连接到或是耦合到另一个单元、模块或是区块上,除非上下文另有明确指示。在本申请中,术语“和/或”可包括任何一个或以上相关所列条目或其组合。
本文中所使用的术语仅用于描述特定示例和实施例,并不限制本申请的范围。如本申请和权利要求书中所示,除非上下文明确提示例外情形,“一”、“一个”、“一种”和/或“该”等词并非特指单数,也可包括复数。还应当理解的是,本文中的术语“包括”和/或“包含”只详述存在整体、装置、行为、陈述的特征、步骤、元件、操作和/或部件,但是不排除存在或添加一个或以上其他整体、设备、行为、特征、步骤、元件、操作、部件和/或其组合。
术语“音乐”和“声音”可以是可互换的。
图1是根据本申请的一些实施例所示的钢琴系统100的一种示例性网络环境图。应该注意的是,下面描述的钢琴系统100仅仅是为了说明的目的而提供的,不旨在限制本申请的范围。
如图1所示,钢琴系统100可以包括数字乐器110、网络120、一个或以上云服务器130以及一个或以上数据库140。用户150可以操纵数字乐器110并进行练习。
数字乐器110可以是具有键盘的乐器(例如,钢琴、风琴、手风琴、合成器、电子键盘等)、弦乐器(例如吉他、齐特琴、古筝等)等中的一种或几种的组合。例如,数字乐器110可以包括具有琴键和/或踏板的钢琴。如本文所提到的,钢琴可以是声学钢琴、电钢琴、电子钢琴、数字钢琴和/或具有键盘的任何其他乐器。在一些实施例中,钢琴可以是大钢琴、直立式钢琴、方形钢琴等。
数字乐器110可以包括钢琴引擎112和物理模块114。钢琴引擎112可以接收来自用户150的输入并且生成信息、指令、通知或界面。钢琴引擎112可以被配置为控制或监视物理模块114的操作。物理模块114可以响应于由用户150发起的某些动作(例如,按压琴键、踩踏板等)。在一些实施例中,钢琴引擎112和物理模块114可以位于单个壳体或不同的壳体内。
钢琴引擎112可以包括处理单元。仅仅作为示例,钢琴引擎112可以包括中央处理单元(CPU)、专用集成电路(ASIC)、专用指令集处理器(ASIP)、图形处理单元(GPU)、物理处理单元(PPU)、数字信号处理器(DSP)、现场可编程门阵列(FPGA)、可编程逻辑器件(PLD)、控制器、微控制器单元、精简指令集计算机(RISC)、微处理器等中的一种或几种的组合。
物理模块114可以是原声钢琴或任何其他声学仪器。物理模块114可以包括允许用户150演奏音乐的一个或以上机制。当用户150演奏物理模块114时,数字乐器110可以产生声音。可选地或另外地,数字乐器110可以自动产生用于演奏的声音和/或音频内容。
在一些实施例中,钢琴系统100可以实现一个或以上教学功能。例如,钢琴系统100可以在演奏过程中指导用户150如何演奏钢琴。钢琴系统100可呈现教学功能、内容项目和/或用户界面。在一些实施例中,钢琴系统100可以记录用户150的表演。
网络120可以是提供信息交换的渠道。在一些实施例中,钢琴系统100中的一个或以上组件(例如,数字乐器110、云服务器130和/或数据库140)可以将信息和/或数据发送到钢琴系统100中的其他组件。例如,数字乐器110可以经由网络120从数据库140获得/获取与用户150相关联的信息。在一些实施例中,网络120可以是单一网络或多种网络的组合。例如,网络130可以包括有线电视网络、有线网络、光纤网络、电信通信网络、内联网、因特网、局域网(LAN)、广域网(WAN)、无线局域网(WLAN)、无线局域网、城域网(MAN)、广域网(WAN)、公共电话交换网络(PSTN)、蓝牙网络、ZigBee网络、近场通信(NFC)网络等中的一种或几种组合。网络120可以包括多种网络接入点,如有线或无线接入点、基站或网络交换点,通过以上接入点使钢琴系统100的一个或以上组件连接网络120,并通过网络120接受和发送信息。
在一些实施例中,云服务器130可以是单个服务器或服务器组。服务器组可以是集中式的或分布式的(例如,云服务器130可以是分布式系统)。在一些实施例中,云服务器130可以是本地的或远程的。例如,云服务器130可以经由网络120访问存储在数字乐器110和/或数据库140中的信息和/或数据。作为另一示例,云服务器130可以直接连接到数字乐器110/或数据库140,并且访问其中存储的信息和/或数据。在一些实施例中,云服务器130可以在云平台上实现。仅作为示例,云平台可以包括私有云、公共云、混合云、社区云、分布式云、中间云、多云等中的一种或几种的组合。在一些实施例中,云服务器130可以在具有本申请中图2中所示的一个或以上组件的计算设备200上实现。
数据库140可以存储数据和/或指令。在一些实施例中,数据库140可以存储从数字乐器110和/或云服务器120获取的数据。在一些实施例中,数据库140可以存储数字乐器110可以执行或用于执行本申请中描述的示例的方法的数据和/或指令。在一些实施例中,数据库140可以包括大容量存储器、可移动存储器、易失性读写存储器、只读存储器(ROM)等或其任何组合。示例性大容量存储器可以包括磁盘、光盘、固态驱动器等。示例性可移动存储器可以包括闪存驱动器、软盘、光盘、存储卡、压缩盘、磁带,示例性的易失性读写存储器可以包括随机存取存储器(RAM)。示例性的RAM可以包括动态RAM(DRAM)、双倍数据速率同步动态RAM(DDR SDRAM)、静态RAM(SRAM)、晶闸管RAM(T-RAM)和零电容器RAM(Z-RAM)(ROM)、可编程ROM(PROM)、可擦除可编程ROM(PEROM)、电可擦除可编程ROM(EEPROM)、光盘ROM(CD-ROM)和数字多功能盘ROM等。在一些实施例中,数据库140可以在云平台上实现。仅作为示例,云平台可以包括私有云、公共云、混合云、社区云、分布式云、中间云、多云等或其任何组合。
在一些实施例中,数据库140可以存储与钢琴系统100相关联的信息。该信息可以包括用户简档、计算机程序指令、预设信息、系统参数、与音乐片段有关的信息、与用户150以及钢琴系统100的组件(例如,琴键或踏板)之间的互动有关的信息等。在一些实施例中,用户简档可以涉及用户的熟练度、偏好、特征、音乐流派、喜爱的音乐和/或喜爱的作曲者。在一些实施例中,计算机程序指令可涉及工作模式、音量控制、显示模式等中的一种或几种的组合。在一些实施例中,预设信息可涉及钢琴系统100的工作模式、功能、界面、菜单。预设信息可由钢琴制造商或用户设定。在一些实施例中,系统参数可以涉及物理模块114和/或钢琴引擎112的特性、规格、特征。在一些实施例中,与音乐片段相关的信息可以包括与该音乐片段中的阶段有关的信息、与音乐片段内的过渡有关的信息、音乐流派、作曲家、结构、乐谱、其他背景信息、音乐片段的体验或演奏历史等。在一些实施例中,与交互相关的信息可以包括与按压琴键相关的压力数据、按压琴键的持续时间、与施加于踏板的操作有关的压力数据、施加于踏板的操作的持续时间等中的一种或几种组合。
在一些实施例中,数据库140可以存储从数字乐器110、网络120、云服务器130或用户150接收的信息。此外,数据库140可以与钢琴系统100中的其他模块或组件通信。
在一些实施例中,数据库140可以经由网络120(例如,数字乐器110和/或云服务器130)与钢琴系统100中的一个或以上组件进行通信。钢琴系统100中的一个或以上组件可以经由网络120访问存储在数据库140中的数据或指令。在一些实施例中,数据库140可以直接连接到一个或更多钢琴系统100中的组件(例如,数字乐器110和/或云服务器130)。在一些实施例中,数据库140可以是数字乐器110的一部分。
在一些实施例中,钢琴系统100中的一个或以上组件(例如,数字乐器110和/或云服务器130)可以具有允许访问数据库140的权限。在一些实施例中,钢琴系统100中的一个或以上组件可以读取和/或修改存储在数据库140中的与用户150有关的信息、音乐和/或与音乐相关联的内容项目。例如,数字乐器110可以读取和/或修改一个或以上用户的身份、账户或偏好。
在一些实施例中,用户150可以是能够操作钢琴系统100的人、机器人、计算设备或任何其他类型的用户。在演奏时,用户150可以使用用户身体的一个或以上部分按压或释放数字乐器110的一个或以上琴键和/或踏板。例如,用户150可以按压或释放数字乐器110中的一个或以上琴键以通过手指演奏音乐。用户150可以按压或释放数字乐器110的一个或以上踏板以通过一只或两只脚演奏音乐。
在一些实施例中,钢琴系统100可具有一个或以上工作模式,诸如正常模式、教学模式、呈现模式等中的一种或几种的组合。在一些实施例中,在正常模式下,钢琴系统100可允许用户150演奏数字乐器110并产生钢琴声音而不提供或显示内容项目。在教学模式中,钢琴系统100可以在用户界面上提供或显示一个或以上教程并允许用户150同时演奏。教程可指导用户150练习钢琴系统100,例如琴键。更具体地,在正常模式和/或教学模式中,钢琴系统100可监视用户150对数字乐器110的操纵。在一些实施例中,在呈现模式中,钢琴系统100可仅呈现内容项目(例如,角色、图像、视频、动画等)给用户150。钢琴系统100可以不允许用户150以演示模式进行演奏。另外地或可选地,在呈现模式中,钢琴系统100可以不监视来自用户150的动作。
钢琴系统100可以实现至少两个工作模式并且基于用户的选择在工作模式之间切换。例如,钢琴系统100可以提示用户150选择一个或以上工作模式(例如,通过提供开关,呈现一个或以上用户界面等)。响应于接收到用户对一个或以上工作模式的选择(例如,经由开关),钢琴系统100可以在选定的工作模式下操作。
在一些实施例中,云服务器130和/或数据库140可以存储至少两个内容项目。内容项目可以与一个或以上音乐片段相关联。内容项目可以包括人物、图像、视频或动画中的至少一个。在一些实施例中,与一个或以上音乐相关联的现场表演可被记录并存储在数据库140中。现场表演可以是现场音乐会、现场音乐剧、现场音乐剧等。
内容项目中的图像、视频或动画可以具有一种或以上定义格式。在一些实施例中,定义格式可以是高清晰度(HD)格式。示例性HD格式可以包括具有3,840x2,160分辨率(被称为4K UHD)或7680×4,320(被称为8K UHD)的HD格式(例如1920×1080p)、超高清(UHD)格式、或者3840×1080分辨率。在一些实施例中,内容项目可以具有其他定义。
图2是根据本申请的一些实施例所示的计算设备200的硬件和软件组件的一种示例性结构图。
计算设备200可以是通用计算机或专用计算机。图1中的数字乐器110或云服务器130可以被配置为在计算设备200上。计算设备200可以用于实现如这里所描述的钢琴系统100的任何组件。例如,钢琴引擎112可以通过其硬件、软件程序、固件或其组合在计算设备200上实现。尽管仅示出了一个这样的计算机,但是为了方便起见,与本文所述的钢琴系统100相关的计算机功能可以以分布式的方式在多个类似平台上实现,以分配处理负载。
计算设备200可以包括连接计算设备200的其他组件的内部通信总线210。计算设备200还可以包括用于执行程序指令的、以一个或以上处理器形式存在的中央处理单元(CPU)220。示例性计算机平台可以包括不同形式的程序存储和数据存储,例如只读存储器(ROM)230、随机存取存储器(RAM)240或磁盘270,所述程序存储和数据存储用于存储各种待处理和/或由计算机传送的数据文件。示例性计算机平台还可以包括存储在ROM230、RAM240、磁盘270和/或其他类型的非暂时性存储介质中的程序指令,所述程序指令由CPU220执行。本申请中的所述方法和/或过程可以作为程序指令来实现。计算设备200可具有通信组件,例如与网络相互连接以促进数据通信的COM端口250。计算设备200还包括I/O组件260,支持计算机与其中的其他组件(例如用户界面元件280和传感器290)之间的输入/输出。计算设备200还可以经由网络通信接收编程和数据。
仅仅为了说明,在计算设备200中仅描述了一个CPU和/或处理器220。然而,应该注意的是,本申请中的计算设备200还可以包括多个CPU和/或处理器,因此由本发明中描述的一个CPU和/或处理器执行的方法步骤和/或操作也可以由多个CPU和/或处理器联合或单独执行。例如,如果在本申请中,计算设备200的CPU和/或处理器执行步骤A和步骤B两者,则可以理解的是,步骤A和步骤B也可以由两个不同的CPU和/或处理器联合执行或单独存储在计算设备200中(例如,第一处理器执行步骤A并且第二处理器执行步骤B,或者第一和第二处理器共同执行步骤A和B)。
I/O组件260可以收集、接收、呈现或显示信息。I/O组件可以包括输入设备和/或输出设备。例如,输入设备可以包括麦克风、照相机、键盘(例如,计算机键盘)、触敏设备等。输出设备可以包括显示器、立体声、扬声器、耳机、耳机等。
在一些实施例中,I/O组件260可以提供一个或以上接口以促进数字乐器110、云服务器130、数据库140、用户150或外部设备之间的通信。I/O组件260可以提供声音信号、与数字乐器110的状况有关的信息、数字乐器110的当前状态和/或用户150的菜单。因此,用户150可以选择确定的数字乐器110的工作模式/功能/特征。I/O组件260可以从用户150处接收对数字乐器110的工作模式/功能/特征的选择。在一些实施例中,I/O组件260可以便于数字乐器110接收由用户150提供的输入。输入可以是图像、声音/语音、手势、触摸、生物特征输入等。
在一些实施例中,用户界面元件280可以生成用户界面以向用户150显示内容项目(例如,角色、图像、视频、动画等)。显示器可以是LED显示器、OLED显示器、LCD等。所述显示器可以具有显示器分辨率格式。在一些实施例中,显示器分辨率格式可以是高清晰度(HD)格式。示例性的HD格式可以包括HD格式(例如1920×1080p)、具有3,840×2,160分辨率(被称为4K UHD)或者7,680×4,320(被称为8K UHD)、或3840×1080分辨率的超高清(UHD)格式。在一些实施例中,显示器可能有其他分辨率。内容项目可以具有分辨率格式。在一些实施例中,内容项目可以具有与显示器相同的分辨率格式。在一些实施例中,用户界面可以具有与数字乐器110的键盘相同的宽度。
在一些实施例中,传感器290可以检测、接收、处理、记录等与用户150和数字乐器110的琴键之间的交互有关的信息。在一些实施例中,传感器290可以检测、接收、处理、记录等钢琴系统100的组件之间的交互有关的信息。信息可以包括,例如,图像数据、音频数据、压力数据、运动数据等。在一些实施例中,传感器290可以是和/或包括图像传感器、音频传感器、压力传感器、速度传感器、加速度计、机械传感器等中的一种或几种的组合。在一些实施例中,传感器290可以与数字乐器110的壳体、琴弦和/或任何其它组件耦合。由(一个或以上)传感器290记录的信息可以被传输到CPU220、ROM230、RAM240或磁盘270等。在一些实施例中,CPU220可以基于来自传感器290的记录信息来确定对用户150的反馈。反馈可以允许用户150纠正或改善他/她的钢琴演奏。
在一些实施例中,图像数据可以包括与用户150操作数字乐器110有关的任何图像和/或视频。图像数据可以以实时方式收集。在一些实施例中,图像数据可以被显示在用户界面元件280上以允许用户150调整或改善他/她的钢琴演奏。
在一些实施例中,音频数据可以包括与用户150对数字乐器110的操作相关的任何声音、语音和/或振动。可以以实时方式收集音频数据。
在一些实施例中,压力数据可以包括与由钢琴系统100的一个或以上其他组件(例如,钢琴系统100的第二组件)或用户150施加到钢琴系统100的第一组件的力有关的任何数据和/或信息。例如,压力数据可以包括关于通过琴锤施加到一个或以上琴弦的压力的数据和/或信息、通过琴锤施加到弹性结构的压力、通过用户施加到被按压的琴键的压力等。压力数据可以包括,例如施加压力的区域、压力的强度、压力的持续时间、压力的方向、与压力有关力的量等。
动作数据可以包括关于钢琴系统100的一个或以上琴键、琴锤、琴弦和/或任何其它组件的运动的任何信息和/或数据。动作数据可以包括位置、速率、速度、加速度等等。例如,运动数据可以包括与交互作用有关的琴锤的速率和/或速度(例如,琴锤撞击弦的速率),在弦与琴锤交互时期的弦的一个或以上点的速度等。在一些实施例中,传感器310可以记录当琴锤击弦时施加到弦的压力量。
图3是根据本申请的一些实施例所示的物理模块114的一种示例性结构图。物理模块114可以包括用于在钢琴系统100中产生声音的任何组件。例如,物理模块114可以包括一个或以上键盘310、一个或以上踏板320、一个或以上转换开关330、一个或以上琴锤340、一个或以上琴弦350、壳体360等中的一种或几种的组合。
键盘310可以包括一个或以上琴键(例如,白键、黑键等)。在一些实施例中,每个琴键可以对应于音符。
每个踏板320可以包括可以修改钢琴声音的脚操作杆。例如,踏板320可以包括可以被操作以使钢琴产生更柔和更灵活的音调的弱音踏板(例如,非音踏板)。作为另一个例子,踏板320可以包括可以被操作以维持选定音符的延音踏板。作为又一示例,踏板320可以包括可以被操作以使得音符持续发声直到踏板被释放的持续踏板(例如,延音踏板)。在一些实施例中,踏板320中的每一个可以包括可以接收由用户的单脚,双脚等输入的用户输入的输入设备。踏板320可以接收用户输入并且基于该用户输入实现钢琴系统100的一个或以上功能。例如,用户150可以使用一个或以上踏板320来选择钢琴系统100的工作模式。作为另一示例,可以响应于用户150对一个或以上踏板320的一个或以上操作来实现呈现模式。
(一个或以上)踏板320可以以任何方式被放置以用于用户操作。例如,踏板320中的一个或以上可置于键盘310下方,并且可由用户的单脚和/或双脚访问和操作。在一些实施例中,踏板320的位置可以是可调节的,以便可以调谐由琴弦350产生的声音。在一些实施例中,物理模块114可以包括多于一个的踏板320。
转换开关330可向用户150提供钢琴系统100的一个或以上工作模式,并可以包括用于接收用户对一个或以上工作模式的选择的机制。例如,转换开关330可以包括可用于接收用户对一个或以上工作模式的选择的一个或以上按钮、旋钮、踏板和/或任何其他设备。在一些实施例中,工作模式可以包括例如正常模式、教学模式和呈现模式。在一些实施例中,实施于转换开关330上的操作可以将数字乐器110从一种工作模式切换到另一种工作模式。在一些实施例中,转换开关330可以可操作地耦合到物理模块114和/或钢琴系统100的一个或以上组件以实现不同的工作模式。例如,转换开关330可以电气地和/或机械地耦合到一个或以上组件。转换开关330可以经由直接连接、一个或以上中间设备和/或以任何其他方式在操作上耦合到一个或以上组件。例如,转换开关330可以耦合到锁定组件,该锁定组件可以启用或禁用用户对数字乐器110的操作。
在一些实施例中,一个或以上踏板320和转换开关330可被集成到单个装置中。例如,用户150对踏板的单个操作还可以使钢琴系统100在不同的工作模式(例如,正常模式,教学模式,呈现模式等)之间切换。
每个琴锤340可以与钢琴的一个或以上琴键相关联。在一些实施例中,琴锤340可以机械地耦合到物理模块114和/或钢琴系统100的一个或以上组件。例如,琴锤340可以可操作地耦合到键盘310、踏板320、转换开关330和/或物理模块114和/或钢琴系统100的任何其它组件。当其对应的琴键不是其时,可将其放置在静止位置按下。当用户150按下琴键时,琴锤340可从静止位置朝琴弦350运动。琴锤340可以以一定的速度(例如几米每秒)撞击琴弦350。琴弦350可以振动以产生声音。在一些实施例中,琴锤340和/或琴弦350的一个或以上部分可以与计算设备200中的I/O组件260相连接。
壳体360可以形成物理模块114的琴锤340和琴弦350所位于的外壳或空间。在一些实施例中,壳体360也可以包含钢琴引擎112。踏板320可以从外部安装到壳体360。踏板320可以通过机械方式连接到壳体360内的其他组件。在一些实施例中,转换开关330可以位于壳体360内。
在一些实施例中,钢琴引擎112中的一个或以上组件和物理模块114中的一个或以上组件可以被集成到单个零件上。作为另一个示例,I/O组件260可以被配置在键盘310、踏板320、琴锤340或者一个或者多个弦线350上或者其附近以收集信息。
图4是根据本申请的一些实施例所示的键盘410和显示器420的一种示例性结构图。如图4所示,显示器420可以与键盘410相邻的。显示器420可以具有与键盘410相同的宽度。键盘410可以包括多个琴键,例如琴键412-1至412-4。琴键可能包括白色琴键和黑色琴键。
显示器420可以显示字符、图像、视频或动画中的至少一个。字符可以包括一个或以上音乐符号。图像可以包括与音乐相关的图像、作曲家、表演者、与音乐表演相关的场景或者任何其他相关图形或对象。视频可以包括音乐会的实况视频、钢琴家演奏钢琴的视频、音乐乐队表演的视频等。动画可以包括教学动画、介绍性动画或任何其他动画。教学动画可以指示用户150操作数字乐器110。
在一些实施例中,显示器420可以将包括多个对象422-1到422-4的动画显示为钢琴学习者的教程。对象422-1至422-4可以处于垂直运动。对象422-1到422-4可以从显示器420的顶部落到底部。对象可以对应于键盘410中的某个琴键。对象和琴键键可以垂直对齐。例如,对象422-1可以对应于白键412-1。对象422-2可以对应于黑键412-2。对象422-3可以对应于黑键412-3。对象422-4可以对应于黑键412-4。对象的高度可以指示用户150施加在与对象相关联的相应琴键上的压力的持续时间。对象的高度越高,压力的持续时间越长。在一些实施例中,对象可以具有一种或以上颜色。颜色可能代表按下琴键的强度。
在一些实施例中,显示器420可以在用户150按下琴键412-1至412-4同步呈现对象422-1至422-4。例如,当需要琴键412-1至412-4被顺序按压时,显示器420可以顺序地显示对象422-1至422-4以通知用户150按下相应的琴键。具体而言,当对象例如422-1的底部到达显示器420的下边界时,通知用户150开始按压白键412-1。当对象422-1向下运动时,用户150应该继续按下白键412-1。当对象422-1的顶部到达显示器420的底部边界时,通知用户150释放白键412-1。同时,一个或以上其他对象依次向显示器420的下边界运动,以通知用户150按下相应的琴键。
应该理解的是,图4仅用于说明。本公开不旨在限制本申请的范围。例如,尽管对象422-1至422-4被显示为正方形或矩形,但它们也可以是包括箭头、圆、椭圆等的其他形状。此外,对象422-1至422-4也可以显示在二维图像或三维物体中等。
图5是根据本申请的一些实施例所示的确定在用户界面上显示内容项目的指令的流程500的一种示例性流程图。流程和/或方法500可以由钢琴系统100执行。例如,流程和/或方法500可以被实现为存储在ROM230中的一组指令(例如,应用)。该指令可以被发送到显示器420。CPU220可以执行该组指令并且相应地被指示执行流程和/或方法500。
在步骤510中,处理器可以获取或接收由用户150选择的一个音乐片段。在一些实施例中,用户150可以将所选择的音乐片段的名称输入到钢琴系统100中。在一些实施例中,处理器可以为用户150显示菜单或列表来选择音乐片段。
在步骤520中,处理器可以获取显示模式。显示模式可以在用户界面上配置一个或以上显示类别和一个或以上显示类别的布局。在一些实施例中,显示模式可以由用户150输入。在一些实施例中,显示模式可以由处理器220基于用户150选择的音乐片段、用户简档、用户偏好等自动确定。
一个或以上显示类别可以是内容项目的类别,诸如字符类别、图像类别、视频类别或动画类别。在一些实施例中,一个或以上显示类别可以涉及与该音乐相关联的一个或以上内容项目。一个或以上内容项目可以是人物、图像、视频或动画中的至少一个。字符可能至少是乐谱的一部分。图像可以包括与所选择的音乐片段、作曲家、表演者或任何其他相关图形或对象有关的图像。视频可以包括音乐会的视频、钢琴家演奏钢琴的视频、音乐乐队的视频等。动画可以包括教程动画或任何其他动画。
在一些实施例中,布局可以是在用户界面的显示器420上显示的一个或以上窗口或区域的任何布置。显示器420可以基于布局显示一个或以上窗口或区域。显示器可以在一个窗口中呈现一个或以上内容项目。在一些实施例中,区域可以是任何形状,例如矩形、圆形、三角形等。在一些实施例中,区域可以处于布置中。该布置可以是上下布置、左右布置、内外布置或其组合。
在步骤530中,处理器可以分别在显示模式下获取与一个或以上显示类别相关联的一个或以上内容项目。一个或以上内容项目可以与该音乐片段相关联。在一些实施例中,一个或以上内容项目可以是人物、图像、视频或动画中的至少一个。在一些实施例中,内容项目可被存储在云服务器130或数据库140中。处理器220可从云服务器130或数据库140检索内容项目。
在步骤540中,处理器可以根据布局生成用于在用户界面上显示一个或以上内容项目的指令。在一些实施例中,一个或以上内容项目中的每一个将被显示在一个或以上区域的一个区域中。如在另一个示例中,一个或以上内容项目可以在一个区域中被显示。
另外地或替代地,在步骤550中,处理器可以执行指令以根据布局使得一个或以上内容项目被显示在用户界面上。在一些实施例中,显示器420可以根据该指令呈现一个或以上区域。在一些实施例中,一个或以上内容项目可以在一个区域中被显示。
在一些实施例中,处理器220可以响应于用户选择音乐片段而自动确定一个或以上显示模式。处理器220还可以在用户界面上的弹出窗口中向用户150呈现一个或以上显示模式作为菜单。当显示模式是用户150期望的时候,用户150可以确认显示模式。当显示模式不是用户150所期望的时,用户150可拒绝或修改显示模式。
图6是根据本申请的一些实施例所示的确定钢琴系统的显示模式的流程600的一种示例性流程图。流程和/或方法600可以由钢琴系统100执行。例如,流程和/或方法600可以被实现为存储在ROM230中的一组指令(例如,应用)。CPU220可以执行该组指令并且相应地被指示执行流程和/或方法600。
处理器可以在执行流程600之前首先获取用户的身份。在一些实施例中,身份可以包括在钢琴系统100中注册的用户账户。处理器220可以在用户150登录用户帐户之后获取身份。在一些实施例中,处理器220可以使用生物识别来获取身份。生物识别可以包括指纹识别、掌纹识别、虹膜识别等。
在步骤610中,处理器可以获取与用户150相关联的至少两个历史记录。在一些实施例中,至少两个历史记录可以包括用户选择的一个或以上历史音乐片段、与所述一个或以上历史音乐片段相关联的一个或以上历史内容项目以及与播放一个或以上历史音乐片段相关联的一个或以上历史显示模式。历史记录可以包括优选的音乐片段、内容项目和/或显示模式(优选的显示类别和/或布局)。在一些实施例中,一个或以上历史音乐片段可以包括用户喜欢的音乐片段、播放列表、风格、作曲家、集合等等。
在步骤620中,处理器可以基于与用户150相关联的至少两个历史记录和由用户150选择的音乐片段来确定显示模式。显示模式可以在用户界面上配置一个或以上显示类别的布局和一个或以上显示类别。
在一些实施例中,处理器可以使用深度学习方法来确定显示模式。深度学习方法可以采用深度学习模型来训练与用户相关联的历史记录并且发现显示模式、音乐片段和用户之间的相关性。使用深度学习模型的训练可以产生与用户选择的音乐片段相关联的一个或以上推荐的显示模式。因此,当接收到用户对音乐片段的选择时,处理器可以检索一个或以上推荐显示模式中的至少一个,以呈现给用户。深度学习模型可以包括前馈神经网络(FNN)、递归神经网络(RNN)、Kohonen自组织映射、自动编码器、概率神经网络(PNN)、时间延迟神经网络网络(TDNN)、径向基函数网络(RBF)、学习矢量量化、卷积神经网络(CNN)、自适应线性神经元(ADALINE)模型、关联神经网络(ASNN)。示例性递归神经网络(RNN)可以包括Hopfield网络、玻尔兹曼机器、回声状态网络、长期短期记忆网络、双向RNN、分层RNN、随机神经网络等中的一种或几种的组合。
在一些实施例中,音乐片段可以包括由一个或以上过渡隔开的两个或以上阶段。不同的阶段可以通过不同的乐器组合来演奏,并且具有不同的情绪、不同的韵律、不同的节奏等。可以用相应的阶段式显示模式和/或一个或以上阶段性内容项来配置两个或以上阶段中的每一个阶段。处理器可以为该音乐片段的每个阶段生成阶段式指令。
图7是根据本申请的一些实施例所示的针对音乐片段的两个或以上阶段中的一个生成阶段性指令的流程700的一种示例性流程图。流程和/或方法700可以由钢琴系统100执行。例如,流程和/或方法700可以被实现为存储在ROM230中的一组指令(例如,应用)。CPU220可以执行该组指令并且相应地被指示执行流程和/或方法700。
在步骤710中,处理器可以确定一个音乐片段中的一个或以上过渡。与一个或以上过渡有关的信息可以存储在数据库140、ROM230、磁盘270或任何其他内部或外部存储装置中。过渡可能采取间隔的形式。
在步骤720中,处理器可以将该音乐片段划分为两个或以上阶段。两个或以上阶段可以通过一个或以上过渡隔开。在一些实施例中,阶段可以采取运动、周期、部分等的形式。在一些实施例中,可以通过不同的乐器组合来演奏不同的阶段,并且具有不同的情绪、不同的韵律、不同的节奏等。
在步骤730中,对于两个或以上阶段中的每一个阶段,处理器可确定阶段性显示模式。阶段性显示模式可以定义一个或以上阶段性显示类别和阶段性布局。阶段性显示模式可以是适用于一个阶段的显示模式。不同的阶段可能有不同的阶段性显示模式。阶段性内容项目可以是在一个阶段期间显示的内容项目。不同的阶段可能有不同的阶段性内容项目。例如,一个音乐片段的第一阶段可对应于介绍音乐的作曲者或表演者的介绍性动画;而该音乐片段的第二阶段可以对应于该音乐片段的演奏的实况记录。不同的阶段可能有不同的阶段布局。例如,在一个音乐片段的第一阶段,第一阶段布局可以指示显示器以左右方式呈现两个区域。在该音乐片段的第二阶段期间,第二阶段布局可以指示显示器以上下方式呈现另外两个区域。在一些实施例中,处理器可以根据流程600确定阶段性显示模式。
在步骤740中,处理器可以生成阶段性指令,该阶段性指令根据阶段性显示模式使得一个或以上阶段性内容项目被显示在用户界面上。
图8是根据本申请的一些实施例所示的确定音乐片段的内容项目的流程800的一种示例性流程图。该音乐片段可以包含两个或更多阶段。流程和/或方法800可以由钢琴系统100执行。例如,流程和/或方法800可以被实现为存储在ROM230中的一组指令(例如,应用)。CPU220可以执行该组指令并且相应地被指示执行流程和/或方法800。
在步骤810中,对于两个或以上阶段中的每一个阶段,处理器可以在阶段性显示模式的用户界面上配置一个或以上阶段性显示类别和一个或以上阶段性显示类别的阶段性布局。
在步骤820中,处理器可以分别获取对应于一个或以上阶段性显示类别的一个或以上阶段性内容项目。一个或以上阶段性内容项目可以与相应的阶段性音乐片段相关联。例如,如果阶段性展示类别是“介绍性动画”的类别,并且相应的阶段性音乐片段是JohannSebastian Bach的E大调小提琴协奏曲(Bach-Werke-Verzeichnis 1042)的第一乐章(快板),处理器可以获取一个简短的介绍巴赫和音乐的背景的动画。
图9A-9H是根据本申请的一些实施例所示的钢琴系统的不同显示模式的示意图。
如图所示,在图9A中,显示模式可以被配置为具有一个显示类别并且在整个显示器420上显示一首音乐的音乐符号。音乐符号可以包括五线谱902、至少两个谱号904、906和908。五线谱902和至少两个谱号904、906和908可以在用户150演奏数字乐器110的同时为用户150提供参考。在一些实施例中,可以根据演奏音乐片段的过程来动态更新音乐符号。
如图所示,在图9B中,显示模式可以被配置为具有一个显示类别并且在整个显示器420上显示一个或以上对象912、914、916、918和920。该一个或以上对象912、914、916、918和类似于图4中的对象422-1到422-4。因此,在此不再详细描述。在一些实施例中,显示器420上的一个或以上对象912、914、916、918的运动可根据演奏该音乐片段的过程而动态地更新。
如图所示,如图9C所示,显示模式可以被配置为有一个显示类别并且在整个显示器420上显示演奏视频。该演奏视频可以响应于用户150将数字乐器110的工作模式切换到演出模式而被播放。表演视频可以显示演奏钢琴924的至少一个表演者922。图9C是用于说明的目的。本公开不旨在限制本申请的范围。例如,至少一个表演者922可以演奏除钢琴之外的任何乐器。
如图所示,在图9D中,显示模式可以被配置为具有一个显示类别并且在整个显示器420上显示使用双手934和936演奏键盘932的演奏者的视频。视频可以动态地显示双手934和936如何按下琴键。视频可以指示用户150练习数字乐器110。视频可以响应于用户150将数字乐器110的工作模式切换到正常模式、呈现模式、或者教学模式而被播放。
如图所示,在图9E中,显示模式可以被配置为具有两个显示类别并且在显示器420的上半部分上显示音乐符号以及在显示器420的下半部分上显示使用双手948和950演奏键盘946的表演者的视频。图9E中所示的显示模式可以同时提供更多信息以指导用户150演奏数字乐器110。
如图所示,在图9F中,显示模式可以被配置为具有两个显示类别并且在显示器420的上半部分上显示一个或以上对象952-1到952-6以及在显示器420的下半部分上显示使用双手956和958演奏键盘954的表演者的视频。对象952-1到952-6可以类似于图4中的对象422-1到422-4。因此,这里不再详细描述。视频可以响应于用户150将数字乐器110的工作模式切换到正常模式、呈现模式、或者教学模式而被播放。
或者,如图9G所示,显示模式可以配置有两个显示类别,并且使用显示器420的上半部分上显示使用双手964和966演奏键盘962的表演者的视频以及在显示器420的下半部分上显示一个或以上对象968-1至968。
如图9H所示,显示模式可以被配置为具有两个显示类别并且在显示器420的左半部分上显示音乐符号以及在显示器420的右半部分上显示演奏的视频。与图9A相似,音乐符号可以根据瑶族音乐片段的过程被动态更新。
应该理解的是,图9A-9H是用于说明的目的。本公开不旨在限制本申请的范围。例如,将显示器420的区域等分为两个区域以显示两个内容项目不是必须的。显示模式可以配置不同大小的区域以适应内容项目的显示需求。例如,视频可以占用比显示器420中的音乐符号更大的区域。此外,显示模式可以包括多于两个显示区域(即,对应于多于两个显示类别)以说明多于两个的内容项目,并且超过两个内容项目的布局可能会有所不同。
以上描述可以用于说明性目的,但不意图将其限制于任何细节或实施例。本文公开的范围不是从详细描述中确定的,而是根据根据专利法允许的全部范围解释的权利要求来确定。应该理解的是,这里所示出和描述的实施例仅仅是对本公开的原理的说明,并且在不脱离本公开的范围和精神的情况下,本领域技术人员可以实现各种修改。本领域技术人员可以在不脱离本公开的范围和精神的情况下实现各种其他特征组合。
此外,本领域的普通技术人员可以理解,本申请的各方面可以通过若干具有可专利性的种类或情况进行说明和描述,包括任何新的和有用的制程、机器、产品或物质的组合,或对其任何新的和有用的改良。相应地,本申请的各个方面可以完全由硬件执行、可以完全由软件(包括固件、常驻软件、微码等)执行、也可以由硬件和软件组合执行。以上硬件或软件均可被称为“数据块,”、“模块,”、“引擎,”、"单元,"、"组件,"或“系统”。此外,本申请的各方面可以呈现为位于一个或以上计算机可读媒体中的计算机产品,该产品具有计算机可读程序编码。
计算机可读信号介质可能包含一个内含有计算机程序编码的传播数据信号,例如在基带上或作为载波的一部分。该传播信号可能有多种表现形式,包括电磁形式、光形式等等、或合适的组合形式。计算机可读信号介质可以是除计算机可读存储介质之外的任何计算机可读介质,该介质可以通过连接至一个指令执行系统、装置或设备以实现通讯、传播或传输供使用的程序。位于计算机可读信号介质上的程序编码可以通过任何合适的介质进行传播,包括无线电、电缆、光纤电缆、RF、或类似介质、或任何上述介质的组合。
本申请各部分操作所需的计算机程序编码可以用任意一种或以上程序语言编写,包括面向对象编程语言如Java、Scala、Smalltalk、Eiffel、JADE、Emerald、C++、C#、VB.NET、Python等,常规程序化编程语言如C语言、Visual Basic、Fortran 2003、Perl、COBOL 2002、PHP、ABAP,动态编程语言如Python、Ruby和Groovy,或其他编程语言等。该程序编码可以完全在用户计算机上运行、或作为独立的软件包在用户计算机上运行、或部分在用户计算机上运行部分在远程计算机运行、或完全在远程计算机或服务器上运行。在后种情况下,远程计算机可以通过任何网络形式与用户计算机连接,比如局域网(LAN)或广域网(WAN),或连接至外部计算机(例如通过因特网),或在云计算环境中,或作为服务使用如软件即服务(SaaS)。
前文描述的各种方法和技术提供了实施本申请的多种方式。当然,应该理解的是,不一定可以根据在此描述的任何特定实施例实现所描述的所有目标或优点。因此,例如,本领域技术人员将认识到,可以以实现或优化如本申请所教导的一个优点或一组优点的方式执行所述方法,而不必实现本文所教导或建议的其他目标或优点。这里提到了各种替代方案。应该理解的是,一些优选实施例具体包括一个、另一个或以上特征,而另一些特别排除了一个、另一个或几个特征,而其他特征则通过包含一个、另一个或以上有利特征来减轻特定特征。
尽管已经在某些实施例和示例的上下文中公开了本申请,但本领域技术人员将会理解,本申请的实施例超出具体公开的实施例而延伸到其他替代实施例和/或使用和修改及其等同物。
这里对数值范围的描述仅仅意图用作分别指代落入该范围内的每个单独值的速记方法。除非在此另有指示,否则每个单独的值都并入说明书中,就好像它在此单独列举一样。在此描述的所有方法可以以任何合适的顺序执行,除非在此另有指示或者与上下文明显矛盾。针对本文中的某些实施例提供的任何和所有示例或示例性语言(例如,“诸如”)的使用仅旨在更好地说明本申请,而不是对本申请所要求保护的范围构成限制。说明书中的任何语言都不应被解释为表明任何非声明的元素对于本申请的实践是必不可少的。
这里描述了本申请的优选实施例。在阅读前面的描述之后,那些优选实施例的变化对于本领域的普通技术人员将变得显而易见。预期技术人员可以适当地采用这种变化,并且可以以与本文具体描述的方式不同的方式来实施该应用。因此,本申请的许多实施例包括适用法律允许的所附权利要求书中记载的主题的所有修改和等同物。此外,除非本文另有说明或者与上下文明显矛盾,否则本申请包含其所有可能变型中的上述元素的任何组合。
此外,除非权利要求中明确说明,本申请所述处理元素和序列的顺序、数字字母的使用、或其他名称的使用,并非用于限定本申请流程和方法的顺序。尽管上述披露中通过各种示例讨论了一些目前认为有用的发明实施例,但应当理解的是,该类细节仅起到说明的目的,附加的权利要求并不仅限于披露的实施例,相反,权利要求旨在覆盖所有符合本申请实施例实质和范围的修正和等价组合。例如,虽然以上所描述的系统组件可以通过硬件设备实现,但是也可以只通过软件的解决方案得以实现,如在现有的服务器或移动设备上安装所描述的系统。
同理,应当注意的是,为了简化本申请披露的表述,从而帮助对一个或以上发明实施例的理解,前文对本申请实施例的描述中,有时会将多种特征归并至一个实施例、附图或对其的描述中。但是,这种披露方法并不意味着本申请对象所需要的特征比权利要求中提及的特征多。实际上,实施例的特征要少于上述披露的单个实施例的全部特征。

Claims (28)

1.一种方法,包括:
获取用户选择的音乐片段;
确定在用户界面上配置一个或以上显示类别和所述一个或以上显示类别的布局的显示模式;
分别获取与所述一个或以上显示类别相对应的一个或以上内容项目,所述一个或以上内容项目与所述音乐片段相关联;和
根据所述布局生成用于在所述用户界面上显示所述一个或以上内容项目的指令。
2.根据权利要求1所述的方法,其特征在于,所述一个或以上显示类别包括人物、图像、视频或动画中的至少一个。
3.根据权利要求1所述的方法,还包括:
获取与用户关联的至少两个历史记录,所述历史记录包括用户选择的一个或以上历史音乐片段、与所述一个或以上历史音乐片段相关联的一个或以上历史内容项目以及与播放一个或以上历史音乐片段相关联的一个或以上历史显示模式;和
基于与用户相关联的所述至少两个历史记录和所述用户选择的音乐片段来确定显示模式。
4.根据权利要求3所述的方法,其特征在于,确定所述显示模式还包括使用深度学习模型来训练所述至少两个历史记录。
5.根据权利要求1所述的方法,还包括:
确定所述音乐片段中的一个或以上过渡;
将所述音乐片段分割成由所述一个或以上过渡隔开的两个或以上阶段;
对于两个或以上阶段中的每一个阶段,
确定阶段性显示模式;和
生成阶段性指令,所述阶段性指令根据阶段性显示模式使得一个或以上阶段性内容项目被显示在用户界面上。
6.根据权利要求5所述的方法,还包括:
对于两个或以上阶段中的每一个阶段,
针对所述阶段性显示模式在所述用户界面上配置一个或以上阶段性显示类别和所述一个或以上阶段性显示类别的阶段性布局;和
分别获取对应于所述一个或以上阶段性显示类别的所述一个或以上阶段性内容项目,所述一个或以上阶段性内容项目与相应的阶段性音乐片段相关联。
7.如权利要求1所述的方法,还包括:
执行所述指令以根据所述布局使所述一个或以上内容项目显示在所述用户界面上。
8.一种钢琴系统,包括:
容纳可供用户操作的至少两个琴键的键盘;
靠近键盘的显示器;
至少一个计算机可读存储介质,包括向用户呈现内容的一组指令;和
与所述至少一个计算机可读存储介质通信的至少一个处理器,其中当执行所述指令时,所述至少一个处理器执行:
获取用户选择的音乐片段;
获取在用户界面上配置一个或以上显示类别和所述一个或以上显示类别的布局的显示模式;
分别获取与所述一个或以上显示类别相对应的一个或以上内容项目,所述一个或以上内容项目与所述音乐片段相关联;和
根据所述布局生成用于在所述用户界面上显示所述一个或以上内容项的指令。
9.根据权利要求8所述的钢琴系统,其中,所显示的一个或以上类别包括人物、图像、视频或动画中的至少一个。
10.根据权利要求8所述的钢琴系统,其中所述至少一个处理器还被配置为:
获取与所述用户相关联的至少两个历史记录,所述历史记录包括所述用户选择的一个或以上历史音乐片段,与所述一个或以上历史音乐片段相关联的一个或以上历史内容项目,以及与所述一个或以上历史显示模式相关联的一个或以上历史音乐片段;和
基于与用户关联的至少两个历史记录和用户选择的音乐片段确定显示模式。
11.根据权利要求10所述的系统,其中为了确定所述显示模式,所述至少一个处理器还被配置为使用深度学习模型来训练所述至少两个历史记录。
12.根据权利要求8所述的钢琴系统,其中所述显示器具有高清晰度格式。
13.根据权利要求8所述的钢琴系统,还包括配置成在至少两个工作模式之间切换所述钢琴系统的转换开关。
14.根据权利要求13所述的钢琴系统,其中所述至少两种工作模式包括教学模式,其中所述显示器被配置为呈现一个或以上指示所述用户练习所述至少两个琴键的教程。
15.根据权利要求14所述的钢琴系统,还包括至少一个传感器,其中所述至少一个传感器被配置为记录与所述用户和所述至少两个琴键之间的交互有关的信息。
16.根据权利要求15所述的钢琴系统,其中,所述至少一个传感器包括图像传感器、音频传感器、压力传感器、速度传感器、加速度计或机械传感器中的至少一个。
17.根据权利要求15所述的钢琴系统,其中,所述至少一个处理器还被配置为基于所记录的信息来确定对所述用户的反馈。
18.根据权利要求13所述的钢琴系统,其中所述至少两种工作模式包括呈现模式,其中所述显示器被配置为向所述用户呈现所述一个或以上内容项目。
19.根据权利要求8所述的钢琴系统,其中,所述至少一个处理器还被配置为:
确定所述音乐片段中的一个或以上过渡;
将所述音乐片段分割成由所述一个或以上过渡隔开的两个或以上阶段;
对于两个或以上阶段中的每一个阶段,
确定阶段性显示模式;和
生成阶段性指令,所述阶段性指令根据阶段性显示模式使得一个或以上阶段性内容项目被显示在用户界面上。
20.根据权利要求19所述的系统,其中所述至少一个处理器还被配置为:
对于两个或以上阶段中的每一个阶段,
针对所述阶段性显示模式在所述用户界面上配置一个或以上阶段性显示类别和所述一个或以上阶段性显示类别的阶段性布局;和
分别获取对应于所述一个或以上阶段性显示类别的所述一个或以上阶段性内容项目,所述一个或以上阶段性内容项目与相应的阶段性音乐片段相关联。
21.根据权利要求19所述的系统,其中,所述至少一个处理器还被配置为执行所述指令以根据所述布局使所述一个或以上内容项在所述用户界面上被显示。
22.一种包含计算机程序产品的非暂时性计算机可读介质,所述计算机程序产品包括被配置为使计算系统执行以下操作的指令:获取用户选择的一个音乐片段;
确定在用户界面上配置一个或以上显示类别和所述一个或以上显示类别的布局的显示模式;
分别获取与所述一个或以上显示类别相对应的一个或以上内容项目,所述一个或以上内容项目与所述音乐片段相关联;和
根据所述布局生成用于在所述用户界面上显示所述一个或以上内容项目的指令。
23.根据权利要求22所述的非暂时性计算机可读介质,其中,所述一个或以上显示类别包括人物、图像、视频或动画中的至少一个。
24.根据权利要求22所述的非暂时性计算机可读媒体,其中所述计算机程序产品进一步包含经配置以致使所述计算系统执行以下操作:
获取与用户关联的至少两个历史记录,包括用户选择的一个或以上历史音乐片段,与所述一个或以上历史音乐片段相关联的一个或以上历史内容项目以及与播放一个或以上历史音乐片段相关联的一个或以上历史显示模式;和
基于与用户相关联的所述至少两个历史记录和所述用户选择的音乐片段来确定显示模式。
25.根据权利要求24所述的非暂时性计算机可读介质,其中所述计算机程序产品进一步包括配置成使所述计算系统使用深度学习模型来训练所述至少两个历史记录的指令。
26.根据权利要求22所述的非暂时性计算机可读介质,其中所述计算机程序产品进一步包含经配置以致使所述计算系统执行以下操作的指令:
确定所述音乐片段中的一个或以上过渡;
将所述音乐片段分割成由所述一个或以上过渡隔开的两个或以上阶段;
对于两个或以上阶段中的每一个阶段,
确定阶段性显示模式;和
生成阶段性指令,所述阶段性指令根据阶段性显示模式使得一个或以上阶段性内容项目被显示在用户界面上。
27.根据权利要求26所述的非暂时性计算机可读介质,其中所述计算机程序产品进一步包含经配置以致使所述计算系统执行以下操作的指令:
对于两个或以上阶段中的每一个阶段,
针对所述阶段性显示模式在所述用户界面上配置一个或以上阶段性显示类别和所述一个或以上阶段性显示类别的阶段性布局;和
分别获取对应于所述一个或以上阶段性显示类别的所述一个或以上阶段性内容项目,所述一个或以上阶段性内容项目与相应的阶段性音乐片段相关联。
28.根据权利要求22所述的非暂时性计算机可读介质,其中所述计算机程序产品进一步包含经配置以致使所述计算系统执行所述指令以致使根据所述布局使所述一个或以上内容项目显示在所述用户界面上的指令。
CN201780045874.0A 2017-01-25 2017-01-25 一种智能钢琴系统 Active CN109564756B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/072657 WO2018137189A1 (en) 2017-01-25 2017-01-25 Piano system and method thereof

Publications (2)

Publication Number Publication Date
CN109564756A true CN109564756A (zh) 2019-04-02
CN109564756B CN109564756B (zh) 2021-03-16

Family

ID=62978886

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780045874.0A Active CN109564756B (zh) 2017-01-25 2017-01-25 一种智能钢琴系统

Country Status (3)

Country Link
US (1) US10810901B2 (zh)
CN (1) CN109564756B (zh)
WO (1) WO2018137189A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6708179B2 (ja) * 2017-07-25 2020-06-10 ヤマハ株式会社 情報処理方法、情報処理装置およびプログラム
US11145283B2 (en) * 2019-01-10 2021-10-12 Harmony Helper, LLC Methods and systems for vocalist part mapping
CN112233497B (zh) * 2020-10-23 2022-02-22 郑州幼儿师范高等专科学校 一种钢琴弹奏指力练习装置
US11741087B2 (en) * 2021-01-04 2023-08-29 Servicenow, Inc. Automatically generated graphical user interface application with dynamic user interface segment elements

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09305171A (ja) * 1996-05-17 1997-11-28 Yamaha Corp 演奏指示装置
US20040055441A1 (en) * 2002-09-04 2004-03-25 Masanori Katsuta Musical performance self-training apparatus
CN101916560A (zh) * 2010-08-17 2010-12-15 许新峰 钢琴辅助弹奏装置及实现方法
CN203422918U (zh) * 2013-08-19 2014-02-05 广州市雅迪数码科技有限公司 具有教学功能的自动演奏智能钢琴
CN105608953A (zh) * 2016-03-06 2016-05-25 广州市贝斯曼乐器有限公司 一种智能电子钢琴教学系统

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5728960A (en) * 1996-07-10 1998-03-17 Sitrick; David H. Multi-dimensional transformation systems and display communication architecture for musical compositions
US6388181B2 (en) * 1999-12-06 2002-05-14 Michael K. Moe Computer graphic animation, live video interactive method for playing keyboard music
JP3496620B2 (ja) * 2000-03-22 2004-02-16 ヤマハ株式会社 楽譜データ表示装置、方法及び記録媒体
US6740802B1 (en) * 2000-09-06 2004-05-25 Bernard H. Browne, Jr. Instant musician, recording artist and composer
US20140000440A1 (en) * 2003-01-07 2014-01-02 Alaine Georges Systems and methods for creating, modifying, interacting with and playing musical compositions
JP4962067B2 (ja) * 2006-09-20 2012-06-27 株式会社Jvcケンウッド 楽曲再生装置、楽曲再生方法、および楽曲再生プログラム
WO2008085883A1 (en) * 2007-01-03 2008-07-17 Xiao-Yu Ding Digital music systems
US20080196575A1 (en) * 2007-02-16 2008-08-21 Recordare Llc Process for creating and viewing digital sheet music on a media device
CA2730458A1 (en) * 2008-07-15 2010-01-21 Roland Raphael Gueneux Conductor centric electronic music stand system
US8076564B2 (en) * 2009-05-29 2011-12-13 Harmonix Music Systems, Inc. Scoring a musical performance after a period of ambiguity
US8465366B2 (en) * 2009-05-29 2013-06-18 Harmonix Music Systems, Inc. Biasing a musical performance input to a part
US8445766B2 (en) * 2010-02-25 2013-05-21 Qualcomm Incorporated Electronic display of sheet music
CN102664000A (zh) * 2012-03-10 2012-09-12 任涛 钢琴学习及演奏辅助系统
CN103903602A (zh) * 2012-12-28 2014-07-02 熊世林 智能钢琴
CN205541909U (zh) * 2016-04-14 2016-08-31 安徽克洛斯威智能乐器科技有限公司 一种具有提示键位和视频功能的智能钢琴系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09305171A (ja) * 1996-05-17 1997-11-28 Yamaha Corp 演奏指示装置
US20040055441A1 (en) * 2002-09-04 2004-03-25 Masanori Katsuta Musical performance self-training apparatus
CN101916560A (zh) * 2010-08-17 2010-12-15 许新峰 钢琴辅助弹奏装置及实现方法
CN203422918U (zh) * 2013-08-19 2014-02-05 广州市雅迪数码科技有限公司 具有教学功能的自动演奏智能钢琴
CN105608953A (zh) * 2016-03-06 2016-05-25 广州市贝斯曼乐器有限公司 一种智能电子钢琴教学系统

Also Published As

Publication number Publication date
CN109564756B (zh) 2021-03-16
US10810901B2 (en) 2020-10-20
WO2018137189A8 (en) 2019-03-07
US20190244539A1 (en) 2019-08-08
WO2018137189A1 (en) 2018-08-02

Similar Documents

Publication Publication Date Title
Dean Hyperimprovisation: computer-interactive sound improvisation
Jensenius Action-sound: Developing methods and tools to study music-related body movement
CN104423594B (zh) 用于生成与音频信号相关联的触觉效果的系统和方法
US20190043239A1 (en) Methods, systems, articles of manufacture and apparatus for generating a response for an avatar
US10810901B2 (en) Piano system and method thereof
US20170263231A1 (en) Musical instrument with intelligent interface
CN107705776A (zh) 一种智能钢琴左右键盘分区使用的系统与方法
Solis et al. Musical robots and interactive multimodal systems: An introduction
Weinberg et al. Robotic musicianship: embodied artificial creativity and mechatronic musical expression
Jensenius An action–sound approach to teaching interactive music
Martin et al. Understanding musical predictions with an embodied interface for musical machine learning
Krout Engaging iPad applications with young people with autism spectrum disorders
Martin et al. Deep predictive models in interactive music
Bader How music works
Mazzola et al. The Future of Music
Zamborlin Studies on customisation-driven digital music instruments
Fabiani et al. Systems for interactive control of computer generated music performance
Turowski Digital game as musical notation
JP4313340B2 (ja) 携帯端末装置および選曲方法
JP4313343B2 (ja) 携帯端末装置および情報表示方法
US11797267B2 (en) Method for playing audio source using user interaction and a music application using the same
Whalen Play Along: video game music as metaphor and metonymy
Herrero et al. Drumkit simulator from everyday desktop objects
Öke Designing for new generation electronic musical instruments: Strategies to improve interaction, user experience and live performance
Sousa Jack-in-the-Mug: An interface to assist in the production of Foley sound effects

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant