WO2016060254A1 - 音楽演奏支援装置及び方法 - Google Patents

音楽演奏支援装置及び方法 Download PDF

Info

Publication number
WO2016060254A1
WO2016060254A1 PCT/JP2015/079343 JP2015079343W WO2016060254A1 WO 2016060254 A1 WO2016060254 A1 WO 2016060254A1 JP 2015079343 W JP2015079343 W JP 2015079343W WO 2016060254 A1 WO2016060254 A1 WO 2016060254A1
Authority
WO
WIPO (PCT)
Prior art keywords
task
score
display
music
information
Prior art date
Application number
PCT/JP2015/079343
Other languages
English (en)
French (fr)
Inventor
教裕 植村
陽 前澤
資司 永田
Original Assignee
ヤマハ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ヤマハ株式会社 filed Critical ヤマハ株式会社
Publication of WO2016060254A1 publication Critical patent/WO2016060254A1/ja
Priority to US15/486,717 priority Critical patent/US10325513B2/en

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B15/00Teaching music
    • G09B15/02Boards or like means for providing an indication of notes
    • G09B15/023Electrically operated
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10GREPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G1/00Means for the representation of music
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0008Associated control or indicating means
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/061Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for extraction of musical phrases, isolation of musically relevant segments, e.g. musical thumbnail generation, or for temporal structure analysis of a musical piece, e.g. determination of the movement sequence of a musical work
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/091Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for performance evaluation, i.e. judging, grading or scoring the musical qualities or faithfulness of a performance, e.g. with respect to pitch, tempo or other timings of a reference performance
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/005Non-interactive screen display of musical or status data
    • G10H2220/015Musical staff, tablature or score displays, e.g. for score reading during a performance.
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/091Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
    • G10H2220/101Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters
    • G10H2220/121Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters for graphical editing of a musical score, staff or tablature
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/121Musical libraries, i.e. musical databases indexed by musical parameters, wavetables, indexing schemes using musical parameters, musical rule bases or knowledge bases, e.g. for automatic composing methods
    • G10H2240/131Library retrieval, i.e. searching a database or selecting a specific musical piece, segment, pattern, rule or parameter set

Definitions

  • the present invention relates to a music performance support apparatus and method for managing a user's problems regarding music performance including musical instrument performance and singing performance, and for assisting the user in problem practice.
  • the practitioner or his / her instructor enters various information such as performance issues and performance interpretation on the score.
  • various information such as performance issues and performance interpretation on the score.
  • it becomes difficult to organize the information which causes a decrease in practice efficiency.
  • the practitioner may not be able to grasp the part that becomes a problem in the music.
  • practice plan data representing a practice plan and a practice result is generated based on a practitioner's request and performance technique. The user can practice the performance of the music according to the practice plan data.
  • An object of the present invention is to provide a music performance support apparatus and method that allow a user to easily grasp a plurality of problem locations.
  • a music performance support device includes a display device and a processing device, and the processing device issues a plurality of locations in one piece of music that a user should practice.
  • a task score setting unit that is set as a score
  • a task score acquisition unit that acquires, as a task score, a score representing at least a part of each task location set by the task score setting unit
  • a task score acquisition unit It is configured to function as a display control unit that displays on the display device in a state where two or more of the plurality of task scores are arranged.
  • a plurality of locations that are tasks in the music are set as task locations, and a plurality of task scores representing the plurality of task locations are displayed side by side
  • the user can easily view a plurality of task locations. I can grasp it.
  • the user can efficiently practice a plurality of task locations. For example, when a plurality of task scores are discrete in all the scores, the plurality of task scores can be displayed side by side and displayed together on one page. There is no need to turn pages.
  • the processing device further functions as a display order determination unit that determines a display order of the plurality of task scores corresponding to the plurality of task locations based on an evaluation scale relating to each of the plurality of task locations.
  • the display control unit may display the plurality of task scores on the display device in the display order determined by the display order determination unit.
  • the display order of a plurality of task locations is adjusted based on an evaluation scale such as importance or difficulty, so that the user can easily grasp the order of task locations to be practiced. . Thereby, the efficiency of practice is improved.
  • the processing device may be configured to further function as a connected score generating unit that generates a connected score in which two or more of the plurality of task scores are connected, and the display control unit You may make it display the said connection score produced
  • the user can practice a plurality of task portions continuously while looking at the displayed connected score. Thereby, the efficiency of practice is improved.
  • the processing device may be configured to further function as a performance information acquisition unit that acquires performance information indicating the performance of the music performed by the user, and the task location setting unit includes the performance part Based on the performance information acquired by the information acquisition unit, the task location may be set from the overall score of the music.
  • the performance information represents an actual performance by the user
  • a location that is not played according to the score can be set as a task location based on the performance information and the score of the music.
  • the user can recognize the performance problem, and can efficiently practice the problem part.
  • the processing device may be configured to further function as an additional information acquisition unit that acquires additional information regarding at least one task location set by the task location setting unit, and the display control unit The additional information may be displayed on the display device together with the corresponding task score.
  • additional information such as difficulty, importance, or task content can be displayed together with the task score, so that the user can recognize these additional information during practice.
  • practice efficiency is improved.
  • the display control unit may display a graphic image symbolizing the content of the additional information to be displayed together with the corresponding task score on the display device.
  • the user can grasp
  • the additional information acquisition unit displays a plurality of types of graphic images symbolizing a plurality of different types of the additional information on the display device, and the user selects one of the plurality of types of graphic images. Accordingly, the additional information of a type corresponding to the selected graphic image may be acquired. As a result, the user can easily input desired additional information.
  • the present invention can be configured and embodied not only as an apparatus invention as described above but also as a method invention.
  • the present invention can also be used as a software program that can be executed by a processor such as a computer or a DSP (digital signal processor), or as a non-transitory computer-readable storage medium that stores such a software program.
  • a processor such as a computer or a DSP (digital signal processor), or as a non-transitory computer-readable storage medium that stores such a software program.
  • the program is provided to the user in the storage medium and then installed in the user's computer, or distributed from the server device to the client computer via a communication network, and then the client computer. It may be installed inside.
  • the processor used in the present invention is not only a computer or other general-purpose processor capable of starting an arbitrary software program, but a dedicated processor having a dedicated logic circuit assembled by hardware. There may be.
  • the performance includes not only performance of various musical instruments but also singing.
  • FIG. 1 is a functional block diagram showing the configuration of the music performance support device according to the present embodiment.
  • a music performance support apparatus 100 in FIG. 1 includes a score acquisition unit 11, a score display control unit 12, a task location setting unit 13, a task score acquisition unit 14, a task score display control unit 15, a display order determination unit 16, and a task list generation unit. 17, a connected score generation unit 18, a performance information acquisition unit 19, and an additional information acquisition unit 20.
  • the score acquisition unit 11 acquires score information representing the score of a musical piece (hereinafter referred to as an original score).
  • the musical score information includes various information shown in the original musical score, such as the tempo, key signature, time signature, and the pitch (pitch) and length (tone value) of each sound.
  • the musical score information may be acquired via a computer network such as the Internet, or may be acquired via a recording medium such as a CD (compact disc).
  • the score display control unit 12 displays the original score based on the score information acquired by the score acquisition unit 11.
  • the task location setting unit 13 sets a plurality of locations in one piece of music that the user should practice as task locations.
  • the task location may be set based on an input operation by the user, may be automatically set based on analysis of musical score information, or may be information obtained via a computer network. (For example, information for setting an arbitrary task location is received via a communication network).
  • the task location may be set based on performance information acquired by a performance information acquisition unit 19 described later.
  • the task score acquisition unit 14 acquires a score representing at least a part of each task location set by the task location setting unit 13 as a task score based on the score information acquired by the score acquisition unit 11.
  • the task score display control unit 15 controls to display a plurality of task scores side by side on a display screen based on information indicating the task score acquired by the task score acquisition unit 14.
  • the display order determination unit 16 determines the display order of the plurality of task scores corresponding to the plurality of task locations, based on the evaluation scale relating to each of the plurality of task locations.
  • the evaluation scale is selected by the user from a plurality of predetermined conditions, for example.
  • the task list generation unit 17 generates task list information representing the task list based on the task score information acquired by the task score acquisition unit 14.
  • the assignment list includes a plurality of assignment scores. In this example, a plurality of task scores are arranged in the display order determined by the display order determination unit 16. Further, additional information described later may be included in the assignment list.
  • the connected score generation unit 18 is a connected score representing a score (hereinafter referred to as a connected score) in which two or more of the plurality of task scores are connected. Generate information.
  • a plurality of task scores are connected in the display order determined by the display order determination unit 16.
  • the performance information acquisition unit 19 acquires performance information indicating the actual performance of the music performed by the user. For example, performance information is acquired by inputting sound of performance by a user through a microphone. Further, the performance information may be acquired by a user performing a musical piece using an electronic musical instrument and inputting operation information of the electronic musical instrument.
  • the additional information acquisition unit 20 acquires additional information related to at least one task location set by the task location setting unit 13. Additional information includes, for example, difficulty, importance, set date, number of times already practiced (hereinafter referred to as the number of times already practiced), number of times to practice in the future (hereinafter referred to as the number of times not yet practiced) , Referred to as already practiced time), time to be practiced in the future (hereinafter referred to as “unpracticed time”), performance notes, achievement status of the task, and due date to accomplish the task. Further, the additional information may include tag information described later. The additional information may be acquired as character information or may be acquired as voice information.
  • the additional information may be acquired by being input by a user, may be acquired based on analysis of musical score information, or acquired based on performance information acquired by the performance information acquisition unit 19. Also good.
  • the additional information acquired by the additional information acquisition unit 20 is given to the display order determination unit 16 and the assignment list generation unit 17.
  • FIG. 2 is a block diagram showing an example of a hardware configuration of the music performance support apparatus 100 of FIG.
  • the music performance support apparatus 100 is composed of, for example, a personal computer, a tablet terminal, or a mobile phone.
  • the music performance support apparatus 100 includes a CPU (Central Processing Unit) 110, a ROM (Read Only Memory) 120, a RAM (Random Access Memory) 130, a storage device 140, a display device 150, an input device 160, and an output device 170.
  • a CPU Central Processing Unit
  • ROM Read Only Memory
  • RAM Random Access Memory
  • the ROM 120 is composed of, for example, a non-volatile memory, and stores computer programs such as a system program and a problem management program.
  • the RAM 130 is composed of, for example, a volatile memory, is used as a work area for the CPU 110, and temporarily stores various data.
  • the CPU 110 executes a task management process (that is, a music performance support process) to be described later by executing a task management program (that is, a music performance support program) stored in the ROM 120 on the RAM 130.
  • a task management process that is, a music performance support process
  • a task management program that is, a music performance support program
  • the storage device 140 includes a recording medium (memory) such as a hard disk, an optical disk, a magnetic disk, or a memory card.
  • a recording medium such as a hard disk, an optical disk, a magnetic disk, or a memory card.
  • score information acquired by the score acquisition unit 11 of FIG. 1 for example, score information acquired by the score acquisition unit 11 of FIG. 1, task score information acquired by the task score acquisition unit 14, performance information acquired by the performance information acquisition unit 19, and additional information. Additional information acquired by the acquisition unit 20 is stored. Further, the above problem management program may be stored in the storage device 140.
  • the display device 150 includes a liquid crystal display device, an organic EL (electroluminescence) display device, a plasma display device, or the like.
  • the score display control unit 12 and the task score display control unit 15 in FIG. 1 control to display the original score and a plurality of task scores on the screen of the display device 150.
  • the plurality of task scores may be displayed as a task list or may be displayed as a linked score.
  • the input device 160 includes a mouse and a keyboard. The user can set a task location and input additional information by operating the input device 160.
  • the input device 160 may include a microphone or an electronic musical instrument. In this case, performance information can be input using a microphone or an electronic musical instrument.
  • the display device 150 and the input device 160 may be integrated as a touch panel display (hereinafter abbreviated as a touch panel).
  • the output device 170 includes a sound output terminal and headphones. Further, the output device 170 may include a speaker.
  • the music performance support apparatus 100 may include a DSP (Digital Signal Processor) instead of the CPU 110, or may include a DSP in addition to the CPU 110. Also, some or all of the components in FIG. 1 may be configured by hardware such as an electronic circuit.
  • DSP Digital Signal Processor
  • FIG. 3 is a diagram for explaining an example of setting a task location.
  • FIG. 3 shows an example of an original score for piano.
  • a task location is set for each measure, and one or a plurality of measures continuous in performance are set as one task location.
  • the bar ranges P1, P2, P3, P4, and P5 are the subject of each task location.
  • a repetition symbol is attached to the start point of the measure range P1 and the end point of the measure range P3, and the measure range P3 and the measure range P1 are continuous in performance. Therefore, the bar ranges P3 and P1 are set as common task locations.
  • the bar range P4 and the bar range P5 are located on different levels in the original score, but are continuous in performance. Therefore, the bar ranges P4 and P5 are set as common task locations. In addition, even if it is a several bar range which continues on performance, as below-mentioned, these may be set as a separate subject part.
  • the task location setting unit 13 in FIG. 1 sets a task location based on the operation of the input device 160, for example.
  • the setting of the task location based on the operation of the input device 160 will be described using an example in which the display device 150 and the input device 160 are touch panels.
  • the task location is set by the user operating the touch panel in a state where the original score is displayed on the touch panel.
  • FIG. 4 is a diagram for explaining the setting of the task location based on the operation of the input device 160.
  • the bar ranges P4 and P5 of FIG. 3 are set as the task locations.
  • the task location may be set by performing an operation (drag operation) of tracing the location from the start point to the end point on the touch panel with a finger.
  • a task location may be set by performing operation (tap operation) which touches the start point SP and the end point EP of an applicable location with a finger in order on a touch panel.
  • drag operations and tap operations may be performed using a touch pen instead of a finger.
  • the task location can be set by the same operation as described above.
  • a drag operation the mouse is moved so that the pointer on the display device 150 moves from the start point to the end point of the task location while the mouse button is pressed.
  • an operation click operation in which a mouse button is pressed while the pointer is positioned at the start point and end point of the task location is performed.
  • the bar ranges P1 and P3 are set as common task locations, and the bar range P1 is specified.
  • the bar ranges P1 and P3 are set as separate task locations.
  • the bar ranges P4 and P5 are set as common task locations, and when the bar range P4 is specified after the bar range P5 is specified, The bar ranges P4 and P5 are set as separate task locations.
  • a certain amount of time for example, 3 minutes
  • the bar ranges P1 and P3 are set as separate task locations. May be.
  • the bar ranges P4 and P5 may be set as separate task locations.
  • An image representing a specific mark or the like may be displayed in the bar range set as the task location so that the user can easily recognize the task location.
  • a marking image For example, when a task location is set by a drag operation, a drawn line of a marker such as a highlighter pen may be displayed as a marking image so as to represent a trajectory of a finger or a touch pen.
  • the color of the marking image may be different depending on the setting date, the importance level, the number of already practiced times, the number of unpracticed times or the achievement status of the task.
  • FIG. 5 is a diagram illustrating an example of a marking image.
  • marking images M1, M2, M3, M4, and M5 are displayed so as to overlap the bar ranges P1, P2, P3, P4, and P5, respectively.
  • Marking images M1 to M5 each represent a marker line.
  • the plurality of marking images have the same color.
  • the marking images M1 and M3 have the same color
  • the marking images M4 and M5 have the same color.
  • the colors of the marking images M1 and M3, the color of the marking image M2, and the colors of the marking images M4 and M5 are different from each other.
  • a task position display image PI schematically showing the positions of a plurality of task locations is displayed together with the original score.
  • the task position display image PI has a long shape and represents the entire range of music in one direction.
  • One end of the task position display image PI corresponds to the start point of the music, and the other end corresponds to the end point of the music.
  • the part corresponding to the task part is represented by a color different from the part that is not the task part.
  • the part corresponding to each task location is represented by the same color as the marking image corresponding to that task location. Thereby, the user can grasp
  • the task location setting unit 13 may automatically set a task location based on the score information and performance information.
  • the musical score information includes various information shown in the original musical score.
  • the performance information represents an actual performance by the user. By comparing the musical score information and the performance information, it is possible to grasp the performance problems of the user.
  • the tempo of the original musical score represented by the musical score information is compared with the actual tempo of the musical performance represented by the performance information, and the tempo deviation amount exceeds a specified value at any point, or for a certain time
  • the location is set as the issue location.
  • the pitch of the original musical score represented by the musical score information and the pitch of the actual performance represented by the performance information are compared, and the pitch deviation amount is more than a specified value at any point.
  • the location is set as a task location.
  • a location where a performance error such as a miss-touch may occur may be set as a task location.
  • the place when a performance is repeated at a place where the performance should not be repeated (there is no repetition symbol), the place may be set as a task location.
  • the location when a performance is repeated at a location that should not be repeated, the location may be set as a task location when the number of repetitions exceeds a specified value.
  • the setting of the task location based on the musical score information and the performance information may be performed in real time when the user performs (when the performance information is acquired), or may be performed after the performance by the user. Further, a plurality of performances may be acquired as performance information, and a task location may be set based on the performance information. For example, when an event that should be a problem such as a tempo or pitch shift as described above or a performance error occurs more than a specified number of times in the same place, the place may be set as a problem place.
  • the task location setting unit 13 may statistically set the task location based on information of a plurality of other users. For example, the information regarding the problem location of a plurality of other users is acquired via a computer network. Based on the acquired information, a bar range defined by a certain number or more of users as a task location may be specified, and the specified bar range may be set as a task location. Alternatively, the bar ranges that other users set as task locations may be extracted, and the number of task locations for each of the extracted bar ranges may be displayed on the display device 150 as a histogram, for example. In this case, the user can determine the task location with reference to the contents of the displayed histogram.
  • the task location setting unit 13 may set the task location by analyzing the score information. For example, based on the tempo and the notes in the original score, a place where the number of notes to be played within a certain time is equal to or greater than a specified value may be set as a task place. Further, a place where a sound range to be played within a certain time is wider than a predetermined value may be set as a task place.
  • the additional information acquisition unit 20 in FIG. 1 acquires additional information based on an operation of the input device 160, for example. For example, when a user writes a performance caution regarding a task location on the touch panel using a touch pen, the writing is acquired as additional information. Moreover, the character information may be acquired as additional information when the user operates the keyboard and inputs the character information regarding the task location.
  • the additional information acquisition unit 20 may acquire the difficulty level of the task location as additional information by analyzing the score information. For example, based on the tempo and notes in the original score, the number of notes to be played within a certain time is calculated for each task location. Based on the calculated number of notes, the difficulty level of each task location is determined. The difficulty level is represented by a numerical value from “1” to “5”, for example, and the higher the numerical value, the higher the difficulty level. Further, for each task location, the difficulty level may be set higher as the tempo in the original score is faster, and the difficulty level may be set higher as the sound range in the original score is wider. Further, the difficulty level of the music itself may be determined based on the score information. For example, the number of notes to be played within a certain time may be calculated for the entire music, and the difficulty level of the music may be determined based on the maximum value or average value of the calculated numbers.
  • the additional information acquisition unit 20 acquires, as additional information, the number of already practiced (number of times already practiced) or the already practiced time (time already practiced) based on the performance information acquired by the performance information acquisition unit 19. Also good. Specifically, the played task location is specified based on the acquired performance information. Thereby, the number of times of practice of each task part can be counted. Also, it is possible to measure the practice time of each task location. Therefore, it is possible to acquire the number of exercises or the practice time of each task part.
  • the additional information acquisition unit 20 is based on the score information acquired by the score acquisition unit 11 and the performance information acquired by the performance information acquisition unit 19 in FIG. You may acquire practice time (time to practice in the future) as additional information. For example, for each task location, the original score represented by the score information and the actual performance represented by the performance information are compared, and a parameter representing the amount of deviation between the original score and the actual performance is calculated. As the calculated parameter is larger, the number of unpractices for the task part is increased, or the unpractice time for the task part is set longer. Further, the additional information acquisition unit 20 may calculate the number of remaining days or the remaining time from the current time to the date on which the task should be achieved, and set the number of unpractices or the unpracticed time based on the calculation result.
  • the additional information acquisition unit 20 may acquire the achievement status of the task based on the score information acquired by the score acquisition unit 11 of FIG. 1 and the performance information acquired by the performance information acquisition unit 19. For example, as described above, a parameter indicating the amount of deviation between the original score and the actual performance is calculated for each task location, and if the parameter is smaller than a specified value, it is determined that the task at the task location has been achieved. Good.
  • the additional information acquisition unit 20 may acquire additional information common to a plurality of other users. For example, additional information of a plurality of other users regarding each problem location is acquired via a computer network. When the additional information of a plurality of other users is different from each other with respect to the common task location, the additional information of the most users may be acquired representatively. Further, as described above, when a task location is set based on information of a plurality of other users, additional information of the plurality of other users regarding the task location may be acquired simultaneously.
  • the additional information acquisition unit 20 may acquire audio information as additional information.
  • the input device 160 of FIG. 2 may include a microphone.
  • the voice information corresponds to audio data.
  • a word uttered by the user is acquired as the voice information.
  • acquisition (recording) of audio information corresponding to the task location is started when an operation for setting each task location is started. Is started, and acquisition of audio information is stopped when a certain time elapses after the operation.
  • acquisition of audio information corresponding to the previous task location is stopped, and acquisition of audio information corresponding to the next task location is started.
  • the audio information may be audio data of a performance by a user or an instructor, or may be audio data of a performance acquired via a computer network or a recording medium.
  • the acquisition of audio information may be continuously performed during the operation of the music performance support apparatus 100, and only the necessary portions corresponding to each task location may be stored in the acquired audio information.
  • the time when the operation for setting each task location is started or the time before a certain time is set as the storage start time of the audio information corresponding to the task location.
  • the time when a certain time has elapsed after the operation or the time when the operation for setting the next task location is started is set as the time when the storage of the audio information corresponding to the task location is completed.
  • a start button for starting acquisition of audio information and an end button for ending may be displayed on the display device 150.
  • the functions of the start button and the end button may be assigned to the keyboard of the input device 160 or the like.
  • the audio information acquired by the operation of the start button and the end button may be associated with the task location selected by the user, and is automatically applied to the task location set immediately before the operation of the start button. It may be associated.
  • a plurality of pieces of audio information may be acquired so as to correspond to one problem location.
  • a plurality of audio information is acquired using the start button and the end button.
  • Such audio information is associated with the task location selected by the user, for example.
  • the sound information may be automatically associated with the one task location.
  • the additional information acquisition unit 20 may acquire tag information representing the type of task as additional information for each task location. For example, when notation has not been completed, tag information “score reading” is acquired, and when pitch, rhythm or tempo is unstable, tag information “pitch”, “rhythm” or “tempo” Is acquired. Further, when there is not enough expressive power, tag information “expression” is acquired, and when sound particles are not arranged, tag information “sound particles” is acquired.
  • the tag information may be acquired based on the operation of the input device 160 of FIG. 2 by the user, and the score information acquired by the score acquisition unit 11 of FIG. 1 and the performance acquired by the performance information acquisition unit 19. It may be performed automatically based on the information. For example, as described above, when a task location is set based on a tempo or pitch difference between the musical score information and the performance information, tag information such as “tempo” or “pitch” is set for the task location. May be acquired.
  • FIG. 6 is a diagram illustrating an example of a task score.
  • the task score D1 in FIG. 6 corresponds to the measure range P2 in FIG. 3
  • the task score D2 corresponds to the measure ranges P3 and P1 in FIG. 3
  • the task score D3 corresponds to the measure ranges P4 and P5 in FIG. To do.
  • FIG. 7 is a diagram illustrating an example of a task list.
  • the task list in FIG. 7 shows the task achievement status, setting date, measure range, task score, importance, difficulty, tag information, number of unpractices and number of times already practiced for each task location in FIG.
  • each task score is shown as a thumbnail image representing a part of a bar range.
  • an item in the example of FIG. 7, the rightmost item for deleting each task location from the task list is provided.
  • a song name may be attached to the assignment list.
  • the items displayed in the assignment list may be appropriately selected by the user. By displaying various additional information on the task list, the user can recognize the additional information and practice each task location.
  • task list information is generated so that a plurality of task scores are arranged in the display order determined by the display order determining unit 16 in FIG.
  • the evaluation scale for determining the display order is importance. As shown in FIG. 7, the importance of the task part corresponding to the task score D2 is “5”, the importance of the task part corresponding to the task score D3 is “3”, and the task corresponding to the task score D1. The importance of the location is “2”. Thereby, the task score D2, the task score D3, and the task score D1 are displayed in this order.
  • the evaluation scale is not limited to the importance level, and may be the difficulty level, the number of practiced times, the number of not practiced, the achievement status of the task, or the date on which the task should be achieved.
  • the display order determination unit 16 may acquire these evaluation measures based on the additional information acquired by the additional information acquisition unit 20.
  • the task list generation unit 17 may generate task list information so that only task locations corresponding to common tag information are included in the task list. For example, when the user selects one tag information among the plurality of tag information, a task list including a plurality of task locations corresponding to the selected tag information is displayed. In this case, the user can easily grasp a plurality of problem locations having a common problem.
  • the user can select one task location from the task list by operating the input device 160 of FIG. In this case, the entire task score corresponding to the selected task location is displayed on the display device 150. The user can practice the task part while viewing the displayed task score.
  • the additional information acquisition unit 20 may count the selected number of times for each task location as the number of exercises already performed, and acquire it as additional information.
  • next button and “Prev” button may be displayed together with the task score so that the displayed task score can be easily switched.
  • the task score corresponding to the next task location is displayed in the order of the task list or the order of the original score.
  • the task score corresponding to the previous task location is displayed in the order of the task list or the order of the original score.
  • Performance information is acquired by the performance information acquisition unit 19 shown in FIG. 1 during the period in which the task score is displayed, and based on the performance information, the displayed task score automatically follows the performance by the user. It may be switched. For example, when the task score to be displayed covers a plurality of pages, the page of the task score to be displayed may be automatically switched so as to follow the performance of the user. In addition, when the user practices a plurality of task locations in succession, the displayed task score may be automatically switched to follow the user's performance.
  • the performance corresponding to the displayed task score or its accompaniment may be output by the output device 170 of FIG.
  • These performances or accompaniments may be recorded in advance or may be generated based on score information.
  • the user can practice the task part while listening to the output performance or accompaniment.
  • performance information is acquired by the performance information acquisition unit 19 of FIG. 1, and based on the performance information, the start and end times of the output performance or accompaniment, the speed, and the like follow the performance by the user. It may be adjusted.
  • the performance or accompaniment of the task part may be repeatedly output. For example, the performance or accompaniment may be repeatedly output for the number of unpracticed times.
  • FIG. 8 is a diagram illustrating an example of a connected score.
  • the task scores D1, D2, and D3 of FIG. 6 are connected.
  • the task scores D2, D3, and D1 are connected in this order according to the display order determined by the display order determination unit 16 of FIG.
  • the display order determination unit 16 of FIG. When the task part includes a repetition symbol, the repetition symbol is not displayed as in the task score D2, and a plurality of measures are displayed in the order to be actually played.
  • additional information such as the difficulty level of each task location or notes on performance may be displayed.
  • the user can practice a plurality of task locations continuously while looking at the displayed linked score. In other words, even if multiple task scores are discrete in the music, they can be listed as a linked score, so when practicing multiple task locations intensively, the user concentrates on the practice without turning the pages. can do.
  • the linked score generation unit 18 may generate linked score information so that only task scores corresponding to common tag information are linked. For example, when a user selects one tag information among a plurality of tag information, a linked score in which a plurality of task scores corresponding to the selected tag information are linked is displayed. The user can continuously practice a plurality of task locations having a common task with reference to the displayed connected score.
  • FIG. 9 is a flowchart of assignment management processing (that is, music performance support processing) performed by the music performance support device 100 of FIG.
  • the task management process in FIG. 9 is performed by the CPU 110 in FIG. 2 executing a task management program stored in the ROM 120.
  • the score acquisition unit 11 acquires score information of a song (step S1).
  • the task location setting unit 13 sets a plurality of task locations in the music (step S2).
  • the setting of the task location may be performed based on the operation of the input device 160, may be performed based on the score information and the performance information, or based on information of other plural users. It may be performed based on analysis of musical score information.
  • the task score acquisition unit 14 acquires task score information corresponding to the plurality of task locations set in step S2 based on the score information acquired by the score acquisition unit 11 (step S3).
  • the additional information acquisition unit 20 acquires additional information (step S4).
  • the acquisition of additional information may be performed based on the operation of the input device 160, may be performed based on analysis of musical score information, or may be performed based on performance information and musical score information. It may be performed based on information of other users.
  • the display order determination unit 16 determines the display order of the plurality of task scores represented by the task score information acquired in step S3 based on the evaluation scale related to the tasks (step S5).
  • the assignment list generation unit 17 determines whether display of the assignment list is requested based on the operation of the input device 160 by the user (step S6). For example, a “task list” button and a “linked score” button are displayed on the display device 150. When the “task list” button is operated, display of the task list is requested, and when the “connected score” button is operated, display of the linked score is requested.
  • the task list generation unit 17 When the display of the task list is requested, the task list generation unit 17 generates task list information based on the task score information acquired in step S3 (step S7). In this case, task list information is generated so that a plurality of task scores are arranged in the display order determined by the display order determining unit 16. Thereafter, the task score display control unit 15 displays a task list on the display device 150 based on the generated task list information (step S8), and the music performance support device 100 ends the task management process.
  • step S6 determines whether display of the connected score is requested based on the operation of the input device 160 by the user (step S9). ). If display of the linked score is not requested, the task list generation unit 17 repeats the process of step S6. When the display of the linked score is requested, the linked score generation unit 18 generates the linked score information based on the task score information acquired in step S3 (step S10). In this case, a plurality of task scores are connected in the display order determined by the display order determination unit 16. Thereafter, the task score display control unit 15 displays a connected score based on the generated linked score information (step S8), and the music performance support device 100 ends the task management process.
  • a plurality of task scores representing a plurality of task locations are displayed side by side as a task list or a connected score, so that the user can select a plurality of task locations. Can be easily grasped. Thereby, the user can practice a plurality of task locations efficiently.
  • the display order of a plurality of task scores is determined based on the evaluation scale related to the task, and the plurality of task scores are displayed in the determined display order.
  • the user can grasp
  • the efficiency of practice is improved.
  • the present invention can be effectively used for managing tasks for practicing the performance of music.
  • FIG. 10 is a diagram illustrating another display example of additional information.
  • the display device 150 and the input device 160 are touch panels.
  • the score display control unit 12 in FIG. 1 displays the original score on the touch panel.
  • Stamp buttons SB1, SB2, SB3, and SB4 are displayed so as to overlap the original score.
  • stamp buttons SB1, SB2, SB3, and SB4 are each displayed transparently on the original score.
  • the stamp buttons SB1, SB2, SB3, and SB4 have different colors and correspond to different additional information.
  • the stamp button SB1 corresponds to additional information that the musical score has not been completed
  • the stamp button SB2 corresponds to additional information that the pitch is shifted
  • the stamp button SB3 is insufficiently expressed.
  • the stamp button SB4 corresponds to additional information indicating that there is another problem.
  • Each stamp button is assigned a character string that simply represents the corresponding additional information. Specifically, character strings “musical notation”, “pitch”, “expression”, and “others” are displayed so as to overlap the stamp buttons SB1, SB2, SB3, and SB4, respectively.
  • the number of stamp buttons is not limited to four, and may be three or less or five or more. Further, the user may be able to arbitrarily set the number of stamp buttons. Further, the additional information corresponding to each stamp button may be determined in advance or may be arbitrarily set by the user.
  • the plurality of stamp buttons may have different patterns or may have different shapes.
  • a cursor CS for designating a position in the original score is displayed. For example, when the user performs a drag operation, the cursor CS can be moved to a desired position on the original score. Also, a performance corresponding to the original score may be output based on previously stored (recorded) audio information, and the cursor CS may be moved following the performance output to indicate the performance location.
  • a stamp corresponding to the operated stamp button is displayed at the position of the original score designated by the cursor CS.
  • a stamp ST1 corresponding to the stamp button SB1 and stamps ST2 and ST3 corresponding to the stamp button SB4 are displayed on the original score.
  • Each stamp has the same color as the corresponding stamp button.
  • the stamp ST1 has the same color as the stamp button SB1
  • the stamps ST2 and ST3 have the same color as the stamp button SB4.
  • the user can intuitively grasp the additional information by looking at the stamp displayed on the original score.
  • each stamp may have the same pattern as the corresponding stamp button.
  • each stamp may have the same shape as the corresponding stamp button.
  • the additional information acquisition unit 20 in FIG. 1 acquires additional information corresponding to the operated stamp button.
  • the additional information may be acquired as tag information such as “musical notation” and “pitch”.
  • the task location setting unit 13 may set the location of the original score including the stamp as the task location, for example, in units of measures.
  • the user When the cursor CS is moved following the performance output, the user operates the stamp button while listening to the output performance.
  • the user's performance may be stored as audio information, and the stamp button may be operated while the performance is output.
  • the user or the instructor can recognize various problems such as a tempo shift or insufficient expression based on the output performance. When such a problem is recognized, an appropriate stamp can be displayed efficiently by operating the corresponding stamp button.
  • the stamp button When the stamp button is operated while the performance is being output, the stamp button is operated after the position where the stamp should be displayed is audibly recognized. Therefore, the cursor CS displays the stamp when the stamp button is operated. There is a high possibility that a location after the location to be specified is specified. For this reason, when the stamp button is operated while the performance is being output, the stamp is displayed at the position designated by the cursor CS at a certain time (for example, 2 seconds) before the stamp button is operated. Also good.
  • weighting can be performed for each stamp. Specifically, when a common stamp button is operated a plurality of times for a common location, the weight of the corresponding stamp increases by the number of operations. Also, the larger the weight, the larger the stamp displayed. In the example of FIG. 10, the weight of the stamp ST2 is larger than the weight of the stamps ST1 and ST3. Therefore, the stamp ST2 is larger than the stamps ST1 and ST3. When different stamp buttons are operated with respect to a common location, different stamps are displayed, and weights are individually set for each stamp.
  • the additional information acquisition unit 20 in FIG. 1 may determine the importance level or the number of unpractices of each task location based on the number of stamps displayed in each task location. You may determine the importance of each task location, the number of unpractices, etc. based on a number and weight.
  • the display order determination unit 16 in FIG. 1 may determine the display order of a plurality of task scores based on the number of stamps displayed at each task location, and the number of stamps displayed at each task location and The display order of a plurality of task scores may be determined based on the weight.
  • the stamp weight is represented by a numerical value of “1” to “5”, and the stamp weight is converted into the number of stamps based on the numerical value. For example, the case where there are four stamps with a weight of “1”, the case where there are two stamps with a weight of “2”, and the case of one stamp with a weight of “4” are treated equally.
  • stamp buttons SB1, SB2, SB3, and SB4 are selectively operated to display stamps corresponding to the four tasks, but other methods correspond to a plurality of tasks.
  • Each stamp may be displayed.
  • a plurality of issues are associated with a plurality of directions (for example, up, down, left, and right) on the touch panel.
  • the user performs an operation (flick operation) of quickly sliding a finger in any one of the plurality of directions on the touch panel.
  • the task is determined based on the sliding direction of the finger, and a stamp corresponding to the task is displayed.
  • a stamp is displayed at a location designated by the cursor CS, but a bar, part, note or rest is arbitrarily designated by a tap operation or the like, and a stamp is displayed at the designated location. May be.
  • a stamp is displayed on the original score, but in the same manner, a stamp may be displayed on the task score, or a stamp may be displayed on the connected score.
  • a plurality of task scores are displayed in the display order determined based on the evaluation scale related to tasks, but the present invention is not limited to this.
  • a plurality of task scores may be displayed according to the order in the original score, or a plurality of task scores may be displayed in the date order set as the task score.
  • the task location is set in units of measures, but the present invention is not limited to this.
  • the task part may be set in units of score, the task part may be set in beats of the score, or the task part may be set in notes of the score.
  • a plurality of task locations are set for one piece of music, but a plurality of task locations may be set for a plurality of songs.
  • a music title may be acquired as tag information, and an assignment list or a linked score may be displayed for each music piece based on the tag information.
  • a server device existing on the communication network may function as the music performance support device 100, and the server device may perform a task management process (that is, a music performance support process).
  • a task management process that is, a music performance support process
  • an assignment management program that is, a music performance support program
  • the task management process music performance support process
  • the assignment management program (music performance support program) is not limited to the above example.
  • the task management program (music performance support program) sets a plurality of locations in one piece of music that the user should practice as task locations, and issues a score that represents at least a part of each set task location.
  • the computer executes the acquisition as a musical score and the display on the display device in a state where two or more of the acquired plural musical scores are arranged.
  • the problem management program (music performance support program) may be provided in a state of being stored in various non-transitory computer-readable recording media such as a digital versatile disk (DVD), a flash memory, and a memory card. Good.
  • music performance support device may be provided in a state of being stored in various non-transitory computer-readable recording media such as a digital versatile disk (DVD), a flash memory, and a memory card. Good.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Auxiliary Devices For Music (AREA)
  • Electrophonic Musical Instruments (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

 楽譜取得部11は、使用者が練習すべき1つの楽曲の楽譜を表す楽譜情報を取得する。課題箇所設定部13は、前記楽曲中の複数の箇所をそれぞれ課題箇所として設定する。課題楽譜取得部14は、楽譜取得部11により取得された楽譜情報に基づいて、課題箇所設定部13により設定された各課題箇所の楽譜を表す課題楽譜情報を取得する。課題楽譜表示制御部15は、課題楽譜取得部14により取得された課題楽譜情報に基づいて複数の課題楽譜の2以上を並べた状態で、表示装置に表示させるよう制御する。これにより、使用者が複数の課題箇所を容易に把握することが可能となる。

Description

音楽演奏支援装置及び方法
 本発明は、楽器演奏及び歌唱演奏を含む音楽演奏についての使用者の課題を管理し、該使用者による課題練習を支援する音楽演奏支援装置及び方法に関する。
 楽曲の演奏の練習時には、例えば、練習者またはその指導者が、演奏上の課題および演奏解釈等の種々の情報を楽譜に記入する。しかしながら、楽譜に記入される情報の量が増加すると、それらの情報の整理が困難になり、練習効率が低下する要因ともなる。例えば、練習者が、楽曲において課題となる箇所を把握できない場合がある。
 特許文献1に記載される音楽教習システムにおいては、練習者の要望および演奏技術等に基づいて、練習の計画および練習の結果を表す練習計画データが生成される。使用者は、練習計画データに従って楽曲の演奏を練習することができる。
特開2004-287457号公報
 しかしながら、上記特許文献1の音楽教習システムにおいては、課題箇所が複数ある場合に、使用者がその複数の課題箇所を容易に把握することはできない。
 本発明の目的は、使用者が複数の課題箇所を容易に把握することが可能な音楽演奏支援装置及び方法を提供することである。
 上記目的を達成するために、本発明に係る音楽演奏支援装置は、表示装置と、処理装置とを備え、前記処理装置が、使用者が練習すべき1つの楽曲中の複数の箇所をそれぞれ課題箇所として設定する課題箇所設定部と、前記課題箇所設定部により設定された各課題箇所の少なくとも一部を表す楽譜を課題楽譜として取得する課題楽譜取得部と、前記課題楽譜取得部により取得された複数の課題楽譜の2以上を並べた状態で前記表示装置に表示させる表示制御部、として機能するように構成されてなる。
 これによれば、楽曲において課題となる複数の箇所がそれぞれ課題箇所として設定され、その複数の課題箇所を表す複数の課題楽譜が並べて表示されるので、使用者は、複数の課題箇所を容易に把握することができる。それにより、使用者が複数の課題箇所を効率良く練習することができる。例えば、複数の課題楽譜が全楽譜中において離散している場合、これらの複数の課題楽譜を並べて1頁内にまとめて表示することができるので、課題箇所のみを練習する場合に、使用者は譜めくり操作をする必要がない。
 実施例において、前記処理装置は、前記複数の課題箇所のそれぞれに関する評価尺度に基づいて、前記複数の課題箇所に対応する前記複数の課題楽譜の表示順を決定する表示順決定部として更に機能するように構成されてよく、前記表示制御部は、前記表示順決定部により決定された表示順で前記複数の課題楽譜を前記表示装置に表示させるようにしてよい。
 この場合、例えば重要度または難易度等の評価尺度に基づいて、複数の課題箇所の表示順が調整されるので、使用者が、練習すべき課題箇所の順番等を容易に把握することができる。それにより、練習の効率が向上される。
 実施例において、前記処理装置は、前記複数の課題楽譜の2以上が連結された連結楽譜を生成する連結楽譜生成部として更に機能するように構成されてよく、前記表示制御部は、前記連結楽譜生成部により生成された前記連結楽譜を前記表示装置に表示させるようにしてよい。
 この場合、使用者は、表示された連結楽譜を見ながら複数の課題箇所を連続的に練習することができる。それにより、練習の効率が向上される。
 実施例において、前記処理装置は、前記使用者が行った前記楽曲の演奏を示す演奏情報を取得する演奏情報取得部として更に機能するように構成されてよく、前記課題箇所設定部は、前記演奏情報取得部により取得された演奏情報に基づいて、前記楽曲の全体楽譜の中から前記課題箇所を設定するようにしてよい。
 この場合、演奏情報は使用者による実際の演奏を表すので、その演奏情報および楽曲の楽譜に基づいて、楽譜通りに演奏されていない箇所を課題箇所として設定することができる。それにより、使用者が演奏上の課題を認識することができ、効率良く課題箇所を練習することができる。
 実施例において、前記処理装置は、前記課題箇所設定部により設定された少なくとも1つの課題箇所に関して、付加情報を取得する付加情報取得部として更に機能するように構成されてよく、前記表示制御部は、前記付加情報を、対応する前記課題楽譜とともに、前記表示装置に表示させるようにしてよい。
 この場合、例えば難易度、重要度または課題の内容等の付加情報が課題楽譜とともに表示され得るので、使用者は、練習時にこれらの付加情報を認識することができる。それにより、練習効率が向上される。
 実施例において、前記表示制御部は、表示すべき前記付加情報の内容を象徴する図形イメージを、対応する前記課題楽譜とともに、前記表示装置に表示させてよい。これにより、使用者は、表示された付加情報の内容を一瞥して容易に把握することができる。
 実施例において、前記付加情報取得部は、前記付加情報の複数の異なるタイプを象徴する複数タイプの図形イメージを前記表示装置に表示させ、使用者が前記複数タイプの図形イメージのいずれかを選択することに応じて、該選択された図形イメージに対応するタイプの前記付加情報を取得するようにしてよい。これにより、使用者は、所望の付加情報の入力を容易に行うことができる。
 本発明は、上述したような装置の発明のみならず方法の発明としても構成され具体化され得る。また、本発明は、コンピュータ又はDSP(デジタル信号処理器)のようなプロセッサによって実行可能なソフトウェアプログラムとして、また、そのようなソフトウェアプログラムを記憶した非一過性のコンピュータ読み取り可能な記憶媒体としても、構成され具体化され得る。その場合、該プログラムは該記憶媒体内においてユーザに提供され、それから該ユーザのコンピュータ内にインストールされるか、若しくは、サーバ装置から通信ネットワークを介してクライアントのコンピュータに配信され、それから該クライアントのコンピュータ内にインストールされるようになっていてよい。更に、本発明において使用されるプロセッサとは、任意のソフトウェアプログラムを起動させることができるコンピュータ又はその他の汎用プロセッサのみを言うのではなく、ハードウェアで組み立てられた専用ロジック回路を具備した専用プロセッサであってもよい。
本実施の形態に係る音楽演奏支援装置の構成を示す機能ブロック図である。 図1の音楽演奏支援装置のハードウエア構成の一例を示すブロック図である。 課題箇所の設定例について説明するための図である。 入力装置の操作に基づく課題箇所の設定について説明するための図である。 マーキング画像の例を示す図である。 課題楽譜の例を示す図である。 課題リストの例を示す図である。 連結楽譜の例を示す図である。 図1の音楽演奏支援装置により行われる課題管理処理のフローチャートである。 付加情報の他の表示例を示す図である。
 以下、本発明の一実施の形態に係る音楽演奏支援装置について図面を用いて説明する。以下の説明において、演奏とは、各種楽器の演奏に限らず、歌唱も含む。
 (1)音楽演奏支援装置の構成
 図1は、本実施の形態に係る音楽演奏支援装置の構成を示す機能ブロック図である。図1の音楽演奏支援装置100は、楽譜取得部11、楽譜表示制御部12、課題箇所設定部13、課題楽譜取得部14、課題楽譜表示制御部15、表示順決定部16、課題リスト生成部17、連結楽譜生成部18、演奏情報取得部19および付加情報取得部20を備える。
 楽譜取得部11は、楽曲の楽譜(以下、原楽譜と呼ぶ)を表す楽譜情報を取得する。楽譜情報は、楽曲のテンポ、調号、拍子ならびに各音の高さ(音高)および長さ(音価)等の原楽譜に示される種々の情報を含む。楽譜情報は、インターネット等のコンピュータネットワークを介して取得されてもよく、CD(コンパクトディスク)等の記録メディアを介して取得されてもよい。楽譜表示制御部12は、楽譜取得部11により取得された楽譜情報に基づいて原楽譜を表示する。
 課題箇所設定部13は、使用者が練習すべき1つの楽曲中の複数の箇所をそれぞれ課題箇所として設定する。課題箇所の設定は、使用者による入力操作に基づいて行われてもよく、あるいは、楽譜情報の解析に基づいて自動的に行われてもよく、あるいは、コンピュータネットワークを介して取得される情報に基づいて行われてもよい(例えば任意の課題箇所を設定する情報を通信ネットワークを介して受信する)。また、後述の演奏情報取得部19により取得される演奏情報に基づいて課題箇所が設定されてもよい。
 課題楽譜取得部14は、楽譜取得部11により取得された楽譜情報に基づいて、課題箇所設定部13により設定された各課題箇所の少なくとも一部を表す楽譜を課題楽譜として取得する。課題楽譜表示制御部15は、課題楽譜取得部14により取得された課題楽譜を示す情報に基づいて複数の課題楽譜を表示画面上に並べて表示するよう制御する。
 表示順決定部16は、上記複数の課題箇所のそれぞれに関する評価尺度に基づいて、該複数の課題箇所に対応する前記複数の課題楽譜の表示順を決定する。評価尺度は、例えば予め定められた複数の条件の中から使用者により選択される。課題リスト生成部17は、課題楽譜取得部14により取得された課題楽譜情報に基づいて、課題リストを表す課題リスト情報を生成する。課題リストは、複数の課題楽譜を含む。本例では、表示順決定部16により決定された表示順で複数の課題楽譜が配置される。また、後述の付加情報が課題リストに含まれてもよい。
 連結楽譜生成部18は、課題楽譜取得部14により取得された課題楽譜を示す情報に基づいて、前記複数の課題楽譜の2以上が連結された楽譜(以下、連結楽譜と呼ぶ)を表す連結楽譜情報を生成する。本例では、表示順決定部16により決定された表示順で複数の課題楽譜が連結される。
 演奏情報取得部19は、使用者が行った実際の楽曲の演奏を示す演奏情報を取得する。例えば、使用者による演奏の音がマイクを介して入力されることにより演奏情報が取得される。また、使用者が電子楽器を用いて楽曲の演奏を行い、その電子楽器の操作情報が入力されることにより演奏情報が取得されてもよい。
 付加情報取得部20は、課題箇所設定部13により設定された少なくとも1つの課題箇所に関する付加情報を取得する。付加情報は、例えば、難易度、重要度、設定日、既に練習した回数(以下、既練習回数と呼ぶ)、今後練習すべき回数(以下、未練習回数と呼ぶ)、既に練習した時間(以下、既練習時間と呼ぶ)、今後練習すべき時間(以下、未練習時間と呼ぶ)、演奏上の注意点、課題の達成状況、および課題を達成すべき期日等を含む。また、付加情報は、後述のタグ情報を含んでもよい。付加情報は、文字情報として取得されてもよく、音声情報として取得されてもよい。また、付加情報は、使用者によって入力されることにより取得されてもよく、楽譜情報の解析に基づいて取得されてもよく、演奏情報取得部19により取得される演奏情報に基づいて取得されてもよい。付加情報取得部20により取得された付加情報は、表示順決定部16および課題リスト生成部17に与えられる。
 図2は、図1の音楽演奏支援装置100のハードウエア構成の一例を示すブロック図である。音楽演奏支援装置100は、例えば、パーソナルコンピュータ、タブレット端末または携帯電話からなる。音楽演奏支援装置100は、CPU(中央演算処理装置)110、ROM(リードオンリメモリ)120、RAM(ランダムアクセスメモリ)130、記憶装置140、表示装置150、入力装置160および出力装置170を含む。
 ROM120は、例えば不揮発性メモリからなり、システムプログラムおよび課題管理プログラム等のコンピュータプログラムを記憶する。RAM130は、例えば揮発性メモリからなり、CPU110の作業領域として用いられるとともに、各種データを一時的に記憶する。CPU110は、ROM120に記憶された課題管理プログラム(すなわち音楽演奏支援プログラム)をRAM130上で実行することにより後述の課題管理処理(すなわち音楽演奏支援処理)を行う。このように、CPU110が所要のプログラムを実行することにより、図1の各構成要素の機能が実現される。
 記憶装置140は、ハードディスク、光学ディスク、磁気ディスクまたはメモリカード等の記録媒体(メモリ)を含む。記憶装置140には、例えば、図1の楽譜取得部11により取得された楽譜情報、課題楽譜取得部14により取得された課題楽譜情報、演奏情報取得部19により取得された演奏情報、および付加情報取得部20により取得された付加情報が記憶される。また、上記の課題管理プログラムが記憶装置140に記憶されてもよい。
 表示装置150は、液晶表示装置、有機EL(エレクトロルミネッセンス)表示装置またはプラズマディスプレイ装置等からなる。図1の楽譜表示制御部12および課題楽譜表示制御部15は、表示装置150の画面上に原楽譜および複数の課題楽譜を表示するよう制御する。複数の課題楽譜は、課題リストとして表示されてもよく、連結楽譜として表示されてもよい。
 入力装置160は、マウスおよびキーボード等を含む。使用者は、入力装置160を操作することにより、課題箇所の設定および付加情報の入力等を行うことができる。入力装置160は、マイクまたは電子楽器を含んでもよい。この場合、マイクまたは電子楽器を用いて演奏情報を入力することができる。また、表示装置150および入力装置160がタッチパネルディスプレイ(以下、タッチパネルと略記する)として一体化されてもよい。出力装置170は、音響出力端子およびヘッドフォン等を含む。また、出力装置170がスピーカを含んでもよい。
 音楽演奏支援装置100は、CPU110の代わりにDSP(Digital Signal Processor)を備えてもよく、またはCPU110に加えてDSPを備えてもよい。また、図1の各構成要素の一部または全てが電子回路等のハードウエアにより構成されてもよい。
 (2)課題箇所の設定
 図3は、課題箇所の設定例について説明するための図である。図3には、ピアノ用の原楽譜の例が示される。本例では、小節単位で課題箇所が設定され、演奏上で連続する1又は複数の小節が一の課題箇所として設定される。図3の例では、小節範囲P1,P2,P3,P4,P5が、それぞれ課題箇所の対象である。小節範囲P1の始点、および小節範囲P3の終点には反復記号が付され、演奏上で小節範囲P3と小節範囲P1とは連続する。そのため、小節範囲P3,P1は、共通の課題箇所として設定される。また、小節範囲P4と小節範囲P5とは、原楽譜において異なる段に位置するが、演奏上で連続する。そのため、小節範囲P4,P5は、共通の課題箇所として設定される。なお、演奏上で連続する複数の小節範囲であっても、後述のように、これらが別個の課題箇所として設定されてもよい。
 (2-1)入力装置の操作に基づく設定
 図1の課題箇所設定部13は、例えば、入力装置160の操作に基づいて課題箇所を設定する。入力装置160の操作に基づく課題箇所の設定について、表示装置150および入力装置160がタッチパネルからなる場合を例に説明する。本例では、タッチパネル上に原楽譜が表示される状態で、使用者によりタッチパネルが操作されることにより、課題箇所が設定される。
 図4は、入力装置160の操作に基づく課題箇所の設定について説明するための図である。図4の例では、図3の小節範囲P4,P5が課題箇所として設定される。例えば、図4(a)に示すように、タッチパネル上において、該当箇所の始点から終点までを指でなぞる操作(ドラッグ操作)が行われることにより、課題箇所が設定されてもよい。あるいは、図4(b)に示すように、タッチパネル上において、該当箇所の始点SPおよび終点EPに順に指で触れる操作(タップ操作)が行われることにより、課題箇所が設定されてもよい。これらのドラッグ操作およびタップ操作は、指の代わりにタッチペンを用いて行われてもよい。
 なお、表示装置150と入力装置160とが別個に設けられ、入力装置160がマウスを含む場合にも、上記と同様の操作によって課題箇所を設定することができる。この場合、ドラッグ操作として、マウスのボタンが押下されつつ、表示装置150上のポインターが課題箇所の始点から終点まで移動するように、マウスが移動される。また、タップ操作の代わりに、課題箇所の始点および終点にポインターが位置する状態で、マウスのボタンが押下される操作(クリック操作)が行われる。
 上記のような操作で課題箇所が設定される場合、小節範囲の指定順によって、複数の小節範囲が共通の課題箇所として設定されるかまたは別個の課題箇所として設定されるかが決定されてもよい。例えば、連続する複数の小節が、演奏上の順番と同じ順番で指定された場合、それらの複数の小節が共通の課題箇所として設定される。一方、連続する複数の小節が、演奏上の順番と異なる順番で指定された場合、それらの複数の小節が別個の課題箇所として設定される。
 具体的には、図3の例において、小節範囲P3が指定された後に小節範囲P1が指定された場合、小節範囲P1,P3が共通の課題箇所として設定され、小節範囲P1が指定された後に小節範囲P3が指定された場合、小節範囲P1,P3が別個の課題箇所として設定される。また、小節範囲P4が指定された後に小節範囲P5が指定された場合、小節範囲P4,P5が共通の課題箇所として設定され、小節範囲P5が指定された後に小節範囲P4が指定された場合、小節範囲P4,P5が別個の課題箇所として設定される。
 また、連続する複数の小節のうち、一部の小節範囲が指定されてから他の小節範囲が指定されるまでの間に一定時間(例えば、3分)が経過した場合、これらが別個の課題箇所として設定されてもよい。具体的には、図3の例において、小節範囲P3が指定されてから小節範囲P1が指定されるまでの間に一定時間が経過した場合、小節範囲P1,P3が別個の課題箇所として設定されてもよい。同様に、小節範囲P4が指定されてから小節範囲P5が指定されるまでの間に一定時間が経過した場合、小節範囲P4,P5が別個の課題箇所として設定されてもよい。
 使用者が課題箇所を容易に認識することができるように、課題箇所として設定された小節範囲には、特定のマーク等を表す画像(以下、マーキング画像と呼ぶ)が表示されてもよい。例えば、ドラッグ操作で課題箇所が設定される場合、指またはタッチペンの軌跡を表すように、蛍光ペン等のマーカーの描線がマーキング画像として表示されてもよい。マーキング画像の色は、設定日、重要度、既練習回数、未練習回数または課題の達成状況等によって異なってもよい。
 図5は、マーキング画像の例を示す図である。図5の例では、小節範囲P1,P2,P3,P4,P5に重なるようにマーキング画像M1,M2,M3,M4,M5がそれぞれ表示される。マーキング画像M1~M5は、それぞれマーカーの描線を表す。複数のマーキング画像が共通の課題箇所に対応する場合、その複数のマーキング画像は同じ色を有する。具体的には、マーキング画像M1,M3は同じ色を有し、マーキング画像M4,M5は、同じ色を有する。また、本例では、マーキング画像M1,M3の色と、マーキング画像M2の色と、マーキング画像M4,M5の色とが互いに異なる。
 図5の例では、原楽譜とともに、複数の課題箇所の位置を模式的に表す課題位置表示画像PIが表示される。課題位置表示画像PIは長尺形状を有し、楽曲の全範囲を一方向に表す。課題位置表示画像PIの一端は、楽曲の始点に対応し、他端は、楽曲の終点に対応する。課題位置表示画像PIにおいて、課題箇所に対応する部分が、課題箇所でない部分と異なる色で表される。本例では、各課題箇所に対応する部分が、その課題箇所に対応するマーキング画像と同じ色で表される。これにより、使用者は、各課題箇所の位置を容易に把握することができる。
 (2-2)楽譜情報および演奏情報に基づく設定
 課題箇所設定部13は、楽譜情報および演奏情報に基づいて課題箇所を自動的に設定してもよい。上記のように、楽譜情報は、原楽譜に示される種々の情報を含む。一方、演奏情報は、使用者による実際の演奏を表す。楽譜情報と演奏情報とを比較することにより、使用者の演奏上の課題を把握することができる。
 例えば、楽譜情報により表される原楽譜のテンポと演奏情報により表される実際の演奏のテンポとが比較され、いずれかの箇所で、テンポのずれ量が規定値以上となる場合、または一定時間以上継続してテンポがずれる場合、その箇所が課題箇所として設定される。また、楽譜情報により表される原楽譜の音高と演奏情報により表される実際の演奏の音高とが比較され、いずれかの箇所で、音高のずれ量が規定値以上となる場合、または一定時間以上継続して音高がずれる場合、その箇所が課題箇所として設定される。また、ミスタッチ等の演奏ミスが生じた箇所が、課題箇所として設定されてもよい。さらに、反復して演奏すべきでない(反復記号がない)箇所で反復して演奏された場合、その箇所が課題箇所として設定されてもよい。あるいは、反復して演奏すべきでない箇所で反復して演奏された場合において、反復の回数が規定値を超えた場合に、その箇所が課題箇所として設定されてもよい。
 このような楽譜情報および演奏情報に基づく課題箇所の設定は、使用者による演奏時(演奏情報の取得時)にリアルタイムで行われてもよく、使用者による演奏後に行われてもよい。また、複数回の演奏が演奏情報として取得され、その演奏情報に基づいて課題箇所が設定されてもよい。例えば、同一の箇所において、上記のようなテンポもしくは音高のずれ、または演奏ミス等の課題とすべき事象が規定回数以上生じた場合に、その箇所が課題箇所として設定されてもよい。
 (2-3)他の設定例
 課題箇所設定部13は、他の複数の使用者の情報に基づいて、統計学的に課題箇所を設定してもよい。例えば、コンピュータネットワークを介して、他の複数の使用者の課題箇所に関する情報が取得される。取得された情報に基づいて、一定数以上の使用者が課題箇所としている小節範囲を特定し、該特定した小節範囲を課題箇所として設定するようにしてよい。また、他の使用者が課題箇所としている小節範囲をそれぞれ抽出し、それら抽出した小節範囲の各々に関して、課題箇所としている人数を例えばヒストグラムとして表示装置150により表示されるようにしてもよい。この場合、本使用者が、表示されたヒストグラムの内容を参照して課題箇所を決定することができる。
 課題箇所設定部13は、楽譜情報を解析することによって課題箇所を設定してもよい。例えば、原楽譜におけるテンポおよび音符に基づいて、一定時間内に演奏すべき音符の数が規定値以上となる箇所が、課題箇所として設定されてもよい。また、一定時間内に演奏すべき音域が規定値より広い箇所が、課題箇所として設定されてもよい。
 (3)付加情報の取得例
 図1の付加情報取得部20は、例えば、入力装置160の操作に基づいて付加情報を取得する。例えば、使用者がタッチペンを用いてタッチパネル上に課題箇所に関する演奏上の注意点等を書き込むことにより、その書き込みが付加情報として取得される。また、使用者がキーボードを操作して課題箇所に関する文字情報を入力することにより、その文字情報が付加情報として取得されてもよい。
 付加情報取得部20は、楽譜情報を解析することにより、課題箇所の難易度を付加情報として取得してもよい。例えば、原楽譜におけるテンポおよび音符に基づき、各課題箇所に関して、一定時間内に演奏すべき音符の数が算出される。算出された音符の数に基づいて、各課題箇所の難易度が決定される。難易度は例えば"1"から"5"までの数値で表され、数値が大きいほど難易度が高い。また、各課題箇所に関して、原楽譜におけるテンポが速いほど、難易度が高く設定されてもよく、原楽譜における音域が広いほど、難易度が高く設定されてもよい。また、楽譜情報に基づいて、楽曲自体の難易度が決定されてもよい。例えば、楽曲の全体に関して、一定時間内に演奏すべき音符の数が算出され、算出される数の最大値または平均値等に基づいて、楽曲の難易度が決定されてもよい。
 また、付加情報取得部20は、演奏情報取得部19により取得される演奏情報に基づいて、既練習回数(既に練習した回数)または既練習時間(既に練習した時間)を付加情報として取得してもよい。具体的には、取得された演奏情報に基づいて、演奏された課題箇所が特定される。それにより、各課題箇所の既練習回数をカウントすることができる。また、各課題箇所の既練習時間を計測することができる。したがって、各課題箇所の既練習回数または既練習時間を取得することができる。
 また、付加情報取得部20は、図1の楽譜取得部11により取得される楽譜情報および演奏情報取得部19により取得される演奏情報に基づいて、未練習回数(今後練習すべき回数)または未練習時間(今後練習すべき時間)を付加情報として取得してもよい。例えば、各課題箇所に関して、楽譜情報により表される原楽譜と演奏情報により表される実際の演奏とが比較され、原楽譜と実際の演奏とのずれ量を表すパラメータが算出される。算出されるパラメータが大きいほど、その課題箇所の未練習回数が多く、またはその課題箇所の未練習時間が長く設定される。また、付加情報取得部20は、現時点から課題を達成すべき期日までの残り日数または残り時間を算出し、その算出結果に基づいて未練習回数または未練習時間を設定してもよい。
 また、付加情報取得部20は、図1の楽譜取得部11により取得される楽譜情報および演奏情報取得部19により取得される演奏情報に基づいて、課題の達成状況を取得してもよい。例えば、上記のように、各課題箇所に関して原楽譜と実際の演奏とのずれ量を表すパラメータが算出され、そのパラメータが規定値より小さい場合、その課題箇所の課題が達成されたと判定されてもよい。
 また、付加情報取得部20は、他の複数の使用者と共通の付加情報を取得してもよい。例えば、コンピュータネットワークを介して、各課題箇所に関する他の複数の使用者の付加情報が取得される。共通の課題箇所に関して、他の複数の使用者の付加情報が互いに異なる場合、最も多くの使用者の付加情報が代表的に取得されてもよい。また、上記のように、他の複数の使用者の情報に基づいて課題箇所が設定される場合、その課題箇所に関して他の複数の使用者の付加情報が同時に取得されてもよい。
 付加情報取得部20は、付加情報として音声情報を取得してもよい。この場合、図2の入力装置160がマイクを含んでもよい。音声情報はオーディオデータに相当し、例えば使用者が発する言葉が音声情報として取得される。例えば、図2の入力装置160の操作に基づいて課題箇所が設定される場合、各課題箇所を設定するための操作が開始された時点で、その課題箇所に対応する音声情報の取得(録音)が開始され、その操作の後に一定時間が経過した時点で、音声情報の取得が停止される。また、次の課題箇所を設定するための操作が行われた時点で、前の課題箇所に対応する音声情報の取得が停止され、次の課題箇所に対応する音声情報の取得が開始されてもよい。また、音声情報は、使用者または指導者による演奏のオーディオデータであってもよく、コンピュータネットワークまたは記録メディア等を介して取得される演奏のオーディオデータであってもよい。
 また、音声情報の取得が、音楽演奏支援装置100の動作中に継続的に行われ、取得された音声情報のうち、各課題箇所に対応する必要な部分のみが保存されてもよい。例えば、各課題箇所を設定するための操作が開始された時点またはそれより一定時間(例えば5秒)前の時点が、その課題箇所に対応する音声情報の保存開始時点とされる。また、その操作の後に一定時間が経過した時点、または次の課題箇所を設定するための操作が開始された時点が、その課題箇所に対応する音声情報の保存終了時点とされる。
 また、音声情報の取得を開始させる開始ボタンおよび終了させる終了ボタンが表示装置150により表示されてもよい。また、入力装置160のキーボード等に、開始ボタンおよび終了ボタンの機能が割り当てられてもよい。この場合、開始ボタンおよび終了ボタンの操作によって取得された音声情報は、使用者によって選択された課題箇所に対応付けられてもよく、開始ボタンの操作の直前に設定された課題箇所に自動的に対応付けられてもよい。
 また、一の課題箇所に対応するように、複数の音声情報が取得されてもよい。例えば、上記の開始ボタンおよび終了ボタンを用いて、複数の音声情報が取得される。それらの音声情報は、例えば、使用者によって選択された課題箇所に対応付けられる。また、一の課題箇所の設定時または設定後に複数の音声情報が連続して取得された場合、それらの音声情報がその一の課題箇所に自動的に対応付けられてもよい。
 付加情報取得部20は、各課題箇所に関して、課題の種類を表すタグ情報を付加情報として取得してもよい。例えば、譜読みが未了である場合、「譜読み」というタグ情報が取得され、音高、リズムまたはテンポが不安定である場合、「音高」、「リズム」または「テンポ」というタグ情報が取得される。また、表現力が足りない場合、「表現」というタグ情報が取得され、音の粒が揃わない場合、「音の粒」というタグ情報が取得される。
 タグ情報の取得は、使用者による図2の入力装置160の操作に基づいて行われてもよく、図1の楽譜取得部11により取得される楽譜情報および演奏情報取得部19により取得される演奏情報に基づいて、自動的に行われてもよい。例えば、上記のように、楽譜情報と演奏情報との間におけるテンポまたは音高のずれに基づいて課題箇所が設定される場合、その課題箇所に関して「テンポ」または「音高」等のタグ情報が取得されてもよい。
 (4)課題楽譜、課題リストおよび連結楽譜
 図1の課題楽譜取得部14は、複数の課題楽譜を表す課題楽譜情報を取得する。図6は、課題楽譜の例を示す図である。図6の課題楽譜D1は、図3の小節範囲P2に相当し、課題楽譜D2は、図3の小節範囲P3,P1に相当し、課題楽譜D3は、図3の小節範囲P4,P5に相当する。
 図1の課題リスト生成部17は、課題リストを表す課題リスト情報を生成し、課題楽譜表示制御部15は、生成された課題リスト情報に基づいて課題リストを表示装置150に表示させる。図7は、課題リストの例を示す図である。図7の課題リストは、図3の各課題箇所について、課題の達成状況、設定日、小節範囲、課題楽譜、重要度、難易度、タグ情報、未練習回数および既練習回数を示す。本例において、各課題楽譜は、一部の小節範囲を表すサムネイル画像として示される。また、課題リストから各課題箇所を削除するための項目(図7の例では、右端の項目)が設けられる。課題リストには楽曲名が付されてもよい。また、課題リストに表示される項目は、使用者によって適宜選択可能であってもよい。課題リストに種々の付加情報が表示されることにより、使用者は、それらの付加情報を認識して各課題箇所の練習を行うことができる。
 本例では、図1の表示順決定部16により決定される表示順で複数の課題楽譜が配置されるように、課題リスト情報が生成される。本例において、表示順を決定するための評価尺度は、重要度である。図7に示すように、課題楽譜D2に対応する課題箇所の重要度は"5"であり、課題楽譜D3に対応する課題箇所の重要度は"3"であり、課題楽譜D1に対応する課題箇所の重要度は"2"である。それにより、課題楽譜D2、課題楽譜D3および課題楽譜D1がこの順で表示される。
 このように、評価尺度に基づいて複数の課題楽譜が順に表示されることにより、使用者が、練習すべき課題箇所の順番等を容易に把握することができる。それにより、使用者が、複数の課題箇所を効率よく練習することができる。評価尺度は、重要度に限らず、難易度、既練習回数、未練習回数、課題の達成状況、または課題を達成すべき期日等であってもよい。表示順決定部16は、付加情報取得部20により取得される付加情報に基づいてこれらの評価尺度を取得してもよい。
 課題リスト生成部17は、共通のタグ情報に対応する課題箇所のみが課題リストに含まれるように、課題リスト情報を生成してもよい。例えば、使用者が複数のタグ情報のうち一のタグ情報を選択することにより、選択されたタグ情報に対応する複数の課題箇所を含む課題リストが表示される。この場合、使用者は、共通の課題を有する複数の課題箇所を容易に把握することができる。
 使用者は、図2の入力装置160を操作することにより、課題リストから一の課題箇所を選択することができる。この場合、選択された課題箇所に対応する課題楽譜の全体が表示装置150により表示される。使用者は、表示される課題楽譜を見ながらその課題箇所を練習することができる。付加情報取得部20は、各課題箇所に関して、選択された回数を既練習回数としてカウントし、付加情報として取得してもよい。
 表示される課題楽譜を容易に切り替えることができるように、課題楽譜とともに、「Next(次へ)」ボタンおよび「Prev(前へ)」ボタンが表示されてもよい。この場合、「Next」ボタンが操作されることにより、課題リストの順または原楽譜の順で次の課題箇所に対応する課題楽譜が表示される。また、「Prev」ボタンが操作されることにより、課題リストの順または原楽譜の順で前の課題箇所に対応する課題楽譜が表示される。
 課題楽譜が表示されている期間に、図1の演奏情報取得部19により演奏情報が取得され、その演奏情報に基づいて、表示される課題楽譜が使用者による演奏に追従するように自動的に切り替えられてもよい。例えば、表示すべき課題楽譜が複数頁に及ぶ場合、表示される課題楽譜の頁が使用者の演奏に追従するように自動的に切り替えられてもよい。また、使用者が複数の課題箇所を連続して練習する場合、表示される課題楽譜が、使用者の演奏に追従するように自動的に切り替えられてもよい。
 また、課題楽譜が表示されている期間に、表示される課題楽譜に対応する演奏またはその伴奏が図2の出力装置170により出力されてもよい。これらの演奏または伴奏は、予め録音されてもよく、楽譜情報に基づいて生成されてもよい。使用者は、出力される演奏または伴奏を聞きながら課題箇所を練習することができる。また、図1の演奏情報取得部19により演奏情報が取得され、その演奏情報に基づいて、出力される演奏または伴奏の開始および終了時点、ならびに速度等が、使用者による演奏に追従するように調整されてもよい。さらに、付加情報として取得される未練習回数に基づいて、課題箇所の演奏または伴奏が繰り返し出力されてもよい。例えば、その未練習回数分、演奏または伴奏が繰り返し出力されてもよい。
 図1の連結楽譜生成部18は、複数の課題楽譜が連結された連結楽譜を表す連結楽譜情報を生成し、課題楽譜表示制御部15は、生成された連結楽譜情報に基づいて連結楽譜を表示装置150に表示させる。連結楽譜情報の生成には、例えば、MusicXML等の論理楽譜フォーマットを用いることができる。図8は、連結楽譜の例を示す図である。図8の例では、図6の課題楽譜D1,D2,D3が連結される。本例では、図1の表示順決定部16により決定された表示順に従い、課題楽譜D2,D3,D1がこの順で連結される。課題箇所に反復記号が含まれる場合には、課題楽譜D2のように、反復記号が表示されず、複数の小節が実際に演奏すべき順で表示される。また、連結楽譜とともに、各課題箇所の難易度または演奏上の注意点等の付加情報が表示されてもよい。使用者は、表示される連結楽譜を見ながら複数の課題箇所を連続的に練習することができる。すなわち、複数の課題楽譜が楽曲中では離散していても、連結楽譜として一覧できるので、複数の課題箇所を集中的に練習する場合に、使用者は譜めくり操作をすることなく、練習に集中することができる。
 連結楽譜生成部18は、共通のタグ情報に対応する課題楽譜のみが連結されるように、連結楽譜情報を生成してもよい。例えば、使用者が複数のタグ情報のうち一のタグ情報を選択することにより、選択されたタグ情報に対応する複数の課題楽譜が連結された連結楽譜が表示される。使用者は、表示された連結楽譜を参照して、共通の課題を有する複数の課題箇所を連続的に練習することができる。
 (5)課題管理処理
 図9は、図1の音楽演奏支援装置100により行われる課題管理処理(すなわち音楽演奏支援処理)のフローチャートである。図9の課題管理処理は、図2のCPU110がROM120に記憶された課題管理プログラムを実行することにより行われる。
 まず、楽譜取得部11が、楽曲の楽譜情報を取得する(ステップS1)。次に、課題箇所設定部13が、楽曲における複数の課題箇所を設定する(ステップS2)。上記のように、課題箇所の設定は、入力装置160の操作に基づいて行われてもよく、楽譜情報および演奏情報に基づいて行われてもよく、他の複数の使用者の情報に基づいて行われてもよく、楽譜情報の解析に基づいて行われてもよい。
 次に、課題楽譜取得部14が、楽譜取得部11により取得された楽譜情報に基づいて、ステップS2で設定された複数の課題箇所に対応する課題楽譜情報を取得する(ステップS3)。次に、付加情報取得部20が、付加情報を取得する(ステップS4)。上記のように、付加情報の取得は、入力装置160の操作に基づいて行われてもよく、楽譜情報の解析に基づいて行われてもよく、演奏情報および楽譜情報に基づいて行われてもよく、他の複数の使用者の情報に基づいて行われてもよい。
 次に、表示順決定部16が、課題に関する評価尺度に基づいて、ステップS3で取得された課題楽譜情報により表された複数の課題楽譜の表示順を決定する(ステップS5)。次に、課題リスト生成部17が、使用者による入力装置160の操作に基づいて、課題リストの表示が要求されたか否かを判定する(ステップS6)。例えば、表示装置150により「課題リスト」ボタンおよび「連結楽譜」ボタンが表示される。「課題リスト」ボタンが操作されることにより、課題リストの表示が要求され、「連結楽譜」ボタンが操作されることにより、連結楽譜の表示が要求される。
 課題リストの表示が要求された場合、課題リスト生成部17が、ステップS3で取得された課題楽譜情報に基づいて、課題リスト情報を生成する(ステップS7)。この場合、表示順決定部16により決定された表示順で複数の課題楽譜が配置されるように課題リスト情報が生成される。その後、課題楽譜表示制御部15が、生成された課題リスト情報に基づいて課題リストを表示装置150に表示させ(ステップS8)、音楽演奏支援装置100が課題管理処理を終了する。
 ステップS6において、課題リストの表示が要求されていない場合、連結楽譜生成部18が、使用者による入力装置160の操作に基づいて、連結楽譜の表示が要求されたか否かを判定する(ステップS9)。連結楽譜の表示が要求されていない場合、課題リスト生成部17がステップS6の処理を繰り返す。連結楽譜の表示が要求された場合、連結楽譜生成部18が、ステップS3で取得された課題楽譜情報に基づいて、連結楽譜情報を生成する(ステップS10)。この場合、表示順決定部16により決定された表示順で複数の課題楽譜が連結される。その後、課題楽譜表示制御部15が、生成された連結楽譜情報に基づいて連結楽譜を表示させ(ステップS8)、音楽演奏支援装置100が課題管理処理を終了する。
 (6)効果
 本実施の形態に係る音楽演奏支援装置100においては、複数の課題箇所を表す複数の課題楽譜が、課題リストまたは連結楽譜として並べて表示されるので、使用者は、複数の課題箇所を容易に把握することができる。それにより、使用者が複数の課題箇所を効率よく練習することができる。
 また、本実施の形態では、課題に関する評価尺度に基づいて複数の課題楽譜の表示順が決定され、決定された表示順で複数の課題楽譜が表示される。それにより、使用者が、練習すべき課題箇所の順番等を容易に把握することができる。その結果、練習の効率が向上される。かくして、本発明は、楽曲の演奏を練習するための課題の管理等に有効に利用することができる。
 (7)付加情報の他の表示例
 図10は、付加情報の他の表示例を示す図である。図10の例では、表示装置150および入力装置160がタッチパネルからなる。図1の楽譜表示制御部12が、タッチパネル上に原楽譜を表示させる。原楽譜に重なるように、スタンプボタンSB1,SB2,SB3,SB4が表示される。本例では、スタンプボタンSB1,SB2,SB3,SB4がそれぞれ原楽譜上に透過的に表示される。
 スタンプボタンSB1,SB2,SB3,SB4は、互いに異なる色を有し、かつ互いに異なる付加情報に対応する。本例において、スタンプボタンSB1は、譜読みが未了であるという付加情報に対応し、スタンプボタンSB2は、音高がずれているという付加情報に対応し、スタンプボタンSB3は、表現不足であるという付加情報に対応し、スタンプボタンSB4は、その他の課題があるという付加情報に対応する。各スタンプボタンには、対応する付加情報を簡略的に表す文字列が付される。具体的には、スタンプボタンSB1,SB2,SB3,SB4に重なるように、「譜読み」、「音高」、「表現」および「その他」という文字列がそれぞれ表示される。
 スタンプボタンの数は、4つに限らず、3つ以下または5つ以上であってもよい。また、使用者がスタンプボタンの数を任意に設定可能であってもよい。また、各スタンプボタンに対応する付加情報は、予め定められてもよく、または使用者により任意に設定可能であってもよい。複数のスタンプボタンは、互いに異なる模様を有してもよく、または互いに異なる形状を有してもよい。
 タッチパネル上には、原楽譜における位置を指定するためのカーソルCSが表示される。例えば、使用者がドラッグ操作を行うことにより、カーソルCSを原楽譜上の所望の位置に移動させることができる。また、予め記憶(録音)された音声情報に基づいて原楽譜に対応する演奏が出力され、その演奏箇所を示すように、演奏の出力に追従してカーソルCSが移動されてもよい。
 いずれかのスタンプボタンが操作されると、カーソルCSが指定する原楽譜の箇所に、操作されたスタンプボタンに対応するスタンプが表示される。図10の例では、スタンプボタンSB1に対応するスタンプST1、およびスタンプボタンSB4に対応するスタンプST2,ST3が原楽譜上に表示される。各スタンプは、対応するスタンプボタンと同じ色を有する。本例において、スタンプST1は、スタンプボタンSB1と同じ色を有し、スタンプST2,ST3は、スタンプボタンSB4と同じ色を有する。この場合、使用者は、原楽譜上に表示されるスタンプを見て、付加情報を直感的に把握することができる。
 上記のように、複数のスタンプボタンが互いに異なる模様を有する場合、各スタンプが、対応するスタンプボタンと同じ模様を有してもよい。また、複数のスタンプボタンが互いに異なる形状を有する場合、各スタンプが、対応するスタンプボタンと同じ形状を有してもよい。
 スタンプボタンが操作されると、図1の付加情報取得部20が、操作されたスタンプボタンに対応する付加情報を取得する。付加情報は、「譜読み」および「音高」等のタグ情報として取得されてもよい。また、課題箇所設定部13が、スタンプを含む原楽譜の箇所を例えば小節単位で課題箇所として設定してもよい。
 演奏の出力に追従してカーソルCSが移動される場合、使用者は、出力される演奏を聞きながらスタンプボタンを操作する。使用者の演奏が音声情報として記憶され、その演奏が出力されつつスタンプボタンが操作されてもよい。この場合、使用者または指導者は、出力される演奏に基づいて、テンポのずれまたは表現不足等の種々の課題を認識することができる。そのような課題を認識した時点で、対応するスタンプボタンを操作することにより、効率よく適切なスタンプを表示させることができる。
 なお、演奏が出力されつつスタンプボタンが操作される場合、スタンプを表示すべき箇所を聴覚的に認識した後にスタンプボタンが操作されるので、スタンプボタンの操作時点では、カーソルCSが、スタンプを表示すべき箇所よりも後の箇所を指定している可能性が高い。そのため、演奏が出力されつつスタンプボタンが操作される場合には、スタンプボタンの操作時点よりも一定時間(例えば、2秒)前の時点でカーソルCSが指定していた位置にスタンプが表示されてもよい。
 本例では、スタンプ毎に重み付けを行うことができる。具体的には、共通の箇所に関して共通のスタンプボタンが複数回操作されると、対応するスタンプの重みがその操作回数分大きくなる。また、重みが大きいほど、スタンプが大きく表示される。図10の例では、スタンプST1,ST3の重みより、スタンプST2の重みが大きい。そのため、スタンプST2は、スタンプST1,ST3より大きい。共通の箇所に関して異なるスタンプボタンが操作された場合には、異なるスタンプが表示され、各スタンプに関して個別に重みが設定される。
 図1の付加情報取得部20は、各課題箇所に表示されたスタンプの数に基づいて各課題箇所の重要度または未練習回数等を決定してもよく、各課題箇所に表示されたスタンプの数および重みに基づいて各課題箇所の重要度または未練習回数等を決定してもよい。また、図1の表示順決定部16は、各課題箇所に表示されたスタンプの数に基づいて複数の課題楽譜の表示順を決定してもよく、各課題箇所に表示されたスタンプの数および重みに基づいて複数の課題楽譜の表示順を決定してもよい。スタンプの数および重みに基づく決定が行われる場合、例えば、スタンプの重みが"1"~"5"の数値で表され、この数値に基づいてスタンプの重みがスタンプの数に換算される。例えば、重みが"1"のスタンプが4つある場合と、重みが"2"のスタンプが2つある場合と、重みが"4"のスタンプが1つある場合とが同等に扱われる。
 図10の例では、4つのスタンプボタンSB1,SB2,SB3,SB4が選択的に操作されることにより、4つの課題に対応するスタンプが表示されるが、他の方法で複数の課題に対応するスタンプがそれぞれ表示されてもよい。例えば、タッチパネル上における複数の方向(例えば上下左右)に複数の課題がそれぞれ対応付けられる。使用者は、タッチパネル上でそれら複数の方向のうちいずれかの方向に指を素早くスライドさせる操作(フリック操作)を行う。この場合、指のスライド方向に基づいて課題が決定され、その課題に対応するスタンプが表示される。
 また、図10の例では、カーソルCSにより指定される箇所にスタンプが表示されるが、タップ操作等によって小節、パート、音符または休符等が任意に指定され、その指定箇所にスタンプが表示されてもよい。また、図10の例では、原楽譜上にスタンプが表示されるが、同様にして、課題楽譜上にスタンプが表示されてもよく、連結楽譜上にスタンプが表示されてもよい。
 (8)他の実施の形態
 上記実施の形態では、課題に関する評価尺度に基づいて決定された表示順で複数の課題楽譜が表示されるが、本発明はこれに限らない。例えば、原楽譜における順番に従って複数の課題楽譜が表示されてもよく、課題楽譜として設定された日付順で複数の課題楽譜が表示されてもよい。
 また、上記実施の形態では、小節単位で課題箇所が設定されるが、本発明はこれに限らない。例えば、楽譜の段単位で課題箇所が設定されてもよく、楽譜の拍単位で課題箇所が設定されてもよく、楽譜の音符単位で課題箇所が設定されてもよい。
 また、上記実施の形態では、一の楽曲に関して複数の課題箇所が設定されるが、複数の楽曲に関して複数の課題箇所が設定されてもよい。この場合、タグ情報として楽曲名が取得され、そのタグ情報に基づいて、楽曲毎に課題リストまたは連結楽譜が表示されてもよい。
 また、通信ネットワーク上に存在するサーバ装置が音楽演奏支援装置100として機能し、該サーバ装置が課題管理処理(すなわち音楽演奏支援処理)を行ってもよい。また、課題管理プログラム(すなわち音楽演奏支援プログラム)がウェブプログラムとして提供され、CPU110がウェブプログラムを実行することにより課題管理処理(音楽演奏支援処理)を行ってもよい。
 課題管理プログラム(音楽演奏支援プログラム)は、上記の例に限定されない。課題管理プログラム(音楽演奏支援プログラム)は、使用者が練習すべき1つの楽曲中の複数の箇所をそれぞれ課題箇所として設定することと、設定された各課題箇所の少なくとも一部を表す楽譜を課題楽譜として取得することと、取得された複数の課題楽譜の2以上を並べた状態で、表示装置に表示させることを、コンピュータ(プロセッサ)に実行させるものである。
 また、課題管理プログラム(音楽演奏支援プログラム)は、ディジタルバーサタイルディスク(DVD)、フラッシュメモリ、メモリカード等の各種の非一過性のコンピュータ読み取り可能な記録媒体に格納された状態で提供されてもよい。
音楽演奏支援装置

Claims (14)

  1.  表示装置と、
     処理装置と
    を備え、前記処理装置が、
     使用者が練習すべき1つの楽曲中の複数の箇所をそれぞれ課題箇所として設定する課題箇所設定部と、
     前記課題箇所設定部により設定された各課題箇所の少なくとも一部を表す楽譜を課題楽譜として取得する課題楽譜取得部と、
     前記課題楽譜取得部により取得された複数の課題楽譜の2以上を並べた状態で前記表示装置に表示させる表示制御部、
    として機能するように構成された、音楽演奏支援装置。
  2.  前記処理装置は、前記複数の課題箇所のそれぞれに関する評価尺度に基づいて、前記複数の課題箇所に対応する前記複数の課題楽譜の表示順を決定する表示順決定部として更に機能するように構成されており、
     前記表示制御部は、前記表示順決定部により決定された表示順で前記複数の課題楽譜を前記表示装置に表示させる、請求項1記載の音楽演奏支援装置。
  3.  前記処理装置は、前記複数の課題楽譜の2以上が連結された連結楽譜を生成する連結楽譜生成部として更に機能するように構成されており、
     前記表示制御部は、前記連結楽譜生成部により生成された前記連結楽譜を前記表示装置に表示させる、請求項1または2記載の音楽演奏支援装置。
  4.  前記処理装置は、前記使用者が行った前記楽曲の演奏を示す演奏情報を取得する演奏情報取得部として更に機能するように構成されており、
     前記課題箇所設定部は、前記演奏情報取得部により取得された演奏情報に基づいて、前記楽曲の全体楽譜の中から前記課題箇所を設定する、請求項1~3のいずれかに記載の音楽演奏支援装置。
  5.  前記処理装置は、前記課題箇所設定部により設定された少なくとも1つの課題箇所に関して、付加情報を取得する付加情報取得部として更に機能するように構成されており、
     前記表示制御部は、前記付加情報を、対応する前記課題楽譜とともに、前記表示装置に表示させる、請求項1~4のいずれかに記載の音楽演奏支援装置。
  6.  前記表示制御部は、表示すべき前記付加情報の内容を象徴する図形イメージを、対応する前記課題楽譜とともに、前記表示装置に表示させる、請求項5に記載の音楽演奏支援装置。
  7.  前記図形イメージは、該図形イメージによって象徴される前記付加情報の重みに応じてサイズが調整される、請求項6に記載の音楽演奏支援装置。
  8.  前記付加情報取得部は、前記付加情報の複数の異なるタイプを象徴する複数タイプの図形イメージを前記表示装置に表示させ、使用者が前記複数タイプの図形イメージのいずれかを選択することに応じて、該選択された図形イメージに対応するタイプの前記付加情報を取得する、請求項5~7のいずれかに記載の音楽演奏支援装置。
  9.  前記複数の異なるタイプを象徴する前記複数タイプの図形イメージは、前記表示装置の画面上に重複して表示される他のイメージの可視性を保つように、透過性を持って表示される、請求項8に記載の音楽演奏支援装置。
  10.  前記課題箇所設定部は、前記楽曲中の1又は複数小節を前記課題箇所として設定する、請求項1~9のいずれかに記載の音楽演奏支援装置。
  11.  メモリをさらに備え、
     前記処理装置は、前記課題楽譜取得部により取得した前記課題楽譜を前記使用者に関連づけて前記メモリ内に記憶する記憶制御部として更に機能するように構成され、
     前記表示制御部は、前記メモリに記憶された複数の課題楽譜を読み出すことに基づき、前記2以上の課題楽譜を並べた状態で前記表示装置に表示させる、
    請求項1~10のいずれかに記載の音楽演奏支援装置。
  12.  前記メモリは、複数の使用者のそれぞれに関連づけて前記課題楽譜を記憶し、
     前記表示制御部は、前記複数の使用者の中から選択された使用者に関連づけられた複数の課題楽譜を前記メモリから読み出すことに基づき、該選択された使用者のために前記2以上の課題楽譜を並べた状態で前記表示装置に表示させる、
    請求項11に記載の音楽演奏支援装置。
  13.  使用者が練習すべき1つの楽曲中の複数の箇所をそれぞれ課題箇所として設定することと、
     前記設定された各課題箇所の少なくとも一部を表す楽譜を課題楽譜として取得することと、
     前記取得された複数の課題楽譜の2以上を並べた状態で、表示装置に表示させることと
    からなる音楽演奏支援のための方法。
  14.  非一過性のコンピュータ読み取り可能な記憶媒体であって、
     使用者が練習すべき1つの楽曲中の複数の箇所をそれぞれ課題箇所として設定することと、
     前記設定された各課題箇所の少なくとも一部を表す楽譜を課題楽譜として取得することと、
     前記取得された複数の課題楽譜の2以上を並べた状態で、表示装置に表示させることと
    からなる音楽演奏支援のための方法を実行するためにプロセッサにより実行可能な命令群を記憶している、記憶媒体。
PCT/JP2015/079343 2014-10-17 2015-10-16 音楽演奏支援装置及び方法 WO2016060254A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/486,717 US10325513B2 (en) 2014-10-17 2017-04-13 Musical performance assistance apparatus and method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014212415A JP6459378B2 (ja) 2014-10-17 2014-10-17 課題管理装置および課題管理プログラム
JP2014-212415 2014-10-17

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/486,717 Continuation US10325513B2 (en) 2014-10-17 2017-04-13 Musical performance assistance apparatus and method

Publications (1)

Publication Number Publication Date
WO2016060254A1 true WO2016060254A1 (ja) 2016-04-21

Family

ID=55746786

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/079343 WO2016060254A1 (ja) 2014-10-17 2015-10-16 音楽演奏支援装置及び方法

Country Status (3)

Country Link
US (1) US10325513B2 (ja)
JP (1) JP6459378B2 (ja)
WO (1) WO2016060254A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111477200A (zh) * 2020-04-03 2020-07-31 深圳市人工智能与机器人研究院 乐谱文件生成方法、装置、计算机设备和存储介质

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111264063A (zh) * 2017-09-22 2020-06-09 知识产权之桥一号有限责任公司 显示控制设备和计算机程序
US11288975B2 (en) * 2018-09-04 2022-03-29 Aleatoric Technologies LLC Artificially intelligent music instruction methods and systems
WO2020100671A1 (ja) * 2018-11-15 2020-05-22 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US11893898B2 (en) * 2020-12-02 2024-02-06 Joytunes Ltd. Method and apparatus for an adaptive and interactive teaching of playing a musical instrument
US11972693B2 (en) 2020-12-02 2024-04-30 Joytunes Ltd. Method, device, system and apparatus for creating and/or selecting exercises for learning playing a music instrument
US11900825B2 (en) 2020-12-02 2024-02-13 Joytunes Ltd. Method and apparatus for an adaptive and interactive teaching of playing a musical instrument
EP4345795A1 (en) * 2022-09-30 2024-04-03 Yousician Oy Repertoire

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000056756A (ja) * 1998-08-12 2000-02-25 Dainippon Printing Co Ltd 楽器練習の支援装置および楽器練習用情報の記録媒体
JP2003015636A (ja) * 2001-07-03 2003-01-17 Yamaha Corp 楽譜表示装置
JP2004287457A (ja) * 1996-10-18 2004-10-14 Yamaha Corp 音楽教習システム、音楽教習方法、及び同方法を実現するためのプログラムを記録した記録媒体
JP2005084069A (ja) * 2003-09-04 2005-03-31 Kawai Musical Instr Mfg Co Ltd コード練習装置
JP2006195022A (ja) * 2005-01-12 2006-07-27 Yamaha Corp 演奏練習装置及びプログラム
JP2007108292A (ja) * 2005-10-12 2007-04-26 Kawai Musical Instr Mfg Co Ltd 楽譜編集装置および編集プログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1216353C (zh) * 1996-10-18 2005-08-24 雅马哈株式会社 音乐教学系统和教学方法
JP3484988B2 (ja) * 1998-09-22 2004-01-06 ヤマハ株式会社 演奏情報編集方法および演奏情報編集プログラムを記録した記録媒体
US6727418B2 (en) * 2001-07-03 2004-04-27 Yamaha Corporation Musical score display apparatus and method
US9280960B1 (en) * 2014-12-15 2016-03-08 Amazon Technologies, Inc. Navigating music using an index including musical symbols

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004287457A (ja) * 1996-10-18 2004-10-14 Yamaha Corp 音楽教習システム、音楽教習方法、及び同方法を実現するためのプログラムを記録した記録媒体
JP2000056756A (ja) * 1998-08-12 2000-02-25 Dainippon Printing Co Ltd 楽器練習の支援装置および楽器練習用情報の記録媒体
JP2003015636A (ja) * 2001-07-03 2003-01-17 Yamaha Corp 楽譜表示装置
JP2005084069A (ja) * 2003-09-04 2005-03-31 Kawai Musical Instr Mfg Co Ltd コード練習装置
JP2006195022A (ja) * 2005-01-12 2006-07-27 Yamaha Corp 演奏練習装置及びプログラム
JP2007108292A (ja) * 2005-10-12 2007-04-26 Kawai Musical Instr Mfg Co Ltd 楽譜編集装置および編集プログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111477200A (zh) * 2020-04-03 2020-07-31 深圳市人工智能与机器人研究院 乐谱文件生成方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
JP6459378B2 (ja) 2019-01-30
US10325513B2 (en) 2019-06-18
JP2016080882A (ja) 2016-05-16
US20170221377A1 (en) 2017-08-03

Similar Documents

Publication Publication Date Title
WO2016060254A1 (ja) 音楽演奏支援装置及び方法
US9412349B2 (en) Intelligent keyboard interface for virtual musical instrument
EP2498248B1 (en) Musical-score information generating apparatus, music-tone generation controlling apparatus, musical-score information generating method, and music-tone generation controlling method
US10614786B2 (en) Musical chord identification, selection and playing method and means for physical and virtual musical instruments
JP2012215630A (ja) 楽譜演奏装置及び楽譜演奏プログラム
US7576280B2 (en) Expressing music
JP5549521B2 (ja) 音声合成装置およびプログラム
JP2015163982A (ja) 音声合成装置及びプログラム
WO2017125006A1 (zh) 一种电声乐器节奏可控的方法及其对卡拉ok的改进
JP5935815B2 (ja) 音声合成装置およびプログラム
JP4613817B2 (ja) 運指表示装置、及びプログラム
JP6734186B2 (ja) 楽譜編集用プログラム
JP5742302B2 (ja) 楽譜情報生成装置および楽譜情報生成プログラム
JP6149917B2 (ja) 音声合成装置および音声合成方法
US11694724B2 (en) Gesture-enabled interfaces, systems, methods, and applications for generating digital music compositions
US11880507B1 (en) Automated musical-score-referenced evaluation of haptic-based rhythmic performance
JP5810691B2 (ja) 楽譜情報生成装置および楽譜情報生成プログラム
JP7219559B2 (ja) 楽器演奏練習装置及び楽器演奏練習用プログラム
Winkler The real-time-score: Nucleus and fluid opus
Putra An Investigation of Interactions with Multimodal Graphs on Mobile Devices
JP5429840B2 (ja) 音声合成装置およびプログラム
WO2024072394A1 (en) Automated musical-score-referenced evaluation of haptic-based rhythmic performance
JP2016014892A (ja) 楽譜情報生成装置、楽譜情報生成方法及びプログラム
JP2012185341A (ja) 楽音生成制御装置および楽音生成制御プログラム
Midgley et al. Sonically-enhanced mouse gestures in the firefox browser

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15849905

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15849905

Country of ref document: EP

Kind code of ref document: A1