JP2020144320A - Information processing apparatus, method, and program - Google Patents
Information processing apparatus, method, and program Download PDFInfo
- Publication number
- JP2020144320A JP2020144320A JP2019042698A JP2019042698A JP2020144320A JP 2020144320 A JP2020144320 A JP 2020144320A JP 2019042698 A JP2019042698 A JP 2019042698A JP 2019042698 A JP2019042698 A JP 2019042698A JP 2020144320 A JP2020144320 A JP 2020144320A
- Authority
- JP
- Japan
- Prior art keywords
- performance
- information
- locus
- determined
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 87
- 238000000034 method Methods 0.000 title claims abstract description 46
- 230000033764 rhythmic process Effects 0.000 claims description 24
- 238000013459 approach Methods 0.000 claims description 3
- 230000008569 process Effects 0.000 description 36
- 238000004804 winding Methods 0.000 description 14
- 238000012545 processing Methods 0.000 description 10
- 238000001514 detection method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 6
- 230000001788 irregular Effects 0.000 description 5
- 238000005401 electroluminescence Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 238000009527 percussion Methods 0.000 description 1
Landscapes
- Auxiliary Devices For Music (AREA)
- Electrophonic Musical Instruments (AREA)
Abstract
Description
本発明は、情報処理装置、方法、及びプログラムに関する。 The present invention relates to information processing devices, methods, and programs.
特許文献１には、画像の動きを制御するための動作パラメータを参照しつつ、楽曲に対応する楽音制御情報及び同期信号に応答して画像各部の動作を逐次制御し、音楽モジュールによる楽音生成の進行に同期して動く画像を生成する楽音応答画像生成システムが開示されている。 In Patent Document 1, while referring to the operation parameters for controlling the movement of the image, the movement of each part of the image is sequentially controlled in response to the musical sound control information corresponding to the music and the synchronization signal, and the musical sound is generated by the music module. A musical tone response image generation system that generates an image that moves in synchronization with progress is disclosed.
特許文献１に開示された楽音応答画像生成システムでは、音楽の演奏に同期して画像オブジェクトを動かしている。この方法では、リアルタイムで演奏に追従した表現を行うことはできても、演奏全体に適合した表現を行うことは難しいという課題があった。 In the musical tone response image generation system disclosed in Patent Document 1, the image object is moved in synchronization with the performance of music. With this method, although it is possible to perform an expression that follows the performance in real time, there is a problem that it is difficult to perform an expression that matches the entire performance.
本発明は上記の課題に鑑みてなされたものであって、演奏全体を視覚的に表現することが可能な情報処理装置、方法、及びプログラムを提供することを目的とする。 The present invention has been made in view of the above problems, and an object of the present invention is to provide an information processing device, a method, and a program capable of visually expressing the entire performance.
上記目的を達成するため、本発明に係る情報処理装置の一態様は、
入力インターフェースと、
出力インターフェースと、
少なくとも一つのプロセッサと、を備え、
前記少なくとも一つのプロセッサは、
演奏開始タイミングを取得し、
演奏終了タイミングを取得し、
取得された前記演奏開始タイミング及び前記演奏終了タイミングに基づいて演奏時間を取得し、
取得された前記演奏時間に応じた長さを有する軌跡を決定し、
前記入力インターフェースから入力される複数の演奏情報に応じて決定される複数のイラストが、決定された前記軌跡に沿って配置される画像を表示するための情報を、前記出力インターフェースから出力する、
ことを特徴とする。
In order to achieve the above object, one aspect of the information processing device according to the present invention is
Input interface and
With the output interface
With at least one processor,
The at least one processor
Get the performance start timing,
Get the end timing of the performance
The performance time is acquired based on the acquired performance start timing and performance end timing.
A locus having a length corresponding to the acquired playing time is determined, and
A plurality of illustrations determined according to a plurality of performance information input from the input interface output information for displaying an image arranged along the determined locus from the output interface.
It is characterized by that.
本発明によれば、演奏全体を視覚的に表現することが可能な情報処理装置、方法、及びプログラムを提供できる。 According to the present invention, it is possible to provide an information processing device, a method, and a program capable of visually expressing the entire performance.
（実施の形態１）
実施の形態１に係る情報処理装置１００について、図面を参照して説明する。なお、図中同一又は相当する部分には同一符号を付す。
(Embodiment 1)
The information processing apparatus 100 according to the first embodiment will be described with reference to the drawings. The same or corresponding parts in the figure are designated by the same reference numerals.
図１は、情報処理装置１００を載置した電子楽器２００の平面図である。図１に示すように、実施の形態１に係る情報処理装置１００は、電子楽器２００に接続され電子楽器２００を用いて演奏された楽曲を視覚的に表現した映像を表示する装置である。情報処理装置１００は、例えばパーソナルコンピュータ、タブレット端末、スマートフォンを含むが、これに限られるものではない。情報処理装置１００と電子楽器２００とは、電子楽器システム１を構成する。 FIG. 1 is a plan view of an electronic musical instrument 200 on which an information processing device 100 is mounted. As shown in FIG. 1, the information processing device 100 according to the first embodiment is a device connected to an electronic musical instrument 200 and displaying an image visually expressing a musical piece played by the electronic musical instrument 200. The information processing device 100 includes, but is not limited to, for example, a personal computer, a tablet terminal, and a smartphone. The information processing device 100 and the electronic musical instrument 200 constitute an electronic musical instrument system 1.
図２は、情報処理装置１００の構成を示すブロック図である。図２に示すように、情報処理装置１００は、プロセッサ１１０と、入力インターフェース１２０と、出力インターフェース１３０と、表示装置１４０と、操作装置１５０と、ＲＡＭ（Random Access Memory）１６０と、ＲＯＭ（Read Only Memory）１７０と、を備える。 FIG. 2 is a block diagram showing the configuration of the information processing device 100. As shown in FIG. 2, the information processing device 100 includes a processor 110, an input interface 120, an output interface 130, a display device 140, an operating device 150, a RAM (Random Access Memory) 160, and a ROM (Read Only). Memory) 170 and.
プロセッサ１１０は、プログラムを実行することにより情報処理装置１００を制御する処理装置である。プロセッサ１１０は、ＲＯＭ１７０に記憶されたプログラム及びデータを読み出し、ＲＡＭ１６０を作業領域として用いる。プロセッサ１１０はＣＰＵ（Central Processing Unit）を含むが、これに限られるものではない。 The processor 110 is a processing device that controls the information processing device 100 by executing a program. The processor 110 reads out the programs and data stored in the ROM 170, and uses the RAM 160 as a work area. The processor 110 includes, but is not limited to, a CPU (Central Processing Unit).
入力インターフェース１２０は、電子楽器２００に接続され、演奏情報の入力を受け付けるインターフェースである。入力インターフェース１２０は、受け付けた演奏情報をプロセッサ１１０に伝達する。入力インターフェース１２０は、例えばＭＩＤＩ（Musical Instrument Digital Interface）規格に準拠した演奏情報を受け付け、ＭＩＤＩ規格に準拠した構造を有するが、演奏情報の規格及び入力インターフェース１２０の構成はこれに限られるものではない。 The input interface 120 is an interface that is connected to the electronic musical instrument 200 and accepts input of performance information. The input interface 120 transmits the received performance information to the processor 110. The input interface 120 receives, for example, performance information compliant with the MIDI (Musical Instrument Digital Interface) standard and has a structure compliant with the MIDI standard, but the performance information standard and the configuration of the input interface 120 are not limited to this. ..
演奏情報は典型的にはＭＩＤＩメッセージであり、演奏情報に含まれる要素としてそれぞれの音高に対するノートオフ又はノートオンの命令及びそのベロシティ情報（ベロシティ値）、音量・音質・音色を制御する命令があるが、演奏情報及び演奏情報に含まれる要素はこれに限られるものではない。 The performance information is typically a MIDI message, and as elements included in the performance information, a note-off or note-on command for each pitch, its velocity information (velocity value), and a command for controlling volume, sound quality, and timbre are used. However, the performance information and the elements included in the performance information are not limited to this.
出力インターフェース１３０は、プロセッサ１１０から取得した画像を表示させるための情報（画像情報）を、表示装置１４０に出力するインターフェースである。画像情報は、電子楽器２００を用いて演奏された楽曲を視覚的に表現した映像である。 The output interface 130 is an interface that outputs information (image information) for displaying an image acquired from the processor 110 to the display device 140. The image information is an image that visually expresses a musical piece played by using the electronic musical instrument 200.
表示装置１４０は、出力インターフェース１３０から取得した画像情報に基づき、画像を表示する表示装置である。表示装置１４０は、例えば液晶パネル、有機ＥＬ（Electro Luminescence）パネルを含むが、これに限られるものではない。 The display device 140 is a display device that displays an image based on the image information acquired from the output interface 130. The display device 140 includes, for example, a liquid crystal panel and an organic EL (Electro Luminescence) panel, but is not limited thereto.
操作装置１５０は、ユーザによる操作を受け付け、操作内容を示す入力信号をプロセッサ１１０に伝達する入力装置である。操作装置１５０は、例えばキーボード、マウス、タッチパッド、ボタン、スライダーを含むが、これに限られるものではない。 The operation device 150 is an input device that receives an operation by the user and transmits an input signal indicating the operation content to the processor 110. The operating device 150 includes, but is not limited to, for example, a keyboard, mouse, touchpad, buttons, and sliders.
ＲＡＭ１６０は、プロセッサ１１０が処理を実行するための作業領域として機能する揮発性メモリである。 The RAM 160 is a volatile memory that functions as a work area for the processor 110 to execute processing.
ＲＯＭ１７０は、プロセッサ１１０が処理を実行するために用いるプログラム及びデータを記憶する記憶装置である。ＲＯＭ１７０は、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable ROM）、ＥＥＰＲＯＭ（Electrically Erasable Programmable ROM）を含むが、これに限られるものではない。 The ROM 170 is a storage device that stores programs and data used by the processor 110 to execute processing. The ROM 170 includes, but is not limited to, a flash memory, an EPROM (Erasable Programmable ROM), and an EEPROM (Electrically Erasable Programmable ROM).
実施の形態１に係る情報処理装置のプロセッサ１１０の機能構成について説明する。 The functional configuration of the processor 110 of the information processing device according to the first embodiment will be described.
プロセッサ１１０は、ＲＡＭ１６０に記憶プログラム及びデータを読み出して実行することにより、演奏判定部１１１、軌跡生成部１１２、及び画像情報出力部１１３として機能する。 The processor 110 functions as a performance determination unit 111, a locus generation unit 112, and an image information output unit 113 by reading and executing a storage program and data in the RAM 160.
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から第１演奏情報を受け付け、第１演奏情報を受け付けたタイミングを演奏開始タイミングとして取得し、ＲＡＭ１６０に保存する。第１演奏情報は演奏情報に含まれる。 The performance determination unit 111 receives the first performance information from the electronic musical instrument 200 via the input interface 120, acquires the timing at which the first performance information is received as the performance start timing, and stores it in the RAM 160. The first performance information is included in the performance information.
演奏判定部１１１は、演奏情報を或る時間受け付けない、及び入力インターフェース１２０を介して電子楽器２００から演奏終了を示す情報を受け付けた、のいずれかのタイミングを演奏終了タイミングとして取得し、ＲＡＭ１６０に保存する。或る時間とは例えば５秒間であるが、これに限られるものではない。 The performance determination unit 111 acquires, as the performance end timing, either the performance information is not received for a certain period of time or the information indicating the end of the performance is received from the electronic musical instrument 200 via the input interface 120, and is stored in the RAM 160. save. The time is, for example, 5 seconds, but is not limited to this.
演奏判定部１１１は、ＲＡＭ１６０に保存した演奏開始タイミングと演奏終了タイミングとに基づいて、演奏時間を算出する。具体的には、演奏判定部１１１は、演奏開始タイミングと演奏終了タイミングとの差を演奏時間として算出する。 The performance determination unit 111 calculates the performance time based on the performance start timing and the performance end timing stored in the RAM 160. Specifically, the performance determination unit 111 calculates the difference between the performance start timing and the performance end timing as the performance time.
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から演奏情報を受け付けると、それぞれの演奏情報に対して演奏情報に応じてＲＯＭ１７０に記憶されたイラストを対応付ける。演奏判定部１１１は、例えばＲＯＭ１７０に記憶された演奏情報に含まれる音高とイラストとを対応付けるテーブルに従って演奏情報にイラストを対応付けるが、これに限られるものではなく、演奏情報に含まれる音の強さ又は音の長さとイラストとを対応付けても良い。 When the performance determination unit 111 receives the performance information from the electronic musical instrument 200 via the input interface 120, the performance determination unit 111 associates the performance information with the illustrations stored in the ROM 170 according to the performance information. The performance determination unit 111 associates an illustration with the performance information according to a table for associating the pitch and the illustration contained in the performance information stored in the ROM 170, but the present invention is not limited to this, and the sound intensity included in the performance information is not limited to this. The length of the sound or the sound may be associated with the illustration.
軌跡生成部１１２は、それぞれの演奏情報に対応付けたイラストを配置する演奏の軌跡を生成する。軌跡生成部１１２は、演奏判定部１１１が算出した演奏時間に基づいて演奏の軌跡の長さを決定する。例えば、演奏時間が第１演奏時間長の場合の軌跡の長さである第１長と、演奏時間が第２演奏時間長の場合の軌跡の長さである第２長とについて、第１演奏時間長が第２演奏時間長よりも短い場合、第１長は第２長よりも短くなる。 The locus generation unit 112 generates a performance locus in which illustrations associated with the respective performance information are arranged. The locus generation unit 112 determines the length of the performance locus based on the performance time calculated by the performance determination unit 111. For example, the first performance is about the first length, which is the length of the locus when the playing time is the first playing time length, and the second length, which is the length of the locus when the playing time is the second playing time length. When the time length is shorter than the second playing time length, the first length is shorter than the second length.
軌跡生成部１１２は、以下の式（１）−（４）に従い、点（ｘ（ｎ），ｙ（ｎ））のｎ＝０，１，…，Ｐ−１の集合として軌跡を生成する。ここで、（ｘ０，ｙ０）は原点の座標、Ｐは描画ポイント数を示す定数、Ａは軌跡の長さを示す定数である。
ｔｈ＝Ａ×ｎ／（Ｐ−１） （１）
ｒｒ＝（Ｐ−ｎ）／Ｐ （２）
ｘ（ｎ）＝（ｘ０＋ｃｏｓ（ｔｈ）×ｒｒ）×Ｐ （３）
ｙ（ｎ）＝（ｙ０＋ｓｉｎ（ｔｈ）×ｒｒ）×Ｐ （４）
The locus generation unit 112 generates a locus as a set of n = 0, 1, ..., P-1 of points (x (n), y (n)) according to the following equations (1)-(4). Here, (x 0 , y 0 ) is the coordinates of the origin, P is a constant indicating the number of drawing points, and A is a constant indicating the length of the locus.
th = A × n / (P-1) (1)
rr = (Pn) / P (2)
x (n) = (x 0 + cos (th) x rr) x P (3)
y (n) = (y 0 + sin (th) x rr) x P (4)
軌跡生成部１１２は、式（１）のＡを演奏判定部１１１が算出した演奏時間に従って変化させることで、軌跡の長さを変化させる。 The locus generation unit 112 changes the length of the locus by changing A in the equation (1) according to the performance time calculated by the performance determination unit 111.
図３は、軌跡生成部１１２が生成する軌跡に含まれる渦巻線を示す図である。図３に示すように、軌跡生成部１１２は、式（１）−（４）に従い原点に近づく渦巻線状の軌跡を生成する。なお、図３において、（ｘ０，ｙ０）＝（０，０）、Ｐ＝１００、Ａ＝２０である。 FIG. 3 is a diagram showing spiral windings included in the locus generated by the locus generation unit 112. As shown in FIG. 3, the locus generation unit 112 generates a spiral locus that approaches the origin according to the equations (1)-(4). In FIG. 3, (x 0 , y 0 ) = (0, 0), P = 100, A = 20.
画像情報出力部１１３は、軌跡生成部１１２が生成した軌跡上に軌跡生成部１１２が演奏情報について対応付けたイラストを配置して画像を生成し、画像を表示するための情報である画像情報を生成する。 The image information output unit 113 generates an image by arranging an illustration associated with the performance information on the locus generated by the locus generation unit 112, and generates image information which is information for displaying the image. Generate.
図４（Ａ），（Ｂ），（Ｃ）は、軌跡生成部１１２が生成する軌跡と、画像情報出力部１１３が生成する画像とを示す図である。軌跡生成部１１２が生成する軌跡は図の左側に、画像情報出力部１１３が生成する画像はずの右側に、それぞれ記載されている。図４（Ａ），（Ｂ），（Ｃ）は演奏時間がそれぞれ１５秒、３０秒、４５秒の演奏に基づいて生成された軌跡及び画像である。図４（Ａ），（Ｂ），（Ｃ）に示すように、軌跡上に演奏情報について対応付けられたイラストがそれぞれ配置される。なお、図４（Ａ），（Ｂ），（Ｃ）においては、軌跡生成部１１２渦巻線に直線を追加した軌跡を生成している。 4A, 4B, and 4C are diagrams showing a locus generated by the locus generation unit 112 and an image generated by the image information output unit 113. The loci generated by the locus generation unit 112 are described on the left side of the figure and on the right side of the image generated by the image information output unit 113. 4 (A), (B), and (C) are trajectories and images generated based on the performances of 15 seconds, 30 seconds, and 45 seconds, respectively. As shown in FIGS. 4A, 4B, and 4C, illustrations associated with performance information are arranged on the locus, respectively. In FIGS. 4A, 4B, and 4C, a locus is generated by adding a straight line to the locus generation unit 112 spiral winding.
図４（Ａ），（Ｂ）を参照して、演奏時間がそれぞれ１５秒（第１時間長）、３０秒（第２時間長）における軌跡を比較し、軌跡の長さをそれぞれ第１長さ、第２長さとすると、（第１長さ）＜（第２長さ）である。図４（Ｂ），（Ｃ）を参照して演奏時間３０秒、４５秒について比較しても同様である。即ち、演奏時間が長くなるにつれて渦巻線状の軌跡は長くなる。 With reference to FIGS. 4A and 4B, the trajectories at the playing times of 15 seconds (first time length) and 30 seconds (second time length) are compared, and the lengths of the trajectories are set to the first lengths, respectively. Now, letting it be the second length, (first length) <(second length). The same is true when comparing the playing times of 30 seconds and 45 seconds with reference to FIGS. 4 (B) and 4 (C). That is, as the playing time becomes longer, the spiral locus becomes longer.
画像情報出力部１１３は、生成した画像情報を、出力インターフェース１３０を介して表示装置１４０に出力する。 The image information output unit 113 outputs the generated image information to the display device 140 via the output interface 130.
実施の形態１に係る情報処理装置１００に接続される電子楽器２００について説明する。電子楽器２００は、電子ピアノ、シンセサイザー、電子オルガンを含む電子鍵盤楽器である。 The electronic musical instrument 200 connected to the information processing device 100 according to the first embodiment will be described. The electronic musical instrument 200 is an electronic keyboard instrument including an electronic piano, a synthesizer, and an electronic organ.
図５は、電子楽器２００の構成を示すブロック図である。図５に示すように、電子楽器２００は、プロセッサ２１０と、鍵２２０と、押鍵検出装置２３０と、スピーカ２４０と、操作装置２５０と、通信装置２６０と、譜面台２７０と、を備える。 FIG. 5 is a block diagram showing the configuration of the electronic musical instrument 200. As shown in FIG. 5, the electronic musical instrument 200 includes a processor 210, a key 220, a key press detection device 230, a speaker 240, an operation device 250, a communication device 260, and a music stand 270.
プロセッサ２１０は、プログラムを実行することにより電子楽器２００を制御する処理装置である。プロセッサ２１０は、図示しないＲＯＭに記憶されたプログラム及びデータを読み出し、図示しないＲＡＭを作業領域として用いる。プロセッサ２１０は制御ＬＳＩ（Large Scale Integration）を含み得るが、これに限られるものではない。 The processor 210 is a processing device that controls the electronic musical instrument 200 by executing a program. The processor 210 reads programs and data stored in a ROM (not shown), and uses a RAM (not shown) as a work area. The processor 210 may include, but is not limited to, a control LSI (Large Scale Integration).
プロセッサ２１０は、押鍵検出装置２３０から押鍵情報を取得し、スピーカ２４０を制御して、取得した押鍵情報に含まれる鍵２２０の位置に応じた音高、押鍵された長さに応じた長さ、押鍵された強さに応じた大きさで音を出力させる。 The processor 210 acquires key pressing information from the key pressing detection device 230, controls the speaker 240, and responds to the pitch according to the position of the key 220 included in the acquired key pressing information and the key pressing length. The sound is output in a loudness according to the length and the strength with which the key is pressed.
プロセッサ２１０は、押鍵検出装置２３０から取得した押鍵情報に基づいて演奏情報を生成し、通信装置２６０を介して情報処理装置１００に演奏情報を送信する。 The processor 210 generates performance information based on the key press information acquired from the key press detection device 230, and transmits the performance information to the information processing device 100 via the communication device 260.
鍵２２０は、電子楽器２００が発音する音の音高、強さ、長さを指定する操作子である。ユーザは鍵２２０を操作し、押鍵する鍵２２０の位置、押鍵する強さ、及び押鍵する長さを変化させることによって、それぞれ演奏する音の音高、音の強さ、音の長さを決定する。 The key 220 is an operator that specifies the pitch, strength, and length of the sound produced by the electronic musical instrument 200. By operating the key 220 and changing the position of the key 220 to be pressed, the strength to press the key, and the length to be pressed, the pitch, the strength of the sound, and the length of the sound to be played are changed. To decide.
押鍵検出装置２３０は、ユーザによる鍵２２０の押鍵を検出する検出装置である。押鍵検出装置２３０は、ユーザによって押鍵された鍵２２０の位置、押鍵及び離鍵された時刻、押鍵された強さを検出し、押鍵情報としてプロセッサ２１０に伝達する。押鍵検出装置２３０は鍵２２０の下部に鍵２２０に接触して設けられる。押鍵検出装置２３０は例えばラバースイッチを含むが、これに限られるものではない。 The key press detection device 230 is a detection device that detects the key press of the key 220 by the user. The key press detection device 230 detects the position of the key 220 pressed by the user, the time when the key is pressed and released, and the strength of the key pressed, and transmits the key press information to the processor 210. The key press detection device 230 is provided below the key 220 in contact with the key 220. The key press detection device 230 includes, for example, a rubber switch, but is not limited thereto.
スピーカ２４０は、プロセッサ２１０から伝達された音データを音に変換して出力する出力装置である。スピーカ２４０は図示しないアンプを含む。 The speaker 240 is an output device that converts sound data transmitted from the processor 210 into sound and outputs it. The speaker 240 includes an amplifier (not shown).
操作装置２５０は、ユーザによる入力を受け付け、操作内容を示す入力信号をプロセッサ２１０に電津する入力装置である。操作装置２５０は、例えばユーザによる音量、音色又は音質を設定する入力、演奏開始又は演奏終了を示す入力を受け付ける。操作装置２５０はボタン、スライダーを含むが、これに限られるものではない。 The operation device 250 is an input device that receives input from the user and transmits an input signal indicating the operation content to the processor 210. The operating device 250 receives, for example, an input for setting a volume, a timbre, or a sound quality by a user, and an input indicating a performance start or a performance end. The operating device 250 includes, but is not limited to, buttons and sliders.
通信装置２６０は、情報処理装置１００に接続して通信を行うインターフェースである。通信装置２６０はＭＩＤＩ規格に準拠したインターフェースを含み、情報処理装置１００に接続されて演奏情報、演奏開始を示す情報、又は演奏終了を示す情報を情報処理装置１００に送信する。 The communication device 260 is an interface that connects to the information processing device 100 for communication. The communication device 260 includes an interface conforming to the MIDI standard, and is connected to the information processing device 100 to transmit performance information, information indicating the start of performance, or information indicating the end of performance to the information processing device 100.
譜面台２７０は、演奏者が譜面を載置する台である。本実施の形態においては、譜面台２７０には情報処理装置１００が載置されている。 The music stand 270 is a music stand on which the performer places the music. In the present embodiment, the information processing device 100 is mounted on the music stand 270.
実施の形態１に係る情報処理装置１００が実行する画像出力処理について説明する。図６は、情報処理装置１００が実行する画像出力処理のフローチャートである。画像出力処理について、図６のフローチャートを参照して説明する。 The image output process executed by the information processing apparatus 100 according to the first embodiment will be described. FIG. 6 is a flowchart of the image output process executed by the information processing apparatus 100. The image output process will be described with reference to the flowchart of FIG.
情報処理装置１００のプロセッサ１１０は、出力インターフェース１３０を介して画像出力処理の開始を示す操作入力を受け付けると、画像出力処理を開始する。 When the processor 110 of the information processing device 100 receives an operation input indicating the start of the image output process via the output interface 130, the processor 110 starts the image output process.
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から第１演奏情報を受け付け、演奏開始タイミングを取得し、ＲＡＭ１６０に保存する（ステップＳ１０１）。 The performance determination unit 111 receives the first performance information from the electronic musical instrument 200 via the input interface 120, acquires the performance start timing, and stores it in the RAM 160 (step S101).
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から演奏情報を受け付けると、受け付けた演奏情報にイラストを対応付ける（ステップＳ１０２）。 When the performance determination unit 111 receives the performance information from the electronic musical instrument 200 via the input interface 120, the performance determination unit 111 associates the illustration with the received performance information (step S102).
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から演奏終了を示す情報を受け付けたかどうか判断する（ステップＳ１０３）。受け付けたと判断した場合（ステップＳ１０３：ＹＥＳ）、ステップＳ１０５に進む。 The performance determination unit 111 determines whether or not the information indicating the end of the performance has been received from the electronic musical instrument 200 via the input interface 120 (step S103). If it is determined that the acceptance has been received (step S103: YES), the process proceeds to step S105.
受け付けていないと判断した場合（ステップＳ１０３：ＮＯ）、演奏判定部１１１は、演奏情報を受け付けずに或る時間経過したかどうか判断する（ステップＳ１０４）。経過したと判断した場合（ステップＳ１０４：ＹＥＳ）、ステップＳ１０５に進む。時間経過する前に演奏情報を受け付けた場合（ステップＳ１０４：ＮＯ）ステップＳ１０２に戻る。 When it is determined that the performance is not accepted (step S103: NO), the performance determination unit 111 determines whether or not a certain time has elapsed without accepting the performance information (step S104). If it is determined that the lapse has passed (step S104: YES), the process proceeds to step S105. When the performance information is received before the lapse of time (step S104: NO), the process returns to step S102.
演奏判定部１１１は、演奏情報を或る時間受け付けない、又は入力インターフェース１２０を介して電子楽器２００から演奏終了を示す情報を受け付けた場合、演奏終了タイミングを取得し、ＲＡＭ１６０に保存する（ステップＳ１０５）。 When the performance determination unit 111 does not accept the performance information for a certain period of time, or receives the information indicating the end of the performance from the electronic musical instrument 200 via the input interface 120, the performance determination unit 111 acquires the performance end timing and saves it in the RAM 160 (step S105). ).
演奏終了タイミングを取得すると、演奏判定部１１１は、ＲＡＭ１６０に保存した演奏開始タイミングと演奏終了タイミングとに基づいて、演奏時間を算出する（ステップＳ１０６）。 When the performance end timing is acquired, the performance determination unit 111 calculates the performance time based on the performance start timing and the performance end timing stored in the RAM 160 (step S106).
演奏時間を算出すると、軌跡生成部１１２が、演奏時間に基づいた長さの軌跡を生成する（ステップＳ１０７）。 When the playing time is calculated, the locus generation unit 112 generates a locus of a length based on the playing time (step S107).
軌跡を生成すると、画像情報出力部１１３は、軌跡生成部１１２が生成した軌跡上に軌跡生成部１１２が演奏情報について対応付けたイラストを配置し、画像情報を生成する（ステップＳ１０８）。 When the locus is generated, the image information output unit 113 arranges an illustration associated with the performance information on the locus generated by the locus generation unit 112, and generates the image information (step S108).
画像情報を生成すると、画像情報出力部１１３は、生成した画像情報を、出力インターフェース１３０を介して表示装置１４０に出力し（ステップＳ１０９）、画像出力処理を終了する。 When the image information is generated, the image information output unit 113 outputs the generated image information to the display device 140 via the output interface 130 (step S109), and ends the image output process.
以上の構成を備えることで、実施の形態１に係る情報処理装置１００は、演奏情報を基に軌跡を生成し、生成した軌跡上にイラストを配置して、演奏全体を視覚的に表現することができる。 By providing the above configuration, the information processing apparatus 100 according to the first embodiment generates a locus based on the performance information, arranges an illustration on the generated locus, and visually expresses the entire performance. Can be done.
実施の形態１に係る情報処理装置は、演奏開始タイミング及び演奏終了タイミングを取得して演奏時間を算出し、算出した演奏時間に基づいて軌跡の長さを変化させることで、演奏の長さを視覚的に表現することができる。このことにより、ユーザは、演奏の長さを表示された画像から直感的に把握することが可能になる。また、演奏の長さと画像上の軌跡の長さとが対応していることで、より演奏に適合した画像表現を行うことができる。 The information processing apparatus according to the first embodiment acquires the performance start timing and the performance end timing, calculates the performance time, and changes the length of the locus based on the calculated performance time to obtain the performance length. It can be expressed visually. This allows the user to intuitively grasp the length of the performance from the displayed image. Further, since the length of the performance corresponds to the length of the locus on the image, it is possible to perform an image expression more suitable for the performance.
（実施の形態２）
実施の形態２に係る情報処理装置１００について、図面を参照して説明する。実施の形態２に係る情報処理装置１００のプロセッサ１１０は、演奏の力強さを判定し、力強さに基づいて画像情報を生成する。
(Embodiment 2)
The information processing apparatus 100 according to the second embodiment will be described with reference to the drawings. The processor 110 of the information processing device 100 according to the second embodiment determines the strength of the performance and generates image information based on the strength.
実施の形態２に係る情報処理装置１００のプロセッサ１１０が含む演奏判定部１１１は、演奏情報を取得すると、演奏情報に含まれるベロシティ情報を抽出し、演奏情報毎にＲＡＭ１６０に保存する。 When the performance determination unit 111 included in the processor 110 of the information processing device 100 according to the second embodiment acquires the performance information, the velocity information included in the performance information is extracted and stored in the RAM 160 for each performance information.
演奏判定部１１１は、演奏終了タイミングを取得すると、ＲＡＭ１６０に記憶された演奏情報毎のベロシティ情報から、演奏全体のベロシティ情報の平均値を算出し、演奏の力強さを判定する。 When the performance end timing is acquired, the performance determination unit 111 calculates the average value of the velocity information of the entire performance from the velocity information for each performance information stored in the RAM 160, and determines the strength of the performance.
軌跡生成部１１２は、演奏判定部１１１が判定した演奏の力強さに応じて渦巻線の大きさを変化させた演奏の軌跡を生成する。軌跡生成部１１２は、式（２）のｒｒを演奏判定部１１１が判定した力強さに従って変化させることで、軌跡の大きさを変化させる。 The locus generation unit 112 generates a performance locus in which the size of the spiral winding is changed according to the strength of the performance determined by the performance determination unit 111. The locus generation unit 112 changes the size of the locus by changing the rr of the equation (2) according to the strength determined by the performance determination unit 111.
図７（Ａ），（Ｂ）は、軌跡生成部１１２が生成する軌跡に含まれる渦巻線を示す図である。図７（Ａ）に示すように、軌跡生成部１１２は演奏の力強さが小さい場合には小さい渦巻線を出力する。図７（Ｂ）に示すように、軌跡生成部１１２は演奏の力強さが大きい場合には大きい渦巻線を出力する。 7 (A) and 7 (B) are diagrams showing spiral windings included in the locus generated by the locus generation unit 112. As shown in FIG. 7A, the locus generation unit 112 outputs a small spiral when the playing power is small. As shown in FIG. 7B, the locus generation unit 112 outputs a large spiral when the playing power is high.
実施の形態２に係る情報処理装置１００が実行する画像出力処理について説明する。図８は、情報処理装置１００が実行する画像出力処理のフローチャートである。画像出力処理について、図８のフローチャートを参照して説明する。 The image output process executed by the information processing apparatus 100 according to the second embodiment will be described. FIG. 8 is a flowchart of the image output process executed by the information processing apparatus 100. The image output process will be described with reference to the flowchart of FIG.
情報処理装置１００のプロセッサ１１０は、出力インターフェース１３０を介して画像出力処理の開始を示す操作入力を受け付けると、画像出力処理を開始する。 When the processor 110 of the information processing device 100 receives an operation input indicating the start of the image output process via the output interface 130, the processor 110 starts the image output process.
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から演奏情報を受け付けると、受け付けた演奏情報にイラストを対応付ける（ステップＳ２０１）。 When the performance determination unit 111 receives the performance information from the electronic musical instrument 200 via the input interface 120, the performance determination unit 111 associates the illustration with the received performance information (step S201).
演奏判定部１１１は、演奏情報を受け付けると、演奏情報に含まれるベロシティ情報を抽出し、ＲＡＭ１６０に保存する（ステップＳ２０２） When the performance determination unit 111 receives the performance information, the performance determination unit 111 extracts the velocity information included in the performance information and saves it in the RAM 160 (step S202).
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から演奏終了を示す情報を受け付けたかどうか判断する（ステップＳ２０３）。受け付けたと判断した場合（ステップＳ２０３：ＹＥＳ）、ステップＳ２０５に進む。 The performance determination unit 111 determines whether or not the information indicating the end of the performance has been received from the electronic musical instrument 200 via the input interface 120 (step S203). If it is determined that the acceptance has been made (step S203: YES), the process proceeds to step S205.
受け付けていないと判断した場合（ステップＳ２０３：ＮＯ）、演奏判定部１１１は、演奏情報を受け付けずに或る時間経過したかどうか判断する（ステップＳ２０４）。経過したと判断した場合（ステップＳ２０４：ＹＥＳ）、ステップＳ２０５に進む。時間経過する前に演奏情報を受け付けた場合（ステップＳ２０４：ＮＯ）ステップＳ２０１に戻る。 When it is determined that the performance is not accepted (step S203: NO), the performance determination unit 111 determines whether or not a certain time has elapsed without accepting the performance information (step S204). If it is determined that the elapse has passed (step S204: YES), the process proceeds to step S205. When the performance information is received before the lapse of time (step S204: NO), the process returns to step S201.
演奏判定部１１１は、演奏情報を或る時間受け付けない、又は入力インターフェース１２０を介して電子楽器２００から演奏終了を示す情報を受け付けた場合、ＲＡＭ１６０に保存された演奏情報毎のベロシティ情報に基づいて、演奏全体のベロシティ情報の平均を算出し、演奏の力強さを判定する（ステップＳ２０５）。 When the performance determination unit 111 does not accept the performance information for a certain period of time, or receives the information indicating the end of the performance from the electronic musical instrument 200 via the input interface 120, the performance determination unit 111 is based on the velocity information for each performance information stored in the RAM 160. , The average of the velocity information of the entire performance is calculated, and the strength of the performance is determined (step S205).
演奏の力強さを判定すると、軌跡生成部１１２が、演奏の力強さに基づいた大きさの渦巻線を含む軌跡を生成する（ステップＳ２０６）。 When the strength of the performance is determined, the locus generation unit 112 generates a locus including a spiral having a size based on the strength of the performance (step S206).
軌跡を生成すると、画像情報出力部１１３は、軌跡生成部１１２が生成した軌跡上に軌跡生成部１１２が演奏情報について対応付けたイラストを配置し、画像情報を生成する（ステップＳ２０７）。 When the locus is generated, the image information output unit 113 arranges an illustration associated with the performance information on the locus generated by the locus generation unit 112, and generates the image information (step S207).
画像情報を生成すると、画像情報出力部１１３は、生成した画像情報を、出力インターフェース１３０を介して表示装置１４０に出力し（ステップＳ２０８）、画像出力処理を終了する。 When the image information is generated, the image information output unit 113 outputs the generated image information to the display device 140 via the output interface 130 (step S208), and ends the image output process.
以上の構成を備えることで、実施の形態２に係る情報処理装置１００は、演奏情報を基に軌跡を生成し、生成した軌跡上にイラストを配置して、演奏全体を視覚的に表現することができる。 By providing the above configuration, the information processing device 100 according to the second embodiment generates a locus based on the performance information, arranges an illustration on the generated locus, and visually expresses the entire performance. Can be done.
実施の形態２に係る情報処理装置は、演奏の力強さを判定し、判定した力強さに基づいて軌跡の大きさを変化させることで、演奏の力強さを視覚的に表現することができる。このことにより、ユーザは、演奏の力強さを表示された画像から直感的に把握することが可能になる。また、演奏の力強さと画像上の軌跡の大きさとが対応していることで、より演奏に適合した画像表現を行うことができる。 The information processing apparatus according to the second embodiment visually expresses the strength of the performance by determining the strength of the performance and changing the size of the locus based on the determined strength. Can be done. As a result, the user can intuitively grasp the strength of the performance from the displayed image. Further, since the strength of the performance and the size of the trajectory on the image correspond to each other, it is possible to perform an image expression more suitable for the performance.
（実施の形態３）
実施の形態３に係る情報処理装置１００について、図面を参照して説明する。実施の形態３に係る情報処理装置１００のプロセッサ１１０は、演奏のリズムを判定し、リズムに基づいて画像情報を生成する。
(Embodiment 3)
The information processing apparatus 100 according to the third embodiment will be described with reference to the drawings. The processor 110 of the information processing apparatus 100 according to the third embodiment determines the rhythm of the performance and generates image information based on the rhythm.
実施の形態３に係る情報処理装置のプロセッサ１１０が含む演奏判定部１１１は、演奏情報を取得すると、演奏情報を基にリズムを判定して、ＲＡＭ１６０に保存する。 When the performance determination unit 111 included in the processor 110 of the information processing apparatus according to the third embodiment acquires the performance information, it determines the rhythm based on the performance information and stores it in the RAM 160.
具体的には、演奏判定部１１１は、演奏情報を取得すると、その時点のノートと一つ前のノートとの時間差を求め、算出した時間差を一つ前のノートと二つ前のノートとの時間差と比較する。演奏判定部は、二つの時間差の差をリズム自由度としてＲＡＭ１６０に保存する。リズムが一定の演奏であればリズム自由度が小さくなり、リズムが不規則の演奏であればリズム自由度が大きくなる。リズムの算出方法は一例であり、これに限られるものではない。 Specifically, when the performance determination unit 111 acquires the performance information, the performance determination unit 111 obtains the time difference between the note at that time and the previous note, and calculates the time difference between the previous note and the previous note. Compare with the time difference. The performance determination unit stores the difference between the two time differences in the RAM 160 as a rhythm degree of freedom. If the performance has a constant rhythm, the degree of freedom of rhythm decreases, and if the performance has an irregular rhythm, the degree of freedom of rhythm increases. The rhythm calculation method is an example and is not limited to this.
軌跡生成部１１２は、演奏判定部１１１が判定した演奏のリズムをＲＡＭ１６０から読み出し、読み出したリズムに応じて形状を変化させた渦巻線を含む演奏の軌跡を生成する。軌跡生成部１１２は、式（２）のｒｒを演奏判定部１１１が判定したリズムに従って変化させることで、渦巻線の形状を変化させる。 The locus generation unit 112 reads the rhythm of the performance determined by the performance determination unit 111 from the RAM 160, and generates a performance locus including a spiral winding whose shape is changed according to the read rhythm. The locus generation unit 112 changes the shape of the spiral winding by changing the rr of the equation (2) according to the rhythm determined by the performance determination unit 111.
図９（Ａ），（Ｂ）は、軌跡生成部１１２が生成する軌跡に含まれる渦巻線を示す図である。図９（Ａ）に示すように、軌跡生成部１１２は、リズムが規則的な場合には規則的な形状の軌跡を出力する。図９（Ｂ）に示すように、軌跡生成部１１２は、リズムが不規則な場合には不規則な形状の軌跡を出力する。 9 (A) and 9 (B) are diagrams showing spiral windings included in the locus generated by the locus generation unit 112. As shown in FIG. 9A, the locus generation unit 112 outputs a locus having a regular shape when the rhythm is regular. As shown in FIG. 9B, the locus generation unit 112 outputs a locus having an irregular shape when the rhythm is irregular.
実施の形態３に係る情報処理装置１００が実行する画像出力処理について説明する。図１０は、情報処理装置１００が実行する画像出力処理のフローチャートである。画像出力処理について、図１０のフローチャートを参照して説明する。 The image output process executed by the information processing apparatus 100 according to the third embodiment will be described. FIG. 10 is a flowchart of the image output process executed by the information processing apparatus 100. The image output process will be described with reference to the flowchart of FIG.
情報処理装置１００のプロセッサ１１０は、出力インターフェース１３０を介して画像出力処理の開始を示す操作入力を受け付けると、画像出力処理を開始する。 When the processor 110 of the information processing device 100 receives an operation input indicating the start of the image output process via the output interface 130, the processor 110 starts the image output process.
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から演奏情報を受け付けると、受け付けた演奏情報にイラストを対応付ける（ステップＳ３０１）。 When the performance determination unit 111 receives the performance information from the electronic musical instrument 200 via the input interface 120, the performance determination unit 111 associates the illustration with the received performance information (step S301).
演奏判定部１１１は、演奏情報を受け付けると、演奏情報を基にリズムを判定し、ＲＡＭ１６０に保存する（ステップＳ３０２） When the performance determination unit 111 receives the performance information, the performance determination unit 111 determines the rhythm based on the performance information and saves it in the RAM 160 (step S302).
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から演奏終了を示す情報を受け付けたかどうか判断する（ステップＳ３０３）。受け付けたと判断した場合（ステップＳ３０３：ＹＥＳ）、ステップＳ３０５に進む。 The performance determination unit 111 determines whether or not the information indicating the end of the performance has been received from the electronic musical instrument 200 via the input interface 120 (step S303). If it is determined that the acceptance has been received (step S303: YES), the process proceeds to step S305.
受け付けていないと判断した場合（ステップＳ３０３：ＮＯ）、演奏判定部１１１は、演奏情報を受け付けずに或る時間経過したかどうか判断する（ステップＳ３０４）。経過したと判断した場合（ステップＳ３０４：ＹＥＳ）、ステップＳ３０５に進む。時間経過する前に演奏情報を受け付けた場合（ステップＳ３０４：ＮＯ）、ステップＳ３０１に戻る。 When it is determined that the performance is not accepted (step S303: NO), the performance determination unit 111 determines whether or not a certain time has elapsed without accepting the performance information (step S304). If it is determined that the lapse has passed (step S304: YES), the process proceeds to step S305. If the performance information is received before the lapse of time (step S304: NO), the process returns to step S301.
演奏判定部１１１は、演奏情報を或る時間受け付けない、又は入力インターフェース１２０を介して電子楽器２００から演奏終了を示す情報を受け付けた場合、ＲＡＭ１６０に保存されたリズムに基づいて形状を変化させた渦巻線を含む軌跡を生成する（ステップＳ３０５）。 When the performance determination unit 111 does not receive the performance information for a certain period of time or receives the information indicating the end of the performance from the electronic musical instrument 200 via the input interface 120, the performance determination unit 111 changes its shape based on the rhythm stored in the RAM 160. A locus including the spiral winding is generated (step S305).
軌跡を生成すると、画像情報出力部１１３は、軌跡生成部１１２が生成した軌跡上に軌跡生成部１１２が演奏情報について対応付けたイラストを配置し、画像情報を生成する（ステップＳ３０６）。 When the locus is generated, the image information output unit 113 arranges an illustration associated with the performance information on the locus generated by the locus generation unit 112, and generates the image information (step S306).
画像情報を生成すると、画像情報出力部１１３は、生成した画像情報を、出力インターフェース１３０を介して表示装置１４０に出力し（ステップＳ３０７）、画像出力処理を終了する。 When the image information is generated, the image information output unit 113 outputs the generated image information to the display device 140 via the output interface 130 (step S307), and ends the image output process.
以上の構成を備えることで、実施の形態３に係る情報処理装置１００は、演奏情報を基に軌跡を生成し、生成した軌跡上にイラストを配置して、演奏全体を視覚的に表現することができる。 By providing the above configuration, the information processing apparatus 100 according to the third embodiment generates a locus based on the performance information, arranges an illustration on the generated locus, and visually expresses the entire performance. Can be done.
実施の形態３に係る情報処理装置は、演奏のリズムを判定し、判定したリズムに基づいて軌跡の形状を変化させることで、例えばクラシックならば規則的な軌跡を含む画像、ジャズならば不規則な軌跡を含む画像を生成することができ、より演奏に適合した画像表現を行うことができる。 The information processing apparatus according to the third embodiment determines the rhythm of the performance and changes the shape of the locus based on the determined rhythm. For example, in the case of classical music, an image including a regular locus is used, and in the case of jazz, the locus is irregular. It is possible to generate an image including various trajectories, and it is possible to perform an image expression more suitable for the performance.
（実施の形態４）
実施の形態４に係る情報処理装置１００について、図面を参照して説明する。実施の形態４に係る情報処理装置１００のプロセッサ１１０は、演奏の調性を判定し、調性に基づいて画像情報を生成する。
(Embodiment 4)
The information processing apparatus 100 according to the fourth embodiment will be described with reference to the drawings. The processor 110 of the information processing apparatus 100 according to the fourth embodiment determines the tonality of the performance and generates image information based on the tonality.
実施の形態３に係る情報処理装置のプロセッサ１１０が含む演奏判定部１１１は、演奏情報を取得すると、演奏情報を基に演奏の調性を判定して、ＲＡＭ１６０に保存する。 When the performance determination unit 111 included in the processor 110 of the information processing apparatus according to the third embodiment acquires the performance information, it determines the tonality of the performance based on the performance information and stores it in the RAM 160.
軌跡生成部１１２は、演奏判定部１１１が判定した演奏の調性をＲＡＭ１６０から読み出し、読み出した演奏の調性に応じて着色された着色帯を含む演奏の軌跡を生成する。着色帯は、軌跡に含まれる渦巻線に重なって表示される帯状の画像である。 The locus generation unit 112 reads the tonality of the performance determined by the performance determination unit 111 from the RAM 160, and generates a performance locus including a colored band colored according to the tonality of the read performance. The colored band is a band-shaped image displayed so as to overlap the spiral windings included in the locus.
ＲＯＭ１７０は、演奏の調性と色とを対応付けたテーブルを記憶する。軌跡生成部１１２は、演奏の調整に対応付けられた色の情報をＲＯＭ１７０から読み出し、着色帯の色として決定する。ＲＯＭ１７０は、例えばスクリャービンの調性色に基づいて調整と色とを対応付けたテーブルを記憶するが、ＲＯＭ１７０が記憶するテーブルはこれに限られるものではない。 The ROM 170 stores a table in which the tonality of the performance and the color are associated with each other. The locus generation unit 112 reads the color information associated with the adjustment of the performance from the ROM 170 and determines it as the color of the colored band. The ROM 170 stores, for example, a table in which adjustments and colors are associated based on the tonal color of Scriabin, but the table stored in the ROM 170 is not limited to this.
実施の形態４に係る情報処理装置１００が実行する画像出力処理について説明する。図１１は、情報処理装置１００が実行する画像出力処理のフローチャートである。画像出力処理について、図１１のフローチャートを参照して説明する。 The image output process executed by the information processing apparatus 100 according to the fourth embodiment will be described. FIG. 11 is a flowchart of the image output process executed by the information processing apparatus 100. The image output process will be described with reference to the flowchart of FIG.
情報処理装置１００のプロセッサ１１０は、出力インターフェース１３０を介して画像出力処理の開始を示す操作入力を受け付けると、画像出力処理を開始する。 When the processor 110 of the information processing device 100 receives an operation input indicating the start of the image output process via the output interface 130, the processor 110 starts the image output process.
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から演奏情報を受け付けると、受け付けた演奏情報にイラストを対応付ける（ステップＳ４０１）。 When the performance determination unit 111 receives the performance information from the electronic musical instrument 200 via the input interface 120, the performance determination unit 111 associates the illustration with the received performance information (step S401).
演奏判定部１１１は、演奏情報を受け付けると、演奏情報を基に演奏の調性を判定し、ＲＡＭ１６０に保存する（ステップＳ４０２） When the performance determination unit 111 receives the performance information, the performance determination unit 111 determines the tonality of the performance based on the performance information and saves it in the RAM 160 (step S402).
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から演奏終了を示す情報を受け付けたかどうか判断する（ステップＳ４０３）。受け付けたと判断した場合（ステップＳ４０３：ＹＥＳ）、ステップＳ４０５に進む。 The performance determination unit 111 determines whether or not the information indicating the end of the performance has been received from the electronic musical instrument 200 via the input interface 120 (step S403). If it is determined that the acceptance has been made (step S403: YES), the process proceeds to step S405.
受け付けていないと判断した場合（ステップＳ４０３：ＮＯ）、演奏判定部１１１は、演奏情報を受け付けずに或る時間経過したかどうか判断する（ステップＳ４０４）。経過したと判断した場合（ステップＳ４０４：ＹＥＳ）、ステップＳ４０５に進む。時間経過する前に演奏情報を受け付けた場合（ステップＳ４０４：ＮＯ）ステップＳ４０１に戻る。 When it is determined that the performance is not accepted (step S403: NO), the performance determination unit 111 determines whether or not a certain time has elapsed without accepting the performance information (step S404). If it is determined that the elapse has passed (step S404: YES), the process proceeds to step S405. When the performance information is received before the lapse of time (step S404: NO), the process returns to step S401.
演奏判定部１１１は、演奏情報を或る時間受け付けない、又は入力インターフェース１２０を介して電子楽器２００から演奏終了を示す情報を受け付けた場合、ＲＡＭ１６０に保存された調性に基づいて着色した軌跡を生成する（ステップＳ４０５）。 When the performance determination unit 111 does not receive the performance information for a certain period of time, or receives the information indicating the end of the performance from the electronic musical instrument 200 via the input interface 120, the performance determination unit 111 produces a colored locus based on the tonality stored in the RAM 160. Generate (step S405).
軌跡を生成すると、画像情報出力部１１３は、軌跡生成部１１２が生成した軌跡上に軌跡生成部１１２が演奏情報について対応付けたイラストを配置し、画像情報を生成する（ステップＳ４０６）。 When the locus is generated, the image information output unit 113 arranges an illustration associated with the performance information on the locus generated by the locus generation unit 112, and generates the image information (step S406).
画像情報を生成すると、画像情報出力部１１３は、生成した画像情報を、出力インターフェース１３０を介して表示装置１４０に出力し（ステップＳ４０７）、画像出力処理を終了する。 When the image information is generated, the image information output unit 113 outputs the generated image information to the display device 140 via the output interface 130 (step S407), and ends the image output process.
以上の構成を備えることで、実施の形態４に係る情報処理装置１００は、演奏情報を基に軌跡を生成し、生成した軌跡上にイラストを配置して、演奏全体を視覚的に表現することができる。 By providing the above configuration, the information processing apparatus 100 according to the fourth embodiment generates a locus based on the performance information, arranges an illustration on the generated locus, and visually expresses the entire performance. Can be done.
実施の形態４に係る情報処理装置は、演奏の調性を判定し、判定した調性に基づいて軌跡の色を変化させることで、演奏の調性及びその変化（転調）を視覚的に表現することができる。このことにより、ユーザは、演奏の調構造を表示された画像から直感的に把握することが可能になる。また、演奏の調性と画像上の軌跡の色とが対応していることで、より演奏に適合した画像表現を行うことができる。 The information processing apparatus according to the fourth embodiment visually expresses the tonality of the performance and its change (modulation) by determining the tonality of the performance and changing the color of the locus based on the determined tonality. can do. As a result, the user can intuitively grasp the key structure of the performance from the displayed image. Further, since the tonality of the performance and the color of the locus on the image correspond to each other, it is possible to perform an image expression more suitable for the performance.
（変形例）
以上に本発明の実施の形態について説明したが、この実施の形態は一例であり、本発明の適用範囲はこれに限られない。すなわち、本発明の実施の形態は種々の応用が可能であり、あらゆる実施の形態が本発明の範囲に含まれる。
(Modification example)
Although the embodiment of the present invention has been described above, this embodiment is an example, and the scope of application of the present invention is not limited to this. That is, various embodiments of the present invention are possible, and all embodiments are included in the scope of the present invention.
情報処理装置１００は表示装置１４０を備えるとしたが、これに限られるものではない。表示装置１４０を備えず、情報処理装置１００の外部の表示装置と出力インターフェース１３０を介して接続されていても良い。外部の表示装置は例えば液晶表示装置、有機ＥＬ表示装置、映像プロジェクタを含むが、これに限られるものではない。 The information processing device 100 is provided with a display device 140, but the information processing device 100 is not limited to this. The display device 140 may not be provided and may be connected to an external display device of the information processing device 100 via an output interface 130. External display devices include, but are not limited to, for example, liquid crystal display devices, organic EL display devices, and video projectors.
演奏判定部１１１は、入力インターフェース１２０を介して電子楽器２００から第１演奏情報を受け付け、第１演奏情報を受け付けたタイミングを演奏開始タイミングとして取得するとしたが、これに限られるものではない。入力インターフェース１２０を介して電子楽器２００から演奏開始を示す情報を受け付け、演奏開始を示す情報を受け付けたタイミングを演奏開始タイミングとして取得しても良い。 The performance determination unit 111 receives the first performance information from the electronic musical instrument 200 via the input interface 120, and acquires the timing at which the first performance information is received as the performance start timing, but the present invention is not limited to this. Information indicating the start of performance may be received from the electronic musical instrument 200 via the input interface 120, and the timing of receiving the information indicating the start of performance may be acquired as the performance start timing.
軌跡生成部１１２は渦巻線状の軌跡を生成するとしたが、これに限られるものではない。図１２は、軌跡生成部１１２が生成する軌跡に含まれる線を示す図である。図１２に示すように、軌跡生成部１１２は、渦巻線を形成するポイントの一部を直線に置換してつなげることで、渦巻線と直線とを組み合わせた軌跡を生成しても良い。また、直線と曲線とを組み合わせた任意の形状の軌跡を生成しても良い。 The locus generation unit 112 is supposed to generate a spiral locus, but the present invention is not limited to this. FIG. 12 is a diagram showing lines included in the locus generated by the locus generation unit 112. As shown in FIG. 12, the locus generation unit 112 may generate a locus that combines the spiral winding and the straight line by replacing a part of the points forming the spiral winding with a straight line and connecting them. Further, a locus having an arbitrary shape by combining a straight line and a curved line may be generated.
電子楽器２００は鍵２２０を備える電子鍵盤楽器であるとしたが、これに限られるものではない。電子楽器２００は演奏情報を出力すれば良く、弦楽器状、管楽器状、打楽器状であっても良い。ピアノを含む電子楽器でない楽器の音を電気信号に変換し、演奏情報として出力する装置であっても良い。 The electronic musical instrument 200 is said to be an electronic keyboard instrument including a key 220, but the present invention is not limited to this. The electronic musical instrument 200 may output performance information, and may be in the shape of a stringed instrument, a wind instrument, or a percussion instrument. A device that converts the sound of a non-electronic musical instrument including a piano into an electric signal and outputs it as performance information may be used.
電子楽器２００はスピーカ２４０を備えるとしたが、これに限られるものではない。ヘッドホン又はイヤホン、若しくはヘッドホン又はイヤホンに接続される有線又は無線の接続端子を備えてもよい。 The electronic musical instrument 200 is provided with the speaker 240, but the present invention is not limited to this. It may be provided with headphones or earphones, or a wired or wireless connection terminal connected to the headphones or earphones.
電子楽器２００は譜面台２７０を備え、譜面台２７０に情報処理装置１００が載置されるとしたが、これに限られるものではない。情報処理装置１００は他の場所に置かれても良いし、その場合電子楽器２００が譜面台２７０を備えなくてもよい。 The electronic musical instrument 200 is provided with a music stand 270, and the information processing device 100 is mounted on the music stand 270, but the present invention is not limited to this. The information processing device 100 may be placed in another place, in which case the electronic musical instrument 200 does not have to include the music stand 270.
実施の形態２において、演奏判定部１１１は、演奏情報を取得すると演奏情報に含まれるベロシティ情報を抽出し、演奏情報毎にＲＡＭ１６０に保存するとしたが、これに限られるものではない。演奏判定部１１１は、或る時間毎に複数個のノートのベロシティ情報の平均値を算出し、ＲＡＭ１６０に保存しても良い。 In the second embodiment, when the performance determination unit 111 acquires the performance information, the velocity information included in the performance information is extracted and stored in the RAM 160 for each performance information, but the present invention is not limited to this. The performance determination unit 111 may calculate the average value of the velocity information of a plurality of notes at a certain time and store it in the RAM 160.
実施の形態１−４に係る情報処理装置１００の構成を任意に組み合わせて実施しても良い。例えば、実施の形態１と２とを組み合わせ、演奏判定部１１１が算出した演奏時間及び演奏判定部１１１が判定した演奏の力強さにそれぞれ応じて長さ及び大きさを変化させた軌跡を生成しても良い。その他の実施の形態についても同様である。 The configuration of the information processing apparatus 100 according to the first to fourth embodiments may be arbitrarily combined. For example, by combining the first and second embodiments, a locus whose length and size are changed according to the performance time calculated by the performance determination unit 111 and the strength of the performance determined by the performance determination unit 111 is generated. You may. The same applies to other embodiments.
なお、本発明に係る機能を実現するための構成を予め備えた情報処理装置として提供できることはもとより、プログラムの適用により、既存の情報処理装置を、本発明に係る情報処理装置として機能させることもできる。すなわち、実施の形態及び変形例で例示した情報処理装置による機能を実現させるためのプログラムを、既存の情報処理装置を制御するＣＰＵ等が実行できるように適用することで、本発明に係る情報処理装置として機能させることができる。また、本発明に係る方法は、情報処理装置を用いて実施できる。 Not only can it be provided as an information processing device provided with a configuration for realizing the function according to the present invention, but also an existing information processing device can be made to function as an information processing device according to the present invention by applying a program. it can. That is, the information processing according to the present invention is applied by applying the program for realizing the function by the information processing device illustrated in the embodiment and the modified example so that the CPU or the like that controls the existing information processing device can execute the program. It can function as a device. Further, the method according to the present invention can be carried out by using an information processing device.
また、このようなプログラムの適用方法は任意である。プログラムを、例えば、フレキシブルディスク、ＣＤ（Compact Disc）−ＲＯＭ、ＤＶＤ（Digital Versatile Disc）−ＲＯＭ、メモリカード等のコンピュータ読み取り可能な記憶媒体に格納して適用できる。さらに、プログラムを搬送波に重畳し、インターネットなどの通信媒体を介して適用することもできる。例えば、通信ネットワーク上の掲示板（ＢＢＳ：Bulletin Board System）にプログラムを掲示して配信しても良い。そして、このプログラムを起動し、ＯＳ（Operating System）の制御下で、他のアプリケーションプログラムと同様に実行することにより、上記の処理を実行できるように構成しても良い。 Moreover, the method of applying such a program is arbitrary. The program can be stored and applied in a computer-readable storage medium such as a flexible disc, a CD (Compact Disc) -ROM, a DVD (Digital Versatile Disc) -ROM, or a memory card. Further, the program can be superimposed on the carrier wave and applied via a communication medium such as the Internet. For example, the program may be posted and distributed on a bulletin board system (BBS: Bulletin Board System) on a communication network. Then, this program may be started and executed in the same manner as other application programs under the control of the OS (Operating System) so that the above processing can be executed.
以上、本発明の好ましい実施の形態について説明したが、本発明は係る特定の実施の形態に限定されるものではなく、本発明には、特許請求の範囲に記載された発明とその均等の範囲とが含まれる。以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。 Although the preferred embodiment of the present invention has been described above, the present invention is not limited to the specific embodiment, and the present invention includes the invention described in the claims and the equivalent range thereof. And are included. Hereinafter, the inventions described in the claims of the original application of the present application will be added.
（付記１）
入力インターフェースと、
出力インターフェースと、
少なくとも一つのプロセッサと、を備え、
前記少なくとも一つのプロセッサは、
演奏開始タイミングを取得し、
演奏終了タイミングを取得し、
取得された前記演奏開始タイミング及び前記演奏終了タイミングに基づいて演奏時間を取得し、
取得された前記演奏時間に応じた長さを有する軌跡を決定し、
前記入力インターフェースから入力される複数の演奏情報に応じて決定される複数のイラストが、決定された前記軌跡に沿って配置される画像を表示するための情報を、前記出力インターフェースから出力する、
情報処理装置。
(Appendix 1)
Input interface and
With the output interface
With at least one processor,
The at least one processor
Get the performance start timing,
Get the end timing of the performance
The performance time is acquired based on the acquired performance start timing and performance end timing.
A locus having a length corresponding to the acquired playing time is determined, and
A plurality of illustrations determined according to a plurality of performance information input from the input interface output information for displaying an image arranged along the determined locus from the output interface.
Information processing device.
（付記２）
前記少なくとも一つのプロセッサは、
前記演奏時間が第１時間長のときに決定する前記軌跡の長さは、前記演奏時間が前記第１時間長より長い第２時間長のときに決定する前記軌跡の長さより短くなるように、前記軌跡を決定する、
付記１に記載の情報処理装置。
(Appendix 2)
The at least one processor
The length of the locus determined when the playing time is the first hour length is shorter than the length of the locus determined when the playing time is longer than the first time length and the second time length. To determine the trajectory,
The information processing device according to Appendix 1.
（付記３）
前記少なくとも一つのプロセッサは、
旋回するにつれて前記画像内の或る位置に近づく渦巻の軌跡に沿って前記複数のイラストを配置する、
付記１又は２に記載の情報処理装置。
(Appendix 3)
The at least one processor
The plurality of illustrations are arranged along the trajectory of a spiral that approaches a certain position in the image as it turns.
The information processing device according to Appendix 1 or 2.
（付記４）
前記演奏情報はベロシティ情報を含み、
前記少なくとも一つのプロセッサは、
受け付けた前記演奏情報に含まれる前記ベロシティ情報に応じて、演奏の力強さを判定し、
判定された前記演奏の力強さに応じて、前記渦巻の軌跡の大きさを変化させる、
付記３に記載の情報処理装置。
(Appendix 4)
The performance information includes velocity information.
The at least one processor
The strength of the performance is determined according to the velocity information included in the received performance information.
The magnitude of the trajectory of the spiral is changed according to the determined strength of the performance.
The information processing device according to Appendix 3.
（付記５）
前記少なくとも一つのプロセッサは、
受け付けた前記演奏情報から演奏のリズムを判定し、
判定された前記演奏のリズムに応じて、前記渦巻の軌跡の形状を変形させる、
付記３又は４に記載の情報処理装置。
(Appendix 5)
The at least one processor
Judging the rhythm of the performance from the received performance information,
The shape of the trajectory of the spiral is deformed according to the determined rhythm of the performance.
The information processing device according to Appendix 3 or 4.
（付記６）
前記演奏情報は音高情報を含み、
前記少なくとも一つのプロセッサは、
受け付けた前記演奏情報に含まれる前記音高情報から調性を判定し、
前記軌跡に沿って表示する色を、判定された前記調性に応じて変化させる、
付記１から５のいずれか一つに記載の情報処理装置。
(Appendix 6)
The performance information includes pitch information.
The at least one processor
The tonality is determined from the pitch information included in the received performance information, and the tonality is determined.
The color displayed along the locus is changed according to the determined tonality.
The information processing device according to any one of Appendix 1 to 5.
（付記７）
入力インターフェースと、出力インターフェースと、を備える情報処理装置のコンピュータに、
演奏開始タイミングを取得させ、
演奏終了タイミングを取得させ、
取得された前記演奏開始タイミング及び前記演奏終了タイミングに基づいて演奏時間を取得させ、
取得された前記演奏時間に応じた長さを有する軌跡を決定させ、
前記入力インターフェースから入力される複数の演奏情報に応じて決定される複数のイラストが、決定された前記軌跡に沿って配置される画像を表示するための情報を、前記出力インターフェースから出力させる、
方法。
(Appendix 7)
An information processing device computer equipped with an input interface and an output interface
Get the performance start timing,
Get the end timing of the performance
The performance time is acquired based on the acquired performance start timing and performance end timing.
A locus having a length corresponding to the acquired playing time is determined.
A plurality of illustrations determined according to a plurality of performance information input from the input interface output information for displaying an image arranged along the determined locus from the output interface.
Method.
（付記８）
入力インターフェースと、出力インターフェースと、を備える情報処理装置のコンピュータに、
演奏開始タイミングを取得させ、
演奏終了タイミングを取得させ、
取得された前記演奏開始タイミング及び前記演奏終了タイミングに基づいて演奏時間を取得させ、
取得された前記演奏時間に応じた長さを有する軌跡を決定させ、
前記入力インターフェースから入力される複数の演奏情報に応じて決定される複数のイラストが、決定された前記軌跡に沿って配置される画像を表示するための情報を、前記出力インターフェースから出力させる、
プログラム。
(Appendix 8)
An information processing device computer equipped with an input interface and an output interface
Get the performance start timing,
Get the end timing of the performance
The performance time is acquired based on the acquired performance start timing and performance end timing.
A locus having a length corresponding to the acquired playing time is determined.
A plurality of illustrations determined according to a plurality of performance information input from the input interface output information for displaying an image arranged along the determined locus from the output interface.
program.
１…電子楽器システム、１００…情報処理装置、１１０…プロセッサ、１１１…演奏判定部、１１２…軌跡生成部、１１３…画像情報出力部、１２０…入力インターフェース、１３０…出力インターフェース、１４０…表示装置、１５０…操作装置、１６０…ＲＡＭ、１７０…ＲＯＭ、２００…電子楽器、２１０…プロセッサ、２２０…鍵、２３０…押鍵検出装置、２４０…スピーカ、２５０…操作装置、２６０…通信装置、２７０…譜面台 1 ... Electronic musical instrument system, 100 ... Information processing device, 110 ... Processor, 111 ... Performance determination unit, 112 ... Trajectory generation unit, 113 ... Image information output unit, 120 ... Input interface, 130 ... Output interface, 140 ... Display device, 150 ... Operating device, 160 ... RAM, 170 ... ROM, 200 ... Electronic musical instrument, 210 ... Processor, 220 ... Key, 230 ... Key press detection device, 240 ... Speaker, 250 ... Operating device, 260 ... Communication device, 270 ... Musical score Platform
Claims (8)
出力インターフェースと、
少なくとも一つのプロセッサと、を備え、
前記少なくとも一つのプロセッサは、
演奏開始タイミングを取得し、
演奏終了タイミングを取得し、
取得された前記演奏開始タイミング及び前記演奏終了タイミングに基づいて演奏時間を取得し、
取得された前記演奏時間に応じた長さを有する軌跡を決定し、
前記入力インターフェースから入力される複数の演奏情報に応じて決定される複数のイラストが、決定された前記軌跡に沿って配置される画像を表示するための情報を、前記出力インターフェースから出力する、
情報処理装置。 Input interface and
With the output interface
With at least one processor,
The at least one processor
Get the performance start timing,
Get the end timing of the performance
The performance time is acquired based on the acquired performance start timing and performance end timing.
A locus having a length corresponding to the acquired playing time is determined, and
A plurality of illustrations determined according to a plurality of performance information input from the input interface output information for displaying an image arranged along the determined locus from the output interface.
Information processing device.
前記演奏時間が第１時間長のときに決定する前記軌跡の長さは、前記演奏時間が前記第１時間長より長い第２時間長のときに決定する前記軌跡の長さより短くなるように、前記軌跡を決定する、
請求項１に記載の情報処理装置。 The at least one processor
The length of the locus determined when the playing time is the first hour length is shorter than the length of the locus determined when the playing time is longer than the first time length and the second time length. To determine the trajectory,
The information processing device according to claim 1.
旋回するにつれて前記画像内の或る位置に近づく渦巻の軌跡に沿って前記複数のイラストを配置する、
請求項１又は２に記載の情報処理装置。 The at least one processor
The plurality of illustrations are arranged along the trajectory of a spiral that approaches a certain position in the image as it turns.
The information processing device according to claim 1 or 2.
前記少なくとも一つのプロセッサは、
受け付けた前記演奏情報に含まれる前記ベロシティ情報に応じて、演奏の力強さを判定し、
判定された前記演奏の力強さに応じて、前記渦巻の軌跡の大きさを変化させる、
請求項３に記載の情報処理装置。 The performance information includes velocity information.
The at least one processor
The strength of the performance is determined according to the velocity information included in the received performance information.
The magnitude of the trajectory of the spiral is changed according to the determined strength of the performance.
The information processing device according to claim 3.
受け付けた前記演奏情報から演奏のリズムを判定し、
判定された前記演奏のリズムに応じて、前記渦巻の軌跡の形状を変形させる、
請求項３又は４に記載の情報処理装置。 The at least one processor
Judging the rhythm of the performance from the received performance information,
The shape of the trajectory of the spiral is deformed according to the determined rhythm of the performance.
The information processing device according to claim 3 or 4.
前記少なくとも一つのプロセッサは、
受け付けた前記演奏情報に含まれる前記音高情報から調性を判定し、
前記軌跡に沿って表示する色を、判定された前記調性に応じて変化させる、
請求項１から５のいずれか１項に記載の情報処理装置。 The performance information includes pitch information.
The at least one processor
The tonality is determined from the pitch information included in the received performance information, and the tonality is determined.
The color displayed along the locus is changed according to the determined tonality.
The information processing device according to any one of claims 1 to 5.
演奏開始タイミングを取得させ、
演奏終了タイミングを取得させ、
取得された前記演奏開始タイミング及び前記演奏終了タイミングに基づいて演奏時間を取得させ、
取得された前記演奏時間に応じた長さを有する軌跡を決定させ、
前記入力インターフェースから入力される複数の演奏情報に応じて決定される複数のイラストが、決定された前記軌跡に沿って配置される画像を表示するための情報を、前記出力インターフェースから出力させる、
方法。 An information processing device computer equipped with an input interface and an output interface
Get the performance start timing,
Get the end timing of the performance
The performance time is acquired based on the acquired performance start timing and performance end timing.
A locus having a length corresponding to the acquired playing time is determined.
A plurality of illustrations determined according to a plurality of performance information input from the input interface output information for displaying an image arranged along the determined locus from the output interface.
Method.
演奏開始タイミングを取得させ、
演奏終了タイミングを取得させ、
取得された前記演奏開始タイミング及び前記演奏終了タイミングに基づいて演奏時間を取得させ、
取得された前記演奏時間に応じた長さを有する軌跡を決定させ、
前記入力インターフェースから入力される複数の演奏情報に応じて決定される複数のイラストが、決定された前記軌跡に沿って配置される画像を表示するための情報を、前記出力インターフェースから出力させる、
プログラム。 An information processing device computer equipped with an input interface and an output interface
Get the performance start timing,
Get the end timing of the performance
The performance time is acquired based on the acquired performance start timing and performance end timing.
A locus having a length corresponding to the acquired playing time is determined.
A plurality of illustrations determined according to a plurality of performance information input from the input interface output information for displaying an image arranged along the determined locus from the output interface.
program.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019042698A JP7331388B2 (en) | 2019-03-08 | 2019-03-08 | Information processing device, method, and program |
| JP2023128847A JP2023138655A (en) | 2019-03-08 | 2023-08-07 | Information processing apparatus, method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019042698A JP7331388B2 (en) | 2019-03-08 | 2019-03-08 | Information processing device, method, and program |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2023128847A Division JP2023138655A (en) | 2019-03-08 | 2023-08-07 | Information processing apparatus, method, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020144320A true JP2020144320A (en) | 2020-09-10 |
| JP7331388B2 JP7331388B2 (en) | 2023-08-23 |
Family
ID=72354067
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019042698A Active JP7331388B2 (en) | 2019-03-08 | 2019-03-08 | Information processing device, method, and program |
| JP2023128847A Pending JP2023138655A (en) | 2019-03-08 | 2023-08-07 | Information processing apparatus, method, and program |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2023128847A Pending JP2023138655A (en) | 2019-03-08 | 2023-08-07 | Information processing apparatus, method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (2) | JP7331388B2 (en) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008233576A (en) * | 2007-03-22 | 2008-10-02 | Hyphenation:Kk | Method for making musical piece and musical score into video and image |
-
2019
- 2019-03-08 JP JP2019042698A patent/JP7331388B2/en active Active
-
2023
- 2023-08-07 JP JP2023128847A patent/JP2023138655A/en active Pending
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008233576A (en) * | 2007-03-22 | 2008-10-02 | Hyphenation:Kk | Method for making musical piece and musical score into video and image |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023138655A (en) | 2023-10-02 |
| JP7331388B2 (en) | 2023-08-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2002049301A (en) | Key display device, electronic musical instrument system, key display method and memory medium | |
| JP6690589B2 (en) | Electronic musical instrument control terminal, electronic musical instrument control system, electronic musical instrument control program, and electronic musical instrument control method | |
| JP6492933B2 (en) | CONTROL DEVICE, SYNTHETIC SINGING SOUND GENERATION DEVICE, AND PROGRAM | |
| JP6589356B2 (en) | Display control device, electronic musical instrument, and program | |
| JP6856081B2 (en) | Electronic musical instruments, control methods for electronic musical instruments, and programs | |
| JP7331388B2 (en) | Information processing device, method, and program | |
| JP6977741B2 (en) | Information processing equipment, information processing methods, performance data display systems, and programs | |
| JP2018159741A (en) | Song lyrics candidate output device, electric musical instrument, song lyrics candidate output method, and program | |
| JP5847048B2 (en) | Piano roll type score display apparatus, piano roll type score display program, and piano roll type score display method | |
| JP6315677B2 (en) | Performance device and program | |
| JP4180548B2 (en) | Karaoke device with vocal range notification function | |
| JP7467907B2 (en) | Program, method, electronic device, and performance data display system | |
| JP4821505B2 (en) | Electronic keyboard instrument and program used there | |
| JP6582517B2 (en) | Control device and program | |
| JP7326776B2 (en) | Information processing device, information processing method, and program | |
| JP7377415B2 (en) | Information processing device, electronic musical instrument, method and program | |
| JP7338669B2 (en) | Information processing device, information processing method, performance data display system, and program | |
| JP7331915B2 (en) | Information processing device, electronic musical instrument, sound capturing system, method and program | |
| JP2014066740A (en) | Karaoke device | |
| JP2009037022A (en) | Electronic musical instrument | |
| JP2007163618A (en) | Musical accompaniment display apparatus and program | |
| JP6036800B2 (en) | Sound signal generating apparatus and program | |
| WO2010119541A1 (en) | Sound generating apparatus, sound generating method, sound generating program, and recording medium | |
| WO2018198381A1 (en) | Sound-generating device, method, and musical instrument | |
| JP2020008755A (en) | Music-linked image display system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220209 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230130 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230207 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230410 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230711 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230724 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7331388 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |