JP7429936B1 - Keyboard screen display program and its system - Google Patents
Keyboard screen display program and its system Download PDFInfo
- Publication number
- JP7429936B1 JP7429936B1 JP2023114920A JP2023114920A JP7429936B1 JP 7429936 B1 JP7429936 B1 JP 7429936B1 JP 2023114920 A JP2023114920 A JP 2023114920A JP 2023114920 A JP2023114920 A JP 2023114920A JP 7429936 B1 JP7429936 B1 JP 7429936B1
- Authority
- JP
- Japan
- Prior art keywords
- finger
- screen
- key image
- image
- key
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000004044 response Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 abstract description 15
- 102100030368 Phospholipid phosphatase-related protein type 4 Human genes 0.000 description 6
- 102100030383 Phospholipid phosphatase-related protein type 3 Human genes 0.000 description 5
- 238000000034 method Methods 0.000 description 4
- 210000000056 organ Anatomy 0.000 description 2
- 101000760620 Homo sapiens Cell adhesion molecule 1 Proteins 0.000 description 1
- 101000911772 Homo sapiens Hsc70-interacting protein Proteins 0.000 description 1
- 101001139126 Homo sapiens Krueppel-like factor 6 Proteins 0.000 description 1
- 101000710013 Homo sapiens Reversion-inducing cysteine-rich protein with Kazal motifs Proteins 0.000 description 1
- 101000661816 Homo sapiens Suppression of tumorigenicity 18 protein Proteins 0.000 description 1
- 101000661807 Homo sapiens Suppressor of tumorigenicity 14 protein Proteins 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 108090000237 interleukin-24 Proteins 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Landscapes
- Electrophonic Musical Instruments (AREA)
Abstract
【課題】 初心者でも画面上の簡単な操作で疑似的なピアノ演奏を楽しむことができる鍵盤画面表示プログラムを提供する。【解決手段】 少なくとも５本の指のそれぞれを前記画面に接触させる画面上の位置が想定されている場合に、楽曲データを基に、キー画像を次に指定操作する指を特定する指特定工程と、前記楽曲データを基に、指で次に指定操作するキー画像を特定するキー画像特定工程と、前記想定された位置において前記特定した指で前記特定したキー画像を指定操作可能な画面に切り換え表示する表示切換工程とをコンピュータに実行させる。【選択図】図８[Problem] To provide a keyboard screen display program that allows even beginners to enjoy a simulated piano performance by simple operations on the screen. [Solution] A finger identification step of identifying the finger that will next specify a key image based on music data when a position on the screen is assumed in which each of at least five fingers touches the screen. a key image identifying step of identifying a key image to be next designated and operated with a finger based on the song data; and a screen on which the identified key image can be designated and operated with the identified finger at the assumed position. The computer is caused to execute a display switching step of switching the display. [Selection diagram] Figure 8
Description
本発明は、ピアノやオルガンを弾く楽しみを画面上の操作で提供することができる鍵盤画面表示プログラム及びそのシステムに関するものである。 The present invention relates to a keyboard screen display program and its system that can provide the enjoyment of playing a piano or organ through on-screen operations.
PDA（Personal Digital Assistants）等の端末装置の画面上にピアノの鍵盤画面を表示し、鍵盤上でキー画像を指で指定操作することで、指定操作されたキー画像に応じた音を出力するアプリケーションがある。
このようなアプリケーションでは、リアルのピアノの鍵盤を指で弾く場合と同様に、楽曲に応じて、ユーザが手の位置を移動させながら、所定の指をキー画像に接触させる動作を行う。
An application that displays a piano keyboard screen on the screen of a terminal device such as a PDA (Personal Digital Assistants), and by specifying a key image on the keyboard with your fingers, outputs a sound according to the specified key image. There is.
In such an application, the user moves a hand position and touches a predetermined finger on a key image depending on the music, similar to when playing a real piano keyboard with fingers.
ところで、初心者や全くピアノを弾いたことがないユーザでも、もっと簡単にピアノが弾けるイメージを楽しみたいという要請がある。 By the way, even beginners and users who have never played the piano have a desire to enjoy the idea of being able to play the piano more easily.
本発明はかかる事情に鑑みてなされたものであり、その目的は、初心者でも画面上の簡単な操作で疑似的なピアノ演奏を楽しむことができる鍵盤画面表示プログラム及びそのシステムを提供することにある。 The present invention has been made in view of the above circumstances, and its purpose is to provide a keyboard screen display program and its system that allow even beginners to enjoy simulated piano performance by simple operations on the screen. .
本発明は、鍵盤画像を画面上に表示するプログラムであって、少なくとも５本の指のそれぞれを前記画面に接触させる画面上の位置が想定されている場合に、楽曲データを基に、キー画像を次に指定操作する指を特定する指特定工程と、前記楽曲データを基に、指で次に指定操作するキー画像を特定するキー画像特定工程と、前記想定された位置を固定した状態の指における鍵の配列方向の位置に対して、前記指で次に指定操作するキー画像における鍵の配列方向の位置を、左右にシフトして、ユーザの手の位置を固定した状態の指における鍵の配列方向の位置と同じとする画面に切り換え表示する表示切換工程と、を有し、前記楽曲データは、前記キー画像を識別するキー画像識別情報と、当該キー画像を指定操作する指を識別する指識別情報と、前記キー画像の前記指定操作に応じた音を出力する長さを示す音長情報とを基本要素とし、複数の前記基本要素の順番を規定して構成され、前記指特定工程は、前記楽曲データを基に、次に指定操作する指を順に特定し、前記キー画像特定工程は、前記楽曲データを基に、次に指定操作する前記キー画像を順に特定し、前記表示切換工程は、前記楽曲データの前記音長情報を基に、前記画面を切り換え表示するタイミングを決定し、前記画面の切換前のタイミングにおける前記特定した指の位置と、前記特定したキー画像との位置との距離に応じたシフトされた前記鍵盤画像を、前記画面の切換後に表示する、処理をコンピュータに実行させる鍵盤画面表示プログラムである。
The present invention is a program that displays a keyboard image on a screen, and when a position on the screen is assumed where each of at least five fingers touches the screen, a key image is displayed based on music data. a finger identifying step of identifying the finger to perform the next designating operation; a key image identifying step of identifying the key image to perform the next designating operation with the finger based on the song data; The key on the finger with the position of the user's hand fixed by shifting the position in the key arrangement direction of the key image to be next specified with the finger to the left or right relative to the position on the finger in the arrangement direction of the keys. a display switching step of switching to a screen having the same position in the arrangement direction as the music data, and the music data includes key image identification information that identifies the key image, and identifies a finger that specifies and operates the key image. The basic elements are finger identification information to output a sound corresponding to the specified operation of the key image, and sound length information indicating the length of the sound output according to the specified operation of the key image, and the order of the plurality of basic elements is defined. The step is to sequentially identify the finger to perform the next designating operation based on the song data, and the key image identifying step is to sequentially identify the key image to be the next designating operation based on the song data, and the display In the switching step, the timing for switching and displaying the screen is determined based on the note length information of the song data, and the position of the specified finger at the timing before switching the screen and the specified key image are determined. This is a keyboard screen display program that causes a computer to execute a process of displaying the keyboard image shifted according to the distance from the position after switching the screen .
好適には、前記表示切換工程は、前記楽曲データを基に、前記次に指定操作すべきタイミングより前に、前記画面の切り換え表示を行う。 Preferably, in the display switching step, the screen is switched and displayed based on the music data before the timing at which the next designated operation is to be performed.
好適には、前記楽曲データは、前記キー画像を識別するキー画像識別情報と、当該キー画像を指定操作する指を識別する指識別情報と、前記キー画像の前記指定操作に応じた音を出力する長さを示す音長情報とを基本要素とし、複数の基本要素の順番を規定して構成され、前記指特定工程は、前記楽曲データを基に、次に指定操作する指を順に特定し、前記キー画像特定工程は、前記楽曲データを基に、次に指定操作する前記キー画像を順に特定する。 Preferably, the music data outputs key image identification information that identifies the key image, finger identification information that identifies a finger that specifies the key image, and a sound corresponding to the specified operation of the key image. The basic element is note length information indicating the length of the note to be played, and the order of the plurality of basic elements is defined. The key image specifying step sequentially specifies the key images to be specified next based on the music data.
好適には、前記表示切換工程は、前記楽曲データの前記音長情報を基に、前記画面を切り換え表示するタイミングを決定する。 Preferably, the display switching step determines the timing for switching and displaying the screen based on the note length information of the music data.
好適には、前記表示切換工程は、前記画面の切換前のタイミングにおける前記特定した指の位置と、前記特定したキー画像との位置との距離に応じたシフトされた前記鍵盤画像を、前記画面の切換後に表示する。 Preferably, the display switching step displays the shifted keyboard image on the screen according to the distance between the identified finger position and the identified key image at a timing before the screen is switched. Displayed after switching.
好適には、前記キー画像の前記指による指定操作に応じて、当該キー画像に割り当てられた音を出力する。 Preferably, in response to a designation operation of the key image with the finger, a sound assigned to the key image is output.
好適には、少なくとも前記５本の指の各々が前記指定操作するキー画像の画面上の位置はそれぞれ一つ又は複数である。 Preferably, each of the key images designated by each of the five fingers has one or more positions on the screen.
好適には、次に指で指定操作する前記キー画像を視覚的に識別可能な画像として表示する。 Preferably, the key image that is then designated by a finger is displayed as a visually distinguishable image.
好適には、前記識別可能な画像は、指のイラスト画像である。 Preferably, the identifiable image is an illustration image of a finger.
本発明は、鍵盤画像を画面上に表示する鍵盤画像表示システムであって、少なくとも５本の指のそれぞれを前記画面に接触させる画面上の位置が想定されている場合に、楽曲データを基に、キー画像を次に指定操作する指を特定する指特定手段と、前記楽曲データを基に、指で次に指定操作するキー画像を特定するキー画像特定手段と、前記想定された位置を固定した状態の指における鍵の配列方向の位置に対して、前記指で次に指定操作するキー画像における鍵の配列方向の位置を、左右にシフトして、ユーザの手の位置を固定した状態の指における鍵の配列方向の位置と同じとする画面に切り換え表示する表示切換手段と、を有し、前記楽曲データは、前記キー画像を識別するキー画像識別情報と、当該キー画像を指定操作する指を識別する指識別情報と、前記キー画像の前記指定操作に応じた音を出力する長さを示す音長情報とを基本要素とし、複数の前記基本要素の順番を規定して構成され、前記指特定手段は、前記楽曲データを基に、次に指定操作する指を順に特定し、前記キー画像特定手段は、前記楽曲データを基に、次に指定操作する前記キー画像を順に特定し、前記表示切換手段は、前記楽曲データの前記音長情報を基に、前記画面を切り換え表示するタイミングを決定し、前記画面の切換前のタイミングにおける前記特定した指の位置と、前記特定したキー画像との位置との距離に応じたシフトされた前記鍵盤画像を、前記画面の切換後に表示する、鍵盤画面表示システムである。
The present invention is a keyboard image display system that displays a keyboard image on a screen, and when a position on the screen where each of at least five fingers touches the screen is assumed, the keyboard image is displayed based on music data. , a finger specifying means for specifying a finger to perform a next specifying operation on a key image, a key image specifying means for specifying a key image to perform a next specifying operation on with a finger based on the music data, and fixing the assumed position. With respect to the position in the key arrangement direction of the finger in the state where the user's hand is fixed, the position in the key arrangement direction of the key image to be specified next with the finger is shifted left and right. and display switching means for switching and displaying a screen that is the same as the position of the keys in the arrangement direction of the finger, and the music data includes key image identification information that identifies the key image, and a specifying operation of the key image. The basic elements are finger identification information for identifying a finger and sound length information indicating the length of outputting a sound corresponding to the specified operation of the key image, and are configured by defining the order of the plurality of basic elements, The finger specifying means sequentially specifies the fingers to perform the next specifying operation based on the music data, and the key image specifying means sequentially specifies the key images to perform the next specifying operation based on the song data. , the display switching means determines the timing for switching and displaying the screen based on the note length information of the song data, and determines the timing at which the screen is switched and displayed, and the position of the specified finger and the specified key at the timing before switching the screen. The keyboard screen display system displays the keyboard image shifted according to the distance between the keyboard image and the image after switching the screen .
本発明によれば、、初心者でも画面上の簡単な操作で疑似的なピアノ演奏を楽しむことができる鍵盤画面表示プログラム及びそのシステムを提供することにある。 According to the present invention, it is an object of the present invention to provide a keyboard screen display program and its system that allow even beginners to enjoy a simulated piano performance by simple operations on the screen.
以下、本発明の実施形態に係る演奏システムについて説明する。
図１は、本発明の実施形態に係る演奏システムのネットワーク環境を説明するための図である。
図１に示すように、演奏システム１は、複数の端末装置３と、サーバ装置６とがネットワーク７を介して通信可能になっている。
A performance system according to an embodiment of the present invention will be described below.
FIG. 1 is a diagram for explaining a network environment of a performance system according to an embodiment of the present invention.
As shown in FIG. 1, in the performance system 1, a plurality of terminal devices 3 and a server device 6 can communicate with each other via a network 7.
本実施形態の演奏システム１は、端末装置３において、楽曲データに応じて鍵盤画像を画面２３上で左右に移動させることで、ユーザは手の位置を想定された位置から動かさずに、指でそのまま適切なキー画像に触れることができる。そのため、演奏が楽になり、初心者でも演奏を楽しむことができる。 The performance system 1 of the present embodiment allows the user to move the keyboard image left and right on the screen 23 according to the music data on the terminal device 3, without moving the hand position from the expected position. You can directly touch the appropriate key image. Therefore, it becomes easier to play, and even beginners can enjoy playing.
＜端末装置３＞
図２は、図１に示す端末装置３の機能ブロック図である。
図２に示すように、端末装置３は、例えば、ディスプレイ５１，スピーカ５２，操作部５３，通信部５５，ブルートゥース（登録商標)通信部５７，メモリ５９及び処理部６１を有する。
端末装置３は、ノートブック等のＰＤＡである。
<Terminal device 3>
FIG. 2 is a functional block diagram of the terminal device 3 shown in FIG. 1.
As shown in FIG. 2, the terminal device 3 includes, for example, a display 51, a speaker 52, an operation section 53, a communication section 55, a Bluetooth (registered trademark) communication section 57, a memory 59, and a processing section 61.
The terminal device 3 is a PDA such as a notebook.
ディスプレイ５１は、処理部６１からの信号に基づいた画像を表示する。ディスプレイ５１はタッチパネル機能を備えている。
スピーカ５２は、処理部６１からの制御により、音響出力を行う。
操作部５３は、タッチパネル、キーボードやマウス等の操作手段である。
通信部５５は、サーバ装置６と通信を行う。
ブルートゥース通信部５７は、赤外線コントローラ１９とブルートゥース通信を行う。
メモリ５９は、処理部６１が実行するプログラムを記憶する。
処理部６１は、メモリ５９に記憶されたアプリケーションプログラムＰＲＧ１を実行して、本実施形態で規定する端末装置３の処理を行う。
The display 51 displays an image based on a signal from the processing section 61. The display 51 has a touch panel function.
The speaker 52 outputs sound under control from the processing section 61.
The operation unit 53 is an operation means such as a touch panel, a keyboard, and a mouse.
The communication unit 55 communicates with the server device 6.
The Bluetooth communication unit 57 performs Bluetooth communication with the infrared controller 19.
The memory 59 stores programs executed by the processing unit 61.
The processing unit 61 executes the application program PRG1 stored in the memory 59 to perform the processing of the terminal device 3 defined in this embodiment.
端末装置３は、通信部５５からネットワーク９を介してアプリケーションプログラムＰＲＧ１をダウンロードしてメモリ５９に記憶する。 The terminal device 3 downloads the application program PRG1 from the communication unit 55 via the network 9 and stores it in the memory 59.
＜サーバ装置６＞
図３は、図１に示すサーバ装置６の機能ブロック図である。
図３に示すように、サーバ装置６は、通信部５５、メモリ５９及び処理部６１を有する。
通信部５５は、端末装置３と通信を行う。
メモリ５９は、処理部６１が実行するプログラムＰＲＧ２を記憶する。
処理部６１は、メモリ５９に記憶されたプログラムＰＲＧ２を実行して、本実施形態で規定するサーバ装置６の処理を行う。
<Server device 6>
FIG. 3 is a functional block diagram of the server device 6 shown in FIG. 1.
As shown in FIG. 3, the server device 6 includes a communication section 55, a memory 59, and a processing section 61.
The communication unit 55 communicates with the terminal device 3 .
The memory 59 stores a program PRG2 executed by the processing unit 61.
The processing unit 61 executes the program PRG2 stored in the memory 59 to perform the processing of the server device 6 defined in this embodiment.
サーバ装置６は、端末装置３からの要求に応じて、アプリケーションプログラムＰＲＧ１を通信部５５からネットワーク９を介して端末装置３にダウンロードする。 The server device 6 downloads the application program PRG1 from the communication unit 55 to the terminal device 3 via the network 9 in response to a request from the terminal device 3.
以下、端末装置３によるアプリケーションプログラムＰＲＧ１に基づいた処理と、及びサーバ装置６によるプログラムＰＲＧ２に基づいた処理により、実現する端末装置３のディスプレイ５１に表示する画面を説明する。
図４は、図２に示す端末装置３のディスプレイ５１に表示する鍵盤画像の画面２３を説明するための図である。
図４に示すように、画面２３には、鍵盤画像が表示されている。
鍵盤画像内には、複数のキー画像が表示されており、図４の例では、キー画像識別情報がｘ５～ｘ１３のキー画像が表示されている。
Hereinafter, a screen displayed on the display 51 of the terminal device 3 realized by processing based on the application program PRG1 by the terminal device 3 and processing based on the program PRG2 by the server device 6 will be described.
FIG. 4 is a diagram for explaining the keyboard image screen 23 displayed on the display 51 of the terminal device 3 shown in FIG.
As shown in FIG. 4, a keyboard image is displayed on the screen 23.
A plurality of key images are displayed within the keyboard image, and in the example of FIG. 4, key images whose key image identification information is x5 to x13 are displayed.
図５は、図５に示す画面２３の鍵盤画像における想定されるユーザの手と指の位置を説明するための図である。
図５に示すように、ユーザは、想定された手の位置を固定（動かさない）でキー画像に触れる（楽曲を弾く）ことができるように、後述する処理が行われる。
図５に示す状態では、例えば、ユーザは指Ａでキー画像Ｘ７に触れる。それに応じた音響がスピーカ５２から出力される。
FIG. 5 is a diagram for explaining the assumed positions of the user's hands and fingers on the keyboard image on the screen 23 shown in FIG.
As shown in FIG. 5, the process described below is performed so that the user can touch the key image (play the music) while fixing (not moving) the assumed hand position.
In the state shown in FIG. 5, the user touches the key image X7 with finger A, for example. Sound corresponding to the sound is output from the speaker 52.
図６は、図５に示す画面２３における鍵盤画像をシフトした後の状態を説明するための図である。
端末装置３の処理部６１は、図５に示す画面２３において、楽曲データを基に曲の進行に応じて、次に、ユーザが指Ｄでキー画像Ｘ１２に触れる場合には、鍵盤画像を左に２つシフトさせた図６に示す鍵盤画像をディスプレイ５１に切り換え表示する。
これにより、ユーザは、手及び指の位置を全く移動させずに、指Ｄでキー画像Ｘ１２に触れて指定操作できる。
FIG. 6 is a diagram for explaining the state after the keyboard image on the screen 23 shown in FIG. 5 has been shifted.
Next, when the user touches the key image X12 with the finger D, the processing unit 61 of the terminal device 3 moves the keyboard image to the left on the screen 23 shown in FIG. The keyboard image shown in FIG. 6, which has been shifted by two places, is switched and displayed on the display 51.
Thereby, the user can perform a designation operation by touching the key image X12 with the finger D without moving the position of the hand or fingers at all.
図７は、楽曲データのフォーマットを説明するための図である。
図７に示すように、楽曲データは、例えば、キー画像を識別するキー画像識別情報と、当該キー画像を指定操作する指を識別する指識別情報と、前記キー画像の前記指定操作に応じた音を出力する長さ（四分音符とか八分音符とか）を示す音長情報とを基本要素とし、複数の基本要素の順番を規定して構成される。
FIG. 7 is a diagram for explaining the format of music data.
As shown in FIG. 7, the music data includes, for example, key image identification information that identifies a key image, finger identification information that identifies a finger that performs a designation operation on the key image, and information that identifies a finger that performs a designation operation on the key image. It is constructed by defining the order of a plurality of basic elements, with tone length information indicating the length of a sound output (quarter note, eighth note, etc.) as a basic element.
以下、図２に示す端末装置３による鍵盤画像の画面２３の表示処理について説明する。
図８は、図２に示す端末装置３による鍵盤画像の画面２３の表示処理について説明するためのフローチャートである。
以下に示す処理は、端末装置３によるアプリケーションプログラムＰＲＧ１実行と、サーバ装置６によるプログラムＰＲＧ２の実行とにより、協働して行われる。
また、以下の処理を、アプリケーションプログラムＰＲＧ１あるいはプログラムＰＲＧ２のどちらか一方ののみ基づいて実行してもよい。
The display processing of the keyboard image screen 23 by the terminal device 3 shown in FIG. 2 will be described below.
FIG. 8 is a flowchart for explaining the display process of the keyboard image screen 23 by the terminal device 3 shown in FIG.
The processing described below is performed cooperatively by execution of the application program PRG1 by the terminal device 3 and execution of the program PRG2 by the server device 6.
Further, the following processing may be executed based only on either the application program PRG1 or the program PRG2.
ステップＳＴ１１：
端末装置３のユーザが指定した楽曲データが、例えば、サーバ装置６から端末装置３にダウンロードされ、図２に示すメモリ５９に記憶される。
端末装置３の処理部６１は、メモリ５９から楽曲データを読み込む。
Step ST11:
Music data specified by the user of the terminal device 3 is downloaded from the server device 6 to the terminal device 3, for example, and stored in the memory 59 shown in FIG.
The processing unit 61 of the terminal device 3 reads music data from the memory 59.
ステップＳＴ１２：
端末装置３の処理部６１は、ステップＳＴ１１で読み出した楽曲データから、最初に指定操作する指の指識別情報を取得する。
Step ST12:
The processing unit 61 of the terminal device 3 acquires the finger identification information of the finger that performs the designation operation first from the music data read out in step ST11.
ステップＳＴ１３：
端末装置３の処理部６１は、ステップＳＴ１１で読み出した楽曲データから、最初に指定操作するキー画像のキー画像識別情報を取得する。
Step ST13:
The processing unit 61 of the terminal device 3 acquires the key image identification information of the key image to be operated for designation first from the music data read out in step ST11.
ステップＳＴ１４：
処理部６１は、予め決められた手の位置において、ステップＳＴ１２で特定した指識別情報の指で、ステップＳＴ１３で特定したキー画像識別情報のキー画像を指定操作可能な画面２３をディスプレイ５１に表示する。
Step ST14:
The processing unit 61 displays on the display 51 a screen 23 on which the key image of the key image identification information specified in step ST13 can be specified and operated with the finger of the finger identification information specified in step ST12 at a predetermined hand position. do.
ステップＳＴ１５：
端末装置３の処理部６１は、ステップＳＴ１１で読み出した楽曲データから、次に指定操作する指の指識別情報を取得する。
Step ST15:
The processing unit 61 of the terminal device 3 acquires the finger identification information of the finger to be specified next from the music data read in step ST11.
ステップＳＴ１６：
端末装置３の処理部６１は、ステップＳＴ１１で読み出した楽曲データから、次に指定操作するキー画像のキー画像識別情報を取得する。
Step ST16:
The processing unit 61 of the terminal device 3 acquires the key image identification information of the key image to be specified next from the music data read in step ST11.
ステップＳＴ１７：
処理部６１は、次の指の指定操作に応じた画面２３を表示するタイミングであるか否かを判断し、タイミングであると判断した場合にステップＳＴ１８に進む。
当該タイミングは、現時点で指定操作している図７の楽曲データの音長データに基づいて決定される。
当該タイミングは、次の指で指定操作する前のタイミングである。
Step ST17:
The processing unit 61 determines whether or not it is the timing to display the screen 23 corresponding to the next finger designation operation, and when determining that it is the timing, proceeds to step ST18.
The timing is determined based on the note length data of the music data in FIG. 7 that is currently being specified.
The timing is the timing before the next finger designation operation.
ステップＳＴ１８：
処理部６１は、上記想定された手及び指の位置において、ステップＳＴ１６で特定した指識別情報の指で、ステップＳＴ１７で特定したキー画像識別情報のキー画像を指定操作可能な画面２３をディスプレイ５１に（切り換えて）表示する。
Step ST18:
The processing unit 61 displays the screen 23 on the display 51 in which the key image of the key image identification information specified in step ST17 can be specified with the finger of the finger identification information specified in step ST16 at the assumed hand and finger positions. (switch) to display.
上記動作は、画面上の動作であるが、画面２３において、キー画像がユーザによって指で接触されると、そのキー画像に応じた音響がスピーカ５２から出力される。 The above operation is an operation on the screen, and when the key image is touched by the user's finger on the screen 23, a sound corresponding to the key image is output from the speaker 52.
以上説明したように、本実施形態によれば、楽曲データに応じて鍵盤画像を画面２３上で左右に移動させることで、ユーザが想定された位置から手や指を移動させずに、手の位置を固定した状態で、指でそのまま適切なキー画像に触れることができる。そのため、演奏が楽になり、初心者でも演奏を楽しむことができる。 As explained above, according to the present embodiment, by moving the keyboard image left and right on the screen 23 according to the song data, the user can move the hand and fingers from the expected position. You can touch the appropriate key image with your finger while keeping the position fixed. Therefore, it becomes easier to play, and even beginners can enjoy playing.
上述した実施形態では、図５，図６に示すように、５本の指Ａ～Ｅのそれぞれに、一つのキー画像に対応した画面２３上の領域（位置）を対応付けたが、一つの指に２つ以上のキー画像に対応した画面２３上の領域を対応付けもよい。 In the embodiment described above, as shown in FIGS. 5 and 6, each of the five fingers A to E is associated with an area (position) on the screen 23 corresponding to one key image. It is also possible to associate a finger with an area on the screen 23 corresponding to two or more key images.
その場合は、例えば、図５に示す画面２３において、指でキー画像Ｘ１０，Ｘ１１の２つのキー画像に対応した画面２３上の領域（位置）を対応付け、楽曲データに基づいて次に指Ｄで指定操作するキー画像がＸ１１であった場合に、図５に示す同じ画面２３をそのまま表示する（鍵盤画像のシフト表示しない）。
このように鍵盤画像をシフトさせなくても、ユーザは指Ｄでキー画像Ｘ１１を指定操作することができる。
In that case, for example, on the screen 23 shown in FIG. 5, the areas (positions) on the screen 23 corresponding to the two key images X10 and When the key image to be specified and operated is X11, the same screen 23 shown in FIG. 5 is displayed as is (the keyboard image is not shifted and displayed).
The user can specify the key image X11 with the finger D without shifting the keyboard image in this way.
また、上述した実施形態でにおいて、次のキー画像を指で指定操作するタイミングにあったときに、当該次に指定操作するキー画像をユーザが視覚的に識別可能な画像として表示する。例えば、指のイラスト画像をキー画像内に表示してもよい。である。これにより、ユーザは次に指定操作するキー画像を容易に知ることができる。 Furthermore, in the embodiment described above, when it is time to specify the next key image with a finger, the key image to be specified next is displayed as an image that can be visually identified by the user. For example, an illustration image of a finger may be displayed within the key image. It is. This allows the user to easily know which key image to perform the next designation operation.
本発明は上述した実施形態には限定されない。
すなわち、当業者は、本発明の技術的範囲またはその均等の範囲内において、上述した実施形態の構成要素に関し、様々な変更、コンビネーション、サブコンビネーション、並びに代替を行ってもよい。
上述した実施形態では、想定位置に片手を位置させる場合を例示したが、両手のそれぞれに想定位置を決め、それに応じたキー画像を表示するようにしてもよい。
The invention is not limited to the embodiments described above.
That is, those skilled in the art may make various changes, combinations, subcombinations, and substitutions with respect to the components of the above-described embodiments within the technical scope of the present invention or its equivalent scope.
In the embodiment described above, the case where one hand is positioned at the assumed position is illustrated, but the assumed positions may be determined for each of both hands, and key images corresponding to the positions may be displayed.
本発明は、ピアノやオルガンを弾く楽しみを画面上の操作で提供するシステムに適用可能である。 INDUSTRIAL APPLICATION This invention is applicable to the system which provides the pleasure of playing a piano or an organ by operation on a screen.
１…演奏システム
３…端末装置
６…サーバ装置
２３…画面
５１…ディスプレイ
1...Performance system 3...Terminal device 6...Server device 23...Screen 51...Display
Claims (7)
少なくとも５本の指のそれぞれを前記画面に接触させる画面上の位置が想定されている場合に、
楽曲データを基に、キー画像を次に指定操作する指を特定する指特定工程と、
前記楽曲データを基に、指で次に指定操作するキー画像を特定するキー画像特定工程と、
前記想定された位置を固定した状態の指における鍵の配列方向の位置に対して、前記指で次に指定操作するキー画像における鍵の配列方向の位置を、左右にシフトして、ユーザの手の位置を固定した状態の指における鍵の配列方向の位置と同じとする画面に切り換え表示する表示切換工程と、
を有し、
前記楽曲データは、前記キー画像を識別するキー画像識別情報と、当該キー画像を指定操作する指を識別する指識別情報と、前記キー画像の前記指定操作に応じた音を出力する長さを示す音長情報とを基本要素とし、複数の前記基本要素の順番を規定して構成され、
前記指特定工程は、前記楽曲データを基に、次に指定操作する指を順に特定し、
前記キー画像特定工程は、前記楽曲データを基に、次に指定操作する前記キー画像を順に特定し、
前記表示切換工程は、
前記楽曲データの前記音長情報を基に、前記画面を切り換え表示するタイミングを決定し、
前記画面の切換前のタイミングにおける前記特定した指の位置と、前記特定したキー画像との位置との距離に応じたシフトされた前記鍵盤画像を、前記画面の切換後に表示する
処理をコンピュータに実行させる鍵盤画面表示プログラム。 A program that displays a keyboard image on the screen,
If a position on the screen is assumed that causes each of at least five fingers to touch the screen,
a finger identification step of identifying the finger that will next designate the key image based on the music data;
a key image identifying step of identifying a key image to be specified next with a finger based on the song data;
With respect to the position of the finger in the key arrangement direction when the assumed position is fixed, the position of the key arrangement direction in the key image to be specified next with the finger is shifted left and right, and the user's hand a display switching step of switching to a screen that is the same as the position of the finger in the arrangement direction of the keys when the position of the finger is fixed;
has
The music data includes key image identification information that identifies the key image, finger identification information that identifies a finger that specifies the key image, and a length for outputting a sound corresponding to the specified operation of the key image. The tone length information shown is a basic element, and the order of the plurality of basic elements is defined,
The finger specifying step sequentially specifies the fingers to perform the next designated operation based on the music data,
The key image identifying step sequentially identifies the key images to be specified next based on the music data,
The display switching step includes:
determining the timing for switching and displaying the screen based on the note length information of the song data;
Displaying the shifted keyboard image according to the distance between the identified finger position and the identified key image position at a timing before the screen switching, after the screen switching.
A keyboard screen display program that causes the computer to perform processing .
請求項１に記載の鍵盤画面表示プログラム。 2. The keyboard screen display program according to claim 1, wherein the display switching step performs switching display of the screen based on the music data before the timing at which the next designated operation is to be performed.
請求項２に記載の鍵盤画面表示プログラム。 The keyboard screen display program according to claim 2, wherein a sound assigned to the key image is output in response to a designation operation of the key image with the finger.
請求項３に記載の鍵盤画面表示プログラム。 4. The keyboard screen display program according to claim 3, wherein each of the key images designated by each of the five fingers has one or more positions on the screen.
請求項４に記載の鍵盤画面表示プログラム。 5. The keyboard screen display program according to claim 4, wherein the key image that is then designated by a finger is displayed as a visually distinguishable image.
請求項５に記載の鍵盤画面表示プログラム。 The keyboard screen display program according to claim 5, wherein the identifiable image is an illustration image of a finger.
少なくとも５本の指のそれぞれを前記画面に接触させる画面上の位置が想定されている場合に、
楽曲データを基に、キー画像を次に指定操作する指を特定する指特定手段と、
前記楽曲データを基に、指で次に指定操作するキー画像を特定するキー画像特定手段と、
前記想定された位置を固定した状態の指における鍵の配列方向の位置に対して、前記指で次に指定操作するキー画像における鍵の配列方向の位置を、左右にシフトして、ユーザの手の位置を固定した状態の指における鍵の配列方向の位置と同じとする画面に切り換え表示する表示切換手段と、
を有し、
前記楽曲データは、前記キー画像を識別するキー画像識別情報と、当該キー画像を指定操作する指を識別する指識別情報と、前記キー画像の前記指定操作に応じた音を出力する長さを示す音長情報とを基本要素とし、複数の前記基本要素の順番を規定して構成され、
前記指特定手段は、前記楽曲データを基に、次に指定操作する指を順に特定し、
前記キー画像特定手段は、前記楽曲データを基に、次に指定操作する前記キー画像を順に特定し、
前記表示切換手段は、
前記楽曲データの前記音長情報を基に、前記画面を切り換え表示するタイミングを決定し、
前記画面の切換前のタイミングにおける前記特定した指の位置と、前記特定したキー画像との位置との距離に応じたシフトされた前記鍵盤画像を、前記画面の切換後に表示する
鍵盤画面表示システム。
A keyboard image display system that displays a keyboard image on a screen,
If a position on the screen is assumed that causes each of at least five fingers to touch the screen,
a finger identifying means for identifying the finger that will next designate the key image based on the music data;
key image specifying means for specifying a key image to be specified next with a finger based on the song data;
With respect to the position of the finger in the key arrangement direction with the assumed position fixed, the position of the key arrangement direction of the key image to be specified next with the finger is shifted left and right, and the user's hand display switching means for switching and displaying a screen that is the same as the position of the finger in the arrangement direction of the keys when the position of the finger is fixed;
has
The music data includes key image identification information for identifying the key image, finger identification information for identifying a finger that performs a specified operation on the key image, and a length for outputting a sound corresponding to the specified operation for the key image. The tone length information shown is a basic element, and the order of the plurality of basic elements is defined,
The finger identifying means sequentially identifies a finger to perform a next designated operation based on the music data,
The key image identifying means sequentially identifies the key images to be specified next based on the music data,
The display switching means is
determining the timing for switching and displaying the screen based on the note length information of the song data;
Displaying the shifted keyboard image according to the distance between the identified finger position and the identified key image position at a timing before the screen switching, after the screen switching.
Keyboard screen display system.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2023114920A JP7429936B1 (en) | 2023-07-13 | 2023-07-13 | Keyboard screen display program and its system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2023114920A JP7429936B1 (en) | 2023-07-13 | 2023-07-13 | Keyboard screen display program and its system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP7429936B1 true JP7429936B1 (en) | 2024-02-09 |
Family
ID=89806727
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2023114920A Active JP7429936B1 (en) | 2023-07-13 | 2023-07-13 | Keyboard screen display program and its system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7429936B1 (en) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011141460A (en) | 2010-01-08 | 2011-07-21 | Toshihiko Mizukami | Touch panel input controller, and program |
-
2023
- 2023-07-13 JP JP2023114920A patent/JP7429936B1/en active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011141460A (en) | 2010-01-08 | 2011-07-21 | Toshihiko Mizukami | Touch panel input controller, and program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6344578B2 (en) | How to play an electronic musical instrument | |
| EP2786370B1 (en) | Systems and methods of note event adjustment | |
| US9076264B1 (en) | Sound sequencing system and method | |
| TWI304968B (en) | Electronic musical apparatus, control method therefor, and storage medium storing instructions for implementing the method | |
| JP5247742B2 (en) | GAME DEVICE, GAME DEVICE CONTROL METHOD, AND PROGRAM | |
| US20080016457A1 (en) | Character input device, character input method, and information storage medium | |
| JP7429936B1 (en) | Keyboard screen display program and its system | |
| JP2016182245A (en) | Game device and program | |
| WO2015146201A1 (en) | Musical score displaying and performing program, and musical score displaying and performing device | |
| JP5821170B2 (en) | Electronic music apparatus and program | |
| WO2003098524A1 (en) | Teaching material display method and program | |
| CN106328109A (en) | Semi-intelligent and intelligent performing method for intelligent musical instrument | |
| JP2011141460A (en) | Touch panel input controller, and program | |
| JP2016051150A (en) | Musical performance supporting system | |
| KR102454328B1 (en) | Method and apparatus to mark point of arrival of singing part in music performance game | |
| JP4176545B2 (en) | Display musical score performance section designation device and display musical score designation section performance device | |
| CN107404581B (en) | Musical instrument simulation method and device for mobile terminal, storage medium and mobile terminal | |
| JP4662259B2 (en) | Music score creation device and music score creation program | |
| JP2018156016A (en) | Score displaying and performing program, and score displaying and performing apparatus | |
| WO2022101968A1 (en) | Signal processing device, signal processing system, and signal processing method | |
| JP6770422B2 (en) | Score display program | |
| JP6416028B2 (en) | Karaoke input device and program | |
| JP2530907B2 (en) | Electronic musical instrument | |
| JP2003050577A (en) | Playing operation display device and program | |
| JP5260694B2 (en) | Information processing apparatus, information processing apparatus control method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230713 |
|
| A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20230714 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230808 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230926 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231128 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20231220 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240122 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7429936 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |