JP7035509B2 - Display control method, program and information processing device - Google Patents

Display control method, program and information processing device Download PDF

Info

Publication number
JP7035509B2
JP7035509B2 JP2017246012A JP2017246012A JP7035509B2 JP 7035509 B2 JP7035509 B2 JP 7035509B2 JP 2017246012 A JP2017246012 A JP 2017246012A JP 2017246012 A JP2017246012 A JP 2017246012A JP 7035509 B2 JP7035509 B2 JP 7035509B2
Authority
JP
Japan
Prior art keywords
time series
elements
time
series
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017246012A
Other languages
Japanese (ja)
Other versions
JP2019113661A (en
Inventor
琢哉 藤島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Priority to JP2017246012A priority Critical patent/JP7035509B2/en
Publication of JP2019113661A publication Critical patent/JP2019113661A/en
Application granted granted Critical
Publication of JP7035509B2 publication Critical patent/JP7035509B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Electrophonic Musical Instruments (AREA)
  • Auxiliary Devices For Music (AREA)

Description

本発明は、時系列に配列される複数の要素(例えば楽曲のコード名)を表示する技術に関する。 The present invention relates to a technique for displaying a plurality of elements (for example, a chord name of a musical piece) arranged in a time series.

楽曲の演奏音を表す音響信号を解析することで当該楽曲における複数のコード名の時系列を推定する技術が従来から提案されている。例えば特許文献1には、音響信号からコードの構成音とベース音とを確定し、確定の結果からコード名を推定するコード推定検出装置が開示されている。コード名を推定した結果は表示装置に表示される。 Conventionally, a technique for estimating a time series of a plurality of chord names in a musical piece by analyzing an acoustic signal representing the performance sound of the musical piece has been proposed. For example, Patent Document 1 discloses a chord estimation detection device that determines a chord constituent sound and a bass sound from an acoustic signal and estimates a chord name from the determination result. The result of estimating the code name is displayed on the display device.

特開2014-235328号公報Japanese Unexamined Patent Publication No. 2014-235328

音響信号から推定された複数のコード名の時系列を時間軸上に直線状に表示するだけでは、楽曲内で相互に類似する複数の区間の関係を利用者が容易に確認できないという問題がある。なお、以上の説明では楽曲内の複数のコード名の時系列を表示する場面を便宜的に例示したが、時系列に配列される複数の要素を表示装置に表示させる任意の場面で、同様の問題が想定される。以上の事情を考慮して、本発明の好適な態様は、複数の要素の時系列の相互的な関係を利用者が容易に確認できるようにすることを目的とする。 There is a problem that the user cannot easily confirm the relationship between multiple sections that are similar to each other in the music simply by displaying the time series of a plurality of code names estimated from the acoustic signal in a straight line on the time axis. .. In the above description, the scene of displaying the time series of a plurality of chord names in the music is exemplified for convenience, but the same is true in any scene where a plurality of elements arranged in the time series are displayed on the display device. A problem is expected. In consideration of the above circumstances, a preferred aspect of the present invention is to make it possible for the user to easily confirm the mutual relationship of the time series of a plurality of elements.

以上の課題を解決するために、本発明の好適な態様に係る情報処理装置は、時系列データが表す複数の要素の時系列から、複数の第1要素の時系列と、前記複数の第1要素の時系列に類似する複数の第2要素の時系列とを特定し、前記複数の第1要素を第1方向に配列した第1画像と、前記複数の第2要素を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させる。 In order to solve the above problems, the information processing apparatus according to the preferred embodiment of the present invention has a time series of a plurality of elements represented by time series data, a time series of a plurality of first elements, and a plurality of first elements. A first image in which a plurality of second elements similar to the time series of the elements are specified and the plurality of first elements are arranged in the first direction, and the plurality of second elements are arranged in the first direction. A display device displays a presentation screen in which the arranged second images are arranged side by side in the second direction intersecting the first direction.

本発明の好適な態様に係るプログラムは、時系列データが表す複数の要素の時系列から、複数の第1要素の時系列と、前記複数の第1要素の時系列に類似する複数の第2要素の時系列とを特定する時系列解析処理と、前記複数の第1要素を第1方向に配列した第1画像と、前記複数の第2要素を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させる表示制御処理とをコンピュータに実行させる。 The program according to a preferred embodiment of the present invention is a time series of a plurality of elements represented by time series data, a time series of a plurality of first elements, and a plurality of second elements similar to the time series of the plurality of first elements. A time series analysis process for specifying the time series of the elements, a first image in which the plurality of first elements are arranged in the first direction, and a second image in which the plurality of second elements are arranged in the first direction. The computer is made to execute a display control process for displaying the presentation screens arranged in the second direction intersecting the first direction on the display device.

本発明の第1実施形態に係る情報処理装置の構成を例示するブロック図である。It is a block diagram which illustrates the structure of the information processing apparatus which concerns on 1st Embodiment of this invention. 解析期間(指定期間および関連期間)の説明図である。It is explanatory drawing of the analysis period (designated period and related period). 提示画面の模式図である。It is a schematic diagram of a presentation screen. 制御装置が実行する処理のフローチャートである。It is a flowchart of the process executed by a control device. 第2実施形態における提示画面の模式図である。It is a schematic diagram of the presentation screen in the 2nd Embodiment. 第3実施形態における提示画面の模式図である。It is a schematic diagram of the presentation screen in the 3rd Embodiment. 第4実施形態における提示画面の模式図である。It is a schematic diagram of the presentation screen in 4th Embodiment.

<第1実施形態>
図1は、本発明の第1実施形態に係る情報処理装置100の構成図である。第1実施形態の情報処理装置100は、制御装置11と記憶装置12と表示装置13と入力装置14とを具備するコンピュータシステムで実現される。例えば携帯電話機もしくはスマートフォン等の可搬型の情報端末、またはパーソナルコンピュータ等の可搬型または据置型の情報端末が、第1実施形態の情報処理装置100として好適に利用される。
<First Embodiment>
FIG. 1 is a block diagram of an information processing apparatus 100 according to a first embodiment of the present invention. The information processing device 100 of the first embodiment is realized by a computer system including a control device 11, a storage device 12, a display device 13, and an input device 14. For example, a portable information terminal such as a mobile phone or a smartphone, or a portable or stationary information terminal such as a personal computer is preferably used as the information processing apparatus 100 of the first embodiment.

表示装置13は、例えば液晶表示パネルで構成され、制御装置11から指示された画像を表示する。入力装置14は、利用者からの指示を受付ける入力機器である。具体的には、利用者が操作可能な複数の操作子、または、表示装置13の表示面に対する接触を検知するタッチパネルが、入力装置14として好適に利用される。また、利用者からの音声入力を受付ける収音装置を入力装置14として利用してもよい。 The display device 13 is composed of, for example, a liquid crystal display panel, and displays an image instructed by the control device 11. The input device 14 is an input device that receives instructions from the user. Specifically, a plurality of operators that can be operated by the user or a touch panel that detects contact with the display surface of the display device 13 are preferably used as the input device 14. Further, a sound collecting device that receives voice input from the user may be used as the input device 14.

記憶装置12は、制御装置11が実行するプログラムと制御装置11が使用する各種のデータとを記憶する。記憶装置12は、例えば磁気記録媒体もしくは半導体記録媒体等の公知の記録媒体、または、複数種の記録媒体の組合せで構成される。なお、情報処理装置100とは別体の記憶装置12(例えばクラウドストレージ)を用意し、移動体通信網またはインターネット等の通信網を介して制御装置11が記憶装置12に対する書込および読出を実行してもよい。すなわち、記憶装置12を情報処理装置100から省略してもよい。 The storage device 12 stores a program executed by the control device 11 and various data used by the control device 11. The storage device 12 is composed of a known recording medium such as a magnetic recording medium or a semiconductor recording medium, or a combination of a plurality of types of recording media. A storage device 12 (for example, cloud storage) separate from the information processing device 100 is prepared, and the control device 11 executes writing and reading to the storage device 12 via a mobile communication network or a communication network such as the Internet. You may. That is, the storage device 12 may be omitted from the information processing device 100.

第1実施形態の記憶装置12は、楽曲の演奏音を表す音響信号Xを記憶する。具体的には、楽器から発音された楽音または歌唱者が発声した歌唱音等の各種の音響を表す音響信号Xが記憶装置12に記憶される。なお、例えば光ディスク等の記録媒体に記録された音響信号Xを再生する再生装置から情報処理装置100に音響信号Xを供給してもよい。音響信号Xは任意の形式のファイルとして記憶装置12に記憶される。 The storage device 12 of the first embodiment stores an acoustic signal X representing a performance sound of a musical piece. Specifically, an acoustic signal X representing various sounds such as a musical sound produced by a musical instrument or a singing sound uttered by a singer is stored in the storage device 12. The acoustic signal X may be supplied to the information processing apparatus 100 from a reproduction device that reproduces the acoustic signal X recorded on a recording medium such as an optical disk. The acoustic signal X is stored in the storage device 12 as a file of any format.

制御装置11は、例えばCPU(Central Processing Unit)等の処理回路であり、情報処理装置100を構成する各要素を統括的に制御する。第1実施形態の制御装置11は、記憶装置12に記憶されたプログラムを実行することで、音響信号Xを解析して結果を表示装置13に表示させる複数の機能(信号解析部21,時系列解析部22,表示制御部23および変更処理部24)を実現する。なお、複数の装置の集合(すなわちシステム)で制御装置11の機能を実現してもよいし、制御装置11の機能の一部または全部を専用の電子回路(例えば信号処理回路)で実現してもよい。 The control device 11 is, for example, a processing circuit such as a CPU (Central Processing Unit), and controls each element constituting the information processing device 100 in an integrated manner. The control device 11 of the first embodiment has a plurality of functions (signal analysis unit 21, time series) for analyzing the acoustic signal X and displaying the result on the display device 13 by executing the program stored in the storage device 12. The analysis unit 22, the display control unit 23, and the change processing unit 24) are realized. The function of the control device 11 may be realized by a set of a plurality of devices (that is, a system), or a part or all of the functions of the control device 11 may be realized by a dedicated electronic circuit (for example, a signal processing circuit). May be good.

信号解析部21は、記憶装置12に記憶された音響信号Xを解析することでコードデータDを生成する。コードデータDは、音響信号Xが表す楽曲における複数のコード名Cの時系列を表す時系列データである。具体的には、コードデータDは、楽曲を時間軸上で区分した複数の単位期間の各々についてコード名Cを指定する。各単位期間は、楽曲の拍点により規定される時間長の期間である。第1実施形態では、楽曲の1小節分(すなわち複数拍分)に相当する期間を単位期間として例示する。また、信号解析部21が音響信号Xから複数のコード名Cの時系列を推定する処理には、公知の音楽解析技術が任意に採用される。 The signal analysis unit 21 generates the code data D by analyzing the acoustic signal X stored in the storage device 12. The code data D is time series data representing a time series of a plurality of code names C in the music represented by the acoustic signal X. Specifically, the code data D designates the code name C for each of the plurality of unit periods in which the music is divided on the time axis. Each unit period is a period of time length defined by the beat point of the music. In the first embodiment, a period corresponding to one measure (that is, a plurality of beats) of a musical piece is exemplified as a unit period. Further, a known music analysis technique is arbitrarily adopted in the process in which the signal analysis unit 21 estimates the time series of a plurality of code names C from the acoustic signal X.

時系列解析部22は、信号解析部21が生成したコードデータDを解析することで、楽曲のうち複数のコード名Cの時系列が相互に類似する複数の期間(以下「解析期間」という)Qを特定する。具体的には、時系列解析部22は、図2に例示される通り、利用者が入力装置14に対する操作で指定した1個の期間(以下「指定期間」という)Qaと、楽曲内で複数のコード名Cの時系列が指定期間Qaに類似する期間(以下「関連期間」という)Qbとを解析期間Qとして特定する。第1実施形態では、1個の指定期間Qaに類似する複数(具体的には3個)の関連期間Qbが特定される。具体的には、時系列解析部22は、指定期間Qaの前方に位置する1個の関連期間Qbと、指定期間Qaの後方に位置する2個の関連期間Qbとを特定する。各解析期間Qは、楽曲の拍点により規定される時間長の期間である。第1実施形態の各解析期間Qは、楽曲の1小節分(すなわち複数拍分)に相当する時間長の期間である。複数の解析期間Qは、時間軸上で相互に重複しない。なお、時系列解析部22が複数の解析期間Qを特定する方法は任意である。例えば、楽曲を時間軸上で区分した複数の期間の各々について指定期間Qa内の複数のコード名Cの時系列との類似度を算定し、類似度が大きい所定個の期間を関連期間Qbとして選択することが可能である。 By analyzing the code data D generated by the signal analysis unit 21, the time-series analysis unit 22 analyzes a plurality of periods in which the time-series of a plurality of code names C in the music are similar to each other (hereinafter referred to as “analysis period”). Identify Q. Specifically, as illustrated in FIG. 2, the time-series analysis unit 22 has one period (hereinafter referred to as “designated period”) Qa designated by the user in an operation on the input device 14, and a plurality of Qa in the music. A period (hereinafter referred to as “related period”) Qb in which the time series of the code name C is similar to the specified period Qa is specified as the analysis period Q. In the first embodiment, a plurality of (specifically, three) related periods Qb similar to one designated period Qa are specified. Specifically, the time series analysis unit 22 specifies one related period Qb located before the designated period Qa and two related periods Qb located behind the designated period Qa. Each analysis period Q is a period of time length defined by the beat points of the music. Each analysis period Q of the first embodiment is a period of time length corresponding to one measure (that is, a plurality of beats) of the music. The plurality of analysis periods Q do not overlap each other on the time axis. The method in which the time series analysis unit 22 specifies a plurality of analysis periods Q is arbitrary. For example, the similarity with the time series of a plurality of code names C in the specified period Qa is calculated for each of a plurality of periods in which the music is divided on the time axis, and a predetermined period having a large similarity is set as the related period Qb. It is possible to select.

図1の表示制御部23は、表示装置13に画像を表示させる。第1実施形態の表示制御部23は、時系列解析部22による解析の結果を表す図3の提示画面30を表示装置13に表示させる。図3に例示される通り、提示画面30は、時系列解析部22が特定した複数の解析期間Q(1個の指定期間Qaと3個の関連期間Qb)にそれぞれ対応する複数(4個)の時系列画像31を含んで構成される。任意の1個の解析期間Qに対応する時系列画像31は、当該解析期間Q内の複数のコード名Cの時系列を表す画像である。 The display control unit 23 of FIG. 1 causes the display device 13 to display an image. The display control unit 23 of the first embodiment causes the display device 13 to display the presentation screen 30 of FIG. 3 showing the result of the analysis by the time series analysis unit 22. As illustrated in FIG. 3, the presentation screen 30 has a plurality (4 pieces) corresponding to a plurality of analysis periods Q (1 designated period Qa and 3 related periods Qb) specified by the time series analysis unit 22. It is configured to include the time series image 31 of. The time-series image 31 corresponding to any one analysis period Q is an image representing a time series of a plurality of code names C in the analysis period Q.

各時系列画像31は、相異なる単位期間に対応する複数の単位画像32をX方向に配列した画像である。X方向は、時間軸の方向を意味する横方向である。複数の時系列画像31は、X方向に交差するY方向(具体的には縦方向)に相互に間隔をあけて並列される。X方向は「第1方向」の例示であり、Y方向は「第2方向」の例示である。 Each time-series image 31 is an image in which a plurality of unit images 32 corresponding to different unit periods are arranged in the X direction. The X direction is a lateral direction which means the direction of the time axis. The plurality of time-series images 31 are arranged side by side at intervals in the Y direction (specifically, the vertical direction) intersecting the X direction. The X direction is an example of the "first direction", and the Y direction is an example of the "second direction".

以上の説明から理解される通り、提示画面30は、複数の単位画像32をX方向およびY方向に沿って行列状に配列した画像である。複数の時系列画像31のうち指定期間Qaに対応する1個の時系列画像31には、当該指定期間Qaであることを意味する枠状の画像33が付加される。利用者は、時系列画像31を適宜に操作する(例えば時系列画像31を左右に移動させる)ことで、楽曲内の指定期間Qaを変更することが可能である。時系列解析部22は、指定期間Qaの更新毎に、更新後の指定期間Qaに類似する関連期間Qbを特定する。 As can be understood from the above description, the presentation screen 30 is an image in which a plurality of unit images 32 are arranged in a matrix along the X direction and the Y direction. A frame-shaped image 33, which means that the designated period Qa, is added to one time-series image 31 corresponding to the designated period Qa among the plurality of time-series images 31. The user can change the designated period Qa in the music by appropriately operating the time-series image 31 (for example, moving the time-series image 31 left and right). The time series analysis unit 22 specifies a related period Qb similar to the updated designated period Qa for each update of the designated period Qa.

任意の1個の解析期間Qに対応する時系列画像31のうち第m番目(mは自然数)の単位画像32は、当該解析期間Q内における第m番目の単位期間を表す矩形状の画像である。任意の1個の単位期間に対応する単位画像32には、当該単位期間について時系列解析部22が特定したコード名Cが付加される。すなわち、提示画面30においては、複数のコード名CをX方向に配列した複数の時系列画像31がY方向に並列される。したがって、利用者は、各解析期間Qにおける複数のコード名Cの時系列を、時系列画像31から視覚的に確認することが可能である。 The m-th (m is a natural number) unit image 32 of the time-series image 31 corresponding to any one analysis period Q is a rectangular image representing the m-th unit period in the analysis period Q. be. A code name C specified by the time series analysis unit 22 for the unit period is added to the unit image 32 corresponding to any one unit period. That is, on the presentation screen 30, a plurality of time-series images 31 in which a plurality of code names C are arranged in the X direction are arranged in parallel in the Y direction. Therefore, the user can visually confirm the time series of the plurality of code names C in each analysis period Q from the time series image 31.

以上の通り、時系列解析部22による解析の結果が提示画面30に表示されるが、音響信号Xから推定されたコード名Cを利用者が変更したい場合がある。例えば、音響信号Xから誤推定されたコード名Cを利用者が修正する場合がある。また、音響信号Xから推定されたコード名Cを、利用者の意図や嗜好に沿ったコード名Cに変更する場合がある。図1の変更処理部24は、提示画面30に配置されたコード名Cを利用者からの指示に応じて変更する。例えば、利用者は、入力装置14を適宜に操作することで、任意の1個の単位画像32を選択したうえで変更後のコード名Cを指示することが可能である。変更処理部24は、利用者が選択した単位画像32の単位期間についてコードデータDが指定するコード名Cを、利用者が指示した変更後のコード名Cに変更する。 As described above, the result of the analysis by the time series analysis unit 22 is displayed on the presentation screen 30, but the user may want to change the code name C estimated from the acoustic signal X. For example, the user may correct the code name C erroneously estimated from the acoustic signal X. Further, the code name C estimated from the acoustic signal X may be changed to the code name C according to the user's intention or preference. The change processing unit 24 of FIG. 1 changes the code name C arranged on the presentation screen 30 according to an instruction from the user. For example, the user can appropriately operate the input device 14 to select any one unit image 32 and then instruct the changed code name C. The change processing unit 24 changes the code name C designated by the code data D for the unit period of the unit image 32 selected by the user to the changed code name C instructed by the user.

ところで、複数の解析期間Qの相互間では複数のコード名Cの時系列が類似する。したがって、図3から理解される通り、提示画面30においては、相互に類似または一致するコード名Cが付加された複数の単位画像32がY方向に配列する。利用者は、入力装置14を適宜に操作することで、Y方向に沿って配列する複数の単位画像32の集合(以下「単位画像列」という)Lを選択することが可能である。単位画像列Lが選択されると、表示制御部23は、当該単位画像列Lを示す枠状の画像34を表示させる。 By the way, the time series of the plurality of code names C are similar between the plurality of analysis periods Q. Therefore, as can be understood from FIG. 3, on the presentation screen 30, a plurality of unit images 32 to which code names C that are similar to or match each other are added are arranged in the Y direction. By appropriately operating the input device 14, the user can select a set (hereinafter referred to as "unit image sequence") L of a plurality of unit images 32 arranged along the Y direction. When the unit image sequence L is selected, the display control unit 23 displays a frame-shaped image 34 indicating the unit image sequence L.

画像34が表示された状態では、利用者は、入力装置14を適宜に操作することで、単位画像列Lに対応する複数の単位期間のコード名Cを一括的に変更することを指示できる。具体的には、利用者は、単位画像列Lを選択したうえで変更後のコード名Cを指示する。変更処理部24は、利用者が選択した単位画像列Lに対応する複数の単位期間についてコードデータDがそれぞれ指定する複数のコード名Cを、利用者が指示した変更後のコード名Cに変更する。すなわち、第1実施形態では、単位期間毎にコード名Cが利用者からの指示に応じて個別に変更されるだけでなく、提示画面30においてY方向に配列する複数のコード名Cが、利用者からの指示に応じて一括的に変更される。したがって、単位期間毎に個別にコード名Cを変更する必要がある構成と比較して、楽曲のコード名Cを編集しようとする利用者の負担を軽減できるという利点がある。 In the state where the image 34 is displayed, the user can instruct to collectively change the code name C of the plurality of unit periods corresponding to the unit image string L by appropriately operating the input device 14. Specifically, the user selects the unit image string L and instructs the changed code name C. The change processing unit 24 changes the plurality of code names C designated by the code data D for each of the plurality of unit periods corresponding to the unit image string L selected by the user to the changed code names C instructed by the user. do. That is, in the first embodiment, not only the code name C is individually changed according to the instruction from the user for each unit period, but also a plurality of code names C arranged in the Y direction on the presentation screen 30 are used. It is changed all at once according to the instruction from the person. Therefore, there is an advantage that the burden on the user who tries to edit the chord name C of the music can be reduced as compared with the configuration in which the chord name C needs to be changed individually for each unit period.

図4は、制御装置11が実行する処理のフローチャートである。例えば入力装置14に対する利用者からの指示を契機として図4の処理が開始される。図4の処理を開始すると、信号解析部21は、音響信号Xの解析によりコードデータDを生成する(Sa1)。 FIG. 4 is a flowchart of the process executed by the control device 11. For example, the process of FIG. 4 is started triggered by an instruction from the user to the input device 14. When the process of FIG. 4 is started, the signal analysis unit 21 generates code data D by analyzing the acoustic signal X (Sa1).

時系列解析部22は、複数の解析期間QをコードデータDから特定する(Sa2/時系列解析処理)。具体的には、利用者からの指示に応じた指定期間Qaと、複数のコード名Cの時系列が指定期間Qaに類似する複数の関連期間Qbとが解析期間Qとして特定される。表示制御部23は、時系列解析部22が特定した各解析期間Qについて複数のコード名Cの時系列を表す提示画面30を表示装置13に表示させる(Sa3/表示制御処理)。 The time-series analysis unit 22 specifies a plurality of analysis periods Q from the code data D (Sa2 / time-series analysis processing). Specifically, a designated period Qa according to an instruction from the user and a plurality of related periods Qb in which the time series of the plurality of code names C are similar to the designated period Qa are specified as the analysis period Q. The display control unit 23 causes the display device 13 to display a presentation screen 30 showing a time series of a plurality of code names C for each analysis period Q specified by the time series analysis unit 22 (Sa3 / display control process).

制御装置11は、利用者が指定期間Qaを変更したか否かを判定する(Sa4)。指定期間Qaが変更された場合(Sa4:YES)、変更後の指定期間Qaについて複数の関連期間Qbを特定する処理(Sa2)と、提示画面30に変更を反映させる処理(Sa3)とが実行される。 The control device 11 determines whether or not the user has changed Qa for a designated period (Sa4). When the designated period Qa is changed (Sa4: YES), the process of specifying a plurality of related period Qb for the changed designated period Qa (Sa2) and the process of reflecting the change on the presentation screen 30 (Sa3) are executed. Will be done.

指定期間Qaが変更されていない場合(Sa4:NO)、制御装置11は、単位画像列Lの複数のコード名Cの変更を利用者が指示したか否かを判定する(Sa5)。単位画像列L内の複数のコード名Cの変更が指示されると(Sa5:YES)、変更処理部24は、単位画像列L内の各単位期間についてコードデータDが指定する複数のコード名Cを、利用者が指示したコード名Cに一括的に変更する(Sa6)。表示制御部23は、提示画面30のうち単位画像列L内の各単位期間におけるコード名Cの表示を変更する(Sa7)。 When the designated period Qa has not been changed (Sa4: NO), the control device 11 determines whether or not the user has instructed to change the plurality of code names C of the unit image string L (Sa5). When a change of a plurality of code names C in the unit image string L is instructed (Sa5: YES), the change processing unit 24 has a plurality of code names designated by the code data D for each unit period in the unit image string L. C is collectively changed to the code name C specified by the user (Sa6). The display control unit 23 changes the display of the code name C in each unit period in the unit image string L in the presentation screen 30 (Sa7).

制御装置11は、利用者から終了が指示されたか否かを判定する(Sa8)。利用者から終了が指示された場合(Sa8:YES)には図4の処理が終了される。利用者から終了が指示されていない場合(Sa8:NO)、または、複数のコード名Cの変更が指示されていない場合(Sa5:NO)、制御装置11は、処理をステップSa4に移行する。 The control device 11 determines whether or not the end is instructed by the user (Sa8). When the user instructs the end (Sa8: YES), the process of FIG. 4 is terminated. When the end is not instructed by the user (Sa8: NO), or when the change of the plurality of code names C is not instructed (Sa5: NO), the control device 11 shifts the process to step Sa4.

以上に説明した通り、指定期間Qaの変更毎に、複数の解析期間Qの特定(Sa2)および表示(Sa3)が実行され、単位画像列Lのコード名Cの変更の指示毎に、複数のコード名Cの変更(Sa6)および変更後のコード名Cの表示(Sa7)とが実行される。なお、図4においては、解析期間Qの特定および表示と単位画像列Lの複数のコード名Cの変更とに便宜的に着目したが、提示画面30には他の操作も付与される。例えば、利用者が選択した1個の単位期間のコード名Cを変更処理部24が変更してもよい。 As described above, each time the designated period Qa is changed, a plurality of analysis period Qs are specified (Sa2) and displayed (Sa3), and a plurality of instructions for changing the code name C of the unit image string L are executed. The change of the code name C (Sa6) and the display of the changed code name C (Sa7) are executed. In FIG. 4, attention was paid to the identification and display of the analysis period Q and the change of the plurality of code names C of the unit image sequence L for convenience, but other operations are also given to the presentation screen 30. For example, the change processing unit 24 may change the code name C of one unit period selected by the user.

<第2実施形態>
本発明の第2実施形態を説明する。なお、以下の各例示において機能が第1実施形態と同様である要素については、第1実施形態の説明で使用した符号を流用して各々の詳細な説明を適宜に省略する。
<Second Embodiment>
A second embodiment of the present invention will be described. In each of the following examples, for the elements having the same functions as those of the first embodiment, the reference numerals used in the description of the first embodiment will be diverted and detailed description of each will be omitted as appropriate.

図5は、第2実施形態における提示画面30の模式図である。図5に例示される通り、第2実施形態の表示制御部23は、第1実施形態と同様の要素に加えて、相異なる時系列画像31に対応する複数の操作画像35を提示画面30に配置する。各操作画像35は、各時系列画像31の複数のコード名Cの各々について変更の許可/禁止を表す画像である。利用者は、時系列画像31に対応する任意の1個の操作画像35を操作することで、当該時系列画像31に対応する複数のコード名Cについて変更の許可/禁止を設定することが可能である。 FIG. 5 is a schematic diagram of the presentation screen 30 in the second embodiment. As illustrated in FIG. 5, the display control unit 23 of the second embodiment displays a plurality of operation images 35 corresponding to different time-series images 31 on the presentation screen 30 in addition to the same elements as those of the first embodiment. Deploy. Each operation image 35 is an image showing permission / prohibition of change for each of the plurality of code names C of each time series image 31. By operating any one operation image 35 corresponding to the time-series image 31, the user can set permission / prohibition of change for a plurality of code names C corresponding to the time-series image 31. Is.

具体的には、単位画像列Lの複数のコード名Cの変更が利用者により指示された場合(Sa5:YES)、変更処理部24は、複数のコード名Cのうち操作画像35が許可を示す各コード名Cを利用者からの指示に応じて変更する(Sa6)。他方、複数のコード名Cのうち操作画像35が禁止を表す各コード名Cは変更されない。変更が許可された時系列画像31と変更が禁止された時系列画像31とは、相異なる表示態様(例えば色彩,階調または模様)で表示される。図5では、第1行目から第3行目の時系列画像31について変更が許可され、第4行目の時系列画像31について変更が禁止された場合が例示されている。したがって、第4行目の時系列画像31は、第1行目から第3行目の時系列画像31とは表示態様が相違する。 Specifically, when the user is instructed to change a plurality of code names C in the unit image string L (Sa5: YES), the change processing unit 24 permits the operation image 35 among the plurality of code names C. Each code name C shown is changed according to the instruction from the user (Sa6). On the other hand, among the plurality of code names C, each code name C whose operation image 35 indicates prohibition is not changed. The time-series image 31 for which change is permitted and the time-series image 31 for which change is prohibited are displayed in different display modes (for example, color, gradation, or pattern). FIG. 5 illustrates a case where changes are permitted for the time-series images 31 in the first to third rows and changes are prohibited for the time-series images 31 in the fourth row. Therefore, the time-series image 31 in the fourth row has a different display mode from the time-series images 31 in the first to third rows.

第2実施形態においても第1実施形態と同様の効果が実現される。また、第2実施形態では、単位画像列Lの複数のコード名Cの各々について変更の許可/禁止が設定される。したがって、単位画像列Lの複数のコード名Cのうち特定のコード名Cを変更の対象とし、他のコード名Cを変更の対象から除外するという操作を簡便に実現することが可能である。 The same effect as that of the first embodiment is realized in the second embodiment. Further, in the second embodiment, permission / prohibition of change is set for each of the plurality of code names C in the unit image string L. Therefore, it is possible to easily realize an operation in which a specific code name C is targeted for change and other code names C are excluded from the target of change among the plurality of code names C in the unit image string L.

<第3実施形態>
図6は、第3実施形態における提示画面30の模式図である。図6に例示される通り、第3実施形態の提示画面30は、第1実施形態と同様の要素に加えて、楽曲内の転調期間を表す転調画像36を提示画面30に配置する。転調期間は、楽曲の初期的または基本的な調から他の調に転調した区間である。例えば利用者が入力装置14に対する操作で転調期間を任意に指定する。楽曲内に複数の転調期間を指定することも可能である。具体的には、利用者は、転調期間の始点および終点と、転調の度合(以下「転調度」という)Mとを指定する。転調度Mは、例えば半音下げ等の音程で指定され、転調画像36の始点の近傍に表示される。他方、利用者は、入力装置14を適宜に操作することで転調期間を解除することが可能である。転調期間が解除されると、当該転調期間に対応する転調画像36と転調度Mとは消去される。
<Third Embodiment>
FIG. 6 is a schematic view of the presentation screen 30 in the third embodiment. As illustrated in FIG. 6, the presentation screen 30 of the third embodiment arranges the modulation image 36 showing the modulation period in the music on the presentation screen 30 in addition to the same elements as those of the first embodiment. The modulation period is a section in which the key is transposed from the initial or basic key of the music to another key. For example, the user arbitrarily specifies the modulation period by operating the input device 14. It is also possible to specify multiple modulation periods in a song. Specifically, the user specifies the start point and the end point of the modulation period and the degree of modulation (hereinafter referred to as "modulation degree") M. The modulation degree M is specified by a pitch such as a semitone lowering, and is displayed in the vicinity of the start point of the modulation image 36. On the other hand, the user can cancel the modulation period by appropriately operating the input device 14. When the modulation period is canceled, the modulation image 36 and the modulation degree M corresponding to the modulation period are deleted.

転調画像36は、転調期間の始点から終点までにわたる直線状の画像である。具体的には、各時系列画像31を構成する複数の単位画像32のうち、転調期間内の各単位期間に対応する各単位画像32におけるX方向の縁辺に沿って転調画像36が表示される。すなわち、各時系列画像31における複数のコード名Cの時系列に沿って転調画像36が表示される。また、第3実施形態において各単位画像32に表示されるコード名Cは、転調前のコード名Cである。すなわち、転調期間外のコード名Cが転調していないコード名Cであるのはもちろん、転調期間内のコード名Cも転調していないコード名Cである。 The modulation image 36 is a linear image extending from the start point to the end point of the modulation period. Specifically, among the plurality of unit images 32 constituting each time-series image 31, the modulation image 36 is displayed along the edge in the X direction in each unit image 32 corresponding to each unit period within the modulation period. .. That is, the transposed image 36 is displayed along the time series of the plurality of code names C in each time series image 31. Further, the code name C displayed on each unit image 32 in the third embodiment is the code name C before the modulation. That is, not only the code name C outside the modulation period is the code name C that has not been transposed, but also the code name C within the modulation period is the code name C that has not been transposed.

第3実施形態においても第1実施形態と同様の効果が実現される。また、第3実施形態では、楽曲内の転調期間を表す転調画像36が複数のコード名Cの時系列に沿って表示されるから、複数のコード名Cの時系列とともに楽曲内の転調期間を利用者が直観的および視覚的に把握できるという利点がある。なお、操作画像35によりコード名Cの変更の許可/禁止を設定可能な第2実施形態の構成を、第3実施形態に適用してもよい。 The same effect as that of the first embodiment is realized in the third embodiment. Further, in the third embodiment, since the modulation image 36 showing the modulation period in the music is displayed along the time series of the plurality of code names C, the modulation period in the music is displayed together with the time series of the plurality of code names C. It has the advantage that the user can intuitively and visually grasp it. The configuration of the second embodiment in which the permission / prohibition of the change of the code name C can be set by the operation image 35 may be applied to the third embodiment.

<第4実施形態>
図7は、第4実施形態における提示画面30の模式図である。図7から理解される通り、第4実施形態においても、第3実施形態と同様に、楽曲内の転調期間を表す転調画像36が表示される。
<Fourth Embodiment>
FIG. 7 is a schematic diagram of the presentation screen 30 in the fourth embodiment. As can be understood from FIG. 7, in the fourth embodiment as well, the modulation image 36 showing the modulation period in the music is displayed as in the third embodiment.

第3実施形態では、転調期間についても転調前のコード名Cを表示した。第3実施形態とは対照的に、第4実施形態では、転調期間内のコード名Cは、転調後のコード名Cである。すなわち、入力装置14に対する操作で利用者が転調期間を指定すると、変更処理部24は、コードデータDが転調期間内の各単位期間について指定するコード名Cを、利用者が指定した転調度Mだけ転調したコード名Cに変更する。表示制御部23は、変更処理部24による変更後のコード名C(すなわち転調済のコード名C)を表示装置13に表示させる。他方、転調期間が解除されると、変更処理部24は、転調期間内の各単位期間について指定されたコード名Cを転調前のコード名Cに変更する。また、表示制御部23は、転調画像を消去するとともに、提示画像30に表示された各単位期間のコード名Cを転調前のコード名Cに変更する。 In the third embodiment, the code name C before the modulation is displayed also for the modulation period. In contrast to the third embodiment, in the fourth embodiment, the code name C within the modulation period is the code name C after the modulation. That is, when the user specifies the modulation period by operating the input device 14, the change processing unit 24 assigns the code name C specified by the code data D for each unit period within the modulation period to the modulation degree M specified by the user. Change to the code name C that has been transposed. The display control unit 23 causes the display device 13 to display the code name C (that is, the code name C that has been transposed) after the change by the change processing unit 24. On the other hand, when the modulation period is canceled, the change processing unit 24 changes the code name C designated for each unit period within the modulation period to the code name C before the modulation. Further, the display control unit 23 erases the modulation image and changes the code name C of each unit period displayed on the presentation image 30 to the code name C before the modulation.

第4実施形態においても第1実施形態と同様の効果が実現される。また、第4実施形態では、コードデータDが表すコード名Cを転調させたコード名Cが表示されるから、転調後のコード名Cを利用者が容易に把握できるという利点がある。なお、操作画像35によりコード名Cの変更の許可/禁止を設定可能な第2実施形態の構成を、第4実施形態に適用してもよい。 The same effect as that of the first embodiment is realized in the fourth embodiment. Further, in the fourth embodiment, since the code name C obtained by transposing the code name C represented by the code data D is displayed, there is an advantage that the user can easily grasp the code name C after the transposition. The configuration of the second embodiment in which the permission / prohibition of the change of the code name C can be set by the operation image 35 may be applied to the fourth embodiment.

<変形例>
以上に例示した各態様に付加される具体的な変形の態様を以下に例示する。以下の例示から任意に選択された2個以上の態様を、相互に矛盾しない範囲で適宜に併合してもよい。
<Modification example>
Specific modifications added to each of the above-exemplified embodiments are illustrated below. Two or more embodiments arbitrarily selected from the following examples may be appropriately merged to the extent that they do not contradict each other.

(1)前述の各形態では、楽曲の1小節分に相当する時間長の期間を単位期間として例示したが、単位期間の時間長は以上の例示に限定されない。例えば、楽曲の拍周期の整数倍(例えば1拍分)に相当する時間長の期間を単位期間として規定してもよい。 (1) In each of the above-mentioned forms, the period of time length corresponding to one bar of the music is exemplified as the unit period, but the time length of the unit period is not limited to the above examples. For example, a period having a time length corresponding to an integral multiple (for example, one beat) of the beat cycle of the music may be defined as a unit period.

(2)前述の各形態では、各単位画像32にコード名Cを付加したが、全部の単位画像32にコード名Cを付加することは必須ではない。例えば、相前後する2個の単位期間についてコード名Cが共通する場合、後方の単位期間についてはコード名Cの表示を省略してもよい。 (2) In each of the above-described forms, the code name C is added to each unit image 32, but it is not essential to add the code name C to all the unit images 32. For example, when the code name C is common to two unit periods before and after each other, the display of the code name C may be omitted for the subsequent unit period.

(3)音響信号Xのうち時系列画像31が表す複数の単位期間にわたる区間を放音装置(例えばスピーカ)に再生させてもよい。利用者は、再生音を聴取することで、コード名Cの適否を判断し、必要に応じて変更することが可能である。 (3) A sound emitting device (for example, a speaker) may reproduce a section of the acoustic signal X over a plurality of unit periods represented by the time-series image 31. By listening to the reproduced sound, the user can determine the suitability of the code name C and change it as necessary.

(4)第3実施形態および第4実施形態では、利用者が入力装置14に対する操作で転調期間を指定したが、転調期間の設定方法は以上の例示に限定されない。例えば、制御装置11(例えば信号解析部21)が音響信号Xの解析により転調期間を推定してもよい。 (4) In the third embodiment and the fourth embodiment, the user specifies the modulation period by operating the input device 14, but the method of setting the modulation period is not limited to the above examples. For example, the control device 11 (for example, the signal analysis unit 21) may estimate the modulation period by analyzing the acoustic signal X.

(5)前述の各形態では、複数のコード名Cの時系列をコードデータDから特定して表示装置13に表示したが、表示装置13に表示される情報はコード名Cに限定されない。例えば、楽曲の歌詞を表示する場合にも同様の構成が採用される。具体的には、表示制御部23は、歌詞データが指定する楽曲の歌詞のうち相互に類似する複数の文字列を特定し、各文字列の文字をX方向に配列した時系列画像31をY方向に並列した提示画面30を表示装置13に表示させる。変更処理部24は、提示画面30においてY方向に配列する複数の文字の集合を、利用者からの指示に応じて一括的に変更する。 (5) In each of the above-described embodiments, the time series of the plurality of code names C is specified from the code data D and displayed on the display device 13, but the information displayed on the display device 13 is not limited to the code name C. For example, the same configuration is adopted when displaying the lyrics of a musical piece. Specifically, the display control unit 23 identifies a plurality of character strings that are similar to each other among the lyrics of the music specified by the lyrics data, and Y is a time-series image 31 in which the characters of each character string are arranged in the X direction. The presentation screens 30 arranged in parallel in the direction are displayed on the display device 13. The change processing unit 24 collectively changes a set of a plurality of characters arranged in the Y direction on the presentation screen 30 according to an instruction from the user.

また、映像作品を構成する複数のシーン画像を表示する場合にも同様の構成が採用される。具体的には、表示制御部23は、画像データが表す映像作品のうち画像の特性が相互に類似する複数の解析期間を特定し、各解析期間の代表的な静止画をX方向に配列した時系列画像31をY方向に並列した提示画面30を表示装置13に表示させる。変更処理部24は、提示画面30においてY方向に配列する静止画に対応する区間の動画像を、利用者からの指示に応じて一括的に他の動画像に変更する。 Further, the same configuration is adopted when displaying a plurality of scene images constituting a video work. Specifically, the display control unit 23 identifies a plurality of analysis periods in which the image characteristics of the video work represented by the image data are similar to each other, and arranges representative still images of each analysis period in the X direction. The display device 13 displays the presentation screen 30 in which the time-series images 31 are arranged side by side in the Y direction. The change processing unit 24 collectively changes the moving images of the sections corresponding to the still images arranged in the Y direction on the presentation screen 30 to other moving images according to the instruction from the user.

以上に例示した構成は、時系列データが表す複数の要素の時系列から、複数の第1要素の時系列と、複数の第1要素の時系列に類似する複数の第2要素の時系列とを特定し、複数の第1要素を第1方向に配列した第1画像と、複数の第2要素を第1方向に配列した第2画像とを、第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させる構成として包括される。前述の各形態におけるコードデータDと各変形例に係る歌詞データおよび画像データとは、時系列データの具体例である。また、前述の各形態におけるコード名Cと各変形例における歌詞の文字および静止画とは、時系列データが表す要素の具体例である。時系列画像31は第1画像および第2画像の具体例である。 The configuration exemplified above includes a time series of a plurality of elements represented by time series data, a time series of a plurality of first elements, and a time series of a plurality of second elements similar to the time series of a plurality of first elements. The first image in which a plurality of first elements are arranged in the first direction and the second image in which a plurality of second elements are arranged in the first direction are arranged in parallel in the second direction intersecting the first direction. The presentation screen is included as a configuration for displaying on a display device. The code data D in each of the above-mentioned forms and the lyrics data and the image data related to each modification are specific examples of time-series data. Further, the code name C in each of the above-mentioned forms and the characters and still images of the lyrics in each modification are specific examples of the elements represented by the time series data. The time-series image 31 is a specific example of the first image and the second image.

(6)前述の各形態では、音響信号Xを解析してコードデータDを生成したが、記憶装置12にコードデータDを事前に記憶してもよい。すなわち、音響信号XからコードデータDを生成する信号解析部21は省略される。 (6) In each of the above-described embodiments, the acoustic signal X is analyzed to generate the code data D, but the code data D may be stored in the storage device 12 in advance. That is, the signal analysis unit 21 that generates the code data D from the acoustic signal X is omitted.

(7)前述の各形態では、携帯電話機またはパーソナルコンピュータ等の情報端末で情報処理装置100を実現したが、情報処理装置100の一部または全部の機能をサーバ装置(いわゆるクラウドサーバ)で実現してもよい。具体的には、移動体通信網またはインターネット等の通信網を介して端末装置と通信するサーバ装置により情報処理装置100が実現される。例えば、情報処理装置100は、端末装置から受信した音響信号Xについて図4の処理を実行することで、複数の時系列画像31を含む提示画面30を端末装置に表示させる。なお、情報処理装置100が端末装置からコードデータDを受信する構成では、信号解析部21が情報処理装置100から省略される。 (7) In each of the above-described embodiments, the information processing device 100 is realized by an information terminal such as a mobile phone or a personal computer, but some or all the functions of the information processing device 100 are realized by a server device (so-called cloud server). You may. Specifically, the information processing device 100 is realized by a server device that communicates with a terminal device via a mobile communication network or a communication network such as the Internet. For example, the information processing device 100 causes the terminal device to display a presentation screen 30 including a plurality of time-series images 31 by executing the process of FIG. 4 for the acoustic signal X received from the terminal device. In the configuration in which the information processing device 100 receives the code data D from the terminal device, the signal analysis unit 21 is omitted from the information processing device 100.

(8)前述の各形態に係る情報処理装置100は、各形態での例示の通り、コンピュータ(具体的には制御装置11)とプログラムとの協働により実現される。前述の各形態に係るプログラムは、コンピュータが読取可能な記録媒体に格納された形態で提供されてコンピュータにインストールされる。記録媒体は、例えば非一過性(non-transitory)の記録媒体であり、CD-ROM等の光学式記録媒体(光ディスク)が好例であるが、半導体記録媒体または磁気記録媒体等の公知の任意の形式の記録媒体を含む。なお、非一過性の記録媒体とは、一過性の伝搬信号(transitory, propagating signal)を除く任意の記録媒体を含み、揮発性の記録媒体を除外するものではない。また、通信網を介した配信の形態でプログラムをコンピュータに提供してもよい。 (8) The information processing apparatus 100 according to each of the above-described embodiments is realized by the cooperation between the computer (specifically, the control device 11) and the program, as illustrated in each embodiment. The program according to each of the above-described forms is provided in a form stored in a recording medium readable by a computer and installed in the computer. The recording medium is, for example, a non-transitory recording medium, and an optical recording medium (optical disc) such as a CD-ROM is a good example, but a semiconductor recording medium, a magnetic recording medium, or the like is known as arbitrary. Includes recording media in the format of. The non-transient recording medium includes any recording medium other than the transient propagation signal (transitory, propagating signal), and does not exclude the volatile recording medium. Further, the program may be provided to the computer in the form of distribution via a communication network.

(9)以上に例示した形態から、例えば以下の構成が把握される。 (9) From the above-exemplified form, for example, the following configuration can be grasped.

本発明の好適な態様(態様1)に係る表示制御方法は、時系列データが表す複数の要素の時系列から、複数の第1要素の時系列と、前記複数の第1要素の時系列に類似する複数の第2要素の時系列とを特定し、前記複数の第1要素を第1方向に配列した第1画像と、前記複数の第2要素を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させる。以上の態様では、時系列に配列された複数の要素のうち、複数の第1要素の時系列と、複数の第1要素の時系列に類似する複数の第2要素の時系列とが、複数の第1要素の時系列と複数の第2要素の時系列とが沿う第1方向に交差する第2方向に並列される。したがって、複数の第1要素の時系列と複数の第2要素の時系列との間における各第1要素と各第2要素との関係を、利用者が直観的および視覚的に把握できるという利点がある。 The display control method according to a preferred embodiment (aspect 1) of the present invention can be changed from a time series of a plurality of elements represented by time series data to a time series of a plurality of first elements and a time series of the plurality of first elements. A first image in which the plurality of first elements are arranged in the first direction and a second image in which the plurality of second elements are arranged in the first direction by identifying a time series of a plurality of similar second elements. And are displayed on the display device in parallel in the second direction intersecting the first direction. In the above aspect, among the plurality of elements arranged in the time series, the time series of the plurality of first elements and the time series of the plurality of second elements similar to the time series of the plurality of first elements are plural. The time series of the first element of the above and the time series of the plurality of second elements are arranged in parallel in the second direction intersecting the first direction along. Therefore, there is an advantage that the user can intuitively and visually grasp the relationship between each first element and each second element between the time series of the plurality of first elements and the time series of the plurality of second elements. There is.

態様1の好適例(態様2)において、前記提示画面に配置された前記各要素を利用者からの指示に応じて変更する。以上の態様によれば、時系列に配列された複数の要素の各々を利用者の意図に応じて変更できるという利点がある。 In the preferred example of the first aspect (the second aspect), each of the elements arranged on the presentation screen is changed according to an instruction from the user. According to the above aspect, there is an advantage that each of the plurality of elements arranged in time series can be changed according to the intention of the user.

態様2の好適例(態様3)において、前記提示画面において前記第2方向に配列する第1要素と第2要素とを、利用者からの指示に応じて一括的に変更する。以上の態様では、第2方向に配列する第1要素と第2要素とが一括的に変更されるから、第1要素および第2要素の各々を個別に変更する必要がある構成と比較して、利用者の負荷を軽減できる。 In the preferred example of the second aspect (aspect 3), the first element and the second element arranged in the second direction on the presentation screen are collectively changed according to the instruction from the user. In the above embodiment, since the first element and the second element arranged in the second direction are changed collectively, each of the first element and the second element needs to be changed individually as compared with the configuration. , The load on the user can be reduced.

態様3の好適例(態様4)において、前記第1要素と第2要素との各々について、利用者からの指示に応じた変更の許否を設定可能である。以上の態様では、第1要素と第2要素との各々について変更の許否が設定されるから、特定の要素については変更の対象から除外することが可能である。 In the preferred example of the third aspect (aspect 4), it is possible to set the permission or disapproval of the change according to the instruction from the user for each of the first element and the second element. In the above aspect, since the permission or disapproval of the change is set for each of the first element and the second element, it is possible to exclude a specific element from the target of the change.

態様1から態様4の何れかの好適例(態様5)において、前記複数の要素の各々は、楽曲におけるコード名である。以上の態様によれば、楽曲内の複数のコード名の時系列だけでなく、楽曲内で相互に類似する区間におけるコード名の時系列とを、利用者が直観的および視覚的に把握できる。 In any of the preferred examples of aspects 1 to 4 (aspect 5), each of the plurality of elements is a code name in a musical piece. According to the above aspect, the user can intuitively and visually grasp not only the time series of a plurality of chord names in the music but also the time series of the chord names in the sections similar to each other in the music.

態様5の好適例(態様6)において、前記楽曲内の転調期間を表す転調画像を、前記提示画面に配置された複数のコード名の時系列に沿って前記表示装置に表示させる。以上の態様によれば、複数のコード名の時系列とともに楽曲内の転調期間を利用者が直観的および視覚的に把握できる。 In a preferred example of the fifth aspect (aspect 6), the modulation image showing the modulation period in the music is displayed on the display device along the time series of a plurality of code names arranged on the presentation screen. According to the above aspect, the user can intuitively and visually grasp the modulation period in the music together with the time series of a plurality of chord names.

態様6の好適例(態様7)において、前記転調期間について、前記時系列データが表すコード名を転調させたコード名を表示させる。以上の態様によれば、転調後のコード名を利用者が容易に把握できるという利点がある。 In the preferred example of the sixth aspect (aspect 7), the code name obtained by transposing the code name represented by the time series data is displayed for the modulation period. According to the above aspect, there is an advantage that the user can easily grasp the code name after the modulation.

本発明の好適な態様(態様8)に係るプログラムは、時系列データが表す複数の要素の時系列から、複数の第1要素の時系列と、前記複数の第1要素の時系列に類似する複数の第2要素の時系列とを特定する時系列解析処理と、前記複数の第1要素を第1方向に配列した第1画像と、前記複数の第2要素を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させる表示制御処理とをコンピュータに実行させる。 The program according to the preferred embodiment (aspect 8) of the present invention is similar to the time series of the plurality of first elements and the time series of the plurality of first elements from the time series of the plurality of elements represented by the time series data. A time series analysis process for specifying a time series of a plurality of second elements, a first image in which the plurality of first elements are arranged in the first direction, and the plurality of second elements are arranged in the first direction. A computer is made to execute a display control process for displaying a presentation screen in which a second image is arranged in a second direction intersecting the first direction on a display device.

100…情報処理装置、11…制御装置、12…記憶装置、13…表示装置、14…入力装置、21…信号解析部、22…時系列解析部、23…表示制御部、24…変更処理部、30…提示画面、31…時系列画像、32…単位画像、35…操作画像、36…転調画像。 100 ... Information processing device, 11 ... Control device, 12 ... Storage device, 13 ... Display device, 14 ... Input device, 21 ... Signal analysis unit, 22 ... Time series analysis unit, 23 ... Display control unit, 24 ... Change processing unit , 30 ... presentation screen, 31 ... time series image, 32 ... unit image, 35 ... operation image, 36 ... transposition image.

Claims (8)

時系列データが表す複数の要素の時系列から、複数の第1要素の時系列と、前記複数の第1要素の時系列に類似する複数の第2要素の時系列とを特定し、
前記複数の第1要素を第1方向に配列した第1画像と、前記複数の第2要素を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させ
前記複数の第1要素の時系列と前記複数の第2要素の時系列との各々について、変更の許可/禁止の指示を利用者から受付け、
前記複数の第1要素の時系列および前記複数の第2要素の時系列の双方について変更の許可が指示されている場合には、前記提示画面において前記第2方向に配列する第1要素と第2要素とを、前記利用者からの指示に応じて一括的に変更し、
前記複数の第1要素の時系列について変更の許可が指示され、前記複数の第2要素の時系列について変更の禁止が指示されている場合には、前記利用者からの指示に応じて第1要素を変更し、第2要素を変更しない
コンピュータにより実現される表示制御方法。
From the time series of the plurality of elements represented by the time series data, the time series of the plurality of first elements and the time series of the plurality of second elements similar to the time series of the plurality of first elements are specified.
A first image in which the plurality of first elements are arranged in the first direction and a second image in which the plurality of second elements are arranged in the first direction are arranged in parallel in a second direction intersecting the first direction. Display the presentation screen on the display device.
For each of the time series of the plurality of first elements and the time series of the plurality of second elements, instructions for permitting / prohibiting changes are received from the user.
When permission to change both the time series of the plurality of first elements and the time series of the plurality of second elements is instructed, the first element and the first element arranged in the second direction on the presentation screen. The two elements are changed collectively according to the instruction from the user.
When permission to change the time series of the plurality of first elements is instructed and prohibition of change is instructed to the time series of the plurality of second elements, the first is performed in response to the instruction from the user. Change the element, do not change the second element
Display control method realized by a computer.
前記複数の要素の各々は、楽曲におけるコード名であり、
前記楽曲内の転調期間を表す転調画像を、前記提示画面に配置された複数のコード名の時系列に沿って前記表示装置に表示させる
請求項の表示制御方法。
Each of the plurality of elements is a chord name in a musical piece, and is
The display control method according to claim 1 , wherein a modulation image showing a modulation period in the music is displayed on the display device along a time series of a plurality of code names arranged on the presentation screen.
時系列データが楽曲について表す複数のコード名の時系列から、複数の第1コード名の時系列と、前記複数の第1コード名の時系列に類似する複数の第2コード名の時系列とを特定し、
前記複数の第1コード名を第1方向に配列した第1画像と、前記複数の第2コード名を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させ
前記楽曲内の転調期間を表す転調画像を、前記提示画面に配置された複数のコード名の時系列に沿って前記表示装置に表示させる
コンピュータにより実現される表示制御方法。
From the time series of a plurality of code names whose time series data represents a music, a time series of a plurality of first code names and a time series of a plurality of second code names similar to the time series of the plurality of first code names. Identify and
A second direction in which the first image in which the plurality of first code names are arranged in the first direction and the second image in which the plurality of second code names are arranged in the first direction intersect in the first direction. The presentation screens arranged in parallel are displayed on the display device.
A modulation image showing a modulation period in the music is displayed on the display device along a time series of a plurality of code names arranged on the presentation screen.
Display control method realized by a computer.
前記転調期間について、前記時系列データが表すコード名を転調させたコード名を表示させる
請求項2または請求項3の表示制御方法。
The display control method according to claim 2 or 3 , wherein the code name obtained by transposing the code name represented by the time series data is displayed for the modulation period.
時系列データが表す複数の要素の時系列から、複数の第1要素の時系列と、前記複数の第1要素の時系列に類似する複数の第2要素の時系列とを特定する時系列解析処理と、
前記複数の第1要素を第1方向に配列した第1画像と、前記複数の第2要素を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させる表示制御処理と
前記複数の第1要素の時系列と前記複数の第2要素の時系列との各々について、変更の許可/禁止の指示を利用者から受付ける処理と、
前記複数の第1要素の時系列および前記複数の第2要素の時系列の双方について変更の許可が指示されている場合には、前記提示画面において前記第2方向に配列する第1要素と第2要素とを、前記利用者からの指示に応じて一括的に変更し、前記複数の第1要素の時系列について変更の許可が指示され、前記複数の第2要素の時系列について変更の禁止が指示されている場合には、前記利用者からの指示に応じて第1要素を変更し、第2要素を変更しない変更処理と
をコンピュータに実行させるプログラム。
Time-series analysis that identifies the time-series of a plurality of first elements and the time-series of a plurality of second elements similar to the time-series of the plurality of first elements from the time-series of a plurality of elements represented by the time-series data. Processing and
A first image in which the plurality of first elements are arranged in the first direction and a second image in which the plurality of second elements are arranged in the first direction are arranged in parallel in a second direction intersecting the first direction. Display control processing to display the presented screen on the display device ,
For each of the plurality of time series of the first element and the time series of the plurality of second elements, a process of receiving an instruction of permission / prohibition of change from the user, and a process of receiving the instruction of permission / prohibition of change.
When permission to change both the time series of the plurality of first elements and the time series of the plurality of second elements is instructed, the first element and the first element arranged in the second direction on the presentation screen. The two elements are collectively changed according to the instruction from the user, permission to change the time series of the plurality of first elements is instructed, and change is prohibited for the time series of the plurality of second elements. If is instructed, the change process is such that the first element is changed according to the instruction from the user and the second element is not changed.
A program that causes a computer to run.
時系列データが楽曲について表す複数のコード名の時系列から、複数の第1コード名の時系列と、前記複数の第1コード名の時系列に類似する複数の第2コード名の時系列とを特定する時系列解析処理と、
前記複数の第1コード名を第1方向に配列した第1画像と、前記複数の第2コード名を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させる表示制御処理と
をコンピュータに実行させるプログラムであって、
前記表示制御処理においては、前記楽曲内の転調期間を表す転調画像を、前記提示画面に配置された複数のコード名の時系列に沿って前記表示装置に表示させる
プログラム。
From the time series of a plurality of code names whose time series data represents a music, a time series of a plurality of first code names and a time series of a plurality of second code names similar to the time series of the plurality of first code names. Time-series analysis processing to identify
A second direction in which the first image in which the plurality of first code names are arranged in the first direction and the second image in which the plurality of second code names are arranged in the first direction intersect in the first direction. It is a program that causes a computer to execute display control processing that displays the presentation screens arranged in parallel on the display device.
In the display control process, the modulation image showing the modulation period in the music is displayed on the display device along the time series of a plurality of code names arranged on the presentation screen.
program.
制御装置を具備する情報処理装置であって、 An information processing device equipped with a control device.
前記制御装置は、 The control device is
時系列データが表す複数の要素の時系列から、複数の第1要素の時系列と、前記複数の第1要素の時系列に類似する複数の第2要素の時系列とを特定する時系列解析処理と、 Time-series analysis that identifies the time-series of a plurality of first elements and the time-series of a plurality of second elements similar to the time-series of the plurality of first elements from the time-series of a plurality of elements represented by the time-series data. Processing and
前記複数の第1要素を第1方向に配列した第1画像と、前記複数の第2要素を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させる表示制御処理と、 A first image in which the plurality of first elements are arranged in the first direction and a second image in which the plurality of second elements are arranged in the first direction are arranged in parallel in a second direction intersecting the first direction. Display control processing to display the presented screen on the display device,
前記複数の第1要素の時系列と前記複数の第2要素の時系列との各々について、変更の許可/禁止の指示を利用者から受付ける処理と、 For each of the plurality of time series of the first element and the time series of the plurality of second elements, a process of receiving an instruction of permission / prohibition of change from the user, and a process of receiving the instruction of permission / prohibition of change.
前記複数の第1要素の時系列および前記複数の第2要素の時系列の双方について変更の許可が指示されている場合には、前記提示画面において前記第2方向に配列する第1要素と第2要素とを、前記利用者からの指示に応じて一括的に変更し、前記複数の第1要素の時系列について変更の許可が指示され、前記複数の第2要素の時系列について変更の禁止が指示されている場合には、前記利用者からの指示に応じて第1要素を変更し、第2要素を変更しない変更処理と、 When permission to change both the time series of the plurality of first elements and the time series of the plurality of second elements is instructed, the first element and the first element arranged in the second direction on the presentation screen. The two elements are collectively changed according to the instruction from the user, permission to change the time series of the plurality of first elements is instructed, and change is prohibited for the time series of the plurality of second elements. When is instructed, the change process of changing the first element according to the instruction from the user and not changing the second element, and
を実行する情報処理装置。 Information processing device that executes.
制御装置を具備する情報処理装置であって、 An information processing device equipped with a control device.
前記制御装置は、 The control device is
時系列データが楽曲について表す複数のコード名の時系列から、複数の第1コード名の時系列と、前記複数の第1コード名の時系列に類似する複数の第2コード名の時系列とを特定する時系列解析処理と、 From the time series of a plurality of code names whose time series data represents a music, a time series of a plurality of first code names and a time series of a plurality of second code names similar to the time series of the plurality of first code names. Time-series analysis processing to identify
前記複数の第1コード名を第1方向に配列した第1画像と、前記複数の第2コード名を前記第1方向に配列した第2画像とを、前記第1方向に交差する第2方向に並列した提示画面を、表示装置に表示させる表示制御処理と、を実行し、 A second direction in which the first image in which the plurality of first code names are arranged in the first direction and the second image in which the plurality of second code names are arranged in the first direction intersect in the first direction. The display control process for displaying the presentation screens arranged in parallel on the display device is executed.
前記表示制御処理においては、前記楽曲内の転調期間を表す転調画像を、前記提示画面に配置された複数のコード名の時系列に沿って前記表示装置に表示させる In the display control process, the modulation image showing the modulation period in the music is displayed on the display device along the time series of a plurality of code names arranged on the presentation screen.
情報処理装置。 Information processing equipment.
JP2017246012A 2017-12-22 2017-12-22 Display control method, program and information processing device Active JP7035509B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017246012A JP7035509B2 (en) 2017-12-22 2017-12-22 Display control method, program and information processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017246012A JP7035509B2 (en) 2017-12-22 2017-12-22 Display control method, program and information processing device

Publications (2)

Publication Number Publication Date
JP2019113661A JP2019113661A (en) 2019-07-11
JP7035509B2 true JP7035509B2 (en) 2022-03-15

Family

ID=67222554

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017246012A Active JP7035509B2 (en) 2017-12-22 2017-12-22 Display control method, program and information processing device

Country Status (1)

Country Link
JP (1) JP7035509B2 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004219804A (en) 2003-01-16 2004-08-05 Nippon Telegr & Teleph Corp <Ntt> System, processing method, and program for similar voice music search, recording medium of program
JP2009198581A (en) 2008-02-19 2009-09-03 Yamaha Corp Sound processing apparatus and program
JP2010054535A (en) 2008-08-26 2010-03-11 Kawai Musical Instr Mfg Co Ltd Chord name detector and computer program for chord name detection
JP2012018589A (en) 2010-07-09 2012-01-26 Yokogawa Electric Corp Apparatus data display device and apparatus data display method
JP2015179142A (en) 2014-03-19 2015-10-08 カシオ計算機株式会社 Modulation device, modulation method and modulation program
JP2018105956A (en) 2016-12-26 2018-07-05 カシオ計算機株式会社 Musical sound data processing method and musical sound data processor

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004219804A (en) 2003-01-16 2004-08-05 Nippon Telegr & Teleph Corp <Ntt> System, processing method, and program for similar voice music search, recording medium of program
JP2009198581A (en) 2008-02-19 2009-09-03 Yamaha Corp Sound processing apparatus and program
JP2010054535A (en) 2008-08-26 2010-03-11 Kawai Musical Instr Mfg Co Ltd Chord name detector and computer program for chord name detection
JP2012018589A (en) 2010-07-09 2012-01-26 Yokogawa Electric Corp Apparatus data display device and apparatus data display method
JP2015179142A (en) 2014-03-19 2015-10-08 カシオ計算機株式会社 Modulation device, modulation method and modulation program
JP2018105956A (en) 2016-12-26 2018-07-05 カシオ計算機株式会社 Musical sound data processing method and musical sound data processor

Also Published As

Publication number Publication date
JP2019113661A (en) 2019-07-11

Similar Documents

Publication Publication Date Title
JP6197631B2 (en) Music score analysis apparatus and music score analysis method
JP6677032B2 (en) Display method
WO2010073344A1 (en) Play list generation device, play list generation method, play list generation program, and recording medium
WO2014188999A1 (en) Musical composition evaluation device, musical composition evaluation method, musical composition evaluation program, and information storage medium whereupon program is stored
JP5122598B2 (en) Speech input evaluation system, control method for speech input evaluation system, and program
EP1580644A2 (en) Electronic musical apparatus for recording and reproducing music content
JP7035509B2 (en) Display control method, program and information processing device
JP5569543B2 (en) Guitar chord display device and program
JP5387642B2 (en) Lyric telop display device and program
JP6690446B2 (en) Acoustic analysis device and acoustic analysis method
JP4238237B2 (en) Music score display method and music score display program
JP6020134B2 (en) Performance data set editing program and apparatus
JP5888295B2 (en) Performance information display device, program
JP3835591B2 (en) Musical tone selection apparatus and method
JP2019139061A (en) Code presentation method and program
JP4581965B2 (en) Music material processing method and music material processing system
JP5215899B2 (en) Sound value changing device, method and program
JP5566230B2 (en) Music score display program
JP3972942B2 (en) Performance pattern processing apparatus and processing program recording medium
JP6680047B2 (en) Karaoke system and karaoke program
JP5660334B2 (en) Karaoke device and karaoke program
KR20150053423A (en) A easy note setting system and a method thereof
JP4270048B2 (en) Tonality changing device and program
JP6048720B2 (en) Display device and program
JP2008304937A (en) Performance data processor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201023

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210831

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210907

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210924

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220201

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220214

R151 Written notification of patent or utility model registration

Ref document number: 7035509

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151