JP6048720B2 - Display device and program - Google Patents
Display device and program Download PDFInfo
- Publication number
- JP6048720B2 JP6048720B2 JP2012106660A JP2012106660A JP6048720B2 JP 6048720 B2 JP6048720 B2 JP 6048720B2 JP 2012106660 A JP2012106660 A JP 2012106660A JP 2012106660 A JP2012106660 A JP 2012106660A JP 6048720 B2 JP6048720 B2 JP 6048720B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- information
- take data
- take
- recording
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Circuit For Audible Band Transducer (AREA)
Description
本発明は、ユーザーのパフォーマンス状況を記録することのできる表示装置およびそのプログラムに関する。 The present invention relates to a display device capable of recording a user's performance status and a program thereof.
音楽制作においては、レコーディング工程で演奏や歌唱といったパフォーマンスの内容を録音し、録音された楽音をミキシング工程で編集することが行われる。レコーディングでは通常、同じ曲を複数回(複数テイク)録音しておき、後工程のミキシングで、複数テイクのうちもっともうまく演奏できたテイクをベースに、失敗した箇所のみを別のテイクと差し替えたり、別のテイクの方が上手に演奏できた箇所を部分的に採用して差し替えたりして曲を完成させる。特許文献1には、カラオケ録音した複数テイクの歌唱を切り貼りして楽曲を再構成する技術が記載されている。
In music production, performance contents such as performance and singing are recorded in the recording process, and the recorded musical sounds are edited in the mixing process. In recording, the same song is usually recorded multiple times (multiple takes), and in the subsequent mixing process, only the failed part is replaced with another take based on the take that was most successful among the multiple takes. Complete the song by partially adopting and replacing parts where another take was able to perform well.
このような音楽制作手法では、ミキシング時に1テイクずつ聞き返しながらどのテイクでどこが失敗(または成功)しているかを確認する必要があり、時間がかかる。さらに、全テイクで同じ箇所を失敗していることが発覚した場合には、再度レコーディング工程に戻って録音をやり直すことになるので、大きな手戻りとなる。 This kind of music production method takes time because it is necessary to check which take has failed (or succeeded) while listening back one by one during mixing. Furthermore, when it is found that the same part has failed in all takes, the recording process is resumed by returning to the recording process again, which is a great rework.
本発明はこの点に鑑みてなされたもので、レコーディング時に各テイクの良し悪しを簡易に記録してそれをミキシング時に利用することで、音楽制作を効率よく行えるようにするものである。 The present invention has been made in view of this point, and is intended to efficiently perform music production by simply recording the quality of each take during recording and using it during mixing.
本発明にかかる表示装置は、時間の経過に沿って実行されるパフォーマンスの内容に関連した、複数の表示要素で構成される表示情報を表示する表示手段と、表示要素のうち任意のものを指定する表示要素指定手段と、表示要素指定手段によって指定された1乃至複数の表示要素を表示情報と対応付けられた一組のテイクデータとして、複数組のテイクデータを記憶する記憶手段と、全テイクデータまたは前記一組のテイクデータを選択する選択手段と、前記選択手段で前記全テイクデータが選択された時は、表示手段に第1の態様で表示された表示情報のうち、複数組のテイクデータのすべてに共通する表示要素を第2の表示態様に変更し、前記選択手段で前記一組のテイクデータが選択された時は、前記一組のテイクデータを第1の表示態様で前記表示手段に表示させる表示制御手段とを備える。 The display device according to the present invention designates display means for displaying display information composed of a plurality of display elements related to the contents of performance executed over time, and any one of the display elements is designated. Display element designating means, one or more display elements designated by the display element designating means as a set of take data associated with the display information, storage means for storing a plurality of sets of take data, and all takes A selection means for selecting data or the set of take data, and when all the take data is selected by the selection means, a plurality of sets of takes among the display information displayed in the first mode on the display means. change the display elements that are common to all the data to the second display mode, when the set of take data selected by the selection means, the first display state the set of take data In and a display control means for displaying on the display means.
つまり本発明の表示装置では、時間の経過に沿って実行されるパフォーマンスであるレコーディングの楽曲に関する情報、たとえば複数の文字で構成された歌詞を、表示器に表示させ、レコーディング時に失敗した箇所に該当する歌詞をユーザーが指定して、テイクごとに1または複数個所の失敗箇所を記憶させることができる。複数テイクのレコーディングが終わった後に、表示器に表示された歌詞のうち、複数テイクのすべてで失敗している箇所は異なる表示態様(たとえば異なる色)で表示されるので、一度も成功していない箇所を簡単に把握できる。 In other words, in the display device of the present invention, information related to the music of recording, which is a performance that is executed over time, for example, lyrics composed of a plurality of characters are displayed on the display unit, and it corresponds to a place where recording failed. The user can specify the lyrics to be played and store one or more failed points for each take. After the recording of multiple takes, the part of the lyrics displayed on the display that has failed in all of the multiple takes is displayed in different display modes (for example, different colors), so it has never been successful The location can be easily grasped.
したがって、レコーディングが完了した全テイクの失敗箇所を表示することで、楽曲中の特定箇所が一度も成功していないことにレコーディングが終わってから気づく、という問題が起こらなくなり、音楽制作における手戻りが減少する。さらに、テイクごとに失敗箇所を記録しておくことで、あとで録音内容を1テイクずつ聞き返して失敗箇所を探す作業も不要になる。したがって、音楽制作の作業効率が向上する。 Therefore, by displaying the failed parts of all takes that have been recorded, there is no problem of recognizing that a specific part of the song has never been successful after recording, and reworking in music production can be avoided. Decrease. In addition, by recording the failure location for each take, you do not have to search for the failure location later by listening back to the recorded content one by one. Therefore, the work efficiency of music production is improved.
以下、演奏者の歌う歌唱音声を録音するレコーディングにおいて、本発明の表示装置を用いて、歌唱を失敗した箇所をテイクごとに記録する例について説明する。レコーディングは、演奏者のほかに機材の操作を行なうエンジニアや進行を取り仕切るディレクターなどの複数人で役割分担しながら行なう場合と、演奏者が自らマイクのレベル調整や録音用装置の操作なども担当して一人で行なう場合とがある。本来、演奏者は演奏に専念するのが望ましいため、本発明の表示装置の操作は演奏者とは別人(たとえばディレクター)が担当するとよいが、演奏者がひとりでレコーディングを行なう場合には、演奏者自身が表示装置の操作を行なっても何ら問題はないので、以下は説明を簡単にするため、演奏者自身が表示装置を操作するものとし、「ユーザー」は演奏者かつ装置の操作者であるものとする。 Hereinafter, in the recording for recording the singing voice of the performer, an example will be described in which the location where the singing has failed is recorded for each take using the display device of the present invention. In addition to the performer, the recording is performed by multiple persons such as the engineer who operates the equipment and the director who manages the progress, and the performer is also responsible for adjusting the microphone level and operating the recording device. Sometimes it is done alone. Originally, it is desirable for the performer to concentrate on the performance, so that the operation of the display device of the present invention is preferably performed by a person (eg, a director) different from the performer. There is no problem even if the player himself operates the display device. For the sake of simplicity, the following description assumes that the player himself operates the display device. The “user” is the player and the operator of the device. It shall be.
図1は、本発明の一実施例における表示装置の機能ブロック図である。本発明における表示装置Dは、タッチパネルディスプレイ(以下タッチパネル)を備えた情報処理装置であり、操作部1、音声入力部2、制御部3、記憶部4、表示部5、音声出力部6から構成される。
FIG. 1 is a functional block diagram of a display device according to an embodiment of the present invention. The display device D in the present invention is an information processing device including a touch panel display (hereinafter referred to as a touch panel), and includes an
操作部1は、ボタン、スイッチ、ダイアル、スライダーなどのハードウェア操作子と、タッチパネル上に表示される仮想操作子とを含む。音声入力部2はマイクロフォンであって、ユーザーによる発声や演奏音などの音声を集音する。集音された音はデジタル信号に変換され、音声信号として処理される。制御部3は表示装置Dの動作を制御するマイクロプロセッサユニット(CPU)であり、操作部1から入力されたユーザー操作や音声入力部2から入力された音声信号に応じて、記憶部4にアクセスして情報の読み出しや書き込みを行なったり、表示部5または音声出力部6に出力する情報を制御したりする。記憶部4は、リードオンリーメモリ(ROM)、ランダムアクセスメモリ(RAM)、あるいはハードディスクやフラッシュメモリなどの記憶媒体を含み、表示装置Dを制御するためのプログラムやデータ、音声入力部2から入力された音声を録音した録音データRE、表示部5に表示させる表示情報LYなどを記憶する。表示部5はタッチパネル式のディスプレイであり、記憶部4から読み出された表示情報LYなどを表示する。タッチパネルは、液晶(LCD)や有機EL、あるいは電子ペーパーなどで構成されたディスプレイに、静電式、感圧式、あるいは他の既存の方式による、ディスプレイ上への操作の検出機能を持たせたものであり、表示情報LYを表示する表示部5としての機能と、ユーザーのタッチ操作を受け付ける操作部1としての機能を併せ持つ。音声出力部6は音源・効果回路やアンプ、スピーカーなどのサウンドシステムにより構成される。なお、すべての構成要素が機器に内蔵されている必要はなく、マイクロフォンや記憶装置、ディスプレイ、スピーカーなどを外付けすることにより同様の機能を実現してもよい。
The
図2は、表示装置Dの表示部5に表示される画面の一例である。ユーザーが操作部1を操作することにより、これからレコーディングする楽曲に関連する表示情報、具体的には楽曲の歌詞である表示情報LYが記憶部4から読み出され、図2(a)に示す画面が表示部5に表示される。表示部5には、表示情報LYを表示する表示エリアArと、レコーディングのテイクを表すタブを表示するタブエリアTrがあり、タブエリアTrにはテイク1を表すタブTb1、全テイクの統合データを表示するタブTbAが表示されている。なお、初期状態ではテイク1のタブTb1が選択されている。
FIG. 2 is an example of a screen displayed on the
ユーザーは表示エリアArに表示された表示情報LYを参照しながら、対象楽曲を歌唱し、歌唱音声を録音する。すなわち、レコーディングを行なう。本発明の表示装置Dは音声入力部2を備えているので、専用の録音機器がなくても本機器のみで簡易的に録音を行なえる。操作部1より録音開始操作を行なうと、以降にユーザーが音声入力部から入力した歌唱音声が、記憶部4に録音データREとして記憶される。なお、録音を開始するにあたり、本装置の記憶部4あるいは本装置とは別の再生装置から楽曲の伴奏音を読み出して再生するようにし、伴奏音に合わせて歌唱するとよい。
The user sings the target music and records the singing voice while referring to the display information LY displayed in the display area Ar. That is, recording is performed. Since the display device D of the present invention includes the
こうして歌唱しながら、うまく歌えなかった箇所に該当する歌詞に、表示エリアAr上でタッチする。たとえば、「いつもいつまでも」の末尾で失敗した場合、「も」が表示されている箇所にタッチする。すると、タッチした箇所に色が付き、画面は図2(b)のようになる。このときの表示態様(現在表示中のタブにおけるタッチ箇所の表示態様)をfcとする。なお、表示態様fcの色の付き方は、所定の範囲に色を塗ったような表示でもよいし、タッチされた位置にある文字色を変えるようにしてもよいが、少なくとも表示情報LYを構成するどの表示要素(後述)がタッチされたのかがわかるように表示するものとする。また、失敗箇所が複数文字にわたる場合は、タッチではなくドラッグして範囲を指定することで、ドラッグした範囲が表示態様fcとなる。楽曲の最後まで演奏(歌唱)が進むと、ユーザーは録音終了操作をしてテイク1のレコーディングを終了する。表示エリアAr上に表示された表示情報LYは、テイク1において失敗した1または複数の箇所が表示態様fcで示された状態になっているはずである。
While singing in this way, the lyrics corresponding to the part that could not be sung well are touched on the display area Ar. For example, if a failure occurs at the end of “always”, touch the place where “mo” is displayed. Then, the touched portion is colored, and the screen is as shown in FIG. Let fc be the display mode at this time (display mode of the touch location on the tab currently being displayed). Note that the display mode fc may be colored by displaying a predetermined range, or changing the character color at the touched position, but at least the display information LY is configured. It is assumed that the display element is displayed so that it can be understood which display element (described later) is touched. In addition, when the failure portion extends over a plurality of characters, the dragged range becomes the display mode fc by specifying the range by dragging instead of touching. When the performance (singing) progresses to the end of the music, the user ends the recording of
次に、操作部1の操作によりテイク2のレコーディングのためのタブを新規作成する。たとえば、タブTb1の右側を長押しすることでメニュー画面(図示せず)を表示させ、そこから「新規タブ作成」のメニューを選択することで、タブTb2が表示されて、図2(c)の画面となる。このとき、テイク1でタッチした失敗箇所は、図2(b)とは異なる色で表示される。このときの表示態様(現在表示中でないタブにおけるタッチ箇所の表示態様)をfpとする。このように、録音済みテイクにおいてタッチした箇所が表示態様fpで表示されることで、ユーザーは過去の失敗箇所を認識することができ、テイク2では同じ箇所で再び失敗することのないよう注意してレコーディングを行なうことができる。
Next, a tab for recording the
図2(d)は、テイク4までのレコーディングを行なった場合の画面である。この図では、テイク1〜4の全テイクデータを統合して表示するオールタブTbAが選択されており、表示エリアAr上の表示情報LYには、表示態様fp、faで表示されている箇所がある。表示態様faは、テイク1〜4のすべてにおいてユーザーがタッチした箇所を示しており、表示態様fpは、テイク1〜4のいずれかにおいてユーザーがタッチした箇所を示している。つまり、表示態様faで示された箇所は、全テイク同じ箇所で失敗していることを示し、まだレコーディングを完了できないことを意味する。逆に、オールタブTbAにおいて表示態様faがなくなれば、すべての箇所において少なくとも1度は成功していることを示すため、レコーディングを完了して次のミキシング工程に移ってよいことを意味する。なお、図2(a)〜(d)において、各タブTb1〜Tb4、TbAのそれぞれにタッチすることで、任意のタブの内容をいつでも表示することができる。
FIG. 2D shows a screen when recording up to take 4 is performed. In this figure, the all tab TbA for integrating and displaying all take data of
図3は、表示装置Dの記憶部4における、表示情報LYに関する種々の情報の管理構造を示す概念図である。本実施例の表示情報LYは、複数の表示要素ly(x)から構成され、表示要素ly(x)ごとにレコーディング楽曲の時間情報lt(x)を持つ。前述のとおり、表示情報LYは楽曲の歌詞でありテキストデータであって、図3では歌詞の1文字ごとが表示要素ly(x)となっている。
FIG. 3 is a conceptual diagram showing a management structure of various information related to the display information LY in the
ここで、表示情報LYの作成方法の一例として、MIDI(ミディ)を利用して表示要素ly(x)を作成し、それに対応する時間情報lt(x)を決定する方法を説明する。レコーディングに使用する楽曲をMIDIで作成し、メロディパートのノートデータに歌詞を割り付けておく。ノートごとに割り付けられたテキスト情報が表示情報LYの表示要素ly(1)、ly(2)、・・・ly(x)である。表示要素ly(x)を割り付けたノートデータの小節、拍、クロックを、楽曲の演奏テンポにもとづいて時間情報(分、秒)に変換したものが、図3における時間情報lt(x)となる。 Here, as an example of a method for creating the display information LY, a method for creating the display element ly (x) using MIDI (midi) and determining the time information lt (x) corresponding thereto will be described. The music used for recording is created with MIDI, and lyrics are assigned to the note data of the melody part. The text information assigned to each note is the display elements ly (1), ly (2),... Ly (x) of the display information LY. The time information lt (x) in FIG. 3 is obtained by converting the measure, beat, and clock of the note data to which the display element ly (x) is assigned into time information (minutes, seconds) based on the performance tempo of the music. .
表示情報LYは、所定のルールにしたがって表示部5の表示エリアArに表示される。ユーザーが表示エリアAr上の任意の位置にタッチすると、タッチ位置の座標が検出される。表示情報LYを表示エリアArに表示させるための所定のルールを参照することで、座標位置に表示されている表示要素ly(x)が特定され、その表示要素ly(x)に対して操作フラグがオンになる。この操作フラグは、記憶部4であるRAMに記憶される。図3の「テイク1」列Tk1は、図2におけるTb1に対応しており、テイク1のレコーディング時における失敗箇所を記録したテイクデータである。チェックマークは操作フラグがオンであることを表す。図2(b)によると、Tb1では「いつまでも」の「も」がユーザーによりタッチされている。つまり、タッチ位置に表示されている表示要素はly(8)と特定されることから、図3のTk1では、表示要素ly(8)の操作フラグがオンになっている。Tk2〜Tk4も同様に、図2のTb2〜Tb4に対応する。このように、Tk1〜Tk4の各テイクデータは、共通する1つの表示情報LYの各表示要素ly(x)に対して任意の表示要素を指定し、どの表示要素ly(x)が指定されたか(操作フラグがオンとなったか)をテイクごとに記憶部4に記憶したものである。
The display information LY is displayed in the display area Ar of the
図4は、表示装置Dの制御部3が行なう処理を示すフローチャートである。この処理は、表示装置Dが起動されることにより開始される。
FIG. 4 is a flowchart showing processing performed by the
ステップST1は、本実施例を実行するための種々の初期化処理を行なう。レコーディング楽曲に対応する表示情報LYをユーザー指示に応じて、あるいは自動的に、表示部5に表示したり、録音データを保存するための領域を記憶部4に確保したりなどの処理を行なう。その後、ステップST2に進み、ユーザーによる操作部1の操作を検出すると、ステップST3において、ステップST2で検出した操作が表示情報LYに関する操作か否かを判断する。表示情報LYに関する操作とは、タブエリアTrに表示されたタブTb1〜TbAへのタッチ操作または表示エリアAr内に現在表示されている表示情報LYへのタッチ操作のことである。表示情報LYに関する操作の場合はステップST4へ進み、それ以外の操作である場合はステップST15へ進む。
Step ST1 performs various initialization processes for executing the present embodiment. The display information LY corresponding to the recorded music is displayed on the
ステップST4では、表示情報LYに関する操作のうち、操作位置がタブエリアTrであるか表示エリアArであるかを判断する。タブエリアTrする操作である場合はステップST5へ進み、表示エリアArに対する操作である場合はステップST11へ進む。 In step ST4, it is determined whether the operation position is the tab area Tr or the display area Ar among the operations related to the display information LY. If it is an operation for tab area Tr, the process proceeds to step ST5, and if it is an operation for display area Ar, the process proceeds to step ST11.
ステップST5では、表示エリアAr上に表示されている表示情報LYにおいて、表示態様fc、fp、faで表示されている箇所があれば、表示態様をクリアする。ステップST6では、操作対象のタブが、各テイクに対応したタブ(Tb1、Tb2、・・・)であるか、オールタブ(TbA)であるかを判断する。各テイクに対応したタブである場合はステップST7へ進み、オールタブTbAである場合はステップST9へ進む。 In step ST5, if there is a portion displayed in the display mode fc, fp, fa in the display information LY displayed on the display area Ar, the display mode is cleared. In step ST6, it is determined whether the operation target tab is a tab (Tb1, Tb2,...) Corresponding to each take or an all tab (TbA). If it is a tab corresponding to each take, the process proceeds to step ST7, and if it is an all tab TbA, the process proceeds to step ST9.
ステップST7では、ステップST2でユーザーが操作したタブ(これをTbuとする)において操作フラグがオンである表示要素ly(x)を確認し、操作フラグがオンである表示要素ly(x)の表示態様をfcに変更する。続いてステップST8へ進み、タブTbuでは操作フラグがオンでないがTbu以外のタブにおいて操作フラグがオンである表示要素ly(x)を確認し、この表示要素ly(x)の表示態様をfpに変更する。これで、ステップST2で検出した操作(いずれかのタブへのタッチ操作)に対する処理を終了し、次のユーザー操作を受け付けるステップST2へと進む。 In step ST7, the display element ly (x) whose operation flag is on is confirmed in the tab operated by the user in step ST2 (this is Tbu), and the display element ly (x) whose operation flag is on is displayed. Change the mode to fc. Subsequently, the process proceeds to step ST8, where the display element ly (x) in which the operation flag is not on in the tab Tbu but the operation flag is on in a tab other than Tbu is confirmed, and the display mode of the display element ly (x) is set to fp. change. This completes the processing for the operation detected in step ST2 (touch operation on any tab), and proceeds to step ST2 for accepting the next user operation.
ステップST9では、各表示要素ly(x)について、すべてのタブ(テイク)における操作フラグを確認し、すべてのタブにおいて操作フラグがオンである表示要素ly(x)があれば、その表示要素ly(x)の表示態様をfaに変更する。続くステップST10では、一部のタブ(テイク)においてのみ操作フラグがオンである表示要素ly(x)を確認し、表示態様をfpに変更する。これで、ステップST2で検出した操作(オールタブTbAのタッチ操作)に対する処理を終了し、次のユーザー操作を受け付けるステップST2へと進む。 In step ST9, the operation flag in all tabs (takes) is confirmed for each display element ly (x). If there is a display element ly (x) whose operation flag is on in all tabs, the display element ly is displayed. The display mode of (x) is changed to fa. In the subsequent step ST10, the display element ly (x) whose operation flag is on only in some tabs (takes) is confirmed, and the display mode is changed to fp. This completes the processing for the operation detected in step ST2 (touch operation of all tab TbA), and proceeds to step ST2 for accepting the next user operation.
ステップST11では、各テイクに対応したタブ(Tb1、Tb2、・・・)の表示エリアArを操作したか、オールタブ(TbA)の表示エリアArを操作したかを判断する。各テイクに対応したタブである場合はステップST12へ進む。オールタブTbAである場合は、表示エリアAr内にタッチしても何も起こらないことから、ステップST2で検出した操作(オールタブTbAの表示エリアArへのタッチ操作)に対する処理を終了し、次のユーザー操作を受け付けるステップST2へと進む。なお。オールタブTbAの表示エリアAr内にタッチしたときの動作はこの限りでなく、たとえば自動的に1つのテイクのタブを選択するようにして、選択されたタブにおいて以降のステップST12〜ST14の処理を行うようにしてもよい。この際に選択されるタブは、もっともテイク番号の大きいタブ、ユーザーがオールタブを選択する直前に選択されていたタブ、あるいはタブを新規作成、など、なんでもよい。 In step ST11, it is determined whether the display area Ar of the tabs (Tb1, Tb2,...) Corresponding to each take has been operated or the display area Ar of the all tabs (TbA) has been operated. If the tab corresponds to each take, the process proceeds to step ST12. In the case of the all tab TbA, nothing happens even if the display area Ar is touched, so the processing for the operation detected in step ST2 (touch operation to the display area Ar of the all tab TbA) is terminated and the next user It progresses to step ST2 which receives operation. Note that. The operation when the display area Ar of the all tab TbA is touched is not limited to this. For example, one take tab is automatically selected, and the processes of the following steps ST12 to ST14 are performed on the selected tab. You may do it. The tab selected at this time may be anything such as the tab with the largest take number, the tab selected immediately before the user selects the all tab, or the creation of a new tab.
ステップST12では、ステップST2でユーザーがタッチした表示エリアAr中の座標位置を検出し、この座標上に表示されている表示要素ly(x)を特定する。なお、タッチ位置に表示要素ly(x)が存在しない場合、何も処理を行なわずにステップST2へ進むようにしてもよいし、タッチ位置のもっとも近くに表示されている表示要素ly(x)を選択するようにしてもよい。続くステップST13では、ステップST12で特定した表示要素ly(x)に対して、現在のテイク(ステップST11で判定されたテイクタブに対応するテイク)における操作フラグをオンにし、ステップST14でこの表示要素ly(x)の表示態様をfcに変更する。これで、ステップST2で検出した操作(表示エリアAr中の表示情報LYへのタッチ操作)に対する処理を終了し、次のユーザー操作を受け付けるステップST2へと進む。 In step ST12, the coordinate position in the display area Ar touched by the user in step ST2 is detected, and the display element ly (x) displayed on this coordinate is specified. When the display element ly (x) does not exist at the touch position, the process may proceed to step ST2 without performing any process, or the display element ly (x) displayed closest to the touch position is selected. You may make it do. In the subsequent step ST13, the operation flag in the current take (the take corresponding to the take tab determined in step ST11) is turned on for the display element ly (x) specified in step ST12. In step ST14, this display element ly is displayed. The display mode of (x) is changed to fc. This completes the processing for the operation detected in step ST2 (touch operation on the display information LY in the display area Ar), and proceeds to step ST2 for accepting the next user operation.
ステップST15では、ステップST2の操作が表示装置Dを停止させる終了指示であるかどうかを判断する。終了指示である場合はステップST16へ進み、データの保存処理を行なってフローを終了する。終了指示でない場合はステップST17へ進み、操作に対応した処理を行なう。その後、次のユーザー操作を受け付けるステップST2へと進む。 In step ST15, it is determined whether or not the operation in step ST2 is an end instruction for stopping the display device D. If it is an end instruction, the process proceeds to step ST16, a data storage process is performed, and the flow ends. If it is not an end instruction, the process proceeds to step ST17 to perform processing corresponding to the operation. Then, it progresses to step ST2 which receives next user operation.
ここで、ステップST17で行なわれる処理について説明する。ステップST17の処理の例として、録音、再生、タブ作成、選曲などがある。録音は、ユーザーの録音開始指示に応じて録音経過時間の計測を開始するとともに、音声入力部2から入力された音声信号を記憶部4に記憶する処理である。再生は、記憶部4から録音データREを読み出し、音声出力部6から出力させる処理である。タブ作成は、タブエリアTrに新たなタブを表示し、ステップST5の処理(表示態様のクリア)を行なったのちステップST8の処理を行なうことで、すでにレコーディングが完了したテイクの失敗箇所を表示する処理である。選曲は、記憶部4に記憶された複数の表示情報LYのうちの1つをユーザーの選択操作に応じて読み出し、表示部5に表示する処理である。これ以外にも、表示エリアArにおける表示の拡大率を変更したり、タッチ位置の表示態様を(たとえば別の色に)変更したりといった、種々の編集処理がステップST17にて行なわれる。
Here, the process performed in step ST17 will be described. Examples of processing in step ST17 include recording, playback, tab creation, music selection, and the like. Recording is a process of starting measurement of the elapsed recording time in response to a user's recording start instruction and storing the audio signal input from the
図5は、表示装置Dの表示部5に表示される画面の別の例である。横軸は録音時間を表す。長方形Tk1〜Tk4は、テイク1〜テイク4の録音データREに対応するテイクデータであって、表示情報LYに対して、各テイクにおいて操作フラグがオンになっている(つまりレコーディング中の演奏に失敗した)時間位置が、表示態様dcまたはdaで示されている。なお、Tk2〜Tk4では、図の簡略化のため表示情報LYの記載を省略してあるが、もちろんすべてのテイクにおいて表示情報LYが記載されていてもよいし、あるいは、テイクデータの長方形(Tk1〜Tk4)の中に表示情報LYを表示するのではなく、付近に表示してもよい。いずれにしろ、Tk1〜Tk4は、表示情報LYを時間方向に一次元表示したものであるといえる。表示態様dcで表示された失敗箇所は、他の少なくとも1テイクにおいては成功していることを示し、表示態様daで表示された失敗箇所は、全テイクで失敗していることを示す。つまり、表示態様daが存在する場合、まだレコーディングを完了できないことを意味する。逆に、表示態様daがなくなれば、すべての箇所において少なくとも一度は成功していることを示すため、レコーディングを完了して次のミキシング工程に移ってよいことを意味する。
FIG. 5 is another example of a screen displayed on the
図3では、表示要素ly(1)についてテイク2の操作フラグがオンである。したがって、図5では、Tk2において、表示要素ly(1)の時間情報であるlt(1)の位置が表示態様dcで表されている。同様に、Tk3においては、表示要素ly(4)の時間情報であるlt(4)の位置が表示態様dcで表されている。また、表示要素ly(8)については、全テイクで操作フラグがオンであるので、この表示要素ly(8)に対応する時間情報lt(8)の位置が、Tk1〜Tk4の全テイクにおいて表示態様daで表されている。このように時間軸上に各テイクにおける失敗位置が表示されるため、レコーディング後のミキシング作業において、採用すべきテイクや採用すべきでないテイクをすぐに判別できる。また、表示装置Dが、録音データREを編集する機能も備えている場合は、図5のTk1〜Tk4は各テイクの録音データREそのものであるので、失敗箇所の録音データを別のテイクの同時間の録音データと差し替える編集作業をこの表示上で直接行なうことができ、録音(レコーディング)から編集(ミキシング)までの操作が効率よく行なえる。
In FIG. 3, the operation flag of
なお、本実施例では、表示装置Dの記憶部4に録音データREを記憶するようにしたが、表示装置とは別に専用の録音装置で録音を行うようにしてもよい。その場合であっても、表示装置Dの表示部5に、各テイクの失敗位置を図5のように時間軸に沿って表示するのは有用である。録音装置上でも図5のように録音データが時間軸に沿って表示されるのが一般的であるため、表示装置Dにて記録された失敗位置の時間情報と録音装置上の録音データの照合がしやすくなり、編集時に録音装置上の録音データを1テイクずつ聞きなおして失敗箇所を確認しなくともすぐに各テイクの失敗箇所を特定できるからである。
In this embodiment, the recording data RE is stored in the
なお、本実施例の表示装置Dにおいてはタッチパネルを使用したが、タッチパネルではない表示器を使用してもよい。マウスやホイールなどのポインティングデバイスを用いて画面上のカーソルを移動させ、表示情報LY上の位置を指定すればよい。 In addition, in the display apparatus D of a present Example, although the touch panel was used, you may use the indicator which is not a touch panel. A position on the display information LY may be designated by moving a cursor on the screen using a pointing device such as a mouse or a wheel.
また、楽器の演奏や歌唱だけでなく、演劇やダンス、朗読、その他さまざまなパフォーマンスにおいて、本発明は応用できる。その場合、表示情報LYは、楽曲の歌詞に限らず、楽曲のコード進行や、パフォーマンスの構成を表すメモ(たとえば曲のイントロ、Aメロ、サビといった構成や、演劇の第一部、第一幕、といった構成を記したテキストなど)であってもよいし、写真やイラストなどの画像であってもよい。さらに表示態様fc、fp、faやdc、daは、表示色による識別方法に限らず、反転表示、点滅表示、下線、斜体など、他の箇所と区別できるものであれば、どのようなものであってもよい。 Further, the present invention can be applied not only to playing and singing musical instruments, but also to various performances such as theater, dance, reading, and so on. In this case, the display information LY is not limited to the lyrics of the music, but a memo indicating the chord progression of the music and the composition of the performance (for example, the structure of the music intro, A melody, chorus, the first part of the play, the first act , Etc., or text such as photographs or illustrations. Further, the display modes fc, fp, fa, dc, and da are not limited to the identification method based on the display color, but can be any display as long as they can be distinguished from other parts such as reverse display, blinking display, underline, and italic. There may be.
さらに、失敗箇所を記録する用途だけではなく、成功箇所を記録してもよいし、それ以外の用途でも、ユーザーがマークしておきたい箇所を記録する目的に本発明は応用できる。あるいは、種類の異なる情報を異なる表示態様で表示できるようにすることで、より詳細なパフォーマンスの状況を管理できる。たとえば、メロディを間違えた場合、歌詞を間違えた場合、音程を外した場合、などの異なる失敗状況を、画面に1回タッチする、すばやく2回タッチする、長押しする、といったようにそれぞれ操作の仕方を異ならせ、対応する表示態様もfc1(赤色)、fc2(青色)、fc3(黄色)のように区別する。こうすると、どの箇所でどのような失敗が多いかといった情報も管理でき、より効率的にレコーディングが行なえる。または、同様の手法で失敗箇所と成功箇所を同時に管理して、ミキシング時に採用すべき成功データがどのテイクであるかを判断しやすくする、という使い方もできる。 Furthermore, the present invention can be applied not only for the purpose of recording the failed part but also for recording the part that the user wants to mark for other purposes. Alternatively, more detailed performance status can be managed by enabling different types of information to be displayed in different display modes. For example, if you make a mistake in the melody, if you make a mistake in the lyrics, or if you remove the pitch, you can touch different screens such as touching the screen once, touching twice quickly, and pressing and holding each operation. Different ways are used, and the corresponding display modes are also distinguished as fc1 (red), fc2 (blue), and fc3 (yellow). In this way, it is possible to manage information such as what kind of failure at which part, and recording can be performed more efficiently. Alternatively, it is possible to manage the failed part and the successful part at the same time by using the same method so that it is easy to determine which take is the success data to be adopted at the time of mixing.
また、本実施例では1文字ごとの表示要素ly(x)に対して録音時間に相当する時間情報lt(x)を持つとしたが、時間情報は分、秒の単位で表されるものでなくてもよい。たとえば数文字ごとに1小節目、2小節目、のように大まかに区切られたものでもよい。表示情報LYが複数枚の画像から構成されるような場合、1枚の画像が表す情報量は1文字が表す情報量に比べて多いことが普通であるので、画像1枚につき数小節が対応するというように大まかな区切り方にすると有効であろう。なお、表示情報LYは必ずしも時間情報lt(x)を持つ必要はなく、時間情報lt(x)を持たない場合であっても、各テイクの録音における失敗(または成功)箇所を記録するという本発明の効果は得られるものである。 In the present embodiment, the display information ly (x) for each character has time information lt (x) corresponding to the recording time, but the time information is expressed in units of minutes and seconds. It does not have to be. For example, it may be roughly divided into several bars such as the first bar and the second bar. When the display information LY is composed of multiple images, the amount of information represented by one image is usually larger than the amount of information represented by one character, so several bars per image are supported. It would be effective to make a rough separation like this. The display information LY does not necessarily have the time information lt (x). Even if the display information LY does not have the time information lt (x), the book of recording failure (or success) in each take is recorded. The effects of the invention can be obtained.
なお、本発明は、表示装置の形態のみでなく、プログラムとしても実施できることは言うまでもない。 It goes without saying that the present invention can be implemented not only in the form of a display device but also as a program.
D:表示装置、1:操作部、2:音声入力部、3:制御部、4:記憶部、5:表示部、6:音声出力部、LY:表示情報、RE:録音データ、Ar:表示エリア、Tr:タブエリア、 Tb1〜Tb4:テイクタブ、TbA:オールタブ、fc,dc:現在のテイクの操作に対する表示態様、fp:他のテイクの操作に対する表示態様、fa,da:全テイクの操作に対する表示態様、ly(x)(x=1,2,・・・):表示要素、lt(x)(x=1,2,・・・):時間情報、 Tk1〜Tk4:テイクデータ。 D: display device, 1: operation unit, 2: audio input unit, 3: control unit, 4: storage unit, 5: display unit, 6: audio output unit, LY: display information, RE: recording data, Ar: display Area, Tr: Tab area, Tb1 to Tb4: Take tab, TbA: All tab, fc, dc: Display mode for current take operation, fp: Display mode for other take operations, fa, da: For all take operations Display mode, ly (x) (x = 1, 2,...): Display element, lt (x) (x = 1, 2,...): Time information, Tk1 to Tk4: take data.
Claims (3)
前記複数の表示要素のうち任意の表示要素を指定する表示要素指定手段と、
前記表示要素指定手段によって指定された1乃至複数の表示要素を、前記表示情報と対応付けられた一組のテイクデータとし、前記表示情報に対して複数組のテイクデータを記憶する記憶手段と、
全テイクデータまたは前記一組のテイクデータを選択する選択手段と、
前記選択手段で前記全テイクデータが選択された時は、前記表示情報を第1の表示態様で前記表示手段に表示させ、該表示情報に対応する前記複数組のテイクデータすべてに共通する、前記表示要素指定手段によって指定された表示要素を、前記第1の表示態様とは異なる第2の表示態様に変更し、前記選択手段で前記一組のテイクデータが選択された時は、前記一組のテイクデータを第1の表示態様で前記表示手段に表示させる表示制御手段と
を備えた表示装置。 Display means for displaying display information composed of a plurality of display elements related to the content of performance executed over time;
Display element designating means for designating an arbitrary display element among the plurality of display elements;
Storage means for storing one or more display elements specified by the display element specifying means as a set of take data associated with the display information, and storing a plurality of sets of take data for the display information;
Selection means for selecting all take data or the set of take data;
When all the take data is selected by the selection means, the display information is displayed on the display means in a first display mode, and is common to all the plural sets of take data corresponding to the display information. When the display element designated by the display element designation unit is changed to a second display mode different from the first display mode and the set of take data is selected by the selection unit, the set A display control means for causing the display means to display the take data in the first display mode .
前記表示制御手段は前記表示情報を前記種類情報毎に異なる表示態様で前記表示手段に表示させる The display control means causes the display means to display the display information in a display mode that is different for each type information.
請求項1に記載の表示装置。The display device according to claim 1.
時間の経過に沿って実行されるパフォーマンスの内容に関連した、複数の表示要素で構成される表示情報を表示器に表示させる表示手順と、
前記複数の表示要素のうち任意の表示要素を指定する表示要素指定手順と、
前記表示要素指定手順によって指定された1乃至複数の表示要素を、前記表示情報と対応付けられた一組のテイクデータとし、前記表示情報に対して複数組のテイクデータを記憶する記憶手順と、
全テイクデータまたは前記一組のテイクデータを選択する選択手順と、
前記選択手順で前記全テイクデータが選択された時は、前記表示情報を第1の表示態様で前記表示手順により表示させ、該表示情報に対応する前記複数組のテイクデータすべてに共通する、前記表示要素指定手段によって指定された表示要素を、前記第1の表示態様とは異なる第2の表示態様に変更し、前記選択手順で前記一組のテイクデータが選択された時は、前記一組のテイクデータを第1の表示態様で前記表示手段に表示させる表示制御手順と
を実行させるプログラム。 A display procedure for causing the display device to display display information composed of a plurality of display elements related to the content of the performance executed over time;
A display element designation procedure for designating an arbitrary display element among the plurality of display elements;
A storage procedure for storing one or more display elements specified by the display element specifying procedure as a set of take data associated with the display information, and storing a plurality of sets of take data for the display information;
A selection procedure for selecting all take data or the set of take data;
When all the take data is selected in the selection procedure, the display information is displayed by the display procedure in the first display mode, and is common to all the plural sets of take data corresponding to the display information. When the display element specified by the display element specifying means is changed to a second display mode different from the first display mode and the set of take data is selected in the selection procedure, And a display control procedure for causing the display means to display the take data in the first display mode .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012106660A JP6048720B2 (en) | 2012-05-08 | 2012-05-08 | Display device and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012106660A JP6048720B2 (en) | 2012-05-08 | 2012-05-08 | Display device and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013236210A JP2013236210A (en) | 2013-11-21 |
JP6048720B2 true JP6048720B2 (en) | 2016-12-21 |
Family
ID=49761982
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012106660A Expired - Fee Related JP6048720B2 (en) | 2012-05-08 | 2012-05-08 | Display device and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6048720B2 (en) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4482853B2 (en) * | 2003-02-17 | 2010-06-16 | カシオ計算機株式会社 | Performance diagnosis apparatus and performance diagnosis program |
JP4489650B2 (en) * | 2005-07-21 | 2010-06-23 | 株式会社第一興商 | Karaoke recording and editing device that performs cut and paste editing based on lyric characters |
JP5100264B2 (en) * | 2007-08-31 | 2012-12-19 | 株式会社第一興商 | Karaoke system with section playback function |
JP5234950B2 (en) * | 2008-10-31 | 2013-07-10 | 株式会社第一興商 | Singing recording system |
-
2012
- 2012-05-08 JP JP2012106660A patent/JP6048720B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2013236210A (en) | 2013-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2760014B1 (en) | Interactive score curve for adjusting audio parameters of a user's recording. | |
JP4211672B2 (en) | Performance data creation device and program | |
US9355634B2 (en) | Voice synthesis device, voice synthesis method, and recording medium having a voice synthesis program stored thereon | |
US7893339B2 (en) | Audio reproduction apparatus and method and storage medium | |
JP6776788B2 (en) | Performance control method, performance control device and program | |
JP2008139426A (en) | Data structure of data for evaluation, karaoke machine, and recording medium | |
JP4053387B2 (en) | Karaoke device, scoring result display device | |
JP5311069B2 (en) | Singing evaluation device and singing evaluation program | |
JP6048720B2 (en) | Display device and program | |
JP2006227248A (en) | Electronic music device and computer program applied to the device | |
JP5569543B2 (en) | Guitar chord display device and program | |
JP3807380B2 (en) | Score data editing device, score data display device, and program | |
JP4858504B2 (en) | Karaoke equipment | |
JP2007322544A (en) | Music reproducing device | |
JP2007086571A (en) | Music information display device and program | |
JP2016166994A (en) | Karaoke device and program for karaoke | |
JP2008052302A (en) | Karaoke machine | |
JP6803294B2 (en) | Karaoke device | |
JP4221757B2 (en) | Music score display apparatus and program for realizing music score display method | |
JP6255960B2 (en) | Program and music data generating apparatus for realizing music data generating method | |
JP6020134B2 (en) | Performance data set editing program and apparatus | |
JP6870024B2 (en) | Karaoke equipment and karaoke programs | |
JP2011154290A (en) | Karaoke machine for supporting singing of music partially including solitary duet | |
JP3843948B2 (en) | Music content utilization apparatus and computer program applied to the apparatus | |
JP4382631B2 (en) | Harmony singing guide system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150324 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160311 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160322 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160518 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161027 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161109 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6048720 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |