WO2021059399A1 - 音響装置、音響システム、画像生成方法及び画像生成プログラム - Google Patents
音響装置、音響システム、画像生成方法及び画像生成プログラム Download PDFInfo
- Publication number
- WO2021059399A1 WO2021059399A1 PCT/JP2019/037603 JP2019037603W WO2021059399A1 WO 2021059399 A1 WO2021059399 A1 WO 2021059399A1 JP 2019037603 W JP2019037603 W JP 2019037603W WO 2021059399 A1 WO2021059399 A1 WO 2021059399A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- lyrics
- music
- information
- section
- image generation
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
Definitions
- the sound device the sound system, the image generation method, and the image generation program according to each of the above aspects, it is possible to provide a configuration in which the operator can easily grasp the part including the lyrics in the music.
- the block diagram which shows the structure of the acoustic system in one Embodiment The figure which shows an example of the operation screen of the audio apparatus in one Embodiment.
- the flowchart which shows the image generation processing in one Embodiment.
- the second deck screen P2 is a screen for displaying information related to the second music, which is the music input to the second channel, and adjusting the playback state of the second music.
- the second deck screen P2 includes a track information panel P21, a performance pad P22, and a jog panel P23, similarly to the first deck screen P1.
- the track information panel P21, the performance pad P22, and the jog panel P23 have the same configurations as the track information panel P11, the performance pad P12, and the jog panel P13, respectively.
- the performance pad P22 and the jog panel P23 are arranged symmetrically with the performance pad P12 and the jog panel P13.
- the lyric information includes the above lyric text and the reproduction start timing and reproduction end timing of the characters (or words) included in the lyric text.
- the reproduction start timing and the reproduction end timing are one of the time stamps which are the reproduction position information indicating the reproduction position of the character in the music.
- the lyrics section LY1 is not included in INTRO, and the lyrics are reproduced from VERSE following INTRO. Therefore, if VERSE following INTRO of music C is connected after CHORUS of music A, music B can be connected to music A without discomfort.
- the waveform information CM1 and the lyrics section LY1 of each song are displayed on the first deck screen P1, the second deck screen P2, and the preview screen P71 of the operation screen PS. This makes it easier for the operator to mix the mixed music with a certain music, and also makes it easier to select the mixed music.
- the music composition information CM includes the development information CM2 indicating a plurality of feature sections that characterize the structure of the music.
- the image generation unit 85 generates an image of the operation screen PS in which the development information CM2 and the lyrics section LY1 are arranged in parallel. According to such a configuration, by checking the operation screen PS, it is possible to easily grasp the lyrics section and the development of the music, so that the content and atmosphere of the music can be imagined without auditioning the music. Therefore, it is possible for the operator to easily select the music to be mixed.
- the music composition information CM includes waveform information CM1 showing a waveform of signal strength according to the playback time of the music.
- the image generation unit 85 generates an image of the operation screen PS in which the waveform information CM1 and the lyrics section LY1 are arranged in parallel. According to such a configuration, by checking the operation screen PS, the lyrics section and the intonation of the music can be grasped, so that the content and atmosphere of the music can be grasped without auditioning the music. Therefore, it is possible for the operator to easily select the music to be mixed.
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
音響装置（２）は、歌詞を含む楽曲の構成を示す楽曲構成情報を取得する構成情報取得部（８２）と、楽曲において歌詞に含まれる文字が再生される再生開始タイミング、及び、文字の再生が終了する再生終了タイミングを取得する歌詞情報取得部（８３）と、再生開始タイミング及び再生終了タイミングに基づいて、楽曲において歌詞が含まれる区間である歌詞区間を算出する区間算出部（８４）と、楽曲構成情報と歌詞区間とが並列に配置された画像を生成する画像生成部（８５）と、を備える。
Description
本発明は、音響装置、音響システム、画像生成方法及び画像生成プログラムに関する。
従来、再生されている楽曲に含まれる歌詞のうちの一部が再生される前に、当該一部の歌詞を音声出力して、ユーザーが楽曲を歌いやすくする端末装置が知られている（例えば特許文献１参照）。
特許文献１に記載の端末装置は、現在再生されている楽曲を特定し、特定された楽曲の歌詞データを外部サーバー等から取得する。歌詞データは、歌詞テキストデータと、歌詞テキストデータによって示される歌詞が再生される再生時刻（曲の開始時刻からの経過時間）を示す再生時刻データとを含む。端末装置は、歌詞テキストデータを複数のブロックに分割する。例えば、端末装置は、楽曲を解析した楽曲解析データに基づいて、歌詞テキストデータに含まれる歌詞のうち、楽曲に含まれる間奏と間奏との間の歌詞を１つのブロックとする。また例えば、端末装置は、歌詞データに含まれる区切りに基づいて、各ブロックを決定する。
端末装置は、ブロック化された歌詞データを音声データに変換して、各歌詞ブロックに応じた複数のスピーチを生成する。そして、端末装置は、複数のスピーチのそれぞれを、対応する歌詞ブロックの直前の間奏にて出力する。
なお、各スピーチは、対応する間奏の長さ等に応じて出力される。
特許文献１に記載の端末装置は、現在再生されている楽曲を特定し、特定された楽曲の歌詞データを外部サーバー等から取得する。歌詞データは、歌詞テキストデータと、歌詞テキストデータによって示される歌詞が再生される再生時刻（曲の開始時刻からの経過時間）を示す再生時刻データとを含む。端末装置は、歌詞テキストデータを複数のブロックに分割する。例えば、端末装置は、楽曲を解析した楽曲解析データに基づいて、歌詞テキストデータに含まれる歌詞のうち、楽曲に含まれる間奏と間奏との間の歌詞を１つのブロックとする。また例えば、端末装置は、歌詞データに含まれる区切りに基づいて、各ブロックを決定する。
端末装置は、ブロック化された歌詞データを音声データに変換して、各歌詞ブロックに応じた複数のスピーチを生成する。そして、端末装置は、複数のスピーチのそれぞれを、対応する歌詞ブロックの直前の間奏にて出力する。
なお、各スピーチは、対応する間奏の長さ等に応じて出力される。
ＤＪ（Disc Jockey）等の操作者が複数の楽曲をミックスする場合、現在再生している楽曲において歌詞が含まれる部分であるボーカル部分と、ミックスしようとしている楽曲のボーカル部分とが重ならないようにミックスすることが一般的である。通常、楽曲は、INTRO、VERSE、CHORUS及びOUTRO等の展開を有し、INTRO及びOUTROには、ボーカル部分が含まれないことが多い。このため、再生リストにおける前の楽曲のOUTROと、次の楽曲のINTROとでミックスを行うと、２つの楽曲をスムースにミックスできる。しかしながら、この場合には、２つの楽曲の略全てを再生することになってしまい、飽きやすくなったり、間延びしたりするという問題がある。
これに対し、楽曲をメドレーのように次々にミックスしようとすると、操作者は、ボーカル部分が各楽曲のどこに存在するかを記憶しておく必要がある。この場合には、楽曲数が多くなると、操作者の負担が大きくなる。
これらの問題から、楽曲においてボーカル部分の位置を操作者が把握しやすい構成が要望されていた。
これに対し、楽曲をメドレーのように次々にミックスしようとすると、操作者は、ボーカル部分が各楽曲のどこに存在するかを記憶しておく必要がある。この場合には、楽曲数が多くなると、操作者の負担が大きくなる。
これらの問題から、楽曲においてボーカル部分の位置を操作者が把握しやすい構成が要望されていた。
本発明は、上記課題の少なくとも一部を解決することを目的としたものであり、楽曲において歌詞が含まれる部分を把握しやすい音響装置、音響システム、画像生成方法及び画像生成プログラムを提供することを目的の１つとする。
本発明の第１態様に係る音響装置は、歌詞を含む楽曲の構成を示す楽曲構成情報を取得する構成情報取得部と、前記楽曲において前記歌詞に含まれる文字が再生される再生開始タイミング、及び、前記文字の再生が終了する再生終了タイミングを取得する歌詞情報取得部と、前記再生開始タイミング及び前記再生終了タイミングに基づいて、前記楽曲において前記歌詞が含まれる区間である歌詞区間を算出する区間算出部と、前記楽曲構成情報と前記歌詞区間とが並列に配置された画像を生成する画像生成部と、を備えることを特徴とする。
本発明の第２態様に係る音響システムは、上記音響装置と、前記画像を表示する表示装置と、を備えることを特徴とする。
本発明の第３態様に係る画像生成方法は、音響装置によって実施される画像生成方法であって、歌詞を含む楽曲の構成を示す楽曲構成情報を取得する構成情報取得手順と、前記楽曲において前記歌詞に含まれる文字が再生される再生開始タイミング、及び、前記文字の再生が終了する再生終了タイミングを取得する歌詞情報取得手順と、前記再生開始タイミング及び前記再生終了タイミングに基づいて、前記楽曲において前記歌詞が含まれる区間である歌詞区間を算出する算出手順と、前記楽曲構成情報と前記歌詞区間とが並列に配置された画像を生成する画像生成手順と、を含むことを特徴とする。
本発明の第４態様に係る画像生成プログラムは、情報処理装置によって実行される画像生成プログラムであって、前記情報処理装置に、歌詞を含む楽曲の構成を示す楽曲構成情報を取得する構成情報取得ステップと、前記楽曲において前記歌詞に含まれる文字が再生される再生開始タイミング、及び、前記文字の再生が終了する再生終了タイミングを取得する歌詞情報取得ステップと、前記再生開始タイミング及び前記再生終了タイミングに基づいて、前記楽曲において前記歌詞が含まれる区間である歌詞区間を算出する算出ステップと、前記楽曲構成情報と前記歌詞区間とが並列に配置された画像を生成する画像生成ステップと、を実行させることを特徴とする。
上記各態様に係る音響装置、音響システム、画像生成方法及び画像生成プログラムによれば、操作者が楽曲において歌詞が含まれる部分を把握しやすい構成を提供できる。
以下、本発明の一実施形態について、図面に基づいて説明する。
［音響システムの概略構成］
図１は、本実施形態に係る音響システム１の構成を示すブロック図である。
本実施形態に係る音響システム１は、図１に示すように、音響装置２と、音響装置２の操作画面を表示する表示装置ＤＰと、音響装置２を操作する操作装置ＤＶと、を備え、音響装置２によって、楽曲をミックスする等して楽曲を再生するものである。
以下、音響システム１の各構成について詳述する。
［音響システムの概略構成］
図１は、本実施形態に係る音響システム１の構成を示すブロック図である。
本実施形態に係る音響システム１は、図１に示すように、音響装置２と、音響装置２の操作画面を表示する表示装置ＤＰと、音響装置２を操作する操作装置ＤＶと、を備え、音響装置２によって、楽曲をミックスする等して楽曲を再生するものである。
以下、音響システム１の各構成について詳述する。
［操作画面の構成］
図２は、表示装置ＤＰによって表示される音響装置２の操作画面ＰＳの一例を示す図である。
表示装置ＤＰは、音響装置２から出力される画像を表示する。例えば、表示装置ＤＰは、図２に示す操作画面ＰＳを表示する。なお、図２に示す操作画面ＰＳは、２チャンネルミキサーの機能を有する画面であり、２デッキレイアウトの操作画面である。
操作画面ＰＳは、操作画面ＰＳにおける上部に位置するプレーヤーパネルＰＳ１と、操作画面ＰＳにおける下部に位置するブラウズパネルＰＳ２と、を含む。
図２は、表示装置ＤＰによって表示される音響装置２の操作画面ＰＳの一例を示す図である。
表示装置ＤＰは、音響装置２から出力される画像を表示する。例えば、表示装置ＤＰは、図２に示す操作画面ＰＳを表示する。なお、図２に示す操作画面ＰＳは、２チャンネルミキサーの機能を有する画面であり、２デッキレイアウトの操作画面である。
操作画面ＰＳは、操作画面ＰＳにおける上部に位置するプレーヤーパネルＰＳ１と、操作画面ＰＳにおける下部に位置するブラウズパネルＰＳ２と、を含む。
［プレーヤーパネルの構成］
プレーヤーパネルＰＳ１は、楽曲の再生状態を示す画面である。プレーヤーパネルＰＳ１は、第１デッキ画面Ｐ１、第２デッキ画面Ｐ２、ミキサー画面Ｐ３、詳細波形画面Ｐ４及び動画表示画面Ｐ５を含んで構成されている。
プレーヤーパネルＰＳ１は、楽曲の再生状態を示す画面である。プレーヤーパネルＰＳ１は、第１デッキ画面Ｐ１、第２デッキ画面Ｐ２、ミキサー画面Ｐ３、詳細波形画面Ｐ４及び動画表示画面Ｐ５を含んで構成されている。
［第１デッキ画面の構成］
第１デッキ画面Ｐ１は、第１チャンネルに入力された楽曲である第１楽曲に関連する情報を表示する他、第１楽曲の再生状態を調整する画面である。第１デッキ画面Ｐ１は、トラック情報パネルＰ１１、パフォーマンスパッドＰ１２及びジョグパネルＰ１３を含む。
第１デッキ画面Ｐ１は、第１チャンネルに入力された楽曲である第１楽曲に関連する情報を表示する他、第１楽曲の再生状態を調整する画面である。第１デッキ画面Ｐ１は、トラック情報パネルＰ１１、パフォーマンスパッドＰ１２及びジョグパネルＰ１３を含む。
図３は、第１デッキ画面Ｐ１のトラック情報パネルＰ１１を拡大して示す図である。なお、図３では、歌詞テキストＬＹ２に含まれる文字を「・」によって示している。
トラック情報パネルＰ１１は、第１楽曲に関する情報を表示する。
具体的に、トラック情報パネルＰ１１は、図３に示すように、第１楽曲のタグ情報を表示する第１パネルＰ１１１と、第１楽曲の楽曲構成情報ＣＭ、及び、第１楽曲の歌詞構成情報ＬＹを表示する第２パネルＰ１１２と、を有する。
第１パネルＰ１１１に表示されるタグ情報は、タイトル、アーティスト名、ＢＰＭ（Beat Per Minute）、キー、楽曲の終了までの残り時間及び再生経過時間を含む。
トラック情報パネルＰ１１は、第１楽曲に関する情報を表示する。
具体的に、トラック情報パネルＰ１１は、図３に示すように、第１楽曲のタグ情報を表示する第１パネルＰ１１１と、第１楽曲の楽曲構成情報ＣＭ、及び、第１楽曲の歌詞構成情報ＬＹを表示する第２パネルＰ１１２と、を有する。
第１パネルＰ１１１に表示されるタグ情報は、タイトル、アーティスト名、ＢＰＭ（Beat Per Minute）、キー、楽曲の終了までの残り時間及び再生経過時間を含む。
第２パネルＰ１１２に表示される第１楽曲の楽曲構成情報ＣＭは、波形情報ＣＭ１及び展開情報ＣＭ２を含む。
波形情報ＣＭ１は、楽曲の再生時間に応じた信号強度をグラフ化した波形であり、横軸を楽曲の再生時間とし、縦軸を楽曲の信号強度としたグラフである。第２パネルＰ１１２では、波形情報ＣＭ１は、第１楽曲の全体波形によって示される。なお、図３に示す例では、全体波形と重なるように、第１楽曲の現在の再生位置を示すマーカーＭＫと、第１楽曲に関連付けて登録されたキューの位置を示す印Ｃ１，Ｃ２と、が示されている。
展開情報ＣＭ２は、楽曲の構造を特徴付けるイントロ（INTRO）、Ａメロ（VERSE1）、Ｂメロ（VERSE2）、Ｃメロ（VERSE3）、サビ（CHORUS）、間奏（INTERLUDE）及びアウトロ（OUTRO）等の特徴区間を示す情報である。第２パネルＰ１１２では、第１楽曲の展開情報ＣＭ２は、特徴区間の名称が表記された複数のブロックＢＫが、波形情報ＣＭ１の横軸、すなわち、第１楽曲の再生時間を示す横軸に合わせて配置されることによって示されている。なお、特徴区間の呼称は、上記に限定されない。
波形情報ＣＭ１は、楽曲の再生時間に応じた信号強度をグラフ化した波形であり、横軸を楽曲の再生時間とし、縦軸を楽曲の信号強度としたグラフである。第２パネルＰ１１２では、波形情報ＣＭ１は、第１楽曲の全体波形によって示される。なお、図３に示す例では、全体波形と重なるように、第１楽曲の現在の再生位置を示すマーカーＭＫと、第１楽曲に関連付けて登録されたキューの位置を示す印Ｃ１，Ｃ２と、が示されている。
展開情報ＣＭ２は、楽曲の構造を特徴付けるイントロ（INTRO）、Ａメロ（VERSE1）、Ｂメロ（VERSE2）、Ｃメロ（VERSE3）、サビ（CHORUS）、間奏（INTERLUDE）及びアウトロ（OUTRO）等の特徴区間を示す情報である。第２パネルＰ１１２では、第１楽曲の展開情報ＣＭ２は、特徴区間の名称が表記された複数のブロックＢＫが、波形情報ＣＭ１の横軸、すなわち、第１楽曲の再生時間を示す横軸に合わせて配置されることによって示されている。なお、特徴区間の呼称は、上記に限定されない。
第２パネルＰ１１２に表示される第１楽曲の歌詞構成情報ＬＹは、図２及び図３に示すように、第１楽曲の楽曲構成情報の下側に表示される。歌詞構成情報ＬＹは、歌詞区間ＬＹ１及び歌詞テキストＬＹ２を含む。
歌詞区間ＬＹ１は、楽曲において歌詞が含まれる区間である。歌詞区間ＬＹ１は、第１楽曲の再生時間を示す横軸に沿って、波形情報ＣＭ１及び展開情報ＣＭ２と並列に表示される。すなわち、歌詞区間ＬＹ１は、第１楽曲において歌詞が含まれる区間に応じて配置される矩形領域によって示される。
歌詞テキストＬＹ２は、楽曲に含まれる歌詞を文字列にしたテキスト情報である。本実施形態では、歌詞テキストＬＹ２を構成する文字は、歌詞区間ＬＹ１の矩形領域内において、第１楽曲における当該文字の再生位置に合わせて配置される。なお、歌詞テキストＬＹ２は、歌詞区間ＬＹ１とは別に表示されてもよい。
歌詞区間ＬＹ１は、楽曲において歌詞が含まれる区間である。歌詞区間ＬＹ１は、第１楽曲の再生時間を示す横軸に沿って、波形情報ＣＭ１及び展開情報ＣＭ２と並列に表示される。すなわち、歌詞区間ＬＹ１は、第１楽曲において歌詞が含まれる区間に応じて配置される矩形領域によって示される。
歌詞テキストＬＹ２は、楽曲に含まれる歌詞を文字列にしたテキスト情報である。本実施形態では、歌詞テキストＬＹ２を構成する文字は、歌詞区間ＬＹ１の矩形領域内において、第１楽曲における当該文字の再生位置に合わせて配置される。なお、歌詞テキストＬＹ２は、歌詞区間ＬＹ１とは別に表示されてもよい。
パフォーマンスパッドＰ１２は、図２に示すように、それぞれソフトウェアキーである８つのボタンＰ１２１と、機能ボタンＰ１２２と、を有する。８つのボタンＰ１２１のいずれかが押下されると、機能ボタンＰ１２２によって切り替えられた機能が実行される。例えば、図２に示した例では、「ＨＯＴ ＣＵＥ」モードに切り替えられているので、「Ｂ」と表記されたボタンＰ１２１が押下されると、押下されたボタンＰ１２１に登録された時間である「００：３９」に、第１楽曲の再生位置が移動される。また例えば、「Ｃ」と表記されたボタンＰ１２１は、キューが登録されていないボタンであるので、ボタンＰ１２１が押下されると、現在の再生位置を示す時間がキューとしてボタンＰ１２１に登録される。
ジョグパネルＰ１３は、第１楽曲の再生速度等を調整するための操作パネルである。ジョグパネルＰ１３は、円環状のダイヤルＰ１３１が表示され、ダイヤルＰ１３１の内側には、第１楽曲の現在のＢＰＭが表示されている。図示を省略するが、ダイヤルＰ１３１には、第１楽曲のＢＰＭや再生速度を調整するための複数のボタンが設定されている。また、図示を省略するが、ダイヤルＰ１３１には、第１楽曲の現在のＢＰＭに応じた速度でダイヤルＰ１３１の周方向に沿って回転するマーカーが表示される。
［第２デッキ画面の構成］
第２デッキ画面Ｐ２は、第２チャンネルに入力された楽曲である第２楽曲に関連する情報を表示する他、第２楽曲の再生状態を調整する画面である。第２デッキ画面Ｐ２は、第１デッキ画面Ｐ１と同様に、トラック情報パネルＰ２１、パフォーマンスパッドＰ２２及びジョグパネルＰ２３を含む。
トラック情報パネルＰ２１、パフォーマンスパッドＰ２２及びジョグパネルＰ２３は、それぞれトラック情報パネルＰ１１、パフォーマンスパッドＰ１２及びジョグパネルＰ１３と同様の構成を有する。なお、パフォーマンスパッドＰ２２及びジョグパネルＰ２３は、パフォーマンスパッドＰ１２及びジョグパネルＰ１３と左右対称に配置されている。
第２デッキ画面Ｐ２は、第２チャンネルに入力された楽曲である第２楽曲に関連する情報を表示する他、第２楽曲の再生状態を調整する画面である。第２デッキ画面Ｐ２は、第１デッキ画面Ｐ１と同様に、トラック情報パネルＰ２１、パフォーマンスパッドＰ２２及びジョグパネルＰ２３を含む。
トラック情報パネルＰ２１、パフォーマンスパッドＰ２２及びジョグパネルＰ２３は、それぞれトラック情報パネルＰ１１、パフォーマンスパッドＰ１２及びジョグパネルＰ１３と同様の構成を有する。なお、パフォーマンスパッドＰ２２及びジョグパネルＰ２３は、パフォーマンスパッドＰ１２及びジョグパネルＰ１３と左右対称に配置されている。
［ミキサー画面の構成］
ミキサー画面Ｐ３は、第１楽曲及び第２楽曲をミキシングする際に利用される画面である。ミキサー画面Ｐ３は、第１楽曲を調整する第１調整部Ｐ３１と、第２楽曲を調整する第２調整部Ｐ３２と、クロスフェーダーＰ３３とを含む。
第１調整部Ｐ３１は、ミキサー画面Ｐ３の上方向に沿って配列された４つのつまみを有する。最も上側に位置するつまみは、第１チャンネルに入力される第１楽曲のレベルを調整する。下側に位置する３つのつまみは、それぞれ、第１楽曲の高周波数帯域の音量、中周波数帯域の音量及び低周波数帯域の音量を調整するつまみである。
第２調整部Ｐ３２は、第２楽曲のレベルを調整する４つのつまみを有する。４つのつまみの機能は、第１調整部Ｐ３１の４つのつまみと同様である。
クロスフェーダーＰ３３は、第１調整部Ｐ３１及び第２調整部Ｐ３２の下側に配置されている。クロスフェーダーＰ３３は、第１楽曲及び第２楽曲のボリュームレベルを調整する。
ミキサー画面Ｐ３は、第１楽曲及び第２楽曲をミキシングする際に利用される画面である。ミキサー画面Ｐ３は、第１楽曲を調整する第１調整部Ｐ３１と、第２楽曲を調整する第２調整部Ｐ３２と、クロスフェーダーＰ３３とを含む。
第１調整部Ｐ３１は、ミキサー画面Ｐ３の上方向に沿って配列された４つのつまみを有する。最も上側に位置するつまみは、第１チャンネルに入力される第１楽曲のレベルを調整する。下側に位置する３つのつまみは、それぞれ、第１楽曲の高周波数帯域の音量、中周波数帯域の音量及び低周波数帯域の音量を調整するつまみである。
第２調整部Ｐ３２は、第２楽曲のレベルを調整する４つのつまみを有する。４つのつまみの機能は、第１調整部Ｐ３１の４つのつまみと同様である。
クロスフェーダーＰ３３は、第１調整部Ｐ３１及び第２調整部Ｐ３２の下側に配置されている。クロスフェーダーＰ３３は、第１楽曲及び第２楽曲のボリュームレベルを調整する。
［詳細波形画面の構成］
詳細波形画面Ｐ４は、プレーヤーパネルＰＳ１において第１デッキ画面Ｐ１、第２デッキ画面Ｐ２及びミキサー画面Ｐ３の上側に位置する横長の画面である。
詳細波形画面Ｐ４は、第１楽曲の波形情報のうち、現在の再生位置を含む所定期間内の波形を拡大して上側に表示し、第２楽曲の波形情報のうち、現在の再生位置を含む所定期間内の波形を拡大して下側に表示する。この際、第１楽曲の波形及び第２楽曲の波形は、各楽曲の現在の再生位置が、詳細波形画面Ｐ４における左右方向の中央と一致するように表示される。
詳細波形画面Ｐ４は、プレーヤーパネルＰＳ１において第１デッキ画面Ｐ１、第２デッキ画面Ｐ２及びミキサー画面Ｐ３の上側に位置する横長の画面である。
詳細波形画面Ｐ４は、第１楽曲の波形情報のうち、現在の再生位置を含む所定期間内の波形を拡大して上側に表示し、第２楽曲の波形情報のうち、現在の再生位置を含む所定期間内の波形を拡大して下側に表示する。この際、第１楽曲の波形及び第２楽曲の波形は、各楽曲の現在の再生位置が、詳細波形画面Ｐ４における左右方向の中央と一致するように表示される。
［動画表示画面の構成］
動画表示画面Ｐ５は、詳しい図示を省略するが、第１楽曲及び第２楽曲のうち、音声出力される楽曲の歌詞等を示すアニメーションや、プロモーションビデオを表示する画面である。例えば、動画表示画面Ｐ５は、カラオケのように、楽曲の歌詞に含まれる一部の歌詞を、当該一部の歌詞の再生タイミングに合わせて表示するアニメーションを表示する。
動画表示画面Ｐ５は、詳しい図示を省略するが、第１楽曲及び第２楽曲のうち、音声出力される楽曲の歌詞等を示すアニメーションや、プロモーションビデオを表示する画面である。例えば、動画表示画面Ｐ５は、カラオケのように、楽曲の歌詞に含まれる一部の歌詞を、当該一部の歌詞の再生タイミングに合わせて表示するアニメーションを表示する。
［ブラウズパネルの構成］
ブラウズパネルＰＳ２は、後述する音響装置２に記憶された楽曲の情報、及び、音響装置２によって参照可能な外部機器に記憶された楽曲の情報を表示する画面であり、操作者が第１チャンネル又は第２チャンネルに入力される楽曲を選択する楽曲選択画面である。ブラウズパネルＰＳ２は、ツリービュー画面Ｐ６、及び、トラックリスト画面Ｐ７を有する。
ブラウズパネルＰＳ２は、後述する音響装置２に記憶された楽曲の情報、及び、音響装置２によって参照可能な外部機器に記憶された楽曲の情報を表示する画面であり、操作者が第１チャンネル又は第２チャンネルに入力される楽曲を選択する楽曲選択画面である。ブラウズパネルＰＳ２は、ツリービュー画面Ｐ６、及び、トラックリスト画面Ｐ７を有する。
［ツリービュー画面の構成］
ツリービュー画面Ｐ６は、楽曲のタグ情報に含まれるジャンル等の分類名、及び、楽曲が保存されているフォルダーやプレイリスト（操作者等によって楽曲が再生順に並べられたリスト）が、ツリー形式で表示される画面である。ツリービュー画面Ｐ６に表示されている分類名が選択されると、選択された分類名に分類される楽曲が、トラックリスト画面Ｐ７にリスト表示される。また、ツリービュー画面Ｐ６に表示されているフォルダーやプレイリストが選択されると、選択されたフォルダーやプレイリストに保存された楽曲が、トラックリスト画面Ｐ７に表形式にて表示される。
ツリービュー画面Ｐ６は、楽曲のタグ情報に含まれるジャンル等の分類名、及び、楽曲が保存されているフォルダーやプレイリスト（操作者等によって楽曲が再生順に並べられたリスト）が、ツリー形式で表示される画面である。ツリービュー画面Ｐ６に表示されている分類名が選択されると、選択された分類名に分類される楽曲が、トラックリスト画面Ｐ７にリスト表示される。また、ツリービュー画面Ｐ６に表示されているフォルダーやプレイリストが選択されると、選択されたフォルダーやプレイリストに保存された楽曲が、トラックリスト画面Ｐ７に表形式にて表示される。
［トラックリスト画面の構成］
トラックリスト画面Ｐ７は、ツリービュー画面Ｐ６にて選択された分類又はフォルダーやプレイリストに応じた楽曲に関する情報を表形式にて表示する詳細情報表示画面である。トラックリスト画面Ｐ７に表示された楽曲のうち１つの楽曲が第１デッキ画面Ｐ１にドラッグアンドドロップされると、当該１つの楽曲のオーディオデータが第１チャンネルに入力される。また、トラックリスト画面Ｐ７に表示された楽曲のうち１つの楽曲が第２デッキ画面Ｐ２にドラッグアンドドロップされると、当該１つの楽曲のオーディオデータが第２チャンネルに入力される。
トラックリスト画面Ｐ７は、ツリービュー画面Ｐ６にて選択された分類又はフォルダーやプレイリストに応じた楽曲に関する情報を表形式にて表示する詳細情報表示画面である。トラックリスト画面Ｐ７に表示された楽曲のうち１つの楽曲が第１デッキ画面Ｐ１にドラッグアンドドロップされると、当該１つの楽曲のオーディオデータが第１チャンネルに入力される。また、トラックリスト画面Ｐ７に表示された楽曲のうち１つの楽曲が第２デッキ画面Ｐ２にドラッグアンドドロップされると、当該１つの楽曲のオーディオデータが第２チャンネルに入力される。
トラックリスト画面Ｐ７には、左から順に、楽曲のプレビュー画面Ｐ７１と、楽曲の詳細情報Ｐ７２とが表示される。
楽曲の詳細情報Ｐ７２には、それぞれ該当する楽曲のタグ情報が表示される。詳細情報Ｐ７２に表示されるタグ情報は、それぞれ該当する楽曲のＢＰＭ、アートワーク、タイトル、アーティスト名、アルバム名、キー、ＤＪプレイ回数及びジャンルを含む。
楽曲の詳細情報Ｐ７２には、それぞれ該当する楽曲のタグ情報が表示される。詳細情報Ｐ７２に表示されるタグ情報は、それぞれ該当する楽曲のＢＰＭ、アートワーク、タイトル、アーティスト名、アルバム名、キー、ＤＪプレイ回数及びジャンルを含む。
図４は、プレビュー画面Ｐ７１の一例を拡大して示す図である。
プレビュー画面Ｐ７１には、図４に示すように、該当する楽曲の波形情報ＣＭ１及び歌詞区間ＬＹ１が、再生時間を示す横軸に直交する縦軸に沿って並列に表示される。
プレビュー画面Ｐ７１に表示される波形情報ＣＭ１は、第１デッキ画面Ｐ１又は第２デッキ画面Ｐ２にて表示される楽曲の全体波形と同様の全体波形である。楽曲にキューが設定されている場合には、全体波形と併せて、キューの位置を示す印Ｃ１～Ｃ３が表示される。
プレビュー画面Ｐ７１には、図４に示すように、該当する楽曲の波形情報ＣＭ１及び歌詞区間ＬＹ１が、再生時間を示す横軸に直交する縦軸に沿って並列に表示される。
プレビュー画面Ｐ７１に表示される波形情報ＣＭ１は、第１デッキ画面Ｐ１又は第２デッキ画面Ｐ２にて表示される楽曲の全体波形と同様の全体波形である。楽曲にキューが設定されている場合には、全体波形と併せて、キューの位置を示す印Ｃ１～Ｃ３が表示される。
プレビュー画面Ｐ７１に表示される歌詞区間ＬＹ１は、第１デッキ画面Ｐ１又は第２デッキ画面Ｐ２にて表示される歌詞区間ＬＹ１と同様の情報である。プレビュー画面Ｐ７１において歌詞区間ＬＹ１は、波形情報ＣＭ１の下側に表示される。
なお、プレビュー画面Ｐ７１では、波形情報ＣＭ１に代えて、或いは、加えて、上記した展開情報ＣＭ２を表示してもよい。また、歌詞区間ＬＹ１と併せて、歌詞テキストＬＹ２を、プレビュー画面Ｐ７１にて表示してもよい。更に、トラックリスト画面Ｐ７に表示された楽曲のうち１つの楽曲が選択されると、波形情報ＣＭ１及び歌詞区間ＬＹ１が拡大表示されてもよい。この場合、展開情報ＣＭ２及び歌詞テキストＬＹ２のうち、少なくとも１つを、波形情報ＣＭ１及び歌詞区間ＬＹ１とともに表示してもよい。
なお、プレビュー画面Ｐ７１では、波形情報ＣＭ１に代えて、或いは、加えて、上記した展開情報ＣＭ２を表示してもよい。また、歌詞区間ＬＹ１と併せて、歌詞テキストＬＹ２を、プレビュー画面Ｐ７１にて表示してもよい。更に、トラックリスト画面Ｐ７に表示された楽曲のうち１つの楽曲が選択されると、波形情報ＣＭ１及び歌詞区間ＬＹ１が拡大表示されてもよい。この場合、展開情報ＣＭ２及び歌詞テキストＬＹ２のうち、少なくとも１つを、波形情報ＣＭ１及び歌詞区間ＬＹ１とともに表示してもよい。
［音響装置の構成］
音響装置２は、図１に示したように、操作装置ＤＶ及び表示装置ＤＰと接続される他、ネットワークＮＴを介して構成情報サーバーＳＶ１及び歌詞情報サーバーＳＶ２と通信可能である。音響装置２は、例えばＣＰＵ（Central Processing Unit）等の演算処理装置と、ＨＤＤ（Hard Disk Drive）及びＳＳＤ（Solid State Drive）等の記憶装置とを備える情報処理装置である。すなわち、音響装置２は、記憶装置に記憶されたプログラムをＣＰＵが実行し、音響装置２に接続されたキーボード及びポインティングデバイス等の操作装置ＤＶから入力される操作信号に応じて動作する。換言すると、ＣＰＵが、記憶装置に記憶されたプログラムであって後述する画像生成プログラムを含む音響アプリケーションを実行することによって、情報処理装置は、音響装置２として機能する。
なお、構成情報サーバーＳＶ１及び歌詞情報サーバーＳＶ２については、後に詳述する。また、楽曲のオーディオデータ、及び、オーディオデータに埋め込まれたタグ情報を合わせて楽曲情報と称する。
音響装置２は、図１に示したように、操作装置ＤＶ及び表示装置ＤＰと接続される他、ネットワークＮＴを介して構成情報サーバーＳＶ１及び歌詞情報サーバーＳＶ２と通信可能である。音響装置２は、例えばＣＰＵ（Central Processing Unit）等の演算処理装置と、ＨＤＤ（Hard Disk Drive）及びＳＳＤ（Solid State Drive）等の記憶装置とを備える情報処理装置である。すなわち、音響装置２は、記憶装置に記憶されたプログラムをＣＰＵが実行し、音響装置２に接続されたキーボード及びポインティングデバイス等の操作装置ＤＶから入力される操作信号に応じて動作する。換言すると、ＣＰＵが、記憶装置に記憶されたプログラムであって後述する画像生成プログラムを含む音響アプリケーションを実行することによって、情報処理装置は、音響装置２として機能する。
なお、構成情報サーバーＳＶ１及び歌詞情報サーバーＳＶ２については、後に詳述する。また、楽曲のオーディオデータ、及び、オーディオデータに埋め込まれたタグ情報を合わせて楽曲情報と称する。
音響装置２は、入力部３、出力部４、記憶部５、通信部６、メモリー７及び制御部８を備える。
入力部３及び出力部４は、外部機器と接続可能な端子を有する。
入力部３は、外部機器から入力される情報を制御部８に出力する。入力部３と接続される外部機器としては、上記操作装置ＤＶや、楽曲データを記憶した記憶装置（図示省略）が例示される。入力部３を構成する端子としては、ＵＳＢ（Universal Serial Bus）端子が例示される。
出力部４は、制御部８から入力される情報を外部機器に出力する。出力部４と接続される外部機器としては、上記表示装置ＤＰや、スピーカー及びヘッドフォンが例示される。出力部４を構成する端子としては、ＵＳＢ端子の他、映像出力端子及び音声出力端子が例示される。
入力部３及び出力部４は、外部機器と接続可能な端子を有する。
入力部３は、外部機器から入力される情報を制御部８に出力する。入力部３と接続される外部機器としては、上記操作装置ＤＶや、楽曲データを記憶した記憶装置（図示省略）が例示される。入力部３を構成する端子としては、ＵＳＢ（Universal Serial Bus）端子が例示される。
出力部４は、制御部８から入力される情報を外部機器に出力する。出力部４と接続される外部機器としては、上記表示装置ＤＰや、スピーカー及びヘッドフォンが例示される。出力部４を構成する端子としては、ＵＳＢ端子の他、映像出力端子及び音声出力端子が例示される。
記憶部５は、上記記憶装置によって構成され、音響装置２を動作させるプログラム及びデータを記憶している。例えば、記憶部５は、後述する画像生成処理を実施させる画像生成プログラムを含む音響アプリケーションを記憶している他、上記ブラウズパネルＰＳ２のトラックリスト画面Ｐ７（図２参照）に表示される複数の楽曲データと、当該楽曲に関連付けられたキュー等の各種データとを記憶している。
通信部６は、制御部８による制御の下、構成情報サーバーＳＶ１と通信して、構成情報サーバーＳＶ１から楽曲構成情報を取得する。通信部６は、制御部８による制御の下、歌詞情報サーバーＳＶ２と通信して、歌詞情報サーバーＳＶ２から歌詞情報を取得する。通信部６は、取得された楽曲構成情報及び歌詞情報を、制御部８に出力する。
なお、構成情報サーバーＳＶ１は、上記した楽曲構成情報ＣＭを提供するサーバーである。構成情報サーバーＳＶ１は、楽曲を特定するための情報（タイトル等）を音響装置２から受信すると、該当する楽曲の楽曲構成情報ＣＭを音響装置２に送信する。
また、歌詞情報サーバーＳＶ２は、上記した歌詞情報を提供するサーバーである。歌詞情報サーバーＳＶ２は、楽曲を特定するための情報を音響装置２から受信すると、該当する楽曲の歌詞情報を音響装置２に送信する。
なお、構成情報サーバーＳＶ１は、上記した楽曲構成情報ＣＭを提供するサーバーである。構成情報サーバーＳＶ１は、楽曲を特定するための情報（タイトル等）を音響装置２から受信すると、該当する楽曲の楽曲構成情報ＣＭを音響装置２に送信する。
また、歌詞情報サーバーＳＶ２は、上記した歌詞情報を提供するサーバーである。歌詞情報サーバーＳＶ２は、楽曲を特定するための情報を音響装置２から受信すると、該当する楽曲の歌詞情報を音響装置２に送信する。
メモリー７は、ＣＰＵ等によって構成される制御部８のワークメモリーである。例えば、メモリー７は、記憶部５から読み出されたプログラムの少なくとも一部を記憶する。また例えば、メモリー７は、記憶部５から読み出された楽曲情報や、通信部６によって取得された各種情報を記憶する。
［制御部の構成］
図５は、制御部８の機能的な構成を示すブロック図である。
制御部８は、上記ＣＰＵ等によって構成され、音響装置２の動作を制御する。制御部８は、図５に示すように、ＣＰＵが記憶部５に記憶されたプログラムを実行することによってそれぞれ実現される、楽曲取得部８１、構成情報取得部８２、歌詞情報取得部８３、区間算出部８４、画像生成部８５、画像出力部８６及びミックス部８７を含む。
図５は、制御部８の機能的な構成を示すブロック図である。
制御部８は、上記ＣＰＵ等によって構成され、音響装置２の動作を制御する。制御部８は、図５に示すように、ＣＰＵが記憶部５に記憶されたプログラムを実行することによってそれぞれ実現される、楽曲取得部８１、構成情報取得部８２、歌詞情報取得部８３、区間算出部８４、画像生成部８５、画像出力部８６及びミックス部８７を含む。
［楽曲取得部の構成］
楽曲取得部８１は、記憶部５に記憶された楽曲情報、又は、入力部３に接続されたＵＳＢメモリー等の外部機器に記憶された楽曲情報を取得する。
楽曲取得部８１は、記憶部５に記憶された楽曲情報、又は、入力部３に接続されたＵＳＢメモリー等の外部機器に記憶された楽曲情報を取得する。
［構成情報取得部の構成］
構成情報取得部８２は、通信部６によって構成情報サーバーＳＶ１と通信し、楽曲取得部８１により取得された楽曲情報に応じた楽曲構成情報ＣＭを取得する。構成情報取得部８２は、取得された楽曲構成情報ＣＭを、楽曲情報に関連付けて記憶部５に記憶させる。
なお、楽曲構成情報ＣＭは、音響装置２が、楽曲情報のオーディオデータを解析することによって取得してもよい。換言すると、音響装置２は、オーディオデータを解析して楽曲構成情報を取得する解析部を備えていてもよい。オーディオデータの解析については、公知の技術を適用できる。
構成情報取得部８２は、通信部６によって構成情報サーバーＳＶ１と通信し、楽曲取得部８１により取得された楽曲情報に応じた楽曲構成情報ＣＭを取得する。構成情報取得部８２は、取得された楽曲構成情報ＣＭを、楽曲情報に関連付けて記憶部５に記憶させる。
なお、楽曲構成情報ＣＭは、音響装置２が、楽曲情報のオーディオデータを解析することによって取得してもよい。換言すると、音響装置２は、オーディオデータを解析して楽曲構成情報を取得する解析部を備えていてもよい。オーディオデータの解析については、公知の技術を適用できる。
［歌詞情報取得部の構成］
歌詞情報取得部８３は、通信部６によって歌詞情報サーバーＳＶ２と通信し、楽曲取得部８１によって取得された楽曲情報に応じた歌詞情報を取得する。例えば、歌詞情報取得部８３は、楽曲情報のタグ情報に含まれる楽曲のタイトル及びアーティスト名に対応する歌詞情報を取得する。歌詞情報取得部８３は、取得した歌詞情報を、楽曲情報に関連付けて記憶部５に記憶させる。
歌詞情報取得部８３は、通信部６によって歌詞情報サーバーＳＶ２と通信し、楽曲取得部８１によって取得された楽曲情報に応じた歌詞情報を取得する。例えば、歌詞情報取得部８３は、楽曲情報のタグ情報に含まれる楽曲のタイトル及びアーティスト名に対応する歌詞情報を取得する。歌詞情報取得部８３は、取得した歌詞情報を、楽曲情報に関連付けて記憶部５に記憶させる。
［歌詞情報の内容］
歌詞情報は、上記歌詞テキストと、歌詞テキストに含まれる文字（又は単語）の再生開始タイミング及び再生終了タイミングと、を含む。これら再生開始タイミング及び再生終了タイミングは、楽曲における文字の再生位置を示す再生位置情報であるタイムスタンプの１つである。
歌詞情報は、上記歌詞テキストと、歌詞テキストに含まれる文字（又は単語）の再生開始タイミング及び再生終了タイミングと、を含む。これら再生開始タイミング及び再生終了タイミングは、楽曲における文字の再生位置を示す再生位置情報であるタイムスタンプの１つである。
図６は、ＪＳＯＮ（JavaScript Object Notation（JavaScriptは登録商標））フォーマットにて記載された歌詞情報の構成を説明する図である。具体的に、図６は、タイトル名「シルエット・ロマンス」（作詞：来生えつこ、作曲：来生たかお、唄：大橋純子、タイトル：青春歌年鑑１９８２、日本コロンビア）の歌詞情報の一部を示す図である。
例えば、図６に示すように、ＪＳＯＮフォーマットにて記載された歌詞情報の第１６行には、歌詞テキストの一部である部分テキストＬＴ１が記載されている。図６の例では、部分テキストＬＴ１には「恋する女は 夢見たがりの」が記載されている。また、歌詞情報の第１１０行には、次の部分テキストＬＴ２が記載されている。
第１０７行には、部分テキストＬＴ１に記載された歌詞テキストの再生開始タイミングを示すタイミング情報ＳＴ１が記載されている。図６の例では、タイミング情報ＳＴ１には「43532」（msec）が記載されている。タイミング情報ＳＴ１は、図６に示す楽曲の歌詞における最初の文字の再生開始タイミングを示すことから、楽曲における歌詞の再生開始タイミングということもできる。
例えば、図６に示すように、ＪＳＯＮフォーマットにて記載された歌詞情報の第１６行には、歌詞テキストの一部である部分テキストＬＴ１が記載されている。図６の例では、部分テキストＬＴ１には「恋する女は 夢見たがりの」が記載されている。また、歌詞情報の第１１０行には、次の部分テキストＬＴ２が記載されている。
第１０７行には、部分テキストＬＴ１に記載された歌詞テキストの再生開始タイミングを示すタイミング情報ＳＴ１が記載されている。図６の例では、タイミング情報ＳＴ１には「43532」（msec）が記載されている。タイミング情報ＳＴ１は、図６に示す楽曲の歌詞における最初の文字の再生開始タイミングを示すことから、楽曲における歌詞の再生開始タイミングということもできる。
上記歌詞情報の第２４～第３８行には、部分テキストＬＴ１に含まれる各文字の再生開始タイミング及び再生終了タイミングを示す文字期間情報Ｗが示されている。具体的に、第２４～第２８行には、１文字分の文字期間情報Ｗ（Ｗ１）が記載され、第２９～第３３行には、次の１文字分の文字期間情報Ｗ（Ｗ２）が記載され、第３４～第３８行には、更に次の１文字分の文字期間情報Ｗ（Ｗ３）が記載されている。
各文字期間情報Ｗ１～Ｗ３において、２行目に記載された数字は、部分テキストＬＴ１に記載の文字列における対象文字の位置を示す文字番号を示している。
図６の例では、文字期間情報Ｗ１の文字番号は、部分テキストＬＴ１における１番目の文字である「恋」を示し、文字期間情報Ｗ２の文字番号は、２番目の文字である「す」を示し、文字期間情報Ｗ３の文字番号は、３番目の文字である「る」を示している。
図６の例では、文字期間情報Ｗ１の文字番号は、部分テキストＬＴ１における１番目の文字である「恋」を示し、文字期間情報Ｗ２の文字番号は、２番目の文字である「す」を示し、文字期間情報Ｗ３の文字番号は、３番目の文字である「る」を示している。
それぞれの文字期間情報Ｗ１～Ｗ３において、３行目に記載された数字は、文字番号によって示される文字の再生開始タイミングを示している。また、それぞれの文字期間情報Ｗ１～Ｗ３において、５行目に記載された数字は、文字番号によって示される文字の再生終了タイミングを示している。
図６の例では、文字期間情報Ｗ１における３行目に記載された「0」は、文字期間情報Ｗ１の文字番号によって示される「恋」の再生開始タイミングを示している。すなわち、図６の例では、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「0」（msec）を加算した期間の経過後に、「恋」の再生が開始されることを示している。
また、文字期間情報Ｗ１における５行目に記載された「882」は、文字期間情報Ｗ１の文字番号によって示される「恋」の再生終了タイミングを示している。すなわち、図６の例では、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「0」（msec）を加算し、更に「882」（msec）を加算した期間の経過後に、「恋」の再生が終了されることを示している。
図６の例では、文字期間情報Ｗ１における３行目に記載された「0」は、文字期間情報Ｗ１の文字番号によって示される「恋」の再生開始タイミングを示している。すなわち、図６の例では、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「0」（msec）を加算した期間の経過後に、「恋」の再生が開始されることを示している。
また、文字期間情報Ｗ１における５行目に記載された「882」は、文字期間情報Ｗ１の文字番号によって示される「恋」の再生終了タイミングを示している。すなわち、図６の例では、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「0」（msec）を加算し、更に「882」（msec）を加算した期間の経過後に、「恋」の再生が終了されることを示している。
同様に、文字期間情報Ｗ２における３行目に記載された「882」は、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「882」（msec）を加算した期間の経過後に、文字期間情報Ｗ２の文字番号によって示される「す」の再生が開始されることを示している。
文字期間情報Ｗ２における５行目に記載された「1393」は、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「882」（msec）を加算し、更に「1393」（msec）を加算した期間の経過後に、「す」の再生が終了されることを示している。
文字期間情報Ｗ２における５行目に記載された「1393」は、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「882」（msec）を加算し、更に「1393」（msec）を加算した期間の経過後に、「す」の再生が終了されることを示している。
同様に、文字期間情報Ｗ３における３行目に記載された「1393」は、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「1393」（msec）を加算した期間の経過後に、文字期間情報Ｗ３の文字番号によって示される「る」の再生が開始されることを示している。
文字期間情報Ｗ３における５行目に記載された「2182」は、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「1393」（msec）を加算し、更に「2182」（msec）を加算した期間の経過後に、「る」の再生が終了されることを示している。
このように、歌詞情報から、楽曲の歌詞に含まれる文字の再生開始タイミング及び再生終了タイミングを取得できる。
文字期間情報Ｗ３における５行目に記載された「2182」は、楽曲の再生開始から、タイミング情報ＳＴ１に記載の再生開始タイミングに「1393」（msec）を加算し、更に「2182」（msec）を加算した期間の経過後に、「る」の再生が終了されることを示している。
このように、歌詞情報から、楽曲の歌詞に含まれる文字の再生開始タイミング及び再生終了タイミングを取得できる。
［区間算出部の構成］
区間算出部８４は、歌詞情報取得部８３によって取得された歌詞情報に基づいて、楽曲において歌詞が含まれる区間（歌詞区間）を算出する。具体的に、区間算出部８４は、歌詞情報に含まれる各文字期間情報Ｗの再生開始タイミング及び再生終了タイミングに基づいて歌詞区間を算出する。そして、区間算出部８４は、算出された歌詞区間を楽曲情報に関連付けて記憶部５に記憶させる。
例えば、区間算出部８４は、１つの文字期間情報Ｗにおける再生終了タイミングと、次の文字期間情報Ｗにおける再生開始タイミングとが一致する場合、或いは、これら再生終了タイミング及び再生開始タイミングの差が小さいと判断できる場合、２つの文字期間情報Ｗによって示される２つの文字は、１つの文字期間情報Ｗにおける再生開始タイミングから次の文字期間情報Ｗにおける再生終了タイミングまでの区間に連続して再生されると判定する。そして、区間算出部８４は、楽曲全体において、連続して歌詞の一部が再生される区間を歌詞区間として算出する。
区間算出部８４は、歌詞情報取得部８３によって取得された歌詞情報に基づいて、楽曲において歌詞が含まれる区間（歌詞区間）を算出する。具体的に、区間算出部８４は、歌詞情報に含まれる各文字期間情報Ｗの再生開始タイミング及び再生終了タイミングに基づいて歌詞区間を算出する。そして、区間算出部８４は、算出された歌詞区間を楽曲情報に関連付けて記憶部５に記憶させる。
例えば、区間算出部８４は、１つの文字期間情報Ｗにおける再生終了タイミングと、次の文字期間情報Ｗにおける再生開始タイミングとが一致する場合、或いは、これら再生終了タイミング及び再生開始タイミングの差が小さいと判断できる場合、２つの文字期間情報Ｗによって示される２つの文字は、１つの文字期間情報Ｗにおける再生開始タイミングから次の文字期間情報Ｗにおける再生終了タイミングまでの区間に連続して再生されると判定する。そして、区間算出部８４は、楽曲全体において、連続して歌詞の一部が再生される区間を歌詞区間として算出する。
［画像生成部の構成］
画像生成部８５は、表示装置ＤＰに出力する画像を生成する。
例えば、画像生成部８５は、上記した操作画面ＰＳの画像を生成する。この場合、画像生成部８５は、楽曲取得部８１によって取得されたタグ情報、構成情報取得部８２によって取得された楽曲構成情報、及び、歌詞情報取得部８３によって取得された歌詞情報と、区間算出部８４によって算出された歌詞区間とに基づいて、図２及び図３に示した第１デッキ画面Ｐ１のトラック情報パネルＰ１１の画像、及び、図２に示した第２デッキ画面Ｐ２のトラック情報パネルＰ２１の画像を生成する。
画像生成部８５は、表示装置ＤＰに出力する画像を生成する。
例えば、画像生成部８５は、上記した操作画面ＰＳの画像を生成する。この場合、画像生成部８５は、楽曲取得部８１によって取得されたタグ情報、構成情報取得部８２によって取得された楽曲構成情報、及び、歌詞情報取得部８３によって取得された歌詞情報と、区間算出部８４によって算出された歌詞区間とに基づいて、図２及び図３に示した第１デッキ画面Ｐ１のトラック情報パネルＰ１１の画像、及び、図２に示した第２デッキ画面Ｐ２のトラック情報パネルＰ２１の画像を生成する。
また、画像生成部８５は、ツリービュー画面Ｐ６にて選択された分類に応じた楽曲、選択されたフォルダーに保存された楽曲、又は、選択されたプレイリストに設定された楽曲について、楽曲取得部８１によって取得されたタグ情報と、構成情報取得部８２によって取得された楽曲構成情報のうちの波形情報と、歌詞情報取得部８３によって取得された歌詞情報に基づいて区間算出部８４によって算出された歌詞区間とに基づいて、図２に示したブラウズパネルＰＳ２のトラックリスト画面Ｐ７の画像を生成する。
［画像出力部の構成］
画像出力部８６は、画像生成部８５によって生成された画像を、出力部４を介して表示装置ＤＰに出力する。これにより、例えば表示装置ＤＰは、操作画面ＰＳを表示する。
画像出力部８６は、画像生成部８５によって生成された画像を、出力部４を介して表示装置ＤＰに出力する。これにより、例えば表示装置ＤＰは、操作画面ＰＳを表示する。
［ミックス部の構成］
ミックス部８７は、操作画面ＰＳのミキサー画面Ｐ３に対する操作者による操作に応じて、再生中の楽曲をミックスする。詳述すると、ミックス部８７は、操作者による操作に応じて操作装置ＤＶから入力される操作情報に基づいて、第１チャンネルに入力されている第１楽曲と、第２チャンネルに入力されている第２楽曲とをミックスする。
ミックス部８７は、操作画面ＰＳのミキサー画面Ｐ３に対する操作者による操作に応じて、再生中の楽曲をミックスする。詳述すると、ミックス部８７は、操作者による操作に応じて操作装置ＤＶから入力される操作情報に基づいて、第１チャンネルに入力されている第１楽曲と、第２チャンネルに入力されている第２楽曲とをミックスする。
図７は、楽曲のミックスイメージを示す模式図である。
例えば、図７に示すように、操作者が、楽曲ＡのCHORUSの後に、楽曲Ｂ、楽曲Ｃ及び楽曲Ｄのうち、ミックスしようとする楽曲であるミックス楽曲のVERSEを接続して、楽曲Ａからミックス楽曲に歌詞が連続して再生されるように、楽曲Ａとミックス楽曲とをミックスすることを意図したとする。
楽曲Ｂ及び楽曲Ｄでは、INTROに歌詞区間ＬＹ１が存在する。このため、楽曲ＡのCHORUSに、楽曲Ｂ又は楽曲ＤのINTROの次に続くVERSEを繋ぐと、歌詞の途中からミックス楽曲が唐突に再生されることから、聴衆が違和感を抱きやすい。
一方、楽曲Ｃでは、INTROに歌詞区間ＬＹ１が含まれず、INTROの次に続くVERSEから歌詞の再生が始まる。このため、楽曲ＡのCHORUSの後に、楽曲ＣのINTROに続くVERSEを接続すると、楽曲Ａに楽曲Ｂを違和感なく接続できる。
上記操作画面ＰＳの第１デッキ画面Ｐ１、第２デッキ画面Ｐ２及びプレビュー画面Ｐ７１には、図２に示したように、各楽曲の波形情報ＣＭ１と歌詞区間ＬＹ１とが表示される。これにより、操作者がある楽曲にミックス楽曲をミックスしやすくすることができる他、ミックス楽曲の選曲を実施しやすくすることができる。
例えば、図７に示すように、操作者が、楽曲ＡのCHORUSの後に、楽曲Ｂ、楽曲Ｃ及び楽曲Ｄのうち、ミックスしようとする楽曲であるミックス楽曲のVERSEを接続して、楽曲Ａからミックス楽曲に歌詞が連続して再生されるように、楽曲Ａとミックス楽曲とをミックスすることを意図したとする。
楽曲Ｂ及び楽曲Ｄでは、INTROに歌詞区間ＬＹ１が存在する。このため、楽曲ＡのCHORUSに、楽曲Ｂ又は楽曲ＤのINTROの次に続くVERSEを繋ぐと、歌詞の途中からミックス楽曲が唐突に再生されることから、聴衆が違和感を抱きやすい。
一方、楽曲Ｃでは、INTROに歌詞区間ＬＹ１が含まれず、INTROの次に続くVERSEから歌詞の再生が始まる。このため、楽曲ＡのCHORUSの後に、楽曲ＣのINTROに続くVERSEを接続すると、楽曲Ａに楽曲Ｂを違和感なく接続できる。
上記操作画面ＰＳの第１デッキ画面Ｐ１、第２デッキ画面Ｐ２及びプレビュー画面Ｐ７１には、図２に示したように、各楽曲の波形情報ＣＭ１と歌詞区間ＬＹ１とが表示される。これにより、操作者がある楽曲にミックス楽曲をミックスしやすくすることができる他、ミックス楽曲の選曲を実施しやすくすることができる。
［画像生成処理］
図８は、画像生成処理を示すフローチャートである。
音響装置２は、記憶部５に記憶された音響アプリケーションに含まれる画像生成プログラムを制御部８が実行することによって、図８に示す画像生成処理を実行し、上記した操作画面ＰＳを生成する。
画像生成処理では、まず、楽曲取得部８１が、上記のように、記憶部５等に記憶された楽曲情報を取得する（ステップＳ１）。
次に、構成情報取得部８２が、取得された楽曲情報に対応する楽曲構成情報を取得する（ステップＳ２）。また、歌詞情報取得部８３が、取得された楽曲情報に対応する歌詞情報を取得する（ステップＳ３）。なお、ステップＳ２とステップＳ３とは、同時に実施されてもよく、ステップＳ２，Ｓ３のうち一方が他方より先に実施されてもよい。
図８は、画像生成処理を示すフローチャートである。
音響装置２は、記憶部５に記憶された音響アプリケーションに含まれる画像生成プログラムを制御部８が実行することによって、図８に示す画像生成処理を実行し、上記した操作画面ＰＳを生成する。
画像生成処理では、まず、楽曲取得部８１が、上記のように、記憶部５等に記憶された楽曲情報を取得する（ステップＳ１）。
次に、構成情報取得部８２が、取得された楽曲情報に対応する楽曲構成情報を取得する（ステップＳ２）。また、歌詞情報取得部８３が、取得された楽曲情報に対応する歌詞情報を取得する（ステップＳ３）。なお、ステップＳ２とステップＳ３とは、同時に実施されてもよく、ステップＳ２，Ｓ３のうち一方が他方より先に実施されてもよい。
ステップＳ３の後、区間算出部８４が、取得された歌詞情報に基づいて、それぞれの楽曲の歌詞区間を算出する（ステップＳ４）。
そして、画像生成部８５が、それぞれ取得された楽曲情報、楽曲構成情報及び歌詞情報と、算出された歌詞区間とに基づいて、操作画面ＰＳの画像を生成し（ステップＳ５）する。これにより、画像生成処理を終了する。
このような画像生成処理が実施されて生成された操作画面ＰＳの画像は、画像出力部８６によって表示装置ＤＰに出力され、操作画面ＰＳが表示装置ＤＰに表示される。
そして、画像生成部８５が、それぞれ取得された楽曲情報、楽曲構成情報及び歌詞情報と、算出された歌詞区間とに基づいて、操作画面ＰＳの画像を生成し（ステップＳ５）する。これにより、画像生成処理を終了する。
このような画像生成処理が実施されて生成された操作画面ＰＳの画像は、画像出力部８６によって表示装置ＤＰに出力され、操作画面ＰＳが表示装置ＤＰに表示される。
［実施形態の効果］
以上説明した本実施形態に係る音響システム１は、以下の効果を奏することができる。
音響システム１は、音響装置２と、音響装置２によって生成された画像を表示する表示装置ＤＰと、を備える。
音響装置２は、構成情報取得部８２、歌詞情報取得部８３、区間算出部８４及び画像生成部８５を備える。構成情報取得部８２は、歌詞を含む楽曲の構成を示す楽曲構成情報ＣＭを取得する。歌詞情報取得部８３は、楽曲において歌詞に含まれる文字が再生される再生開始タイミング、及び、当該文字の再生が終了する再生終了タイミングを取得する。区間算出部８４は、それぞれ取得された再生開始タイミング及び再生終了タイミングに基づいて、楽曲において歌詞が含まれる区間である歌詞区間を算出する。画像生成部８５は、楽曲構成情報ＣＭと歌詞区間ＬＹ１とが並列に配置された画像、例えば操作画面ＰＳの画像を生成する。
以上説明した本実施形態に係る音響システム１は、以下の効果を奏することができる。
音響システム１は、音響装置２と、音響装置２によって生成された画像を表示する表示装置ＤＰと、を備える。
音響装置２は、構成情報取得部８２、歌詞情報取得部８３、区間算出部８４及び画像生成部８５を備える。構成情報取得部８２は、歌詞を含む楽曲の構成を示す楽曲構成情報ＣＭを取得する。歌詞情報取得部８３は、楽曲において歌詞に含まれる文字が再生される再生開始タイミング、及び、当該文字の再生が終了する再生終了タイミングを取得する。区間算出部８４は、それぞれ取得された再生開始タイミング及び再生終了タイミングに基づいて、楽曲において歌詞が含まれる区間である歌詞区間を算出する。画像生成部８５は、楽曲構成情報ＣＭと歌詞区間ＬＹ１とが並列に配置された画像、例えば操作画面ＰＳの画像を生成する。
このような構成によれば、画像生成部８５によって生成された画像、例えば操作画面ＰＳが表示され、操作者が当該画像を視認することによって、楽曲における歌詞区間を操作者に把握させやすくすることができる。従って、上記のように、操作者がある楽曲にミックス楽曲をミックスしやすくすることができる他、ミックス楽曲の選曲を実施しやすくすることができる。
画像生成部８５は、操作画面ＰＳのブラウズパネルＰＳ２に含まれるトラックリスト画面Ｐ７の画像として、楽曲ごとに楽曲構成情報ＣＭの波形情報ＣＭ１と歌詞区間ＬＹ１とが並列に配置された画像を生成する。
このような構成によれば、トラックリスト画面Ｐ７に、複数の楽曲のタグ情報とともに、波形情報ＣＭ１及び歌詞区間ＬＹ１が楽曲毎に表示される。従って、操作者がミックスする楽曲を選択しやすくすることができる。
このような構成によれば、トラックリスト画面Ｐ７に、複数の楽曲のタグ情報とともに、波形情報ＣＭ１及び歌詞区間ＬＹ１が楽曲毎に表示される。従って、操作者がミックスする楽曲を選択しやすくすることができる。
歌詞情報取得部８３は、楽曲に含まれる歌詞を示す歌詞テキストを取得する。画像生成部８５は、歌詞区間ＬＹ１とともに、歌詞テキストによって示される歌詞が配置された操作画面ＰＳの画像を生成する。本実施形態では、操作画面ＰＳに含まれる第１デッキ画面Ｐ１及び第２デッキ画面Ｐ２に、歌詞テキストＬＹ２が表示される。
このような構成によれば、操作画面ＰＳにて、第１チャンネル及び第２チャンネルに入力されている第１楽曲及び第２楽曲の歌詞を確認できる。従って、歌詞の内容等に応じて、ミックスする楽曲を選曲しやすくすることができる。
このような構成によれば、操作画面ＰＳにて、第１チャンネル及び第２チャンネルに入力されている第１楽曲及び第２楽曲の歌詞を確認できる。従って、歌詞の内容等に応じて、ミックスする楽曲を選曲しやすくすることができる。
楽曲構成情報ＣＭは、楽曲の構造を特徴付ける複数の特徴区間を示す展開情報ＣＭ２を含む。画像生成部８５は、展開情報ＣＭ２と歌詞区間ＬＹ１とが並列に配置された操作画面ＰＳの画像を生成する。
このような構成によれば、操作画面ＰＳを確認することによって、歌詞区間と楽曲の展開とを把握しやすくすることができるので、楽曲を試聴することなく楽曲の内容や雰囲気をイメージできる。従って、操作者が、ミックスする楽曲を選曲しやすくすることができる。
このような構成によれば、操作画面ＰＳを確認することによって、歌詞区間と楽曲の展開とを把握しやすくすることができるので、楽曲を試聴することなく楽曲の内容や雰囲気をイメージできる。従って、操作者が、ミックスする楽曲を選曲しやすくすることができる。
楽曲構成情報ＣＭは、楽曲の再生時間に応じた信号強度の波形を示す波形情報ＣＭ１を含む。画像生成部８５は、波形情報ＣＭ１と歌詞区間ＬＹ１とが並列に配置された操作画面ＰＳの画像を生成する。
このような構成によれば、操作画面ＰＳを確認することによって、歌詞区間と楽曲の抑揚とを把握できるので、楽曲を試聴することなく、楽曲の内容や雰囲気を把握できる。従って、操作者がミックスする楽曲を選曲しやすくすることができる。
このような構成によれば、操作画面ＰＳを確認することによって、歌詞区間と楽曲の抑揚とを把握できるので、楽曲を試聴することなく、楽曲の内容や雰囲気を把握できる。従って、操作者がミックスする楽曲を選曲しやすくすることができる。
音響装置２は、楽曲をミックスするミックス部８７を有する。
このような構成によれば、操作者が選択した楽曲をミックスでき、音響装置２の汎用性を高めることができる。
このような構成によれば、操作者が選択した楽曲をミックスでき、音響装置２の汎用性を高めることができる。
画像生成プログラムを実行することにより音響装置２によって実施される画像生成方法は、ステップＳ２～Ｓ５を含む。ステップＳ２は、歌詞を含む楽曲の構成を示す楽曲構成情報を取得する構成情報取得手順又は構成情報取得ステップに相当する。ステップＳ３は、楽曲において歌詞に含まれる文字が再生される再生開始タイミング、及び、当該文字の再生が終了する再生終了タイミングを取得する歌詞情報取得手順又は歌詞情報取得ステップに相当する。ステップＳ４は、それぞれ取得された再生開始タイミング及び再生終了タイミングに基づいて、楽曲において歌詞が含まれる区間である歌詞区間を算出する算出手順又は算出ステップに相当する。ステップＳ５は、楽曲構成情報と歌詞区間とが並列に配置された画像、例えば操作画面ＰＳの画像を生成する画像生成手順又は画像生成ステップに相当する。
また、記憶部５に記憶された画像生成プログラムは、情報処理装置である音響装置２によって実行される画像生成プログラムである。画像生成プログラムは、音響装置２に、上記ステップＳ２～Ｓ５を実行させる。
このような画像生成プログラムを音響装置２が実行して、音響装置２が上記画像生成方法を含む画像生成処理を実施することにより、上記した音響装置２の効果を奏することができる。
また、記憶部５に記憶された画像生成プログラムは、情報処理装置である音響装置２によって実行される画像生成プログラムである。画像生成プログラムは、音響装置２に、上記ステップＳ２～Ｓ５を実行させる。
このような画像生成プログラムを音響装置２が実行して、音響装置２が上記画像生成方法を含む画像生成処理を実施することにより、上記した音響装置２の効果を奏することができる。
［実施形態の変形］
本発明は、上記実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
上記実施形態では、音響装置２の画像生成部８５は、図２に示した操作画面ＰＳの画像を、波形情報ＣＭ１及び展開情報ＣＭ２を含む楽曲構成情報ＣＭと、歌詞区間ＬＹ１及び歌詞テキストＬＹ２を含む歌詞構成情報ＬＹとを表示する画像として生成するとした。しかしながら、楽曲構成情報ＣＭ及び歌詞構成情報ＬＹを表示する画像のレイアウトは、図２に示す操作画面ＰＳのレイアウトに限らない。例えば、波形情報ＣＭ１及び展開情報ＣＭ２において楽曲の再生時間を示す軸は、横軸でなくてもよく、画面における縦軸であってもよい。また、プレーヤーパネルＰＳ１とブラウズパネルＰＳ２とは、それぞれ別に表示されてもよい。更に、操作画面ＰＳは、第１デッキ画面Ｐ１及び第２デッキ画面Ｐ２を含む２デッキレイアウトの操作画面であるとしたが、操作画面に含まれるデッキ画面の数は、適宜変更可能である。
本発明は、上記実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
上記実施形態では、音響装置２の画像生成部８５は、図２に示した操作画面ＰＳの画像を、波形情報ＣＭ１及び展開情報ＣＭ２を含む楽曲構成情報ＣＭと、歌詞区間ＬＹ１及び歌詞テキストＬＹ２を含む歌詞構成情報ＬＹとを表示する画像として生成するとした。しかしながら、楽曲構成情報ＣＭ及び歌詞構成情報ＬＹを表示する画像のレイアウトは、図２に示す操作画面ＰＳのレイアウトに限らない。例えば、波形情報ＣＭ１及び展開情報ＣＭ２において楽曲の再生時間を示す軸は、横軸でなくてもよく、画面における縦軸であってもよい。また、プレーヤーパネルＰＳ１とブラウズパネルＰＳ２とは、それぞれ別に表示されてもよい。更に、操作画面ＰＳは、第１デッキ画面Ｐ１及び第２デッキ画面Ｐ２を含む２デッキレイアウトの操作画面であるとしたが、操作画面に含まれるデッキ画面の数は、適宜変更可能である。
上記実施形態では、ブラウズパネルＰＳ２のトラックリスト画面Ｐ７では、複数の楽曲のタグ情報が表示されるとともに、楽曲構成情報ＣＭの波形情報ＣＭ１と歌詞構成情報ＬＹの歌詞区間ＬＹ１とが、楽曲毎に表示されるとした。しかしながら、上記のように、ツリービュー画面Ｐ６に表示された複数の楽曲のうちの１つの楽曲が選択された場合に、選択された１つの楽曲についての楽曲構成情報ＣＭ及び歌詞構成情報ＬＹを別画面にて表示するように構成してもよい。
上記実施形態では、第１デッキ画面Ｐ１及び第２デッキ画面Ｐ２は、第１楽曲及び第２楽曲の歌詞テキストＬＹ２を表示するとした。しかしながら、これに限らず、歌詞テキストＬＹ２は、表示しなくてもよい。一方、トラックリスト画面Ｐ７は、歌詞区間ＬＹ１とともに歌詞テキストＬＹ２を表示してもよい。
上記実施形態では、第１デッキ画面Ｐ１は、第１楽曲についての波形情報ＣＭ１とともに、第１楽曲についての展開情報ＣＭ２を表示し、第２デッキ画面Ｐ２は、第２楽曲についての波形情報ＣＭ１とともに、第２楽曲についての展開情報ＣＭ２を表示するとした。しかしながら、これに限らず、波形情報ＣＭ１及び展開情報ＣＭ２のうち一方の情報は、必ずしも表示されなくてもよい。また、第１デッキ画面Ｐ１及び第２デッキ画面Ｐ２に表示される内容を、操作者が選択できてもよい。
また、上記のように、トラックリスト画面Ｐ７にて、各楽曲についての波形情報ＣＭ１に代えて、或いは、加えて、展開情報ＣＭ２を表示してもよい。
また、上記のように、トラックリスト画面Ｐ７にて、各楽曲についての波形情報ＣＭ１に代えて、或いは、加えて、展開情報ＣＭ２を表示してもよい。
上記実施形態では、音響装置２は、楽曲をミックスするミックス部８７を備えるとした。しかしながら、これに限らず、音響装置２は、ミックス部８７を必ずしも備えていなくてもよい。
また、音響装置２が表示部を有する場合には、音響装置２は、画像生成部８５によって生成された画像を外部に出力する画像出力部８６を備えていなくてもよい。
また、音響装置２が表示部を有する場合には、音響装置２は、画像生成部８５によって生成された画像を外部に出力する画像出力部８６を備えていなくてもよい。
上記実施形態では、歌詞情報には、歌詞に含まれる文字の再生が開始される再生開始タイミングと、当該文字の再生が終了する再生終了タイミングとが含まれるとした。しかしながら、これに限らず、再生終了タイミングに代えて、再生される文字の再生期間を示す情報が含まれていてもよい。この場合でも、区間算出部８４が、上記歌詞区間を算出することが可能であり、当該再生期間に基づいて、再生終了タイミングを求めることも可能である。
上記実施形態では、それぞれ同じ楽曲についての楽曲情報、楽曲構成情報及び歌詞情報は、同じ記憶部５に記憶されるとした。しかしながら、これに限らず、これらの情報は、それぞれ異なる記憶装置に記憶されていてもよい。また例えば、歌詞情報は、楽曲が選択されたときに歌詞情報サーバーＳＶ２から取得されてもよい。
なお、上記のように、音響装置２が、楽曲のオーディオデータを解析して、楽曲構成情報を取得する解析部を備えていれば、音響装置２は、構成情報サーバーＳＶ１と通信しなくてもよい。
なお、上記のように、音響装置２が、楽曲のオーディオデータを解析して、楽曲構成情報を取得する解析部を備えていれば、音響装置２は、構成情報サーバーＳＶ１と通信しなくてもよい。
上記実施形態では、音響装置２は、記憶部５に記憶された画像生成プログラムを読み取って実行することにより、画像生成処理を実施するとした。しかしながら、これに限らず、例えば、画像生成処理の実施時に、記録媒体から画像生成プログラムを読み取って実行する構成としてもよい。このような記録媒体としては、ディスク型記録媒体、ＨＤＤ、並びに、半導体メモリー等を用いることができる。更に、音響装置２は、ネットワーク上の機器から画像生成プログラムを取得してもよい。
１…音響システム、２…音響装置、８１…楽曲取得部、８２…構成情報取得部、８３…歌詞情報取得部、８４…区間算出部、８５…画像生成部、８６…画像出力部、８７…ミックス部、ＣＭ…楽曲構成情報、ＣＭ１…波形情報、ＣＭ２…展開情報、ＤＰ…表示装置、ＤＶ…操作装置、ＬＹ…歌詞構成情報、ＬＹ１…歌詞区間、ＬＹ２…歌詞テキスト、ＰＳ…操作画面（画像）、ＳＶ１…構成情報サーバー、ＳＶ２…歌詞情報サーバー。
Claims (9)
- 音響装置であって、
歌詞を含む楽曲の構成を示す楽曲構成情報を取得する構成情報取得部と、
前記楽曲において前記歌詞に含まれる文字が再生される再生開始タイミング、及び、前記文字の再生が終了する再生終了タイミングを取得する歌詞情報取得部と、
前記再生開始タイミング及び前記再生終了タイミングに基づいて、前記楽曲において前記歌詞が含まれる区間である歌詞区間を算出する区間算出部と、
前記楽曲構成情報と前記歌詞区間とが並列に配置された画像を生成する画像生成部と、を備えることを特徴とする音響装置。 - 請求項１に記載の音響装置において、
前記画像生成部は、前記楽曲ごとに前記楽曲構成情報と前記歌詞区間とが並列に配置された前記画像を生成することを特徴とする音響装置。 - 請求項１又は請求項２に記載の音響装置において、
前記歌詞情報取得部は、前記楽曲に含まれる前記歌詞を示す歌詞テキストを取得し、
前記画像生成部は、前記歌詞区間とともに、前記歌詞テキストによって示される前記歌詞が配置された前記画像を生成することを特徴とする音響装置。 - 請求項１から請求項３のいずれか一項に記載の音響装置において、
前記楽曲構成情報は、前記楽曲の構造を特徴付ける複数の特徴区間を示す展開情報を含み、
前記画像生成部は、前記展開情報と前記歌詞区間とが並列に配置された前記画像を生成することを特徴とする音響装置。 - 請求項１から請求項４のいずれか一項に記載の音響装置において、
前記楽曲構成情報は、前記楽曲の再生時間に応じた信号強度の波形を示す波形情報を含み、
前記画像生成部は、前記波形情報と前記歌詞区間とが並列に配置された前記画像を生成することを特徴とする音響装置。 - 請求項１から請求項５のいずれか一項に記載の音響装置において、
前記楽曲をミックスするミックス部を有することを特徴とする音響装置。 - 請求項１から請求項６のいずれか一項に記載の音響装置と、
前記画像を表示する表示装置と、を備えることを特徴とする音響システム。 - 音響装置によって実施される画像生成方法であって、
歌詞を含む楽曲の構成を示す楽曲構成情報を取得する構成情報取得手順と、
前記楽曲において前記歌詞に含まれる文字が再生される再生開始タイミング、及び、前記文字の再生が終了する再生終了タイミングを取得する歌詞情報取得手順と、
前記再生開始タイミング及び前記再生終了タイミングに基づいて、前記楽曲において前記歌詞が含まれる区間である歌詞区間を算出する算出手順と、
前記楽曲構成情報と前記歌詞区間とが並列に配置された画像を生成する画像生成手順と、を含むことを特徴とする画像生成方法。 - 情報処理装置によって実行される画像生成プログラムであって、
前記情報処理装置に、
歌詞を含む楽曲の構成を示す楽曲構成情報を取得する構成情報取得ステップと、
前記楽曲において前記歌詞に含まれる文字が再生される再生開始タイミング、及び、前記文字の再生が終了する再生終了タイミングを取得する歌詞情報取得ステップと、
前記再生開始タイミング及び前記再生終了タイミングに基づいて、前記楽曲において前記歌詞が含まれる区間である歌詞区間を算出する算出ステップと、
前記楽曲構成情報と前記歌詞区間とが並列に配置された画像を生成する画像生成ステップと、を実行させることを特徴とする画像生成プログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2019/037603 WO2021059399A1 (ja) | 2019-09-25 | 2019-09-25 | 音響装置、音響システム、画像生成方法及び画像生成プログラム |
| JP2021548047A JP7397090B2 (ja) | 2019-09-25 | 2019-09-25 | 音響装置、音響システム、画像生成方法及び画像生成プログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2019/037603 WO2021059399A1 (ja) | 2019-09-25 | 2019-09-25 | 音響装置、音響システム、画像生成方法及び画像生成プログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2021059399A1 true WO2021059399A1 (ja) | 2021-04-01 |
Family
ID=75165623
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2019/037603 WO2021059399A1 (ja) | 2019-09-25 | 2019-09-25 | 音響装置、音響システム、画像生成方法及び画像生成プログラム |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP7397090B2 (ja) |
| WO (1) | WO2021059399A1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024024105A1 (ja) * | 2022-07-29 | 2024-02-01 | ＡｌｐｈａＴｈｅｔａ株式会社 | 音響再生装置、プログラム、及び再生制御方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2096626A1 (en) * | 2008-02-29 | 2009-09-02 | Sony Corporation | Method for visualizing audio data |
| US20170212876A1 (en) * | 2014-07-26 | 2017-07-27 | Huawei Technologies Co., Ltd. | Method and Apparatus for Editing Audio File |
| WO2018016008A1 (ja) * | 2016-07-19 | 2018-01-25 | Ｐｉｏｎｅｅｒ ＤＪ株式会社 | 音響機器制御操作入力装置、および音響機器制御操作入力プログラム |
| JP2018059974A (ja) * | 2016-10-03 | 2018-04-12 | 株式会社第一興商 | カラオケシステム |
| JP2019125936A (ja) * | 2018-01-17 | 2019-07-25 | 株式会社Ｃｏｔｏｄａｍａ | 出力制御方法、出力制御システム、及びプログラム |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5007563B2 (ja) | 2006-12-28 | 2012-08-22 | ソニー株式会社 | 音楽編集装置および方法、並びに、プログラム |
| US9613605B2 (en) | 2013-11-14 | 2017-04-04 | Tunesplice, Llc | Method, device and system for automatically adjusting a duration of a song |
-
2019
- 2019-09-25 WO PCT/JP2019/037603 patent/WO2021059399A1/ja active Application Filing
- 2019-09-25 JP JP2021548047A patent/JP7397090B2/ja active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2096626A1 (en) * | 2008-02-29 | 2009-09-02 | Sony Corporation | Method for visualizing audio data |
| US20170212876A1 (en) * | 2014-07-26 | 2017-07-27 | Huawei Technologies Co., Ltd. | Method and Apparatus for Editing Audio File |
| WO2018016008A1 (ja) * | 2016-07-19 | 2018-01-25 | Ｐｉｏｎｅｅｒ ＤＪ株式会社 | 音響機器制御操作入力装置、および音響機器制御操作入力プログラム |
| JP2018059974A (ja) * | 2016-10-03 | 2018-04-12 | 株式会社第一興商 | カラオケシステム |
| JP2019125936A (ja) * | 2018-01-17 | 2019-07-25 | 株式会社Ｃｏｔｏｄａｍａ | 出力制御方法、出力制御システム、及びプログラム |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024024105A1 (ja) * | 2022-07-29 | 2024-02-01 | ＡｌｐｈａＴｈｅｔａ株式会社 | 音響再生装置、プログラム、及び再生制御方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7397090B2 (ja) | 2023-12-12 |
| JPWO2021059399A1 (ja) | 2021-04-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8618404B2 (en) | File creation process, file format and file playback apparatus enabling advanced audio interaction and collaboration capabilities | |
| US20120014673A1 (en) | Video and audio content system | |
| US20090258700A1 (en) | Music video game with configurable instruments and recording functions | |
| US20150268924A1 (en) | Method and system for selecting tracks on a digital file | |
| WO2021059399A1 (ja) | 音響装置、音響システム、画像生成方法及び画像生成プログラム | |
| JP4173227B2 (ja) | 複数のボーカルパートを選択的に再生出力するカラオケ装置 | |
| JP2014071328A (ja) | カラオケ装置、及びコンピュータプログラム | |
| JP2009125141A (ja) | 楽曲選択システム、楽曲選択装置及びプログラム | |
| JP5061926B2 (ja) | 電子音楽装置及び演奏データ編集表示プログラム | |
| JP2014066922A (ja) | 楽曲演奏装置 | |
| KR100841047B1 (ko) | 곡 데이터 편집 기능 및 mp3기능이 내장된 휴대용 플레이어 | |
| JP2009134146A (ja) | コンテンツ編集装置 | |
| JP2004206747A (ja) | 楽曲ミキシング装置、方法およびプログラム | |
| JP2013003430A (ja) | カラオケ装置 | |
| WO2022249402A1 (ja) | 音響機器、楽曲の再生方法およびプログラム | |
| TWI270800B (en) | Method of playing a game according to events in a selected track of a music file | |
| JP2010054856A (ja) | 電子楽器 | |
| JP6920489B1 (ja) | カラオケ装置 | |
| JP2006172534A (ja) | 音楽データ処理装置及びプログラム | |
| JP4720858B2 (ja) | カラオケ装置 | |
| JP5292806B2 (ja) | 楽音生成装置及びプログラム | |
| JP2000181469A (ja) | 利用されていない期間にｂｇｍを流す機能に特徴があるカラオケ装置 | |
| JP6196571B2 (ja) | 演奏装置及びプログラム | |
| JP2004354803A (ja) | 音楽再生装置 | |
| JP5505012B2 (ja) | 電子音楽装置及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 19947278 Country of ref document: EP Kind code of ref document: A1 |
|
| ENP | Entry into the national phase |
Ref document number: 2021548047 Country of ref document: JP Kind code of ref document: A |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 19947278 Country of ref document: EP Kind code of ref document: A1 |