JP6009447B2 - 表示装置、表示方法、およびプログラム - Google Patents

Description

本発明は、楽曲特徴量の表示を行う表示装置、表示方法、およびプログラムに関するものである。

従来、楽曲の再生位置に応じてエフェクトを制御する音楽プレーヤーが知られている（特許文献１参照）。この音楽プレーヤーは、再生曲が選択されると、その曲に関する情報（曲名、アーティスト名および演奏時間等）をサーバー装置に送信し、その曲にエフェクト効果を付与するためのＸＭＬファイルをダウンロードする。ＸＭＬファイルには、楽曲の再生中にエフェクタで実行させるエフェクト処理に関する制御情報とその実行時刻の情報が含まれており、音楽プレーヤーは、曲データの再生位置が実行時刻となったとき、指定されたエフェクト処理をエフェクタに実行させる。この構成により、曲の再生に同期して所望のエフェクト効果を付与することができる。

特開２００８−１９１５４６号公報

ところで、クラブ等で用いられるＤＪ機器（ディスクジョッキー（ＤＪ）が音響パフォーマンスに用いる音楽プレーヤー）の場合、音響パフォーマンスの一環として、操作者（ＤＪ）が、曲の再生中に、その曲に対して実行させるエフェクトの種類や実行のタイミングを決定し、即興的にエフェクト操作を行う。しかし、特許文献１の音楽プレーヤーは、予め定められた情報（エフェクトの種類および実行時刻）に基づいてエフェクト処理を実行するため、上記のような即興的なエフェクト操作を行うことができない。また、例えば、エフェクタを直接操作して即興的なエフェクト操作を行う場合であっても、操作者は、曲の構成を熟知しておく必要があるという問題がある。

本発明は、上記の点に鑑み、即興的なエフェクト操作を容易に行うための表示が可能な表示装置、表示方法、およびプログラムを提供することを目的とする。

本発明の表示装置は、表示部と、楽曲を、その解析結果である楽曲特徴量に基づいて、周波数帯域ごと且つ楽曲の拍位置に応じた時間帯域ごとに分割し、各分割領域を、該当する周波数帯域および時間帯域の音量レベルに応じた装飾を施して表示部に表示させる楽曲特徴量表示を行う表示制御部と、前記各分割領域に、エフェクトの配置および種類を指定するための操作部と、を備え、前記表示制御部は、前記操作部の操作にしたがって、前記各分割領域に前記エフェクトの有無および種類を表示させることを特徴とする。

本発明の表示装置の表示方法は、楽曲の楽曲特徴量を表示する表示装置の表示方法であって、コンピューターが、楽曲を、その解析結果である楽曲特徴量に基づいて、周波数帯域ごと且つ楽曲の拍位置に応じた時間帯域ごとに分割し、各分割領域を、該当する周波数帯域および時間帯域の音量レベルに応じた装飾を施して表示部に表示させる表示制御ステップと、前記各分割領域への、エフェクトの配置および種類の指定を受け付ける操作ステップと、を実行し、前記表示制御ステップは、前記操作ステップの操作にしたがって、前記各分割領域に前記エフェクトの有無および種類を表示させることを特徴とする。

本発明のプログラムは、コンピューターに、上記の表示方法を実行させることを特徴とする。

これらの構成によれば、周波数帯域ごと且つ時間帯域ごとの音量レベルを表示するため、操作者が楽曲の構成を容易に把握することができる。例えば、楽曲を周波数帯域ごと且つ時間帯域ごとのマトリクス状に分割し、音量レベルの高い帯域を濃い色で、音量レベルの低い帯域を薄い色で、それぞれ表示すると、濃い色で表示された分割領域が連続する部分は、音量が大きい曲の盛り上がり部分を示し、薄い色で表示された分割領域が連続する部分は、音量の小さい静かな部分を示すため、音量に基づく楽曲の構成を視覚的に把握することができる。また、詳細な楽曲の構成を一目で把握できるため、予め曲の構成を熟知しておくことなく、即興で各周波数帯域に適した効果的なエフェクト操作を効果的なタイミングで実行することができる。

この場合、各分割領域に、エフェクトの配置および種類を指定するための操作部をさらに備え、表示制御部は、操作部の操作にしたがって、各分割領域にエフェクトの有無および種類を表示させることが好ましい。

この構成によれば、周波数帯域ごと且つ時間帯域ごとに、実行する／実行したエフェクトの有無を把握することができる。また、操作者の所望の周波数帯域および時間帯域にエフェクトを配置することができる。

この場合、各分割領域に配置されたエフェクトの種類に応じて、楽曲の該当する周波数帯域および時間帯域に対しエフェクト処理を行う楽曲処理部をさらに備えていることが好ましい。

この構成によれば、エフェクト処理を行うための他の装置を必要とすることなく、各周波数帯域に適した効果的なエフェクト処理を実行することができる。

この場合、楽曲処理部は、エフェクトの配置に基づいて、エフェクト処理を行う楽曲の周波数帯域および時間帯域を補正することが好ましい。

この構成によれば、エフェクトの配置が所望の位置に対してずれていた場合であっても、適切な周波数帯域および時間帯域にエフェクト処理を行うことができる。

上記の表示装置において、表示制御部は、表示部の表示領域内に、楽曲全体が収まるように、各分割領域の時間帯域幅を決定することが好ましい。

この構成によれば、操作者が一目で楽曲全体の構成を把握することができる。

上記の表示装置において、各分割領域の時間帯域幅を拡大する拡大操作を行う操作部をさらに備え、表示制御部は、拡大操作に伴って、当該拡大操作前に表示していた通常楽曲特徴量表示と、当該通常楽曲特徴量表示よりも各分割領域の時間帯域幅が広い拡大楽曲特徴量表示と、の２種類の楽曲特徴量表示を行うことが好ましい。

この構成によれば、通常楽曲特徴量表示によって楽曲全体の構成を把握できると共に、拡大楽曲特徴量表示によって、楽曲の任意の一部分の構成を正確に把握することができる。よって、再生位置を含む部分、およびエフェクトを配置する部分等の構成を把握する際に利便性が良い。

上記の表示装置において、操作部は、拡大楽曲特徴量表示に対し、時間軸方向のスクロール操作が可能であり、通常楽曲特徴量表示に対するスクロール操作は無効となることが好ましい。

この構成によれば、拡大楽曲特徴量表示において、操作者が所望する部分を拡大表示させることができる。例えば、楽曲の再生位置、エフェクト対象位置等を拡大表示させることができる。

上記の表示装置において、表示制御部は、各分割領域を、音量レベルに応じた色で表示することが好ましい。

この構成によれば、直感的に音量レベルに基づく曲の構成を把握することができる。

上記の表示装置において、表示制御部は、楽曲の音量レベル分布に基づいて、当該楽曲の周波数帯域を分割する閾値を可変することが好ましい。

この構成によれば、楽曲の音量レベルに基づいて、適切に周波数帯域を分割することができる。例えば、周波数帯域を２つに分割する場合、楽曲の音量レベル分布が一方の帯域に偏らないような閾値を設定して周波数帯域を分割すれば、音量レベルの違いによる楽曲の盛り上がり部分を適切に表現することができる。ただし、周波数帯域を分割する閾値は、各帯域の幅が必ずしも均等となる値でなくてもよい。

上記の表示装置において、表示制御部は、楽曲特徴量表示と、楽曲の楽曲特徴量に含まれる楽曲のメタデータ、および出力波形表示された音声データの少なくとも１つを表示する楽曲情報表示と、の間で表示を切り替えることが好ましい。

この構成によれば、ユーザーは、楽曲特徴量表示によって楽曲の構成を把握することが出来ると共に、楽曲情報表示によって楽曲の各種情報を確認することが出来る。

上記の表示装置において、表示部は、円盤状の表示領域を有し、表示制御部は、時間帯域を表示領域の円周方向に分割し、周波数帯域を表示領域の径方向に分割して、楽曲特徴量表示を行うことが好ましい。

この構成によれば、表示領域の円周方向において楽曲の時間経過を、径方向において楽曲の周波数帯域を、それぞれ表現することにより、円形領域でも楽曲特徴量表示を行うことができる。

この場合、表示領域の内周側における分割領域の径方向長さは、表示領域の外周側における分割領域の径方向長さよりも長くなるように設定されることが好ましい。

この構成によれば、表示領域の外周側における分割領域に比べて、内周側における分割領域の面積が極端に小さくなることを防ぐことができる。

また、この場合、円盤状の表示領域上には、その中心点が表示領域の中心点の垂直線上となる円盤状のジョグダイヤルが重畳されることが好ましい。

また、この場合、ジョグダイヤルは、表示領域と略同サイズ、且つ透過性を有する部材から成ることが好ましい。

これらの構成によれば、物理的な操作部として機能するジョグダイヤルの領域を表示部として利用することができる。

上記の表示装置において、楽曲を解析する解析処理部をさらに備え、表示制御部は、解析処理部の解析結果に応じて、表示制御を行うことが好ましい。

この構成によれば、解析処理を行うための他の装置を必要とすることなく、楽曲の構成を表示することができる。

本発明の一実施形態に係る再生システムのシステム構成図である。 再生システムの制御構成を示す制御ブロック図である。 再生システムの機能構成を示す機能ブロック図である。 第１実施形態に係るプレーヤーを上側から見た平面図である。 ジョグダイヤル表示部を示す図である。 楽曲再生中におけるジョグダイヤル表示部の表示変化を示す図である。 マスター拍位置画像を表示する際のジョグダイヤル表示部の表示変化を示す図である。 スクラッチ操作を行なう際の拍の移行を示す図である。 スクラッチ操作を行う際のジョグダイヤル表示部の表示変化を示す図である。 スクラッチ操作を行う際のジョグダイヤル表示部の表示変化を示す図である。 ジャグリング操作を行う際のジョグダイヤル表示部の表示変化を示す図である。 ジャグリング操作を行う際のジョグダイヤル表示部の表示変化を示す図である。 音飛ばし操作を行う際のジョグダイヤル表示部の表示変化を示す図である。 選曲操作を行う際のプレーヤーの表示変化を示す図である。 選曲操作を行う際のプレーヤーの表示変化を示す図である。 再生立ち上がり／立ち下がり操作におけるプレーヤーを示す図である。 関連付け表示されたプレーヤーを示す図である。 メイン表示部に表示される楽曲構成表示画面を示す図である。 エフェクトを配置した楽曲構成表示画面を示す図である。 拡大表示画像を表示した楽曲構成表示画面を示す図である。 楽曲構成表示画面およびエフェクトの適用範囲を示す図である。 第２実施形態に係るプレーヤーを上側から見た平面図である。 第２プレイモード（エフェクト設定モード）におけるジョグダイヤル表示部を示す図である。 第３プレイモード（エフェクト＆スクラッチモード）におけるジョグダイヤル表示部を示す図である。

以下、添付の図面を参照し、本発明の一実施形態にかかる表示装置、表示方法、およびプログラムについて詳細に説明する。本実施形態では、本発明の表示装置を、ＤＪ機器として用いられるプレーヤーに適用した場合を例示する。なお、ＤＪ機器は、ＤＪ（ディスクジョッキー）がクラブ等において、音楽に様々な特殊効果を付加しつつ連続的に再生する音響パフォーマンスを行うために用いられる。

［第１実施形態］
図１は、本発明のプレーヤー１０を備えた再生システムＳＹのシステム構成図である。図示のように、再生システムＳＹは、２台のプレーヤー１０（１０ａ，１０ｂ）と、プレーヤー１０から入力されたオーディオ信号を各チャンネルに割り当てて混合処理を行うミキサー装置２０と、ミキサー装置２０から出力されたオーディオ信号を外部出力する出力装置３０と、を備えている。

プレーヤー１０は、ＣＤ、ＵＳＢメモリ、ＳＤメモリカードなどの外部記憶媒体Ｄから楽曲データを読み出して再生する。また、操作部１００（ジョグダイヤル１２などの操作子、図４参照）を有し、ユーザーの操作に基づいて、再生状態の調節や、エフェクト効果の付加などの再生処理を行う。また、プレーヤー１０は、表示部２００（メイン表示部２１０およびジョグダイヤル表示部２２０）を有し、各種画面を表示する。

ミキサー装置２０は、クロスフェーダー２７などの操作子を有し、各プレーヤー１０から入力されたオーディオ信号の混合処理などを行う。例えば、クロスフェーダー２７を左右に操作することにより、オーディオ信号を出力するプレーヤー１０ａおよびプレーヤー１０ｂのいずれかに切り替えることができる。出力装置３０は、アンプ３１およびスピーカー３２を有し、ミキサー装置２０から出力されたオーディオ信号を音声として外部に出力する。さらに、プレーヤー１０とミキサー装置２０、並びにミキサー装置２０と出力装置３０は、それぞれＲＣＡケーブルなどのオーディオケーブルを介して接続されている。なお、有線接続ではなく、無線接続であっても良い。

図２は、プレーヤー１０を中心とした再生システムＳＹの制御構成を示したブロック図である。プレーヤー１０は、外部記憶媒体Ｄから楽曲データを取得するためのメモリＩ／Ｆ部４１と、取得した楽曲データをデコードしてオーディオ信号を出力するデコーダ４２と、オーディオ信号に対して各種エフェクト処理を施すエフェクタ４３と、各種操作を行うための操作部１００と、各種情報を表示する表示部２００と、プレーヤー１０を統括制御する制御部４４と、を備えている。なお、プレーヤー１０は、ハードディスクなどの記憶部を備え、記憶した楽曲データを読み出す構成としてもよい。また、インターネットおよびＬＡＮなどのネットワークに接続するためのネットワークＩ／Ｆ部を備え、ネットワークを介してプレーヤー１０に接続されたサーバー装置から、楽曲データを取得する構成としてもよい。

制御部４４は、ＣＰＵ４５（Central Processing Unit）、ＲＯＭ４６（Read Only Memory）、およびＲＡＭ４７（Random Access Memory）、を有している。ＣＰＵ４５は、各種データの演算処理を行うことによって、プレーヤー１０全体を制御するものである。ＲＯＭ４６は、ＣＰＵ４５が各種処理を実行するための制御プログラムや制御データを格納している。ＲＡＭ４７は、ＣＰＵ４５が各種処理を行う際のワークエリアとして用いられる。

プレーヤー１０は、デコーダ４２によりデコードしたオーディオ信号に対してエフェクタ４３により適宜各種エフェクト処理を施し、ミキサー装置２０に出力する（再生）。出力されたオーディオ信号は、出力装置３０を介して外部に出力される。

図３は、再生システムＳＹの機能構成を示したブロック図である。プレーヤー１０は、楽曲データを取得する楽曲取得部５１と、楽曲データを解析する解析処理部５２と、各種操作を行うための操作部１００と、解析結果と操作結果とを表示する表示部２００と、表示部２００の表示制御を行う表示制御部５３と、操作部１００の操作に応じて楽曲データの再生制御を行う再生制御部５４と、操作部１００の操作に応じて楽曲に各種効果を付与する楽曲処理部５５と、楽曲データから抽出したオーディオ信号をミキサー装置２０に出力する楽曲出力部５６と、を備えている。

楽曲取得部５１は、外部記憶媒体Ｄまたはネットワーク上のサーバー装置から楽曲データを取得する。

解析処理部５２は、例えばＤＳＰ（Digital Signal Processor）、およびメモリ等により構成され、取得した楽曲データの楽曲特徴量を解析する。楽曲特徴量とは、例えば、拍位置、音量レベル、周波数、テンポ、ビート密度等の音楽的特徴量を含む。また、解析処理部５２は、拍の解析においては小節の先頭の拍、偶数拍、奇数拍の解析も行い、楽曲データの周波数を「Ｈｉ」、「Ｍｉｄ」、「Ｌｏｗ」の３つの周波数帯域に分割する。また、楽曲データを、テンポを刻む拍位置によって拍毎の時間帯域に分割する。そして、上記の周波数帯域且つ時間帯域で分割された楽曲データの音量レベルを解析する。すなわち、解析処理部５２は、各分割領域の楽曲データの音量レベルが「高」、「中」、「低」の３つのレベルのうち、いずれにあたるかを解析する。このようにして解析した解析結果をメモリに記憶する。

なお、周波数帯域を「Ｈｉ」、「Ｍｉｄ」、「Ｌｏｗ」に分割するための閾値は、楽曲にかかわらず固定化しても良いし、楽曲ごとに最適な値を設定しても良い。閾値を楽曲にかかわらず固定化した場合、音量レベル分布を複数の楽曲同士にて同一条件で比較し易い。一方、閾値として楽曲ごとに最適な閾値を設定した場合、１曲内の構成を把握しやすい。

また、音量レベルを「高」、「中」、「低」に分割するための閾値も、楽曲にかかわらず固定化しても良いし、楽曲ごとに最適な値を設定しても良い。なお、各音量レベルの幅（デシベル値の幅）が必ずしも均等でなくてもよい。

操作部１００は、ジョグダイヤル１２や複数の操作子で構成され、楽曲の再生、エフェクトの付与、スクラッチ等の操作を行うために用いられる。

表示部２００は、メイン表示部２１０やジョグダイヤル表示部２２０により構成され、操作部１００による操作結果や、解析処理部５２による解析結果等を表示する。

表示制御部５３は、操作部１００による操作や、解析処理部５２の解析結果に基づいて、表示部２００に表示させるための表示データを生成する。特に、表示制御部５３は、解析処理部５２の解析結果に基づいて再生中の楽曲の拍位置や音量レベル構成を操作者に対して直感的に提示する、拍位置画像２５２をジョグダイヤル表示部２２０（図４参照）に、楽曲構成表示画像２１２（楽曲特徴量表示）をメイン表示部２１０に表示する（図１６参照）。

再生制御部５４は、操作部１００の操作に応じて、再生開始位置、再生速度等を制御する。楽曲処理部５５は、再生制御部５４の操作信号に応じて、楽曲にスクラッチ効果を付与するような再生速度を変化させる処理や、楽曲データ（オーディオ信号）に対して所定のエフェクト処理を施す。楽曲出力部５６は、各種処理が施されたオーディオ信号をミキサー装置２０に出力する。

図４は、プレーヤー１０の装置構成を示す平面図である。プレーヤー１０は、メイン表示部２１０、プレイリスト表示領域２０１、スタンバイプレイリスト表示領域２０１ａ、ジョグダイヤル１２、トラックサーチボタン１８ａ、マニュアルサーチボタン１８ｂ、ＣＵＥボタン１８ｃ、プレイ／ポーズボタン１８ｄ、トルク調整つまみ１０１、立ち下がり調整つまみ１０２、立ち上がり調整つまみ１０３（立ち下がり・立ち上がり調整部）、およびテンポスライダー１０４などを有している。その他に、図示を省略したが、プレーヤー１０は、ＣＤ挿入口、ＣＤ用イジェクトボタン、ＵＳＢメモリスロット、ＵＳＢメモリ用イジェクトボタン、ＳＤメモリカードスロット、およびＳＤメモリカード用イジェクトボタンを備えている。

メイン表示部２１０は、タッチパネルで構成され、再生中の楽曲に関する楽曲情報を表示する楽曲情報表示画面２１０Ａ（図４参照）と、再生中の楽曲の構成を表示する楽曲構成表示画面２１０Ｂ（図１６および図１７参照）と、を切り替え表示する。図４に示すように、楽曲情報表示画面２１０Ａは、再生中の楽曲のジャケット画像２８１、タイトル情報２８２、再生時間情報２８３、楽曲再生情報２８４、ＤＪプレイレーティング２８５およびテンポ情報２８６を表示する。楽曲再生情報２８４には、楽曲全体の全体出力波形２８７と、再生位置を示す再生位置表示２８８と、当該再生位置の前後一部分における出力波形を詳細表示した部分出力波形２８９と、ＣＵＥポイント２９０およびＨＯＴＣＵＥポイント２９１が含まれている。さらに、メイン表示部２１０の表示を楽曲情報表示画面２１０Ａから楽曲構成表示画面２１０Ｂへ切り替えるための表示切り替えボタン２９２を表示する。楽曲情報表示画面２１０Ａは、上記したような再生中の楽曲の各種情報を確認するために用いられる。

一方、楽曲構成表示画面２１０Ｂは、エフェクト画像２１１、楽曲構成表示画像２１２およびメイン表示部２１０の表示を楽曲情報表示画面２１０Ａから楽曲構成表示画面２１０Ｂへ切り替えるための表示切り替えボタン２９２を表示する（図１６および１７参照）。楽曲構成表示画面２１０Ｂは、再生中の楽曲の周波数毎の音量の構成を確認したり、エフェクトを配置するために用いられる。

プレイリスト表示領域２０１は、取得した複数のプレイリストのジャケット画像を並べて表示する。プレイリスト表示領域２０１もタッチパネルで構成されており、ユーザーは、複数のジャケット画像を左右にスクロールして、所望のプレイリストの選択を行うことができる（プレイリスト選択部）。また、スタンバイプレイリスト表示領域２０１ａには、現在再生中のプレイリストの次に再生されるプレイリストのジャケット画像を表示する。なお、次に再生するプレイリストがユーザーによって特に選択されていない場合は、スタンバイプレイリスト表示領域２０１ａに、所定の順序に従って次に再生されるプレイリストのジャケット画像が表示される。図示においては、プレイリストをアルファベット順に再生するよう再生順序が定められている（図１４および図１５参照）。

ジョグダイヤル１２は、ジョグダイヤル本体１２ａと、再生中の楽曲の再生位置や拍位置を示す画像を表示するジョグダイヤル表示部２２０と、ジョグダイヤル本体１２ａを回転可能に支持するジョグダイヤル支持部１２ｂと、で構成されている。

ジョグダイヤル本体１２ａは、ユーザーにより回転操作が行われる物理的な操作子（特殊操作部）である。また、ジョグダイヤル本体１２ａは、後述するジョグダイヤル表示部２２０と同じ面積を有する円盤状の透明板で構成されており、ユーザーは、ジョグダイヤル表示部２２０の表示を確認しながら、ジョグダイヤル表示部２２０上のジョグダイヤル本体１２ａを回転操作する。なお、ジョグダイヤル本体１２ａは、直径略２０ｃｍ±５ｃｍを有し、主にスクラッチ操作をするために用いられる。一方、ジョグダイヤル支持部１２ｂは、ジョグダイヤル本体１２ａを回転させるための回転機構を有した非表示部である。また、ジョグダイヤル支持部１２ｂも、ジョグダイヤル本体１２ａと連動して回転する。

トラックサーチボタン１８ａ、およびマニュアルサーチボタン１８ｂは、再生するトラック（主に楽曲）および再生位置を選択するために用いられる。ＣＵＥボタン１８ｃは、楽曲の再生位置を任意の位置に変化させるために用いられる。プレイ／ポーズボタン１８ｄは、再生を開始および一時停止するために用いられる。トルク調整つまみ１０１は、ジョグダイヤル本体１２ａの回転トルクを調節するために用いられる。立ち上がり調節つまみ１０３は再生開始時の出力カーブを、立ち下がり調整つまみ１０２は再生終了時の出力カーブを、それぞれ調節するために用いられる。テンポスライダー１０４は、再生速度を調節するために用いられる。

上記したこれらの操作子は、物理的な操作子でも良いし、タッチパネル等で構成しても良い。また、これらの操作子の操作結果は、ジョグダイヤル表示部２２０の表示に反映される（図１７参照）。

図５は、ジョグダイヤル表示部２２０の図である。なお、ジョグダイヤル表示部２２０は、再生中および再生前後４拍分の楽曲の状態を示す画像を表示する。なお、図示において、再生中の楽曲は、４拍子のものとする。ジョグダイヤル表示部２２０は、再生するプレイリストが選択されると表示を開始し、プレイ／ポーズボタン１８ｄが押下されて再生が開始されると共に８つの拍位置画像２５２の回転を開始する。

図５に示すように、ジョグダイヤル表示部２２０は、再生位置画像２５１、８つの拍位置画像２５２、再生済み画像２５３、を表示する。その他に、再生しているプレイリストのジャケット画像２５４、プレイリストに含まれる曲名２５５（プレイリスト情報）、プレイリストに含まれる楽曲の構成を示すリング画像群２５６、モード切替ボタン２５７（モード選択部）を表示する。なお、図示では省略したが、実際には、現在再生中の楽曲の曲名２５５が他の曲名２５５と文字の色などが異なる表示形態で表示される。

再生位置画像２５１は、円形のジョグダイヤル表示部２２０の下端を０度として、下端から時計回り方向に４５度を成す位置から、表示部の中心まで伸びる線分であり、楽曲再生中に固定表示される。また、再生位置画像２５１の円周方向前後に隣接して、立ち上がり再生画像２５８ａおよび立ち下がり再生画像２５８ｂが表示される。立ち上がり再生画像２５８ａおよび立ち下がり再生画像２５８ｂは、扇形を有し、その頂角が再生開始時および再生停止時の出力音のカーブを表現している。すなわち、頂角が大きい場合、出力音の立ち上がりのカーブが緩やかであり、反対に、頂角が小さい場合、出力音の立ち下がりのカーブが急であることを示している。なお、立ち上がり再生画像２５８ａおよび立ち下がり再生画像２５８ｂは、再生位置画像２５１と同様、固定表示される。

拍位置画像２５２は、ジョグダイヤル表示部２２０の中心から１周等間隔（１周等分割）で八方に伸びる線状画像であり、再生中の、楽曲における８拍分を円周１周分で表したときの各拍位置を示している。そして、拍位置画像２５２は、固定表示される再生位置画像２５１に対して、楽曲のテンポに応じた回転速度で時計回り方向に回転表示される（図６参照）。つまり、楽曲が８拍分再生されたとき拍位置画像２５２が１回転することになる。また、再生位置画像２５１を通過する拍位置画像２５２が実際に再生されている拍位置を示している。

なお、拍位置画像２５２は、１拍目および３拍目（奇数拍位置）と、２拍目および４拍目（偶数拍位置）と、を異なる表示形態で表示している。本実施形態では、１拍目および３拍目を示す拍位置画像２５２が、２拍目および４拍目を示す拍位置画像２５２に比べて太い線状画像で表示される。また、表示領域内において２小節分（８拍分）の拍位置画像２５２を表示させ、２小節の先頭の拍を示す拍位置画像２５２が、その他の７つの拍位置画像２５２と異なる表示形態で表示される。図示においては、２小節の先頭の拍を示す拍位置画像２５２を異なる色で表示している。

リング画像群２５６は、同心配置された直径の異なる複数のリング画像２５６ａで構成されている。各リング画像２５６ａは、プレイリストに含まれる各楽曲に対応しており、外周側から再生順に配置されている。また、リング画像２５６ａは、複数のドット２５９により構成されており（図５参照）、各ドット２５９は、リング画像２５６ａが示す楽曲の拍位置に対応している。さらに、各ドット２５９は、それぞれ異なる色で表示され、この色の違いは、当該拍位置に対応する音量レベルを示している。本実施形態では、細かい斜線表示のドット２５９の音量レベルは「高」を示し、粗い斜線表示のドット２５９の音量レベルは「中」を示し、白抜き表示のドット２５９の音量レベルは「低」を示している。各リング画像２５６aは下端を０度として、下端から１８０度を成す位置を楽曲の開始
点として時計回りに１周で１曲分全体の音量レベルを表現する。

また、再生中の楽曲を示すリング画像２５６ａ上において、再生済み部分を示す再生済み画像２５３を表示する。なお、再生済み画像２５３は、ドット表示されるリング画像２５６ａに対して、実線表示される。この再生済み画像２５３は、下端を０度として下端から１８０度を成す位置を始点として再生が進むに伴ってリング画像２５６ａ上を伸びるように表示が変化する。これにより、再生位置画像２５１や拍位置画像２５２によって再生拍を確認しながら、楽曲全体の再生の経過も確認することが出来る。

各リング画像２５６ａ上に表示されるＣＵＥポイント２６０は頭出しして再生を開始する際の任意の再生ポイントであり、ＨＯＴＣＵＥポイント２６１は、サンプラー的繰り返し再生および音とばし再生を行う際の任意の再生ポイントを示す。モード切替ボタン２５７は、ジョグダイヤル表示部２２０の中央に表示され、後述のスクラッチ操作が可能な特殊操作を行うときの第１表示モードと、後述の音とばし操作が可能なダイレクト操作を行う第２表示モードとのいずれかにモードを切り替えるためのボタンである。なお、モード切替ボタン２５７は、モードが第１表示モードである場合は、白抜きで表示され、モードが第２表示モードである場合は、着色表示される。なお、図５におけるモード切替ボタン２５７は、第１表示モード中の表示として白抜きに示し、図１３におけるモード切替ボタン２５７は、第２表示モード中の表示として着色して示している。なお、本実施例では、第１表示モードを「特殊操作モード」、第２表示モードを「ダイレクトモード」として設定したが、これに限定しなくても良い。すなわち、表示切替ボタンにより、表示モードが変更するものであれば良い。

また、図７に示すように、ジョグダイヤル表示部２２０は、ジョグダイヤル本体１２ａをタッチして回転操作されると、拍位置画像２５２の回転速度を、ジョグダイヤル本体１２ａの物理的な回転速度と同様に変化させる。すなわち、ジョグダイヤル本体１２ａをタッチしながらの回転操作に同期して、拍位置画像２５２が回転する。また、ジョグダイヤル本体１２ａを押下すると、所定期間再生速度が減速し、再生状態が停止する。このような回転操作および停止操作が行われた場合、操作される前の回転速度で継続して回転する８つのマスター拍位置画像２６２が表示される（同図（ｂ）参照）。

なお、ジョグダイヤル本体１２ａをタッチしながらの回転操作に同期して、楽曲の再生速度も変化する。この再生速度の変化に伴って、いわゆるスクラッチ音（擬音）が再生される。このように、操作者は、ジョグダイヤル本体１２ａをタッチしながら回転操作することによって、ターンテーブル上のアナログレコードを回転させるように、スクラッチ操作を行うことができる。尚、タッチせずに１２ｂを回転した場合は再生スピードを一時的に速くしたり、遅くしたりできるピッチベンド操作が可能となっている。この場合、拍位置画像２５２の回転も速く、遅く回転する。

次に、再生する拍の移行について説明する。なお、図８におけるジョグダイヤル１２は、説明に必要のない構成の表示を省略し、簡易的に表示している。図８に示すように、再生位置画像２５１から反時計回り方向に１８０度を成す位置までの領域（未再生領域）に表示される拍位置画像２５２は、再生位置直前の未再生の拍位置を示し、再生位置画像２５１から時計回り方向に１８０度を成す位置までの領域（再生済み領域）に表示される拍位置画像２５２は、再生位置直後の再生済みの拍位置を示している。つまり、ジョグダイヤル表示部２２０に表示されている拍位置画像２５２は、再生位置（再生位置画像２５１）の前後４拍（これから再生する４拍および再生済みの４拍）である。また、表示領域の下端を０度として下端から１２５度を成す位置が、再生済みの領域と未再生の領域との境界となっている。すなわち、拍位置画像２５２は、回転に伴い、再生済みの領域と未再生の領域との境界を通過して、再生済みの拍位置から未再生の拍位置に切り替わる。図示のように、拍位置画像２５２が１周等分割に連続して回転しているので、上記の切り替わりは、拍位置画像２５２の一連の回転動作の中でスムーズに行われ、あたかも当該拍位置画像２５２が同一の拍を示すように、切り替わり前後も一定のスピードで回転する。

例えば、現在再生中の拍から別の拍に移行したい場合、図８（ａ）に示すように、移行先の拍位置が再生中の拍位置の前後４拍であれば、再生位置画像２５１の前後４拍のうち、実際表示されている所望の拍位置画像２５２を直接触れて再生位置まで回転させる（タッチしながら回転操作する）ことにより移行を行う。同図では、再生中の拍から２拍前および再生中の拍から１拍後の拍への移行を例示している。一方、図８（ｂ）に示すように、移行先の拍位置が再生中の拍位置から前後５拍以上離れた拍位置であれば、実際は表示されていないものの、表示中の所望の拍に相当する拍位置画像２５２に触れ、再生済みの領域と未再生の領域との境界を越えて再生位置に回転させれば、拍の移行をすることができる。同図では、再生中の拍から７拍前および再生中の拍から６拍後の拍への移行を例示している。また、連続して表示する拍位置画像２５２を８拍の場合、時計回りに１回転で８拍前（２小節前）、反時計回り１回転で８拍後（２小節後）の拍にも容易に移行できる。このように、所望の拍に相当する拍位置画像２５２に触れながら、回転距離（回転数）を増やすことによって、直接は表示されていない前後５拍以上離れた拍位置にも容易に移行することができる。つまり、本ジョグダイヤル表示部２２０によれば、４小節、６小節前後の拍へも回転数で認識できる。また、表示されていない４小節６小節以上前後の拍の位置の把握、移行を容易に行うことができる。以上のような拍の移動操作により、後述するスクラッチ操作において、表示されていない拍への移行および小節単位でずらす操作も容易に認識しながら、多彩な拍（音源）を選択して多彩なリズムを構築するスクラッチパフォーマンスが可能となる。

次に、図９および図１０を参照し、マスター拍位置表示を活用したスクラッチ操作について詳細に説明する。なお、図９は、スクラッチ操作を開始する際の動作を示している。図中におけるジョグダイヤル１２は、説明に必要のない構成の表示を省略し、簡易的に表示している。

図９に示すように、楽曲再生中において、所望の拍位置を示す拍位置画像２５２ａ上をタッチし（同図（ａ）参照）、そのままジョグダイヤル本体１２ａを反時計回り方向（逆再生方向）に回転させ、拍位置画像２５２ａが再生位置画像２５１よりも僅かに手前に来る位置まで移動させその位置を維持して、スクラッチ開始のスタンバイをする（同図（ｂ）参照）。なお、本操作によって、拍位置画像２５２ａが再生位置画像２５１を通過する際に出力されるスクラッチ音は、ミキサー装置２０でカットすることが好ましい。そして、操作前の速度で回転するマスター拍位置画像２６２が再生位置画像２５１に重なるタイミングで（同図（ｃ）参照）、拍位置画像２５２ａを再生位置画像２５１に向かって時計回り方向に回転させる（同図（ｄ）参照）。このとき、拍位置画像２５２ａが再生位置画像２５１と通過する際にスクラッチ音が出力される。このように、拍位置画像２５２ａが再生位置画像２５１を前後するように複数回ジョグダイヤル本体１２ａを回転操作して、スクラッチプレイを行う。

図１０は、スクラッチ操作を終了して、通常再生状態に戻す際の動作を示している。同図に示すように、拍位置画像２５２ａが、再生位置画像２５１を通過した位置にある状態から（同図（ａ）参照）、マスター拍位置画像２６２が再生位置画像２５１に重なるタイミングで（同図（ｂ）参照）、拍位置画像２５２ａが再生位置画像２５１と重なるように反時計回り方向に回転させる（同図（ｃ）参照）。このとき、拍位置画像２５２ａがマスター拍位置画像２６２と重なるため、マスター拍位置画像２６２の表示が消去される（同図（ｄ）参照）。

上記のスクラッチ操作によれば、拍位置画像２５２ａ、再生位置画像２５１、およびマスター拍位置画像２６２の表示位置がすべて一致するタイミングを直感的に把握して、このタイミングにあわせてスクラッチ操作の開始および終了することができるため、容易にスクラッチ操作の前後でリズムキープすることができる。

次に、図１１および図１２を参照し、２つのプレーヤー１０ａ、１０ｂを用いたジャグリング操作について説明する。図１１に示すように、ミキサー装置２０に接続されたプレーヤー１０ａ、１０ｂが、同一の楽曲を同一のタイミングで再生し、プレーヤー１０ａが出力対象となっている（プレーヤー１０ａの再生音が外部に出力されている）状態において（同図（ａ）参照）、出力対象ではないプレーヤー１０ｂの拍位置画像２５２ａを、プレーヤー１０ａに対して２拍分遅らせるようにジョグダイヤル本体１２ａを回転させる（同図（ｂ）参照）。このとき、プレーヤー１０ｂは、プレーヤー１０ａに対して２拍分遅れた再生状態となるが、プレーヤー１０ｂの再生音は、外部に出力されていない。そして図１２に示すように、そのまま通常再生を進め（同図（ｃ）参照）、所望の拍位置画像２５２ａが再生位置画像２５１を通過するタイミングで、ミキサー装置２０のクロスフェーダー２７を操作して、出力対象をプレーヤー１０ｂに切り替える（同図（ｄ）参照）。更に所望のタイミングでクロスフェーダー２７を操作して出力対象をプレーヤー１０ａ側に戻しても良い。このように、ミキサー装置２０のクロスフェーダー２７操作を繰り返して、個性的な音響パフォーマンスを行うことができる。

上記のジャグリング操作によれば、ジョグダイヤル１２の表示および操作によって、２つのプレーヤー１０ａ、１０ｂの再生状態を容易且つ正確に２拍分および任意の拍へ数拍分ずらし、リズムに変化を付けたり、変則的なリズムを構築することができる。連続８拍の表示により、小節単位でずらす操作も容易に認識して可能となる。また連続８拍の表示により、表示されていない拍への移行および小節単位でずらす操作も容易に認識しながら、多彩な拍(音源)を選択して多彩なリズムを構築するジャグリングパフォーマンスが可能となる。更にマスター拍位置表示によりプレーヤー１０ａ、１０ｂのリズムのズレを極力抑え、テンポをキープしたジャグリングパフォーマンスが可能となる。

次に、図１３を参照し、ダイレクトモード（第２表示モード）における音とばし操作について説明する。同図（ａ）に示すように、ジョグダイヤル表示部２２０の中央に表示されたモード切替ボタン２５７を押下（タッチ）すると、モード切替ボタン２５７が着色表示し、モードがダイレクトモードに切り替わる。スクラッチ操作などの特殊操作を実施可能な特殊操作モードに対して、このダイレクトモードにおいては、タッチして再生停止およびスクラッチ操作などが無効となる。ただしジョグダイヤル１２ａの回転はロックされない。同図（ｂ）に示すように、ダイレクトモードにおいて、任意のリング画像２５６ａの任意のドット２５９をタッチすると、楽曲の再生位置がタッチしたリング画像２５６ａのドット２５９に対応する位置に変化して、テンポと拍をキープしながらそのまま再生が開始される（位置指定部）。なお、特殊操作モードにおいては、任意のドット２５９上のタッチによる音とばし再生の再生制御機能は無効となる。

なお、モードをダイレクトモードに切り替えた状態で、予め設定したＣＵＥポイント２６０付近をタッチすると、楽曲の再生位置はＣＵＥポイント２６０が示す位置に飛んでポーズ状態となり、その後、プレイ／ポーズボタン１８ｄを押下すると、ＣＵＥポイント２６０が示す楽曲の位置から再生が開始される。なお、再生中にＣＵＥボタン１８ｃを押下することによって、ＣＵＥポイント２６０をタッチしたときと同様の操作が行える構成としてもよい。一方、ＨＯＴＣＵＥポイント２６１付近をタッチすると、楽曲の再生位置がＨＯＴＣＵＥポイント２６１が示す楽曲の位置に飛んでそのまま再生が開始される。これによれば、音とばし操作を行うための所定ポイントを容易に把握し正確に飛ばす事ができる。またＨＯＴＣＵＥで飛ばした場合、テンポと拍をキープして連続再生する。更に１曲中のＣＵＥ、ＨＯＴＣＵＥポイントに飛ばすだけでなくプレイリスト中の任意の曲に設定されたＣＵＥ、ＨＯＴＣＵＥポイントに飛ばす事も可能である。

なお、ＣＵＥポイント２６０およびＨＯＴＣＵＥポイント２６１は、操作者によって予め設定が可能である。実際には、ジョグダイヤル１２やマニュアルサーチボタン１８ｂを用いて任意のポイント探し、当該ポイントでＣＵＥボタン１８ｃを押下することで、ＣＵＥポイント２６０を設定可能とすることができる。また、ＨＯＴＣＵＥレコードモードにおいて、ジョグダイヤル１２やマニュアルサーチボタン１８ｂを用いて任意のポイント探し、当該ポイントで不図示の操作子を押下することで複数のＨＯＴＣＵＥポイント２６１を設定可能とすることができる。またダイレクトモードにおいてはあらかじめ設定した、ＣＵＥ、ＨＯＴＣＵＥポイントだけでなく、再生中にプレイリスト中の任意の楽曲の２５６aの任意の位置を押下する事によって、テンポと拍をキープして連続再生する事が可能である。

上記の音とばし操作によれば、ダイレクトモード切替ボタン表示がジョグダイアル１２の中央に配置してある事によりスクラッチ操作後、直近のボタンを押し、モードを切り替え任意の楽曲、位置に飛ばして再度モード切替ボタンを押してスクラッチ操作を継続するなどの複雑なパフォーマンスを目線もそらさずに行う事ができる為、操作のタイムラグを最小限に抑えることができる。

次に、図１４および図１５を参照し、選曲操作について説明する。本実施形態では、２つのプレーヤー１０ａ、１０ｂを用いた操作について説明する。図示のように、ミキサー装置２０に接続されたプレーヤー１０ａ、１０ｂが、任意の楽曲を再生し、プレーヤー１０ａが出力対象となっている状態において、ミキサー装置２０のクロスフェーダー２７を操作して出力対象をプレーヤー１０ｂに所望のタイミングで切り替える（図１４（ａ）参照）。このように、プレーヤー１０ａから再生音が出力されていない状態で、プレイリスト表示領域２０１に表示された複数のプレイリストの中から、所望の（例えば、「Ｅ」）プレイリストを、ドラッグ＆ドロップにより、スタンバイプレイリスト表示領域２０１ａにいったん移動させてから、ジョグダイヤル表示部２２０内のジャケット画像２５４が表示されている位置に移動させる（図１４（ｂ）参照）。図示のように、「Ｅ」のプレイリストのジャケット画像２５４がジョグダイヤル表示部２２０内に表示され、「Ｅ」のプレイリストに含まれた曲名２５５（図示省略）が表示される。さらに、トラックサーチボタン１８ａおよびマニュアルサーチボタン１８ｂを用いて、任意の楽曲を選曲し、任意のポイントに再生位置を移動させる。そして、プレーヤー１０ａにおいて任意のポイントに再生位置を移動させた状態で（図１５（ｃ）参照）、ミキサー装置２０のクロスフェーダー２７を操作して出力対象をプレーヤー１０ａに切り替える（図１５（ｄ）参照）。

上記の選曲操作によれば、直感的なドラッグ＆ドロップ操作で、迅速に再生するプレイリストおよび楽曲を切り替えることができる。このため、その他の操作を絡めた音響パフォーマンスを行う際に利便性がよい。

次に、図１６を参照して、立ち上がり調整操作および立ち下がり調整操作について説明する。図１６に示すように、立ち下がり調整つまみ１０２を時計回り方向に回転させると、立ち下がり再生画像２５８ｂの頂角が増加し、立ち下がり画像２５８ｂの面積が増加する。この操作に伴って、実際の再生開始時の出力音のカーブが急となるように設定される。同様に、立ち上がり調整つまみ１０３を時計回り方向に回転させると、立ち上がり再生画像２５８ａの頂角が減少し、立ち上がり再生画像２５８ａの面積が減少する。この操作に伴って、実際の再生終了時の出力音のカーブが緩く設定される。上記の立ち上がり調整操作および立ち下がり調整操作によって設定した場合、ジョグダイヤル本体１２ａを押下して再生を一時停止させるまでの、再生速度の減速期間（立ち下がり時間）が長くなり、ジョグダイヤル本体１２ａの押下を終了して通常再生を再開させるまでの再生速度の加速期間（立ち上がり時間）が短くなる。

上記の立ち上がり調整操作および立ち下がり調整操作によれば、立ち上がり再生画像２５８ａおよび立ち下がり再生画像２５８ｂの変化によって、視覚的に立ち下がり時間および立ち上がり時間を把握することができる。すなわち、この立ち下がり時間および立ち上がり時間を考慮して、スクラッチ操作等のパフォーマンスを行う際に利便性が良い。

また、本実施形態のプレーヤー１０は、各種操作子を操作すると、ジョグダイヤル表示部２２０において当該操作子の操作結果を示す画像上のポイントと当該操作子とが線で結んで表示される（関連付け表示）。図１６では、立ち下がり調整つまみ１０２および立ち上がり調整つまみ１０３を操作した場合を例示している。その他の操作子の関連付け表示については、図１７に示している。

図１７に示すように、プレイ／ポーズボタン１８ｄを押下すると、ボタン上に一次停止中の音の波形画像が表示され、プレイ／ポーズボタン１８ｄと再生位置画像２５１上のポイントとをつなぐ線画像が表示される。同様に、ＣＵＥボタン１８ｃを押下すると、ボタン上にＣＵＥポイント２６０の音の波形画像が表示され、ＣＵＥボタン１８ｃとＣＵＥポイント２６０とをつなぐ線画像が表示される。また、トラックサーチボタン１８ａが押下されると、ボタン上にトラックサーチ状態を示す画像が表示され、トラックサーチボタン１８ａと所定の楽曲の曲名２５５とをつなぐ線画像が表示される。また、マニュアルサーチボタン１８ｂが押下されると、ボタン上にサーチ状態を示す波形画像が表示され、マニュアルサーチボタン１８ｂと再生済み画像２５３上の再生ポイントとをつなぐ線画像が表示される。さらに、この場合、リング画像上に、所定のサーチ方向に向かう矢印画像２５３ａが表示される。

図１７に示すように、トルク調整つまみ１０１が操作されると、トルク調整つまみ１０１とジョグダイヤル表示部２２０の中心部分のポイントとをつなぐ線画像が表示される。なお、トルク調整つまみ１０１がジョグダイヤル本体１２ａの回転トルクを重くする方向に操作された場合、回転トルクの変化を視覚的に表現するために、表示領域を囲む円形の枠画像２７０の色を変化させる。例えば、枠画像２７０の色が濃いとトルクが重い、薄いとトルクが軽いなど、枠画像２７０の色の濃さでトルクを表現する。一方、テンポスライダー１０４が操作されると、テンポスライダー１０４とジョグダイヤル表示部２２０の中心部分のポイントとをつなぐ線画像が表示される。さらに、この場合、テンポスライダー１０４が再生中の楽曲のテンポを速くするように操作された場合、リング画像２５６ｂが拡大する様子が一時的に表示される。一方、テンポスライダー１０４が再生中の楽曲のテンポを遅くするように操作された場合、リング画像２５６ｂが外周から縮小する様子が一時的に表示される。図示においては、テンポスライダー１０４が再生中の楽曲のテンポを速くするように操作された場合を示している。

次に、図１８ないし図２１を参照し、プレーヤー１０のメイン表示部２１０に表示される楽曲構成表示画面２１０Ｂについて、詳細に説明する。図１８は、楽曲構成表示画面２１０Ｂを示す拡大図である。図示のように、楽曲構成表示画面２１０Ｂは、楽曲構成表示画像２１２、エフェクト画像２１１および表示切り替えボタン２９２を表示する。

楽曲構成表示画像２１２は、解析処理部５２の解析結果に基づいて、再生中の楽曲について、楽曲の開始（ｓｔａｒｔ）から終了（ｅｎｄ）までの楽曲データを、周波数帯域ごと且つ１領域が１拍（時間帯域）ごとにマトリクス状に分割表示する。すなわち、図示のように、楽曲の最初の１拍に対応する時間帯域（１）における周波数帯域（「Ｈｉ」）は、分割領域２２１を示し、時間帯域（１）における周波数帯域（「Ｍｉｄ」）は、分割領域２２２を示し、時間帯域（１）における周波数帯域（「Ｌｏｗ」）は、分割領域２２３を示している。なお、楽曲構成表示画像２１２は、所定の表示面積を有し、楽曲全体が収まるように時間帯域の表示面積が決定される。すなわち、再生する楽曲のテンポの速さ、および再生時間等によって、時間帯域の表示面積は変化する。

また、楽曲構成表示画像２１２は、各分割領域を塗りつぶした色の違いによって、当該分割領域に対応する音楽データの音量レベルを表現している。なお、図１８において、細かい斜線表示がされている分割領域の音量レベルは「高」を示し、粗い斜線表示がされている分割領域の音量レベルは「中」を示し、白抜き表示がされている分割領域の音量レベルは「低」を示している。すなわち、図１８を参照すれば、分割領域２２１の音量レベルは「低」であり、分割領域２２２の音量レベルは「中」であり、分割領域２２３の音量レベルは「高」であることがわかる。なお、請求項における「音量レベルに応じた装飾」とは、本実施形態において音量レベルに応じて各分割領域を異なる色で表示することをさす。なお、音量レベルを表現する方法は、色の違いに限られるものではく、レベルの違いが認識可能であれば異なる表示形態を用いても良い。

また、楽曲構成表示画像２１２は、楽曲データのうちの再生済み部分を示す帯状再生済み画像２２４を表示する。図１８に示すように、帯状再生済み画像２２４は、再生済みの時間帯域における周波数領域「Ｈｉ」の一部、「Ｍｉｄ」の全部、および「Ｌｏｗ」の一部を覆う帯状画像である。なお、帯状再生済み画像２２４は半透過性を有し、再生済み部分の音量レベル表示が確認可能となっている。

このように、楽曲構成表示画像２１２により、拍ごとに３つの周波数帯域の音量レベルを色の違いで示すことにより、操作者は、直感的に楽曲の構成を把握することができる。例えば、図１８の符号２２８に示す部分は、周波数帯域の「Ｈｉ」、「Ｍｉｄ」、および「Ｌｏｗ」の全帯域における音量レベルが連続して「高」であるため、楽曲の盛り上がり部分であることが推測できる。

図１８および図１９に示すように、エフェクト画像２１１は、再生中の楽曲に付与するための操作部として機能するものである。エフェクト画像２１１は、再生中の楽曲に付与可能なエフェクトの種類を示す複数のエフェクトアイコン２２５と、選択中のエフェクトの種類を表示する選択エフェクトアイコン２２６と、配置したエフェクトを削除するためのゴミ箱アイコン２２７と、を有している。

各エフェクトアイコン２２５の示すエフェクトの種類は、「ＤＥＬＡＹ（ディレイ音を出力）」、「ＧＡＴＥ（スレッショルドレベルより低い入力音をカットする）」、「ＲＯＬＬ（入力音を繰り返し出力）」、「ＦＬＡＮＧＥＲ（フランジャー効果を付与）」、「ＰＡＮ（出力音を左右に振る）」、「ＦＩＬＴＥＲ（フィルター周波数を変化させる）」、「ＲＥＶＥＲＢ（残響効果を付与）」、および「ＥＣＨＯ（ディレイ音を減衰させながら出力）」である。その他、「ＰＨＡＳＥＲ（フェイザー効果を付与）」や「ＴＲＡＮＳ（拍にあわせて出力音をカット）」など、他のエフェクトを配置してもよい。なお、エフェクト画像２１１において、環状に並べて表示されたエフェクトアイコン２２５の種類や配置は、操作者が設定可能であることが好ましい。

図１９に示すように、操作者は、所望のエフェクトアイコン２２５を選択し、
楽曲構成表示画像２１２の所望の位置に配置することで、エフェクト操作を行うことができる。本実施形態では、所望のエフェクトアイコン２２５をドラッグ＆ドロップして配置する。なお、図示は省略したが、実際には、エフェクトアイコン２２５を直接、楽曲構成表示画像２１２に貼り付ける前に、エフェクトアイコン２２５をセンターエリア（図示では選択エフェクトアイコン２２６が表示されているエリア）にドラッグ＆ドロップし、エフェクトパラメータ（時間、レベル）を設定する。例えば、センターエリアを横方向にスライドすることにより時間パラメーターを設定し、センターエリアを縦方向にスライドすることによりＬＥＶＥＬ／ＤＥＰＴＨパラメーターを設定する。なお、本実施形態では、１つの分割領域に複数のエフェクトアイコン２２５を配置することも可能である。また、配置したエフェクトアイコン２２５をゴミ箱アイコン２２７にドラッグ＆ドロップすることで、一度配置したエフェクトアイコン２２５を削除することができる。その後、異なるエフェクトアイコン２２５を再配置することで、エフェクト配置を修正することも可能である。プレーヤー１０は、楽曲構成表示画像２１２上のエフェクトアイコン２２５の配置にしたがって、楽曲の所定の時間帯域における所定の周波数帯域に対応した部分に、所定のエフェクト処理を施して楽曲を再生する。

これにより、操作者は、楽曲の再生前または再生中に、直感的に楽曲の構成を把握したうえで、所望のエフェクト操作を行うことができる。例えば、楽曲の音量レベルが高い部分を把握して所望のエフェクトをかけたり、周波数帯域に合ったエフェクトを当該周波数帯域にかけたりすることができる。また、エフェクトアイコン２２５の配置という簡単な操作でエフェクト操作を行うことができるため、楽曲の再生中に即興的な音響パフォーマンスを行う際に利便性が良い。なお、一般的にエフェクトを頻繁にかける周波数帯域を示す表示幅（図示において上下方向の幅）を長くし、該当する分割領域の面積を大きくしても良い。これにより、エフェクトアイコン２２５を配置する面積を増やすことができる。

図２０は、メイン表示部２１０における楽曲構成表示画像２１２（通常楽曲特徴量表示）の一部を拡大表示（拡大楽曲特徴量表示）した場合を示している。同図（ａ）に示すように、楽曲構成表示画像２１２の任意の位置（基準位置２３５となる）をピンチアウト（画面上に２本の指でタッチし、押し広げるような動作をすること）すると、当該画像上に拡大表示画像２１３が表示される。拡大表示画像２１３は、基準位置２３５の拍の前後１拍分に対応する長さを有し、各分割領域の面積が楽曲構成表示画像２１２に比べて大きく表示される。同図（ｂ）に示すように、拡大構成画像２１２上の分割領域にエフェクトアイコン２２５を配置することができる。なお、同図（ｃ）に示すように、拡大表示画像２１３は、ドラッグすることにより楽曲構成表示画像２１２上を移動可能である。このようにして、楽曲の任意の位置を拡大表示させることができる。なお、拡大表示画像２１３は一定時間たつと消去されてもよいし、もしくは、ピンチイン画面上に２本の指でタッチし、つまむような動作をすること）で強制消去してもよい。

なお、楽曲構成表示画像２１２外に拡大表示画像２１３を表示させるための専用ボタンを設けてもよい。また、拡大表示画像２１３を楽曲構成表示画像２１２外に表示させ、拡大表示画像２１３の表示内容をスクロール可能としてもよい。

上記の拡大表示画像２１３によれば、各分割領域が大きく表示されるため、テンポの速い楽曲である場合や、１つの分割領域に複数のエフェクトアイコン２２５を配置したい場合に利便性が良い。なお、上記のように拡大表示画像２１３にエフェクトアイコン２２５を配置可能であり、拡大表示画像２１３に配置されたものと同様の種類のエフェクトアイコン２２５が、楽曲構成表示画像２１２の同様の位置に配置される。

なお、実際には、一般的な数分間の長さを有する楽曲を表示する場合、図２１（ａ）に示すように、１拍に相当する分割領域は非常に狭い表示面積となる。よって、エフェクトアイコン２２５が配置されると、自動的に小節単位でエフェクトが付与される方が良い。つまり、同図（ｂ）参照に示すように、ラフ配置されたエフェクトアイコン２２５の配置に基づいてエフェクトを適用する領域をオート補正する。これにより、狭い分割領域にエフェクトアイコン２２５をラフ配置しても、適切なエフェクトプレイを行うことができる。

例えば、ＤＪが短時間でエフェクト配置をしなければならない状況において、楽曲全体の構成を確認した後、とりあえずラフにエフェクト配置した場合でも、エフェクトのタイミングがずれずに、出音を無難にまとめることができる。つまり、エフェクト配置の時間に余裕があれば更に拡大表示して微調整すればよいが、時間が無くエフェクトをラフに配置して、配置が微妙にずれた場合でもエフェクトのタイミングのずれを引き起こさない為に有効である。オート補正したエフェクト範囲は無難な出音にはなるものの、更にＤＪがこだわりを持って微妙にエフェクト適用範囲を変えたい場合は、楽曲構成表示画像２１２の変更したい位置をピンチアウトし、エフェクトアイコン２２５を配置したりゴミ箱アイコン２２７にドラッグ＆ドロップすることで、微調整することもできる。

上記のプレーヤー１０およびこれを備えた再生ステムＳＹによれば、操作部であるジョグダイヤル１２上に、再生状態（再生拍位置）を表示させることによって、操作性が向上し、任意の拍へ移行して多彩な音を駆使したスクラッチおよびリズムキープが必要となるスクラッチ等の高度な操作を初心者でも容易に行うことができる。また、メイン表示部２１０によって楽曲の構成を把握しながら即興的にエフェクトを配置することができる。よって、エフェクト操作、スクラッチ操作、その他の操作を組み合わせて個性的な音響パフォーマンスを容易に行うことができる。

なお、本実施形態では、ジョグダイヤル表示部２２０と同面積を有し、同心で配置されたジョグダイヤル本体１２ａ、再生速度を調節する操作（スクラッチ操作）を行うための操作子としたが、ジョグダイヤル表示部２２０のサイズは操作子となるジョグダイヤル本体１２ａよりも小さくても良い。また、この操作子は別の領域に配置してもよい。また、スクラッチ操作を行うための操作子は、プレーヤー１０とは別体の装置であっても良い。

［第２実施形態］
以下、図２２ないし図２４を参照し、本発明の他の実施形態について説明する。なお、本実施形態において、第１実施形態と同様の構成については、同様の符号を付し説明を省略する。

図２２は、本実施形態のプレーヤー１０の平面図である。図示のように、本実施形態のプレーヤー１０は、ジョグダイヤル表示部２２０の表示モードを切り替えるモード切替つまみ３００を備えている。モード切替つまみ３００は、ジョグダイヤル表示部２２０の表示モードを、再生位置画像２５１や拍位置画像２５２等により再生状態を表示する第１プレイモード（スクラッチ操作、拍位置表示）と、再生位置画像２５１や拍位置画像２５２等の再生状態の表示に加えて、再生中の楽曲の楽曲構成表示画像２１２等により楽曲の構成を表示する第２プレイモード（エフェクト設定、楽曲特徴量表示および拍位置表示（重畳表示））および第３プレイモード（スクラッチ操作、楽曲特徴量表示および拍位置表示（重畳表示））と、の間で切り替える。なお、ジョグダイヤル１２は第１プレイモードおよび第３プレイモードでは回転可能とし、第２プレイモードでは操作性を考慮して回転はロックされる。本実施例では、通常のスクラッチ操作における第１プレイモード（ノーマルモード）、エフェクトの設定と配置に特化した第２プレイモード（エフェクト設定モード）、設定したエフェクトとスクラッチ操作の両者が有効な第３プレイモード（エフェクト＆スクラッチモード）をモード切替つまみ３００で切換可能である実施形態を示している。なお、エフェクトの設定と配置に特化した第２プレイモード（エフェクト設定モード）において、再生位置画像２５１や拍位置画像２５２等の再生状態の表示を省略し、再生中の楽曲の楽曲構成表示画像２１２等により楽曲の構成を表示のみを行ってもよい。また、他のプレイモードを切換可能なように設定してもよい。

図２２は、ジョグダイヤル表示部２２０の表示モードが第１プレイモードに切り替えられている状態を示している。この場合、ジョグダイヤル１２は、第１実施形態度と同様の表示を行い、同様の操作が可能となっている。

図２３は、ジョグダイヤル表示部２２０の表示モードが第２プレイモード（エフェクト設定モード）に切り替えられている状態を示している。図示のように、本モードにおいて、ジョグダイヤル表示部２２０は、再生位置画像２５１、８つの拍位置画像２５２、再生済み画像２５３、および再生中のプレイリストのジャケット画像２５４に加えて、環状の楽曲構成表示画像２１２と、楽曲構成表示画像２１２に囲まれた中央部分に配置されたエフェクト画像２１１と、を表示する。楽曲構成表示画像２１２は、第１実施形態における帯状の楽曲構成表示画像２１２を、環状に変形させたものである。すなわち、３つの周波数帯域が内径の異なる環状の領域で示され、且つ、各拍位置が中央から放射線状に伸びる線画像で示され、周波数帯域および拍位置で区切られた時間帯域で分割された分割領域は、複数の扇状の領域で表示されている。本実施形態では、環状の楽曲構成表示画像２１２において、外側から「Ｈｉ」、「Ｍｉｄ」、「Ｌｏｗ」の順に周波数帯域が配置されている。なお、複数の扇状の分割領域は、第１実施形態と同様に、１領域が、１拍を示す時間帯域を上記の周波数帯域で分割されたものとし音量レベルに応じて異なる色で表示されている。また、楽曲構成表示画像２１２は、表示領域の下端を０度としたとき、１８０度の位置を始点として楽曲構成表示画像２１２の形状に沿って表示される帯状の再生済み画像２２４を表示する。なお、各周波数帯域を分割する径方向の幅は、各周波数帯域によって変化させても良い。例えば、楽曲構成表示画像２１２の内周側の分割領域の径方向の長さは、楽曲構成表示画像２１２の外周側における分割領域の径方向の長さよりも長くなるように設定してもよい。これによれば、内周側の分割領域と外周側の分割領域との面積をある程度均一に保つことができる。また、拍位置表示２５２と再生位置表示２５１も重ねて表示させる。

操作者は、ジョグダイヤル表示部２２０の中央に表示されたエフェクト画像２１１から、所望のエフェクトアイコン２２５を選択し、中央のエリアにドラッグし、タイムつまみとレベルデプスつまみを回してエフェクトのパラメーターを調整後、周波数帯域エリアにエフェクトアイコン２２５を配置する環状の楽曲構成表示画像２１２にエフェクトアイコン２２５を配置する。なお、本モードにおいてジョグダイヤル本体１２ａの回転操作（ジョグダイヤル本体１２ａの回転をロックする）、停止操作が無効となる。ただし、再生中は拍位置表示２５２が回転し、プレイボタン１８ｄやＣＵＥボタン１８ｃを押して再生を停止、ポーズさせた場合は拍位置表示２５２が停止する事で、再生位置表示２５１も併せて、再生状態は認識できる。また、立ち下がり調整つまみ１０２は、エフェクトタイムの設定用に、立ち上がり調整つまみ１０３は、レベルデプス機能に切り替わる（図示省略）。

図２４は、ジョグダイヤル表示部２２０の表示モードが第３プレイモードに切り替えられた状態を示している。図示のように、本モードにおいて、楽曲構成表示画像２１２上に、再生位置画像２５１、８つの拍位置画像２５２、再生済み画像２５３、および再生中のプレイリストのジャケット画像２５４が重ねて表示されるが、図２３のエフェクト設定モードと識別できるように、例えば楽曲構成表示画像２１２の色調を変える。例えば、第２プレイモード（エフェクト設定モード）では楽曲構成表示画像２１２の色調を赤系で表示し、第３プレイモード（エフェクト＆スクラッチモード）では楽曲構成表示画像２１２の色調を紫系で表示する。本モードにおいては、第１プレイモードと同様にジョグダイヤル１２の回転操作が可能であり、第１実施形態に記載したスクラッチプレイを含む各種操作を行うことができる。但し、楽曲構成表示２１２およびエフェクト画像２１１が表示されるが、エフェクト配置操作は無効となっている。本モードによれば、楽曲の構成やエフェクトの配置を把握しつつ、例えばスクラッチプレイを行うことができる。

また、第１実施形態と同様に、楽曲構成表示画像２１２の一部を拡大表示させる構成としてもよい。この場合、拡大表示された画像は、扇形であっても矩形であっても良い。

本実施形態によれば、表示面積の広いジョグダイヤル表示部２２０に、楽曲の構成を示す表示を行うため、エフェクトアイコン２２５の配置がしやすいというメリットがある。

なお、上記の各実施形態では、本発明の表示装置をＤＪ機器として用いられるプレーヤーに適用して例示したが、パーソナルコンピューターやＤＪコントローラ等にも適用可能である。

なお、表示制御部５３は、円周方向に楽曲の所定数（８拍分）の拍位置画像２５２を等間隔（１周等分割）で表示する拍数固定表示と、円周１周分を所定時間（アナログレコード１回転である６０／３３秒分）として、所定時間分の拍位置画像２５２を表示する時間固定表示と、の間で表示を切り替え可能としても良い。

また、エフェクトアイコン２２５を配置した楽曲構成表示画像２１２における楽曲の構成および楽曲におけるエフェクトの配置をログとして内部メモリまたは外部メモリに記憶してもよい（エフェクトログ機能）。これによれば、記憶したデータを、後日のエフェクト配置の参考にしたり、エフェクト操作初心者の教材として活用することができる。

なお、上記の各実施形態に示した、再生システムＳＹの各構成要素をプログラムとして提供することも可能である。また、そのプログラムを記憶媒体（図示省略）に格納して提供することも可能である。記録媒体としては、ＣＤ−ＲＯＭ、フラッシュＲＯＭ、メモリカード（コンパクトフラッシュ（登録商標）、スマートメディア、メモリースティック等）、コンパクトディスク、光磁気ディスク、デジタルバーサタイルディスクおよびフレキシブルディスク等を利用することができる。

また、上述した実施例によらず、再生システムＳＹの装置構成や処理工程等について、本発明の要旨を逸脱しない範囲で、適宜変更も可能である。

１０：プレーヤー １２：ジョグダイヤル １２ａ：ジョグダイヤル本体 ５２：解析処理部 ５３：表示制御部 ５４：再生制御部 ５５：楽曲処理部 ５６：楽曲出力部 １００：操作部 １０２：立ち下がり調整つまみ １０３：立ち上がり調整つまみ ２００：表示部 ２１０：メイン表示部 ２１１：エフェクト画像 ２１２：楽曲構成表示画像 ２１３：拡大表示画像 ２２０：ジョグダイヤル表示部 ２２４：帯状再生済み画像 ２５１：再生位置画像 ２５２：拍位置画像 ２５３：再生済み画像 ２５６：リング画像群 ２５６ａ：リング画像 ２５７：モード切替ボタン ２５８ａ：立ち上がり再生画像 ２５８ｂ：立ち下がり再生画像 ２５９：ドット ２６０：ＣＵＥポイント ２６１：ＨＯＴＣＵＥポイント ２６２：マスター拍位置画像 ＳＹ：再生ステム

Claims (5)

1. 表示部と、
   楽曲を、その解析結果である楽曲特徴量に基づいて、周波数帯域ごと且つ前記楽曲の拍位置に応じた時間帯域ごとに分割し、各分割領域を、該当する周波数帯域および時間帯域の音量レベルに応じた装飾を施して前記表示部に表示させる楽曲特徴量表示を行う表示制御部と、
   前記各分割領域に、エフェクトの配置および種類を指定するための操作部と、を備え、
   前記表示制御部は、前記操作部の操作にしたがって、前記各分割領域に前記エフェクトの有無および種類を表示させることを特徴とする表示装置。
2. 前記各分割領域に配置された前記エフェクトの種類に応じて、前記楽曲の該当する周波数帯域および時間帯域に対しエフェクト処理を行う楽曲処理部をさらに備えたことを特徴とする請求項１に記載の表示装置。
3. 前記楽曲処理部は、前記エフェクトの配置に基づいて、エフェクト処理を行う前記楽曲の周波数帯域および時間帯域を補正することを特徴とする請求項２に記載の表示装置。
4. コンピューターが、
   楽曲を、その解析結果である楽曲特徴量に基づいて、周波数帯域ごと且つ前記楽曲の拍位置に応じた時間帯域ごとに分割し、各分割領域を、該当する周波数帯域および時間帯域の音量レベルに応じた装飾を施して表示部に表示させる表示制御ステップと、
   前記各分割領域への、エフェクトの配置および種類の指定を受け付ける操作ステップと、を実行し、
   前記表示制御ステップは、前記操作ステップの操作にしたがって、前記各分割領域に前記エフェクトの有無および種類を表示させることを特徴とする表示方法。
5. コンピューターに、請求項４に記載の表示方法を実行させるためのプログラム。

Images