JP6705409B2 - 楽曲再生制御装置、楽曲再生制御方法及び楽曲再生制御プログラム - Google Patents

Description

本発明は、楽曲再生制御装置、楽曲再生制御方法及び楽曲再生制御プログラムに関するものである。

従来、各種の操作情報を光や振動といった手法でユーザに報知するものが知られている。
例えば、特許文献１には、電子楽器において、ユーザが演奏を誤ると当該誤演奏に応じて楽器本体と通信可能に接続された椅子体が振動するように構成することが開示されている。
このような手法によれば、演奏者が自らの演奏の誤りを触覚によって認識することができる。

ところで、近時ＤＪ（Disc Jockey）体験を手軽に楽しむことのできるＤＪコントローラー等の楽曲の再生制御を行う装置が開発されている。
こうしたＤＪコントローラー等により楽曲のリミックス作業やリミックスした楽曲の音声出力を行う場合には、曲の繋ぎ目が不自然とならないように、繋ぎ合わせる楽曲のピッチ等を合わせるピッチ合せが必要となる。
具体的には、再生されているターンテーブルの音をモニタリング用のスピーカーで出力しつつ、もう一方のターンテーブルの音をヘッドホンで出力し、それぞれの楽曲のピッチや出だしの拍のタイミングを合せる。

このようなピッチ合せは、ＤＪが複数の楽曲を自然に切り替えていく際に必須の基本的な技術であり、ＤＪの醍醐味でもある。
しかし、ピッチ合せは、複数の楽曲を同時に聴きながら各楽曲のピッチを正確に聞き分けてこれを調整するというかなり高度な技術であり、ＤＪ初心者等には難しくピッチ合せが上手くできずに挫折してしまうことも多い。
そこでピッチ合せに不慣れなユーザのために、特許文献１の電子楽器のようにユーザの操作のガイドする手段を装置に搭載することが望まれる。

特開２００８−３９８５６号公報

しかしながら、ＤＪコントローラー等の楽曲再生制御装置は、電子楽器において演奏を誤った場合のようにピッチがずれた状態で楽曲再生が行われたときに報知してもユーザは何を誤ったのかを認識することが難しく、正しくピッチ合せを行う技術を習得する助けにはならない。
このため、ユーザは結局いつまでも上手くピッチ合せを行うことができずに挫折してしまうというおそれがある。また、ピッチ合わせ以外の楽曲の再生を制御する操作についても同様であり、現在の再生状態を的確に認識して必要な指示操作を行うことは難しかった。

本発明は以上のような事情に鑑みてなされたものであり、再生されている楽曲の再生状態を的確に認識して必要な指示操作を行うことのできる楽曲再生制御装置、楽曲再生制御方法及び楽曲再生制御プログラムを提供することを目的とするものである。

前記課題を解決するために、本発明の楽曲再生制御装置は、ユーザが楽曲の再生の周期または位相の変化を指示する操作子と、前記操作子に物理的な動きを生じさせる駆動部と、前記操作子の操作に応じた前記楽曲の再生の周期または位相の変化に応じて、前記駆動部による前記操作子の動き状態を変化させる制御部と、を備えていることを特徴としている。

本発明によれば、再生されている楽曲の再生状態を的確に認識して必要な指示操作を行うことができる。

本実施形態における楽曲再生制御装置と端末装置の概略構成を示す模式的な構成図である。 本実施形態に係る楽曲再生制御装置と端末装置の制御構成を示した要部ブロック図である。 操作子と振動発生手段との位置関係を示す説明図である。 本実施形態における楽曲再生制御処理を示すフローチャートである。 クロスフェーダー電圧値（ＶＣＦ）と各楽曲の再生状況との関係を模式的に示した説明図である。

図１から図５を参照しつつ、本発明に係る楽曲再生制御装置の一実施形態について説明する。
なお、以下に述べる実施形態には、本発明を実施するために技術的に好ましい種々の限定が付されているが、本発明の範囲を以下の実施形態及び図示例に限定するものではない。

《全体構成》
図１は、本実施形態における楽曲再生制御装置であるＤＪコントローラー１とこれに接続された端末装置３の模式的な構成図を示したものである。
本実施形態では、楽曲の再生を制御するＤＪコントローラー１と楽曲音源データ等を備える端末装置３とが接続されて、楽曲再生システムが構成されている。

《楽曲再生制御装置の構成》
上述のように、本実施形態では、楽曲再生制御装置がＤＪコントローラー１である場合を例として説明する。
ＤＪコントローラー１は、ターンテーブルを有する２つのデッキとミキサーとを備える従来のアナログ方式のＤＪテーブルと同様の機能を１台の装置で実現できるようにした電子機器である。

図１に示すように、本実施形態のＤＪコントローラー１は、アナログ方式のＤＪテーブルにおける２つのデッキとミキサーに対応して、図１における左側にデッキ領域ＤＬ、右側にデッキ領域ＤＲを備え、これら２つのデッキ領域ＤＬ，ＤＲの間がミキサー領域Ｍａとなっている。
後述するように、ＤＪコントローラー１は、端末装置３から楽曲音源データの提供を受けて、複数の楽曲について同時並行的に再生に関する操作を行うことが可能となっており、デッキ領域ＤＬ、デッキ領域ＤＲはそれぞれ異なる楽曲に対応した領域となっている。
以下の説明では、デッキ領域ＤＬが楽曲Ａに対応し、デッキ領域ＤＲが楽曲Ｂに対応している例を示す。
なお、ＤＪコントローラー１には、図１に図示されているものの他、電源ボタンや各種の操作を行う操作ボタン等が設けられているが、本実施形態に特に関わらないものについては、図示及び説明を省略する。

デッキ領域ＤＬには、ユーザが楽曲の再生に関する操作を行う操作子として、楽曲Ａの再生タイミングを調整する左ピッチフェーダー１６が設けられている。
なお、本実施形態において、再生タイミングとは、再生ピッチ（楽曲の速さ、BPM（Beat Per Minute））や拍の位置等を含むものとする。ピッチのみでなく、拍の頭を揃えることで、スピーカ１４（図３参照）から出力（再生）させる楽曲を切り替えた際に違和感のない円滑な切り替えが可能となる。
左ピッチフェーダー１６は、楽曲Ａの再生タイミングを調整する摘み部１６１とこの摘み部１６１をスライド移動させるスライドレール１６２とを備えている。左ピッチフェーダー１６は、例えば、摘み部１６１を図１における上方向にスライドさせるほど再生ピッチが速く、下方向にスライドさせるほど再生ピッチが遅くなるようになっている。
また、デッキ領域ＤＲには、ユーザが楽曲の再生に関する操作を行う操作子として、楽曲Ｂの再生タイミングを調整する右ピッチフェーダー１７が設けられている。
右ピッチフェーダー１７は、楽曲Ｂの再生タイミングを調整する摘み部１７１とこの摘み部１７１をスライド移動させるスライドレール１７２とを備えている。右ピッチフェーダー１７は、左ピッチフェーダー１６と同様に、例えば、摘み部１７１を図１における上方向にスライドさせるほど再生ピッチが速く、下方向にスライドさせるほど再生ピッチが遅くなるようになっている。

さらに、ミキサー領域Ｍａには、複数の楽曲の音量バランスを調整する操作子として、クロスフェーダー１８が設けられている。
クロスフェーダー１８は、楽曲Ａと楽曲Ｂとの音量バランスをを調整する摘み部１８１とこの摘み部１８１をスライド移動させるスライドレール１８２とを備えている。
本実施形態では、クロスフェーダー１８は、例えば、摘み部１８１を図１における左方向にスライドさせるほど楽曲Ａの音量が大きく、楽曲Ｂの音量が小さくなり、摘み部１８１が左側端部まで移動すると楽曲Ａのみが出力される。
逆に摘み部１８１を右方向にスライドさせるほど楽曲Ｂの音量が大きく、楽曲Ａの音量が小さくなり、摘み部１８１が右側端部まで移動すると楽曲Ｂのみが出力されるようになっている。
また、摘み部１８１の位置がスライドレール１８２のほぼ中央部に位置するときは楽曲Ａと楽曲Ｂとがほぼ同じ音量で出力される。

図１に破線で示すように、左ピッチフェーダー１６、右ピッチフェーダー１７及びクロスフェーダー１８の近傍であってＤＪコントローラー１の内部には、それぞれ摘み部１６１，１７１，１８１に振動を伝える左用振動子１９、右用振動子２０、クロス用振動子２１が設けられている。
左用振動子１９、右用振動子２０、クロス用振動子２１は、操作子に動きを生じさせることで操作子の操作状況をユーザに報知する振動発生手段であり、本実施形態では、操作子に振動を生じさせるようになっている。左用振動子１９、右用振動子２０、クロス用振動子２１としは、例えばピエゾ素子（圧電素子）、モータ等の小型のアクチュエータ等の振動素子が好適に適用される。
本実施形態では、左用振動子１９、右用振動子２０、クロス用振動子２１は、操作子である左ピッチフェーダー１６、右ピッチフェーダー１７及びクロスフェーダー１８の摘み部１６１，１７１，１８１にそれぞれ振動を伝える。
左用振動子１９、右用振動子２０、クロス用振動子２１は、振動を伝えることができるものであればその構成は特に限定されず、上記に例示したもの以外でも適用可能である。
左用振動子１９、右用振動子２０、クロス用振動子２１は、後述する振動制御部１１３の制御にしたがって、左ピッチフェーダー１６及び右ピッチフェーダー１７によって調整される楽曲Ａ及び楽曲Ｂの再生ピッチ等の再生タイミングに対応して振動を発生させる。

図２は、クロスフェーダー１８とクロス用振動子２１の位置関係を模式的に示した説明図である。なお、図２では、クロスフェーダー１８及びクロス用振動子２１を例示しているが、右ピッチフェーダー１７と右用振動子２０、左ピッチフェーダー１６と左用振動子１９との位置関係もこれと同様である。
図２に示すように、クロスフェーダー１８の下方には基板５が設けられており、クロス用振動子２１は基板５上であってクロスフェーダー１８の下方位置又はその近傍に配置されている。
なお、クロス用振動子２１は、ユーザの指がクロスフェーダー１８の摘み部１８１に触れた際に指先に振動が伝わる位置に配置されていればよく、その具体的な配置は図示例に限定されない。

また、本実施形態では、振動発生手段である左用振動子１９、右用振動子２０、クロス用振動子２１は、ユーザが楽曲の再生に関する操作を行う際の操作子の動作方向、すなわち、左ピッチフェーダー１６、右ピッチフェーダー１７及びクロスフェーダー１８（これらの摘み部１６１，１７１，１８１）を動作させる方向とは異なる方向に左ピッチフェーダー１６、右ピッチフェーダー１７及びクロスフェーダー１８（これらの摘み部１６１，１７１，１８１）を振動させるようになっている。
具体的には、例えば、図２に示すように、操作子であるクロスフェーダー１８の摘み部１８１がＸＹ平面上で水平方向に移動するものである場合、振動発生手段であるクロス用振動子２１は、摘み部１８１をＸＹ平面に直交する高さ方向（縦方向）Ｚに振動させる。
このように、操作子（クロスフェーダー１８の摘み部１８１等）の動作方向と異なる方向に操作子を振動させることによって、振動の有無や強度等をユーザがよりはっきりと感じ取ることができる。

《制御構成》
図３は、ＤＪコントローラー１と端末装置３の要部制御構成を示すブロック図である。
図３に示すように、ＤＪコントローラー１は、制御部１１及び記憶部１２を備えている。
本実施形態において、制御部１１は、例えばＬＳＩやＣＰＵ等の処理ＩＣにより構成されている。
記憶部１２は、制御部１１が各種機能を実現するために必要な情報を記憶するものである。
なお、本実施形態では、端末装置３から楽曲のピッチ情報等の解析情報がアウトプットされている場合（すなわち、楽曲についての解析自体はＤＪコントローラー１側の制御部１１では行わない場合）を想定している。
また、ＬＳＩやＣＰＵ等の処理ＩＣには、マルチプレクサ等の各種機能が実装されている場合を想定している。
なお、制御部１１の構成はこれに限定されず、例えば、各種機能を複数のディスクリートＩＣ等に分散させて制御部１１を構成してもよい。この場合には、より安価に制御部１１を構成することができる。

本実施形態において、制御部１１は、再生状態特定部１１１、フェーダー情報検出部１１２、振動制御部１１３、音声出力制御部１１４として機能する。
再生状態特定部１１１は、楽曲に関する解析情報を取得する再生状態特定手段である。
本実施形態では、前述のように、端末装置３からＤＪコントローラー１に対して個々の楽曲についての楽曲音源データが送られるようになっており、再生状態特定部１１１は、この楽曲音源データに紐づけられている再生タイミング（再生ピッチ等）等を含む解析情報を取得する。
また、再生状態特定手段である再生状態特定部１１１は、ＤＪコントローラー１において楽曲を再生しているときに当該再生中の楽曲を解析して再生楽曲解析情報を取得する。例えば、再生状態特定部１１１は、再生中の楽曲の再生タイミングに関する情報を再生楽曲解析情報として取得する。
ユーザが操作子である左ピッチフェーダー１６、右ピッチフェーダー１７を操作すると、左ピッチフェーダー１６、右ピッチフェーダー１７の動作により、再生中の楽曲の再生タイミングは変化する。再生状態特定部１１１は、このような再生中の楽曲の再生タイミングの変化等を随時取得する。

なお、再生状態特定手段である再生状態特定部１１１が楽曲の再生状態を特定するには、再生箇所に対応して記憶されている楽曲データに含まれるメロディ、コード、小節などの情報を解析することによって再生状態を特定してもよく、また、再生箇所に対応して出力されるＭＩＤＩデータを解析することによって再生状態を特定してもよく、また、再生箇所に対応して出力される音声波形データを解析することによって再生状態を特定するようにしてもよい。

フェーダー情報検出部１１２は、左ピッチフェーダー１６、右ピッチフェーダー１７及びクロスフェーダー１８の操作状態情報、すなわち、摘み部１６１，１７１，１８１の位置等の情報を検出する。
例えば、クロスフェーダー１８は、可変抵抗を用いてスイッチングするものであり、フェーダー情報検出部１１２は、摘み部１８１を操作することにより変化する可変抵抗による分圧値（電圧値）をモニタリングすることにより、摘み部１８１の位置を検出する。
なお、以下の実施形態において、クロスフェーダー１８の分圧値（電圧値；ＡＤ値）を「ＶＣＦ」ともいう（図４及び図５参照）。

振動制御部１１３は、再生状態特定手段である再生状態特定部１１１によって取得された楽曲の再生状態に応じて振動発生手段である左用振動子１９、右用振動子２０、クロス用振動子２１にそれぞれ制御信号を出力し、その動作を制御する振動制御手段である。
本実施形態では再生中の楽曲の再生タイミングに関する情報が再生状態特定部１１１によって取得されるようになっており、振動制御部１１３は、この再生中の楽曲の再生タイミングに基づいて左用振動子１９、右用振動子２０、クロス用振動子２１の動作を制御する。
例えば、振動制御部１１３は、再生状態特定部１１１により取得された再生中の楽曲の再生タイミングに対応する周期で左用振動子１９、右用振動子２０、クロス用振動子２１により左ピッチフェーダー１６、右ピッチフェーダー１７及びクロスフェーダー１８（これらの摘み部１６１，１７１，１８１）に生じさせる振動の有無又は振動の強度を変化させる。すなわち、例えば、左ピッチフェーダー１６による操作される楽曲Ａの再生ピッチ等と右ピッチフェーダー１７による操作される楽曲Ｂの再生ピッチ等とが一致している場合には左用振動子１９、右用振動子２０を振動させないようにしたり、再生タイミングが大きくずれている場合には強く振動させたりしてもよい。

また、本実施形態では、操作子（例えばクロスフェーダー１８）は、同時並行的に再生される複数の楽曲の再生に関する操作を行うようになっており、振動制御部１１３は、複数の楽曲の再生タイミングに応じて操作子（例えばクロスフェーダー１８の摘み部１８１）を振動させるように振動発生手段（例えばクロス用振動子２１）を制御する。
さらに、本実施形態では、複数の楽曲の再生タイミングを各々独立して操作する複数の操作子（例えば左ピッチフェーダー１６、右ピッチフェーダー１７）を備えており、振動制御部１１３は、複数の操作子（例えば左ピッチフェーダー１６、右ピッチフェーダー１７）の各々を、各操作子の操作対象となる楽曲（例えば左ピッチフェーダー１６では楽曲Ａ、右ピッチフェーダー１７では楽曲Ｂ）の再生タイミングに対応する周期で振動させるように振動発生手段（例えば左用振動子１９、右用振動子２０）を制御する。
また、振動制御部１１３は、複数の楽曲における再生タイミングのずれの程度に応じて複数の左ピッチフェーダー１６、右ピッチフェーダー１７及びクロスフェーダー１８（これらの摘み部１６１，１７１，１８１）を振動させる強度、周期、方向の少なくとも１つを変化させるように左用振動子１９、右用振動子２０、クロス用振動子２１を制御してもよい。

また、複数の楽曲のうちの１つ（例えば楽曲Ａ）は再生音を出力した状態であり、他の楽曲（例えば楽曲Ｂ）は再生音をミュートした状態である場合、振動制御部１１３は、少なくとも、再生音をミュートした状態の楽曲（この例では楽曲Ｂ）の再生タイミングに関する情報に応じて操作子（例えば右ピッチフェーダー１７やクロスフェーダー１８）を振動させるように振動発生手段（右用振動子２０やクロス用振動子２１）を制御してもよい。
ＤＪが楽曲を切り替える際ピッチを正確に合わせる必要があるのは切り替えによって再生音が出力されることになる楽曲、すなわち現状ミュートした状態となっている楽曲（この例では楽曲Ｂ）の方であり、当該楽曲（この例では楽曲Ｂ）の再生タイミングに関する情報に応じて操作子（例えば右ピッチフェーダー１７やクロスフェーダー１８）を振動させることで、ユーザにピッチ合せに関する有効な注意喚起を行うことができる。
また、複数の楽曲の音量バランスを調整する操作子であるクロスフェーダー１８については、振動制御部１１３は、音量バランスの調整値に応じて、いずれの楽曲の再生タイミングに対応する周期で操作子（すなわち、クロスフェーダー１８）を振動させるかを変更するように振動発生手段（すなわち、クロス用振動子２１）を制御してもよい。
例えば、本実施形態の例では、楽曲Ａの音量が高い場合には、左ピッチフェーダー１６により再生ピッチが操作されている楽曲Ａの再生タイミングに対応する周期で操作子（すなわち、クロスフェーダー１８）を振動させ、楽曲Ｂの音量が高い場合には、右ピッチフェーダー１７により再生ピッチが操作されている楽曲Ｂの再生タイミングに対応する周期で操作子（すなわち、クロスフェーダー１８）を振動させるようにする。

音声出力制御部１１４は、音声出力部１３を制御して、スピーカ１４又はヘッドホン１５から楽曲を出力させるものである。
音声出力制御部１１４は、左ピッチフェーダー１６、右ピッチフェーダー１７及びクロスフェーダー１８による操作に応じて、音声出力部１３を介してスピーカ１４等から出力させる楽曲（本実施形態であれば楽曲Ａ又は楽曲Ｂ）、出力させる楽曲の再生ピッチや音量等を制御する。

本実施形態において、ＤＪコントローラー１は、インターフェース２２を介して端末装置３と接続される。
端末装置３は、例えば図１に示すようなパーソナルコンピュータである。
なお、端末装置３はこれに限定されず、携帯型の端末装置、タブレット型の端末装置等であってもよい。
端末装置３は、制御部３１、記憶部３２、ＤＪコントローラー１と接続されるインターフェース３３等を備えている。
なお、ＤＪコントローラー１と端末装置３との接続形式は特に限定されない。例えばＵＳＢ等を介した有線接続でもよいし、各種規格の無線通信によって接続されてもよい。

端末装置３の制御部３１は、記憶部３２のプログラム記憶領域３２１に記憶されているシステムプログラム３２２との協働により装置各部を統括制御する。
また、本実施形態では、プログラム記憶領域３２１に音楽再生プログラム３２３が記憶されている。音楽再生プログラム３２３はＤＪコントローラー１と連携して楽曲再生制御を行うためのアプリケーションプログラムである。
また、記憶部３２には、楽曲音源データや、各楽曲に紐づけられた楽曲の解析情報（例えば再生ピッチ等を含む再生タイミングに関するデータ等）等が格納された楽曲音源データ記憶領域３２４が設けられている。

本実施形態では、前述のように、楽曲の解析については端末装置３側の制御部３１で行われ、端末装置３の楽曲音源データ記憶領域３２４には、楽曲の音源データが各楽曲の解析情報とともに記憶されている。
楽曲音源データや、楽曲の解析情報は、ＤＪコントローラー１からの要求に応じて適宜ＤＪコントローラー１に送信される。

《楽曲再生制御装置の作用》
次に、本実施形態における楽曲再生制御装置であるＤＪコントローラー１の作用について説明する。
図４は、本実施形態におけるＤＪコントローラー１の楽曲再生制御処理を説明するフローチャートである。
図４に示すように、ＤＪコントローラー１の楽曲再生制御処理を行う場合には、ユーザがデッキ領域ＤＬに設定する楽曲（例えば楽曲Ａ）、デッキ領域ＤＲに設定する楽曲（例えば楽曲Ｂ）を任意に選択し、ＤＪコントローラー１は、ユーザによって選択された楽曲の音源データを端末装置３から取得する（ステップＳ１）。
ＤＪコントローラー１の制御部１１は、ユーザによって選択された楽曲をそれぞれデッキ領域ＤＬ及びデッキ領域ＤＲに設定する（ステップＳ２）。本実施形態では、左側のデッキ領域ＤＬに楽曲Ａを設定するとともに、右側のデッキ領域ＤＲに楽曲Ｂを設定する。また、再生状態特定部１１１は、再生楽曲解析情報として、各楽曲の再生タイミング（再生ピッチ等）の情報を取得する（ステップＳ３）。
そして、制御部１１は、デッキ領域ＤＬに楽曲Ａの再生タイミング（ピッチＰＬ）を設定し、デッキ領域ＤＲに楽曲Ｂの再生タイミング（ピッチＰＲ）を設定する（ステップＳ４）。
さらに制御部１１は、クロスフェーダー１８の電圧値のＡＤ値（ＶＣＦ）を取得する（ステップＳ５）。

制御部１１は、クロスフェーダー１８の電圧値のＡＤ値（ＶＣＦ）に基づいて、各楽曲の再生状況（クロスフェーダー１８による各楽曲の音量調整の状況）を取得し、これに基づいて振動制御部１１３が左用振動子１９、右用振動子２０、クロス用振動子２１の動作を制御する。
図５は、クロスフェーダー１８の電圧値（ＶＣＦ）と各楽曲の再生状況との関係を模式的に示した説明図である。
本実施形態のクロスフェーダー１８は、可変抵抗の値が最も大きいときには、摘み部１８１がスライドレール１８２の左端まで移動した状態であり、この状態においてデッキ領域ＤＬの楽曲Ａの音量がＭＡＸとなり、デッキ領域ＤＲの楽曲Ｂがミュートされる。逆に可変抵抗の値が最も小さいときには、摘み部１８１がスライドレール１８２の右端まで移動した状態であり、この状態においてデッキ領域ＤＲの楽曲Ｂの音量がＭＡＸとなり、デッキ領域ＤＬの楽曲Ａがミュートされる。また、スライドレール１８２の左端から右端までの間に摘み部１８１が位置するときには、楽曲Ａ及び楽曲Ｂの音量がリニアに増減し、スライドレール１８２の左端から右端までの中間付近に位置するときは楽曲Ａ及び楽曲Ｂの音量が同程度となる。
なお、クロスフェーダー１８の摘み部１８１の位置と楽曲Ａ及び楽曲Ｂの音量の変化との対応付けはこれに限定されない。例えば、一定の閾値まではいずれか一方の楽曲の音量がＭＡＸであり、一定の閾値を超える位置まで摘み部１８１が移動すると当該一方の楽曲の音量がミュートされて他方の楽曲の音量がＭＡＸとなるように対応付けられていてもよい。

図５において、ＶＴＲは、クロスフェーダー１８によってデッキ領域ＤＬの楽曲Ａの音量が一定以上であるか否かを判断する閾値であり、ＶＴＲは、クロスフェーダー１８によってデッキ領域ＤＲの楽曲Ｂの音量が一定以上であるか否かを判断する閾値である。
振動制御部１１３は、図４に示すように、デッキ領域ＤＬの楽曲Ａ及びデッキ領域ＤＲの楽曲Ｂうちのどちらが主として音声出力されているか、すなわち、ＶＣＦが予め設定されている左側の閾値ＶＴＲ以上であるか否かを判断する（ステップＳ６）。
ＶＣＦが閾値ＶＴＲ以上である場合（ステップＳ６；ＹＥＳ）には、振動制御部１１３は、楽曲Ａがメインで音声出力されていると判断し、左ピッチフェーダー１６の左用振動子１９に楽曲Ａの再生タイミング（ピッチＰＬ）に対応する周期で振動するよう制御する制御信号を生成し、右ピッチフェーダー１７の右用振動子２０に楽曲Ｂの再生タイミング（ピッチＰＲ）に対応する周期で振動するよう制御する制御信号を生成するとともに、クロスフェーダー１８のクロス用振動子２１には楽曲Ａの再生タイミング（ピッチＰＬ）に対応する周期で振動するよう制御する制御信号を生成して（ステップＳ７）、各制御信号を左用振動子１９、右用振動子２０、クロス用振動子２１に出力する。
これにより、左用振動子１９は楽曲Ａの再生タイミング（ピッチＰＬ）に対応する周期で振動し、右用振動子２０は楽曲Ｂの再生タイミング（ピッチＰＲ）に対応する周期で振動し、クロス用振動子２１は楽曲Ａの再生タイミング（ピッチＰＬ）に対応する周期で振動する（ステップＳ１２）。

他方、ＶＣＦが閾値ＶＴＲ以上でない場合（ステップＳ６；ＮＯ）には、振動制御部１１３は、さらにＶＣＦが予め設定されている右側の閾値ＶＴＬ以下であるか否かを判断する（ステップＳ８）。
そして、ＶＣＦが閾値ＶＴＬ以下である場合（ステップＳ８；ＹＥＳ）には、振動制御部１１３は、楽曲Ｂがメインで音声出力されていると判断し、左ピッチフェーダー１６の左用振動子１９に楽曲Ａの再生タイミング（ピッチＰＬ）に対応する周期で振動するよう制御する制御信号を生成し、右ピッチフェーダー１７の右用振動子２０に楽曲Ｂの再生タイミング（ピッチＰＲ）に対応する周期で振動するよう制御する制御信号を生成するとともに、クロスフェーダー１８のクロス用振動子２１には楽曲Ｂの再生タイミング（ピッチＰＲ）に対応する周期で振動するよう制御する制御信号を生成して（ステップＳ９）、各制御信号を左用振動子１９、右用振動子２０、クロス用振動子２１に出力する。
これにより、左用振動子１９は楽曲Ａの再生タイミング（ピッチＰＬ）に対応する周期で振動し、右用振動子２０は楽曲Ｂの再生タイミング（ピッチＰＲ）に対応する周期で振動し、クロス用振動子２１は楽曲Ａの再生タイミング（ピッチＰＲ）に対応する周期で振動する（ステップＳ１２）。

さらに、ＶＣＦが閾値ＶＴＲ以上でもなく、閾値ＶＴＬ以下でもない場合（ステップＳ６；ＮＯかつステップＳ８；ＮＯ）には、振動制御部１１３は、楽曲Ａ及び楽曲Ｂが同程度の音量で音声出力されていると判断し（ステップＳ１０）、左ピッチフェーダー１６の左用振動子１９に楽曲Ａの再生タイミング（ピッチＰＬ）に対応する周期で振動するよう制御する制御信号を生成し、右ピッチフェーダー１７の右用振動子２０に楽曲Ｂの再生タイミング（ピッチＰＲ）に対応する周期で振動するよう制御する制御信号を生成するとともに、クロスフェーダー１８のクロス用振動子２１には楽曲Ｂの再生タイミング（ピッチＰＲ）プラス楽曲Ａの再生タイミング（ピッチＰＬ）であるピッチＰＬＲに対応する周期で振動するよう制御する制御信号を生成して（ステップＳ１１）、各制御信号を左用振動子１９、右用振動子２０、クロス用振動子２１に出力する。
これにより、左用振動子１９は楽曲Ａの再生タイミング（ピッチＰＬ）に対応する周期で振動し、右用振動子２０は楽曲Ｂの再生タイミング（ピッチＰＲ）に対応する周期で振動し、クロス用振動子２１は楽曲Ａ及び楽曲Ｂの再生タイミング（ピッチＰＬＲ）に対応する周期で振動する（ステップＳ１２）。この場合、楽曲Ｂの再生タイミング（ピッチＰＲ）と楽曲Ａの再生タイミング（ピッチＰＬ）とが合っている場合には、重なり合っていても違和感のない周期でクロスフェーダー１８の摘み部１８１が振動し、両者の再生タイミングずれている場合には、違和感のある周期で摘み部１８１が振動する。これにより、ユーザは、楽曲Ａ及び楽曲Ｂの再生タイミングがずれた状態にあることを振動という触感によって認識することができる。

《楽曲再生制御装置の効果》
以上のように、本実施形態によれば、楽曲の再生状態に応じて操作子である左ピッチフェーダー１６、右ピッチフェーダー１７、クロスフェーダー１８の各々を振動させる振動発生手段である左用振動子１９、右用振動子２０、クロス用振動子２１の動作を制御する。
これにより、ユーザは、聴覚や視覚とは異なる、触覚によって振動を感じ取ることで楽曲Ａ及び楽曲Ｂの再生タイミングを知ることができる。このため、ピッチ合せに不慣れなユーザでも直感的かつ確実に楽曲のピッチを認識することができ、簡易かつ円滑なピッチ合せを行うことができる。
また、ＤＪが作業を行う現場は複数の音に囲まれ、また各種照明等も多いことが想定されるが、そのような場所においても指に伝わる振動で楽曲の再生タイミング（ピッチ等）を容易に知ることができる。

また、本実施形態では、再生状態特定部１１１により再生中の楽曲の再生タイミングに関する情報を取得し、振動制御手段は、この情報に応じて左用振動子１９、右用振動子２０、クロス用振動子２１の動作を制御する。このため、ユーザは操作子である左ピッチフェーダー１６、右ピッチフェーダー１７を操作して自らが行った再生タイミング（ピッチ）の調整が、ピッチ合せとして適切であるかどうかを指に伝わる振動で直感的に知ることができる。これにより、ピッチ合せの感覚を徐々に掴むことができ、ユーザにおいてピッチ合せの技術を習得していくことが期待できる。

また、本実施形態では、振動発生手段である左用振動子１９、右用振動子２０、クロス用振動子２１は、ユーザが楽曲の再生に関する操作を行う際の操作子（左ピッチフェーダー１６、右ピッチフェーダー１７、クロスフェーダー１８）の動作方向とは異なる方向に操作子を振動させるようになっている。このため、ユーザは、左用振動子１９、右用振動子２０、クロス用振動子２１による振動をよりはっきりと感じ取ることができる。
また、本実施形態のように同時並行的に再生される複数の楽曲（例えば楽曲Ａ及び楽曲Ｂ）の再生に関する操作を行う場合、複数の楽曲それぞれの再生タイミングに応じて当該楽曲に関する操作をおこぬ操作子を振動させる。このため、各楽曲の再生操作のうち、いずれの楽曲について再生タイミング（ピッチ等）がずれているのかを適切にユーザに報知することができる。

また、本実施形態では、複数の楽曲を同時並行的に再生する場合の各楽曲の音量バランスを調整する操作子としてクロスフェーダー１８を有しており、振動制御部１１３は、クロスフェーダー１８による音量バランスの調整値（すなわち、本実施形態ではクロスフェーダー１８の電圧値（ＶＣＦ））に応じて、いずれの楽曲の再生タイミングに対応する周期で操作子（クロスフェーダー１８）を振動させるかを変更するようになっている。このため、楽曲間の切り替えや楽曲同士をつなぎ合わせる作業をする際等に、指に伝わる振動でピッチを確認しながら適切に作業を行うことができる。

また、複数の楽曲のうちの１つは再生音を出力した状態であり、他の楽曲は再生音をミュートした状態である場合、振動制御部１１３は、少なくとも、再生音をミュートした状態の楽曲の再生タイミングに関する情報に応じて操作子（クロスフェーダー１８等）を振動させるように振動発生手段（クロス用振動子２１等）を制御するようにした場合には、指に感じる振動に応じて再生する楽曲を切り替える際に切り替え先の楽曲の再生タイミング（ピッチ）を合わせることができ、ピッチ合せを容易に行うことができる。

《変形例》
なお、以上本発明の実施形態について説明したが、本発明は、かかる実施形態に限定されず、その要旨を逸脱しない範囲で、種々変形が可能であることは言うまでもない。

例えば、本実施形態では、楽曲再生制御装置であるＤＪコントローラー１に端末装置３を接続し、楽曲の解析については端末装置３で行う場合を例として説明したが、楽曲の解析を行うのは端末装置３に限定されない。
例えば、ＤＪコントローラー１の制御部１１の再生状態特定部１１１等において楽曲の解析を行うようにしてもよい。
この場合、楽曲の再生制御はＤＪコントローラー１のみで完結し、端末装置３を備えない構成とすることもできる。

また、本実施形態では楽曲の音源データ等が端末装置３の記憶部３２に格納されている場合を例示したが、楽曲再生制御装置であるＤＪコントローラー１において再生制御可能な音源データ等の格納場所はこれに限定されない。
例えば、楽曲の音源データ等を格納する記憶部をＤＪコントローラー１に設けてもよいし、特に楽曲の音源データ等を蓄積せず、各種ネットワーク等を介して必要に応じて外部のサーバ等に蓄積されているデータをダウンロードして楽曲の音源データとして用いてもよい。また、ＵＳＢメモリや各種カードやチップ等の記憶媒体やＣＤ−ＲＯＭ等に記憶されている音源データを楽曲再生制御装置であるＤＪコントローラー１の記憶部１２等に読み込み、音源データとして用いてもよい。
なお、この場合には、ダウンロードした楽曲の音源データについてＤＪコントローラー１の制御部１１において楽曲の解析を行ってもよい。

また、本実施形態では、端末装置３の記憶部３２等に格納されているデジタル形式の音源データを用いて楽曲の再生制御を行う場合を例示したが、音源はデジタルものもに限定されない。
例えばアナログレコードを再生するターンテーブルを備えるＤＪ機器等において、楽曲同士のミキシング等を行うミキサーに本発明の楽曲再生制御装置を適用してもよい。
この場合には、例えば楽曲再生制御装置の制御部にアナログレコードについて楽曲の解析を行う機能部を設け、その解析結果に基づいて、楽曲の再生タイミング（ピッチ）に応じた周期で操作子であるクロスフェーダーの摘み部を振動させる。
このように、本発明を適用すれば、アナログレコードを再生する場合にも楽曲の再生タイミング（ピッチ）に応じて操作子を振動させる構成をとることができ、ピッチ合せの技術の習得を助けることができる。
てもよい。

また、振動制御部１１３は、再生状態特定部１１１により取得された再生中の楽曲の再生タイミングによっては、振動発生手段である左用振動子１９、右用振動子２０、クロス用振動子２１を振動させないとしてもよい。
例えばピッチ合せが必要な２つの楽曲間にピッチのずれがない場合には振動を発生させないことでピッチが合っていることをユーザに報知してもよい。

また、振動制御部１１３は、ピッチ合せが必要な２つの楽曲間における再生タイミング（ピッチ）のずれの程度に応じて複数の操作子を振動させる強度、周期、方向の少なくとも１つを変化させるように振動発生手段である左用振動子１９、右用振動子２０、クロス用振動子２１を制御してもよい。
このように再生タイミング（ピッチ）のずれの程度に応じて振動のさせ方を変えることにより、ユーザは直感的にピッチのずれの程度を感じることができ、ピッチ合せを円滑に行うことができる。

また、振動制御部１１３は、一定のリズムで振動を生じさせなくてもよく、例えば、４拍子の楽曲の１拍目だけ振動を強くしたり、４拍子の楽曲の１拍目と３拍目だけ振動を生じさせ、２拍目と４拍目には振動を生じさせない、というように、振動の強弱等にメリハリを付けてもよい。
スムーズな楽曲間の切り替えやリミックス作業を行うにおいては、ピッチを合わせる他に拍の頭を合わせる頭出しを行うことも重要であり、上記のように振動に強弱等を付けることで、ピッチとともに拍の頭出しも容易に行うことができる。

また、振動発生手段である左用振動子１９、右用振動子２０、クロス用振動子２１は、操作子（左ピッチフェーダー１６、右ピッチフェーダー１７、クロスフェーダー１８）に何らかの動きを生じさせることで操作子の操作状況をユーザに報知するものであればよく、必ずしも「振動」を生じさせるものに限定されない。
例えば、左用振動子１９、右用振動子２０、クロス用振動子２１は、操作子（左ピッチフェーダー１６、右ピッチフェーダー１７、クロスフェーダー１８）に１回だけの動きを生じさせるものであってもよい。
１回だけでも操作子に動きが生じれば、それによってユーザは触覚によって直感的に楽曲の再生タイミング（ピッチ等）を知ることができる。

また、本実施形態では楽曲の再生タイミング（ピッチ等）を振動発生手段による振動で報知するものについて説明したが、楽曲の再生タイミング（ピッチ等）を報知する手段は振動に限定されない。
例えば、ＬＥＤ等の発光部を備えて光の点滅によって楽曲の再生タイミング（ピッチ等）を報知してもよい。
また、このような光により楽曲の再生タイミング（ピッチ等）を報知する手段を、本実施形態の振動発生手段による振動で報知する手法と併せて用いてもよい。
振動や光等、音以外の手段によって多角的に楽曲の再生タイミング（ピッチ等）を報知することでユーザは確実に再生タイミング等を認識することができ、ピッチ合せを円滑に行うことができる。

以上本発明のいくつかの実施形態を説明したが、本発明の範囲は、上述の実施の形態に限定するものではなく、特許請求の範囲に記載された発明の範囲とその均等の範囲を含む。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。
〔付記〕
＜請求項１＞
ユーザが楽曲の再生に関する操作を行う操作子と、
楽曲の再生中に、前記楽曲の再生状態を特定する再生状態特定手段と、
前記操作子に動きを生じさせることで前記操作子の操作状況をユーザに報知する振動発生手段と、
前記再生状態特定手段によって特定された楽曲の再生状態に応じて前記振動発生手段の動作を制御する振動制御手段と、
を備えていることを特徴とする楽曲再生制御装置。
＜請求項２＞
前記振動発生手段は、前記操作子に振動を生じさせることで前記操作子の操作状況をユーザに報知することを特徴とする請求項１に記載の楽曲再生制御装置。
＜請求項３＞
前記再生状態特定手段は、楽曲の再生中に、再生箇所に対応する楽曲データを解析して、前記楽曲の再生状態を特定することを特徴とする請求項１又は請求項２に記載の楽曲再生制御装置。
＜請求項４＞
前記再生状態特定手段は、楽曲の再生箇所に対応する楽曲データを解析して、再生中の楽曲の再生タイミングに関する情報を再生楽曲解析情報として取得し、
前記振動制御手段は、前記再生状態特定手段により取得された再生中の楽曲の再生タイミングに関する情報に応じて前記振動発生手段の動作を制御することを特徴とする請求項１から請求項３のいずれか一項に記載の楽曲再生制御装置。
＜請求項５＞
前記再生状態特定手段は、楽曲の再生箇所に対応する楽曲データを解析して、再生中の楽曲の再生タイミングに関する情報を再生楽曲解析情報として取得し、
前記振動制御手段は、前記再生状態特定手段により取得された再生中の楽曲の再生タイミングに対応する周期で前記振動発生手段により前記操作子に生じさせる動きの有無又は動きの強度を変化させることを特徴とする請求項１から請求項４のいずれか一項に記載の楽曲再生制御装置。
＜請求項６＞
前記振動制御手段は、前記再生状態特定手段により取得された再生中の楽曲の再生タイミングに対応する周期及び位相で前記振動発生手段により前記操作子に生じさせる動きの有無又は動きの強度を変化させることを特徴とする請求項４又は請求項５に記載の楽曲再生制御装置。
＜請求項７＞
前記振動発生手段は、ユーザが楽曲の再生に関する操作を行う際の前記操作子の動作方向とは異なる方向に前記操作子を動作させるものであることを特徴とする請求項１から請求項６のいずれか一項に記載の楽曲再生制御装置。
＜請求項８＞
前記操作子は、同時並行的に再生される前記複数の楽曲の再生に関する操作を行うものであり、
前記振動制御手段は、前記複数の楽曲の再生タイミングに応じて前記操作子を動作させるように前記振動発生手段を制御することを特徴とする請求項１から請求項７のいずれか一項に記載の楽曲再生制御装置。
＜請求項９＞
前記複数の楽曲の再生タイミングを各々独立して操作する複数の前記操作子を備え、
前記振動制御手段は、複数の前記操作子の各々を、各操作子の操作対象となる楽曲の再生タイミングに対応する周期で動作させるように前記振動発生手段を制御することを特徴とする請求項８に記載の楽曲再生制御装置。
＜請求項１０＞
前記振動制御手段は、前記複数の楽曲における再生タイミングのずれの程度に応じて複数の前記操作子を動作させる強度、周期、方向の少なくとも１つを変化させるように前記振動発生手段を制御することを特徴とする請求項９に記載の楽曲再生制御装置。
＜請求項１１＞
前記複数の楽曲のうちの１つは再生音を出力した状態であり、他の楽曲は再生音をミュートした状態であり、
前記振動制御手段は、少なくとも、再生音をミュートした状態の楽曲の再生タイミングに関する情報に応じて前記操作子を動作させるように前記振動発生手段を制御することを特徴とする請求項８から請求項１０のいずれか一項に記載の楽曲再生制御装置。
＜請求項１２＞
前記複数の楽曲の音量バランスを調整する操作子を有し、
前記振動制御手段は、前記音量バランスの調整値に応じて、いずれの楽曲の再生タイミングに対応する周期で前記操作子を動作させるかを変更するように前記振動発生手段を制御することを特徴とする請求項８から請求項１１のいずれか一項に記載の楽曲再生制御装置。
＜請求項１３＞
楽曲の再生中に、前記楽曲の再生状態を特定する再生状態特定工程と、
前記再生状態特定工程において特定された楽曲の再生状態に応じて、ユーザが楽曲の再生に関する操作を行う操作子に動きを生じさせることにより前記操作子の操作状況をユーザに報知する振動発生工程と、
を含んでいることを特徴とする楽曲再生制御方法。
＜請求項１４＞
コンピュータに、
楽曲の再生中に、前記楽曲の再生状態を特定する再生状態特定機能と、
前記再生状態特定機能によって特定された楽曲の再生状態に応じて、ユーザが楽曲の再生に関する操作を行う操作子に動きを生じさせることにより前記操作子の操作状況をユーザに報知する振動発生機能と、
を実現させることを特徴とするコンピュータ読み取り可能な楽曲再生制御プログラム。

１ ＤＪコントローラー
３ 端末装置
１１ 制御部
１２ 記憶部
１６ 左ピッチフェーダー
１７ 右ピッチフェーダー
１８ クロスフェーダー
１９ 左用振動子
２０ 右用振動子
２１ クロス用振動子
１１１ 再生状態特定部
１１２ フェーダー情報検出部
１１３ 振動制御部
１１４ 音声出力制御部
３２４ 楽曲音源データ記憶領域
ＤＬ，ＤＲ デッキ領域
Ｍａ ミキサー領域

Claims (13)

1. ユーザが楽曲の再生の周期または位相の変化を指示する操作子と、
   前記操作子に物理的な動きを生じさせる駆動部と、
   前記操作子の操作に応じた前記楽曲の再生の周期または位相の変化に応じて、前記駆動部による前記操作子の動き状態を変化させる制御部と、
   を備えた楽曲再生制御装置。
2. ユーザが楽曲の再生状態を変化させる操作を行う操作子と、
   前記操作子に物理的な動きを生じさせる駆動部と、
   前記楽曲の再生中に、再生箇所に対応する楽曲データを解析して、前記楽曲の再生状態を特定するとともに、特定された前記楽曲の再生状態の変化に応じて、前記駆動部による前記操作子の動き状態を変化させる制御部と、
   を備えた楽曲再生制御装置。
3. ユーザが楽曲の再生状態を変化させる操作を行う操作子と、
   前記操作子に物理的な動きを生じさせる駆動部と、
   前記操作子の操作による前記楽曲の再生状態の変化に応じて、ユーザが楽曲の再生状態を変化させる操作を行う際の前記操作子の動作方向とは異なる方向に前記操作子を動かすように前記駆動部を制御する制御部と、
   を備えた楽曲再生制御装置。
4. ユーザが複数の楽曲の再生タイミングを各々独立して操作する複数の操作子と、
   前記複数の操作子それぞれに物理的な動きを生じさせる駆動部と、
   前記複数の操作子の各々を、各操作子の操作対象となる楽曲の再生タイミングに対応する周期で動かすように前記駆動部を制御する制御部と、
   を備えた楽曲再生制御装置。
5. 複数の楽曲の再生タイミングを各々独立して操作する第１操作子および第２操作子と、同時並行的に再生される前記複数の楽曲の再生に関する操作を行う第３操作子と、を含む複数の操作子と、
   前記複数の操作子それぞれに物理的な動きを生じさせる駆動部と、
   前記第１操作子または前記第２操作子の操作による前記複数の楽曲のうちのいずれかの楽曲の再生状態の変化に応じて、前記駆動部による前記第１操作子または前記第２操作子の動き状態を変化させるとともに、前記第３操作子の操作により変化する前記複数の楽曲の再生タイミングに応じて前記第３操作子を動かすように制御する制御部と、
   を備えた楽曲再生制御装置。
6. 前記駆動部は、前記操作子を振動させる振動子を含み、
   前記制御部は、前記操作子の操作による前記楽曲の再生状態の変化に応じて、前記振動子による前記操作子の振動状態を変化させる、
   請求項１から請求項５のいずれか一項に記載の楽曲再生制御装置。
7. 前記制御部は、前記操作子の操作に応じた前記楽曲の再生状態の変化に応じて、前記振動子による前記操作子の振動の周期または振動の方向を変化させる、
   請求項６に記載の楽曲再生制御装置。
8. 前記制御部は、再生中の楽曲の周期及び位相で前記駆動部による前記操作子の動き状態を変化させる、請求項１から請求項７のいずれか一項に記載の楽曲再生制御装置。
9. 前記制御部は、前記複数の楽曲における再生タイミングのずれの程度に応じて複数の前記操作子を動かす強度、周期、方向の少なくとも１つを変化させるように制御する、請求項４に記載の楽曲再生制御装置。
10. 前記複数の楽曲のうちの１つは再生音を出力した状態であり、他の楽曲は再生音をミュートした状態であり、
    前記制御部は、少なくとも、再生音をミュートした状態の楽曲の再生タイミングに関する情報に応じて前記第３操作子を動かすように制御する、請求項５に記載の楽曲再生制御装置。
11. 前記第３操作子は、前記複数の楽曲の音量バランスを調整する操作子であり、
    前記制御部は、前記音量バランスの調整値に応じて、いずれの楽曲の再生タイミングに対応する周期で前記第３操作子を動かすかを変更するように制御する、請求項５に記載の楽曲再生制御装置。
12. 装置が、
    ユーザによる楽曲の再生の周期または位相の変化を指示する操作子の操作に応じて楽曲の再生状態を変化させる処理と、
    前記操作子の操作に応じた前記楽曲の再生の周期または位相の変化を特定する処理と、
    前記特定した前記楽曲の再生状態の変化に応じて、前記操作子に物理的な動きを生じさせる駆動部による前記操作子の動き状態を変化させる処理と、
    を実行する、楽曲再生制御方法。
13. コンピュータに、
    ユーザによる楽曲の再生の周期または位相の変化を指示する操作子の操作に応じて楽曲の再生状態を変化させる処理と、
    前記操作子の操作に応じた前記楽曲の再生の周期または位相の変化を特定する処理と、
    前記特定した前記楽曲の再生状態の変化に応じて、前記操作子に物理的な動きを生じさせる駆動部による前記操作子の動き状態を変化させる処理と、
    を実行させる楽曲再生制御プログラム。

Images