JP4000468B2

JP4000468B2 - Music content utilization apparatus and computer program applied to the apparatus

Info

Publication number: JP4000468B2
Application number: JP2003005343A
Authority: JP
Inventors: 温東儀; 健一山内; グレグソンギャリー
Original assignee: Yamaha Corp
Current assignee: Yamaha Corp
Priority date: 2003-01-14
Filing date: 2003-01-14
Publication date: 2007-10-31
Anticipated expiration: 2023-01-14
Also published as: CN101562008B; JP2004219606A; CN101562010B; CN101562008A; CN101562010A

Description

【０００１】
【発明の属する技術分野】
本発明は、音楽に関する複数種類のコンテンツ素材データを入力し、同入力したコンテンツ素材データを利用して音楽に関する情報をユーザに提示する音楽コンテンツ利用装置および同装置に適用されるコンピュータプログラムに関する。
【０００２】
【従来の技術】
従来から、楽曲データ（例えば、ＭＩＤＩデータ）、動画データなどを組み合わせた音楽コンテンツを再生して、同音楽コンテンツをユーザに提示する音楽コンテンツ利用装置は知られている（特許文献１）。そして、この装置においては、表示画面上にシーケンサの再生を制御するためのスタート、ストップ、早送りおよび巻戻しの要素からなる再生制御ツールが表示されて、マウスを用いて再生制御ツールが指示されると、シーケンサによる演奏の再生が制御されるようになっている。
【０００３】
【特許文献１】
特開平１１−３４１３５０号公報
【０００４】
【発明が解決しようとする課題】
しかしながら、上記従来の音楽コンテンツ利用装置においては、再生制御ツールはシーケンサの再生制御に固定的に用いられるのみで、有効に利用されない。すなわち、各種のコンテンツ素材を選択的に再生制御したり、複数のコンテンツ素材を同期再生させたりするように、再生制御ツールを種々の用途に切換えて利用できない。
【０００５】
【発明の概要】
本発明は、上記問題に対処するためになされたもので、その目的は、表示器に表示する再生制御ツールを有効に利用して、複数のコンテンツ素材の種々の再生制御を可能にした音楽コンテンツ利用装置および同装置に適用されるコンピュータプログラムを提供することにある。
【０００６】
前記目的を達成するために、本発明の特徴は、表示器を備えて音楽コンテンツをユーザに提示する音楽コンテンツ利用装置において、複数の異なるプログラムの実行によってそれぞれ再生される、音楽に関する複数種類のコンテンツ素材データを含む音楽コンテンツデータを入力し、同入力した複数種類のコンテンツ素材データによって表された複数種類のコンテンツ素材を表示器にてそれぞれ同時に表示するとともに、コンテンツ素材の再生を制御するための再生制御ツールを表示器にて表示し、かつ表示器にて表示されている複数種類のコンテンツ素材のうち、再生制御ツールによって再生が指示されるコンテンツ素材を指定するようにしたことにある。
【０００７】
この場合、例えば、ユーザによる操作子の操作に基づいて再生制御ツールによって再生が指示されるコンテンツ素材を指定するようにするとよい。また、音楽コンテンツデータに再生制御ツールによって再生が指示されるコンテンツ素材を指定するコンテンツ規定データも含ませておき、コンテンツ規定データに基づいて再生制御ツールによって再生が指示されるコンテンツ素材を指定するようにしてもよい。
【０００８】
これによれば、表示器に表示された再生制御ツールによって再生の制御されるコンテンツ素材がユーザ操作または自動的に選択され、コンテンツ素材の選択的な再生指示を簡単に行えるようになる。この場合、再生制御ツールによって再生の制御されるコンテンツ素材は単一でも複数でもよく、複数の場合には複数のコンテンツ素材が同時に再生されることになり、音楽コンテンツ利用装置の使い勝手が良好となる。
【０００９】
また、本発明の他の特徴は、表示器を備えて音楽コンテンツをユーザに提示する音楽コンテンツ利用装置において、複数の異なるプログラムの実行によってそれぞれ再生される、音楽に関する複数種類のコンテンツ素材データと、同複数種類のコンテンツ素材データによって表されるコンテンツ素材を表示器に表示させるための素材表示指示およびコンテンツ素材の再生を制御するための再生制御ツールを表示器に表示するためのツール表示指示を含むコンテンツ規定データとからなる音楽コンテンツデータを入力し、コンテンツ規定データ中の素材表示指示に基づいて入力した複数種類のコンテンツ素材データによって表された複数種類のコンテンツ素材を表示器にて表示するともに、コンテンツ規定データ中のツール表示指示に基づいて再生制御ツールを表示器に表示するようにしたことにある。
【００１０】
この場合、例えば、ツール表示指示に対応させて再生制御ツールが表示されるコンテンツ素材を指定するコンテンツ指定指示もコンテンツ規定データに含ませておき、コンテンツ指定指示によって指定されるコンテンツ素材に対応させて再生制御ツールを表示させるようにするとよい。
【００１１】
これによれば、素材表示指示およびツール表示指示をコンテンツ規定データ中に含ませておくだけで、表示器に表示された再生制御ツールによって再生の制御されるコンテンツ素材が自動的に選択され、コンテンツ素材の選択的な再生指示を簡単に行えるようになる。この場合、再生制御ツールによって再生の制御されるコンテンツ素材は単一でも複数でもよく、複数の場合には複数のコンテンツ素材が同時に再生されることになり、音楽コンテンツ利用装置の使い勝手が良好となる。
【００１２】
また、本発明の他の特徴は、表示器を備えて音楽コンテンツをユーザに提示する音楽コンテンツ利用装置において、複数の異なるプログラムの実行によってそれぞれ再生される、音楽に関する複数種類のコンテンツ素材データと、同複数種類のコンテンツ素材データによって表されるコンテンツ素材を表示器に表示させるための素材表示指示および同期再生されるコンテンツ素材を指定するための同期再生コンテンツ指示を含むコンテンツ規定データとからなる音楽コンテンツデータを入力し、コンテンツ規定データ中の素材表示指示に基づいて入力した複数種類のコンテンツ素材データによって表された複数種類のコンテンツ素材を表示器にて表示するとともに、コンテンツ規定データ中の同期再生コンテンツ指示によって指定されるコンテンツ素材の同期再生を制御するための再生制御ツールを表示器にて表示するようにしたことにある。
【００１３】
この場合、例えば、再生制御ツールを表示器に表示させるための再生制御ツール指示もコンテンツ規定データに含ませておき、再生制御ツール指示に従ってコンテンツ再生制御ツールを表示させるようにするとよい。
【００１４】
これによれば、素材表示指示および同期再生コンテンツ指示を含ませておくだけで、複数のコンテンツ素材を再生制御ツールを用いて簡単に同期再生することができ、音楽コンテンツ利用装置の使い勝手が良好となる。
【００１５】
【発明の実施の形態】
以下、本発明の一実施形態について図面を用いて説明する。図１は、同実施形態に係る電子楽器の形態をした音楽コンテンツ利用装置の全体ブロック図である。この音楽コンテンツ利用装置は、音楽コンテンツを入力するための入力部１０と、音楽コンテンツを利用するための利用部２０と、この音楽コンテンツ利用装置の動作を指示するためにユーザによって操作される操作部３０と、これらの入力部１０、利用部２０および操作部３０をプログラム制御するコンピュータ本体部４０とからなる。
【００１６】
入力部１０は、バス５０に接続された通信インターフェース回路１１およびインターフェース回路１２を有する。通信インターフェース回路１１は、サーバコンピュータ６０に通信ネットワーク６１を介して接続され、同サーバコンピュータ６０に対して各種プログラムおよび各種データの送受信を許容する。インターフェース回路１２は、この音楽コンテンツ利用装置に接続された他の音楽コンテンツ利用装置である他の機器７０に接続されて、同機器７０に対する各種プログラムおよび各種データの送受信を許容する。
【００１７】
利用部２０は、表示器２１、音源回路２２およびオーディオ信号再生回路２３を有する。表示器２１は、ＣＲＴ表示器、液晶表示器などで構成されており、バス５０に接続された表示制御回路２４により制御されて、各種情報を視覚表示する。音源回路２２は、バス５０に接続されていて、バス５０を介して供給される音楽コンテンツとしての演奏情報（キーコード、キーオン信号、キーオフ信号、音色制御情報など）に基づいて楽音信号を形成して出力する。オーディオ信号再生回路２３も、バス５０に接続されていて、バス５０を介して供給される音楽コンテンツとしてのオーディオデータを再生して音声信号を出力する。これらの音源回路２２およびオーディオ信号再生回路２３には、アンプ、スピーカなどを含むサウンドシステム２５が接続されており、同システム２５は音源回路２２からの楽音信号およびオーディオ信号再生回路２３からの音声信号に対応した音を放音する。
【００１８】
操作部３０は、鍵盤３１および制御操作子群３２を有する。鍵盤３１は、所定音域に対応した複数の鍵からなり、楽曲の演奏のために利用される。制御操作子群３２は、この音楽コンテンツ利用装置の動作を指示するために操作される複数の操作子からなる。この制御操作子群３２には、例えば、表示器２１にて表示されるカーソルの移動キー（マウス、トラックボールなども含む）、各種作動モードを選択するためのモード選択キー、ユーザの指示を入力する指示入力キーなどが含まれる。なお、鍵盤３１を、これらの移動キー、モード選択キーおよび指示入力キーとして用いるようにしてもよい。鍵盤３１および制御操作子群３２の操作は、バス５０に接続された検出回路３３，３４によってそれぞれ検出されるようになっている。
【００１９】
コンピュータ本体部４０は、バス５０にそれぞれ接続されたＣＰＵ４１，ＲＯＭ４２、ＲＡＭ４３および外部記憶装置４４からなる。ＣＰＵ４１，ＲＯＭ４２およびＲＡＭ４３は、外部記憶装置４４からＲＡＭ４３に転送される各種プログラムを実行して、入力部１０、利用部２０および操作部３０の動作を制御する。
【００２０】
外部記憶装置４４は、予め組み込まれたハードディスクＨＤなどの記録媒体、着脱可能に組み付けられるフレキシブルディスクＦＤ、コンパクトディスグＣＤなどの各種記録媒体と、同記録媒体に対してプログラム及びデータの読み書きを可能とするドライブ装置からなる。外部記憶装置４４には、本発明の音楽コンテンツがダウンロードされるとともに、この音楽コンテンツ利用装置の基本的な動作を制御するための基本的な制御プログラムおよび制御データが予め記憶されている。基本的な制御プログラムとしては、ブラウザを含む音楽コンテンツ利用プログラム、鍵および操作子の操作検出プログラム、楽音発生制御プログラムなどが挙げられる。なお、これらの基本的な制御プログラムおよび制御データをサーバコンピュータ６０または他の機器７０からダウンロードすることも可能である。
【００２１】
また、外部記憶装置４４には、入力した音楽コンテンツを再生するために必要なスタイルシートおよびプラグインプログラムが予め記憶されているとともに、適宜更新可能となっている。スタイルシートは、利用部２０にて利用可能な音楽コンテンツを規定するとともに、入力した音楽コンテンツデータを利用部２０にて利用可能にするためのフォーマット変換を規定するデータ群からなる。例えば、ＸＭＬフォーマットに従った音楽コンテンツデータを、この音楽コンテンツ利用装置が備えたブラウザで処理可能にするためにフォーマット変換するＸＳＬＴスタイルシートで構成される。また、ＸＳＬＴスタイルシートを「ＣＳＳ」すなわちカスケーディングスタイルシートで構成してもよい。プラグインプログラムは、入力した音楽コンテンツデータを利用部２０にて利用するために利用されるプログラムで、例えば、表示器２１にて楽譜を表示するための楽譜表示プログラム、表示器２１にてビデオ表示するためのビデオプログラム、鍵盤３１による演奏を採点するための採点プログラム、音源回路２２を用いて楽曲を自動演奏するための自動演奏プログラムなどである。
【００２２】
次に、上記のように構成した音楽コンテンツ利用装置を用いた音楽コンテンツの利用について説明する。まず、ユーザは、ブラウザを含む音楽コンテンツ利用プログラムを起動する。この音楽コンテンツ利用プログラムの起動により、図１の音楽コンテンツ利用装置は、図２の機能ブロック図に示すような機能を発揮し始める。したがって、この機能ブロック図は、外部記憶装置４４に記憶されているプログラムの実行により、実現される機能をソフトおよびハードの両面から表している。言いかえれば、図１のハード構成を用いたプログラム処理の内容を表している。
【００２３】
この音楽コンテンツ利用装置は、図２に示すように、データ入力部Ｂ１１にて音楽コンテンツデータを入力する。このデータ入力部Ｂ１１は、ユーザによる制御操作子群３２の操作に従って、サーバコンピュータ６０に蓄積されている音楽コンテンツデータを外部記憶装置４４に取り込む処理に対応する。なお、ユーザは、表示器２１にて表示されるブラウザ画面に従って音楽コンテンツデータの取り込みを指示する。
【００２４】
ここで、音楽コンテンツデータについて説明しておく。音楽コンテンツデータは、予め用意されてサーバコンピュータ６０に蓄積されているもので、パッケージごとに入手可能になっている。一組の音楽コンテンツパッケージには、複数種類のコンテンツ素材データと、１ページ分または複数ページ分のコンテンツ規定データとが含まれている。一組の音楽コンテンツパッケージは、例えば、練習用の一楽曲に関する音楽コンテンツであったり、演奏練習用の一楽器に関する音楽コンテンツであったりする。そして、一つの音楽コンテンツパッケージ内のコンテンツ素材データとしては、例えば、演奏データからなるＭＩＤＩデータ、音声信号からなるオーディオデータ、動画データからなるビデオデータ、楽譜を表す楽譜データ、静止画像を表す画像データ、その他のデータなどが挙げられる。なお、これらの各種類のコンテンツ素材データは、複数組用意されていても、一組だけ用意されていてもよい。
【００２５】
１ページ分のコンテンツ規定データは、図３に示すように、タイトルデータ、複数組のコンテンツ素材指定データ、テキストデータ、および複数組の再生制御プラグイン指定データからなる。このコンテンツ規定データは、例えばＸＭＬフォーマットによって記述されている。タイトルデータは、コンテンツのタイトルを示すものである。
【００２６】
コンテンツ素材指定データは前述した複数種類のコンテンツ素材データに対応するもので、コンテンツ素材の指定をも含めて各種コンテンツの取り扱いを規定するものである。各コンテンツ素材指定データは、具体的には、利用するコンテンツ素材を指定するための素材データを読み出すためのパスデータ（ファイルやディレクトリの所在を示す経路を表すデータ“path data”）、同素材データの利用の際に用いられる利用処理用パラメータ、プラグインプログラムを指定するプラグイン指定データ、プラグインプログラムの起動時に利用されるプラグイン用パラメータ、およびその他のデータからなる。利用処理用パラメータおよびプラグイン用パラメータは、例えば、楽譜表示の大きさ、ビデオ表示の大きさ、採点のレベルなどを表すデータである。
【００２７】
テキストデータは、表示器２１にて表示される説明文（例えば、楽曲、楽器などの説明文）を表すものである。このテキストデータは、コンテンツ素材の取り扱いを規定するものではなく、コンテンツ素材そのものである。しかし、コンテンツ規定データ自体が、ＸＭＬフォーマットに従ってテキストファイルで構成されているために、本実施形態では、前記説明文をテキストデータとしてコンテンツ規定データ中に含ませてある。
【００２８】
再生制御プラグイン指定データとは、外部記憶装置４４に記憶されているプラグインプログラムを用いて、コンテンツ素材の再生を制御するための再生制御ツール２１ｆ、２１ｇ（図６参照）を表示器２１に表示させるとともに、同再生制御ツール２１ｆ、２１ｇによって制御されるコンテンツ素材を指定するためのものである。各再生制御プラグイン指定データは、表示器２１にて表示されているコンテンツ素材の中で再生制御ツール２１ｆ、２１ｇを対応させて表示するコンテンツ素材を指定するデータと、再生制御ツール２１ｆ、２１ｇによって制御される１つまたは複数のコンテンツ素材を指定するデータとからなる。
【００２９】
なお、一組の音楽コンテンツパッケージ中のコンテンツ素材データとしては、前述したＭＩＤＩデータ、オーディオデータ、ビデオデータ、楽譜データ、画像データおよびその他のデータが用意されている場合もあるが、それらの一部のみが用意されている場合もある。また、コンテンツ規定データにしても、タイトルデータ、コンテンツ素材指定データ、テキストデータ、および再生制御プラグイン指定データの全てを含む場合もあるが、その一部しか含んでいない場合もある。また、各コンテンツ素材指定データにしても、パスデータ、利用処理用パラメータ、プラグイン指定データ、プラグイン用パラメータ、およびその他のデータの全てを含む場合もあるが、その一部しか含んでいない場合もある。
【００３０】
前述のように、データ入力部Ｂ１１（すなわち外部記憶装置４４）に取り込まれた音楽コンテンツパッケージを構成するコンテンツ素材データおよびコンテンツ規定データは、ユーザによる制御操作子群３２の操作に従って、利用処理部Ｂ１５に供給される。このとき、フィルタリング処理部Ｂ１２は、スタイルシート記憶部Ｂ１４に記憶されているスタイルシートによって規定されていて、この音楽コンテンツ利用装置の利用部２０にて利用可能なコンテンツ素材データに関するデータのみを抽出して利用処理部Ｂ１５に供給するように機能する。すなわち、フィルタリング処理部Ｂ１２は、利用処理部Ｂ１５に供給されるコンテンツ素材データおよびコンテンツ規定データにフィルタリング処理を施す。具体的には、利用部２０にてあるコンテンツ素材データが利用不能な場合には、コンテンツ規定データ中の利用不能なコンテンツ素材に関する指定データを削除することにより、利用不能なコンテンツ素材データが利用処理部Ｂ１５に供給されないようにする。
【００３１】
また、変換処理部Ｂ１３は、スタイルシート記憶部Ｂ１４に記憶されているスタイルシートによって規定される変換ルールに従って、コンテンツ規定データを変換して利用処理部Ｂ１５に供給する。すなわち、変換処理部Ｂ１３は、コンテンツ規定データの構造（本実施形態ではＸＭＬデータ構造）を、利用処理部Ｂ１５（本実施形態ではブラウザ）が受け付ける構造に変換する。また、この変換処理部Ｂ１３は、コンテンツ規定データでは規定されていない具体的な事項をスタイルシートに従って付加し、またはコンテンツ規定データには抽象的にしか規定されていない事項をスタイルシートに従って具体的な事項に変換する。
【００３２】
この具体的事項の付加および変換について一例を挙げて説明すると、表示器２１におけるビデオおよび静止画像の表示レイアウトについてはコンテンツ規定データでは規定されていない、または抽象的にしか規定されていない。したがって、変換処理部Ｂ１３は、この音楽コンテンツ利用装置における表示器２１のサイズ、形状、解像度などに応じて、ビデオ指定データ、楽譜指定データ、画像指定データなどを変更して、利用処理部Ｂ１５（本実施形態ではブラウザ）に供給する。
【００３３】
より具体的に説明すると、コンテンツ規定データは画像を単に表示する程度の抽象的な指定データであって、表示器２１にて画像を表示するための具体的なプラグインプログラムを指定していなければ、この音楽コンテンツ利用装置に搭載されていて表示器２１にて画像を表示するためのプラグインプログラムが指定される。コンテンツ規定データにより、ビデオ、楽譜、静止画像などの表示器２１上の具体的な表示位置が指定されていなければ、スタイルシートによって前記表示位置が具体的に指定される。コンテンツ規定データにより表示器２１にて表示される文字のフォントが規定されていない、または抽象的にしか規定されていなければ、スタイルシートによって同文字のフォントが具体的に指定される。
【００３４】
次に、利用処理部Ｂの処理動作について説明する。前記変換されたコンテンツ規定データが入力されると、利用処理部Ｂ１５は、同入力したコンテンツ規定データに従って各種コンテンツ素材に関する情報をユーザに提示する。この場合、コンテンツ規定データ中のタイトルデータおよびテキストデータが入力されると、変換処理部Ｂ１３にてスタイルシートを用いて変換された指示（付加された指示がある場合には変換および付加された指示）に従って、表示器２１においてタイトルデータおよびテキストデータによって表された情報が表示される。なお、このタイトルデータおよびテキストデータに関しては、プラグイン指定データおよびプラグイン用パラメータを含まないのが通常であり、基本的なコンテンツ利用プログラムに含まれるブラウザが利用される。
【００３５】
また、コンテンツ規定データ中のＭＩＤＩ指定データ、オーディオ指定データ、ビデオ指定データ、楽譜指定データ、画像指定データまたはその他の指定データが利用処理部Ｂ１５に入力された場合には、前記各指定データ中に含まれる素材パスデータを用いて、データ入力部Ｂ１１に入力された音楽コンテンツパッケージ中の該当するコンテンツ素材データが利用処理部Ｂ１５に取り込まれる。利用処理部Ｂ１５は、この入力されたコンテンツ素材データを処理して、利用部２０を用いてコンテンツ素材データに関する音楽情報をユーザに提示する。
【００３６】
この場合、コンテンツ指定データ中にプラグイン指定データが含まれていれば、プラグインプログラム記憶部Ｂ１７に記憶されていてプラグイン指定データによって指定されるプラグインプログラムが起動されて、前記入力したコンテンツ素材データが処理される。コンテンツ指定データ中にプラグイン指定データが含まれていなければ、利用処理部Ｂ１５に対応したブラウザを含む基本的なコンテンツ利用プログラムにより、前記入力したコンテンツ素材データが処理される。当然ながら、この場合のコンテンツ指定データによって指定されるコンテンツ素材データは、前記コンテンツ利用プログラムによって処理可能なデータである。また、コンテンツ指定データ中に、利用処理用パラメータまたはプラグイン用パラメータが含まれている場合には、これらのパラメータが前記コンテンツ素材の処理に利用される。
【００３７】
具体的には、コンテンツ指定データがＭＩＤＩ指定データであれば、データ入力部Ｂ１１に入力された音楽コンテンツパッケージ中の素材パスデータによって指定されるＭＩＤＩデータが利用処理部Ｂ１５に取り込まれる。そして、利用処理部Ｂ１５は、ＭＩＤＩデータの再生用のプラグインプログラムを起動して、楽曲の進行に従って、ＭＩＤＩデータを構成する音高データ、キーオンデータ、キーオフデータ、音色制御データなどを音源回路２２に順次供給して、音源回路２２にこれらの供給されたデータに応じた楽音信号を形成させる。したがって、ユーザには、この形成された楽音信号に対応した楽音がサウンドシステム２５を介して聴覚的に提示されることになる。
【００３８】
コンテンツ指定データがオーディオ指定データであれば、データ入力部Ｂ１１に入力された音楽コンテンツパッケージの中から素材パスデータによって指定されるオーディオデータが利用処理部Ｂ１５に取り込まれる。そして、利用処理部Ｂ１５は、オーディオ再生用のプラグインプログラムを起動して、オーディオデータによって表される音声信号（楽器の演奏音、合唱音、人間の声など）を表す音声データをオーディオ信号再生回路２３に時間経過に従って供給し、オーディオ信号再生回路２３に音声データを再生させる。したがって、ユーザには、再生された楽器の演奏音、合唱音、人間の声などの音声が、サウンドシステム２５を介して提示されることになる。
【００３９】
コンテンツ指定データがビデオ指定データであれば、データ入力部Ｂ１１に入力された音楽コンテンツパッケージの中から素材パスデータによって指定されるビデオデータが利用処理部Ｂ１５に取り込まれる。そして、利用処理部Ｂ１５は、ビデオ再生用のプラグインプログラムを起動して、ビデオデータによって表される動画を表す動画データを表示制御回路２４を介して表示器２１に供給し、表示器２１に動画を再生させる。したがって、ユーザには、ビデオデータにより表された動画が視覚的に提示されることになる。
【００４０】
コンテンツ指定データが楽譜指定データであれば、データ入力部Ｂ１１に入力された音楽コンテンツパッケージの中から素材パスデータによって指定される楽譜データが利用処理部Ｂ１５に取り込まれる。そして、利用処理部Ｂ１５は、楽譜表示用のプラグインプログラムを起動して、楽譜データによって表される楽譜に対応した画像データを表示制御回路２４を介して表示器２１に供給し、表示器２１に楽譜を表示させる。したがって、ユーザには、楽譜が表示器２１によって視覚的に提示されることになる。
【００４１】
コンテンツ指定データがその他の指定データであれば、データ入力部Ｂ１１に入力された音楽コンテンツパッケージの中から素材パスデータによって指定されるその他データが利用処理部Ｂ１５に取り込まれる。そして、利用処理部Ｂ１５は、その他のプラグインプログラムを起動して、その他データを処理してその他の出力部２６に供給して、ユーザにその他の音楽情報を提示する。このその他の音楽情報としては、鍵盤３１における押鍵指示、ユーザによる演奏の採点などが挙げられる。
【００４２】
上記動作説明からも理解できるとおり、音楽コンテンツ利用装置内にて、スタイルシートを用いた変換処理部Ｂ１３の処理により、利用処理部Ｂ１５および利用部２０にてコンテンツ素材データの利用を可能にするためにコンテンツ規定データが変換されるので、種々の音楽コンテンツ利用装置（すなわち種々のプラットフォーム）において共通の音楽コンテンツを利用できるようになる。また、種々の音楽コンテンツ利用装置ごとに専用の音楽コンテンツデータを作成しなくてもよくなるので、多種多様の音楽コンテンツデータを比較的簡単に用意できるようにもなる。
【００４３】
例えば、図４(Ａ)(Ｂ)に示すように、表示器２１のサイズが相違して、テキスト（説明文）および楽譜を表示可能な領域が異なっていても、前記コンテンツ規定データの変換処理により、表示器２１における自由な表示レイアウトを設定できる。したがって、音楽コンテンツデータが効率的に利用されて、音楽コンテンツデータの利用価値が高まる。
【００４４】
また、図４(Ａ)に示すように表示器２１にてビデオ表示できるような音楽コンテンツ利用装置においては、ビデオも利用できる。これに対して、図４(Ｂ)に示すように表示器２１にてビデオ表示できない音楽コンテンツ利用装置においては、前記変換処理によりビデオ表示しないようにする。特に、この場合、フィルタリング処理部Ｂ１２におけるスタイルシートを用いたフィルタリング処理により、ビデオに関するデータはフィルタリングされて利用処理部Ｂ１５に供給されないので、音楽コンテンツパッケージ内にこの音楽コンテンツ利用装置にて利用不能なコンテンツ素材およびコンテンツ指定データが含まれていても、入力したコンテンツ素材を効率的に利用できるようになる。
【００４５】
さらに、上記実施形態では、スタイルシートを外部からスタイルシート記憶部Ｂ１４に書き込み可能している。すなわち、本音楽コンテンツ利用装置内のスタイルシートを更新可能としている。したがって、この音楽コンテンツ利用装置の仕様が変更されても（例えば、ソフトウェアがバージョンアップされても）、このスタイルシートの更新により、音楽コンテンツを簡単かつ適切に利用できるようになる。
【００４６】
また、上記実施形態においては、コンテンツ素材データを利用する際に使用するプラグインプログラムを指定するプラグイン指定データをコンテンツ規定データ中に含めておき、音楽コンテンツパッケージの入力時に、コンテンツ素材データと共にプラグイン指定データも音楽コンテンツ利用装置に供給されるようにした。そして、音楽コンテンツ利用装置内では、このプラグイン指定データに従ってプラグインプログラム記憶部Ｂ１７に記憶されているプラグインプログラムを用いて、コンテンツ素材データに基づく音楽に関する情報をユーザに提示するようにした。したがって、種々のプラグインプログラムが音楽コンテンツ利用装置側に用意されていても、コンテンツ素材データを利用する際に用いるプラグインプログラムを指定するプラグイン指定をコンテンツ規定データ中に含ませておけば、音楽コンテンツ利用装置側にて簡単に適切なプラグインプログラムが利用されるようになる。
【００４７】
また、コンテンツ規定データ中には、プラグインプログラムの使用時に用いられるプラグインパラメータも含ませておいて、音楽コンテンツ利用装置側において、プラグインパラメータを用いて入力したコンテンツ素材データに基づく音楽に関する情報をユーザに提示するようにした。したがって、プラグインプログラムの使用形態を表すパラメータを音楽コンテンツデータ側に準備しておくだけで、コンテンツ素材データに基づく音楽に関する情報を簡単かつ的確にユーザに提示することができるようになる。
【００４８】
次に、コンテンツの利用の中でも、特に、表示器２１にて再生制御ツールを利用した音楽コンテンツの第１および第２利用モードについて説明する。第１利用モードは、図５(Ａ)(Ｂ)に示すように、ブラウザを用いて表示器２１の画面上に再生制御ツール２１ａを表示するものであり、同画面上には複数の音楽コンテンツが表示される。本実施形態では、例えば、楽譜データに基づく楽譜およびビデオデータに基づく動画が表示器２１に表示される。再生制御ツール２１ａは、図示左側から右側に向けて音楽コンテンツの巻き戻し、再生停止、再生開始および早送りをそれぞれ制御する複数の要素からなる。これらの巻き戻し、再生停止、再生開始および早送りは、ユーザによる制御操作子群３２の操作に応じて表示画面上を移動するカーソルによって指定される。
【００４９】
また、この第１利用モードにおいては、複数の音楽コンテンツのうちの任意の１つ又は複数の音楽コンテンツが、アクティブ素材指定部Ｂ１６（図２参照）によってアクティブなものとして指定される。なお、アクティブとは、指定された音楽コンテンツが再生制御ツール２１ａの指示に従って制御されることを意味する。また、アクティブ素材指定部Ｂ１６は、図１においては制御操作子群３２に対応するものであり、例えば表示器２１上で表示されているコンテンツ素材上にマウスでカーソルを移動させ、マウスボタンをクリックすることでアクティブ素材を指定する。図５(Ａ)は楽譜２１ｂのみがアクティブにされた状態を示し、図５(Ｂ)は楽譜２１ｂおよび動画２１ｃがアクティブにされた状態を示している。図５ ( Ａ )では、動画２１ｃが待機状態にされており、この場合の動画２１ｃの全部または一部（例えば、ウインドウ枠など）は表示器２１にて表示されない、または目立たないように表示される。また、待機状態にある動画２１ｃを表示しない場合には、楽譜２１ｂを表示器２１の全体に表示するようにしてもよい。なお、この場合、楽譜２１ｄおよび動画２１ｅの表示に関しては、上述したコンテンツ規定データ中の楽譜指定データおよびビデオ指定データにより、それらの表示が指示される。
【００５０】
そして、図５(Ａ)の状態で、再生制御ツール２１ａによって巻き戻し、再生停止、再生開始または早送りが指示されると、楽譜コンテンツのみが巻き戻し、再生停止、再生開始または早送り制御される。この場合、例えば、楽譜における楽曲の進行位置を表すマーク２１ｂ１が前記巻き戻し、再生停止、再生開始または早送り制御に従って楽譜上を移動する。また、表示器２１にて一部の楽譜のみが表示されている場合には、楽曲の進行に合わせて表示される楽譜の部分が切換えられる。一方、動画２１ｃに関しては、その全部または一部が表示器２１に表示されない、または目立たない表示状態に維持されるとともに、動画コンテンツは巻き戻し、再生停止、再生開始または早送り制御されない。なお、この状態で、ＭＩＤＩコンテンツがアクティブに指定されていれば、同ＭＩＤＩコンテンツも再生制御ツール２１ａの指示によって制御されて、楽曲の演奏が巻き戻し、再生停止、再生開始または早送り制御される。
【００５１】
また、図５(Ｂ)の状態で、再生制御ツール２１ａによって巻き戻し、再生停止、再生開始または早送りが指示されると、前記楽譜コンテンツ（または楽譜コンテンツおよびＭＩＤＩコンテンツ）に加えて、動画コンテンツも巻き戻し、再生停止、再生開始または早送り制御される。すなわち、楽譜コンテンツ（または楽譜コンテンツおよびＭＩＤＩコンテンツ）と、動画コンテンツとが、再生制御ツール２１ａの巻き戻し、再生停止、再生開始または早送り指示に従って、同期制御される。
【００５２】
なお、前記説明では、アクティブにするコンテンツの種類をアクティブ素材指定部Ｂ１６（制御操作子群３２）によって指定するようにしたが、この指定が入力した音楽コンテンツパッケージに従うようにしてもよい。この場合、音楽コンテンツパッケージ内のコンテンツ規定データ中に、再生制御ツール２１ａによって巻き戻し、再生停止、再生開始または早送りが指示されるコンテンツ素材を表すデータを含ませておいて、同データにより初期状態でアクティブになるコンテンツ素材の指定が利用処理部Ｂ１５にて指示されるようにしておくとよい。その後は、ユーザの指示により他の素材をアクティブにすることができる。
【００５３】
これによれば、表示器２１に表示された複数のコンテンツ素材に共通に使用される再生制御ツール２１ａによって再生の制御されるコンテンツ素材がユーザ操作または自動的に選択され、コンテンツ素材の選択的な再生指示を簡単に行えるようになる。したがって、この音楽コンテンツ利用装置の使い勝手が良好となる。
【００５４】
次に、再生制御ツールの第２利用モードについて説明する。この場合、コンテンツ規定データ中の再生制御プラグイン指定データにより、再生制御ツールを表示するコンテンツ素材および同表示された再生制御ツールで同期制御されるコンテンツ素材が指定される。
【００５５】
例えば、再生制御ツール２１ａを表示するコンテンツ素材として楽譜データのみが指定されていれば（図３の例）、図６(Ａ)に示すように、表示器２１にて表示されている楽譜２１ｄおよび動画２１ｅのうちで楽譜２１ｄの近傍位置に同楽譜２１ｄに対応させて再生制御ツール２１ｆが表示される。なお、この場合、楽譜２１ｄおよび動画２１ｅの表示に関しては、上述したコンテンツ規定データ中の楽譜指定データおよびビデオ指定データにより、それらの表示がそれぞれ指示される。そして、再生制御ツール２１ｆによって同期制御されるコンテンツ素材として楽譜データおよびビデオデータが指定されていれば（図３の例１）、図６(Ａ)の楽譜２１ｄおよび動画２１ｅが前記第１利用モードの場合と同様に、再生制御ツール２１ｆの指示に従って同期制御される。すなわち、楽譜２１ｄおよび動画２１ｅの表示が同期して進行する。
【００５６】
一方、この図６(Ａ)の状態で、同期制御されるコンテンツ素材が楽譜データとＭＩＤＩデータであれば（図３の例２）、図６(Ａ)の楽譜２１ｄおよび自動演奏が前記第１利用モードの場合と同様に、再生制御ツール２１ｆの指示に従って同期制御される。しかし、この場合には、動画データは再生制御ツール２１ｆによって再生制御されない。
【００５７】
これに代わり、再生制御プラグインデータが楽譜データおよび動画データの両方に再生制御ツールを表示することを指定していれば、図６(Ｂ)に示すように、表示器２１にて表示されている楽譜２１ｄおよび動画２１ｅの各近傍位置に同楽譜２１ｄおよび動画２１ｅに対応させて再生制御ツール２１ｆ，２１ｇが表示される。そして、この場合には、同期制御されるコンテンツ素材は、再生制御ツール２１ｆ，２１ｇごとに、再生制御プラグイン指定データ中の同期制御する素材指定データによって指示される。
【００５８】
例えば、再生制御ツール２１ｆに対して楽譜データとＭＩＤＩデータが同期制御されるコンテンツ素材として指定されていれば、楽譜データとＭＩＤＩデータが、前記第１利用モードの場合と同様に、再生制御ツール２１ｆによって同期制御される。また、再生制御ツール２１ｇに対してビデオデータのみが同期制御されるコンテンツ素材として指定されていれば、ビデオデータのみが再生制御ツール２１ｇによって制御される。
【００５９】
これによれば、コンテンツ素材の表示指示（ビデオ指定データ、画像指定データなど）および再生制御ツールの表示指示（再生制御ツールを表示する素材指定データ）をコンテンツ規定データ中に含ませておくだけで、表示器２１に表示された再生制御ツール２１ｆ，２１ｇによって再生の制御されるコンテンツ素材が自動的に選択され、コンテンツ素材の選択的な再生指示を簡単に行えるようになる。
【００６０】
さらに、前記再生制御ツールの表示指示に加えて、同期制御されるコンテンツ素材を指定するための同期制御コンテンツ指示（同期制御する素材指定データ）をコンテンツ規定データに含ませておくだけで、複数のコンテンツ素材を再生制御ツールを用いて簡単に同期制御することができ、音楽コンテンツ利用装置の使い勝手が良好となる。
【００６１】
以上、本発明の一実施形態について説明したが、本発明の実施にあたっては、上記実施形態に限定されるものではなく、本発明の目的を逸脱しない限りにおいて種々の変形も可能である。
【００６２】
例えば、上記実施形態ではコンテンツ素材をユーザに提示するためのプログラムはプラグインプログラムとしたが、少なくとも一部のコンテンツ素材は基本的な制御プログラムによってユーザに提示されるようにしてもよい。この場合、例えば、ＭＩＤＩデータを再生するシーケンサプログラムを基本的な制御プログラム中に含めてもよい。
【００６３】
また、上記実施形態では、本発明に係る音楽コンテンツ利用装置として鍵盤３１を有する電子楽器を採用したが、本発明は、音楽コンテンツを利用可能な装置であれば、如何なる形態を有する音楽コンテンツ利用装置にも適用できるものである。例えば、鍵盤３１を有さない電子楽器、シーケンサ、リズムマシーンなどのコンピュータを内蔵する各種電子音楽装置を音楽コンテンツ利用装置として採用できるとともに、パーソナルコンピュータ、ＰＤＡ，携帯電話などの各種携帯端末装置も音楽コンテンツ利用装置として採用できるものである。
【００６４】
また、音楽コンテンツ利用装置としては、上記実施形態のような表示器２１、音源回路２２およびオーディオ信号再生回路２３の全てを含ないで、その一部を含むものであってもよい。さらに、音楽コンテンツの他の利用装置を含むものであってもよい。
【図面の簡単な説明】
【図１】本発明の一実施形態に係る音楽コンテンツ利用装置の全体ブロック図である。
【図２】コンピュータプログラムによって実現される図１の音楽コンテンツ利用装置の機能ブロック図である。
【図３】コンテンツ規定データのフォーマット図である。
【図４】 (Ａ)および(Ｂ)は、図１の２種類の表示器の例を示す図である。
【図５】 (Ａ)および(Ｂ)は、音楽コンテンツの具体的な利用例を示す表示器の表示画面を示す図である。
【図６】 (Ａ)および(Ｂ)は、音楽コンテンツの具体的な他の利用例を示す表示器の表示画面を示す図である。
【符号の説明】
１０…入力部、１１…通信インターフェース回路、２０…利用部、２１…表示器、２２…音源回路、２３…オーディオ信号再生回路、３０…操作部、３１…鍵盤、３２…制御操作子群、４０…コンピュータ本体部、４１…ＣＰＵ、４２…ＲＯＭ、４３…ＲＡＭ、４４…外部記憶装置、６０…サーバコンピュータ、Ｂ１１…データ入力部、Ｂ１２…フィルタリング処理部、Ｂ１３…変換処理部、Ｂ１４…スタイルシート記憶部、Ｂ１５…利用処理部、Ｂ１６…アクティブ素材指定部、Ｂ１７…プラグインプログラム記憶部。[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a music content utilization apparatus that inputs a plurality of types of content material data related to music and presents information related to music to the user using the input content material data, and a computer program applied to the apparatus.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, a music content utilization apparatus that reproduces music content combining music data (for example, MIDI data), moving image data, and the like and presents the music content to a user is known (Patent Document 1). In this apparatus, a playback control tool including start, stop, fast forward and rewind elements for controlling playback of the sequencer is displayed on the display screen, and the playback control tool is instructed using the mouse. The playback of the performance by the sequencer is controlled.
[0003]
[Patent Document 1]
JP 11-341350 A
[0004]
[Problems to be solved by the invention]
However, in the above-described conventional music content utilization apparatus, the reproduction control tool is only used fixedly for reproduction control of the sequencer and is not used effectively. That is, the playback control tool cannot be switched to various uses so as to selectively control playback of various content materials or to synchronously playback a plurality of content materials.
[0005]
SUMMARY OF THE INVENTION
The present invention has been made to cope with the above-described problem, and an object of the present invention is to provide music content that enables various playback controls of a plurality of content materials by effectively using a playback control tool displayed on a display. It is to provide a use program and a computer program applied to the same device.
[0006]
  In order to achieve the above object, a feature of the present invention is a music content utilization apparatus that includes a display and presents music content to a user.Played by running different programs,Music content data including multiple types of content material data related to music is input, and multiple types of content material represented by the input multiple types of content material data are displayed simultaneously on the display unit, and the content material is played back. The playback control tool for controlling the display is displayed on the display unit, and among the multiple types of content materials displayed on the display unit, the content material that is instructed to be played by the playback control tool is specified. There is.
[0007]
In this case, for example, a content material that is instructed to be reproduced by the reproduction control tool may be designated based on the operation of the operator by the user. In addition, content definition data for designating content material to be instructed to be reproduced by the reproduction control tool is included in the music content data, and the content material to be instructed to be reproduced by the reproduction control tool is designated based on the content definition data. It may be.
[0008]
According to this, the content material whose reproduction is controlled by the reproduction control tool displayed on the display device is selected by the user operation or automatically, and the selective reproduction instruction of the content material can be easily performed. In this case, the content material whose playback is controlled by the playback control tool may be single or plural. In the case of multiple content materials, a plurality of content materials are played back simultaneously, and the usability of the music content utilization device is improved. .
[0009]
  Another feature of the present invention is a music content utilization apparatus that includes a display and presents music content to a user.Played by running different programs,Display of multiple types of content material data related to music, material display instructions for displaying the content material represented by the multiple types of content material data on the display, and a playback control tool for controlling playback of the content material A plurality of types of content represented by a plurality of types of content material data input based on the material display instructions in the content definition data by inputting music content data including content definition data including tool display instructions for display on In addition to displaying the material on the display, the playback control tool is displayed on the display based on the tool display instruction in the content defining data.
[0010]
In this case, for example, a content specification instruction for specifying a content material on which the playback control tool is displayed in correspondence with the tool display instruction is also included in the content specification data, and is associated with the content material specified by the content specification instruction. A playback control tool should be displayed.
[0011]
According to this, simply by including the material display instruction and the tool display instruction in the content specification data, the content material whose playback is controlled by the playback control tool displayed on the display unit is automatically selected, and the content It becomes possible to easily perform selective reproduction instructions of materials. In this case, the content material whose playback is controlled by the playback control tool may be single or plural. In the case of multiple content materials, a plurality of content materials are played back simultaneously, and the usability of the music content utilization device is improved. .
[0012]
  Another feature of the present invention is a music content utilization apparatus that includes a display and presents music content to a user.Played by running different programs,Multiple types of content material data related to music and content display instructions for displaying content materials represented by the multiple types of content material data on the display unit and synchronized playback content instructions for specifying content materials to be played back synchronously The music content data including the content definition data including the content content data is input, and the plurality of types of content materials represented by the plurality of types of content material data input based on the material display instruction in the content specification data are displayed on the display. At the same time, a playback control tool for controlling the synchronized playback of the content material specified by the synchronized playback content instruction in the content specification data is displayed on the display.
[0013]
In this case, for example, a playback control tool instruction for displaying the playback control tool on the display unit may be included in the content defining data, and the content playback control tool may be displayed in accordance with the playback control tool instruction.
[0014]
According to this, simply by including a material display instruction and a synchronized playback content instruction, a plurality of content materials can be easily synchronized and played back using the playback control tool, and the music content utilization device is easy to use. Become.
[0015]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is an overall block diagram of a music content utilization apparatus in the form of an electronic musical instrument according to the embodiment. This music content use device includes an input unit 10 for inputting music content, a use unit 20 for using music content, and an operation unit operated by a user to instruct the operation of the music content use device. 30 and a computer main body 40 for program-controlling the input unit 10, the utilization unit 20, and the operation unit 30.
[0016]
The input unit 10 includes a communication interface circuit 11 and an interface circuit 12 connected to the bus 50. The communication interface circuit 11 is connected to the server computer 60 via a communication network 61 and allows the server computer 60 to transmit and receive various programs and various data. The interface circuit 12 is connected to another device 70 that is another music content using device connected to the music content using device, and allows various programs and various data to be transmitted to and received from the device 70.
[0017]
The utilization unit 20 includes a display 21, a sound source circuit 22, and an audio signal reproduction circuit 23. The display 21 includes a CRT display, a liquid crystal display, and the like, and is controlled by the display control circuit 24 connected to the bus 50 to visually display various information. The tone generator circuit 22 is connected to the bus 50 and forms a musical tone signal based on performance information (key code, key-on signal, key-off signal, tone color control information, etc.) as music content supplied via the bus 50. Output. The audio signal reproduction circuit 23 is also connected to the bus 50, reproduces audio data as music content supplied via the bus 50, and outputs an audio signal. A sound system 25 including an amplifier, a speaker, and the like is connected to the sound source circuit 22 and the audio signal reproduction circuit 23. The system 25 includes a musical sound signal from the sound source circuit 22 and an audio signal from the audio signal reproduction circuit 23. Sounds that correspond to.
[0018]
The operation unit 30 includes a keyboard 31 and a control operator group 32. The keyboard 31 includes a plurality of keys corresponding to a predetermined sound range, and is used for playing music. The control operator group 32 includes a plurality of operators that are operated to instruct the operation of the music content utilization apparatus. For example, a cursor movement key (including a mouse and a trackball) displayed on the display 21, a mode selection key for selecting various operation modes, and a user instruction are input to the control operator group 32. Instruction input keys to be included. The keyboard 31 may be used as these movement keys, mode selection keys, and instruction input keys. The operations of the keyboard 31 and the control operator group 32 are detected by detection circuits 33 and 34 connected to the bus 50, respectively.
[0019]
The computer main body 40 includes a CPU 41, a ROM 42, a RAM 43, and an external storage device 44 connected to the bus 50. The CPU 41, ROM 42, and RAM 43 execute various programs transferred from the external storage device 44 to the RAM 43, and control the operations of the input unit 10, the utilization unit 20, and the operation unit 30.
[0020]
The external storage device 44 can read and write programs and data to / from various recording media such as a built-in recording medium such as a hard disk HD, a detachable flexible disk FD, and a compact disk CD. Drive device. In the external storage device 44, the music content of the present invention is downloaded, and a basic control program and control data for controlling the basic operation of the music content utilization device are stored in advance. Examples of basic control programs include a music content utilization program including a browser, an operation detection program for keys and controls, a tone generation control program, and the like. It is possible to download these basic control programs and control data from the server computer 60 or another device 70.
[0021]
In addition, the external storage device 44 stores in advance style sheets and plug-in programs necessary for reproducing the input music content, and can be updated as appropriate. The style sheet is composed of a data group that defines music content that can be used by the use unit 20 and format conversion for making the input music content data available to the use unit 20. For example, the music content data according to the XML format is configured by an XSLT style sheet that converts the format so that the browser provided in the music content utilization apparatus can process it. Further, the XSLT style sheet may be constituted by “CSS”, that is, a cascading style sheet. The plug-in program is a program used for using the input music content data in the use unit 20, for example, a score display program for displaying a score on the display 21, and a video display on the display 21. Video program for scoring, scoring program for scoring performance by the keyboard 31, automatic performance program for automatically playing music using the tone generator circuit 22, and the like.
[0022]
Next, the use of music content using the music content utilization apparatus configured as described above will be described. First, the user starts a music content use program including a browser. By starting up the music content use program, the music content use apparatus of FIG. 1 starts to exhibit functions as shown in the functional block diagram of FIG. Therefore, this functional block diagram represents the functions realized by executing the program stored in the external storage device 44 from both the software and hardware sides. In other words, the contents of the program processing using the hardware configuration of FIG.
[0023]
As shown in FIG. 2, this music content utilization apparatus inputs music content data at a data input unit B11. This data input unit B11 corresponds to a process of loading music content data stored in the server computer 60 into the external storage device 44 in accordance with the operation of the control operator group 32 by the user. Note that the user instructs to import music content data according to the browser screen displayed on the display 21.
[0024]
Here, the music content data will be described. The music content data is prepared in advance and stored in the server computer 60, and is available for each package. A set of music content packages includes a plurality of types of content material data and content defining data for one page or a plurality of pages. The set of music content packages may be, for example, music content related to a musical piece for practice or music content related to a musical instrument for performance practice. The content material data in one music content package includes, for example, MIDI data composed of performance data, audio data composed of audio signals, video data composed of moving image data, score data representing a score, and image data representing a still image. And other data. Note that a plurality of sets of these types of content material data may be prepared, or only one set may be prepared.
[0025]
As shown in FIG. 3, the content defining data for one page includes title data, a plurality of sets of content material specifying data, text data, and a plurality of sets of playback control plug-in specifying data. This content defining data is described in, for example, an XML format. The title data indicates the title of the content.
[0026]
The content material designation data corresponds to a plurality of types of content material data described above, and regulates the handling of various contents including the designation of content materials. Specifically, each content material designation data includes path data for reading material data for designating the content material to be used (data “path data” representing a path indicating the location of a file or directory), and the same material data. Are used processing parameters, plug-in specification data for specifying a plug-in program, plug-in parameters used when the plug-in program is started, and other data. The use processing parameter and the plug-in parameter are data representing, for example, the score display size, video display size, scoring level, and the like.
[0027]
The text data represents an explanatory text (for example, an explanatory text of music, a musical instrument, etc.) displayed on the display 21. This text data does not prescribe the handling of the content material, but is the content material itself. However, since the content definition data itself is composed of a text file according to the XML format, in the present embodiment, the explanatory text is included in the content definition data as text data.
[0028]
The playback control plug-in designation data refers to playback control tools 21f and 21g (see FIG. 6) for controlling the playback of content material using the plug-in program stored in the external storage device 44 on the display 21. In addition to displaying, the content material controlled by the playback control tools 21f and 21g is designated. Each piece of playback control plug-in designation data is specified by data for specifying a content material to be displayed in association with the playback control tools 21f and 21g among the content materials displayed on the display 21, and by the playback control tools 21f and 21g. And data specifying one or more content materials to be controlled.
[0029]
As the content material data in a set of music content packages, the above-described MIDI data, audio data, video data, score data, image data, and other data may be prepared. There are cases where only is available. Further, the content defining data may include all of title data, content material designation data, text data, and reproduction control plug-in designation data, but may also include only a part thereof. In addition, each content material specification data may include all of path data, usage processing parameters, plug-in specification data, plug-in parameters, and other data, but only a part of them. There is also.
[0030]
As described above, the content material data and the content defining data constituting the music content package imported to the data input unit B11 (that is, the external storage device 44) are used by the usage processing unit B15 according to the operation of the control operator group 32 by the user. To be supplied. At this time, the filtering processing unit B12 extracts only the data related to the content material data that is defined by the style sheet stored in the style sheet storage unit B14 and can be used by the use unit 20 of the music content use device. Function to be supplied to the usage processing unit B15. That is, the filtering processing unit B12 performs filtering processing on the content material data and the content defining data supplied to the usage processing unit B15. Specifically, when the content material data in the use unit 20 is not available, the specified content related to the unavailable content material in the content specification data is deleted, so that the unavailable content material data is used. Do not supply to part B15.
[0031]
In addition, the conversion processing unit B13 converts the content defining data according to the conversion rule defined by the style sheet stored in the style sheet storage unit B14 and supplies the content defining data to the usage processing unit B15. That is, the conversion processing unit B13 converts the structure of the content defining data (XML data structure in the present embodiment) into a structure accepted by the usage processing unit B15 (browser in the present embodiment). In addition, the conversion processing unit B13 adds specific items that are not defined in the content specification data according to the style sheet, or adds items that are specified only abstractly in the content specification data according to the style sheet. Convert to matter.
[0032]
The addition and conversion of these specific items will be described by way of an example. The display layout of video and still images on the display 21 is not defined by the content defining data or is defined only abstractly. Therefore, the conversion processing unit B13 changes the video designation data, the score designation data, the image designation data, etc. according to the size, shape, resolution, etc. of the display 21 in this music content utilization device, and uses the utilization processing unit B15 ( In this embodiment, it is supplied to a browser).
[0033]
More specifically, the content defining data is abstract designation data that only displays an image and does not designate a specific plug-in program for displaying an image on the display 21. A plug-in program for displaying an image on the display 21 that is installed in the music content utilization apparatus is designated. If a specific display position on the display 21 such as a video, a score, a still image or the like is not specified by the content defining data, the display position is specifically specified by a style sheet. If the font of the character displayed on the display unit 21 is not defined by the content defining data or is defined only abstractly, the font of the same character is specifically designated by the style sheet.
[0034]
Next, the processing operation of the usage processing unit B will be described. When the converted content definition data is input, the usage processing unit B15 presents information on various content materials to the user according to the input content specification data. In this case, when the title data and the text data in the content defining data are input, an instruction converted by using the style sheet in the conversion processing unit B13 (if there is an added instruction, the converted and added instruction) ), Information represented by the title data and text data is displayed on the display 21. The title data and text data normally do not include plug-in designation data and plug-in parameters, and a browser included in a basic content use program is used.
[0035]
Further, when MIDI designation data, audio designation data, video designation data, score designation data, image designation data, or other designation data in the content definition data is input to the usage processing unit B15, Using the included material path data, the corresponding content material data in the music content package input to the data input unit B11 is taken into the usage processing unit B15. The usage processing unit B15 processes the input content material data and uses the usage unit 20 to present music information related to the content material data to the user.
[0036]
In this case, if the plug-in designation data is included in the content designation data, the plug-in program stored in the plug-in program storage unit B17 and designated by the plug-in designation data is started, and the input content Material data is processed. If the plug-in specification data is not included in the content specification data, the input content material data is processed by a basic content use program including a browser corresponding to the use processing unit B15. Of course, the content material data designated by the content designation data in this case is data that can be processed by the content utilization program. Further, when the content specification data includes usage processing parameters or plug-in parameters, these parameters are used for processing the content material.
[0037]
Specifically, if the content designation data is MIDI designation data, the MIDI data designated by the material path data in the music content package input to the data input unit B11 is taken into the usage processing unit B15. Then, the use processing unit B15 activates a plug-in program for reproducing MIDI data, and according to the progress of the music, the tone generator 22 transmits tone data, key-on data, key-off data, tone color control data, and the like constituting the MIDI data. Are sequentially supplied, and the tone generator circuit 22 is caused to form a musical tone signal corresponding to the supplied data. Therefore, the user is audibly presented with a musical sound corresponding to the formed musical sound signal via the sound system 25.
[0038]
If the content designation data is audio designation data, the audio data designated by the material path data is taken into the usage processing unit B15 from the music content package input to the data input unit B11. Then, the usage processing unit B15 activates a plug-in program for audio reproduction, and reproduces audio data representing audio signals (musical instrument performance sound, choral sound, human voice, etc.) represented by the audio data as audio signals. The signal is supplied to the circuit 23 as time elapses, and the audio signal reproduction circuit 23 reproduces the audio data. Accordingly, the user is presented with sounds such as played musical instrument sounds, choral sounds, and human voices via the sound system 25.
[0039]
If the content designation data is video designation data, the video data designated by the material path data is taken into the usage processing unit B15 from the music content package input to the data input unit B11. Then, the use processing unit B15 starts a video playback plug-in program, supplies moving image data representing moving images represented by the video data to the display device 21 via the display control circuit 24, and supplies the display device 21 with the moving image data. Play the video. Therefore, the moving image represented by the video data is visually presented to the user.
[0040]
If the content designation data is score designation data, the score data designated by the material path data from the music content package input to the data input unit B11 is taken into the use processing unit B15. Then, the use processing unit B15 activates a score display plug-in program, supplies image data corresponding to the score represented by the score data to the display 21 via the display control circuit 24, and the display 21 To display the score. Therefore, the score is visually presented to the user by the display 21.
[0041]
If the content designation data is other designation data, the other data designated by the material path data is taken into the usage processing unit B15 from the music content package input to the data input unit B11. Then, the usage processing unit B15 activates another plug-in program, processes other data, supplies it to the other output unit 26, and presents other music information to the user. Examples of the other music information include a key pressing instruction on the keyboard 31 and performance scoring by the user.
[0042]
As can be understood from the above operation description, in the music content utilization apparatus, the content processing data can be used in the utilization processing unit B15 and the utilization unit 20 by the processing of the conversion processing unit B13 using the style sheet. Since the content defining data is converted into the common music content, it becomes possible to use the common music content in various music content utilization apparatuses (that is, various platforms). In addition, since it is not necessary to create dedicated music content data for each of various music content using devices, a wide variety of music content data can be prepared relatively easily.
[0043]
For example, as shown in FIGS. 4A and 4B, even if the size of the display 21 is different and the area where the text (description) and the score can be displayed is different, the conversion process of the content defining data is performed. Thus, a free display layout on the display 21 can be set. Therefore, the music content data is efficiently used and the utility value of the music content data is increased.
[0044]
In addition, as shown in FIG. 4A, in a music content use apparatus that can display a video on the display device 21, a video can also be used. On the other hand, as shown in FIG. 4B, in the music content using apparatus that cannot display the video on the display 21, the video is not displayed by the conversion process. In particular, in this case, the video processing data is filtered and not supplied to the use processing unit B15 by the filtering process using the style sheet in the filtering processing unit B12, so that it cannot be used in the music content using device in the music content package. Even if the content material and the content designation data are included, the input content material can be used efficiently.
[0045]
Furthermore, in the above embodiment, the style sheet can be written to the style sheet storage unit B14 from the outside. That is, the style sheet in the music content using apparatus can be updated. Therefore, even if the specification of the music content use device is changed (for example, even if the software is upgraded), the music content can be used easily and appropriately by updating the style sheet.
[0046]
In the above embodiment, plug-in specifying data for specifying a plug-in program to be used when using content material data is included in the content definition data, and the plug-in is performed together with the content material data when inputting the music content package. The in-designated data is also supplied to the music content using device. In the music content utilization apparatus, information related to music based on the content material data is presented to the user using the plug-in program stored in the plug-in program storage unit B17 in accordance with the plug-in designation data. Therefore, even if various plug-in programs are prepared on the music content using apparatus side, if the plug-in specification for specifying the plug-in program used when using the content material data is included in the content specification data, An appropriate plug-in program can be easily used on the music content utilization apparatus side.
[0047]
In addition, the content specification data includes plug-in parameters used when using the plug-in program, and information on music based on the content material data input using the plug-in parameters on the music content utilization device side. Was presented to the user. Therefore, it is possible to simply and accurately present information related to music based on the content material data to the user simply by preparing parameters representing the usage pattern of the plug-in program on the music content data side.
[0048]
Next, a description will be given of first and second usage modes of music content using the playback control tool on the display unit 21 among the usage of content. In the first usage mode, as shown in FIGS. 5A and 5B, the playback control tool 21a is displayed on the screen of the display 21 using a browser, and a plurality of music contents are displayed on the screen. Is displayed. In the present embodiment, for example, a score based on score data and a moving image based on video data are displayed on the display 21. The playback control tool 21a is composed of a plurality of elements that respectively control rewinding, playback stop, playback start, and fast-forward of music content from the left side to the right side in the figure. These rewinding, playback stop, playback start, and fast forward are specified by a cursor that moves on the display screen in accordance with the operation of the control operator group 32 by the user.
[0049]
  In the first usage mode, any one or a plurality of music contents among the plurality of music contents are designated as active by the active material designation unit B16 (see FIG. 2). Note that “active” means that the designated music content is controlled in accordance with an instruction from the playback control tool 21a. Further, the active material designation unit B16 corresponds to the control operator group 32 in FIG. 1, and for example, the cursor is moved with the mouse on the content material displayed on the display 21, and the mouse button is clicked. To specify the active material. FIG. 5A shows a state where only the score 21b is activated, and FIG. 5B shows a state where the score 21b and the moving image 21c are activated.FIG. ( A )Then, the moving image 21c is in a standby state, and all or a part of the moving image 21c (for example, a window frame) in this case is not displayed on the display device 21 or is displayed inconspicuously. When the moving image 21c in the standby state is not displayed, the score 21b may be displayed on the entire display 21. In this case, regarding the display of the score 21d and the moving image 21e, the display thereof is instructed by the score specifying data and the video specifying data in the content defining data described above.
[0050]
Then, in the state shown in FIG. 5A, when the rewind, playback stop, playback start or fast forward is instructed by the playback control tool 21a, only the score content is rewound and playback stop, playback start or fast forward is controlled. In this case, for example, the mark 21b1 indicating the progress position of the music in the score moves on the score according to the rewind, playback stop, playback start or fast forward control. Further, when only a part of the score is displayed on the display device 21, the portion of the score displayed in accordance with the progress of the music is switched. On the other hand, all or a part of the moving image 21c is not displayed on the display device 21 or is kept in an inconspicuous display state, and the moving image content is not rewound, stopped for reproduction, started for reproduction, or fast-forwarded. In this state, if the MIDI content is designated as active, the MIDI content is also controlled by an instruction from the playback control tool 21a, and the performance of the music is rewound, playback stopped, playback started, or fast-forwarded.
[0051]
In the state of FIG. 5B, when the playback control tool 21a instructs to rewind, stop playback, start playback, or fast forward, in addition to the score content (or score content and MIDI content), the video content also Rewind, playback stop, playback start or fast-forward control are performed. That is, the score content (or score content and MIDI content) and the moving image content are synchronously controlled in accordance with the rewind, playback stop, playback start, or fast forward instruction of the playback control tool 21a.
[0052]
In the above description, the type of content to be activated is designated by the active material designation unit B16 (control operator group 32). However, the designation may be made according to the music content package input. In this case, the content defining data in the music content package includes data representing the content material instructed to be rewound, stopped, started, or fast-forwarded by the playback control tool 21a, and the initial state is determined by the data. The use processing unit B15 may instruct the specification of the content material that becomes active in step S15. Thereafter, another material can be activated according to a user instruction.
[0053]
According to this, the content material whose reproduction is controlled by the reproduction control tool 21a commonly used for the plurality of content materials displayed on the display 21 is selected by the user operation or automatically, and the content material is selectively selected. Playback instructions can be easily performed. Therefore, the usability of this music content utilization device is improved.
[0054]
Next, the second usage mode of the playback control tool will be described. In this case, the content material that displays the playback control tool and the content material that is synchronously controlled by the displayed playback control tool are specified by the playback control plug-in designation data in the content defining data.
[0055]
For example, if only score data is designated as the content material for displaying the playback control tool 21a (example in FIG. 3), as shown in FIG. 6A, the score 21d and the score 21d displayed on the display 21 are displayed. In the moving image 21e, a reproduction control tool 21f is displayed in the vicinity of the score 21d in correspondence with the score 21d. In this case, regarding the display of the musical score 21d and the moving image 21e, the display thereof is instructed by the musical score designation data and the video designation data in the content defining data described above. If musical score data and video data are designated as content materials that are synchronously controlled by the playback control tool 21f (example 1 in FIG. 3), the musical score 21d and the moving image 21e in FIG. As in the case of, synchronous control is performed according to the instruction of the reproduction control tool 21f. That is, the display of the score 21d and the moving image 21e proceeds in synchronization.
[0056]
On the other hand, in the state of FIG. 6 (A), if the content material to be synchronously controlled is score data and MIDI data (example 2 in FIG. 3), the score 21d and automatic performance of FIG. As in the case of the use mode, synchronous control is performed in accordance with an instruction from the playback control tool 21f. However, in this case, the moving image data is not playback controlled by the playback control tool 21f.
[0057]
Instead, if the playback control plug-in data specifies that the playback control tool is to be displayed on both the score data and the moving image data, it is displayed on the display 21 as shown in FIG. Reproduction control tools 21f and 21g are displayed at positions near the musical score 21d and the moving image 21e corresponding to the musical score 21d and the moving image 21e. In this case, the content material to be synchronously controlled is designated by the material designation data to be synchronously controlled in the reproduction control plug-in designation data for each of the reproduction control tools 21f and 21g.
[0058]
For example, if the score data and MIDI data are designated as the content material to be controlled synchronously with respect to the playback control tool 21f, the score control data and MIDI data are played back in the same manner as in the first usage mode. Is controlled synchronously. If only the video data is designated as the content material to be controlled synchronously with respect to the playback control tool 21g, only the video data is controlled by the playback control tool 21g.
[0059]
According to this, only content content display instructions (video designation data, image designation data, etc.) and playback control tool display instructions (material designation data for displaying the playback control tool) are included in the content specification data. The content material whose reproduction is controlled by the reproduction control tools 21f and 21g displayed on the display 21 is automatically selected, and the selective reproduction instruction of the content material can be easily performed.
[0060]
Further, in addition to the display instruction of the playback control tool, a content control data includes a synchronization control content instruction (material specification data for synchronization control) for specifying a content material to be controlled synchronously. The content material can be easily synchronously controlled by using the reproduction control tool, and the usability of the music content utilization device is improved.
[0061]
Although one embodiment of the present invention has been described above, the present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the object of the present invention.
[0062]
For example, in the above embodiment, the program for presenting the content material to the user is a plug-in program, but at least a part of the content material may be presented to the user by a basic control program. In this case, for example, a sequencer program for reproducing MIDI data may be included in the basic control program.
[0063]
In the above embodiment, the electronic musical instrument having the keyboard 31 is adopted as the music content utilization apparatus according to the present invention. However, the present invention is a music content utilization apparatus having any form as long as the apparatus can use the music content. It can also be applied to. For example, various electronic music devices having a built-in computer such as an electronic musical instrument, a sequencer, and a rhythm machine that do not have a keyboard 31 can be adopted as a music content utilization device. It can be used as a content use device.
[0064]
In addition, the music content utilization apparatus may not include all of the display device 21, the sound source circuit 22, and the audio signal reproduction circuit 23 as in the above embodiment, but may include a part thereof. Furthermore, other utilization apparatuses of music content may be included.
[Brief description of the drawings]
FIG. 1 is an overall block diagram of a music content utilization apparatus according to an embodiment of the present invention.
2 is a functional block diagram of the music content use apparatus of FIG. 1 realized by a computer program.
FIG. 3 is a format diagram of content defining data.
4A and 4B are diagrams showing examples of the two types of indicators in FIG.
FIGS. 5A and 5B are diagrams showing display screens of a display showing a specific example of using music content. FIGS.
FIGS. 6A and 6B are diagrams showing display screens of a display device showing another specific example of using music content. FIGS.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 10 ... Input part, 11 ... Communication interface circuit, 20 ... Utilization part, 21 ... Display, 22 ... Sound source circuit, 23 ... Audio signal reproduction circuit, 30 ... Operation part, 31 ... Keyboard, 32 ... Control operator group, 40 ... Computer main unit 41 ... CPU, 42 ... ROM, 43 ... RAM, 44 ... External storage device, 60 ... Server computer, B11 ... Data input unit, B12 ... Filtering processing unit, B13 ... Conversion processing unit, B14 ... Style sheet Storage unit, B15... Usage processing unit, B16... Active material designation unit, B17.

Claims

In a music content utilization apparatus equipped with a display,
An input unit for inputting music content data including a plurality of types of content material data related to music , each of which is reproduced by execution of a plurality of different programs ;
A plurality of types of content materials represented by the plurality of types of input content material data are simultaneously displayed on the display unit, and a playback control tool for controlling playback of the content material is displayed on the display unit. A display control unit,
An apparatus for using music content, comprising: an active material designating unit for designating a content material that is instructed to be reproduced by the reproduction control tool among a plurality of types of content material displayed on the display.

The music content utilization apparatus according to claim 1, wherein the active material designation unit designates a content material that is instructed to be reproduced by the reproduction control tool based on an operation of an operator by a user.

The music content data also includes content defining data for designating content material to be instructed to be reproduced by the reproduction control tool,
The music content utilization apparatus according to claim 1 or 2, wherein the active material designating unit designates a content material that is instructed to be reproduced by the reproduction control tool based on the content defining data.

In a music content utilization apparatus equipped with a display,
A plurality of types of content material data related to music , each of which is reproduced by execution of a plurality of different programs, and a material display instruction for causing the display to display content materials represented by the plurality of types of content material data and the content An input unit for inputting music content data including content defining data including a tool display instruction for displaying a playback control tool for controlling playback of material on the display;
A plurality of types of content materials represented by the plurality of types of input content material data are displayed on the display based on the material display instructions in the content definition data, and a tool display instruction in the content definition data is displayed. And a display control unit for displaying the reproduction control tool on the display.

The content defining data also includes a content designation instruction for designating a content material to be displayed by the playback control tool in correspondence with the tool display instruction, and the display control unit applies the content material designated by the content designation instruction. The music content utilization apparatus according to claim 4, wherein the reproduction control tool is displayed in correspondence.

In a music content utilization apparatus equipped with a display,
A plurality of types of content material data related to music , each of which is reproduced by executing a plurality of different programs, and a material display instruction and synchronized playback for displaying the content material represented by the plurality of types of content material data on the display An input unit for inputting music content data including content specification data including a synchronous playback content instruction for designating content material to be played;
A plurality of types of content materials represented by the plurality of types of input content material data are displayed on the display based on the material display instructions in the content definition data, and synchronized playback content instructions in the content definition data And a display control unit for displaying a playback control tool for controlling synchronized playback of the content material specified by the display on the display.

The content definition data includes a playback control tool instruction for causing the display to display the playback control tool, and the display control unit displays the content playback control tool according to the playback control tool instruction. Music content use device.

To a computer applied to a music content utilization device equipped with a display ,
An input procedure for inputting music content data including a plurality of types of content material data related to music , each of which is reproduced by executing a plurality of different programs ,
A plurality of types of content materials represented by the plurality of types of input content material data are simultaneously displayed on the display unit, and a playback control tool for controlling playback of the content material is displayed on the display unit. Display control procedure to be
An active material designating procedure for designating a content material to be instructed to be reproduced by the reproduction control tool among a plurality of types of content material displayed on the display;
A computer program for running .

To a computer applied to a music content utilization device equipped with a display ,
A plurality of types of content material data related to music , each of which is reproduced by execution of a plurality of different programs, and a material display instruction for causing the display to display content materials represented by the plurality of types of content material data and the content An input procedure for inputting music content data including content definition data including a tool display instruction for displaying a playback control tool for controlling playback of material on the display;
A plurality of types of content materials represented by the plurality of types of input content material data are displayed on the display based on the material display instructions in the content definition data, and a tool display instruction in the content definition data is displayed. Display control procedure for displaying the playback control tool on the display based on
A computer program for running .

To a computer applied to a music content utilization device equipped with a display ,
A plurality of types of content material data related to music , each of which is reproduced by executing a plurality of different programs, and a material display instruction and synchronized playback for displaying the content material represented by the plurality of types of content material data on the display An input procedure for inputting music content data including content specification data including a synchronous playback content instruction for designating content material to be played,
A plurality of types of content materials represented by the plurality of types of input content material data are displayed on the display based on the material display instructions in the content definition data, and synchronized playback content instructions in the content definition data A display control procedure for displaying on the display a playback control tool for controlling the synchronized playback of the content material specified by
A computer program for running .