WO2022049732A1

WO2022049732A1 - 情報処理装置及び情報処理方法

Info

Publication number: WO2022049732A1
Application number: PCT/JP2020/033637
Authority: WO
Inventors: 博也栗尾; 正人上野; 信二浅川
Original assignee: ローランド株式会社
Priority date: 2020-09-04
Filing date: 2020-09-04
Publication date: 2022-03-10
Also published as: EP4120239A1; CN115461809A; US11922913B2; US20230144216A1; EP4120239A4

Abstract

情報処理装置は、楽曲の再生時間における１又は２以上の時刻を示す情報の入力を受け付け、１又は２以上の時刻の夫々から行う音色制御に係る情報を含むファイルを生成する制御部と、楽曲の再生音と楽器の演奏音との合成音を出力する装置に対し、楽曲の音声信号と、ファイル中の音色制御に係る情報を送信する送信部とを含む。

Description

情報処理装置及び情報処理方法

　本開示は、情報処理装置及び情報処理方法に関する。

　従来、ユーザに表示するためにオーディオ・ファイルのマルチメディア・プレゼンテーションをコンピューティング・デバイスに配信し、さらにユーザがマルチメディア・プレゼンテーションに合わせて楽器を演奏することができるシステムがある（例えば、特許文献１を参照）。また、コンテンツ種別リストから選択されたコンテンツのリンク先から、エフェクタで実行させる処理に関する制御情報とその実行時刻の情報が記載されているＸＭＬファイルがダウンロードされ、曲データの再生位置が実行時刻となったときに、エフェクタで指定されたエフェクト処理を実行する音楽プレーヤーがある（例えば、特許文献２を参照）。

特表２００５－５１０７６３号公報特開２００８－１９１５４６号公報

　本開示は、楽曲の再生時間の所望の時刻から所望の音色での再生を行う情報を設定可能な情報処理装置及び情報処理方法を提供することを目的とする。

　本開示の一態様は、楽曲の再生時間における１又は２以上の時刻を示す情報の入力を受け付け、前記１又は２以上の時刻の夫々から行う音色制御に係る情報を含むファイルを生成する制御部と、前記楽曲の再生音と楽器の演奏音との合成音を出力する装置に対し、前記楽曲の音声信号と、前記ファイル中の前記音色制御に係る情報を送信する送信部と
を含む情報処理装置である。

　本開示の一態様は、情報処理装置と同様の特徴を有する、情報処理方法、プログラム、プログラムを記録した記録媒体、情報処理装置と装置（音色制御装置）とを含む情報処理システムなどを含んでもよい。

図１は、情報処理システムの構成例を示す。図２は、音声付き動画の再生画面の画面表示例を示す。図３は、マーカの編集画面の画面表示例を示す。図４は、セッションファイルのデータ構造例を示す。図５は、情報処理装置の構成例を示す。図６は、情報処理装置のプロセッサによる処理例を示すフローチャートである。図７は、情報処理装置のプロセッサによる処理例を示すフローチャートである。図８は、音色制御装置の外観構成を示す。図９は、音色制御装置の回路構成を示す。図１０は、情報処理装置及び音色制御装置の動作説明図である。図１１は、情報処理装置及び音色制御装置の動作説明図である。図１２は、情報処理装置及び音色制御装置の動作説明図である。図１３は、変形例における情報処理装置のプロセッサによる処理例を示すフローチャートである。図１４は、変形例における情報処理装置のプロセッサによる処理例を示すフローチャートである。図１５は、変形例における情報処理装置のプロセッサによる処理例を示すフローチャートである。

　実施形態では、以下を含む情報処理装置について説明する。
（１）楽曲の再生時間における１又は２以上の時刻を示す情報の入力を受け付け、１又は２以上の時刻の夫々から行う音色制御に係る情報を含むファイルを生成する制御部。
（２）楽曲の再生音と楽器の演奏音との合成音を出力する装置に対し、楽曲の音声信号と、ファイル中の音色制御に係る情報を送信する送信部。

　情報処理装置によれば、楽曲の再生時間中の、１又は２以上の時刻の入力と、各時刻に対応する音色制御に係る情報とを受け付ける。このため、情報処理装置のユーザは、自身の所望の時刻の夫々に関して所望の音色制御を行うことを設定することができる。そして、楽曲の音声信号と、音声制御に係る情報とが、楽曲の再生音と楽器の演奏音との合成音を出力する装置に送信される。これによって、装置では、楽曲の再生音と楽器の演奏音との少なくとも一方に音声制御を施すことができる。「音声制御」は、音声信号の加工によって音波の波形を変化させることを含み、音声信号に対する効果（エフェクト）の付与、及びエレキギターの演奏音の音声信号を、所定のギターアンプに接続したときの模擬音に加工することを含む。音色制御及びエフェクトは、ビブラート、トレモロ、リバーブ、コーラス、ディレイ、オーバードライブ／ディストーションなどを含む。

〔実施形態〕
　以下、図面を参照して、実施形態に係る情報処理装置及び情報処理方法、並びにプログラムについて説明する。実施形態の構成は例示であり、実施形態の構成に限定されない。

＜情報処理システム＞
　図１は、情報処理装置を含む情報処理システムの構成例を示す。情報処理システムは、情報処理システムのユーザが、楽曲の再生音を伴奏として楽器の演奏を練習するために使用される。

　情報処理システムは、情報処理装置２０と、情報処理装置２０と通信可能な音色制御装置１０と、情報処理装置２０とネットワーク１を介して接続された第１サーバ２及び第２サーバ３とを含む。音色制御装置１０は、楽曲の再生音と楽器の演奏音との合成音を出力する装置の一例である。

　ネットワーク１は、インターネット、ＬＴＥ（Long Term Evolution）、５Ｇ等の公衆網（ＷＡＮ）、或いはイントラネット等である。ネットワーク１は、無線区間を含んでもよい。第１サーバ２は、楽器の練習用の楽曲に関する情報を管理し、情報処理装置２０に供給することができる。

　第２サーバ３は、ユーザ７に提供する練習用の楽曲のデータを管理し、情報処理装置２０に供給することができる。情報処理装置２０は、楽曲のデータに基づく音声信号と、楽曲の再生時間における所望のタイミング（時刻）から行う音色制御に係る情報を音色制御装置１０に送信する。

　音色制御装置１０には、楽器の一例であるエレキギター６と、ヘッドホン５とが接続される。ヘッドホン５はユーザ７に装着され、エレキギター６は、ユーザ７によって演奏される。なお、楽器はエレキギター６以外の楽器（ベースなどの弦楽器、ピアノなどの鍵盤楽器、ドラムなどの打楽器、サキソフォンなどの吹奏楽器）であってもよい。楽器は電子楽器でもアコースティックであってもよく、演奏によって生じる演奏音に対応する電気信号が音色制御装置１０に入力される構成となっていればよい。

　音色制御装置１０は、楽曲の再生音と、楽器（エレキギター６）の演奏音とを合成した合成音をヘッドホン５に出力可能な装置である。ユーザ７は、ヘッドホン５からの音声を聴取することによって、自身が演奏するエレキギター６と、楽曲の再生音（他の楽器の演奏音）とのセッションの練習を行うことができる。

　合成音の出力にあたり、音色制御装置１０は、情報処理装置から送信される、楽曲の音声信号と、各時刻に対応する、音色制御に係る情報とを受信し、音色制御に係る情報に基づいて、楽曲の再生音及び楽器の演奏音の少なくとも一方に対する音色制御、すなわち音声信号に対する加工を行う。

　情報処理装置２０は、通信機能を有する情報端末であり、パーソナルコンピュータ、スマートフォン、及びタブレット端末などを含む、専用または汎用のコンピュータ（Computing Device）である。情報処理装置２０は、固定端末でも移動端末でもよい。本実施形態では、情報処理装置２０がスマートフォンであることを想定している。

　情報処理装置２０には、情報処理システムを利用した楽器練習用のアプリケーションブログラム（以下、練習用アプリという）がインストールされている。練習用アプリの実行によって、情報処理装置２０は、ユーザ７が、セッションファイルと呼ばれるファイルに含める情報を生成し、第１サーバ２にセッションファイルを登録する環境をユーザ７に提供する。

　情報処理装置２０は、第１サーバ２から複数の練習用の楽曲のリストを受け取る。リストには、各楽曲のファイル（楽曲ファイル）の保存位置を示す情報であるＵＲＬ（Uniform Resource Locator）が含まれている。情報処理装置２０は、ユーザ７の楽曲の選択結果に応じて、選択された楽曲のＵＲＬを用いて、第２サーバ３にアクセスし、第２サーバ３に保管されている楽曲データを取得する。

　第２サーバ３は、YouTube（登録商標）等の動画供給サービス又は動画配信サービスを提供するサーバである。楽曲データのファイル形式に制限はない。本実施形態では、楽曲データは、音声付き動画ファイルの形式で提供される。音声付き動画ファイルのファイル形式は、例えば、“.MOV”,“MPEG4”,“.MP4”,“.AVI”,“.WMV”などである。但し、ファイル形式は上述の例示に制限されない。また、楽曲データのファイルが音声付き動画ファイルであることは必須ではなく、楽曲のファイルは音声ファイルであってもよい。

　第２サーバ３からは、音声付き動画ファイルに基づく動画データ及び楽曲データとして、ビデオストリームとオーディオストリームとが情報処理装置２０に入力される。情報処理装置２０は、ビデオストリームに基づくビデオ信号をディスプレイ２５（「表示装置」の一例）に送り、ビデオストリームに基づく画像（動画）をディスプレイ２５に表示することができる。一方、情報処理装置２０は、オーディオストリームに基づく音声信号（オーディオ信号）を、音色制御装置１０に送信する。

　なお、上記例では、音声付き動画ファイルのストリーム再生を説明しているが、ダウンロード再生であってもよい。また、楽曲データのファイルを情報処理装置２０がアクセス可能な記憶装置に予め記憶しておき、そこから楽曲データを取得する構成を採用して、第２サーバ３を省略してもよい。この場合、ＵＲＬの代わりに、メモリのアドレスなどが、楽曲データの保存位置を示す情報として使用される。

　楽曲（音声付き動画）の再生、一時停止、巻き戻し、早送りなどの再生制御は、情報処理装置２０によって提供するユーザインタフェース（ＵＩ）をユーザ７が操作することによって行うことができる。

　また、情報処理装置２０は、音色制御装置１０が有する操作子（ボタン、スイッチ、つまみなど）をユーザ７が操作した場合に、音色制御装置１０から情報処理装置２０に送信される再生制御の情報を音色制御装置１０から受け付けて、楽曲の再生制御を行うこともできる。

　ディスプレイ２５には、音声付き動画の再生画面２５Ａと、マーカの編集画面２５Ｂとを含む、様々な画面が表示される。図２は、音声付き動画の再生画面２５Ａの画面表示例を示し、図３は、マーカの編集画面２５Ｂの画面表示例を示す。再生画面２５Ａ及び編集画面２５Ｂは、練習用アプリの実行によって表示される。但し、再生画面２５Ａ及び編集画面２５Ｂは、情報処理装置２０にインストールされたＷｅｂブラウザによって提供されてもよい。

　再生画面２５Ａの上段には、楽曲リストから選ばれた楽曲の名称（図２では“Song Rock1”）２５１が表示され、その下に、動画の表示領域２５１が設けられている。動画の表示領域２５１には、楽曲のＵＲＬを用いて第２サーバ３から取得した音声付き動画の初期画面が表示され、再生指示の入力によって再生が開始される。再生される動画として、例えば、エレキギターの弦の押さえ方を示すレッスン用の映像を表示してもよい。但し、動画の内容に制限はなく、静止画でもよい。また、楽曲のファイルが音声ファイルである場合、表示領域２５１には何も表示されないか、予め用意された画像が表示される。

　動画の表示領域２５１の下には、音声付き動画（楽曲）の再生時間を示すシークバー２５２が表示され、シークバー２５２の左側（周辺）には、再生時間における現在時刻（再生時刻）が表示される。

　シークバー２５２の下には、音声付き動画の再生、一時停止、巻き戻し、早送りの操作（再生制御）を行うためのＵＩ２５３が表示される。図２に示すＵＩ２５３は、右から順に、早送り、再生、巻き戻し、曲の頭への巻き戻しを示すシンボルを含み、各シンボルは、対応する操作のボタンとして機能する。音声付き動画の初期画面が表示領域２５１に表示されている状態で再生を示すシンボル（再生ボタン）が押されると、音声付き動画の再生が開始される。このとき、再生を示すシンボルから一時停止（ポーズ）を示すシンボルに表示が切り替わり、一時停止のシンボルを押すと、音声付き動画の再生が一時停止される。このとき、一時停止のシンボルの表示が、再生のシンボルの表示に再び切り替わる。このように、再生ボタンと一時停止ボタンとが交代で表示される。

　ＵＩ２５３の下には、楽曲に対して設定されたマーカのリスト２５５が表示される。マーカは、楽曲の音色制御の開始点を示す。図２に示す例では、楽曲に対して３つのマーカが設定されており、マーカ毎のレコードが示されている。

　一つ目の（第１の）マーカは、名称が“Intro”であるマーカであり、音声付き動画の再生時間における時刻“００：００”と、メモリ番号とが設定されている。メモリ番号は、音声信号を所定の（ユーザ７の所望する）音色に加工するためのパラメータ（音色パラメータ）のセットを特定する情報であり、「音色制御に係る情報」の一例である。音色パラメータのセットの情報は、音色制御装置１０が有するメモリ（記憶装置１０２）の記憶領域に記憶されており、メモリ番号は、音色パラメータのセットのデータの格納位置（アドレス）を示すとともに、音色パラメータのセットの識別子として作用する。例えば、時刻“００：００”に対応するメモリ番号“０１”は、時刻“００：００”からの音色制御に適用する音色パラメータのセットを示す。なお、音色パラメータのセットは、「パッチ」と呼ばれることもある。

　二つ目の（第２の）マーカは、名称が“Backing Chord”であるマーカである。第２のマーカには、音声付き動画の再生時間における時刻“００：１０”と、時刻“００：１０”に対応するメモリ番号“０２”とが設定されている。

　三つ目の（第３の）マーカは、名称が“Solo Crunch”であるマーカである。第３のマーカには、音声付き動画の再生時間における時刻“００：３３”と、時刻“００：３３”に対応するメモリ番号“０８”が設定されている。

　マーカのリスト２５５において、マーカのレコードの夫々は、時刻、名称、メモリ番号の順に表示され、右端には、編集画面２５Ｂ（図３）への切り替えを示すシンボル２５９が示されている。シンボル２５９が押されると、対応するマーカを編集する編集画面２５Ｂがディスプレイ２５に表示される。

　図３において、マーカの編集画面２５Ｂの上段は、再生画面２５Ａと同様であり、音声付き動画（楽曲）の閲覧及び再生制御を行う画面である。編集画面２５Ｂの下段には、再生画面２５Ａにおけるマーカのリスト２５５から選択されたマーカのレコードを編集するための画面が表示される。すなわち、時刻（TIME）の入力欄２６１と、マーカ名（MARKER NAME）の入力欄２６２と、メモリ番号（MEMORY NUMBER）の入力欄２６３と、入力事項の確定ボタン（“ＯＫ”ボタン）２６４と、キャンセルボタン２６５とが表示される。

　ＯＫボタンが押されると、表示が再生画面２５Ａに切り替わり、入力欄２６１～２６３を用いて設定された時刻、マーカ名、メモリ番号の確定内容が、マーカのリスト２５５に表示されるようになる。

　また、シークバー２５２には、マーカのシンボル２５４が表示される。マーカのシンボル２５４は、シークバー２５２で示される楽曲の再生時間における時刻の相対位置を示す。マーカのシンボル２５４のうち、再生時刻の経過によって使用が終わった（他に切り替わった）メモリ番号に対応するマーカのシンボル２５４と、現在使用中のメモリ番号に対応するマーカのシンボル２５４とは異なった態様で表示される。図２に示す例では、メモリ番号の使用が終わったシンボル２５４は、塗りつぶしのない楕円で示され、使用中のメモリ番号に対応するシンボル２５４は、塗りつぶしの楕円で示される。

　再生画面２５Ａにおいて、マーカのリスト２５５の下には、メモリ番号の編集ボタン２５６が設けられている。編集ボタン２５６が押されると、メモリ番号の編集画面（「音色制御内容の編集画面」の一例）がディスプレイ２５に表示される。ユーザ７は、編集画面を用いて、時刻に対応する（割り当てる）メモリ番号（音色パラメータのセット）を編集することができる。このとき、ユーザ７は、編集画面に表示されたＵＩと、音色制御装置１０が備える操作子との一方を用いて、メモリ番号を編集することができる。すなわち、情報処理装置２０は、音色制御内容の編集画面をディスプレイ２５に表示し、音色制御装置１０から情報処理装置２０に送信される、音色制御の内容を示す情報を受け付けることができる。情報処理装置２０と音色制御装置１０とは通信を行い、情報処理装置２０におけるＵＩの操作状態と、音色制御装置１０の操作子の操作状態とは同期をとる。

　また、マーカのリスト２５５の下にあるボタン２５７を押すと、予め作成されたメモリ番号のリストが表示され、ユーザ７は、メモリ番号のリストから、時刻に割り当てるメモリ番号を確認することもできる。

　楽曲に対する１又は２以上のマーカの設定を通じて、情報処理装置２０は、マーカの設定結果を含むファイル（セッションファイルと呼ばれる）を生成する。図４は、セッションファイルのデータ構造例を示す。セッションファイルは、楽曲毎、すなわち楽曲を含む音声付き動画ファイル毎に生成される。セッションファイルは、楽曲又は楽曲ファイルの名称と、楽曲ファイルの保存位置を示す情報であるＵＲＬと、楽曲に対して１又は２以上設定されるマーカを示す情報とを含む。

　マーカの情報として、マーカ名と、楽曲の再生時間における時刻（ユーザ７によって任意に設定される）を示す情報と、その時刻から適用する音色制御を示す情報である音色パラメータのセットを示す情報、すなわち、メモリ番号とが記憶される。図４に示す例では、１つの楽曲に対して、３つのマーカが設定された場合を例示する。本実施形態では、一つの楽曲に対して一つのＵＲＬが設定され、楽曲ファイルはＵＲＬによって一意に決定される。

　また、情報処理装置２０は、練習用アプリの実行を通じて、ユーザ７が第１サーバ２に登録されたセッションファイルに含まれた情報と、第２サーバ３から提供される楽曲データと、音色制御装置１０とを用いて、楽曲の再生音による伴奏付きのエレキギター６の練習を行う環境を提供する。

　例えば、マーカの設定が終わった再生画面２５Ａが表示され、音声付き動画ファイルの再生が待機されている状態で、ユーザ７が音色制御装置１０に備えられた再生ボタンを押すと、音声付き動画ファイルの再生指示が情報処理装置２０に送信される。情報処理装置２０は、再生指示を受信すると、音声付き動画ファイルの再生を開始し、再生画面２５Ａの表示領域２５１に再生画像の表示する処理と、楽曲データに基づく音声信号を音色制御装置１０へ送信する処理とを行う。

　情報処理装置２０は、音声信号の送信に合わせて、楽曲に対して設定された１又は２以上のマーカの夫々における時刻が到来する前に、時刻に対応するメモリ番号の情報（音色パラメータのセット）を、音色制御装置１０に送信する。音色制御装置１０は、メモリ番号の情報を記憶するメモリを有し、音色パラメータのセットの情報は、セッションファイルに設定されたメモリ番号で示される記憶領域に記憶される。

　音色制御装置１０は、マーカに設定した時刻が到来すると、その時刻に対応するメモリ番号の音色パラメータのセットを用いた音声制御、すなわち音声信号の加工を行う。例えば、音色制御装置１０は、エレキギター６の演奏音の加工を行い、加工したエレキギター６の演奏音と楽曲の再生音とを合成（ミキシング）した楽音信号をヘッドホン５に接続する。これによって、所望のタイミングで音色が変更されたエレキギター６の演奏音をユーザ７は聴取することができる。なお、メモリ番号の音色パラメータのセットに基づく音声信号の加工は、楽曲の再生音、又はエレキギター６の演奏音と楽曲の再生音との合成音に対して行われてもよい。

　＜情報処理装置＞
　図５は、情報処理装置２０の構成例を示す。図５において、情報処理装置２０は、バス２６に接続された、プロセッサ２１と、記憶装置２２と、通信インタフェース（通信ＩＦ）２３と、入力装置２４と、ディスプレイ２５と、無線通信ＩＦ２７とを含む。プロセッサ２１は、制御部（制御装置、コントローラ）の一例であり、通信ＩＦ２３及び無線通信ＩＦ２７の夫々は、送信部（送信装置、送信機）の一例である。

　記憶装置２２は、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、ハードディスクドライブ（ＨＤＤ）、ＳＳＤ（Solid State Drive）、フラッシュメモリ、及びＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）などである。記憶装置２２は、データ及びプログラムの記憶領域、プロセッサ２１の作業領域、通信データのバッファ領域などとして使用される。

　通信ＩＦ２３は、例えばネットワークインタフェースカード（ＮＩＣ）であり、ネットワーク１を介したデータの送受信に使用される。入力装置２４は、キー、ボタン、ポインティングデバイス（マウスなど）、タッチパネル、つまみ及びスイッチなどであり、情報及びデータの入力に使用される。ディスプレイ２５は例えばＬＣＤであり、情報の表示に使用される。無線通信ＩＦ２７は、所定の無線通信規格に従った無線通信回路である。本実施形態では、無線通信ＩＦ２７は、Bluetoothと、ＢＬＥ（Bluetooth Low Energy）とをサポートしており、音色制御装置１０との無線通信に使用される。なお、情報処理装置２０は、ＵＳＢ（Universal Serial Bus）を介して音色制御装置１０とデータを送受信可能である。

　プロセッサ２１は、例えばＣＰＵ（Central Processing Unit）であり、オペレーティングシステム（ＯＳ）及び練習用アプリを含む様々なプログラムを実行する。練習用アプリの実行によって、プロセッサ２１は、セッションファイルを生成及び保存する環境を提供する処理と、セッションファイルに従って音声信号とメモリ番号の情報とを音色制御装置１０に供給する処理とを行う。

　図６及び図７は、情報処理装置２０のプロセッサ２１による処理例を示すフローチャートであり、プロセッサ２１が上述した練習用アプリを実行した場合の動作を説明する。プロセッサ２１は、練習用アプリを起動させると、第１サーバ２にアクセスし、楽曲リストを第１サーバ２から取得する（ステップＳ００１）。すなわち、プロセッサ２１は、第１サーバ２に楽曲リストの提供要求のメッセージを生成する。通信ＩＦ２３は、メッセージを送信し、メッセージの応答として、楽曲リストを第１サーバ２から受信する。プロセッサ２１は、通信ＩＦ２３が受信した楽曲リストを得る。

　ステップＳ００２では、プロセッサ２１は、楽曲リストの画面をディスプレイ２５に表示し、ユーザ７が入力装置２４を用いて行う、楽曲の選択結果の入力を受け付ける。

　ステップＳ００３では、プロセッサ２１は、選択された楽曲のセッションファイルを、第１サーバ２から取得する。すなわち、プロセッサ２１は、楽曲の選択結果と、ユーザ７の識別情報であるユーザＩＤとを含む、セッションファイルの提供要求のメッセージを生成する。通信ＩＦ２３は、提供要求のメッセージを第１サーバ２に送信する。第１サーバ２は、メッセージに含まれるユーザＩＤ及び楽曲に対応するセッションファイルを記憶装置から読み出し、情報処理装置２０に送信する。プロセッサ２１は、通信ＩＦ２３を介してセッションファイルを取得する。このとき受信されるセッションファイルに関して、ユーザ７が楽曲に対するマーカの設定を行っていない場合には、セッションファイルは、楽曲名とＵＲＬを含むが、マーカに係る情報（時刻、マーカ名、メモリ番号）は未編集の状態である。

　ステップＳ００４では、プロセッサ２１は、セッションファイル中のＵＲＬを用いて、第２サーバ３にアクセスし、楽曲の音声付き動画ファイルの提供を受ける。このとき、音声付き動画ファイルの再生方法は、ストリーミング再生であっても、ダウンロード再生であってもよい。記憶装置２２に過去にダウンロードした音声付き動画ファイルがある場合には、第２サーバ３へのアクセスがスキップされてもよい。

　ステップＳ００５では、プロセッサ２１は、楽曲、すなわち音声付き動画の再生画面２５Ａ（図２）をディスプレイに表示する。再生画面２５において、表示領域２５１にて表示される動画は、動画共有サービス（例えばYouTube（登録商標））の埋め込み動画であり、動画の再生制御（すなわち、動画の再生、一時停止、巻き戻し、早送りなどの再生制御）の情報は、動画共有サービスのＡＰＩ（Application Programming Interface）を用いて第２サーバ３から供給される動画再生ソフトウェアに伝達され、動画再生ソフトウェアによって再生制御が行われる。表示領域２５１には、音声付き動画の初期画面が再生指示を待機する状態で表示される。

　ステップＳ００６では、プロセッサ２１は、楽曲に対するマーカ及びメモリ番号の少なくとも一方の編集（設定）が必要か否かを判定する。編集の要否は、例えば、編集ボタン２５６の押し下げの有無を以て判定される。ここで、編集が必要と判定される場合には、処理がステップＳ００７に進み、そうでない場合には、処理がステップＳ００９に進む。

　ステップＳ００７では、プロセッサ２１は、マーカの編集画面２５Ｂをディスプレイ２５に表示して、マーカの編集をユーザ７に行わせる。ユーザ７は、ＵＩ２５３又は音色制御装置１０の操作子を用いて音声付き動画を再生ずることができ、楽曲を、音色制御装置１０に接続されたヘッドホン５から聴取し、マーカを設定する所望の時刻を決定し、マーカの編集を行うことができる。このとき、必要に応じて、メモリ番号の編集、又は既存のメモリ番号の選択を行うこともできる。編集によって、楽曲に対する、１又は２以上のマーカ（時刻、マーカ名、メモリ番号）が決定される。

　ステップＳ００８では、プロセッサ２１は、セッションファイルの更新を行い、決定されたマーカの情報をセッションファイルに含める。また、プロセッサ２１は、更新されたセッションファイルの登録処理を行う。例えば、プロセッサ２１は、セッションファイルの登録要求のメッセージを生成し、通信ＩＦ２３を介して第１サーバ２に送信する。第１サーバ２は、登録要求に基づいて、セッションファイルをユーザＩＤと関連付けて、第１サーバ２が管理する記憶装置に記憶（登録）する。これによって、セッションファイルが第１サーバ２（クラウド）で保存される。なお、セッションファイルは、記憶装置２２、或いは情報処理装置２０に接続されるＵＳＢメモリ等に記憶（保存）されてもよい。ステップＳ００８が終了すると、処理がステップＳ００５に戻り、再生画面２５Ａが表示される。

　ステップＳ００９では、プロセッサ２１は、再生指示の入力の有無を判定する。再生指示の入力の有無は、例えば、ＵＩ２５３中の再生ボタン、又は音色制御装置１０の操作子（再生ボタン）の押し下げの有無を以て判定される。再生指示の入力があったと判定される場合には、処理がステップＳ０１０に進み、そうでない場合には、処理がステップＳ００５に戻る。このようにして、再生画面２５Ａが表示されている状態で、編集ボタン２５６、又は再生ボタンが押されるのを待ち受ける状態となる。

　ステップＳ０１０では、プロセッサは、再生指示を受けて、最初の（第１の）マーカに対応するメモリ番号の情報を、音色制御装置１０に送信する。図２に示す第１のマーカのように、再生開始と同時に時刻が到来する場合があるからである。音色制御装置１０では、メモリ番号が割り当てられた音色パラメータのセットの情報は、メモリ番号に対応する記憶領域に記憶され、マーカに設定された時刻から適用される音声の加工に使用される。

　ステップＳ０１０の終了後、プロセッサ２１は、例えば、所定のタイマの満了を待機し、音色制御装置１０において、第１のマーカに対応するメモリ番号の音色パラメータのセットを用いた音色処理（音声信号の加工）が可能な状態となるとなるのを待つ。ステップＳ０１１では、プロセッサ２１は、動画再生のソフトウェアに、再生指示を供給して、音声付き動画再生を行わせる。これによって、表示領域２５１に動画が表示されるとともに、音声信号が音色制御装置１０へ送信される。

　ステップＳ０１２では、プロセッサ２１は、直近のマーカの時刻が到来したか否かを判定する。時刻が到来したと判定される場合には、処理がステップＳ０１３に進み、そうでない場合には、処理がステップＳ０１１に戻る。

　ステップＳ０１３では、プロセッサ２１は、セッションファイル中の、次のマーカに対応するメモリ番号の情報を、音色制御装置１０に送信する。音色制御装置１０では、次のマーカに対応するメモリ番号の情報は、対応するメモリ番号の記憶領域に記憶され、次のマーカにセットされた時刻が到来すると、音色が直ちに切り替わるように、ＤＳＰ（Digital Signal Processor）に対する設定が行われる。

　ステップＳ０１４では、プロセッサ２１は、音声付き動画の再生が終了したかを判定する。再生が終了したと判定される場合には、処理がステップＳ０１５に進み、そうでない場合には、処理がステップＳ０１１に戻る。ステップＳ０１５では、練習用アプリの終了判定が行われる。練習用アプリの終了と判定される場合には、図６及び７の処理が終了し、そうでない場合には、処理がステップＳ００５に戻る。

　なお、ステップＳ０１１の再生処理中において、ユーザの操作によって、音声付き動画ファイルの一時停止、早送り、巻き戻しの操作が行われた場合には、これらの指示が動画再生用のソフトウェアに与えられ、一時停止、早送り、巻き戻しの処理が行われる。なお、本実施形態では、所定時間（１０秒間）の巻き戻し、という操作も行うことができる。これに関する処理は後述する。なお、図７の処理例では、ステップＳ０１０の処理が再生指示の入力を契機に行われているが、ステップＳ０１０の処理は、楽曲の選択（選択確定）を契機に実行されてもよい。

＜音色制御装置＞
　図８は、音色制御装置の外観構成を示し、図９は、音色制御装置の回路構成を示す。図８には、音色制御装置１０の正面が示されており、正面の上側には、音声制御に係る情報（メモリ番号）の設定に用いる第１の操作子１０Ａ及び表示器１１が配置されており、下側には、楽曲、すなわち音声付き動画ファイルの再生制御を操作するための第２の操作子１０Ｂが配置されている。

　メモリ番号の設定に用いる第１の操作子１０Ａは、つまみ１２、１３ａ、１３ｂ、１３ｃ、ボタン１４ａ、１４ｂ、１４ｃを含んでいる。表示器１１は、メモリ番号を表示するセブンセグメント方式の表示器である。つまみ１２は、表示器１１の表示内容の変更に用いるロータリーつまみである。つまみ１３ａ、１３ｂ、１３ｃは、音色（セレクト）の設定に用いられるロータリーつまみであり、ゲイン、レベル、及びリバーブの値の設定に使用される。但し、つまみ１３ａ、１３ｂ、１３ｃは、選択ボタンであるボタン１４ａの押し下げによって、オーバードライブ（ＯＤ）／ディストーション（ＤＳ）、モデュレーション（ＭＯＤ）、ディレイの値を設定するつまみに切り替えることもできる。ボタン１４ｂは、情報処理装置２０とのBluetooth／ＢＬＥのペアリングに使用される。

　再生制御に用いる第２の操作子１０Ｂは、再生／一時停止ボタン（ＰＬＡＹ／ＰＡＵＳＥ）１５と、巻き戻し（早戻し）ボタン（ＲＥＷ）１６と、早送りボタン（ＦＦ）１７とを含んでいる。例えば、巻き戻しボタン１６が２回早押しされると、一定時間（１０）秒の巻き戻しが行われ、所定時間より長く押されると、通常の巻き戻しが行われる。なお、音色制御装置１０の側面には、音量（ボリューム）のロータリーつまみ１８が設けられている。

　図９において、音色制御装置１０は、ＣＰＵ１０１と、記憶装置１０２と、無線装置（無線通信回路）１０３と、ＤＳＰ（Digital Signal Processor）１０４と、ディジタルアナログ変換器（Ｄ／Ａ）と、アナログディジタル変換器（Ａ／Ｄ）とを含む。記憶装置１０２は、ＲＯＭ及びＲＡＭを含み、記憶装置２２と同様の機能を有する。

　ＣＰＵ１０１は、第１の操作子１０Ａの操作（設定）によって入力された音色制御に係る情報、及び第２の操作子１０Ｂの操作によって入力された再生制御に係る情報、音量のロータリーつまみ１８からの値が入力される。情報は、スイッチの状態、可変抵抗器の値、ロータリーエンコーダの値などによって示される。また、ＣＰＵ１０１は、表示器１１にメモリ番号を表示する。

　無線装置１０３は、ＣＰＵ１０１と、ＵＡＲＴ（Universal Asynchronous Receiver/Transmitter）を介して接続されている。無線装置１０３は、所定の無線規格（Bluetooth及びＢＬＥ）をサポートする通信回路であり、情報処理装置２０の無線通信ＩＦ２７とBluetooth及びＢＬＥの無線回線を通じて接続され、第１の操作子１０Ａ及び第２の操作子１０Ｂの操作内容を示す情報の送信、楽曲の音声信号及びメモリ番号の情報、メモリ番号の受信などに使用される。なお、情報処理装置２０と無線装置１０３を用いてやりとりされる情報は、ＵＳＢ１１０を用いて送受信されてもよい。

　音色制御装置１０は、エレキギター６からのケーブルのプラグが挿入されるジャック（端子）６ａと、ＡＵＸ端子６ｂと、ヘッドホン５の端子５ａとを有する。端子６ａから入力されるエレキギター６の演奏音のアナログ音声信号は、Ａ／Ｄ１０６によってディジタル信号に変換され、ＤＳＰ１０４に入力される。一方、無線装置１０３が無線回線を通じて受信する楽曲の音声信号（ディジタル信号）は、無線装置１０３が有するＤ／Ａ１０３ａによってアナログ信号に変換される。このアナログ信号は、ＡＵＸ端子６ｂとＡ／Ｄ１０６との間に設けられた加算器１０５に加算され、Ａ／Ｄ１０６に入力されてディジタル信号に変換され、ＤＳＰ１０４に入力される。

　ＤＳＰ１０４は、ＣＰＵ１０１の制御下で、エレキギター６の演奏音の音声信号及び楽曲の再生音の音声信号の少なくとも一方に、メモリ番号の音色パラメータのセットに基づく音色制御（音声信号の加工）を施す回路である。無線装置１０３で受信されるメモリ番号の情報は、ＵＡＲＴ１１１を介してＣＰＵ１０１に与えられ、ＣＰＵ１０１は、記憶装置１０２に設けられた、メモリ番号に対応する記憶領域に音色パラメータのセットの情報を記憶する。音色パラメータのセットの情報は、ＤＳＰ１０４における音声信号加工用の回路形成に利用され、メモリ番号が適用される時刻から音声加工（音色制御）のために使用される。ＤＳＰ１０４は、演奏音と再生音との合成（ミキシング）を行い、合成音のディジタル音声信号をＤ／Ａ１０７に入力する。Ｄ／Ａ１０７は、合成音のディジタル音声信号をアナログ音声信号に変換する。アナログ音声信号は、ヘッドホン５の端子５ａを介してヘッドホン５に接続され、合成音がヘッドホン５のスピーカから出力される。

　図１０は、情報処理装置２０と音色制御装置１０とのやりとりの説明図である。情報処理装置２０は、プロセッサ２１がプログラムを実行することによって、ＯＳ２１ａと、練習用アプリ２１ｂを備えた装置として動作する。第２サーバ３から提供される音声付き動画ファイル（ストリーミング音声付き動画）は、練習用アプリ２１ｂの画面における埋め込み動画として提供される。

　音声付き動画の再生制御は、音色制御装置１０の第２の操作子１０Ｂにおける、再生ボタン１５、巻き戻しボタン１６、及び早送りボタン１７の操作によって行われる。ボタン操作による再生制御の情報、例えば、再生ボタン１５の押し下げによってＣＰＵ１０１が発行する再生指示は、無線装置１０３を介して情報処理装置２０へ送信される。

　再生制御に係る情報は、Bluetooth（Bluetooth4.2）がサポートするＡＶＲＣＰ（Audio/Video Remote Control Profile）を用いて行われる。ＡＶＲＣＰは、ＡＶ機器のリモコン機能を実現するためのプロファイルである。再生制御に係る情報は、練習用アプリ２１ｂを介して動画再生用のソフトウェア（第２サーバ）に与えられ、第２サーバ３が動画再生の制御を行う。

　また、音声付き動画に基づく楽曲のディジタル音声信号は、Bluetooth（Bluetooth2.1及び3.0）がサポートするＡ２ＤＰを用いて音色制御装置１０に供給される。Ａ２ＤＰは、音声をレシーバー付きヘッドホンに伝送するためのプロファイルである。これに対し、音色制御の設定に係る情報は、Bluetooth4.0（ＢＬＥ）がサポートするＢＬＥ－ＭＩＤＩ（MIDI over Bluetooth Low Energy）技術を用いて送受信される。

　ここで、一定時間（例えば、１０秒、但し、１０秒より長くても短くてもよい）の巻き戻し動作を、図１１を用いて説明する。情報処理装置２０において、音声付き動画の再生が行われている状態において、巻き戻しボタン１６を用いて、一定時間の巻き戻し操作が行われたとする(図１１の＜１＞)。すると、巻き戻し指示が練習用アプリ２１ｂを介して動画再生ソフトウェアに与えられ、音声付き動画の巻き戻しが行われる。このとき動画再生ソフトウェアは、巻き戻された音声付き動画の現在時刻を出力し、ＯＳ２１ａは、現在時刻をＳＳＰ（Song Position Pointer）に変換し、ＳＳＰを音色制御装置１０に送信する（図１１の＜２＞）。ＳＳＰは、無線装置１０３を介してＣＰＵ１０１に与えられる。

　ＣＰＵ１０１は、ＳＳＰを取得すると（図１１の＜３＞）、ＳＳＰの値が予定時間（１０秒前の時刻）まで遡っているかを判定する（図１１の＜４＞）。このとき、予定時間まで遡っていると判定される場合には、ＣＰＵ１０１は処理を終了し、そうでない場合には、再度の巻き戻し指示を送信する（図１１の＜１＞）

　図１２は、２以上のメモリ番号の切り替え処理の説明図である。上述したように、楽曲に対して第１～第３のマーカが設定された場合を想定する。この場合、練習用アプリ２１ｂ（プロセッサ２１）は、第１のマーカの時刻の到来前に、例えば楽曲が選択されたことを契機に第１のマーカに対応するメモリ番号“０１”（第１メモリ番号）を音色制御装置１０に送る。音色制御装置１０では、ＣＰＵ１０１が、メモリ番号“０１”の記憶領域に記憶される第１のマーカの音色パラメータのセットの情報をＤＳＰ１０４に設定することで、第１のマーカ対応のエフェクタ回路をＤＳＰ１０４に生成する。第１のマーカ対応のエフェクタ回路には、第１の時刻からエレキギター６の演奏音の音声信号が入力され、エフェクトの付与（音色制御）が行われ、エフェクト付与後の音声信号が出力される。

　その後、第１のマーカの時刻が到来すると、練習用アプリ２１ｂ（プロセッサ２１）は、第１のマーカの時刻の到来を契機に、第２のマーカに対応するメモリ番号“０２”(第２メモリ番号)を音色制御装置１０に送る。音色制御装置１０では、ＣＰＵ１０１が、メモリ番号“０２”の記憶領域に記憶される第２のマーカの音色パラメータのセットの情報をＤＳＰ１０４に設定することで、第２のマーカ対応のエフェクタ回路をＤＳＰ１０４に生成する。このとき、エレキギター６の音声信号は、双方のエフェクタ回路に入力され、スイッチ（ＳＷ）が第２のマーカの時刻が到来するまでは、第１のマーカ対応のエフェクタからの信号を出力し、第２のマーカの時刻が到来すると、出力を第２のマーカ対応のエフェクタからの信号に切り替える。これによって、第１のマーカによる音色制御から第２のマーカによる音色制御へシームレスな切替を行うことができる。

　第２のマーカの時刻が到来した場合には、第３のマーカに対応するメモリ番号の情報が情報処理装置２０から音色制御装置１０へ送信され、第３のマーカに対応するエフェクタがＤＳＰ１０４に生成され、第３のマーカの時刻から、第３のマーカに対するエフェクタが適用される。

　＜実施形態の作用効果＞
　実施形態による情報処理システムでは、情報処理装置２０のプロセッサ２１（制御部）が、楽曲の再生時間における１又は２以上の時刻を示す情報の入力を受け付け、１又は２以上の時刻の夫々から行う音色制御に係る情報を含むセッションファイルを生成する。また、情報処理装置２０の無線通信ＩＦ２７（送信部）は、楽曲の再生音と楽器の演奏音との合成音を出力する音色制御装置１０（装置）に対し、楽曲の音声信号と、ファイル中の音色制御に係る情報を送信する。これによって、ユーザ７の所望の時刻で所望のメモリ番号による音色制御を、エレキギター６（楽器）の演奏音と楽曲の再生音との少なくとも一方（実施形態ではエレキギター６の演奏音）に施すことができる。

　実施形態の情報処理装置２０によれば、プロセッサ２１（制御部）は、楽曲の再生時間を示す情報が表示される、時刻及び音色制御に係る情報の設定用画面（再生画面２５Ａ、編集画面２５Ｂ）をディスプレイ２５（表示装置）に表示することができる。これによって、ユーザ７に、マーカの設定環境を提供することができる。

　実施形態の情報処理装置２０によれば、プロセッサ２１（制御部）は、楽曲のＵＲＬ（楽曲のデータの保存位置を示す情報）に基づいて、情報処理装置２０とネットワーク１を介して接続された第２サーバ３（楽曲のデータを配信する配信装置）から楽曲のデータを取得することができる。実施形態では、楽曲が、ＵＲＬによって一意に決まる構成を採用する。これにより、楽曲の管理が簡易となる。また、実施形態では、楽曲のデータは、前記音声付き動画ファイルにおける音声データであるが、音声ファイルであってもよい。

　実施形態の情報処理装置２０によれば、プロセッサ２１（制御部）は、ＵＲＬを、情報処理装置２０とネットワーク１を介して接続された、第１のサーバ２（ファイルの管理装置）から取得する。また、プロセッサ２１は、時刻を示す情報及び音色制御に係る情報と、ＵＲＬとを含むセッションファイルの保存を、第１サーバ２に要求する。このように、第１サーバ２に、楽曲及びセッションファイルを管理してもらうことができる。

　なお、プロセッサ２１が、時刻を示す情報及び音色制御に係る情報と、ＵＲＬとを含むセッションファイルを、情報処理装置２０が有する記憶装置２２に記憶してもよい。記憶装置は、情報処理装置２０に装着されるＵＳＢメモリなどの記憶装置であってもよい。

　また、情報処理装置２０では、無線通信ＩＦ２７（送信部）は、時刻が、第１の時刻（００：００）及び第２の時刻（００：１０）を含む場合に、楽曲の選択を契機に第１の時刻の到来前に第１の時刻に対応する音色制御に係る情報を音色制御装置１０へ送信し、楽曲の再生における第１の時刻の到来を契機に、第２の時刻に対応する音色制御に係る情報を音色制御装置１０へ送信する。これによって、音色制御のシームレスな切り替えが可能となる。

　また、情報処理装置２０では、プロセッサ２１は、音色制御内容の編集画面をディスプレイ２５に表示し、音色制御装置１０から情報処理装置２０に送信される、音色制御の内容を示す情報（音色制御の設定に係る情報）を受け付ける。これによって、メモリ番号の設定を、音色制御装置１０の操作を通じて行うことができる。

　情報処理装置２０は、Bluetooth（Bluetooth2.1又は3.0）及びBLE（Bluetooth4.0）を用いて音色制御装置１０と通信可能であり、プロセッサ２１は、ＡＶＲＣＰを用いた前記楽曲の再生に係る制御情報（再生制御の情報）を音色制御装置１０から受け付け、ＢＬＥ－ＭＩＤＩを用いた音色の編集用の情報を音色制御装置１０から受け付ける。このように、音色制御の設定に関する情報はＢＬＥを用いて送信することができる。

　なお、プロセッサ２１やＣＰＵ１０１が行う処理は、複数のＣＰＵ（プロセッサ）によって行うのでも、マルチコア構成のＣＰＵによって行うのでもよい。また、プロセッサ２１が行う処理は、ＣＰＵ以外のプロセッサ（ＤＳＰやＧＰＵなど）、プロセッサ以外の集積回路（ＡＳＩＣやＦＰＧＡなど）、或いはプロセッサと集積回路との組み合わせ（ＭＰＵ、ＳｏＣなど）によって実行されてもよい。

　＜変形例＞
　図１３～図１５は、変形例における情報処理装置２０の処理例を示すフローチャートである。図１３に示す処理の前提として、セッションファイルには、編集済みの複数のマーカ（複数の時刻及び複数の時刻の夫々に対応するメモリ番号）が記憶されていると仮定する。

　一例として、図４に示すように、セッションファイルは、マーカ（１）、（２）及び（３）を有し、マーカ（１）、（２）及び（３）の夫々に対応する複数の時刻、すなわち時刻“00:00:00”(第１の時刻)と、時刻“00:10:00”（第２の時刻）と、時刻“00:33:00”（第３の時刻）とを含んでいる。第１～第３の時刻のうち、到来時刻の早い順で、最初の時刻と２番目の時刻に対応する第１及び第２の時刻は第１グループに属する旨の設定情報が、記憶装置２２に記憶されている。また、第２の時刻の次の時刻である第３の時刻は第２のグループに属する旨の設定情報が記憶装置２２に記憶されている。

　図１３に示す処理のうち、ステップＳ００１～Ｓ００５の処理は、実施形態における処理（図６）と同様である。但し、変形例では、ステップＳ００３とステップＳ００４との間に、ステップＳ００３Ａが設けられている点で、実施形態と異なる。また、図１４におけるステップＳ００９、Ｓ０１１、Ｓ０１４、及びＳ０１５は、図７に示した処理と同じである。但し、図１４に示す変形例では、ステップＳ０１０がなく、ステップＳ０１２及びＳ０１３の代わりに、ステップＳ０１２Ａ及びＳ０１３Ａが設けられている点で、実施形態と異なる。

　また、図１５に示すように、変形例におけるセッションファイルの編集処理は、編集ボタン２５６の押し下げのような、編集イベントの発生を契機に実行される割込処理であり、図６に示したステップＳ００７及びＳ００８と同様の処理が実行され、処理が終了すると、処理がステップＳ００１（図１３）に戻る。

　ステップＳ００３Ａでは、ステップＳ００３で取得されたセッションファイル中の複数の時刻のうち、第１のグループに属する所定数の時刻、すなわち第１の時刻及び第２の時刻の夫々に対応するメモリ番号（音色制御に係る情報）が、音色制御装置１０に送信される。音色制御装置１０では、ＣＰＵ１０１が、マーカ（１）のメモリ番号“０１”に対応する記憶領域に記憶された音色パラメータのセットに基づく回路と、マーカ（２）のメモリ番号“０２”に対応する記憶領域に記憶された音色パラメータのセットに基づく回路とを、並列にＤＳＰ１０４に構築する制御を行う。なお、ステップＳ００３Ａの処理は、ステップＳ００４又はステップＳ００５の後に実行されてもよく、ステップＳ００４と並列に実行されてもよい。

　その後、ステップＳ００９において、再生指示が入力されたと判定すると、プロセッサ２１は、音声付き動画の再生を行う。この音声付き動画の再生時間において、現在時刻が第１のグループにおける最後の時刻である第２の時刻が到来すると（ステップＳ０１２ＡのＹｅｓ）、プロセッサ２１は、次のマーカ（３）のメモリ番号“０８”が属する第２のグループのメモリ番号を音色制御装置１０に送信する（ステップＳ０１３）。なお、変形例では、第２のグループに属するメモリ番号は、メモリ番号“０８”だけであるので、１つのメモリ番号“０８”が送信される。

　但し、第１のグループ及び第２のグループの夫々に属するマーカの数、すなわち、時刻の数は、１又は２以上の適宜の数を設定可能である。よって、セッションファイルが、例えば二つのマーカ（第１の時刻及び第２の時刻）を含む場合は、楽曲の選択を契機に第１の時刻に対応するメモリ番号が送信され（ステップＳ００３Ａ）、第１の時刻の到来を契機に（ステップＳ０１２ＡのＹｅｓ）、第２の時刻に対応するメモリ番号が送信される（ステップＳ０１３Ａ）。

　上述した変形例によると、無線通信ＩＦ２７（送信部）は、楽曲の再生時間における複数の時刻の夫々にメモリ番号（音色制御に係る情報）が設定されている場合に、楽曲の選択を契機に、複数の時刻の中から到来が早い順で選ばれた所定数の時刻（例えば、第１及び第２の時刻）に対応するメモリ番号を送信する。そして、楽曲の再生において、所定数の時刻の中で最後の時刻（第２の時刻）の到来を契機に、最後の時刻の次に到来する、複数の時刻中の時刻（第３の時刻）に対応する音色制御に係る情報を送信することができる。

１０・・・音色制御装置
２０・・・情報処理装置
２１・・・プロセッサ
２２・・・記憶装置
１０１・・・ＣＰＵ
１０２・・・記憶装置

Claims

　楽曲の再生時間における１又は２以上の時刻を示す情報の入力を受け付け、前記１又は２以上の時刻の夫々から行う音色制御に係る情報を含むファイルを生成する制御部と、
　前記楽曲の再生音と楽器の演奏音との合成音を出力する装置に対し、前記楽曲の音声信号と、前記ファイル中の前記音色制御に係る情報を送信する送信部と
を含む情報処理装置。
　前記制御部は、前記楽曲の再生時間を示す情報が表示される、前記時刻及び前記音色制御に係る情報の設定用画面を表示装置に表示する
請求項１に記載の情報処理装置。
　前記制御部は、前記楽曲のデータの保存位置を示す情報に基づいて、前記情報処理装置とネットワークを介して接続された前記楽曲のデータを配信する配信装置から前記楽曲のデータを取得する
請求項１又は２に記載の情報処理装置。
　前記楽曲が、前記楽曲のデータの保存位置を示す情報によって一意に決まる
請求項１から３のいずれか一項に記載の情報処理装置。
　前記楽曲のデータは、音声付き動画ファイルにおける音声データである
請求項１から４のいずれか一項に記載の情報処理装置。
　前記制御部は、前記楽曲のデータの保存位置を示す情報を、前記情報処理装置とネットワークを介して接続された、ファイルの管理装置から取得する
請求項３から５のいずれか一項に記載の情報処理装置。
　前記制御部は、前記時刻を示す情報及び前記音色制御に係る情報と、前記楽曲の保存位置を示す情報とを含む前記ファイルの保存を、前記ファイルの管理装置に要求する
請求項６に記載の情報処理装置。
　前記制御部は、前記時刻を示す情報及び前記音色制御に係る情報と、前記楽曲の保存位置を示す情報とを含む前記ファイルを、前記情報処理装置が有する記憶装置、及び前記情報処理装置に装着される記憶装置の少なくとも一方に記憶する
請求項３から７のいずれか一項に記載の情報処理装置。
　前記送信部は、前記楽曲の再生時間における複数の時刻の夫々に音色制御に係る情報が設定されている場合において、前記楽曲の選択を契機に、前記複数の時刻の中から到来が早い順で選ばれた所定数の時刻に対応する音色制御に係る情報を送信し、前記楽曲の再生において、前記所定数の時刻の中で最後の時刻の到来を契機に、前記最後の時刻の次に到来する前記複数の時刻中の時刻に対応する音色制御に係る情報を送信する
請求項１から８のいずれか一項に記載の情報処理装置。
　前記複数の時刻が第１の時刻及び第２の時刻を含む場合において、前記楽曲の選択を契機に前記第１の時刻に対応する音色制御に係る情報を前記装置へ送信し、前記楽曲の再生における前記第１の時刻の到来を契機に、前記第２の時刻に対応する音色制御に係る情報を前記装置へ送信する
請求項９に記載の情報処理装置。
　前記複数の時刻が第１の時刻、第２の時刻及び第３の時刻を含む場合において、前記楽曲の選択を契機に前記第１の時刻及び前記第２の時刻に対応する音色制御に係る情報を前記装置へ送信し、前記楽曲の再生における前記第２の時刻の到来を契機に、前記第３の時刻に対応する音色制御に係る情報を前記装置へ送信する
請求項９に記載の情報処理装置。
　前記制御部は、音色制御内容の編集画面を表示装置に表示し、前記装置から前記情報処理装置に送信される、前記音色制御の内容を示す情報を受け付ける
請求項１から９のいずれか一項に記載の情報処理装置。
　前記情報処理装置は、Bluetooth及びBLEを用いて前記装置と通信可能であり、
　前記制御部は、AVRCPを用いた前記楽曲の再生に係る制御情報を前記装置から受け付け、BLE-MIDIを用いた音色の編集用の情報を前記装置から受け付ける
請求項１０に記載の情報処理装置。
　情報処理装置が、
　楽曲の再生時間における１又は２以上の時刻を示す情報の入力を受け付け、
　前記１又は２以上の時刻の夫々から行う音色制御に係る情報を含むファイルを生成し、
　前記楽曲の再生音と楽器の演奏音との合成音を出力する装置に対し、前記楽曲の音声信号と、前記ファイル中の前記音色制御に係る情報とを送信する
ことを含む情報処理方法。
　情報処理装置のコンピュータに、
　楽曲の再生時間における１又は２以上の時刻を示す情報の入力を受け付け、
　前記１又は２以上の時刻の夫々から行う音色制御に係る情報を含むファイルを生成し、
　前記楽曲の再生音と楽器の演奏音との合成音を出力する装置に対し、前記楽曲の音声信号と、前記ファイル中の前記音色制御に係る情報とを送信する
ことを実行させるプログラム。