JP7137278B2 - 再生制御方法、制御システム、端末装置およびプログラム - Google Patents

Description

本開示は、音の再生を制御する技術に関する。

例えばスポーツイベントまたは音楽イベント等の各種のイベントを収録したコンテンツを、当該イベントの進行に並行して複数の端末装置に配信する技術が従来から提案されている。例えば特許文献１には、映像と音声とを含むデジタルデータを端末装置に配信する技術が開示されている。

特開２００３－８７７６０号公報

端末装置に配信されるコンテンツの音声は、イベントが実施される場所で収録される全体的な音声である。しかし、イベントを視聴する利用者が実際に聴取したい音声は、利用者毎の嗜好等に応じて相違する。以上の事情を考慮して、本開示のひとつの態様は、イベントの進行に並行して収音される複数の音を利用者が選択的または優先的に聴取できるようにすることを目的とする。

以上の課題を解決するために、本開示のひとつの態様に係る再生制御方法は、相異なる位置における収音によりイベントについて生成される複数の音響信号を当該イベントの進行に並行して取得し、前記複数の音響信号の各々の再生条件を指定する再生制御情報を、複数の端末装置の各々について取得し、前記複数の端末装置の各々について再生制御処理を実行し、前記再生制御処理においては、当該端末装置の再生制御情報が指定する再生条件のもとで、前記複数の音響信号のうち１以上の音響信号に応じた音を、前記イベントの進行に並行して再生装置に再生させる。

本開示の他の態様に係る再生制御方法は、端末装置が、相異なる位置における収音によりイベントについて生成される複数の音響信号を当該イベントの進行に並行して取得し、前記複数の音響信号の各々の再生条件を指定する再生制御情報を取得し、再生制御処理を実行し、前記再生制御処理においては、前記再生制御情報が指定する再生条件のもとで、前記複数の音響信号のうち１以上の音響信号に応じた音を、前記イベントの進行に並行して再生装置に再生させる。

第１実施形態における情報システムの構成を例示するブロック図である。 再生装置の構成を例示するブロック図である。 端末装置の構成を例示するブロック図である。 制御システムの構成を例示するブロック図である。 制御システムの機能的な構成を例示するブロック図である。 再生制御情報の模式図である。 操作画面の模式図である。 制御処理のフローチャートである。 再生制御処理のフローチャートである。 第２実施形態の制御システムの機能的な構成を例示するブロック図である。 第２実施形態における制御処理のフローチャートである。 第２実施形態における再生制御情報の選択に関する説明図である。 第３実施形態の制御システムの機能的な構成を例示するブロック図である。 第４実施形態における再生制御情報の模式図である。 第５実施形態における放音装置の構成を例示するブロック図である。 第５実施形態における再生制御情報の模式図である。 第６実施形態における再生制御部の動作の説明図である。 第６実施形態における再生制御処理のフローチャートである。 第７実施形態における情報システムおよび端末装置のブロック図である。 第７実施形態における端末装置の機能的な構成を例示するブロック図である。 第７実施形態における制御処理のフローチャートである。

Ａ：第１実施形態
図１は、第１実施形態に係る情報システム１００の構成を例示するブロック図である。情報システム１００は、施設２００内で実施されるイベントに関するサービスを複数の利用者Ｕaに提供するコンピュータシステムである。第１実施形態のイベントは、複数の出場者が各種のスポーツで競技するスポーツイベントである。したがって、施設２００は、例えば競技場または体育館である。すなわち、施設２００は、イベントが実施される場所に相当する。

施設２００内には、複数の観覧者Ｕbと複数の関係者Ｕcとが所在する。各観覧者Ｕbは、施設２００内でイベントを観覧する。なお、感染症の蔓延の防止等の種々の事情により、施設２００内に観覧者Ｕbが存在しない状況でイベントが実施される場合もある。複数の関係者Ｕcは、例えば、イベントに出場する出場者（選手または監督）、イベントを進行させる審判員、イベントを運営する運営者、施設２００を管理する管理者、または、イベントを実況または解説する解説者である。

複数の利用者Ｕaは、施設２００の外側に所在する。具体的には、各利用者Ｕaは、施設２００から遠隔の地点（例えば自宅）に位置する。ただし、利用者Ｕaが施設２００内に所在してもよい。すなわち、利用者Ｕaが観覧者Ｕbまたは関係者Ｕcである場合もある。

各利用者Ｕaは、再生装置２１および端末装置２２を利用可能である。端末装置２２は、例えばスマートフォンまたはタブレット端末等の可搬型の情報端末である。なお、据置型のパーソナルコンピュータを端末装置２２として利用してもよい。端末装置２２は、例えばインターネット等の通信網３００を介して情報システム１００と通信可能である。

再生装置２１は、施設２００内で実施されるイベントの状況を表すコンテンツＣを再生する。図２は、再生装置２１の構成を例示するブロック図である。コンテンツＣは、映像を表す映像データＣ1と、音を表す音響データＣ2とで構成される。再生装置２１は、映像データＣ1が表す映像を表示する表示装置２３と、音響データＣ2が表す音を再生する放音装置２４とを具備する。例えば、放送電波により伝送されるテレビ番組をコンテンツＣとして再生するテレビジョン受像機が、再生装置２１として利用される。また、例えばスマートフォンまたはタブレット端末等の可搬型の情報端末も再生装置２１として利用される。多数の利用者Ｕaが視聴可能な大型の映像機器（パブリックビューイング）を再生装置２１として利用してもよい。なお、コンテンツＣは、音響データＣ2のみで構成されるラジオ番組でもよい。

図１に例示される通り、情報システム１００は、収録システム１１と配信システム１２と収音システム１３と制御システム１４とを具備する。収録システム１１および収音システム１３は、施設２００内に設置される。収録システム１１は、配信システム１２と通信する。収音システム１３は、制御システム１４と通信する。なお、配信システム１２と制御システム１４とを単体の装置として構成してもよい。

収録システム１１は、施設２００内で実施されるイベントの動画を収録する。具体的には、収録システム１１は、イベントの映像を撮像する撮像装置と、当該イベントの音を収音する収音装置とを具備する（図示略）。撮像装置が撮像する映像と収音装置が収音する音とで構成される動画が収録システム１１により生成される。

配信システム１２は、収録システム１１が収録した動画を含むコンテンツＣを複数の再生装置２１の各々に配信する。配信システム１２は、各端末装置２２にもコンテンツＣを配信可能である。具体的には、配信システム１２は、施設２００内のイベントの進行に並行して実時間的にコンテンツＣを配信（すなわちライブ配信）する。各再生装置２１は、配信システム１２から通信網３００を介してコンテンツＣを受信し、当該コンテンツＣをイベントの進行に並行して再生する。利用者Ｕaは、再生装置２１が再生するコンテンツＣを視聴することで、イベントの状況を実時間的に把握できる。以上の説明から理解される通り、利用者Ｕaは、施設２００内で実施されるイベントに関するコンテンツＣの視聴者である。

収音システム１３は、施設２００内の音を収音する音響システムである。収音システム１３は、施設２００内の相異なる位置に設置された複数（Ｎ個）の収音部１５_1～１５_Nを具備する（Ｎは２以上の自然数）。各収音部１５_n（ｎ＝１～Ｎ）は、周囲の音を収音するマイクロホンであり、当該音の波形を表す音響信号Ｘnを生成する。すなわち、収音システム１３は、施設２００内のイベントの進行に並行して、Ｎチャネルの音響信号Ｘ1～ＸNを並列に生成する。収音システム１３が生成するＮチャネルの音響信号Ｘ1～ＸNは、有線通信または無線通信により制御システム１４に送信される。なお、各音響信号Ｘnをアナログからデジタルに変換するＡ/Ｄ変換器の図示は便宜的に省略されている。

Ｎ個の収音部１５_1～１５_Nの一部は、施設２００内の各種の設備に設置される。具体的には、施設２００内においてイベントが実際に展開される競技フィールドと、複数の観覧者Ｕbが着席する観客席との各々に、１以上の収音部１５_nが設置される。例えば、イベントに出場するホームチームを応援する観覧者Ｕbの観客席と、アウェイチームを応援する観覧者Ｕbの観客席との各々に、１以上の収音部１５_nが設置される。したがって、例えば観覧者Ｕbが発音する声援等のイベントに関する音が収音部１５_nにより収音される。また、Ｎ個の収音部１５_1～１５_Nの他の一部は、施設２００内の複数の関係者Ｕcの何れかに装着される。例えば、イベントの出場者（選手，監督）または審判員に、１以上の収音部１５_nが装着される。イベントに使用される各種の物品（例えばサッカーボールまたはゴールポスト等）に１以上の収音部１５_nを設置してもよい。例えばイベントの出場者に装着された収音部１５_nは、当該出場者の発声音、呼吸音または動作音（例えばボールを蹴る音）等のイベントに関する音を収音する。

以上の説明から理解される通り、施設２００内の相異なる位置における収音により生成されるＮチャネルの音響信号Ｘ1～ＸNがイベントの進行に並行して生成される。すなわち、各収音部１５_nは、施設２００内の各位置における収音によりイベントについて音響信号Ｘnを生成する。各音響信号Ｘnは、イベントに関する音を表す信号として包括的に表現される。制御システム１４は、収音システム１３が生成するＮチャネルの音響信号Ｘ1～ＸNに応じた音を各端末装置２２に再生させるコンピュータシステムである。制御システム１４は、通信網３００を介して複数の端末装置２２の各々と通信可能である。

図３は、各端末装置２２の構成を例示するブロック図である。端末装置２２は、制御装置４１と記憶装置４２と通信装置４３と操作装置４４と再生装置４５とを具備する。なお、端末装置２２は、単体の装置として実現されるほか、相互に別体で構成された複数の装置でも実現される。

制御装置４１は、端末装置２２の各要素を制御する単数または複数のプロセッサで構成される。例えば、制御装置４１は、ＣＰＵ（Central Processing Unit）、ＳＰＵ（Sound Processing Unit）、ＤＳＰ（Digital Signal Processor）、ＦＰＧＡ（Field Programmable Gate Array）、またはＡＳＩＣ（Application Specific Integrated Circuit）等の１種類以上のプロセッサにより構成される。

記憶装置４２は、制御装置４１が実行するプログラムと制御装置４１が使用する各種のデータとを記憶する単数または複数のメモリである。記憶装置４２は、例えば磁気記録媒体または半導体記録媒体等の公知の記録媒体により構成される。なお、複数種の記録媒体の組合せにより記憶装置４２を構成してもよい。通信装置４３は、通信網３００を介して制御システム１４と通信する。

操作装置４４は、利用者Ｕaからの指示を受付ける入力機器である。操作装置４４は、例えば、利用者Ｕaが操作する複数の操作子、または、利用者Ｕaによる接触を検知するタッチパネルである。

再生装置４５は、制御装置４１による制御のもとで動画を再生する。再生装置４５は、映像を表示する表示装置４６と、音を再生する放音装置４７とを具備する。なお、通信装置４３が配信システム１２から受信するコンテンツＣを再生装置４５が再生してもよい。すなわち、再生装置２１は省略されてもよい。

図４は、制御システム１４の構成を例示するブロック図である。制御システム１４は、制御装置５１と記憶装置５２と通信装置５３とを具備する。なお、制御システム１４は、単体の装置として実現されるほか、相互に別体で構成された複数の装置の集合としても実現される。

制御装置５１は、制御システム１４の各要素を制御する単数または複数のプロセッサで構成される。例えば、制御装置５１は、ＣＰＵ、ＳＰＵ、ＤＳＰ、ＦＰＧＡ、またはＡＳＩＣ等の１種類以上のプロセッサにより構成される。

記憶装置５２は、制御装置５１が実行するプログラムと制御装置５１が使用する各種のデータとを記憶する単数または複数のメモリである。記憶装置５２は、例えば磁気記録媒体または半導体記録媒体等の公知の記録媒体により構成される。なお、複数種の記録媒体の組合せにより記憶装置５２を構成してもよい。

通信装置５３は、通信網３００を介して複数の端末装置２２の各々と通信する。また、通信装置５３は、施設２００内の収音システム１３と通信する。具体的には、通信装置５３は、収音システム１３が生成するＮチャネルの音響信号Ｘ1～ＸNを受信する。

図５は、制御システム１４の機能的な構成を例示するブロック図である。制御装置５１は、記憶装置５２に記憶されたプログラムを実行することで複数の要素（情報生成部６１，信号取得部６２，情報取得部６３および再生制御部６４）として機能する。

情報生成部６１は、再生制御情報Ｑを生成する。再生制御情報Ｑは、Ｎチャネルの音響信号Ｘ1～ＸNの各々の再生に関する条件（以下「再生条件」という）を指定するデータである。情報生成部６１は、複数の端末装置２２の各々について再生制御情報Ｑを生成する。

図６は、任意の１個の端末装置２２に対応する再生制御情報Ｑの模式図である。第１実施形態の再生制御情報Ｑは、Ｎチャネルの音響信号Ｘ1～ＸNの各々について再生の有無（有効／無効）を指定する。すなわち、再生制御情報Ｑは、各音響信号Ｘnが端末装置２２において再生されるか否かを指定する。以上の説明から理解される通り、第１実施形態における各音響信号Ｘnの再生条件は、当該音響信号Ｘnが表す音の再生の有無を含む。

情報生成部６１は、各端末装置２２の利用者Ｕaからの指示に応じて、当該端末装置２２の再生制御情報Ｑを生成する。端末装置２２の利用者Ｕaは、操作装置４４を操作することでＮチャネルの音響信号Ｘ1～ＸNの各々について再生の有無を指示する。

図７は、各音響信号Ｘnについて利用者Ｕaが再生の有無を指示するために参照する操作画面Ｇの模式図である。イベントの開始前に各端末装置２２の表示装置４６に操作画面Ｇが表示される。操作画面Ｇにおいては、Ｎチャネルの音響信号Ｘ1～ＸNの各々について、収音位置名Ｇ1と操作領域Ｇ2とが表示される。各音響信号Ｘnの収音位置名Ｇ1は、当該音響信号Ｘnを生成する収音部１５_nが設置される場所の名称である。各音響信号Ｘnの操作領域Ｇ2は、当該音響信号Ｘnの有効（ＯＮ）／無効（ＯＦＦ）を利用者Ｕaが指示するための操作画像である。利用者Ｕaは、操作画面Ｇを参照しながら音響信号Ｘn毎の再生の有無を指示する。

図５に例示される通り、利用者Ｕaによる指示を表す指示データＺaが端末装置２２の通信装置４３から制御システム１４に送信される。指示データＺaは、Ｎチャネルの音響信号Ｘnの各々について利用者Ｕaによる指示の内容（有効／無効）を表すデータである。制御システム１４の情報生成部６１は、各端末装置２２から受信した指示データＺaに応じて当該端末装置２２の再生制御情報Ｑを生成する。情報生成部６１が生成した再生制御情報Ｑは、端末装置２２毎に記憶装置５２に記憶される。また、情報生成部６１は、記憶装置５２に記憶された再生制御情報Ｑにおける各音響信号Ｘnの再生条件を、端末装置２２の利用者Ｕaからの指示（指示データＺa）に応じて変更する。

図５の信号取得部６２は、Ｎチャネルの音響信号Ｘ1～ＸNを収音システム１３から取得する。具体的には、信号取得部６２は、収音システム１３から送信されたＮチャネルの音響信号Ｘ1～ＸNを通信装置５３により受信する。信号取得部６２による各音響信号Ｘnの取得は、イベントの進行に並行して実行される。情報取得部６３は、再生制御情報Ｑを取得する。具体的には、情報取得部６３は、各端末装置２２の再生制御情報Ｑを、記憶装置５２から読み出す。

再生制御部６４は、信号取得部６２が取得したＮチャネルの音響信号Ｘ1～ＸNに応じた音（以下「収録音」という）を各端末装置２２に再生させる処理（以下「再生制御処理」という）Ｓa3を実行する。再生制御処理Ｓa3は、イベントの進行に並行して実行される。再生制御処理Ｓa3には、情報取得部６３が取得した再生制御情報Ｑが利用される。具体的には、再生制御部６４は、各端末装置２２の再生制御情報Ｑが指定する再生条件のもとで、Ｎチャネルの音響信号Ｘ1～ＸNのうち１以上の音響信号Ｘnに応じた収録音を、当該端末装置２２に再生させる。

第１実施形態の再生制御部６４は、Ｎチャネルの音響信号Ｘ1～ＸNに対する音響処理Ｓc1により再生信号Ｙを生成する。再生信号Ｙは、収録音の波形を表す信号である。具体的には、再生制御部６４は、Ｎチャネルの音響信号Ｘ1～ＸNのうち再生制御情報Ｑにおいて「有効」に設定された１以上の音響信号Ｘnを混合することで再生信号Ｙを生成する。Ｎチャネルの音響信号Ｘ1～ＸNのうち再生制御情報Ｑにおいて「無効」が指定された１以上の音響信号Ｘnは、再生信号Ｙの生成に利用されない。なお、Ｎチャネルの音響信号Ｘ1～ＸNのうち１チャネルの音響信号Ｘnのみが「有効」に設定された場合、当該音響信号Ｘnが再生信号Ｙとして採用される。

再生制御部６４は、音響処理Ｓc1により生成した再生信号Ｙを通信装置５３から端末装置２２に送信する。端末装置２２の制御装置４１は、制御システム１４から受信した再生信号Ｙを放音装置４７に供給する。したがって、各端末装置２２の再生制御情報Ｑに応じて生成された再生信号Ｙが表す収録音が、放音装置４７から再生される。再生制御情報Ｑは端末装置２２毎に個別に生成されるから、収録音を構成する音響信号Ｘnの組合せは端末装置２２毎に相違する。

図８は、制御システム１４の制御装置５１が実行する処理（以下「制御処理」という）Ｓaの具体的な手順を例示するフローチャートである。制御処理Ｓaは、制御システム１４の管理者からの指示を契機として開始され、イベントの進行に並行して実行される。情報生成部６１が再生制御情報Ｑを生成した複数の端末装置２２の各々について制御処理Ｓaが実行される。

制御処理Ｓaが開始されると、制御装置５１（情報取得部６３）は、再生制御情報Ｑを記憶装置５２から取得する（Ｓa1）。制御装置５１（信号取得部６２）は、Ｎチャネルの音響信号Ｘ1～ＸNを収音システム１３から取得する（Ｓa2）。そして、制御装置５１（再生制御部６４）は、再生制御情報ＱとＮチャネルの音響信号Ｘ1～ＸNとを適用した再生制御処理Ｓa3を実行する。

制御装置５１は、所定の終了条件が成立したか否かを判定する（Ｓa4）。例えば、管理者から制御処理Ｓaの終了が指示された場合に、制御装置５１は終了条件が成立したと判定する。なお、例えばイベントが終了する時刻の到来を終了条件としてもよい。終了条件が成立しない場合（Ｓa4：NO）、制御装置５１は、処理をステップＳa2に移行する。すなわち、Ｎチャネルの音響信号Ｘ1～ＸNの取得（Ｓa2）と再生制御処理Ｓa3とが反復される。終了条件が成立した場合（Ｓa4：YES）、制御装置５１は制御処理Ｓaを終了する。

図９は、第１実施形態における再生制御処理Ｓa3の具体的な手順を例示するフローチャートである。第１実施形態の再生制御処理Ｓa3は、音響処理Ｓc1と送信処理Ｓc2とを含む。音響処理Ｓc1において、制御装置５１は、Ｎチャネルの音響信号Ｘ1～ＸNのうち再生制御情報Ｑにおいて「有効」に設定された１以上の音響信号Ｘnを混合することで再生信号Ｙを生成する。送信処理Ｓc2は、音響処理Ｓc1で生成した再生信号Ｙを端末装置２２に送信する処理である。

以上に説明した通り、第１実施形態においては、施設２００内の相異なる位置における収音により生成されるＮチャネルの音響信号Ｘ1～ＸNのうち１以上の音響信号Ｘnに応じた収録音が、再生制御情報Ｑが指定する再生条件のもとで再生される。したがって、端末装置２２の利用者Ｕaは、施設２００内の複数の位置のうち１以上の位置における音を聴取できる。第１実施形態においては特に、Ｎチャネルの音響信号Ｘ1～ＸNの各々の再生の有無が制御されるから、各端末装置２２の利用者Ｕaは、施設２００内の複数の位置のうち１以上の位置で収音された音を選択的に聴取できる。例えば、利用者Ｕaは、出場者または審判員等の関係者Ｕcに装着された収音部１５_nが収音した音を選択的に聴取できる。また、利用者Ｕaは、施設２００内の特定の観客席（例えばホームチームの観客席）に設置された収音部１５_nが収音した音を選択的に聴取できる。

また、第１実施形態においては、端末装置２２の利用者Ｕaからの指示に応じて当該端末装置２２の再生制御情報Ｑが生成される。したがって、各利用者Ｕaの嗜好に沿った収録音の再生が実現される。

Ｂ：第２実施形態
第２実施形態を説明する。なお、以下に例示する各態様において機能が第１実施形態と同様である要素については、第１実施形態の説明と同様の符号を流用して各々の詳細な説明を適宜に省略する。

図１０は、第２実施形態における制御システム１４の機能的な構成を例示するブロック図である。第２実施形態の情報取得部６３は、各音響信号Ｘnの再生条件が相違する複数の再生制御情報Ｑ（Ｑ1－Ｑ3）の何れかを端末装置２２毎に選択的に取得する。複数の再生制御情報Ｑの各々においては、各音響信号Ｘnの再生の有無（有効／無効）が相違する。

具体的には、再生制御情報Ｑ1は、第１実施形態の例示と同様に、端末装置２２の利用者Ｕaからの指示に応じて端末装置２２毎に個別に生成される。他方、再生制御情報Ｑ2および再生制御情報Ｑ3は、利用者Ｕaからの指示とは無関係に事前に用意されたプリセットデータである。再生制御情報Ｑ1は端末装置２２毎に生成される情報であるのに対し、再生制御情報Ｑ2および再生制御情報Ｑ3は複数の端末装置２２について共用される。

再生制御情報Ｑ2においては、Ｎチャネルの音響信号Ｘ1～ＸNのうち、出場者等の特定の関係者Ｕcに装着された収音部１５_nに対応する１以上の音響信号Ｘnが「有効」に設定される。他方、再生制御情報Ｑ3においては、Ｎチャネルの音響信号Ｘ1～ＸNのうち、施設２００内の観客席等の設備に設置された収音部１５_nに対応する１以上の音響信号Ｘnが「有効」に設定される。なお、例えば、(1) 施設２００内の観客席のうち第１範囲（例えばホームチームの観客席）内に設置された収音部１５_nの音響信号Ｘnが「有効」に設定された再生制御情報Ｑと、(2) 第１範囲とは相違する第２範囲（例えばアウェイチームの観客席）内に設置された収音部１５_nの音響信号Ｘnが「有効」に設定された再生制御情報Ｑとが、記憶装置５２に記憶されてもよい。

各端末装置２２の利用者Ｕaは、操作装置４４を操作することで複数の再生制御情報Ｑの何れかを選択できる。利用者Ｕaは、イベントが実施される期間（以下「実施期間」という）内の任意の時点において所望の再生制御情報Ｑを選択できる。利用者Ｕaが選択した再生制御情報Ｑを指定する選択データＺbが通信装置４３から制御システム１４に送信される。制御システム１４の通信装置４３は選択データＺbを受信する。図１０の情報取得部６３は、複数の再生制御情報Ｑのうち端末装置２２から受信した選択データＺbが指定する再生制御情報Ｑを記憶装置５２から取得する。

図１１は、第２実施形態における制御処理Ｓaの具体的な手順を例示するフローチャートである。制御処理Ｓaは、制御システム１４の管理者からの指示を契機として開始され、イベントの進行に並行して実行される。複数の端末装置２２の各々について制御処理Ｓaが実行される。

制御処理Ｓaが開始されると、制御装置５１（情報取得部６３）は、再生制御情報Ｑを記憶装置５２から取得する（Ｓa1）。制御処理Ｓaが開始された直後の段階では、複数の再生制御情報Ｑのうち特定の再生制御情報Ｑ（例えば再生制御情報Ｑ1）が取得される。制御装置５１（信号取得部６２）は、Ｎチャネルの音響信号Ｘ1～ＸNを収音システム１３から取得する（Ｓa2）。そして、制御装置５１（再生制御部６４）は、再生制御情報ＱとＮチャネルの音響信号Ｘ1～ＸNとを適用した再生制御処理Ｓa3を実行する。再生制御処理Ｓa3の内容は第１実施形態と同様である。すなわち、信号取得部６２が取得したＮチャネルの音響信号Ｘ1～ＸNのうち、情報取得部６３が取得した再生制御情報Ｑにおいて「有効」に設定された１以上の音響信号Ｘnから再生信号Ｙが生成される。

制御装置５１は、所定の終了条件が成立したか否かを判定する（Ｓa4）。終了条件が成立した場合（Ｓa4：YES）、制御装置５１は制御処理Ｓaを終了する。他方、終了条件が成立しない場合（Ｓa4：No）、制御装置５１（情報取得部６３）は、再生制御情報Ｑを変更するか否かを判定する（Ｓa5）。例えば、通信装置５３が端末装置２２から選択データＺbを受信した場合に、制御装置５１は、再生制御情報Ｑを変更すると判定する。再生制御情報Ｑを変更する場合（Ｓa5：YES）、制御装置５１は、処理をステップＳa1に移行する。移行後のステップＳa1において、制御装置５１は、選択データＺbが指定する再生制御情報Ｑを記憶装置５２から取得する。すなわち、再生制御処理Ｓa3に適用される再生制御情報Ｑが変更される。他方、再生制御情報Ｑを変更しない場合（Ｓa5：NO）、制御装置５１は、処理をステップＳa2に移行する。すなわち、再生制御情報Ｑは変更されない。

以上の説明から理解される通り、第２実施形態においては、実施期間内において再生制御情報Ｑが経時的に変化する。すなわち、各音響信号Ｘnの再生条件が経時的に変化する。したがって、例えば、図１２に例示される通り、実施期間内の期間Ｔaにおいては再生制御処理Ｓa3に再生制御情報Ｑa（Ｑ1－Ｑ3）が適用され、期間Ｔaとは相違する期間Ｔbにおいては、再生制御情報Ｑaとは相違する再生制御情報Ｑb（Ｑ1－Ｑ3，Ｑb≠Ｑa）が再生制御処理Ｓa3に適用される。すなわち、情報取得部６３は、期間Ｔaにおいては再生制御情報Ｑaを選択し、期間Ｔbにおいては再生制御情報Ｑbを取得する。期間Ｔaは「第１期間」の一例であり、期間Ｔbは「第２期間」の一例である。また、再生制御情報Ｑaは「第１再生制御情報」の一例であり、再生制御情報Ｑbは「第２再生制御情報」の一例である。

第２実施形態においても第１実施形態と同様の効果が実現される。また、第２実施形態においては、複数の再生制御情報Ｑの何れかが選択的に再生制御処理Ｓa3に適用されるから、１個の再生制御情報Ｑのみが使用される構成と比較して、放音装置４７により再生される音を多様化することが可能である。また、再生制御処理Ｓa3に適用される再生制御情報Ｑが経時的に変化するから、各音響信号Ｘnが表す音の再生条件が経時的に変化する多様な再生を実現できる。再生制御情報Ｑ2および再生制御情報Ｑ3は事前に用意された情報であるから、複数の再生制御情報Ｑを利用者Ｕaからの指示に応じて生成する構成と比較して、利用者Ｕaの負荷または情報生成部６１の負荷が軽減されるという利点もある。

Ｃ：第３実施形態
図１３は、第３実施形態における制御システム１４の機能的な構成を例示するブロック図である。第３実施形態の制御装置５１は、第１実施形態と同様の要素（情報生成部６１，信号取得部６２，情報取得部６３および再生制御部６４）に加えて状況解析部６５として機能する。第３実施形態における情報取得部６３は、第２実施形態と同様に、各音響信号Ｘnの再生条件が相違する複数の再生制御情報Ｑ（Ｑ1－Ｑ3）の何れかを端末装置２２毎に選択的に取得する。他の要素（情報生成部６１，信号取得部６２および再生制御部６４）の動作は、第１実施形態と同様である。

状況解析部６５は、イベントの進行の状況（以下「進行状況」という）を解析する。具体的には、状況解析部６５は、信号取得部６２が取得するＮチャネルの音響信号Ｘ1～ＸNを解析することで進行状況を推定する。例えば、音響信号Ｘnの音量が急激に増加した場合、状況解析部６５は、何れかの出場者が得点を獲得した進行状況であると推定する。なお、進行状況の推定に利用される情報は、音響信号Ｘnに限定されない。例えば、収録システム１１が収録する動画を解析することで、状況解析部６５が進行状況を解析してもよい。例えば、状況解析部６５は、公知のシーン解析技術により動画の各シーンを進行状況として推定する。

なお、利用者Ｕaは、ＳＮＳ（Social Networking Service）を利用して端末装置２２から所望の投稿情報を送信することが可能である。利用者Ｕaは、再生装置２１が再生するコンテンツＣを視聴しながら投稿情報を作成および送信する。投稿情報には、コンテンツＣを視聴した感想など、イベントの進行状況に関連する文字列が含まれる。状況解析部６５は、各利用者Ｕaの端末装置２２から送信される投稿情報を参照することでイベントの進行状況を推定してもよい。

第３実施形態の制御装置５１は、第２実施形態と同様の制御処理Ｓaを実行する。ただし、第３実施形態の情報取得部６３は、状況解析部６５が推定する進行状況に応じた再生制御情報Ｑを取得する（Ｓa1）。例えば、情報取得部６３は、進行状況毎に再生制御情報Ｑが登録されたテーブルを参照することで、状況解析部６５が推定した進行状況に対応する再生制御情報Ｑを特定する。情報取得部６３が取得した再生制御情報Ｑが再生制御処理Ｓa3に適用される点は第１実施形態または第２実施形態と同様である。また、制御処理ＳaのステップＳa5において、情報取得部６３は、状況解析部６５が推定する進行状況が変化した場合に、再生制御情報Ｑを変更すると判定する（Ｓa5：YES）。すなわち、進行状況の変化毎に再生制御情報Ｑが変更される。

第３実施形態においても第２実施形態と同様の効果が実現される。また、第３実施形態においては、イベントの進行状況に応じて再生制御情報Ｑが変更されるから、進行状況に応じた適切な再生条件のもとで各音響信号Ｘnに応じた音を再生できる。

Ｄ：第４実施形態
図１４は、第４実施形態における再生制御情報Ｑの模式図である。第４実施形態の再生制御情報Ｑは、Ｎチャネルの音響信号Ｘ1～ＸNの各々について再生音量Ｖ（Ｖ1－ＶN）を指定する。すなわち、第４実施形態における各音響信号Ｘnの再生条件は、当該音響信号Ｘnが表す音の再生音量Ｖnを含む。

利用者Ｕaは、操作装置４４を操作することで、Ｎチャネルの音響信号Ｘ1～ＸNの各々について再生音量Ｖnを指示する。利用者Ｕaは、Ｎチャネルのうち優先的に聴取したい音響信号Ｘnの再生音量Ｖnを大きい数値に設定し、自身にとって重要でない音響信号Ｘnの再生音量Ｖnを小さい数値に設定する。利用者Ｕaが聴取する必要のない音の再生音量Ｖnはゼロに設定される。情報生成部６１は、各端末装置２２の利用者Ｕaからの指示（指示データＺa）に応じて当該端末装置２２の再生制御情報Ｑを生成する。

第４実施形態の音響処理Ｓc1において、再生制御部６４は、再生制御情報Ｑが指定する再生条件に応じてＮチャネルの音響信号Ｘ1～ＸNを混合することで再生信号Ｙを生成する。具体的には、再生制御部６４は、再生制御情報Ｑが指定する再生音量Ｖnを加重値としてＮチャネルの音響信号Ｘ1～ＸNを加算する処理（すなわち加重和）により、再生信号Ｙを生成する。なお、第１実施形態の音響処理Ｓc1は、第４実施形態の音響処理Ｓc1において再生音量Ｖnが２値的（０／１）に設定される形態とも換言される。以上の説明から理解される通り、第１実施形態および第４実施形態における再生制御処理Ｓa3は、再生制御情報Ｑが指定する再生条件に応じてＮチャネルの音響信号Ｘ1～ＸNを混合することで再生信号Ｙを生成する音響処理Ｓc1を含む。なお、制御システム１４が再生信号Ｙを端末装置２２に送信することで放音装置４７が収録音を再生する動作は、第１実施形態と同様である。

第４実施形態においても第１実施形態と同様の効果が実現される。また、第４実施形態においては、Ｎチャネルの音響信号Ｘ1～ＸNの各々について再生音量Ｖnが制御される。したがって、各端末装置２２の利用者Ｕaは、施設２００内の複数の位置のうち１以上の位置で収音された音を優先的に聴取できる。

なお、再生制御情報Ｑが経時的に変化する第２実施形態または第３実施形態の構成は、再生制御情報Ｑが各音響信号Ｘnの再生音量Ｖnを指定する第４実施形態においても同様に適用される。例えば、情報取得部６３は、各音響信号Ｘnの再生音量Ｖnが相違する複数の再生制御情報Ｑの何れかを選択的に取得する。

Ｅ：第５実施形態
図１５は、第５実施形態における各端末装置２２の放音装置４７の構成を例示するブロック図である。第５実施形態の放音装置４７は、Ｎ個の放音部４８を具備する。具体的には、第５実施形態の放音装置４７は、端末装置２２とは別体で構成されたＮチャネルのサラウンドシステムである。Ｎ個の放音部４８は、利用者Ｕaの周囲に設置される。

図１６は、第５実施形態における再生制御情報Ｑの模式図である。第５実施形態の再生制御情報Ｑは、Ｎチャネルの音響信号Ｘ1～ＸNの各々について供給先の放音部４８の識別情報（＃1，＃2，…）を指定する。すなわち、放音装置４７のＮ個の放音部４８の何れかが各音響信号Ｘnの供給先として再生制御情報Ｑにより指定される。以上の説明から理解される通り、第５実施形態における各音響信号Ｘnの再生条件は、当該音響信号Ｘnが供給される放音部４８（すなわち出力チャネル）の指定を含む。

利用者Ｕaは、操作装置４４を操作することで、Ｎチャネルの音響信号Ｘ1～ＸNの各々についてＮ個の放音部４８の何れかを指示する。すなわち、各音響信号ＸnをＮ個の放音部４８の何れかに割当てる。情報生成部６１は、各端末装置２２の利用者Ｕaからの指示（指示データＺa）に応じて当該端末装置２２の再生制御情報Ｑを生成する。

第５実施形態の再生制御部６４は、再生制御処理Ｓa3において、各音響信号Ｘnについて再生制御情報Ｑが指定する放音部４８を当該音響信号Ｘnの供給先として指定したうえで、Ｎチャネルの音響信号Ｘ1～ＸNを通信装置５３から端末装置２２に送信する。端末装置２２の制御装置４１は、制御システム１４から受信した各音響信号Ｘnを、放音装置４７のＮ個の放音部４８のうち当該音響信号Ｘnについて供給先として指定された放音部４８に供給する。したがって、各音響信号Ｘnに応じた音が、Ｎ個の放音部４８のうち再生制御情報Ｑにより指定された放音部４８から再生される。なお、第５実施形態においては、音響信号Ｘnを混合する音響処理Ｓc1は実行されない。

第５実施形態においても第１実施形態と同様の効果が実現される。また、第５実施形態においては、Ｎチャネルの音響信号Ｘnの各々と当該音響信号Ｘnに応じた音を再生する放音部４８との組合せが再生制御情報Ｑに応じて端末装置２２毎に設定される。したがって、施設２００内の複数の位置のうち１以上の位置における音をＮ個の放音部４８の各々により選択的または優先的に聴取できる。例えば、施設２００内の関係者Ｕcに装着された収音部１５_nに対応する音響信号Ｘnの再生音を、放音装置４７のうち利用者Ｕaの前方に設置された放音部４８から放音し、施設２００内の観客席に設置された収音部１５_nに対応する音響信号Ｘnの再生音を、放音装置４７のうち利用者Ｕaの後方に設置された放音部４８から放音する、といった視聴環境が実現される。

なお、以上の説明においては、１個の音響信号Ｘnが表す音を１個の放音部４８により再生したが、２以上の音響信号Ｘnの混合により生成される信号が表す音を１個の放音部４８により再生してもよい。２以上の音響信号Ｘnに対する前述の音響処理Ｓc1で生成された信号を１個の放音部４８に供給してもよい。すなわち、第４実施形態の構成は第５実施形態にも適用される。以上の説明から理解される通り、音響信号Ｘnと放音部４８との対応は１対１の関係に限定されない。

また、再生制御情報Ｑが経時的に変化する第２実施形態または第３実施形態の構成は、再生制御情報Ｑが各音響信号Ｘnの供給先を指定する第５実施形態においても同様に適用される。例えば、情報取得部６３は、各音響信号Ｘnの供給先が相違する複数の再生制御情報Ｑの何れかを選択的に取得する。

Ｆ：第６実施形態
図１７は、第６実施形態における再生制御部６４の動作の説明図である。第６実施形態における収音システム１３の各収音部１５_nは、現在時刻を計時する計時回路（図示略）を具備する。収音部１５_nは、収音により生成した音響信号Ｘnに時刻情報τ（τ1，τ2，…）を付加する。時刻情報τは、収音の時刻を表すデータである。例えば所定の周期で到来する時刻において、当該時刻を表す時刻情報τが音響信号Ｘnに付加される。

収音システム１３の各収音部１５_nによる収音性能または各音響信号Ｘnが伝送される通信環境は、Ｎ個の収音部１５_1～１５_Nの間で相違する。したがって、収音部１５_nが生成する音響信号Ｘnの遅延量、または、音響信号Ｘnの伝送の遅延量は、音響信号Ｘn毎に相違する。以上の相違に起因して、制御システム１４の信号取得部６２が取得するＮチャネルの音響信号Ｘ1～ＸNの間では、時間軸上の位置が整合しない場合がある。

例えば、Ｎチャネルの音響信号Ｘ1～ＸNのうち音響信号Ｘn1と音響信号Ｘn2とに便宜的に着目する（ｎ1，ｎ2＝１～Ｎ，ｎ1≠ｎ2）。図１７に例示される通り、音響信号Ｘn1のうち特定の時刻に対応する時点と、音響信号Ｘn2のうち当該時刻に対応する時点とは、時間軸上において完全には合致しない。具体的には、音響信号Ｘn1は、音響信号Ｘn2と比較して遅延した状態で制御システム１４に到達する。以上の事情を考慮して、第６実施形態においては、Ｎチャネルの音響信号Ｘ1～ＸNの相互間で時間軸上の位置を整合させる。

図１８は、第６実施形態における再生制御処理Ｓa3の具体的な手順を例示するフローチャートである。第６実施形態の再生制御処理Ｓa3は、第１実施形態と同様の音響処理Ｓc1および送信処理Ｓc2に加えて同期処理Ｓc3を含む。同期処理Ｓc3は、音響処理Ｓc1の開始前に実行される。

同期処理Ｓc3は、信号取得部６２が取得したＮチャネルの音響信号Ｘ1～ＸNの間で時間軸上の位置を整合させる信号処理である。具体的には、再生制御部６４は、図１７に例示される通り、音響信号Ｘn1において各時刻情報τが示す時点と、音響信号Ｘn2において各時刻情報τが示す時点とが、時間軸上において一致するように、音響信号Ｘn1および音響信号Ｘn2の各々の時間軸上の位置を調整する。図１７においては、音響信号Ｘn1を基準として音響信号Ｘn2の時間軸上の位置を調整する場合が例示されている。以上の説明から理解される通り、同期処理Ｓc3は、Ｎチャネルの音響信号Ｘ1～ＸNの相互間の時間差を低減する処理である。

再生制御部６４は、同期処理Ｓc3の実行後のＮチャネルの音響信号Ｘ1～ＸNについて音響処理Ｓc1を実行する。音響処理Ｓc1および送信処理Ｓc2の具体的な処理の手順は第１実施形態と同様である。

第６実施形態においても第１実施形態と同様の効果が実現される。また、第６実施形態においては、Ｎチャネルの音響信号Ｘ1～ＸNの間で時間軸上の位置が整合される。したがって、各音響信号Ｘnの時間差が低減された自然な収録音を利用者Ｕaが聴取できる。なお、第６実施形態の構成は、第２実施形態から第５実施形態にも同様に適用される。

Ｇ：第７実施形態
第１実施形態から第６実施形態においては、制御システム１４において制御処理Ｓaを実行する構成を例示した。第７実施形態は、同様の制御処理Ｓbを各端末装置２２において実行する形態である。

図１９は、第７実施形態における情報システム１００および端末装置２２のブロック図である。第７実施形態における制御システム１４は、収音システム１３が生成するＮチャネルの音響信号Ｘ1～ＸNを複数の端末装置２２の各々に送信する。各端末装置２２の通信装置４３は、制御システム１４から送信されたＮチャネルの音響信号Ｘ1～ＸNを通信網３００から受信する。すなわち、制御システム１４は、各音響信号Ｘnを中継する装置として機能する。

図２０は、第７実施形態における端末装置２２の機能的な構成を例示するブロック図である。端末装置２２の制御装置４１は、記憶装置４２に記憶されたプログラムを実行することで複数の要素（情報生成部７１，信号取得部７２，情報取得部７３および再生制御部７４）として機能する。

情報生成部７１は、第１実施形態の情報生成部６１と同様に、再生制御情報Ｑを生成する。再生制御情報Ｑは、Ｎチャネルの音響信号Ｘ1～ＸNの各々について再生条件を指定する。第７実施形態における各音響信号Ｘnの再生条件は、第１実施形態と同様に、当該音響信号Ｘnが表す音の再生の有無である。

利用者Ｕaは、第１実施形態と同様に、表示装置４６に表示される操作画面Ｇ（図７）を参照しながら音響信号Ｘn毎の再生の有無を指示する。情報生成部７１は、操作装置４４に対する操作に応じて再生制御情報Ｑを生成する。情報生成部７１が生成した再生制御情報Ｑは記憶装置４２に記憶される。また、情報生成部７１は、記憶装置４２に記憶された再生制御情報Ｑにおける各音響信号Ｘnの再生条件を、操作装置４４に対する利用者Ｕaからの指示に応じて変更する。

図２０の信号取得部７２は、Ｎチャネルの音響信号Ｘ1～ＸNを取得する。具体的には、信号取得部７２は、制御システム１４から送信されたＮチャネルの音響信号Ｘ1～ＸNを通信装置４３により受信する。信号取得部７２による各音響信号Ｘnの取得は、イベントの進行に並行して実行される。情報取得部７３は、再生制御情報Ｑを取得する。具体的には、情報取得部７３は、記憶装置４２から再生制御情報Ｑを読み出す。

再生制御部７４は、信号取得部６２が取得したＮチャネルの音響信号Ｘ1～ＸNに応じた収録音を再生装置４５（放音装置４７）に再生させる再生制御処理Ｓb3を実行する。再生制御処理Ｓb3は、イベントの進行に並行して実行される。第７実施形態の再生制御部７４は、再生制御情報Ｑが指定する再生条件のもとで、Ｎチャネルの音響信号Ｘ1～ＸNのうち１以上の音響信号Ｘnに応じた収録音を、放音装置４７に再生させる。

図２１は、端末装置２２の制御装置４１が実行する制御処理Ｓbの具体的な手順を例示するフローチャートである。制御処理Ｓbは、操作装置４４に対する利用者Ｕaからの指示を契機として開始され、イベントの進行に並行して実行される。

制御処理Ｓbが開始されると、制御装置４１（情報取得部７３）は、再生制御情報Ｑを記憶装置４２から取得する（Ｓb1）。制御装置４１（信号取得部７２）は、Ｎチャネルの音響信号Ｘ1～ＸNを制御システム１４から取得する（Ｓb2）。そして、制御装置４１（再生制御部７４）は、再生制御情報ＱとＮチャネルの音響信号Ｘ1～ＸNとを適用した再生制御処理Ｓb3を実行する。再生制御処理Ｓb3は、第１実施形態と同様の音響処理Ｓc1を含む。音響処理Ｓc1は、Ｎチャネルの音響信号Ｘ1～ＸNのうち再生制御情報Ｑにおいて「有効」に設定された１以上の音響信号Ｘnを混合することで再生信号Ｙを生成する信号処理である。再生信号Ｙが放音装置４７に供給されることで収録音が再生される。

制御装置４１は、第１実施形態と同様に、所定の終了条件が成立したか否かを判定する（Ｓb4）。終了条件が成立しない場合（Ｓb4：NO）、制御装置４１は、処理をステップＳb2に移行し、各音響信号Ｘnの取得（Ｓb2）と再生制御処理Ｓb3とを反復する。他方、終了条件が成立した場合（Ｓb4：YES）、制御装置４１は制御処理Ｓbを終了する。

以上に説明した通り、第７実施形態においては、施設２００内の相異なる位置における収音により生成されるＮチャネルの音響信号Ｘ1～ＸNのうち１以上の音響信号Ｘnに応じた収録音が、再生制御情報Ｑが指定する再生条件のもとで再生される。したがって、第１実施形態と同様に、端末装置２２の利用者Ｕaは、施設２００内の複数の位置のうち１以上の位置における音を聴取できる。

なお、第２実施形態から第６実施形態は、第７実施形態においても同様に適用される。すなわち、第２実施形態から第６実施形態において制御システム１４について例示した構成および動作は、第７実施形態における端末装置２２にも同様に適用される。

例えば、第２実施形態を第７実施形態に適用した形態においては、制御装置４１（情報取得部７３）が、記憶装置４２に記憶された複数の再生制御情報Ｑの何れかを選択する。すなわち、再生制御処理Ｓb3に適用される再生制御情報Ｑが経時的に変化する。また、第３実施形態を第７実施形態に適用した形態においては、制御装置４１（情報取得部７３）が、複数の再生制御情報Ｑのうちイベントの進行状況に応じた再生制御情報Ｑを取得する。

第４実施形態を第７実施形態に適用した形態において、制御装置４１（再生制御部７４）は、再生制御情報Ｑが指定する再生音量Ｖnで各音響信号Ｘnを混合する音響処理Ｓc1を実行する。第５実施形態を第７実施形態に適用した形態において、制御装置４１（再生制御部７４）は、放音装置４７のＮ個の放音部４８のうち再生制御情報Ｑが指定する供給先に各音響信号Ｘnを供給する。第６実施形態と同様に、Ｎチャネルの音響信号Ｘ1～ＸNの間で時間軸上の位置を整合させる同期処理Ｓc3を、端末装置２２の制御装置４１が実行する再生制御処理Ｓb3に含ませてもよい。

Ｈ：変形例
以上に例示した各態様に付加される具体的な変形の態様を以下に例示する。以下の例示から任意に選択された複数の態様を、相互に矛盾しない範囲で適宜に併合してもよい。

（１）第２実施形態においては、複数の再生制御情報Ｑの何れかが利用者Ｕaからの指示に応じて選択される形態を例示したが、情報取得部６３が複数の再生制御情報Ｑの何れかを取得するための具体的な方法は以上の例示に限定されない。例えば、各利用者Ｕaについて制御システム１４の記憶装置５２に事前に登録された情報（以下「登録情報」という）に応じて、情報取得部６３が複数の再生制御情報Ｑの何れかを選択してもよい。登録情報は、例えば、利用者Ｕaが応援するチームの指定を含む。情報取得部６３は、施設２００内の観客席のうち登録情報が指定するチームに対応する範囲内の収音部１５_nの音響信号Ｘnが「有効」に設定された再生制御情報Ｑを選択する。以上の構成によれば、観客席のうち利用者Ｕaが応援するチームに対応する範囲内（例えばホームチームの観客席）で収音された音を利用者Ｕaが聴取できる。なお、以上の例示において情報取得部６３に着目したが、端末装置２２の情報取得部７３についても同様の形態が採用される。

（２）前述の各形態においては、再生装置２１によるコンテンツＣの再生と放音装置４７による音の再生とが並行される構成を例示した。コンテンツＣの配信には例えば通信環境に起因した遅延が発生するから、コンテンツＣと収録音とが時間軸上で整合しない可能性がある。以上の事情を考慮すると、コンテンツＣと各音響信号Ｘn（または再生信号Ｙ）とが時間軸上で整合するように、各音響信号Ｘnの時間軸上の位置を調整する形態も想定される。例えば、再生制御部６４は、コンテンツＣの映像データＣ1の時刻情報が示す時刻と、各音響信号Ｘnの時刻情報τが示す時刻とが時間軸上において一致するように、音響信号Ｘnの時間軸上の位置を調整する。以上の構成によれば、映像データＣ1が表す映像に時間的に整合した音を再生装置４５により再生できる。なお、コンテンツＣの配信遅延が事前に予測できる場合、再生制御部６４は、各音響信号Ｘnを当該配信遅延に相当する時間だけ遅延させてもよい。すなわち、映像データＣ1と音響信号Ｘnとの対比は省略される。なお、以上の説明においては再生制御部６４に着目したが、端末装置２２の再生制御部７４が同様の調整を実行してもよい。

（３）制御システム１４を利用したサービスを利用できる利用者Ｕaを制限してもよい。具体的には、コンテンツＣを視聴している利用者Ｕaに限定して当該サービスを提供する形態が想定される。例えば、利用許可を表す許可データがコンテンツＣの音響データＣ2に重畳される。許可データは、音響データＣ2が表す音のうち例えば可聴帯域を上回る帯域内に付加される。端末装置２２の制御装置４１は、再生装置２１の放音装置２４が再生する音を収音することで許可データを抽出する。すなわち、放音装置２４を送信機として利用した音響通信により許可データが再生装置２１の周囲に送信される。通信装置４３は、制御装置４１が抽出した許可データを制御システム１４に送信する。制御システム１４は、許可データを送信した端末装置２２に限定して前述の各形態に係るサービスを提供する。以上の構成によれば、コンテンツＣを実際に視聴している利用者Ｕaに対して限定的にサービスを提供できる。

（４）収音システム１３の各収音部１５_nには、本来的な収音の目的となる音（以下「目的音」という）だけでなく非目的音も到達する。非目的音は、被り音（spill sound）とも換言される。例えば、関係者Ｕcに装着された収音部１５_nには、当該関係者Ｕcが発音した目的音だけでなく関係者Ｕcの周囲の非目的音も到達する。また、観客席のうち第１範囲に設置された収音部１５_nには、当該第１範囲内の観覧者Ｕbが発音した目的音だけでなく、第１範囲とは相違する第２範囲内の観覧者Ｕbが発音した非目的音も到達する。再生制御部６４は、非目的音を低減する信号処理を各音響信号Ｘnに対して実行してもよい。例えば、再生制御部６４は、各音響信号Ｘnにおける目的音を強調する各種の信号処理（例えば音源分離技術）を実行する。以上の構成によれば、施設２００内の特定の収音部１５_nが収音する目的音を利用者Ｕaが明瞭に聴取できる。なお、以上の説明においては再生制御部６４に着目したが、端末装置２２の再生制御部７４が同様の処理を実行してもよい。

（５）前述の各形態においては、再生信号Ｙが表す収録音を放音装置４７により再生したが、再生信号Ｙが表す文字列（以下「収録文字列」という）を表示装置４６に表示してもよい。例えば、端末装置２２の制御装置４１は、再生信号Ｙに対する音声認識処理により収録文字列を推定し、当該収録文字列を表示装置４６に表示させる。第１言語で表現された収録文字列を公知の機械翻訳処理により第２言語に翻訳したうえで表示装置４６に表示してもよい。以上の説明においては音響処理Ｓc1により生成される再生信号Ｙに着目したが、音響処理Ｓc1が実行されない第５実施形態においても同様の構成が採用される。例えば、端末装置２２の制御装置４１は、制御システム１４から供給されるＮチャネルの音響信号Ｘ1～ＸNのうち１以上の音響信号Ｘnに対する音声認識処理により収録文字列を推定し、当該収録文字列を表示装置４６に表示させる。

（６）Ｎ個の収音部１５_1～１５_Nのうち関係者Ｕcに装着された収音部１５_nに着目する。制御システム１４の制御装置５１は、収音部１５_nが生成する音響信号Ｘnに対する話者識別処理により関係者Ｕc（例えば特定の出場者）を推定し、当該関係者Ｕcに関連する関連情報を端末装置２２に提供してもよい。例えば、相異なる関係者Ｕcについて記憶装置５２に事前に記憶された複数の関連情報のうち、話者識別処理で推定された関係者Ｕcに対応する関連情報が、制御システム１４から端末装置２２に送信される。関連情報は、例えば関係者Ｕcの名前、顔写真またはプロフィール等の各種の情報を含む。端末装置２２の制御装置４１は、制御システム１４から受信した関連情報を表示装置４６に表示させる。以上の構成によれば、関係者Ｕcが発話する音声を聴取しながら、当該関係者Ｕcの関連情報を利用者Ｕaが確認できる。

なお、以上の説明においては音響信号Ｘnに対する話者識別処理により発話者を推定したが、収音部１５_n毎に設定された識別情報を利用して発話者を特定してもよい。例えば、収音部１５_nは、当該収音部１５_nの識別情報を音響信号Ｘnとともに制御システム１４に送信する。制御装置５１は、記憶装置５２に記憶された複数の関連情報のうち、当該識別情報に対応する関連情報を端末装置２２に提供する。以上の構成においては、音響信号Ｘnに対する話者識別情報が不要である。また、以上の説明においては制御システム１４の制御装置５１が関連情報を特定したが、端末装置２２の制御装置４１が同様の処理により関連情報を特定してもよい。

（７）前述の各形態においては、イベントが実施される施設２００内に設置されたＮ個の収音部１５_1～１５_Nを利用したが、音響信号Ｘnを生成する各収音部１５_nが設置される場所は施設２００内に限定されない。例えば、各利用者Ｕaが収音部１５_nを利用可能な形態も想定される。具体的には、端末装置２２に搭載された収音装置（マイクロホン）を収音部１５_nとして音響信号Ｘnの生成に利用してもよい。各利用者Ｕaは、再生装置４５が再生するコンテンツＣを視聴しながら、イベントに関する音声を発音する。例えば、各利用者Ｕaは、コンテンツＣを実況する音声、またはコンテンツＣに関する利用者Ｕaの感想を表す音声を発音する。

各収音部１５_nは、以上に例示したイベントに関する音声を収音することで、当該イベントの進行に並行して音響信号Ｘnを生成する。信号取得部６２は、施設２００内の収音部１５_nが生成する音響信号Ｘnと、利用者Ｕaが発音した音声を表す音響信号Ｘnとを含むＮチャネルの音響信号Ｘ1～ＸNを取得する。情報取得部６３が再生制御情報Ｑを取得する動作、および、当該再生制御情報Ｑを適用した再生制御処理Ｓa3を再生制御部６４が実行する動作は、前述の各形態と同様である。

以上の形態によれば、個人的にイベントについて発音する利用者Ｕaの音声を含む収録音を各端末装置２２に再生させることが可能である。具体的には、施設２００内で収音された音声と、イベントのスポーツに関する種々の利用者Ｕaの音声とを含む複数の音声のうち、再生制御情報Ｑに応じた１以上の音声を選択的に組合せた収録音を、各端末装置２２により再生することが可能である。例えば、イベントに係るスポーツのプレイまたは観覧を趣味とする利用者Ｕaの音声、または当該スポーツの部活動を実施する学生である利用者Ｕaの音声等、多様な音声を組合せた収録音が、端末装置２２により再生される。また、第１国内でコンテンツＣを視聴する利用者Ｕaの音声を含む収録音を、第１国とは相違する第２国内の端末装置２２により再生することも可能である。

なお、以上の説明においては、施設２００内で収音された音声を含む収録音を例示したが、施設２００外で収音された音声（例えば利用者Ｕaの音声）のみを収録音が含む構成も想定される。第２実施形態から第６実施形態にも同様の変形例が適用される。また、以上の説明においては、制御処理Ｓaを制御システム１４が実行する形態を想定したが、制御処理Ｓbを端末装置２２が実行する第７実施形態にも同様の変形例が適用される。

以上の例示から理解される通り、信号取得部（６２，７２）は、相異なる位置における収音によりイベントについて生成される複数の音響信号Ｘnを取得する要素、として包括的に表現される。「相異なる位置」の典型例は、前述の各形態の例示の通り、イベントが実施される施設２００内に存在する位置であるが、本変形例の例示の通り、施設２００外の任意の位置（例えば利用者Ｕaの位置）も「相異なる位置」には包含され得る。また、「イベントについて生成される音響信号Ｘn」は、例えばイベントが実施される施設２００内で発音される音（例えば観覧者Ｕbまたは関係者Ｕcの音声）、または、当該イベントを解説または実況する音声等、位置的または内容的にイベントに関連する任意の音を表す信号を意味する。

（８）前述の各形態においては、再生信号Ｙを放音装置４７に供給することで放音装置４７により収録音を再生したが、収録音の再生に再生装置２１の放音装置２４を利用してもよい。例えば、端末装置２２の制御装置４１は、制御システム１４から受信した再生信号Ｙを再生装置２１に送信する。再生装置２１の放音装置２４は、コンテンツＣの音響データＣ2が表す音と、再生信号Ｙが表す収録音との混合音を再生する。

（９）前述の各形態においてはスポーツイベントを例示したが、前述の各形態が適用されるイベントは以上の例示に限定されない。例えば、音楽が演奏されるライブまたはコンサート等の音楽イベント、ダンサーが実演するダンスイベント、俳優が出演する演劇イベント、講演者が講演する講演イベント、学校や学習塾等の各種の教育機関が生徒に授業を提供する教育イベント等、特定の目的で実施される各種のイベントに、前述の各形態は適用される。

（１０）以上に例示した制御システム１４の機能は、前述の通り、制御装置５１を構成する単数または複数のプロセッサと、記憶装置５２に記憶されたプログラムとの協働により実現される。同様に、端末装置２２の機能は、前述の通り、制御装置４１を構成する単数または複数のプロセッサと、記憶装置４２に記憶されたプログラムとの協働により実現される。

プログラムは、コンピュータが読取可能な記録媒体に格納された形態で提供されてコンピュータにインストールされ得る。記録媒体は、例えば非一過性（non-transitory）の記録媒体であり、ＣＤ-ＲＯＭ等の光学式記録媒体（光ディスク）が好例であるが、半導体記録媒体または磁気記録媒体等の公知の任意の形式の記録媒体も包含される。なお、非一過性の記録媒体とは、一過性の伝搬信号（transitory, propagating signal）を除く任意の記録媒体を含み、揮発性の記録媒体も除外されない。また、配信装置が通信網を介してプログラムを配信する構成では、当該配信装置においてプログラムを記憶する記録媒体が、前述の非一過性の記録媒体に相当する。

Ｉ：付記
以上に例示した形態から、例えば以下の構成が把握される。

本開示のひとつの態様（態様１）に係る再生制御方法は、相異なる位置における収音によりイベントについて生成される複数の音響信号を当該イベントの進行に並行して取得し、前記複数の音響信号の各々の再生条件を指定する再生制御情報を、複数の端末装置の各々について取得し、前記複数の端末装置の各々について再生制御処理を実行し、前記再生制御処理においては、当該端末装置の再生制御情報が指定する再生条件のもとで、前記複数の音響信号のうち１以上の音響信号に応じた音を、前記イベントの進行に並行して再生装置に再生させる。以上の構成においては、相異なる位置における収音によりイベントについて生成される複数の音響信号のうち１以上の音響信号に応じた音が、再生制御情報が指定する再生条件のもとで再生される。したがって、端末装置の利用者は、複数の位置のうち１以上の位置において収音される音を選択的または優先的に聴取できる。

本開示の他の態様（態様２）に係る再生制御方法は、端末装置が、相異なる位置における収音によりイベントについて生成される複数の音響信号を当該イベントの進行に並行して取得し、前記複数の音響信号の各々の再生条件を指定する再生制御情報を取得し、再生制御処理を実行し、前記再生制御処理においては、前記再生制御情報が指定する再生条件のもとで、前記複数の音響信号のうち１以上の音響信号に応じた音を、前記イベントの進行に並行して再生装置に再生させる。以上の構成においては、相異なる位置における収音によりイベントについて生成される複数の音響信号のうち１以上の音響信号に応じた音が、再生制御情報が指定する再生条件のもとで再生される。したがって、端末装置の利用者は、複数の位置のうち１以上の位置において収音される音を選択的または優先的に聴取できる。

態様１または態様２の具体例（態様３）において、前記相異なる位置は、前記イベントが実施される場所に存在する位置である。以上の態様においては、イベントが実施される場所の相異なる位置における収音により生成される複数の音響信号のうち１以上の音響信号に応じた音が再生される。

態様１から態様３の何れかの具体例（態様４）において、前記複数の音響信号の各々の再生条件は、当該音響信号が表す音の再生の有無を含む。以上の構成においては、複数の音響信号の各々の再生の有無が制御される。したがって、端末装置の利用者は、複数の位置のうち１以上の位置における音を選択的に聴取できる。

態様１から態様４の何れかの具体例（態様５）において、前記複数の音響信号の各々の再生条件は、当該音響信号の再生音量を含む。以上の構成においては、複数の音響信号の各々の再生音量が制御される。したがって、端末装置の利用者は、複数の位置のうち１以上の位置における音を優先的に聴取できる。

態様４または態様５の具体例（態様６）において、前記再生制御処理は、前記複数の音響信号を前記再生条件に応じて混合することで再生信号を生成する音響処理を含み、前記再生信号が表す音を前記再生装置に再生させる処理である。

態様１から態様５の何れかの具体例（態様７）において、前記再生装置は、複数の放音部を含み、前記複数の音響信号の各々の再生条件は、前記複数の放音部のうち当該音響信号が供給される放音部の指定を含む。以上の構成においては、複数の音響信号の各々の供給先となる放音部が制御される。したがって、端末装置の利用者は、複数の位置の各々における音を明確に区別しながら聴取できる。

態様１から態様７の何れかの具体例（態様８）において、前記再生制御処理は、前記複数の音響信号のうち第１音響信号と第２音響信号との間で時間軸上の位置を整合させる同期処理を含む。以上の構成においては、複数の音響信号のうち第１音響信号と第２音響信号との間で時間軸上の位置が整合される。したがって、第１音響信号と第２音響信号との時間差が低減された自然な音を利用者が聴取できる。

態様１から態様８の何れかの具体例（態様９）において、前記再生制御情報は、前記端末装置の利用者からの指示に応じて生成される。以上の構成においては、端末装置の利用者からの指示に応じて再生制御情報が生成される。したがって、利用者の嗜好等に沿った再生が実現される。

態様１から態様９の何れかの具体例（態様１０）において、前記再生制御情報の取得においては、前記各音響信号の再生条件が相違する複数の再生制御情報の何れかを選択する。以上の構成においては、事前に用意された複数の再生制御情報の何れかが選択される。したがって、再生装置により再生される音を多様化することが可能である。

態様１０の具体例（態様１１）において、前記再生制御情報の取得において、第１期間では、前記複数の再生制御情報のうち第１再生制御情報を取得し、前記第１期間とは相違する第２期間では、前記複数の再生制御情報のうち前記第１再生制御情報とは相違する第２再生制御情報を取得する。以上の構成においては、第１期間において第１再生制御情報が選択され、第２期間において第２再生制御情報が選択される。したがって、各音響信号が表す音の再生条件が経時的に変化する多様な再生を実現できる。

本開示のひとつの態様（態様１２）に係る制御システムは、相異なる位置における収音によりイベントについて生成される複数の音響信号を当該イベントの進行に並行して取得する信号取得部と、前記複数の音響信号の各々の再生条件を指定する再生制御情報を、複数の端末装置の各々について取得する情報取得部と、前記複数の端末装置の各々について再生制御処理を実行する再生制御部とを具備し、前記再生制御処理においては、当該端末装置の再生制御情報が指定する再生条件のもとで、前記複数の音響信号のうち１以上の音響信号に応じた音を、前記イベントの進行に並行して再生装置に再生させる。本開示の他の態様に係るプログラムは、態様１２に係る制御システムとしてコンピュータを機能させる。

本開示のひとつの態様（態様１３）に係る端末装置は、相異なる位置における収音によりイベントについて生成される複数の音響信号を当該イベントの進行に並行して取得する信号取得部と、前記複数の音響信号の各々の再生条件を指定する再生制御情報を取得する情報取得部と、再生制御処理を実行する再生制御部とを具備し、前記再生制御処理においては、前記再生制御情報が指定する再生条件のもとで、前記複数の音響信号のうち１以上の音響信号に応じた音を、前記イベントの進行に並行して再生装置に再生させる。本開示の他の態様に係るプログラムは、態様１３に係る端末装置としてコンピュータを機能させる。

１００…情報システム、２００…施設、３００…通信網、１１…収録システム、１２…配信システム、１３…再生システム、１４…制御システム、１５_1～１５_N…収音部、２１，４５…再生装置、２３，４６…表示装置、２４，４７…放音装置、２２…端末装置、４１，５１…制御装置、４２，５２…記憶装置、４３，５３…通信装置、４４…操作装置、４８…放音部、６１，７１…情報生成部、６２，７２…信号取得部、６３，７３…情報取得部、６４，７４…再生制御部、６５…状況解析部。

Claims (12)

1. 端末装置が、
   相異なる位置における収音によりイベントについて生成される複数の音響信号を当該イベントの進行に並行して取得し、
   前記複数の音響信号の各々の再生条件を指定する再生制御情報を取得し、
   再生制御処理を実行し、
   前記再生制御処理においては、前記再生制御情報が指定する再生条件のもとで、前記複数の音響信号のうち１以上の音響信号に応じた音を、前記イベントの進行に並行して再生装置に再生させる
   再生制御方法。
2. 前記相異なる位置は、前記イベントが実施される場所に存在する位置である
   請求項１の再生制御方法。
3. 前記複数の音響信号の各々の再生条件は、当該音響信号が表す音の再生の有無を含む
   請求項１または請求項２の再生制御方法。
4. 前記複数の音響信号の各々の再生条件は、当該音響信号の再生音量を含む
   請求項１から請求項３の何れかの再生制御方法。
5. 前記再生制御処理は、前記複数の音響信号を前記再生条件に応じて混合することで再生信号を生成する音響処理を含み、前記再生信号が表す音を前記再生装置に再生させる処理である
   請求項３または請求項４の再生制御方法。
6. 前記再生装置は、複数の放音部を含み、
   前記複数の音響信号の各々の再生条件は、前記複数の放音部のうち当該音響信号が供給される放音部の指定を含む
   請求項１から請求項４の何れかの再生制御方法。
7. 前記再生制御処理は、前記複数の音響信号のうち第１音響信号と第２音響信号との間で時間軸上の位置を整合させる同期処理を含む
   請求項１から請求項６の何れかの再生制御方法。
8. 前記再生制御情報は、前記端末装置の利用者からの指示に応じて生成される
   請求項１から請求項７の何れかの再生制御方法。
9. 前記再生制御情報の取得においては、前記各音響信号の再生条件が相違する複数の再生制御情報の何れかを選択する
   請求項１から請求項８の何れかの再生制御方法。
10. 前記再生制御情報の取得において、第１期間では、前記複数の再生制御情報のうち第１再生制御情報を取得し、前記第１期間とは相違する第２期間では、前記複数の再生制御情報のうち前記第１再生制御情報とは相違する第２再生制御情報を取得する
    請求項９の再生制御方法。
11. 相異なる位置における収音によりイベントについて生成される複数の音響信号を当該イベントの進行に並行して取得する信号取得部と、
    前記複数の音響信号の各々の再生条件を指定する再生制御情報を取得する情報取得部と、
    再生制御処理を実行する再生制御部とを具備し、
    前記再生制御処理においては、前記再生制御情報が指定する再生条件のもとで、前記複数の音響信号のうち１以上の音響信号に応じた音を、前記イベントの進行に並行して再生装置に再生させる
    端末装置。
12. 端末装置のプロセッサを、
    相異なる位置における収音によりイベントについて生成される複数の音響信号を当該イベントの進行に並行して取得する信号取得部、
    前記複数の音響信号の各々の再生条件を指定する再生制御情報を取得する情報取得部、および、
    再生制御処理を実行する再生制御部、
    として機能させるプログラムであって、
    前記再生制御処理においては、前記再生制御情報が指定する再生条件のもとで、前記複数の音響信号のうち１以上の音響信号に応じた音を、前記イベントの進行に並行して再生装置に再生させる
    プログラム。
    
    

Images