WO2022196076A1

WO2022196076A1 - 情報処理装置、及び、情報処理方法

Info

Publication number: WO2022196076A1
Application number: PCT/JP2022/001488
Authority: WO
Inventors: 尚子菅野
Original assignee: ソニーグループ株式会社
Priority date: 2021-03-19
Filing date: 2022-01-18
Publication date: 2022-09-22
Also published as: US20240155284A1; JPWO2022196076A1

Abstract

本技術は、コンサート等での観客ごとの声援を利用できるようにする情報処理装置、及び、情報処理方法に関する。複数の録音装置を同時に制御可能な他装置と通信が行われ、前記他装置によって制御され、前記複数の録音装置と同期して録音が行われ、録音された音声データに対して、録音された位置に関する位置情報と、録音された時刻に関する時刻情報とが付加される。本技術はコンサートで観客が使用するペンライト等に搭載され得る。

Description

情報処理装置、及び、情報処理方法

　本技術は、情報処理装置、及び、情報処理方法に関し、特に、コンサート等での観客ごとの声援を利用できるようにした情報処理装置、及び、情報処理方法に関する。

　特許文献１には、コンサート会場などで観客が使用するペンライトの点灯及び消灯のタイミングを制御する技術が開示されている。

特開２０１３－１９１３５７号公報

　コンサートの観客の声援（コール＆レスポンスを含む）は、コンサートの雰囲気を盛り上げるために重要である。コンサートを記録した音声を制作（編集）する際に、観客の声援は、コンサートの雰囲気を表すのに重要な要素である。コンサート等のイベントの開催時又はイベントの記録音声の編集時において、観客ごとの声援を利用できるようにすることが望ましい。

　本技術はこのような状況に鑑みてなされたものであり、コンサート等での観客ごとの声援を利用できるようにする。

　本技術の第１の側面の情報処理装置は、複数の録音装置を同時に制御可能な他装置と通信する通信部と、前記他装置によって制御され、前記複数の録音装置と同期して録音可能な録音部と、前記録音部によって録音された音声データに対して、録音された位置に関する位置情報と、録音された時刻に関する時刻情報とを付加する処理部を有する情報処理装置である。

　本技術の第１の側面の情報処理方法は、通信部と、録音部と、処理部とを有する情報処理装置の前記通信部が、複数の録音装置を同時に制御可能な他装置と通信し、前記録音部が、前記他装置によって制御され、前記複数の録音装置と同期して録音を行い、前記処理部が、前記録音部によって録音された音声データに対して、録音された位置に関する位置情報と、録音された時刻に関する時刻情報とを付加する情報処理方法である。

　本技術の第１の側面の情報処理装置及び情報処理方法においては、複数の録音装置を同時に制御可能な他装置と通信が行われ、前記他装置によって制御され、前記複数の録音装置と同期して録音が行われ、録音された音声データに対して、録音された位置に関する位置情報と、録音された時刻に関する時刻情報とが付加される。

　本技術の第２の側面の情報処理装置は、複数の再生装置を同時に制御可能な他装置と通信する通信部と、前記他装置によって制御され、前記複数の再生装置と同期して音声データを再生する音声再生部と、を有する情報処理装置である。

　本技術の第２の側面の情報処理方法は、通信部と、音声再生部とを有する情報処理装置の前記通信部が、複数の再生装置を同時に制御可能な他装置と通信し、前記音声再生部が、前記他装置によって制御され、前記複数の再生装置と同期して音声データを再生する情報処理方法である。

　本技術の第２の側面の情報処理装置及び情報処理方法においては、複数の再生装置を同時に制御可能な他装置と通信が行われ、前記他装置によって制御され、前記複数の再生装置と同期して音声データが再生される。

本技術が適用された会場演出システムの実施の形態の構成を例示した図である。子機の外観を例示した図である。子機の内部構成を例示した構成図である。コンサート会場における一部の座席を例示した図である。親機の構成を例示する構成図である。本技術の概要について説明する図である。会場演出システムの声援録音機能を説明する図である。音声データに付加されるヘッダー情報を例示した図である。声援録音機能の処理を実施するための声援録音装置の構成例を示したブロック図である。声援録音機能利用時における処理手順を例示したフローチャートである。会場演出システムの声援再生機能を説明する図である。声援再生機能の処理を実施するための声援再生装置の構成を例示したブロック図である。声援生成機能利用時における処理手順を例示したフローチャートである。音声データ送信機能を説明する図である。バーチャルサウンドの生成についての説明図である。声援データを編集する編集装置の構成例を示したブロック図である。図１５のバーチャルサウンドの生成の処理の流れを説明する図である。第３コンサート形態でのバーチャルサウンドの生成を説明する図である。音声データを生成する音声再生装置の構成例を示したブロック図である。図１８のバーチャルサウンドの生成の処理の流れを説明する図である。

　以下、図面を参照しながら本技術の実施の形態について説明する。

＜会場演出システムの実施の形態＞
　図１は、本技術が適用された会場演出システムの実施の形態の構成を例示した図である。

　図１の会場演出システム１は、子機１１と親機１２を有する。子機１１は、例えば、コンサート会場等において多数の観客がそれぞれ使用するペンライトであり、録音装置及び再生装置としての機能を有する。子機１１と親機１２とは無線通信可能に構成されており、親機１２（子機１１を同時に制御可能な他装置）は無指向性の無線により子機１１へ信号を送信する。親機１２から子機１１へ信号を送信することで、子機１１のライト点灯タイミング、録音タイミング、再生（放音）タイミングなどが同期して制御される。なお、コンサート会場が広い場合等において、子機１１と親機１２との間は無線通信を中継する１又は複数の中継機が介在している場合であってよい。本技術が適用された会場演出システム１はコンサート会場に限らず、音楽コンサート、演劇等の人の集まる任意のイベントの任意の会場で利用され得る。以下において、イベントは音楽コンサート（単にコンサートという）であるとし、イベントに歌手や楽器の演奏者等として参加する者を出演者というものとする。演奏という場合には楽器の演奏だけでなく、出演者の歌声や話し声等を含む。

（子機１１の構成）
　図２は、子機１１の外観を例示した図である。子機１１は、全体として円柱状の形状を有し、コンサートの観客であるユーザが把持する基端側の把持部２１と発光する発光部２２とを有する。なお、コンサートの観客のうち、子機１１を所持する観客をユーザということとする。把持部２１には、電源スイッチ２３、操作部２４、スピーカ２５、及び、マイク（マイクロフォン）２６等が配置される。電源スイッチ２３は、子機１１の電源のオンとオフとを切り替える。操作部２４は、電源スイッチ２３以外のユーザにより操作される操作ボタンや操作スイッチ等を表す。図２では操作部２４は省略されて１つの押しボタンのみが例示されているが、これに限らない。操作部２４は、発光部２２の発光（点灯）の実行及び停止、発光部２２の発光色、輝度、及び、点滅間隔の切替え、音声録音の実行及び停止、並びに、音声再生の実行及び停止をユーザがマニュアル操作するための各種ボタン又はスイッチを含む。スピーカ２５（音声再生部）は、後述の記憶部に事前に記憶された声援等の音声データを音声として再生（出力）する。マイク２６（音声取得部）は、コンサート中のユーザの声援等の音声を検出（受信）して後述の記憶部に音声データとして記憶する。発光部２２は、発光部２２は、ＬＥＤ等の光源からの光を拡散させて全体が発光する。なお、本技術は、図２のような発光部２２を有するペンライト型の子機１１でなくても適用可能である。

　図３は、子機１１の内部構成を例示した構成図である。図３において、子機１１は、図２にも図示した電源スイッチ２３、操作部２４、スピーカ２５、及び、マイク２６と、図２には不図示のアンテナ３１、通信部３２、制御部（マイコン）３３、ＬＥＤドライバ３４、３色ＬＥＤ３５ａ、３５ｂ、３５ｃ、記憶部３６、リーダ３７、バッテリ３８、及び、電源部３９とを有する。

　電源スイッチ２３は、ユーザの操作によりオン状態とオフ状態とが切り替わる。電源スイッチ２３がオフ状態である場合には、電源部３９から子機１１内の各部への電力供給が行われず、子機１１が全体として停止した状態である。電源スイッチ２３がオン状態になると、電源部３９から子機１１内の各部への電力供給が行われ、子機１１の各部が動作可能な状態となる。

　操作部２４は、ユーザのマニュアル操作に応じた指示を制御部３３に供給する。操作部２４から制御部３３への指示の内容としては、発光部２２（図２参照）の発光に関しては、３色ＬＥＤ３５ａ、３５ｂ、３５ｃによる発光部２２の発光のオン／オフ、発光色、輝度、及び、点滅周波数の指示（単に発光の指示という）等がある。スピーカ２５に関する指示の内容としては、記憶部３６に記憶された音声データ（音声信号）のスピーカ２５による再生（放音）の指示（単に音声再生の指示という）等がある。マイク２６に関する指示の内容としては、マイク２６で受信した音声データの記憶部３６への記録の指示（単に音声録音の指示という）等がある。なお、これらの指示内容のうち、操作部２４に対するユーザのマニュアル操作により指示可能な指示内容は、一部であってもよいし、他の指示内容を含む場合であってもよい。

　スピーカ２５は、音声データを音として出力（再生）する音声出力部であり、制御部３３からの制御信号に従って再生実行状態と再生停止状態とを切り替える。再生停止状態では、スピーカ２５は音声データの再生（放音）を行わない。再生実行状態では、スピーカ２５は、記憶部３６に格納（記憶）されている音声データを再生（放音）する。

　マイク２６は、制御部３３からの制御信号に従って録音実行状態と録音停止状態とを切り替える。録音停止状態では、マイク２６は音声データの記憶部３６への記憶（録音）を行わない。録音実行状態では、マイク２６は、受信した音声信号を音声データとして記憶部３６に記憶する。

　アンテナ３１は、親機１２からの信号を受信し、又は、親機１２への信号を送信する。通信部３２は、Bluetooth（登録商標）や無線LAN等の所定の無線通信規格に準拠した通信により親機１２との間でアンテナ３１を介して各種信号（各種指示や各種データ）を送受信する。通信部３２は、親機１２から取得した信号を制御部３３に供給する。通信部３２は、制御部３３から供給される親機１２への各種信号をアンテナ３１を介して親機１２に送信する。通信部３２から制御部３３に供給される親機１２からの指示内容としては、操作部２４からの指示内容と同様に、発光、音声再生、及び、音声録音の指示等がある。

　制御部３３は、親機１２からの指示、又は、操作部２４からの指示に基づいて、発光、音声再生、及び、音声録音を制御する。発光の制御では、制御部３３は、３色ＬＥＤ３５ａ、３５ｂ、３５ｃを駆動するための制御信号をＬＥＤドライバ３４へ送る。ＬＥＤドライバ３４は、制御部３３からの制御信号に基づいて、３色ＬＥＤ３５ａ、３５ｂ、３５ｃを駆動する。これにより、親機１２又は操作部２４からの指示に従って、３色ＬＥＤ３５ａ、３５ｂ、３５ｃの発光色、輝度、点滅間隔等が制御される。

　音声再生の制御では、制御部３３は、スピーカ２５を駆動するための制御信号をスピーカ２５へ送る。スピーカ２５は、制御部３３から送られた制御信号に基づいて、再生実行状態と再生停止状態とを切り替える。再生実行状態では、スピーカ２５は、記憶部３６に記憶された音声データを再生（放音）する。再生停止状態では、スピーカ２５への電源供給（電力供給）が停止され、スピーカ２５は音声データの再生を実行しない。なお、図では記憶部３６からスピーカ２５への音声データの流れが省略されている。具体的には、スピーカ２５で再生する音声データの記憶部３６からの読出しは、例えば制御部３３により行われる。記憶部３６から読み出された音声データは、制御部３３からスピーカ２５に供給される。記憶部３６に記憶された音声データが符号化されている場合の音声データの復号等の処理も制御部３３により行われる。

　音声録音の制御では、制御部３３は、マイク２６を駆動するための制御信号をマイク２６へ送る。マイク２６は、制御部３３から送られた制御信号に基づいて、録音実行状態と録音停止状態とを切り替える。録音実行状態では、マイク２６は、検出した音声データを記憶部３６に記憶させる。録音停止状態では、マイク２６への電源供給（電力供給）が停止され、マイク２６は音声データの記憶部３６への記憶を実行しない。なお、図ではマイク２６から記憶部３６への音声データの流れが省略されている。具体的には、マイク２６で検出された音声データの記憶部３６への書込み（記憶）は、例えば制御部３３により行われる。マイク２６で受信された音声データは、制御部３３から記憶部３６に記憶される。記憶部３６に記憶させる音声データを符号化する場合の符号化の処理は、制御部３３により行われる。

　リーダ３７は、FeliCa（登録商標）等のNFC（Near Field Communication：近距離無線通信）の技術により、リーダ３７の近傍に接近した（子機１１にタッチされた）電子タグ（ICタグ）と通信を行い、電子タグに記録されている情報を読み取る。

　図４は、コンサート会場における一部の座席を例示した図である。図４において、各座席４１は、横一列に並べて配置され、かつ、縦に複数列分配置されている。表記４２（図４の例では２８番が図示）は、その表記４２が付された横一列の座席の列番号である。表記４３（図４の例では８１乃至８３番が図示）は、その表記４３が付された座席の行番号である。各座席４１の座席番号は、列番号と行番号との組合せにより決められている。各座席４１には電子タグ４４が設置される。各座席４１の電子タグ４４には、各座席（の位置）を識別する識別情報として座席番号が記録されている。ただし、電子タグ４４に記録されている座席番号と、表記４２、４３により表される座席番号とは一致していなくてもよい。座席の位置を特定する座席情報の取得は、電子タグ４４を用いる場合に限らない。座席の位置を特定する座席情報は、座席番号に限らない。

　観客であるユーザは、チケット購入時等に指定された座席番号の座席に移動した後、その座席に設置された電子タグ４４を各ユーザが所有する子機１１でタッチする。即ち、コンサート前に子機１１を購入等により取得した各ユーザは、自身が所持する子機１１を、自身に割り当てられた座席の電子タグ４４に接近させる。各子機１１のリーダ３７が電子タグ４４に通信可能な距離まで近づくと、電子タグ４４に記録された座席番号が、子機１１のリーダ３７により読み取られて、制御部３３に供給される。これにより、各子機１１は、それぞれが配置される座席の座席番号を認識する。なお、後述のようにコンサート会場に観客を動員せずにコンサートを開催（実施）する場合がある。その場合に、コンサート運営側のスタッフ等が子機１１を各座席に配置してコンサートを実施してもよい。このとき、各座席に配置された各子機１１に各座席の座席番号を認識させる作業は、各座席に子機１１を配置するスタッフ等が行ってよく、ユーザが行う場合に限らない。

　図３において、制御部３３は、多数の子機１１のうちの自己の子機１１を利用するユーザを識別する識別情報（ユーザID）として、電子タグ４４から読み取られた座席番号を用いる。制御部３３は、ユーザIDとした座席番号を親機１２に通信部３２により送信する。これにより、親機１２は、ユーザID（座席番号）に基づいて各子機１１のコンサート会場における座席位置を認識する。

　ここで、親機１２の制御部６１は、子機１１に対して発光、音声再生、又は、音声録音の指示を行う信号を送信する場合に、子機１１に送信する信号内におけるモード情報によりブロードキャストモードと、ID分けモードとを指定する。制御部６１は、ID分けモードを指定した場合には、更に子機１１に送信する信号内におけるID分け情報により、その信号を有効に受信すべき子機１１のユーザID（座席番号）を指定する。

　子機１１の制御部３３は、親機１２からの信号を受信すると、信号内に含まれるモード情報を参照し、ブロードキャストモードの信号か、ID分けモードの信号かを判別する。

　制御部３３は、親機１２からの信号がブロードキャストモードの信号である場合には、親機１２からの信号に含まれる発光の指示、音声再生の指示、又は、音声録音の指示に従う。

　制御部３３は、親機１２からの信号がID分けモードの信号である場合には、その信号内に含まれるID分け情報を参照し、自己の子機１１のユーザID（座席番号）が指定されているか否かを判定する。

　制御部３３は、ID分けモードの信号の場合において、ID分け情報に自己のユーザIDが指定されている場合には、親機１２からの信号に含まれる発光の指示、音声再生の指示、又は、音声録音の指示に従う。

　制御部３３は、ID分けモードの信号の場合において、ID分け情報に自己のユーザIDが指定されていない場合には、親機１２からの信号を無効にする。

　これにより、親機１２は、特定の座席位置の子機１１に制限して、発光の指示、音声再生の指示、又は、音声録音の指示を行うことができる。

　バッテリ３８は、子機１１の各構成部へ電力を電源部３９を通じて供給する。電源部３９は、電源スイッチ２３がオフ状態の場合には、バッテリ３８からの電力を各構成部に供給しない。電源スイッチ２３がオン状態の場合には、バッテリ３８からの電力をスピーカ２５、マイク２６、通信部３２、制御部３３、ＬＥＤドライバ３４、リーダ３７等に供給する。これにより、子機１１は動作可能な状態となる。

（親機１２の構成）
　図５は、親機１２の構成を例示する構成図である。図５において、親機１２には、接続外部機器として、パーソナルコンピュータ（ＰＣ）９１、コンソール端末９２、ペリフェラル（スポットライトなど）９３が接続される。

　親機１２は、制御部６１、通信部６２、アンテナ６３、表示部６４、ＵＳＢ端子６７、変換ＩＣ６８、ＤＭＸ入力端子６９、ＤＭＸ出力端子７０、極性変換ＳＷ７１、変換ＩＣ７２を有する。

　制御部６１は、ＰＣ９１又はコンソール端末９２からの信号に基づいて、例えば、子機１１に対して送信する信号（指示等）を通信部６２に供給する。制御部６１の子機１１への指示内容としては、発光の指示、音声再生の指示、音声録音の指示などがある。

　通信部６２は、Bluetooth（登録商標）や無線LAN等の所定の無線通信規格に準拠した通信により子機１１（通信部３２）との間でアンテナ６３を介して各種信号（各種指示や各種データ）を送受信する。アンテナ６３は、子機１１からの信号を受信し、子機１１への信号を送信する。通信部６２は、子機１１から取得した信号を制御部６１に供給する。通信部６２は、制御部６１から供給される子機１１への各種信号をアンテナ６３を介して子機１１に送信する。

　表示部６４は、制御部６１からの指示に基づいて各種情報を表示する。

　ＵＳＢ端子６７には、ＰＣ９１が接続される。ＰＣ９１は、ユーザの操作などに応じて、ＰＣ９１のアプリケーションにより子機１１の発光、音声再生、及び、音声録音等を指示する信号を親機１２に送信する。ＰＣ９１からＵＳＢ端子６７を介して入力された信号は、変換ＩＣ６８にてＵＡＲＴに変換され、制御部６１へ送られる。制御部６１は、ＰＣ９１からの指示に従って、子機１１の発光、音声再生、及び、音声録音を指示する信号を通信部６２に供給し、子機１１に送信する。

　ＤＭＸ入力端子６９には、コンソール端末９２が接続される。コンソール端末９２は、ユーザの操作により、子機１１の発光、音声再生、及び、音声録音等を指示する信号を親機１２に送信する。コンソール端末９２からの信号には、親機１２に接続されたペリフェラル９３に対して所定動作を指示する信号も含まれる。コンソール端末９２からの信号は、親機１２のＤＭＸ入力端子６９に入力される。ＤＭＸ入力端子６９に入力された信号は、極性変換ＳＷ７１から変換ＩＣ７２に送られ、変換ＩＣ７２にてシリアルデータに変換されて、制御部６１へ送られる。コンソール端末９２からのペリフェラル９３への指示である信号は、ＤＭＸ出力端子７０へ送られ、ペリフェラル９３へ送られる。例えば、ペリフェラル９３がコンサート会場で使用されるスポットライトの場合、コンソール端末９２からの信号に基づいてスポットライトの角度が変更される。

　なお、ＰＣ９１及びコンソール端末９２では、発光、音声再生、及び、音声録音等のそれぞれの指示を与える子機１１を一部の座席番号の座席に対応した子機１１に制限することができる。その場合、親機１２の制御部６１は、上記のように、ID分けモードの信号によりＰＣ９１又はコンソール端末９２からの指示を子機１１に送信し、かつ、その指示を有効に受信させる子機１１のユーザID（座席番号）をID分け情報として子機１１に送信する。

＜本技術の概要＞
　図６は、本技術の概要について説明する図である。図６において、本技術が適用された会場演出システム１は、子機１１の発光に関する機能（発光機能）に加えて、声援録音機能、声援再生機能、及び、音声データ送信機能を有する。発光機能は、親機１２からの無線信号による制御等により、全ての子機１１若しくは一部の子機１１を同期させて、又は、子機１１ごとに、発光又は点滅させる機能である。コンサート会場における各子機１１の位置は、座席番号（ユーザID）により特定されるので、親機１２は、座席番号を指定して所定の位置の子機１１の発光のタイミングや色等を制御することができる。したがって、発光機能によれば、コンサート会場に光による文字や模様を描くなど、光による様々な演出を行うことができる。発光機能については、周知であるので詳細な説明を省略する（例えば、特許文献１（特開２０１３－１９１３５７号公報）参照）。本技術は、発光機能を有していない子機１１に対しても適用可能である。

　声援録音機能は、親機１２からの無線信号による制御等により、全ての子機１１若しくは一部の子機１１を同期させて、又は、子機１１ごとに、各ユーザの音声（声援）を録音する機能である。即ち、声援録音機能は、コンサートの観客である各ユーザの子機１１が、親機１２からの声援録音の開始を指示する信号（声援録音開始信号）を受信すると、マイク２６をオンにして、ユーザの声援の録音（記憶部３６への記録）を行う機能である。なお、コンサートの開始から終了まで、マイク２６を常にオンにしてユーザの声援を録音することも可能である。ただし、マイク２６を常にオンにすると、子機１１のバッテリの容量が不足し、コンサートの途中で子機１１が使用できなくなる不測の事態が生じ得る。録音した声援の音声データ（声援データ）を記憶するためのメモリ容量も増大する。コンサートの終了後等において録音した声援データをコンサート運営側のサーバ等に送信する際のデータ量も増大する。したがって、コンサート中において、観客の声援が生じると推定される声援期間のみでマイク２６にし、声援を録音することで、バッテリの消費、メモリ容量、及び、送信するデータ量の低減が図られている。

　声援再生機能は、親機１２からの無線信号による制御等により、全ての子機１１若しくは一部の子機１１を同期させて、又は、子機１１ごとに、各ユーザの声援を再生する機能である。即ち、声援再生機能は、各ユーザの子機１１が、親機１２からの声援再生の開始を指示する信号（声援再生開始信号）を受信すると、スピーカ２５をオンにして、記憶部３６に記憶された声援データの再生（放音）を行う機能である。この声援再生機能では、スピーカ２５が声援期間のみでオンになるので、バッテリの消費が低減される。なお、声援再生機能で再生する声援データは、記憶部３６に記憶された声援データに限らない。ネットワーク等の通信網を通じてリアルタイムに子機１１に送信されてくるユーザの声援データを再生してもよい。

　音声データ送信機能は、子機１１の記憶部３６に記憶されている声援データを親機１２、親機１２に接続されたＰＣ９１、又は、任意のサーバ（コンサート運営側のサーバ）に送信する機能である。

　これらの声援録音機能、声援再生機能、及び、音声データ送信機能は、コンサートの形態に応じて適宜利用される。なお、声援録音機能で各子機１１により録音される音声データ、声援再生機能で各子機１１により再生される音声データは、主に各子機１１を所有するユーザの声援の音声データであるので、声援データという。ただし、それらの声援データは、声援以外の音声を含んでいてもよい。

　コンサートの形態には、第１コンサート形態として、コンサート会場に観客を動員してコンサートを開催する一般的な形態（有観客コンサート）がある。第２コンサート形態として、コンサート会場に観客を動員せずにコンサートを開催する特殊な形態（無観客コンサート）がある。第３コンサート形態として、VR（仮想現実）又はAR（拡張現実）の技術により仮想空間のコンサート会場（仮想会場）でコンサートを開催する形態（バーチャルコンサート）がある。

　第１コンサート形態（有観客コンサート）では、会場演出システム１の声援録音機能により、コンサート中のユーザごとの声援を録音しておくことができる。各子機１１を所有するユーザに割り当てられた座席の座席番号は、電子タグ４４により各子機１１で取得されるので、座席番号を各子機１１（録音）の位置情報として利用することで、コンサート会場のどの位置で録音されたかが特定される。声援録音機能により各子機１１で録音された声援データは、コンサートの終了後などに、音声データ送信機能を用いることで、親機１２、親機１２に接続されたＰＣ９１、又は、インターネット等の通信網に接続されたサーバ（コンサート運営側のサーバ）に収集される。コンサートの演奏を記録した音声データ（映像データを伴う場合、又は、音声データのみの場合を含む）は、CD（Compact Disc）やDVD（Digital Versatile Disc）等の記録媒体で有償又は無償で頒布され、又は、インターネット等の通信網を通じて配信される場合がある。その場合に、演奏を記録したメインの音声データ（演奏データ）に対して、コンサートの雰囲気を演出するために特定の時間及び領域で発生した観客の声援データを混合するなどの編集が可能となる。このような声援録音機能の利用は、第１コンサート形態の場合に限らず、第２コンサート形態でも同様に可能である。ただし、第２コンサート形態では観客がいないので、声援録音機能で録音される声援データは、スピーカ２５から出力された音声データとなる。

　声援録音機能によれば、コンサートでの観客ごとの声援を個別に録音しておくことができる。コンサートを記録した音声データの編集等において演奏データと分けて観客の声援データを編集し、声援データを利用した様々な演出効果を図ることができるようになる。

　第２コンサート形態（無観客コンサート）では、無観客のコンサート会場の各座席に子機１１を配置してコンサートを開催することで、会場演出システム１の声援再生機能により、出演者に対して声援を送ることができる。声援再生機能により再生される声援データは、例えば、コンサートの開催前に事前に記憶部３６に記憶された声援データである。その声援データは、各座席のチケットを購入したユーザ（各座席を割り当てられたユーザ）の実際の声を記録したデータであってもよいし、複数種の既定の声援データの中からユーザにより選択された声援データであってもよい。ユーザの実際の声の声援データを用いる場合、ユーザは事前に自身の声の声援データを録音しておく。コンサートの開始前に、ユーザは、録音した声援データを各ユーザが所有するスマートフォン等の端末装置からインターネット等の通信網を利用してＰＣ９１等に送る。ＰＣ９１は、ユーザに割り当てられた座席の子機１１に対して、そのユーザからの声援データを親機１２を通じて送信し、記憶部３６に記憶させておく。声援データは、各ユーザに割り当てられた座席の子機１１にＰＣ９１や親機１２等を介さずに各ユーザが所有する端末装置から直接的に送信できるようにしてもよい。なお、声援再生機能により各子機１１で再生する声援データは、自宅等のユーザがコンサート中にリアルタイムに発した声援を検出して得られた声援データであってもよい。このような声援再生機能の利用は、第２コンサート形態の場合に限らず、第１コンサート形態でも同様に可能である。第１コンサート形態で声援再生機能を利用する場合には、ユーザが子機１１を実際に所持するので、声援再生機能により再生される声援データを、子機１１のマイク２６を使用して事前に録音してもよい。

　声援再生機能によれば、観客ごとの声援を、それぞれの観客に割り当てられた座席の位置から放音することができる。観客ごとの声援を親機１２からの制御によってコンサート会場のエリアごとに所定のタイミングで再生することもでき、観客ごとの声援を利用して様々な演出効果を図ることができる。無観客のコンサートにおいても、出演者は、あたかも観客が会場にいるかのような声援を受けることができる。コンサート会場にいないファンは、コンサートに参加しているような感覚を得ることができる。コンサートを記録した音声データの編集等において、演奏データと分けて声援再生機能で使用された観客の声援データを編集し、声援データを利用した様々な演出効果を図ることができるようになる。

　第３コンサート形態（バーチャルコンサート）では、仮想空間に生成された仮想のコンサート会場（仮想会場）の仮想の各座席（仮想座席）に実際の子機１１に対応した仮想の子機が配置される。即ち、仮想会場の各仮想座席に、実際の子機１１のスピーカ２５に対応する仮想のスピーカ（バーチャルスピーカ）や実際の子機１１のマイク２６に対応する仮想のマイクが配置される。

　第３コンサート形態での声援再生機能によれば、仮想会場で演奏する出演者は、リアリティのある仮想の声援（バーチャルサウンド）をイヤーモニタ等で聴くことができる。各仮想座席の観客も同様に座席位置に応じた演奏音及び声援をヘッドフォン等で聴くことができる。このような声援再生機能の利用は、第２コンサート形態において、各座席を割り当てられたユーザがリアリティのあるバーチャルサウンドを自宅等で聴けるようにする場合にも同様に可能である。

　第３コンサート形態での声援録音機能によれば、仮想会場の各仮想座席を割り当てられた各観客（各ユーザ）の仮想会場における声援データを個別に録音することができる。コンサートを記録した音声データの編集等において演奏データと分けて観客の声援データを編集し、声援データを利用した様々な演出効果を図ることができるようになる。なお、第３コンサート形態での声援録音機能により録音される各仮想座席の仮想のマイクにより録音される声援データは、各仮想座席の各バーチャルスピーカで再生される声援データと同一であるとする場合であってもよい。

＜会場演出システム１の声援録音機能＞
　会場演出システム１の声援録音機能について、第１コンサート形態の場合を例に説明する。図７は、会場演出システム１の声援録音機能を説明する図である。

　図７のＡは、コンサートで演奏される曲の音声データ（演奏データ）を記録（録音）する場合にその演奏データに付加されるタイムコード（LTC:Longitudinal Time-Code）の時：分：秒を表す。なお、演奏データは、不図示の装置により出演者が使用するマイク、楽器の出力信号等から取得され得る。演奏データは、特定の装置で取得される場合に限定されない。

　図７のＢは、所定の座席の子機１１でのマイク２６による録音のタイミングを表す。図７のＣは、親機１２から子機１１に送信される声援録音開始信号のタイミングを表す。

　出演者等のコンサートの運営側は、コンサートで演奏される各曲について、声援（コール＆レスポンス）のタイミングと言葉とを事前に決めて、観客に通知しておく場合がある。図７のＡにおいて、時刻Ｔ１は、所定の曲が開始されたときのタイムコードであり、曲の開始時と終了時ではコールがなくても一般的に声援が行われる。それに対して時刻Ｔ１から所定時間が経過した時刻Ｔ２は、曲に応じた声援の開始タイミングである。時刻Ｔ２のタイミングでの声援は、出演者のコールに対するレスポンスである。

　なお、曲中において複数回の連続なコールに対して同数のレスポンス（所定時間間隔以下でのレスポンス）が行われる場合、１回分の録音期間でのレスポンスとし、時刻Ｔ２の開始タイミングでの声援を第１レスポンスとする。曲中での声援（レスポンス）の開始タイミング、コールの数（レスポンスの数）、及び、レスポンスの言葉は、観客に事前に通知されている。

　時刻Ｔ２から所定時間が経過した時刻Ｔ３も、曲に応じた声援の開始タイミングである。時刻Ｔ３の開始タイミングでの声援を第２レスポンスとする。第２レスポンスの開始タイミング、コールの数（レスポンスの数）、及び、レスポンスの言葉も、観客に事前に通知されている。ただし、声援のタイミング、コールの数、及び、レスポンスの言葉が観客に通知されていない場合であってもよく、曲の間奏の時刻や歌詞に基づいて、又は、出演者が行うコールのタイミング及び数等に基づいて、声援が行われると推定（予測）されるタイミングをコンサート運営側が決めてもよい。観客の声援が生じると推定される期間を声援期間ともいうこととする。なお、図７では、時刻Ｔ３の開始タイミングでの声援よりも後の声援のタイミングについては省略する。

　親機１２（制御部６１）は、声援（声援期間）の開始タイミングである時刻Ｔ１、Ｔ２、及び、Ｔ３のそれぞれに対して予め決められた所定時間前（例えば６秒前）の時刻ｔ１、ｔ２、又は、ｔ３になると、子機１１に対して声援の録音の開始を指示する声援録音開始信号を送信する。声援録音開始信号は、録音を開始する時刻（録音開始時時刻）を指定する信号であり、例えば、時刻ｔ１、ｔ２、及び、ｔ３のそれぞれに対して５秒後の時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓを録音開始時刻として指定する。

　ここで、曲が開始される時刻Ｔ１は、コンサートの進行管理者等が管理している。親機１２に接続されたＰＣ９１又はコンソール端末９２（以下、コンソール端末９２とする）は、その情報を取得（操作者が入力）することで、時刻Ｔ１を把握する。コンソール端末９２は、その時刻Ｔ１を基準にして、声援（声援期間）の開始タイミングである時刻Ｔ１、Ｔ２、及び、Ｔ３を把握することができる。コンソール端末９２には、演奏されている曲の曲名と、声援の開始タイミングである時刻Ｔ１、Ｔ２、及び、Ｔ３に対して、予め決められた所定時間前（例えば６秒前）の時刻ｔ１、ｔ２、及び、ｔ３と、時刻Ｔ１、Ｔ２、及び、Ｔ３のそれぞれの開始タイミングでの声援に対して録音を開始する時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓ、並びに、録音時間の長さ（録音継続時間）と、時刻Ｔ１、Ｔ２、及び、Ｔ３のそれぞれの開始タイミングでの声援（コール）の数（連続的なコールの数）とが事前に設定されている。

　コンソール端末９２は、時刻ｔ１、ｔ２、又は、ｔ３になると親機１２（制御部６１）に対して、声援録音開始信号の子機１１への送信を指示する。これにより、図７のＣにおいて、時刻ｔ１、ｔ２、及び、ｔ３のタイミングで親機１２から子機１１に声援録音開始信号が送信される。なお、時刻ｔ１、ｔ２、又は、ｔ３になったときに、コンソール端末９２の操作者（運営側のスタッフ等）がマニュアル操作により、親機１２に対して、声援録音開始信号の子機１１への送信を指示してもよい。

　図７のＢにおいて、子機１１（制御部３３）は、時刻ｔ１、ｔ２、及び、ｔ３のタイミングで声援録音開始信号を親機１２から受信する。子機１１は、声援録音開信号により指定された録音開始の時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓになると、マイク２６をオン（電力消費状態）にし、マイク２６による声援データの受信を開始する。即ち、子機１１は、声援の開始タイミングである時刻Ｔ１、Ｔ２、及び、Ｔ３に対して１秒前の時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓから録音を開始する。

　親機１２から子機１１への声援録音開始信号には、録音時間の長さ（録音継続時間）の指定（指示）も含まれており、子機１１（制御部３３）は、時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓで開始した録音のそれぞれに対して、指定された録音継続時間が経過した時刻ｔ１ｅ、ｔ２ｅ、及び、ｔ３ｅのタイミングでマイク２６をオフ（非電力消費状態）にし、マイク２６による声援データの受信を停止する。

　子機１１（制御部３３）は、時刻ｔ１ｓ乃至ｔ１ｅの声援期間、時刻ｔ２ｓ乃至ｔ２ｅの声援期間、及び、時刻ｔ３ｓ乃至ｔ３ｅの声援期間のそれぞれで取得した声援データを個別の声援データのファイルとして記憶部３６に保存する。このとき、子機１１（制御部３３）は、各声援データに図８の情報を含むヘッダーファイル（ヘッダー情報）を付加する。ヘッダーファイルは、声援を録音した際における、曲名、LCT記録（タイムコード）、コールの数、ユーザID（座席番号）、及び、子機１１の振動数に関する情報（振動に関する振動情報）を含む。なお、子機１１には不図示の振動センサが搭載され、声援録音時の子機１１の振動数が検出される。声援録音時の子機１１の振動数が高い場合には、録音されたときの信頼性が低く、その声援データは利用しない等の判定に利用できる。ヘッダー情報として、曲名、LCT記録（タイムコード）、コールの数、ユーザID（座席番号）、及び、子機１１の振動数に関する情報のうちのいずれか１以上を声援データに付加する場合であってもよく、例えば、タイムコードと座席番号のみを付加する場合であってもよい。

　ここで、出演者がコンサート会場の特定のエリアに対してのみコール＆レスポンスを要求する場合がある。このような場合には、親機１２は、上述のID分けモードの信号により、その特定のエリアの座席番号（ユーザID）のみをID分け情報として指定して声援録音開始信号を子機１１に送信する。これにより、指定された座席番号の子機１１のみで声援の録音が実行される。

　図９は、会場演出システム１において声援録音機能の処理を実施するための声援録音装置としての構成例を示したブロック図である。なお、第１コンサート形態（有観客コンサート）での声援録音機能の使用を想定して図９の声援録音装置の構成及び処理を説明する。

　図９の声援録音装置１０１は、会場演出システム１の１台の構成要素により構築され、声援録音機能の処理を実施する。声援録音装置１０１は、マイク２６、声援録音指示部１１１、時刻指定部１１２、曲情報指定部１１３、会場座席指定部１１４、振動センサ１１５、音声録音処理部１１６、及び、声援データ記憶部１１７を有する。

　マイク２６は、図２及び図３の子機１１（所定の１台の子機１１）におけるマイク２６を表す。マイク２６により検出（受信）された音声信号（ユーザの声援）は、音声録音処理部１１６に供給される。

　声援録音指示部１１１は、図５（図１）の親機１２と、親機１２に接続されたＰＣ９１又はコンソール端末９２との構成要素により構築され、その処理が、親機１２とＰＣ９１又はコンソール端末９２とで実施される処理部である。声援録音指示部１１１は、子機１１の構成要素により構築される音声録音処理部１１６に対して、マイク２６により検出される音声（ユーザの声援）の録音を指示する声援録音開始信号を供給する。声援録音指示部１１１から音声録音処理部１１６への声援録音開始信号は、子機１１と親機１２との間の無線通信を介して伝送される。

　声援録音開始信号は、コンサート中において観客の声援が生じる声援期間のそれぞれに対して声援録音指示部１１１から音声録音処理部１１６に供給される。声援期間は、例えば、コンサートが開始された時から第１曲目が開始された後の所定時間が経過するまでの期間、各曲の曲中等においてコール＆レスポンスが行われる期間、各曲が終了する所定時間前から次の曲が開始された後の所定時間が経過するまでの期間、最後の曲が終了する所定時間前からコンサートが終了した時までの期間、ＭＣ（Master of Ceremonies）が行われる期間等であり、コンサートにおけるセットリスト（曲順等）に基づいて事前に推定されている。

　声援録音指示部１１１が音声録音処理部１１６に対して声援録音開始信号を送信するタイミング（時刻）は、実際に録音を開始させる録音開始時刻に対して所定時間前（録音待機時間前）となる時刻である。録音待機時間の長さは、数秒であり、例えば５秒である。

　声援録音指示部１１１から音声録音処理部１１６への声援録音開始信号は、ＰＣ９１又はコンソール端末９２の操作者（コンサートの進行管理者・技術スタッフ等）がコンサートの進行状況に応じて声援期間ごとに所定の操作を行ったときに供給される場合であってよいし、操作者が曲の開始時等に所定の操作を行った時刻を基準に事前に設定された時間が経過したときの時刻に自動的に供給される場合であってもよい。各声援期間に対する声援録音指示部１１１から音声録音処理部１１６への声援録音開始信号は、どのような方法で供給される場合であってもよい。

　声援録音開始信号は、具体的には、録音を開始する時刻である録音開始時刻の指定と、録音を継続する時間である録音継続時間の指定とを含む。声援録音指示部１１１は、録音開始時刻として、対象の声援期間の開始時刻の例えば１秒前の時刻を指定する。声援録音指示部１１１は、録音継続時間として、録音開始時刻から、対象の声援期間の終了時刻までの時間長さ以上の時間を指定する。

　なお、声援録音指示部１１１は、声援録音開始信号により録音開始時刻と録音継続時間とを指定する代わりに、録音開始時刻と録音終了時刻とを指定してもよく、録音を実行する期間を特定する指定であればよい。

　音声録音処理部１１６での録音は声援録音指示部１１１からの声援録音開始信号により指定された録音開始時刻から開始されるので、声援録音開始信号は、録音開始時刻よりも前に音声録音処理部１１６に与えられれば良い。声援録音指示部１１１が各声援期間の開始時刻の１秒前に対して録音待機時間である５秒前に声援録音開始信号を送信することで、親機１２から子機１１への無線通信により音声録音処理部１１６が声援録音開始信号を受信する時刻が遅延した場合でも、各声援期間での録音が適切に行われる。録音待機時間は、５秒以外であってもよいし、各声援期間に対して異なった時間であってもよい。

　時刻指定部１１２は、子機１１に内蔵されたタイマー（内部時計）である。時刻指定部１１２は、時刻を計測し、音声録音処理部１１６に供給する。時刻は、コンサート中における任意の時点を特定する時間情報である。時刻は、親機１２においてもタイマー（内部時計）により計測される。時刻指定部１１２は、任意の時点で親機１２のタイマーと同一時刻を出力するように、コンサートの開始前等において親機１２のタイマーと同期される。

　曲情報指定部１１３は、図５（図１）の親機１２と、親機１２に接続されたＰＣ９１又はコンソール端末９２との構成要素により構築され、その処理が、親機１２とＰＣ９１又はコンソール端末９２とで実施される処理部である。曲情報指定部１１３は、音声録音処理部１１６に対して声援録音指示部１１１が所定の声援期間の声援の録音を指示する際に、その対象の声援期間に演奏されている曲の曲情報を音声録音処理部１１６に対して供給する。曲情報には、曲名と、声援（コール）の回数とが含まれる。声援（コール）の回数は、曲の開始時、又は、コンサートの開始時からの各声援期間に順序を付したときの対象の声援期間の順序（順番）を表す。即ち、声援の回数は、曲の開始時、又は、コンサートの開始時から数えて対象の声援期間が何回目であるかを表す。声援期間は、出演者のコールに対してレスポンスが行われる期間に限定してもよく、その場合には、声援の回数は、コールの回数としてもよい。曲情報は、声援録音指示部１１１からの声援録音開始信号に含まれるようにしてもよい。

　会場座席指定部１１４は、図３の子機１１の構成要素により構築される処理部であり、その処理が主に子機１１の制御部３３及びリーダ３７により実施される処理部である。会場座席指定部１１４は、コンサート会場において、自己の子機１１を使用するユーザに割り当てられた座席の座席番号をコンサート前等に事前に取得する。会場座席指定部１１４は、事前に取得した座席番号を音声録音処理部１１６に供給する。

　座席番号は、コンサート会場の各座席に設置された電子タグ４４（図４参照）に記憶されている。ユーザは、自己に割り当てられた座席の電子タグ４４に自己が所持する子機１１のリーダ３７をかざす。これにより、リーダ３７により電子タグ４４に記録された座席番号が読み取られる。会場座席指定部１１４は、リーダ３７により読み取られた座席番号を、自己の子機１１を使用するユーザに割り当てられた座席番号（ユーザID）として取得（記憶）する。

　なお、会場座席指定部１１４は、ユーザに割り当てられた座席番号を、電子タグ４４から取得する場合に限らない。例えば、会場座席指定部１１４は、子機１１に設けられた入力部からユーザによりマニュアル入力された座席番号を取得するようにしてもよい。会場座席指定部１１４は、ユーザが所有するスマートフォン等の端末装置に入力されたユーザの座席番号を無線通信等を通じて取得してもよい。事前に座席番号の情報が記憶された子機１１を、その座席番号の座席を割り当てられたユーザに与えるようにしてもよい。

　座席番号は、コンサート会場における各子機１１の位置（又はエリア）を特定する位置情報であり、座席番号の代わりに、コンサート会場の位置（又はエリア）を特定する他の情報が子機１１の位置情報として用いられる場合であってもよい。例えば、コンサート会場が複数のエリアに分割され、エリアごとに固有のエリア番号が付される。ユーザには、コンサート会場において視聴するエリアが決められ、視聴するエリアのエリア番号が与えられる。各ユーザには、エリア番号と共に、少なくとも同一エリア内で視聴するユーザに対しては重複しない固有番号が与えられる。この場合に、各ユーザが所持する子機１１は、ユーザのエリア番号と固有番号との組合せを位置情報として取得する。子機１１における位置情報の取得は、同様に位置情報を記録した電子タグを各ユーザに配布して、座席番号の場合と同様にリーダ３７により電子タグの位置情報を読み取るようにしてもよいし、ユーザがマニュアル入力してもよい。その他、子機１１の位置情報として、GPS（Global Positioning System）技術により得られた位置情報が用いられる場合、コンサート会場の複数の位置に設置された無線LANアクセスポイント等の無線ノードと子機１１との間で伝搬される無線電波を利用して得られた位置情報が用いられる場合等であってもよい。

　振動センサ１１５は、子機１１に搭載された例えば加速度センサを含む。振動センサ１１５は、音声録音処理部１１６が声援の録音を実行している期間において、子機１１の振動数を検出し、その期間での振動数の例えば、平均値又は最大値を音声録音処理部１１６に供給する。

　音声録音処理部１１６は、図３の子機１１の構成要素により構築される処理部であり、その処理が主に子機１１の制御部３３により実施される処理部である。音声録音処理部１１６は、声援録音指示部１１１からの声援録音開始信号に従って録音処理を実行する。なお、音声録音処理部１１６は、親機１２の構成要素により構築される場合であってもよい。

　即ち、音声録音処理部１１６は、時刻指定部１１２から供給される時刻が、声援録音開始信号により指定された録音開始時刻になると、マイク２６をオンにし（マイク２６に電力を供給し）、録音処理を開始する。音声録音処理部１１６は、時刻指定部１１２から供給される時刻が、録音開始時刻に対して声援録音開始信号により指定された録音継続時間が経過した時刻（録音終了時刻）になると、録音処理を停止（終了）し、マイク２６をオフにする。

　録音処理では、音声録音処理部１１６は、マイク２６により検出（受信）された音声信号を所定のサンプリング周期でアナログ信号からデジタル信号に変換して声援データとして取得する。音声録音処理部１１６は、録音終了時刻になると、マイク２６からの声援データの取得を終了し、録音開始時刻から録音終了時刻までに取得した声援データを例えば１つのファイルとして声援データ記憶部１１７に保存する。音声録音処理部１１６は、声援データを声援データ記憶部１１７に保存する際に、図８に示したヘッダーファイル（ヘッダー情報）を声援データに付加する。ヘッダー情報に含まれる曲名は、曲情報指定部１１３から供給される。ヘッダー情報の曲名は、声援データの録音が実行されていた際に演奏されていた曲の曲名を表す。ヘッダー情報に含まれるLTC記録（タイムコード）は、時刻指定部１１２から供給される。ヘッダー情報のタイムコードは、例えば、音声録音処理部１１６が録音処理を開始した録音開始時刻（録音された時刻に関する時刻情報）を表す。なお、ヘッダー情報のタイムコードと併せて、又は、タイムコードの代わりに、曲情報指定部１１３から供給される声援の回数をヘッダー情報に含めてもよい。ヘッダー情報に含まれる座席番号は、会場座席指定部１１４から供給される。ヘッダー情報の座席番号は、声援データが録音された座席位置（録音された位置に関する位置情報）を表す。ヘッダー情報に含まれる子機の振動数は、振動センサ１１５から供給される。ヘッダー情報の振動数は、例えば、声援データの録音を実行していた期間における子機１１の振動数の平均値、又は、最大値であり、録音された音の信頼度を表す。即ち、振動数が大きい程、ユーザが子機１１を激しく動かしていた可能性が高いので、ユーザの声援が適切に記録されていない声援データの可能性が高い。

　ヘッダー情報は、１つの声援期間における声援データの先頭に付加されていてもよいし、所定時間おきに付加されていてもよい。ヘッダー情報は、声援データに挿入されていてもよいし、声援データとは別のデータとして声援データに対応付けられていてもよい。特に、タイムコード（タイムスタンプ）は、声援データに対して所定時間おきに付加されていてもよい。

　なお、音声録音処理部１１６は、録音処理により取得した声援データを所定のフォーマットで符号化（圧縮）して声援データ記憶部１１７に保存してもよい。

　声援データ記憶部１１７は、図３の子機１１の構成要素により構築される処理部であり、子機１１の記憶部３６に含まれる。声援データ記憶部１１７は、音声録音処理部１１６の録音処理により取得された声援データを保存する。

　以上の声援録音装置１０１は、複数の観客（ユーザ）が所有する子機１１ごとに構築され、観客ごとの声援データが個別に録音される。声援録音指示部１１１が、ID分けモードにより、一部の座席番号を指定してマイク２６による声援データの録音を指示することで、それらの指定された一部の座席番号をユーザIDとする子機１１のみでの声援データの録音を同期させて行うことができる。

＜声援録音機能の処理手順＞
　図１０は、声援録音機能利用時における処理手順を例示したフローチャートである。

　ステップＳ１では、各ユーザは、子機１１の電源スイッチ２３をオンにする。処理はステップＳ１からステップＳ２に進む。ステップＳ２では、各ユーザが指定された座席に設置されている電子タグ４４を子機１１でタッチしてNFCにより電子タグ４４に記録されている座席番号（座席情報）を子機１１に取り込む。これにより、子機１１は、電子タグ４４から取り込んだ座席番号をユーザIDとして親機１２に送信し、親機１２とペアリングする。処理はステップＳ２からステップＳ３に進む。

　ステップＳ３では、子機１１の制御部３３は、内蔵のタイマー（内部時計）の時刻を親機１２と同期させて、親機１２と時刻を合わせる。処理はステップＳ３からステップＳ４に進む。ステップＳ４では、子機１１は、親機１２から録音開始時刻の指示（声援録音開始信号）があったか否かを判定する。

　ステップＳ４において、録音開始時刻の指示がないと判定された場合には、処理はステップＳ６に進む。ステップＳ４において、録音開始時刻の指示があったと判定された場合には、処理はステップＳ５に進む。

　ステップＳ５では、子機１１は、親機１２から指示された録音開示時刻を設定する。処理はステップＳ５からステップＳ６に進む。ステップＳ６では、子機１１は、ステップＳ５で設定した録音開始時刻になったか否かを判定する。

　ステップＳ６において、録音開始時刻になっていないと判定された場合、処理はステップＳ４に戻り、ステップＳ４から繰り返す。ステップＳ６において、録音開始時刻になったと判定された場合には、処理はステップＳ７に進む。

　ステップＳ７では、子機１１は、親機１２から声援録音開始信号により指定された録音継続時間が経過するまで録音を行う。ステップＳ７が終了すると、処理はステップＳ４に戻り、ステップＳ４から繰り返す。

　以上の声援録音機能によれば、コンサートでの観客ごとの声援を個別に録音しておくことができる。コンサートを記録した音声データの編集等において演奏データと分けて観客の声援データを編集し、声援データを利用した様々な演出効果を図ることができるようになる。声援録音機能は、第１コンサート形態の場合に限らず、第２コンサート形態や第３コンサート形態においても同様に利用可能である。

＜会場演出システム１の声援再生機能＞
　会場演出システム１の声援録音機能について、第２コンサート形態（無観客コンサート）の場合を例に説明する。

　図１１は、会場演出システム１の声援再生機能を説明する図である。

　図１１のＡは、コンサートで演奏される曲の音声データ（演奏データ）を記録（録音）する場合にその演奏データに付加されるタイムコード（LTC:Longitudinal Time-Code）の時：分：秒を表す。なお、演奏データは、不図示の装置により出演者が使用するマイク、楽器の出力信号等から取得され得る。演奏データは、特定の装置で取得される場合に限定されない。

　図１１のＢは、所定の座席に配置された子機１１でのスピーカ２５による声援の再生のタイミングを表す。なお、第２コンサート形態は無観客のコンサート会場での演奏であるので観客は存在しない。ただし、コンサート会場の各座席には例えばオンラインで配信されるコンサートの映像及び音声を視聴するユーザが観客として割り当てられている。各座席に配置された子機１１の記憶部３６には、各座席を割り当てられたユーザが事前に録音した声援データが記憶されている。記憶部３６に記憶された声援データには、図８で示したヘッダーファイルが付加されており、各声援データを再生する曲の曲名とタイムコード（時刻）等が決められている。

　図１１のＣは、親機１２から子機１１に送信される声援再生開始信号のタイミングを表す。

　図１１のＡにおいて、時刻Ｔ１は、所定の曲が開始されたときのタイムコードであり、曲の開始時と終了時ではコールがなくても一般的に声援が行われる。それに対して時刻Ｔ１から所定時間が経過した時刻Ｔ２は、曲に応じた声援の開始タイミングである。時刻Ｔ２のタイミングでの声援は、出演者のコールに対するレスポンスである。

　なお、時刻Ｔ２の開始タイミングでの声援を第１レスポンスとする。曲中での声援（レスポンス）の開始タイミング、コールの数（レスポンスの数）、及び、レスポンスの言葉は、観客に事前に通知されている。

　時刻Ｔ２から所定時間が経過した時刻Ｔ３も、曲に応じた声援の開始タイミングである。時刻Ｔ３の開始タイミングでの声援を第２レスポンスとする。第２レスポンスの開始タイミング、コールの数（レスポンスの数）、及び、レスポンスの言葉も、観客に事前に通知されている。ただし、声援のタイミング、コールの数、及び、レスポンスの言葉が観客に通知されていない場合であってもよく、曲の間奏や歌詞に基づいて、又は、出演者が行うコールのタイミング及び数等に基づいて、声援が行われると推定（予測）されるタイミングを開催者側が決めてもよい。なお、図１１では、時刻Ｔ３の開始タイミングでの声援よりも後の声援のタイミングについては省略する。

　親機１２（制御部３３）は、声援（声援期間）の開始タイミングである時刻Ｔ１、Ｔ２、及び、Ｔ３のそれぞれに対して予め決められた所定時間前（例えば６秒前）の時刻ｔ１、ｔ２、又は、ｔ３になると、子機１１に対して声援の再生の開始を指示する声援再生開始信号を送信する。声援再生開始信号は再生を開始する時刻を指定する信号であり、例えば、時刻ｔ１、ｔ２、及び、ｔ３のそれぞれに対して５秒後の時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓを再生開始時刻として指示する。

　ここで、曲が開始される時刻Ｔ１は、コンサートの進行管理者等が管理している。親機１２に接続されたコンソール端末９２は、その情報を取得（操作者が入力）することで、時刻Ｔ１を把握する。コンソール端末９２は、その時刻Ｔ１を基準にして、声援の開始タイミングである時刻Ｔ１、Ｔ２、及び、Ｔ３を把握することができる。コンソール端末９２には、演奏されている曲の曲名と、声援（声援期間）の開始タイミングである時刻Ｔ１、Ｔ２、及び、Ｔ３に対して、予め決められた所定時間前（例えば６秒前）の時刻ｔ１、ｔ２、及び、ｔ３と、時刻Ｔ１、Ｔ２、及び、Ｔ３のそれぞれの開始タイミングでの声援に対して再生を開始する時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓ、並びに、再生時間の長さ（再生継続時間）と、時刻Ｔ１、Ｔ２、及び、Ｔ３のそれぞれの開始タイミングでの声援（コール）の数（連続的なコールの数）とが事前に設定されている。

　コンソール端末９２は、時刻ｔ１、ｔ２、又は、ｔ３になると親機１２（制御部６１）に対して、声援再生開始信号の子機１１への送信を指示する。これにより、図１１のＣにおいて、時刻ｔ１、ｔ２、及び、ｔ３のタイミングで親機１２から子機１１に声援再生開始信号が送信される。なお、時刻ｔ１、ｔ２、又は、ｔ３になったときに、コンソール端末９２の操作者（運営側のスタッフ等）がマニュアル操作により、親機１２に対して、声援再生開始信号の子機１１への送信を指示してもよい。

　図１１のＢにおいて、子機１１（制御部３３）は、時刻ｔ１、ｔ２、及び、ｔ３のタイミングで声援生成開始信号を親機１２から受信する。子機１１は、声援再生開始信号により指定された再生開始の時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓになると、スピーカ２５をオン（電力消費状態）にし、スピーカ２５による声援データの再生を開始する。即ち、子機１１は、声援の開始タイミングである時刻Ｔ１、Ｔ２、及び、Ｔ３に対して１秒前の時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓから再生を開始する。子機１１（制御部３３）は、スピーカ２５で再生する声援データをヘッダーファイルの曲名とタイムコードとを参照して記憶部３６から読み出す。例えば、時刻ｔ２ｓから再生する声援データは、コンサート会場で現在演奏されている曲の曲名と、ヘッダーファイルの曲名とが一致する声援データである。これに加えて、曲の開始時刻Ｔ１から時刻ｔ２ｓまでの経過時間と、ヘッダーファイルのタイムコードにより算出される曲の開始時刻からの経過時間とが一致又は近似する声援データが記憶部３６から読み出されたスピーカ２５により再生（放音）される。なお、記憶部３６に記憶されている同一曲の声援データのうち、タイムコードが示す時刻が古い順に声援データを読み出して再生してもよい。

　親機１２から子機１１への声援再生開始信号には、再生時間の長さ（再生継続時間）の指定（指示）も含まれており、子機１１（制御部３３）は、時刻ｔ１ｓ、ｔ２ｓ、及び、ｔ３ｓで開始した再生のそれぞれに対して、指定された再生継続時間が経過した時刻ｔ１ｅ、ｔ２ｅ、及び、ｔ３ｅのタイミングでスピーカ２５をオフ（非電力消費状態）にし、スピーカ２５による声援データの再生を停止する。

　ここで、出演者がコンサート会場の特定のエリアに対してのみコール＆レスポンスを要求する場合がある。このような場合には、親機１２は、上述のID分けモードの信号により、その特定のエリアの座席番号（ユーザID）のみをID分け情報として指定して声援再生開始信号を子機１１に送信する。これにより、指定された座席番号の子機１１のみで声援の再生が実行される。

　図１２は、会場演出システム１において声援再生機能の処理を実施するための声援再生装置としての構成を例示したブロック図である。なお、第２コンサート形態での声援再生機能の使用を想定して図１２の声援再生装置の構成及び処理を説明する。

　図１２の声援再生装置１３１は、会場演出システム１の構成要素により構築され、声援再生機能の処理を実施する。声援再生装置１３１は、スピーカ２５、声援再生指示部１４１、時刻指定部１４２、声援データ記憶部１４３、及び、音声再生処理部１４４を有する。

　スピーカ２５は、図２及び図３の子機１１（所定の１台の子機１１）におけるスピーカ２５を表す。スピーカ２５は、音声再生処理部１４４から供給された音声信号を再生（放音）する。

　声援再生指示部１４１は、図５（図１）の親機１２と、親機１２に接続されたＰＣ９１又はコンソール端末９２との構成要素により構築され、その処理が、親機１２とＰＣ９１又はコンソール端末９２とで実施される処理部である。声援再生指示部１４１は、子機１１の構成要素により構築される音声再生処理部１４４に対して、スピーカ２５による音声（ユーザの声援）の再生を指示する声援再生開始信号を供給する。声援再生指示部１４１から音声再生処理部１４４への声援再生開始信号は、子機１１と親機１２との間の無線通信を介して伝送される。

　声援再生開始信号は、コンサート中において観客の声援が生じる声援期間のそれぞれに対して声援再生指示部１４１から音声再生処理部１４４に供給される。声援期間は、上述した通りであるので説明を省略する。

　声援再生指示部１４１が音声再生処理部１４４に対して声援再生開始信号を送信するタイミング（時刻）は、実際に再生を開始させる再生開始時刻に対して所定時間前（再生待機時間前）となる時刻である。再生待機時間の長さは、数秒であり、例えば５秒である。

　声援再生指示部１４１から音声再生処理部１４４への声援再生開始信号は、ＰＣ９１又はコンソール端末９２の操作者がコンサートの進行状況に応じて声援期間ごとに所定の操作を行ったときに供給される場合であってよいし、操作者が曲の開始時等に所定の操作を行った時刻を基準に事前に設定された時間が経過したときの時刻に自動的に供給される場合であってもよい。各声援期間に対する声援再生指示部１４１から音声再生処理部１４４への声援再生開始信号は、どのような方法で供給される場合であってもよい。

　声援再生開始信号は、具体的には、再生を開始する時刻である再生開始時刻の指定と、再生を継続する時間である再生継続時間の指定とを含む。声援再生指示部１４１は、再生開始時刻として、対象の声援期間の開始時刻の例えば１秒前の時刻を指定する。声援再生指示部１４１は、再生継続時間として、再生開始時刻から、対象の声援期間の終了時刻までの時間長さ以上の時間を指定する。

　なお、声援再生指示部１４１は、声援再生開始信号により再生開始時刻と再生継続時間とを指定する代わりに、再生開始時刻と再生終了時刻とを指定してもよく、再生を実行する期間を特定する指定であればよい。

　音声再生処理部１４４での再生は声援再生指示部１４１からの声援再生開始信号により指定された再生開始時刻から開始されるので、声援再生開始信号は、再生開始時刻よりも前に音声再生処理部１４４に与えられれば良い。声援再生指示部１４１が各声援期間の開始時刻の１秒前に対して再生待機時間である５秒前に声援再生開始信号を送信することで、親機１２から子機１１への無線通信により音声再生処理部１４４が音声再生指示を受信する時刻が遅延した場合でも、各声援期間での再生が適切に行われる。再生待機時間は、５秒以外であってもよいし、各声援期間に対して異なった時間であってもよい。

　時刻指定部１４２は、子機１１に内蔵されたタイマー（内部時計）である。時刻指定部１４２は、時刻を計測し、音声再生処理部１４４に供給する。時刻は、コンサート中における任意の時点を特定する時間情報である。時刻は、親機１２においてもタイマー（内部時計）により計測される。時刻指定部１４２は、任意の時点で親機１２のタイマーと同一時刻を出力するように、コンサートの開始前等において親機１２のタイマーと同期される。

　声援データ記憶部１４３は、図３の子機１１の構成要素により構築される処理部であり、子機１１の記憶部３６に含まれる。声援データ記憶部１４３は、音声再生処理部１４４の再生処理によりスピーカ２５で再生（放音）される声援データを事前に保存する。

　声援データ記憶部１４３に保存される声援データは、コンサートの開始前等に事前にユーザが自身の声で録音した声援データであってもよいし、人工的に生成された声での既定の声援データ、又は、ユーザとは関係のない人物の声での既定の声援データであってもよい。ユーザが自身の声で録音した声援データを声援データ記憶部１４３に保存する場合、例えば、ユーザは、自身が所有するスマートフォン等の端末装置（録音装置）で、所定のアプリケーション（ソフトウェア）を実行させる。ユーザは、アプリケーションの案内に従って、各声援期間での声援を録音して各声援期間での声援データを生成する。各声援期間での声援データには、それぞれ図８に示したヘッダー情報が付加される。なお、ヘッダー情報の曲名は、声援データを再生する際に演奏される曲の曲名を表す。ヘッダー情報のLTC記録（タイムコード）は、例えば、声援データの再生を開始する再生開始時刻を表す。実際に声援データの再生が開始される再生開始時刻は、コンサートの進行状況に応じて変動するが、コンサートの計画（タイムテーブル）に従った声援データの再生開始時刻がヘッダー情報のタイムコードとして付加される。なお、ヘッダー情報のタイムコードと併せて、又は、タイムコードの代わりに、声援の回数をヘッダー情報に含めてもよい。声援の回数は、上述のように、例えば、曲の開始時、又は、コンサートの開始時からの各声援期間に順序を付したときの対象の声援期間（声援データを再生する声援期間）の順序（順番）を表す。ヘッダー情報の座席番号は、ユーザに割り当てられた座席の座席番号であり、コンサート会場において声援データが再生される座席位置を表す。ヘッダー情報の子機１１の振動数は、録音された音の信頼度を表し、最も信頼度が高い場合の０とする。タイムコード（タイムスタンプ）は、声援データに対して所定時間おきに付加されるようにしてもよい。

　このようにヘッダー情報が付加された声援データは、ユーザの端末装置からコンサート運営側のサーバにインターネット等の通信網を通じて送信される。サーバに送信された声援データは、親機１２を介して、ユーザに割り当てられた座席の座席番号をユーザIDとする子機１１に送信されて声援データ記憶部１４３に保存される。なお、コンサートの開始前に、コンサート運営側のスタッフ等が各座席に子機１１を配置した際に、各子機１１は自己が配置された座席の座席番号を電子タグ４４から取得し、ユーザIDとして親機１２に通知する。

　人工的に生成された声での既定の声援データ、又は、ユーザとは関係のない人物の声での既定の声援データを声援データ記憶部１４３に保存する場合、例えば、ユーザはコンサート運営側のサーバにアクセスし、各声援期間において再生する声援データを指定する。なお、各声援期間において再生する声援データは、例えば文言等が異なる複数種の声援データの中からいずれかをユーザが選択できるようにしてもよい。サーバは、ユーザにより指定された各声援期間の声援データに図８のヘッダー情報を付加する。ヘッダー情報が付加された声援データは、ユーザに割り当てられた座席の座席番号をユーザIDとする子機１１に送信されて声援データ記憶部１４３に保存される。

　音声再生処理部１４４は、図３の子機１１の構成要素により構築される処理部であり、その処理が主に子機１１の制御部３３により実施される処理部である。音声再生処理部１４４は、声援再生指示部１４１からの声援再生開始信号に従って再生処理を実行する。なお、音声再生処理部１４４は、親機１２の構成要素により構築される場合であってもよい。

　即ち、音声再生処理部１４４は、時刻指定部１４２から供給される時刻が、声援再生開始信号により指定された再生開始時刻になると、スピーカ２５をオンにし（スピーカ２５に電力を供給し）、再生処理を開始する。音声再生処理部１４４は、時刻指定部１４２から供給される時刻が、再生開始時刻に対して声援再生開始信号により指定された再生継続時間が経過した時刻（再生終了時刻）になると、再生処理を停止（終了）し、スピーカ２５をオフにする。

　再生処理では、音声再生処理部１４４は、声援再生指示部１４１からの声援再生開始信号により指定された再生開始時刻をヘッダー情報のタイムコードとして有する声援データを声援データ記憶部１４３から読み出す。なお、声援再生指示部１４１は、声援データ記憶部１４３に保存された所定の声援期間の声援データの再生を意図してその対象の声援期間に対応した再生開始時刻を声援再生開始信号により指定する。その声援再生開始信号により指定された再生開始時刻と、声援データ記憶部１４３に保存されている対象の声援期間の声援データに付加されたヘッダー情報のタイムコードとは、コンサートの進行状況が計画とによって相違が生じる。そのため、音声再生処理部１４４は、声援データ記憶部１４３に保存されている各声援期間の声援データのうち、再生されていない声援期間の声援データであって、ヘッダー情報のタイムコードとして最も先に到来する時刻が付加された声援データ（又は、指定された再生開始時刻に最も近い時刻が付加された声援データ）を声援データ記憶部１４３から読み出すようにしてもよい。又は、音声再生処理部１４４は、声援再生指示部１４１からの声援再生開始信号が供給された回数をカウントし、その回数と一致する順番の声援期間の声援データを声援データ記憶部１４３から読み出すようにしてもよい。

　音声再生処理部１４４は、声援データ記憶部１４３から読み出した声援データをデジタル信号からアナログ信号に変換して音声信号としてスピーカ２５から再生（放音）させる。声援データ記憶部１４３に保存されている声援データが符号化されている場合には、音声再生処理部１４４は、符号化された声援データを復号する処理を行う。

　以上の声援再生装置１３１は、複数の観客（ユーザ）が所有する子機１１（各ユーザに割り当てられた座席に配置された子機１１）ごとに構築され、観客ごとの声援データが各ユーザに割り当てられた座席の位置で個別に再生される。声援再生指示部１４１が、ID分けモードにより、一部の座席番号を指定してスピーカ２５による声援データの再生を指示することで、それらの指定された一部の座席番号をユーザIDとする子機１１のみでの声援データの再生を同期させて行うことができる。

＜音声再生機能の処理手順＞
　図１３は、声援生成機能利用時における処理手順を例示したフローチャートである。

　ステップＳ１１では、コンサートの運営側のスタッフ（以下、スタッフ）は、子機１１の電源スイッチ２３をオンにする。処理はステップＳ１１からステップＳ１２に進む。

　ステップＳ１２では、スタッフは、子機１１を配置する座席に設置されている電子タグ４４を子機１１でタッチしてNFCにより電子タグ４４に記録されている座席番号（座席情報）を子機１１に取り込む。これにより、子機１１は、電子タグ４４から取り込んだ座席番号をユーザIDとして親機１２に送信し、親機１２とペアリングする。処理はステップＳ１２からステップＳ１３に進む。

　ステップＳ１３では、子機１１の制御部３３は、座席番号（ユーザID）に対応する声援データを親機１２を介してダウンロードし、記憶部３６に記憶させる。ダウンロードする声援データは、座席番号に割り当てられたユーザが事前に親機１２に接続されるサーバ（ＰＣ９１等）にアップロードした声援データであってもよいし、既定の声援データであってもよい。処理はステップＳ１３からステップＳ１４に進む。

　ステップＳ１４では、子機１１の制御部３３は、内蔵のタイマー（内部時計）の時刻を親機１２と同期させて、親機１２と時刻を合わせる。処理はステップＳ１４からステップＳ１５に進む。ステップＳ１５では、子機１１は、親機１２から再生開始時刻の指示（声援再生開始信号）があったか否かを判定する。

　ステップＳ１５において、再生開始時刻の指示がないと判定された場合には、処理はステップＳ１７に進む。ステップＳ１５において、再生開始時刻の指示があったと判定された場合には、処理はステップＳ１６に進む。

　ステップＳ１６では、子機１１は、親機１２から指示された再生開示時刻を設定する。処理はステップＳ１６からステップＳ１７に進む。ステップＳ１７では、子機１１は、ステップＳ１６で設定した再生開始時刻になったか否かを判定する。

　ステップＳ１７において、再生開始時刻になっていないと判定された場合、処理はステップＳ１５に戻り、ステップＳ１５から繰り返す。ステップＳ１７において、再生開始時刻になったと判定された場合には、処理はステップＳ１８に進む。

　ステップＳ１８では、子機１１は、親機１２から声援再生開始信号により指定された再生継続時間が経過するまで声援データの再生を行う。ステップＳ１８が終了すると、処理はステップＳ１５に戻り、ステップＳ１５から繰り返す。

　以上の声援再生機能によれば、コンサートでの観客ごとの声援を各観客に割り当てられた座席の位置で個別に又は同期させて再生することができる。観客ごとの声援を親機１２からの制御によってコンサート会場のエリアごとに所定のタイミングで同期させて再生することもでき、観客ごとの声援を利用して様々な演出効果を図ることができる。無観客のコンサートにおいても、出演者は、あたかも観客が会場にいるかのような声援を受けることができる。コンサート会場にいないファンは、コンサートに参加しているような感覚を得ることができる。コンサートを記録した音声データの編集等において、演奏データと分けて声援再生機能で使用された観客の声援データを編集し、声援データを利用した様々な演出効果を図ることができるようになる。

　なお、声援再生機能で再生する声援データは、声援データ記憶部１４３に事前に記憶させておくのではなく、コンサートを自宅等の遠隔地で視聴しているユーザがリアルタイムで発してしいる声援の声援データであってもよい。声援再生機能は、第２コンサート形態の場合に限らず、第１コンサート形態や第３コンサート形態においても同様に利用可能である。

＜音声データ送信機能＞
　会場演出システム１の音声データ送信機能について、第１コンサート形態の場合を例に説明する。

　図１４は、音声データ送信機能を説明する図である。

　第１コンサート形態において、会場演出システム１の声援録音機能により、子機１１の記憶部３６に記憶された声援データは、コンサートの終了後などに、音声データ送信機能を用いることで、親機１２、親機１２に接続されたＰＣ９１、又は、インターネット等のネットワークに接続されたサーバ（コンサート運営側のサーバ）に送信することができる。

　図１４は、子機１１から親機１２（又はサーバ）に声援データを送信する場合の形態を説明する図である。

　図１４において、子機１１は、ユーザの所定の操作によって、記憶部３６に記憶された声援データを親機１２との無線通信により直接的に送信することができる。親機１２に送信された声援データは、例えば、親機１２に接続されたコンサート運営側のサーバに転送することができる。ただし、この場合にはコンサート会場で声援データを親機１２に送信する必要がある。

　一方、子機１１は、各ユーザが所有するスマートフォン１６１に無線通信により接続することができる。そこで、コンサートの終了後において、ユーザは自宅等で子機１１をスマートフォン１６１と接続し、記憶部３６に記憶された声援データをスマートフォン１６１に一旦転送する。ユーザは、スマートフォン１６１をインターネット等の通信網を介してコンサート運営側のサーバに接続し、スマートフォン１６１に転送した声援データを通信網を介してサーバに送信することができる。スマートフォン１６１に限らず、通信網に接続可能な携帯端末や自宅のＰＣ（パーソナルコンピュータ）などに声援データを転送してからサーバに送信することも可能である。

　なお、声援データには、座席番号が付加されているので、コンサート会場のどの座席で録音された声援データであるかは、声援データに付加された座席番号により識別され得る。ただし、これに限らず、ユーザが自己の端末装置等をサーバに通信網を介して声援データを送信する際に、座席番号（ユーザID）をサーバに通知して、ユーザが送信する声援データがコンサート会場のどの座席のユーザの声援データであるかを識別できるようにしてもよい。

　音声データ送信機能は、声援録音機能により録音された声援データを子機１１からサーバ等に送信する場合に限らず、声援再生機能により再生された声援データを子機１１からサーバ等に送信する場合にも同様に使用される。

＜バーチャルサウンド生成への利用＞
　第１コンサート形態において声援録音機能により各子機１１に記憶された声援の声援データが音声データ送信機能によりコンサート運営側のサーバで収集されたとする。コンサート運営側は、コンサートの演奏を記録した音声データを記録媒体による頒布又は通信網による配信等にために制作（編集）する場合に、子機１１から収集した声援データに付加されたヘッダーファイル（ヘッダー情報）の座席情報（座席位置）を利用して、コンサートの雰囲気を再現するバーチャルサウンドを生成することができる。

　図１５は、バーチャルサウンドの生成についての説明図である。コンサート会場１７１は、第１コンサート形態において実際に使用されたコンサート会場を仮想空間で表した図である。仮想空間のコンサート会場（仮想会場）１７１において、実際の座席の通りの位置に仮想の座席（仮想座席）が配置される。各仮想座席には仮想空間におけるオブジェクトオーディオ（スピーカ）が配置される。各仮想座席のオブジェクトオーディオからは、各座席位置で実際に子機１１により録音された声援データが出力される。これにより、仮想空間（仮想会場）における任意の聴取位置（座席位置、ステージ上等）で聴取される声援データ（バーチャルサウンド）が演算により算出される。仮に、全座席の声援データを同期再生した場合には、大合唱のバーチャルサウンドを生成することが可能である。

　図１５のエリア１７２の範囲内の座席の声援データを仮想空間で再生した場合の声援データ（バーチャルサウンド）を生成することとすると、エリア１７２をスタート地点からエンド地点まで周回させることでウェーブのようなバーチャルサウンドを生成することが可能である。即ち、各声援データに付加されたヘッダー情報の座席情報を用いて、各座席の声援データを、所定のスタート地点の座席から所定の順番（座席の順番）で再生することができる。出演者が指し示したエリアの座席のみの声援データを仮想空間で再生した場合の声援データ（バーチャルサウンド）を生成することも可能である。

　図１６は、コンサートにおける声援データを編集する編集装置の構成例を示したブロック図である。なお、第１コンサート形態において声援録音機能により録音された声援データ、又は、第２コンサート形態において声援再生機能により使用された声援データを編集する場合を想定する。声援データの編集は、コンサートの演奏を収録した音声データを、CD（Compact Disc）やDVD（Digital Versatile Disc）等の記録媒体で頒布する場合や、通信網を通じて配信する場合等に行われる。

　図１６の編集装置２０１は、声援データ記憶部２１１、声援再生指示部２１２、時刻指定部２１３、会場座席情報記憶部２１４、音声処理部２１５、及び、生成データ記憶部２１６を有する。

　声援データ記憶部２１１は、コンサートが実施された際に、コンサート会場の各座席の各観客の声援データを記憶している。例えば、コンサートが第１コンサート形態で実施された場合には、コンサート中に図９の声援録音装置１０１により観客ごとに録音された声援データが、コンサート後に音声データ転送機能によりコンサート運営側のサーバに送信される。声援データ記憶部２１１には、サーバに送信された各観客の声援データが記憶される。コンサートが第２コンサート形態で実施された場合には、コンサートの実施時に図１２の声援再生装置１３１により再生された各観客の声援データが、声援データ記憶部２１１に記憶される。声援データ記憶部２１１は、記憶している声援データを音声処理部２１５に供給する。なお、各観客の声援データには図８のヘッダー情報が付加されている。

　声援再生指示部２１２は、音声処理部２１５に対して声援データの再生を開始する再生開始時刻と再生を継続する再生継続時間とを指定する。この指定と共に、声援再生指示部２１２は、音声処理部２１５に対して、再生する声援データを限定するための座席番号とタイムコードと指定する。声援再生指示部２１２により指定された座席番号とタイムコードがヘッダー情報として付加された声援データが再生する声援データとして指定される。声援再生指示部２１２が指定する再生開始時刻、再生継続時間、座席番号、及び、タイムコードに関しては、編集装置２０１の操作者が、コンサートの演奏や映像を視聴しながら設定する。なお、座席番号の指定の代わりに、コンサート会場を複数のエリアに分割した場合のエリアを指定する場合であってもよい。エリアを指定する場合であっても座席番号の指定という。

　時刻指定部２１３は、コンサートの開始時刻から終了時刻までの時刻を音声処理部２１５に供給する。

　会場座席情報記憶部２１４は、コンサート会場におけるステージの位置、各座席番号の座席の位置、及び、コンサート会場をエリアに分割した場合の各エリアに含まれる座席範囲等を表す会場座席情報として記憶している。会場座席情報記憶部２１４は、記憶している会場座席情報を音声処理部２１５に供給する。

　音声処理部２１５は、時刻指定部２１３から供給される時刻が、声援再生指示部２１２により指定された再生開始時刻になると、声援再生指示部２１２により指定された座席番号及びタイムコードをヘッダー情報として付加された声援データを声援データ記憶部２１１から取得する。声援再生指示部２１２により座席番号の代わりにエリアが指定された場合、音声処理部２１５は、会場座席情報記憶部２１４に記憶されている会場座席情報を参照して、指定されたエリアに含まれる座席番号を検出する。音声処理部２１５は検出した座席番号の声援データを声援データ記憶部２１１から取得する。

　音声処理部２１５は、実空間のコンサート会場に対応した仮想空間のコンサート会場（仮想会場）において、実空間における各座席番号の座席の位置に対応する仮想会場での位置に仮想の座席（仮想座席）を配置する。その仮想会場において、声援データ記憶部２１１から読み出した声援データを座席番号に対応した仮想座席の位置にオブジェクトオーディオとして配置する。音声処理部２１５は、仮想会場の所定の位置を聴取位置として、各オブジェクトオーディオにより再生（放音）された声援データの音声が、聴取位置の左右の耳のそれぞれの位置に伝播したと想定し、左右の耳のそれぞれで聴取される左右の音声の音声データを頭部伝達関数等を用いて生成する。これにより、音声処理部２１５は、音像が定位されたバーチャルサウンド又はバーチャルサラウンド（立体音響）としての声援データを生成する。なお、音声処理部２１５は、再生開始時刻から再生終了時刻までの間、オブジェクトオーディオにより声援データを再生し、聴取位置での左右の音声データ（声援データ）を生成する。音声処理部２１５は、生成した左右の声援データに対して時刻指定部２１３から供給される時刻をタイムコードとして付加して生成データ記憶部２１６に記憶させる。

　生成データ記憶部２１６は、音声処理部２１５により生成された左右の声援データを記憶する。生成データ記憶部２１６に記憶された声援データは、コンサートの演奏を録音した演奏データと混合される。声援データと演奏データとにはそれぞれをタイムコードが付加されており、それらのタイムコードが示す時刻が一致するときの声援データと演奏データとが混合される。

　以上の編集装置２０１によれば、声援データ記憶部２１１に記憶された各座席の声援データを、所望のタイミングで再生することができるので、コンサート会場の特定のエリアのみの声援データを所望のタイミングで再生したときに所定の位置で聴取される声援データを生成することができる。従って、図１５で説明したように声援データを再生するエリア１７２を所定のスタート地点から所定のエンド位置までシフトさせることでウェーブのようなバーチャルサウンドを生成することができる。

　図１７は、図１５のバーチャルサウンドの生成の処理の流れを説明する図である。なお、図１７では、第１コンサート形態において声援録音機能により録音された各観客の声援データを、コンサート時と同様のタイミングで再生するときのバーチャルサウンドを生成する場合の処理の流れを示す。

　ステップＳ４１では、データ受信サーバ（コンサート運営側のサーバ）は、第１コンサート形態において各座席の子機１１で録音された声援データを収集する。ステップＳ４２では、バーチャルサウンド生成装置（編集装置２０１）はステップＳ４１で収集された声援データのヘッダー情報に含まれる座席番号（座席情報）に基づいてコンサート会場における座席位置を解析する。このとき、バーチャルサウンド生成装置は、コンサート会場の各座席の座席番号と座席位置との関係を示す会場座席情報を参照する。

　ステップＳ４３では、バーチャルサウンド生成装置は、実際のコンサート会場を模した仮想空間におけるコンサート会場（仮想会場）において、ステップＳ４１で収集された各声援データを配置する。このとき、各声援データが実際の録音された座席位置に対応する仮想空間の位置に各声援データを配置する。

　ステップＳ４４では、バーチャルサウンド生成装置は、LTC信号を発生させて再生時刻を指定する。ステップＳ４５では、バーチャルサウンド生成装置は、ステップＳ４４で発生されたLTC信号の時刻での各声援データを仮想空間において再生して、仮想空間における設定された聴取位置での音声を生成する。

　以上のバーチャルサウンドの生成処理によれば、コンサート会場の任意の位置での声援を聴取した場合のパーチャルサウンドを生成することができる。また、図１６の編集装置２０１により、コンサート時における各座席の観客の声援を再生するエリアやタイミングを自由に編集することができるので、図１５で説明したようなウェーブのようなバーチャルサウンド等、様々な演出効果を図るサウンドを生成することができる。

　なお、図１６の編集装置２０１は、第１コンサート形態において声援録音機能により録音された声援データや、第２コンサート形態において声援再生機能により使用された声援データから特定の聴取位置ではバーチャルサウンドを生成する場合に限らない。編集装置２０１は、第２コンサート形態又は第３コンサート形態において声援録音機能により録音された声援データや、第１コンサート形態又は第３コンサート形態において声援再生機能により使用された声援データから特定の聴取位置でのバーチャルサウンドを生成してもよい。編集装置２０１は、第２コンサート形態や第３コンサート形態において声援再生機能により再生される予定の声援データから特定の聴取位置でのバーチャルサウンドをコンサート中にリアルタイムに生成してもよい。例えば、第２コンサート形態（無観客コンサート）において、声援再生機能により再生される予定の声援データから、出演者の聴取位置でのバーチャルサウンドをコンサート中にリアルタイムに生成し、生成されたバーチャルサウンドを出演者がイヤーモニタ等で聴取しながらコンサートを実施することもできる。この場合に、無観客のコンサート会場でも出演者は観客の声援を聴くことができる。なお、編集装置２０１において生成される声援データは、聴取位置に対して各観客の位置（距離や方向）を考慮した立体音響でなくてもよい。第１コンサート形態又は第２コンサート形態において図１２の声援再生装置１３１により、各観客の声援データを再生する場合に、再生する声援データの座席のエリアや時間を親機１２で制御することで、図１５で説明したウェーブのような声援を実際のコンサート会場に発生させることもできる。

＜第３コンサート形態でのバーチャルサウンド生成＞
　図１８は、第３コンサート形態でのバーチャルサウンドの生成を説明する図である。

　図１８において、コンサート会場２４１は、仮想空間に形成された仮想のコンサート会場である。例えば、仮想のコンサート会場２４１でのコンサートがオンライン配信（通信網により配信）され、視聴者には、仮想のコンサート会場２４１のおける座席番号が割り当てられる。コンサート会場２４１の座席数は略上限はなく、例えば７０万人の視聴者に対しても座席番号が割り当てられる。ただし、複数の視聴者に対して重複した座席番号を割り当てることが可能であるとする。７０万の視聴者がいる場合に１座席（１つの座席番号）あたり１０人の視聴者が割り当てられるとする。

　各座席には仮想の子機１１が配置される。仮想の子機１１のスピーカ２４２からはその座席が割り当てられた例えば１０人分の声援データが合成されて出力されるとしてもよいし、曲ごとに声援データを分けて出力されるとしてもよい。

　図１９は、第３コンサート形態においてユーザに提供する音声データを生成する音声再生装置の構成例を示したブロック図である。

　図１９の音声再生装置２６１は、演奏データ供給部２７１、声援データ供給部２７２、マイク２７３、声援再生指示部２７４、時刻指定部２７５、聴取座席指定部２７６、会場座席情報記憶部２７７、音声処理部２７８、及び、音声データ再生部２７９を有する。

　演奏データ供給部２７１は、コンサート運営側のサーバの構成要素により構築される。演奏データ供給部２７１は、コンサートにおいて出演者の演奏を記録した演奏データをユーザが装着して使用するHMD（Head Mounted Display）等のVR装置（又は、VR装置に接続された処理装置）の構成要素により構築される音声処理部２７８に供給する。サーバとVR装置とはインターネット等の通信網を介して通信可能に接続され、演奏データ供給部２７１から音声処理部２７８への演奏データは、通信網を通じて伝送される。VR装置は、音声のみを聴取できる装置であってもよい。

　コンサートの演奏をリアルタイムに配信する場合には、演奏データ供給部２７１は、演奏と略同時に得られる演奏データを略リアルタイムで音声処理部２７８に供給する。事前に収録された演奏データを配信する場合には、演奏データ供給部２７１は、記憶部に記憶されたコンサートの開始から終了までの演奏データを時間の経過に従って音声処理部２７８に供給する。

　声援データ供給部２７２は、コンサート運営側のサーバの構成要素により構築される。声援データ供給部２７２は、バーチャルコンサートを視聴している各ユーザが発した声の声援データを音声処理部２７８に供給する。声援データは、演奏データと同様に通信網を通じてサーバから各ユーザのVR装置に伝送される。

　各ユーザの声援データは、各ユーザに対して配置されたマイク２７３により検出され、各ユーザに割り当てられた仮想座席の座席番号が付加されて、通信網を通じて声援データ供給部２７２に供給される。

　声援データ供給部２７２は、各ユーザのマイク２７３から取得した声援データを音声処理部２７８に供給する。なお、声援データは、図１２の声援再生装置１３１と同様に、コンサートの開始前等に事前にユーザが自身の声で録音した声援データであってもよいし、人工的に生成された声での既定の声援データ、又は、ユーザとは関係のない人物の声での既定の声援データであってもよい。この場合に、声援データには、図８のヘッダー情報が付加される。

　声援再生指示部２７４は、コンサート運営側のサーバの構成要素により構築され、その処理が、サーバで実施される処理部である。声援再生指示部２７４は、音声処理部２７８に対して、音声データ再生部２７９により声援の再生（放音）を指示する声援再生開始信号を供給する。声援再生指示部１４１から音声再生処理部１４４への声援再生開始信号は、サーバと各ユーザのVR装置との間の無線通信を介して伝送される。

　声援再生開始信号は、コンサート中において観客の声援が生じる声援期間のそれぞれに対して声援再生指示部２７４から音声処理部２７８に供給される。声援期間は、上述した通りであるので説明を省略する。

　声援再生指示部２７４が音声処理部２７８に対して声援再生開始信号を送信するタイミング（時刻）や、声援再生開始信号により指定される再生開始時刻及び再生継続時間は、図１２の声援再生装置１３１と同様であるので説明を省略する。

　時刻指定部２７５は、各ユーザが使用するVR装置に搭載されたタイマーである。時刻指定部２７５は、コンサートの開始時刻から終了時刻までの時刻を音声処理部２７８に供給する。

　聴取座席指定部２７６は、各ユーザが使用するVR装置の構成要素により構築される。聴取座席指定部２７６は、自装置を使用するユーザに割り当てられた仮想会場における仮想座席の座席番号を音声処理部２７８に対して指定する。各ユーザには、コンサートの開始前に仮想会場における仮想座席が割り当てられ、その座席番号が通知される。聴取座席指定部２７６は、自装置を使用するユーザに割り当てられた仮想座席の座席番号を事前に取得している。

　会場座席情報記憶部２７７は、仮想会場におけるステージの位置、各座席番号の仮想座席の位置、及び、仮想会場をエリアに分割した場合の各エリアに含まれる座席範囲等を表す会場座席情報として記憶している。会場座席情報記憶部２７７は、記憶している会場座席情報を音声処理部２７８に供給する。

　音声処理部２７８は、各ユーザが使用するVR装置の構成要素により構築される。ただし、音声処理部２７８は、サーバの構成要素により構築されてもよい。音声処理部２７８は、演奏データ供給部２７１から供給される演奏データに対して声援データを混合して音声データ再生部２７９から出力する。音声データ再生部２７９は、ヘッドフォン、イヤフォン等の音声再生装置である。

　音声処理部２７８は、声援再生指示部２７４からの声援再生開始信号に従って声援再生処理を実行する。

　即ち、音声処理部２７８は、時刻指定部２７５から供給される時刻が、声援再生開始信号により指定された再生開始時刻になると、声援再生処理を開始する。音声処理部２７８は、時刻指定部２７５から供給される時刻が、再生開始時刻に対して声援再生開始信号により指定された再生継続時間が経過した時刻（再生終了時刻）になると、声援再生処理を停止（終了）する。

　声援再生処理では、音声処理部２７８は、声援再生指示部２７４からの声援再生開始信号により指定された再生開始時刻をヘッダー情報のタイムコードとして有する声援データを声援データ供給部２７２から取得する。声援データ供給部２７２が、マイク２７３で検出された声援データをリアルタイムに供給する場合には、音声処理部２７８は、声援再生指示部１４１により指定された再生開始時刻から再生終了時刻までの期間において、声援データ供給部２７２から声援データを取得する。ただし、音声処理部２７８は、声援データ供給部２７２から取得する声援データは、聴取座席指定部２７６から指定された座席番号の仮想座席に対して、例えば、所定距離未満の仮想座席の座席番号のユーザの声援データのみに制限されるようにしてもよい。聴取座席指定部２７６により指定された聴取座席（仮想座席）に対して、所定の距離未満の仮想座席の座席番号は、会場座席情報記憶部２７７に記憶されている会場座席情報に基づいて特定される。

　音声処理部２７８は、声援データ供給部２７２から取得した声援データに対してヘッダー情報として付加された座席番号の仮想座席の位置に、その声援データをオブジェクトオーディオとして配置する。音声処理部２７８は、自装置を使用するユーザの聴取座席の位置を聴取位置として、各オブジェクトオーディオにより再生（放音）された声援データの音声が、聴取位置の左右の耳のそれぞれの位置に伝播したと想定し、左右の耳のそれぞれで聴取される左右の音声の音声データを頭部伝達関数等を用いて生成する。これにより、音声処理部２７８は、音像が定位されたバーチャルサウンド又はバーチャルサラウンド（立体音響）としての声援データを生成する。なお、音声処理部２１５は、声援再生指示部２１２により指定された再生開始時刻から声援再生指示部２１２により指定された再生継続時間が経過する再生終了時刻までの間、オブジェクトオーディオにより声援データを再生し、聴取位置での左右の音声データ（声援データ）を生成する。音声処理部２７８は、生成した左右の声援データを演奏データに混合して音声データ再生部２７９に供給する。

　音声データ再生部２７９は、各ユーザに両耳に装着されるヘッドフォンやイヤフォン等の音声再生装置である。音声データ再生部２７９は音声処理部２７８からの音声データ（演奏データ及び声援データ）を再生し、ユーザに提供する。

　以上の音声再生装置２６１は、第３コンサート形態（バーチャルコンサート）を通信網を介した配信等により視聴する各観客の自宅等に配置されたVR装置に対して構築される。したがって、各ユーザは、各ユーザに割り当てられた仮想座席の位置でコンサートを視聴したときの観客の声援をバーチャルサウンドとして聴くことができる。

　図２０は、図１８のバーチャルサウンドの生成の処理の流れを説明する図である。

　ステップＳ６１では、データ受信サーバ（コンサート運営側のサーバ）は、第３コンサート形態において仮想のコンサート会場の各座席に割り当てられたユーザの声援データを収集する。

　ステップＳ６２では、バーチャルサウンド生成装置（音声再生装置２６１）は、ステップＳ６１で収集された声援データのヘッダー情報に含まれる座席番号（座席情報）に基づいて仮想のコンサート会場における座席位置を解析する。このとき、バーチャルサウンド生成装置は、仮想のコンサート会場の各座席の座席番号と座席位置との関係を示す会場座席情報を参照する。

　ステップＳ６３では、バーチャルサウンド生成装置は、座席位置の正規化を行う。正規化とは、例えば、７０万人分の声援データを７万人規模の声援データにミキシングすること、仮想空間をユーザ数（声援数）に応じて拡大すること、又は、仮想の座席の密度を視聴者の人数に応じて変更することを意味する。

　ステップＳ６４では、バーチャルサウンド生成装置は、仮想のコンサート会場（仮想会場）において、ステップＳ６１で収集された各声援データを配置する。このとき、各声援データは、各ユーザに割り当てられた仮想の座席位置に配置される。

　ステップＳ６５では、バーチャルサウンド生成装置は、LTC信号を発生させて再生時刻を指定する。

　ステップＳ６６７では、バーチャルサウンド生成装置は、ステップＳ６５で発生されたLTC信号の時刻での各声援データを仮想空間（仮想会場）において再生して、仮想空間において設定された聴取位置（ユーザの座席位置）での音声を生成する。

　以上のバーチャルサウンドの生成によれば、各ユーザは、各ユーザに割り当てられた仮想会場の座席位置に応じた観客の声援や演奏を聴くことができる。出演者は、自己の位置を聴取位置として生成された声援のバーチャルサウンドをイヤーモニタ等で聴取することで、リアリティのある観客の声援を聴くことができる。

　本技術は以下のような構成も取ることができる。
（１）
　複数の録音装置を同時に制御可能な他装置と通信する通信部と、
　前記他装置によって制御され、前記複数の録音装置と同期して録音可能な録音部と、
　前記録音部によって録音された音声データに対して、録音された位置に関する位置情報と、録音された時刻に関する時刻情報とを付加する処理部
　を有する情報処理装置。
（２）
　前記処理部は、前記音声データに対して、前記位置情報として、会場に設置された座席の位置を特定する座席情報を付加する
　前記（１）に記載の情報処理装置。
（３）
　前記処理部は、前記音声データに対して、前記座席情報として前記座席の座席番号を付加する
　前記（２）に記載の情報処理装置。
（４）
　前記処理部は、前記座席情報を、前記座席に設置されたタグから取得する
　前記（２）又は（３）に記載の情報処理装置。
（５）
　前記処理部は、前記音声データに対して前記音声データが録音された際に前記会場で演奏されていた曲名を付加する
　前記（２）乃至（４）のいずれかに記載の情報処理装置。
（６）
　前記処理部は、前記音声データに対して前記録音部の振動に関する振動情報を付加する
　前記（１）乃至（５）のいずれかに記載の情報処理装置。
（７）
　前記録音部は、前記通信部により前記他装置から取得した録音開始の指示に基づいて、前記音声データの録音を開始する
　前記（１）乃至（６）のいずれかに記載の情報処理装置。
（８）
　前記他装置により発光が制御される発光部
　を更に有する
　前記（１）乃至（７）のいずれかに記載の情報処理装置。
（９）
　前記他装置により制御され、音声データを再生する音声再生部
　を更に有する
　前記（１）乃至（８）のいずれかに記載の情報処理装置。
（１０）
　通信部と、
　録音部と、
　処理部と
　を有する情報処理装置の
　前記通信部が、複数の録音装置を同時に制御可能な他装置と通信し、
　前記録音部が、前記他装置によって制御され、前記複数の録音装置と同期して録音を行い、
　前記処理部が、前記録音部によって録音された音声データに対して、録音された位置に関する位置情報と、録音された時刻に関する時刻情報とを付加する
　情報処理方法。
（１１）
　複数の再生装置を同時に制御可能な他装置と通信する通信部と、
　前記他装置によって制御され、前記複数の再生装置と同期して音声データを再生する音声再生部と、
　を有する
　情報処理装置。
（１２）
　前記音声再生部は、予め録音されたユーザの音声データを再生する
　前記（１１）に記載の情報処理装置。
（１３）
　前記音声再生部は、前記他装置により再生を指示された時刻に対応した音声データを再生する
　前記（１１）又は（１２）に記載の情報処理装置。
（１４）
　前記音声再生部は、会場に設置された座席の位置に配置される
　前記（１１）乃至（１３）のいずれかに記載の情報処理装置。
（１５）
　前記複数の再生装置及び前記音声再生部は、仮想空間における会場の所定位置に配置され、
　前記複数の再生装置が各々の位置で再生した音声データを、前記音声再生部が配置された位置で聴取したときの音声データを生成する生成部
　を更に有する
　前記（１１）乃至（１４）のいずれかに記載の情報処理装置。
（１６）
　前記生成部は、前記複数の再生装置が再生される前記会場における座席位置の情報を用いて、前記会場の所定のスタート地点の座席位置から所定の順番で前記複数の再生装置の前記音声データを再生する
　前記（１５）に記載の情報処理装置。
（１７）
　無線通信により発光が制御される発光部
　を有する
　前記（１１）乃至（１６）のいずれかに記載の情報処理装置。
（１８）
　通信部と、
　音声再生部と
　を有する情報処理装置の
　前記通信部が、複数の再生装置を同時に制御可能な他装置と通信し、
　前記音声再生部が、前記他装置によって制御され、前記複数の再生装置と同期して音声データを再生する
　情報処理方法。

　１　会場演出システム，　１１　子機，　１２　親機，　２２　発光部，　２５　スピーカ，　２６　マイク，　３３，６１　制御部，　３６　記憶部，　６２　通信部

Claims

　複数の録音装置を同時に制御可能な他装置と通信する通信部と、
　前記他装置によって制御され、前記複数の録音装置と同期して録音可能な録音部と、
　前記録音部によって録音された音声データに対して、録音された位置に関する位置情報と、録音された時刻に関する時刻情報とを付加する処理部
　を有する情報処理装置。
　前記処理部は、前記音声データに対して、前記位置情報として、会場に設置された座席の位置を特定する座席情報を付加する
　請求項１に記載の情報処理装置。
　前記処理部は、前記音声データに対して、前記座席情報として前記座席の座席番号を付加する
　請求項２に記載の情報処理装置。
　前記処理部は、前記座席情報を、前記座席に設置されたタグから取得する
　請求項２に記載の情報処理装置。
　前記処理部は、前記音声データに対して前記音声データが録音された際に前記会場で演奏されていた曲名を付加する
　請求項２に記載の情報処理装置。
　前記処理部は、前記音声データに対して前記録音部の振動に関する振動情報を付加する
　請求項１に記載の情報処理装置。
　前記録音部は、前記通信部により前記他装置から取得した録音開始の指示に基づいて、前記音声データの録音を開始する
　請求項１に記載の情報処理装置。
　前記他装置により発光が制御される発光部
　を更に有する
　請求項１に記載の情報処理装置。
　前記他装置により制御され、音声データを再生する音声再生部
　を更に有する
　請求項１に記載の情報処理装置。
　通信部と、
　録音部と、
　処理部と
　を有する情報処理装置の
　前記通信部が、複数の録音装置を同時に制御可能な他装置と通信し、
　前記録音部が、前記他装置によって制御され、前記複数の録音装置と同期して録音を行い、
　前記処理部が、前記録音部によって録音された音声データに対して、録音された位置に関する位置情報と、録音された時刻に関する時刻情報とを付加する
　情報処理方法。
　複数の再生装置を同時に制御可能な他装置と通信する通信部と、
　前記他装置によって制御され、前記複数の再生装置と同期して音声データを再生する音声再生部と、
　を有する
　情報処理装置。
　前記音声再生部は、予め録音されたユーザの音声データを再生する
　請求項１１に記載の情報処理装置。
　前記音声再生部は、前記他装置により再生を指示された時刻に対応した音声データを再生する
　請求項１１に記載の情報処理装置。
　前記音声再生部は、会場に設置された座席の位置に配置される
　請求項１１に記載の情報処理装置。
　前記複数の再生装置及び前記音声再生部は、仮想空間における会場の所定位置に配置され、
　前記複数の再生装置が各々の位置で再生した音声データを、前記音声再生部が配置された位置で聴取したときの音声データを生成する生成部
　を更に有する
　請求項１１に記載の情報処理装置。
　前記生成部は、前記複数の再生装置が再生される前記会場における座席位置の情報を用いて、前記会場の所定のスタート地点の座席位置から所定の順番で前記複数の再生装置の前記音声データを再生する
　請求項１５に記載の情報処理装置。
　無線通信により発光が制御される発光部
　を有する
　請求項１１に記載の情報処理装置。
　通信部と、
　音声再生部と
　を有する情報処理装置の
　前記通信部が、複数の再生装置を同時に制御可能な他装置と通信し、
　前記音声再生部が、前記他装置によって制御され、前記複数の再生装置と同期して音声データを再生する
　情報処理方法。