JP7102826B2 - 情報処理方法および情報処理装置 - Google Patents

Description

本発明は、コンテンツを再生する技術に関する。

特定のコンテンツの再生に連動して他のコンテンツを再生する技術が従来から提案されている。例えば特許文献１の技術においては、映画館等で再生されるコンテンツの音声にタイムコードを含む透かしデータが埋め込まれる。映画館を利用する利用者のユーザ端末は、当該音声を検出することで当該コンテンツの再生に連動して別のコンテンツを再生する。

特許第６１６３６８０号公報

しかし、特許文献１の技術では、コンテンツに透かしデータを埋め込む処理が事前に必要になるという問題、または、同期用の透かしデータを埋め込むことでコンテンツの音声が変化するという問題がある。以上の事情を考慮して、本発明は、同期用のデータをコンテンツに埋め込むことなく、複数のコンテンツの再生を時間的に対応させることを目的とする。

以上の課題を解決するために、本発明の好適な態様に係る情報処理方法は、第１コンテンツの再生により放音される音響の収音により生成された音響信号と、第２コンテンツと時間的に対応している基準信号とを対比することで、前記第１コンテンツと前記第２コンテンツとの時間的な対応を解析し、前記解析された時間的な対応のもとで、前記第１コンテンツの再生に連動して前記第２コンテンツを再生装置に再生させる。
本発明の好適な態様に係る情報処理装置は、第１コンテンツの再生により放音される音響の収音により生成された音響信号と、第２コンテンツと時間的に対応している基準信号とを対比することで、前記第１コンテンツと前記第２コンテンツとの時間的な対応を解析する解析部と、前記解析部が解析した時間的な対応のもとで、前記第１コンテンツの再生に連動して前記第２コンテンツを再生装置に再生させる再生制御部とを具備する。

本発明の実施形態に係る再生システムの構成を例示するブロック図である。 第１コンテンツと基準信号と第２コンテンツとの模式図である。 再生装置による第２コンテンツの表示例である。 制御装置の処理のフローチャートである。 変形例に係る第１コンテンツと基準信号と第２コンテンツとの模式図である。 変形例に係る第２コンテンツの模式図である。

図１は、本発明の好適な形態に係る再生システム１００の構成を例示するブロック図である。再生システム１００は、第１コンテンツＣ1と第２コンテンツＣ2とを連動して再生するためのコンピュータシステムである。図１に例示される通り、本実施形態の再生システム１００は、再生装置２０と情報処理装置３０とで構成される。

再生装置２０は、第１コンテンツＣ1を再生する出力機器である。第１コンテンツＣ1は、音響Ｖcおよび映像Ｍcで構成される動画作品である。具体的には、第１コンテンツＣ1は、音響Ｖcを表す音響信号と映像Ｍcを表わす映像信号とで表わされる。映画やテレビ番組が第１コンテンツＣ1として例示される。例えば、再生装置２０は、ＤＶＤ等の光ディスクに記憶された第１コンテンツＣ1を再生する。図１に例示される通り、再生装置２０は、第１コンテンツＣ1に含まれる映像Ｍcを表示する表示装置２３（例えば液晶表示パネル）と、第１コンテンツＣ1に含まれる音響を放音する放音装置２１（例えばスピーカ）とを具備する。すなわち、再生装置２０による再生は、映像の表示と音響の放音とを包含する。なお、再生装置２０が放音装置２１のみを含んでもよい。つまり、再生装置２０から表示装置２３は省略され得る。

情報処理装置３０は、再生装置２０により再生される第１コンテンツＣ1を視聴する利用者により携帯される。例えば携帯電話機、スマートフォンまたはタブレット端末等の情報端末が情報処理装置３０として利用される。本実施形態の情報処理装置３０は、第２コンテンツＣ2を再生する。具体的には、再生装置２０による第１コンテンツＣ1の再生に連動して第２コンテンツＣ2が再生される。第２コンテンツＣ2は、例えば第１コンテンツＣ1に関連した情報（例えば音響または画像）である。例えば第１コンテンツＣ1の購入者に対する特典映像が第２コンテンツＣ2として情報処理装置３０に提供される。第１コンテンツＣ1の時間軸上の全体（始点から終点）にわたり連続した情報が第２コンテンツＣ2として例示される。本実施形態の第２コンテンツＣ2は、例えば第１コンテンツＣ1の内容を表す字幕（例えば登場人物の台詞を表す文字列）の時系列を示す画像である。なお、第２コンテンツＣ2は、実際には画像が表示されない区間を含んでいてもよい。

図１に例示される通り、本実施形態の情報処理装置３０は、収音装置３１と再生装置３３と制御装置３５と記憶装置３７とを具備する。制御装置３５は、例えばＣＰＵ（Central Processing Unit）等の処理回路であり、情報処理装置３０を構成する各要素を統括的に制御する。制御装置３５は、少なくとも１個の回路を含んで構成される。再生装置３３は、制御装置３５による制御のもとで各種の情報を再生する出力装置である。本実施形態では、画像を表示する表示装置（例えば液晶表示パネル）を再生装置３３として例示する。

記憶装置３７（メモリ）は、例えば磁気記録媒体もしくは半導体記録媒体等の公知の記録媒体、または、複数種の記録媒体の組合せで構成され、制御装置３５が実行するプログラムと制御装置３５が使用する各種のデータとを記憶する。本実施形態の記憶装置３７は、第２コンテンツＣ2を記憶する。第２コンテンツＣ2は、例えば配信装置（例えばＷＥＢサーバ）から事前に取得される。なお、情報処理装置３０とは別体の記憶装置３７（例えばクラウドストレージ）を用意し、移動体通信網またはインターネット等の通信網を介して制御装置３５が記憶装置３７に対する書込および読出を実行してもよい。すなわち、記憶装置３７は情報処理装置３０から省略され得る。

収音装置３１は、周囲の音響を収音する音響機器（マイクロホン）である。具体的には、収音装置３１は、第１コンテンツＣ1の再生により放音される音響Ｖcを収音し、当該音響Ｖcの波形を表す音響信号Ｙを生成する。

図２には、第１コンテンツＣ1が模式的に図示されている。図２に例示される通り、第１コンテンツＣ1のうち再生装置２０により再生された部分（以下「再生部分」という）Ｔ1の音響Ｖcが収音される。例えば情報処理装置３０に対する利用者からの操作に応じて収音装置３１による収音が開始される。なお、実際には、収音装置３１による収音が開始すると所定の期間（例えば第１コンテンツＣ1の時間長に対して充分に短い期間）にわたり継続して再生部分Ｔ1の音響Ｖcが収音される。第１コンテンツＣ1の再生の進行とともに再生部分Ｔ1は時間軸上で未来の方向（時間が経過する方向）に移動する。

制御装置３５は、記憶装置３７に記憶されたプログラムに従って複数のタスクを実行することで、第２コンテンツＣ2を再生するための複数の機能（解析部３５２および再生制御部３５４）を実現する。なお、複数の装置の集合（すなわちシステム）で制御装置３５の機能を実現してもよいし、制御装置３５の機能の一部または全部を専用の電子回路（例えば信号処理回路）で実現してもよい。

解析部３５２は、第１コンテンツＣ1と第２コンテンツＣ2との時間的な対応を解析する。本実施形態の解析部３５２は、第２コンテンツＣ2のうち第１コンテンツＣ1の再生部分Ｔ1に時間的に対応する部分（以下「処理部分」という）Ｔ2を特定する。収音装置３１が生成した音響信号Ｙと、記憶装置３７に記憶された基準信号Ｚとを対比することで処理部分Ｔ2が特定される。

図２に例示される通り、基準信号Ｚは、第２コンテンツＣ2と時間的に対応する信号である。具体的には、基準信号Ｚは、時間軸が第２コンテンツＣ2と一致する。本実施形態では、基準信号Ｚの始点と第２コンテンツＣ2の始点とが一致し、基準信号Ｚの終点と第２コンテンツＣ2の終点とが一致する。例えば第１コンテンツＣ1の再生により放音される音響Ｖcの波形を表す信号が基準信号Ｚとして利用される。本実施形態の基準信号Ｚは、第１コンテンツＣ1の時間軸上の全体にわたり音響Ｖcを表す信号である。基準信号Ｚは、例えば第２コンテンツＣ2とともに配信装置から配信されて記憶装置３７に事前に記憶される。

具体的には、解析部３５２は、基準信号Ｚのうち音響信号Ｙの波形に類似する部分（以下「類似部分」という）Ｐを特定する。基準信号Ｚを時間軸上で複数の区間（以下「解析区間」という）に区切り、各解析区間について音響信号Ｙとの類似性を示す指標（以下「類似指標」という）を算定する。解析区間の時間長は、例えば音響信号Ｙの時間長と等しい。各解析区間は相互に重複し得る。

本実施形態では、解析区間と音響信号Ｙとについて算定される相互相関が、解析区間と音響信号Ｙとの間における類似指標として利用される。解析区間と音響信号Ｙとに共通の音響が含まれる場合（すなわち類似性が高い場合）、相互相関の絶対値は最大となる。複数の解析区間のうち相互相関の絶対値が最大となる解析区間が類似部分Ｐとして特定される。すなわち、音響信号Ｙと基準信号Ｚとの相互相関を算定することで、音響信号Ｙと基準信号Ｚとが対比される。解析部３５２は、第２コンテンツＣ2のうち基準信号Ｚの類似部分Ｐに時間的に対応する部分を処理部分Ｔ2として特定する。図２に例示される通り、第２コンテンツＣ2のうち類似部分Ｐに時間軸上で一致する部分が処理部分Ｔ2として特定される。以上の説明から理解される通り、解析部３５２は、音響信号Ｙと基準信号Ｚとを対比することで、第１コンテンツＣ1と第２コンテンツＣ2との時間的な対応を解析（すなわち処理部分Ｔ2を特定）する。

再生制御部３５４は、第１コンテンツＣ1と第２コンテンツＣ2との時間的な対応のもとで、第１コンテンツＣ1の再生に連動して第２コンテンツＣ2を再生装置３３に再生させる。具体的には、再生制御部３５４は、第１コンテンツＣ1の再生に並行して第２コンテンツＣ2を再生させる。図２に例示される通り、本実施形態の再生制御部３５４は、第２コンテンツＣ2の処理部分Ｔ2を第１コンテンツＣ1の再生部分Ｔ1に時間軸上で一致させて（すなわち同期して）、第２コンテンツＣ2を再生させる。具体的には、再生部分Ｔ1の終点に処理部分Ｔ2の終点が時間軸上で一致するように、第２コンテンツＣ2を再生装置３３に再生させる。

図３は、再生装置３３による第２コンテンツＣ2の表示例である。再生装置３３は、再生制御部３５４による制御のもとで、第１コンテンツＣ1の再生に連動して第２コンテンツＣ2を再生する。具体的には、再生装置３３は、第２コンテンツＣ2の処理部分Ｔ2が第１コンテンツＣ1の再生部分Ｔ1に時間的に一致させて、当該第２コンテンツＣ2を再生する。第１コンテンツＣ1の再生の進行に連動して第２コンテンツＣ2の再生も進行する。すなわち、再生装置２０による第１コンテンツＣ1の再生に並行して第２コンテンツＣ2が再生される。図３に例示される通り、例えば第１コンテンツＣ1の再生部分Ｔ1に登場する登場人物の台詞を表す字幕「こんにちは」を表す第２コンテンツＣ2が表示される。

図４は、制御装置３５が第２コンテンツＣ2を再生する処理のフローチャートである。図４の処理は、例えば収音装置３１による音響Ｖcの収音（音響信号Ｙの生成）を契機として開始される。図４の処理が開始されると、解析部３５２は、基準信号Ｚのうち第１コンテンツＣ1の音響信号Ｙに類似する類似部分Ｐを特定する（Ｓa1）。具体的には、基準信号Ｚにおける複数の解析区間のうち、当該解析区間と音響信号Ｙとについて算定された類似指標（相互相関の絶対値）が最大となる解析区間が類似部分Ｐとして特定される。解析部３５２は、第２コンテンツＣ2のうち類似部分Ｐに時間的に対応する処理部分Ｔ2を特定する（Ｓa2）。ステップＳa1およびステップＳa2は、音響信号Ｙと基準信号Ｚとを対比することで、第１コンテンツＣ1と第２コンテンツＣ2との時間的な対応を解析する処理である。再生制御部３５４は、第１コンテンツＣ1と第２コンテンツＣ2との時間的な対応のもとで、第１コンテンツＣ1の再生に並行して第２コンテンツＣ2を再生装置３３に再生させる（Ｓa3）。

例えば、第２コンテンツＣ2の再生を第１コンテンツＣ1の再生に時間的に対応させるための同期用のデータ（特許文献１の技術では透かしデータ）を利用する構成では、第１コンテンツＣ1を構成する音響信号に当該データを事前に埋め込む必要がある。それに対して、本実施形態では、音響信号Ｙと基準信号Ｚとを対比することで、第１コンテンツＣ1と第２コンテンツＣ2との時間的な対応が解析され、当該解析された時間的な対応のもとで、第１コンテンツＣ1の再生に連動して第２コンテンツＣ2が再生される。したがって、第２コンテンツＣ2の再生を第１コンテンツＣ1の再生に時間的に対応させる（すなわち同期させる）ためのデータを第１コンテンツＣ1に埋め込むことが不要である。また、音響信号に同期用のデータを埋め込むことに起因した音声の変化が、本実施形態によれば発生しないという利点もある。

本実施形態では、音響信号Ｙと基準信号Ｚとの相互相関を算定することで、当該音響信号Ｙと当該基準信号Ｚとが対比されるから、音響信号Ｙと基準信号Ｚとの間における波形の類似性を加味して、第２コンテンツＣ2の再生を第１コンテンツＣ1の再生に高精度に連動させることができる。

＜変形例＞
以上に例示した態様に付加される具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２個以上の態様を、相互に矛盾しない範囲で適宜に併合してもよい。

（１）前述の形態では、第１コンテンツＣ1の再生に並行して第２コンテンツＣ2を再生したが、例えば第１コンテンツＣ1の再生に後続して第２コンテンツＣ2を再生してもよい。例えば第１コンテンツＣ1が終了した直後から第２コンテンツＣ2が再生される。以上の構成では、基準信号Ｚの終点が第２コンテンツＣ2の始点に一致する。すなわち、基準信号Ｚは、第２コンテンツＣ2と時間的に対応している。再生制御部３５４は、基準信号Ｚの類似部分Ｐの終点から基準信号Ｚの終点まで時間軸上で経過したら、当該第２コンテンツＣ2を再生装置３３に再生させる。第１コンテンツＣ1の再生に連動して第２コンテンツＣ2を再生させる構成には、第１コンテンツＣ1の再生に並行して第２コンテンツＣ2を再生する構成と、第１コンテンツＣ1の再生に後続して第２コンテンツＣ2を再生する構成との双方が含まれる。ただし、第１コンテンツＣ1の再生に並行して第２コンテンツＣ2を再生する前述の形態によれば、第１コンテンツＣ1の再生に後続して第２コンテンツＣ2が再生される構成と比較して、第１コンテンツＣ1と第２コンテンツＣ2との時間的な対応を利用者が容易に把握できるという利点がある。

（２）前述の形態では、第１コンテンツＣ1の再生により放音される音響Ｖcを表す信号を基準信号Ｚとして例示したが、基準信号Ｚは以上の例示に限定されない。例えば音響Ｖcから情報量を低減した信号（例えば音響Ｖcの信号に対するデータ圧縮により音質を低下させた信号）を基準信号Ｚとして利用してもよい。

また、基準信号Ｚは、音響Ｖcを表す信号に限定されない。例えば音響Ｖcに対して何らかの処理をして生成した信号を基準信号Ｚとして利用してもよい。例えば、第１コンテンツＣ1の音響Ｖcのうち音量が所定値を上回る部分を抽出した信号、または、第１コンテンツＣ1の音響Ｖcの立ち上がりの時点（アタック部分）にパルスを配列した信号を基準信号Ｚとしてもよい。ただし、第１コンテンツＣ1の再生により放音される音響Ｖcを表す信号を基準信号Ｚとして利用する構成によれば、第１コンテンツＣ1とは別個に基準信号Ｚを用意する必要がない。以上の説明から理解される通り、音響信号Ｙとの時間的な解析が可能な信号であれば、基準信号Ｚが表す対象や波形は任意である。

（３）前述の形態では、第１コンテンツＣ1の時間軸上の全体にわたり音響Ｖcを表す信号を基準信号Ｚとして利用したが、例えば時間軸上の互いに離れた複数の区間の各々について第１コンテンツＣ1の音響Ｖcを表す信号を基準信号Ｚとしてもよい。すなわち、第１コンテンツＣ1の音響Ｖcを間欠的に除去した信号が基準信号Ｚとして利用される。

（４）前述の形態では、音響Ｖcと映像Ｍcとで第１コンテンツＣ1を構成したが、音響Ｖcのみで第１コンテンツＣ1を構成してもよい。すなわち、第１コンテンツＣ1が映像Ｍcを含むことは必須ではない。

（５）前述の形態では、第１コンテンツＣ1の字幕を示す画像を第２コンテンツＣ2として例示したが、第２コンテンツＣ2は字幕を示す画像に限定されない。例えば第１コンテンツＣ1に出演する俳優や第１コンテンツＣ1のストーリーを紹介する画像（静止画または映像）を第２コンテンツＣ2としてもよい。また、第１コンテンツＣ1に関連した音響を第２コンテンツＣ2として利用してもよい。第２コンテンツＣ2が音響を含む構成では、当該音響を放音する放音装置（例えばスピーカ）が再生装置３３として利用される。また、音響および画像の双方で第２コンテンツＣ2を構成してもよい。すなわち、再生装置３３による再生は、画像の表示と音響の放音とを包含する。以上の説明から理解される通り、第１コンテンツＣ1に関連した各種の情報が第２コンテンツＣ2として採用され得る。また、第１コンテンツＣ1に無関係の情報（例えば広告）を第２コンテンツＣ2としてもよい。

なお、第１コンテンツＣ1の音響Ｖcに関連した音響（例えば第１コンテンツＣ1に含まれる音響Ｖcを高音質で表した音響）を第２コンテンツＣ2とする場合、音響Ｖcに関連した音響を表す信号を基準信号Ｚとして利用してもよい。以上の構成では、基準信号Ｚと第２コンテンツＣ2とを別個に用意する必要がない。

（６）前述の形態では、第１コンテンツＣ1の時間軸上の全体にわたり連続した第２コンテンツＣ2を採用したが、図５に例示される通り、第１コンテンツＣ1のうち時間軸上の一部分に対応した第２コンテンツＣ2を採用してもよい。すなわち、第２コンテンツＣ2のうち基準信号Ｚの類似部分Ｐに時間的に対応する処理部分Ｔ2が存在しない場合も想定される。以上の構成では、第１コンテンツＣ1の再生部分Ｔ1が第２コンテンツＣ2に到達したら、当該第２コンテンツＣ2の再生を開始する。具体的には、類似部分Ｐの終点から第２コンテンツＣ2の始点まで経過したら、当該第２コンテンツＣ2を再生装置３３に再生させる。

また、図６に例示される通り、時間軸上の互いに離れた複数の部分で第２コンテンツＣ2が構成されてもよい。第１コンテンツＣ1と第２コンテンツＣ2との時間的な対応のもとで、第２コンテンツＣ2を構成する複数の部分のうち、第１コンテンツＣ1の再生部分Ｔ1に対応する部分が再生される。

（７）前述の形態では、解析区間と音響信号Ｙとについて算定される相互相関を類似指標として利用したが、音響信号Ｙと基準信号Ｚとの類否の度合を示す類似指標は、相互相関に限定されない。すなわち、音響信号Ｙと基準信号Ｚとを対比する方法は、当該音響信号Ｙと当該基準信号Ｚとの相互相関の算定には限定されない。

（８）前述の形態では、情報処理装置３０に対する利用者からの操作に応じて収音装置３１による音響Ｖcの収音を開始したが、収音装置３１による収音は、例えば第１コンテンツＣ1の再生に並行して定期的に実行してもよい。

（９）前述の形態において、情報処理装置３０に種類が相違する複数の第２コンテンツＣ2を記憶してもよい。例えば、第１コンテンツＣ1にそれぞれ関連する複数の第２コンテンツＣ2のうち利用者が選択した第２コンテンツＣ2が再生される。以上の構成では、利用者が所望する第２コンテンツＣ2を再生することが可能である。

（１０）前述の形態では、再生装置２０と情報処理装置３０とを別体とする構成を例示したが、再生装置２０と情報処理装置３０とを一体に構成してもよい。例えば情報処理装置３０の再生装置は、第１コンテンツＣ1を再生に連動して第２コンテンツＣ2を再生する。

（１１）前述の形態に係る情報処理装置３０は、上述した通り、コンピュータ（具体的には制御装置３５）とプログラムとの協働により実現される。前述の形態に係るプログラムは、コンピュータが読取可能な記録媒体に格納された形態で提供されてコンピュータにインストールされ得る。記録媒体は、例えば非一過性（non-transitory）の記録媒体であり、ＣＤ-ＲＯＭ等の光学式記録媒体（光ディスク）が好例であるが、半導体記録媒体または磁気記録媒体等の公知の任意の形式の記録媒体を含み得る。なお、非一過性の記録媒体とは、一過性の伝搬信号（transitory, propagating signal）を除く任意の記録媒体を含み、揮発性の記録媒体を除外するものではない。また、通信網を介した配信の形態でプログラムをコンピュータに提供することも可能である。

＜付記＞
以上に例示した形態から、例えば以下の構成が把握される。

本発明の好適な態様（第１態様）に係る情報処理方法は、第１コンテンツの再生により放音される音響の収音により生成された音響信号と、第２コンテンツと時間的に対応している基準信号とを対比することで、前記第１コンテンツと前記第２コンテンツとの時間的な対応を解析し、前記解析された時間的な対応のもとで、前記第１コンテンツの再生に連動して前記第２コンテンツを再生装置に再生させる。以上の態様では、第１コンテンツの再生により放音される音響の収音により生成された音響信号と、第２コンテンツと時間的に対応している基準信号とを対比することで、第１コンテンツと第２コンテンツとの時間的な対応が解析され、当該解析された時間的な対応のもとで、第１コンテンツの再生に連動して第２コンテンツが再生される。つまり、第２コンテンツの再生を第１コンテンツの再生に時間的に対応させるためのデータ（特許文献１の技術では透かしデータ）を第１コンテンツに埋め込むことが不要になる。

第１態様の好適例（第２態様）において、前記基準信号は、前記第１コンテンツの再生により放音される前記音響を表す信号である。以上の態様では、第１コンテンツの再生により放音される音響を表す信号が基準信号として利用されるから、基準信号を第１コンテンツとは別個に用意する必要がない。

第１態様または第２態様の好適例（第３態様）において、前記音響信号と前記基準信号との相互相関を算定することで、当該音響信号と当該基準信号とを対比する。以上の態様では、音響信号と基準信号との相互相関を算定することで、当該音響信号と当該基準信号とが対比されるから、音響信号と基準信号との間における波形の類似性を加味して第２コンテンツの再生を第１コンテンツの再生に高精度に連動させることができる。

第１態様から第３態様の好適例（第４態様）において、前記第１コンテンツの再生に並行して、前記第２コンテンツを再生装置に再生させる。以上の態様では、第１コンテンツの再生に並行して第２コンテンツが再生されるから、第１コンテンツの再生に後続して第２コンテンツが再生される構成と比較して、第１コンテンツと第２コンテンツとの時間的な対応を利用者が容易に把握できる。

以上に例示した各態様の情報処理方法を実行する情報処理装置、または、以上に例示した各態様の情報処理方法をコンピュータに実行させるプログラムとしても、本発明の好適な態様は実現される。

１００…再生システム、２０…再生装置、３０…情報処理装置、３１…収音装置、３３…再生装置、３５…制御装置、３７…記憶装置、３５２…解析部、３５４…再生制御部。

Claims (6)

1. 第１コンテンツの再生により放音される音響の収音により生成された音響信号と、第２コンテンツと時間的に対応している基準信号とを対比することで、前記第１コンテンツと前記第２コンテンツとの時間的な対応を解析し、
   前記解析された時間的な対応のもとで、前記第１コンテンツの再生に連動して前記第２コンテンツを再生装置に再生させる
   コンピュータにより実現される情報処理方法であって、
   前記基準信号は、前記第１コンテンツの再生により放音される前記音響のうち音量が所定値を上回る部分を表す信号である
   情報処理方法。
2. 前記音響信号と前記基準信号との相互相関を算定することで、当該音響信号と当該基準信号とを対比する
   請求項１の情報処理方法。
3. 前記第１コンテンツの再生に並行して、前記第２コンテンツを再生装置に再生させる
   請求項１または請求項２の情報処理方法。
4. 第１コンテンツの再生により放音される音響の収音により生成された音響信号と、第２コンテンツと時間的に対応している基準信号とを対比することで、前記第１コンテンツと前記第２コンテンツとの時間的な対応を解析する解析部と、
   前記解析部が解析した時間的な対応のもとで、前記第１コンテンツの再生に連動して前記第２コンテンツを再生装置に再生させる再生制御部と
   を具備し、
   前記基準信号は、前記第１コンテンツの再生により放音される前記音響のうち音量が所定値を上回る部分を表す信号である
   情報処理装置。
5. 前記解析部は、前記音響信号と前記基準信号との相互相関を算定することで、当該音響信号と当該基準信号とを対比する
   請求項４の情報処理装置。
6. 前記再生制御部は、前記第１コンテンツの再生に並行して、前記第２コンテンツを再生装置に再生させる
   請求項４または請求項５の情報処理装置。
   

Images