JP3695274B2

JP3695274B2 - Entertainment system and reception side terminal and transmission side device used therefor

Info

Publication number: JP3695274B2
Application number: JP2000083515A
Authority: JP
Inventors: 和雄幸田; 浩山田
Original assignee: Victor Company of Japan Ltd
Current assignee: Victor Company of Japan Ltd
Priority date: 1999-11-05
Filing date: 2000-03-24
Publication date: 2005-09-14
Anticipated expiration: 2020-03-24
Also published as: JP2001197448A

Description

【０００１】
【発明の属する技術分野】
本発明はエンタテインメントシステム並びにそれに用いる受信側端末及び送信側装置に係り、特に映像／音声発生源からの映像と音声に同期させて外部機器に様々な挙動を行わせることで、ホームエンタテインメントを提供するエンタテインメントシステム並びにそれに用いる受信側端末及び送信側装置に関する。
【０００２】
【従来の技術】
ビデオソフトやテレビジョン放送などを楽しむときは、内容自身を楽しむしかなく、当然のことながら、何度見ても同一の内容しか楽しめない。また、ビデオテープやディスクなどの様々なパッケージメディアが市場にあるが、どれもメディアの形態が変わるのみで、内容を楽しむことにおいて進化は満たされない。
【０００３】
一方、従来、映像／音声発生源からの映像と音声に同期させて外部機器に様々な挙動を行わせるエンタテインメントシステムが考えられている。このエンタテインメントシステムの一例として、本出願人は先に特開平７−１９４８５１号公報にて、映像と音声を同期させてデモンストレーションを行うデモンストレーション装置を開示した。この本出願人が開示したデモンストレーション装置は、映像情報と音声情報と制御情報とが記録された単一の記録媒体と、この記録媒体から前記情報を復調する手段と、復調した映像情報と音声情報とを再生する手段と、復調した制御情報をもとにデモンストレーション動作をさせる制御手段とからなり、前記映像情報と音声情報とを前記記録媒体の主記録領域に記録し、前記制御情報を前記記録媒体の補助記録領域に記録したことを特徴とする。
【０００４】
このデモンストレーション装置によれば、単一の記録媒体から再生され、更に復調された情報に基づいて外部機器（具体的には人形やロボット）の動作などにより、デモンストレーション動作（エンタテインメント動作）が行われるため、単一の記録媒体を変更するだけで、映像と音声に同期したデモンストレーション動作（エンタテインメント動作）の内容を容易に変更することができる。
【０００５】
【発明が解決しようとする課題】
しかるに、上記の本出願人が開示したデモンストレーション装置では、同じ記録媒体から再生され、更に復調された情報に基づいて制御される外部機器の動作は単一の動作であり、拡張性に欠けるという問題がある。また、デモンストレーションの内容を変更するには、再生する記録媒体を変更する必要があり、その変更操作が面倒で、操作性にも問題がある。
【０００６】
本発明は以上の点に鑑みなされたもので、拡張性や柔軟性のあるエンタテインメントが可能なエンタテインメントシステム並びにそれに用いる受信側端末及び送信側装置を提供することを目的とする。
【０００７】
また、本発明の他の目的は、操作性を向上したエンタテインメントシステム並びにそれに用いる受信側端末及び送信側装置を提供することにある。
【０００８】
【課題を解決するための手段】
本発明は上記の目的を達成するため、互いに同期した映像情報と音声情報を発生する映像／音声発生源と、映像／音声発生源から出力された映像情報及び音声情報による所望のシーンに対応した時刻あるいは時点で、所望のシーンに関する付加情報を発生する付加情報発生手段と、入力制御情報により駆動される制御機器を備えており、この制御機器により入力制御情報に応じた動作をする、所望外形形状の外部機器と、使用者の属性及び使用場所の属性の少なくとも一方の属性を制限情報として、使用者の設定により又は自動設定により予め記憶している制限情報記憶手段と、付加情報発生手段により発生された付加情報を、制限情報記憶手段から読み出した制限情報により制限する第１の変換手段と、第１の変換手段から出力された制限後の付加情報を送信する送信手段と、外部機器内に組み込まれており、送信された制限後の付加情報を受信する受信手段と、外部機器内に組み込まれており、受信手段により受信された制限後の付加情報に対応した、互いに異なる挙動を外部機器に行わせる複数の制御情報を発生し、その複数の制御情報の中から一又は二以上の制御情報をランダムに選択して制御機器へ入力制御情報として出力する第２の変換手段とを有する構成としたものである。
【０００９】
この発明では、映像／音声発生源から出力された映像情報及び音声情報による所望のシーンに対応した時刻あるいは時点で発生される付加情報に基づいて、所望形状の外部機器に、上記の所望のシーンに応じた挙動をさせることができる。従って、映像／音声発生源から出力された映像情報及び音声情報を、上記の外部機器が使用者と共にあたかも楽しんでいるかの如くに振る舞わせることができる。
【００１０】
また、この発明では、上記の外部機器の挙動は、同一の制限後の付加情報であっても、複数の制御情報の中からランダムに選択した一又は二以上の制御情報に基づいて行われるので、同一のシーンに対しても、再生あるいは表示する毎に異なる挙動を外部機器に行わせることができる。
【００１１】
また、本発明は、上記の付加情報発生手段を、映像／音声発生源から出力された映像情報と音声情報による所望のシーンに対応した時刻で再生されることを指定する時間データと、シーンの状況を説明する状況説明データとからなるデータを、付加情報として発生することを特徴とする。この発明では、付加情報を映像／音声発生源から出力された映像情報と音声情報による所望のシーンに対応付けることができる。
【００１２】
また、上記の目的を達成するため、本発明は、映像／音声発生源が、映像情報と音声情報とが記録された記録媒体から映像情報と音声情報とを読み取る読取装置からなり、付加情報発生手段は、記録媒体に記録されている付加情報を再生する再生手段とからなることを特徴とする。
【００１３】
また、上記の目的を達成するため、本発明は、映像／音声発生源が、少なくとも映像情報と音声情報とを同期させた放送信号を受信する受信装置であり、付加情報発生手段は、放送信号と共に送信される放送信号の番組の状況を説明する付加情報を抽出する付加情報抽出器であることを特徴とする。
【００１４】
更に、上記の目的を達成するため、本発明は、映像／音声発生源が、ゲームコントローラの指示により映像情報と音声情報とを同期させて発生するゲーム処理装置であり、付加情報発生手段は、ゲーム処理装置から得られるゲーム展開情報に応じた状況の説明データを付加情報として発生することを特徴とする。
【００１５】
また、上記の目的を達成するため、本発明は、映像情報と音声情報とを同期させた放送信号の番組に関する情報内容の付加情報を送信する送信側装置と、送信側装置からの付加情報を受信する受信側端末とからなるエンタテインメントシステムにおける受信側端末を、送信側装置から送信された付加情報を受信する受信器と、送信側装置から送信された付加情報を受信する受信器と、受信器で受信した付加情報を、使用者の属性及び使用場所の属性の少なくとも一方の属性である制限情報により制限する第１の変換手段と、入力制御情報により駆動される制御機器を備えており、この制御機器により入力制御情報に応じた動作をする所望外形形状機器と、第１の変換手段から出力された制限後の付加情報を送信する送信手段と、送信手段により送信された制限後の付加情報を受信する受信手段と、受信手段により受信された制限後の付加情報に対応した、互いに異なる挙動を所望外形形状機器に行わせる複数の制御情報を発生し、その複数の制御情報の中から一又は二以上の制御情報をランダムに選択して制御機器に入力制御情報として供給する第２の変換手段とを有する構成としたものである。
【００１６】
また、本発明は、映像情報と音声情報とを同期させた放送信号の番組に関する情報内容の付加情報を放送信号とは別経路で送信する送信側装置と、送信側装置からの付加情報を受信する受信側端末とからなるエンタテインメントシステムにおける受信側端末を、送信側装置から送信された付加情報を受信する受信器と、受信器で受信した付加情報を、使用者の属性及び使用場所の属性の少なくとも一方の属性である制限情報により制限する第１の変換手段と、入力制御情報により駆動される制御機器を備えており、この制御機器により入力制御情報に応じた動作をする所望外形形状機器と、制限後の付加情報に対応した、互いに異なる挙動を所望外形形状機器に行わせる複数の制御情報を発生し、その複数の制御情報の中から一又は二以上の制御情報をランダムに選択して制御機器に入力制御情報として供給する第２の変換手段とを有し、受信器、第１の変換手段及び第２の変換手段は、制御機器と共に所望外形形状機器内に組み込まれていることを特徴とする。
【００１７】
この発明では、受信側端末を、上記の受信器、第１の変換手段及び第２の変換手段が、制御機器と共に所望外形形状機器内に組み込まれている構成としたので、送信側装置から付加情報とは別経路で送信される放送信号は既存の放送信号受信装置で受信できると共に、その放送信号受信装置の動作とは関係なく、既存の放送システムと共存して付加情報を受信して、その付加情報に対応させた挙動を所望外形形状機器に行わせることができ、また、使用者は放送信号受信装置を用意しなくても所望外形形状機器だけを購入することで所望のエンタテインメントを享受できる。
【００１８】
また、上記の目的を達成するため、本発明は、映像情報と音声情報とを同期させた放送信号の番組に関する情報内容の付加情報を放送信号とは別経路で送信する送信側装置と、送信側装置からの付加情報を受信し、受信した付加情報を使用者の属性を加味した形式に変換して出力し、更に出力される付加情報に対応した複数の制御情報の中から選択される一又は二以上の制御情報に応じて所望外形形状を有する所望外形形状機器を動作させる受信側端末とからなるエンタテインメントシステムにおける送信側装置を、受信側端末における所望外形形状機器の動作に関し、放送信号の所望のシーンに対応して所望外形形状機器が動作するよう、所望のシーンの状況を説明する状況説明データを付加情報として送信することを特徴とする。
【００１９】
この発明では、放送信号は既存の放送信号受信装置で受信させることができると共に、既存の放送システムと共存して別の経路で付加情報を送信して、所望外形形状機器を放送信号の所望のシーンに対応した動作をさせるように制御できる。
【００２０】
【発明の実施の形態】
次に、本発明の実施の形態について図面と共に説明する。本発明の第１の実施の形態では、図１に示すように例えばＤＶＤ（Digital Versatile Disc）のような光ディスク１に記録された映像情報と音声情報を、図２のブロック図に示す再生装置により再生して図３のブロック図に示す人形３１に無線送信して、これを動作制御する。すなわち、この第１の実施の形態のエンタテインメントシステムは、図２に示す再生装置と図３に示す外部機器である人形３１とからなる。
【００２１】
図１に示す光ディスク１の記録領域の大部分を占める主記録領域２には例えば映画の本編の映像・音声等のデータが記録されており、残りの副記録領域３には付加情報が記録されている。
【００２２】
ここで、主記録領域２には本編（例えば映画）の映像情報と音声情報が、従来のＤＶＤと同様に、絶対時間に沿って記録されている。すなわち、主記録領域２に記録されている情報は、図１に示すように、タイムスタンプと称されるヘッダーデータと、それに続く本編の映画・音声等のデータの繰り返しからなる。図１の４ａ、４ｂ、４ｃは本編の映画・音声等のデータである。タイムスタンプは、ここでは時刻Ａ、時刻Ｂ、時刻Ｃというように、絶対時刻の順番に時刻を示しており、一定周期で断続的に記録されている。後述の図２の再生装置では、このタイムスタンプを時間基準としてデータを再生し、画像と音声を復号し、受像機に出力する。
【００２３】
一方、副記録領域３に記録される付加情報は、本編の映画において、例えばアクションシーンで「主人公が敵を倒す。」とか、コンテンツのエンディングで「主人公と相手役がハッピーエンドを迎える。」などの各シーンの状況説明を意味する情報で、本編のコンテンツデータの品質に影響を与えない手段で記録されている。
【００２４】
付加情報も、図１に示すように、タイムスタンプ５ａ、５ｃ、５ｅと付加情報５ｂ、５ｄ、５ｆとが交互に繰り返して記録されている。ただし、付加情報は、すべてのシーンに対して用意する必要はなく、必要な時刻のみのデータとしてよい。図１では本編は時刻Ａ、Ｂ、Ｃ、Ｄと連続してデータがあるのに対し、付加情報はＡ、Ｃ、Ｆの時刻に対してのみ付加情報５ｂ、５ｄ、５ｆを記録してある。
【００２５】
なお、副記録領域３は図１ではディスク最内周としたが、本編の再生に影響がなければ、どの位置に記録しても構わない。記録する本編データに付加情報を書き込めるエリアがあれば、その領域に書き込んでもよく、あるいは光ディスク１の裏面を用いてもよい。更に、書き込む記録媒体は、本編と同じ素材でもよいし、光ディスクと半導体のように異なる媒体（メディア）でもよい。
【００２６】
次に、図２の再生装置について説明する。同図に示す再生装置は、光ディスク１の主記録領域２の記録映画の内容に同期して、副記録領域３から各付加情報を再生する専用の再生装置であり、映画と付加情報の両者の再生を行う。この情報を例えば図３に示す人形のような外部の再生装置に無線伝送する。
【００２７】
図２の再生装置において、主記録領域２の本編を再生する処理は、従来のＤＶＤ再生装置と同様のＤＶＤ再生部１０で行われる。すなわち、メカ制御装置１１により回転制御されている光ディスク１の主記録領域２の記録本編データは、本編読取装置１２により読み取られてタイムスタンプ検出器１３に供給される一方、本編読取装置１５に供給される。タイムスタンプ検出器１３は入力本編再生信号中から前記タイムスタンプを検出し、そのタイムスタンプを基準時刻発生器１４に供給して基準時刻を発生させる。本編読取装置１５はこの基準時刻に基づいて、本編再生信号中の画像と音声／字幕などを再生し、テレビジョン受像機２５で表示させる。
【００２８】
一方、光ディスク１の副記録領域３に記録されている付加情報は、専用の読取装置１６によって読み取られ、付加情報再生装置１７に供給されて付加情報５ｂ、５ｄ、５ｆが再生される一方、タイムスタンプ検出器１８により前記タイムスタンプ５ａ、５ｃ、５ｅが検出される。この付加情報のタイムスタンプは、本編のタイムスタンプと比較器１９で比較され、その比較結果が付加情報読み込みタイミング発生器２０に供給される。付加情報読み込みタイミング発生器２０は、付加情報のタイムスタンプと本編のタイムスタンプが一致した時刻のタイミングで付加情報再生装置１７から再生付加情報を出力させる。
【００２９】
付加情報再生装置１７から読み出される再生付加情報について、図５と共に更に詳細に説明するに、図５（Ａ）は付加情報のフォーマットの一例を示す。同図（Ａ）に示すように、一つの付加情報は、タイムスタンプと称される１４ビットの時間データ６（図１のタイムスタンプ５ａ、５ｃ又は５ｅに相当）と、８ビットの状況説明データ７（図１のデータ５ｂ、５ｄ又は５ｆに相当）とからなる。時間データ６はコンテンツの演奏時刻の絶対時間を表すもので、何時何分何秒を表している。時間に２ビット、分と秒に各６ビットが割り当てられている。
【００３０】
状況説明データ７は、「誰が誰とどういう状況か」を説明するデータで、図５に示すように、「誰が」に２ビットａ０ａ１を、「誰と」に２ビットｂ０ｂ１を、「どういう状況か」に４ビットｃ０ｃ１ｃ２ｃ３を割り当てて表す。ここで、ａ０ａ１は"００"のとき使用禁止、"０１"のとき主人公、"１０"のとき相手役、"１１"のとき敵役をそれぞれ示し、ｂ０ｂ１は"００"のとき第三者、"０１"のとき主人公、"１０"のとき相手役、"１１"のとき敵を表す。更に、ｃ０ｃ１ｃ２ｃ３は、例えば"００００"のとき「喜ぶ」、"０００１"のとき「怒る」、"０１００"のとき「助かる」、"１０１０"のとき「危ない」、"１１１１"のとき「死ぬ」などという状況を示す。ここでは、状況説明ビットｃ０〜ｃ３は４ビットであるので、１６種類の状況を表すことができる。勿論、更にビット数を増やすことで、より多くの状況説明が可能となる。
【００３１】
ここでは、図５（Ｂ）に示すような再生付加情報が得られたとする。時刻ｔ０では、本編は主人公が敵に襲われ危ないシーンであったとする。付加情報としては最も状況説明に適切なデータが選ばれる。すなわち、主人公（ａ０，ａ１＝０１）が敵役（ｂ０ｂ１＝１１）に襲われ、危ない（ｃ０ｃ１ｃ２ｃ３＝１０１０）シーンは、状況説明データ７は"０１１１１０１０"である。次の瞬間の時刻ｔ１では、襲われたがうまく助かるというシーンであるとすると、同様に、状況説明データ７は"０１１１０１００"となる。更に、時刻ｔ２では相手役が第三者と喜ぶシーンであるため、状況説明データ７は"１０００００００"である。
【００３２】
これらの状況説明データ７は、図２の第一変換器２１に供給され、地域性などにより付加情報の扱いに関して制限が加えられる。制限情報は、プログラムメモリ２２に蓄えられている。なお、制限情報はマニュアルで決めてもよいし、自動設定の場合も考えられる。また、第一変換器２１は何の制限も加えないこともある。第一変換器２１から取り出された再生付加情報は、送信器２３に供給され、ここで送信周波数帯の信号に変換された後、アンテナ２４より無線送信される。
【００３３】
無線送信信号は、図３に示す外部機器の一例としての人形３１の受信アンテナ３２で受信され、受信器３３でベースバンド帯の信号に変換されて第二変換器３４に入力される。第二変換器３４は受信した状況説明データに従ってプログラムメモリ３５から読み出した複数の制御方法のデータのうち、例えばランダムに選択されたいずれか一の制御方法のデータに従って制御機器３６を駆動制御する。制御機器３６には人形３１の声を発声するスピーカ、人形３１の手や足を動かすモータ、人形３１の目などを点灯するライトなどがあり、これらが受信状況説明データに従って駆動制御される。
【００３４】
この場合、同一の受信状況説明データであっても、プログラムメモリ３５から読み出した複数の制御方法のデータの一つがランダムに選択されるため、人形３１の挙動は同一とは限らず、変化に富んだ挙動をすることができる。
【００３５】
上記の第二変換器３４の構成及び動作について、更に具体的に図４と共に説明する。図４中、図３と同一構成部分には同一符号を付し、その説明を省略する。図４において、第二変換器３４は、状況説明データ抽出器４１、メモリ読み出しアドレス発生器４２、乱数発生器４３、レジスタ４４及び選択器４５から構成されている。
【００３６】
受信器３３からの受信信号は、第二変換器３４内の状況説明データ抽出器４１に供給されて、図５（Ａ）に７で示した状況説明データが抽出される。この状況説明データは、メモリ読み出しアドレス発生器４２に供給され、プログラムメモリ３５の読み出しアドレスに変換された後、プログラムメモリ３５に供給される。プログラムメモリ３５は、予め状況説明データ毎に各１６種類の制御方法のデータを格納しており、上記の読み出しアドレスの入力により、状況説明データに応じた複数の制御方法を示すデータを読み出してレジスタ４４に供給して保持させる。ある一つの状況説明データに対応する上記の１６種類の制御方法としては、例えば表１に示すようなものがある。
【００３７】
【表１】

【００３８】
レジスタ４４に保持された複数の制御方法を示すデータは、乱数発生器４３からの乱数が選択信号として入力される選択器４５により一つの制御方法を示すデータがランダムに選択されて制御機器３６へ出力される。ここで、状況説明データ抽出器４１で抽出された状況説明データが、例えば図５（Ｂ）に示した時刻ｔ０における、主人公が危ないことを示す状況説明データ"０１１１１０１０"であり、選択器４５により例えば表１の制御方法８のデータが選択された場合は、人形３１は制御機器３６内のスピーカを介して大声で発生し、かつ、制御機器３６内のモータを駆動して手をぱたぱた動かす動きをすることとなる。
【００３９】
選択器４５による選択動作はランダムであることから、同一の光ディスク１を複数回視聴する際に、人形３１が常に同一の反応をするわけではない。よって、映画を通して「人形の反応を楽しむ」という新しい楽しみ方を得ることができる。勿論、乱数発生器４３をある順番に従う選択信号発生器に置き換えてもよい。
【００４０】
次に、使用者が宗教上などの理由によって、暴力表現に対して厳しい地域であったとする。この場合は、時刻Ａのデータを図２の第一変換器２１で削り、人形３１には無線送信しないようにする。一方、時刻Ｂの助かるシーンでは、データを人形３１に無線送信し、人形３１の第二変換器３４では「拍手する」などの動作を選択する。更には、第一変換では、使用者が男か女かを、あるいは人形３１の性別を設定することで、発声する声色を変えたりすることも可能である。
【００４１】
このように、この第１の実施の形態では、光ディスク１に記録されている映画の映像及び音声に同期して付加情報を再生し、付加情報を人形３１へ無線送信し、人形は受信した付加情報に応じて、例えば映画の「主人公が敵を倒す」シーンでは掛け声を発声するとか、「ハッピーエンド」のシーンでは拍手をするなどのコンテンツの内容に従って、あたかも同時に映画を楽しんでくれるもう一人の観客であるかの如くに振る舞う。
【００４２】
このとき、掛け声／笑い声等の出力内容は、記録された付加情報一種類につき単一ではなく、仮に映画が「主人公が泣く」シーンであったならば、これに対応する付加情報一種類につき「慰める」、「勇気づける」、「一緒に泣く」、「笑う」などが選択可能で、更に声の大きさや声の種類など人形３１内の判断次第で選択の範囲をもつ。また、光ディスク１に同一の付加情報が複数回記録されていた場合には、人形３１で常に同じように笑うのではなく、その都度笑い方を変えるなどが可能である。これが第二変換器３４による動作である。
【００４３】
このとき、使用する国や地域、更には宗教上などの理由により、泣くべきところを笑ってはいけない場合がある。このように第二変換を行う範囲に予め制限をかけるのが第一変換器２１の動作である。
【００４４】
次に、本発明の第２の実施の形態について説明する。図６は本発明になるエンタテインメントシステムの第２の実施の形態のシステム構成図を示す。同図中、図２と同一構成部分には同一符号を付し、その説明を省略する。第１の実施の形態では、最終的な人形３１の挙動（笑い声、手足の動作など）は、プログラムメモリ３５に予め記憶しておいた制御内容のデータに従うが、この第２の実施の形態では、制御内容のデータを人形にダウンロードするようにしたものである。
【００４５】
図６において、検出器５１は付加情報再生装置１７からの再生付加情報のうち、状況説明データの上位２ビットａ０ａ１が「００」であるかどうか検出する。この２ビットａ０ａ１は、第１の実施の形態では図５（Ａ）で説明したように、「００」は使用禁止であるが、この実施の形態では、ダウンロード用のヘッダとして利用し、残りの６ビット（ｂ０、ｂ１、ｃ０〜ｃ３）は第二変換のためのデータとして用いる。従って、検出器５１によりａ０ａ１が「００」であると検出されたときは、その状況説明データ８ビットはダウンロード用のデータである。
【００４６】
検出器５１の出力検出信号はスイッチ回路５２にスイッチング信号として印加され、これを端子５２ａ又は５２ｂに接続する。ここで、スイッチ回路５２の端子５２ａは第一変換器２１の出力側に接続され、端子５２ｂは付加情報再生装置１７の出力側に接続されている。スイッチ回路５２は検出器５１からａ０ａ１＝「００」の検出信号が入力されないときには、端子５２ａに接続されて第一変換器２１の出力信号を送信器２３に出力する。これにより、第１の実施の形態と同様にして付加情報が無線送信される。
【００４７】
一方、スイッチ回路５２は検出器５１からａ０ａ１＝「００」の検出信号が入力されるときには、端子５２ｂに接続されて、付加情報再生装置１７から出力されるダウンロード用のデータを送信器２３に出力する。これにより、ダウンロード用のデータがそのまま無線送信される。
【００４８】
人形４７は人形３１に検出器５３を付加し、更にプログラムメモリ５４をダウンロード可能な構成としたものである。人形４７内の検出器５３は受信器３３からの受信付加情報の状況説明データの上位２ビットａ０ａ１が「００」であるかどうか検出し、「００」であるときプログラムメモリ５４に書き込み命令を出力する。プログラムメモリ５４はこの書き込み命令に基づき、状況説明データの下位６ビットをダウンロードする。このときの状況説明データの下位６ビットは制御内容を示すデータである。なお、制御内容を示すデータが６ビット以上必要な場合は、上位２ビットａ０ａ１が「００」である状況説明データを複数回送信することで必要なビット数が得られる。
【００４９】
次に、第２の実施の形態の要部の変形例について説明する。図９は本発明になるエンタテインメントシステムの第２の実施の形態の要部の変形例のブロック図を示す。同図中、図６と同一構成部分には同一符号を付し、その説明を省略する。第２の実施の形態では、第二変換器３４による制御手段の選択を、プログラムメモリ５４に一旦格納されたデータから人形４７が選択する、という手法をとっていた。この変形例は、これに加えて最終的な制御手段を「直接」データとしてパッケージメディアに予め記録し、人形９７から出力するようにしたものである。ここでは、一例として音声について説明する。
【００５０】
この変形例では、前述した光ディスク１に記録される付加情報５中の状況説明データ７の上位３ビットａ０ａ１ｂ０を検出信号とし、残りの下位５ビットｂ１〜ｃ３を音声データとして用いるものである。また、再生装置の構成は図６と同じであるが、人形９７を図９に示した構成としたものである。人形９７は、検出器５３の出力側にｂ０＝０検出器９２が接続されたａ０ａ１ｂ０検出器９１を有し、更に制御機器３６を、スイッチ回路９３、Ｄ／Ａ変換器９４及びスピーカ９５を含む構成としたものである。
【００５１】
第２の実施の形態と同様に、図６の送信器２３からアンテナ２４を介して送信された信号は、図９の人形９７のアンテナ３２を介して受信器３３で受信され、受信信号がａ０ａ１ｂ０検出器９１に入力されて状況説明データの上位３ビットａ０ａ１ｂ０の値が検出される。ここで、ａ０ａ１が「００」以外のときは第１の実施の形態と同様の動作が行われ、ａ０ａ１ｂ０が「０００」であるときは、第２の実施の形態と同様の動作が行われる。
【００５２】
すなわち、以上のときには、ａ０ａ１ｂ０検出器９１の出力信号により、スイッチ回路９３は端子９３ｂ側に接続され、第二変換器３４の出力信号をＤ／Ａ変換器９４に供給する。また、ａ０ａ１ｂ０が「０００」であるときは、ａ０ａ１ｂ０検出器９１の出力信号により、プログラムメモリ５４が状況説明データの下位５ビット（ｂ１，ｃ０，ｃ１，ｃ２，ｃ３）をダウンロードデータとして書き込む。
【００５３】
これに対し、ａ０ａ１ｂ０が「００１」であるときには、ａ０ａ１ｂ０検出器９１の出力信号により、スイッチ回路９３は端子９３ａ側に切替接続され、状況説明データの下位５ビット（ｂ１，ｃ０，ｃ１，ｃ２，ｃ３）が音声データとして、第二変換器３４を迂回し、スイッチ回路９３を通してＤ／Ａ変換器９４に供給されてアナログ音声信号に変換された後、スピーカ９５に供給されてこれより発音される。音声信号として５ビット以上必要であるときには、状況説明データの下位５ビットで音声データが複数回伝送される。
【００５４】
次に、本発明の第３の実施の形態について説明する。この実施の形態は、ディジタル放送において、放送の映像／音声に同期してリアルタイムで番組の状況を付加情報として同時伝送する例である。例えば、野球の試合で、「一打逆転のシーン、次の一球で勝敗が決まる。アウトならＡチームの勝ち、ヒットならＢチームの勝ち」といった付加情報を伝送する。
【００５５】
受信機はこれを受け取り、使用者の選択に応じて、いずれのチーム寄りの発言をするかを決める。これが前記第一変換に相当する。次に、人形は、例えばＡチームを応援する発言や状況に応じた身振りを行う。これが第二変換にあたる。最終的な人形の制御は、第１の実施の形態のように予めプログラムメモリに格納しておいた複数の制御方法のデータを選択して行ってもよいし、第２の実施の形態のようにディジタル放送などから直接にダウンロードするようにしてもよい。
【００５６】
この第３の実施の形態について更に具体的に説明するに、図７は本発明の第３の実施の形態のシステム構成図を示す。同図中、図２及び図３と同一構成部分には同一符号を付し、その説明を省略する。図７において、放送局６０内のＭＰＥＧエンコーダ６１は、ディジタル放送で標準に用いられているＭＰＥＧ（Moving Picture Experts Group）方式により、入力映像信号、音声信号及び字幕情報を圧縮符号化し、更にトランスポートストリーム（ＴＳ）とした後、マルチプレクサ６３に供給し、ここで付加情報生成器６２よりの付加情報とマルチプレクスする。
【００５７】
このＭＰＥＧ方式を用いることにより、複数の映像と複数の音声と複数の付加情報をマルチプレックスして一本のストリームとして扱うことができる。各々のデータはＰＩＤと呼ばれるヘッダで種類分けされ、かつ、タイムスタンプをデータ内に入れることで放送局６０で映像／音声／付加情報間の復号の時刻合わせを行っていることは良く知られている。ここでは、例えば、ある映像に２種類の音声と２種類の字幕と１種類の付加情報を、マルチプレクサ６３でマルチプレックスすることができる。
【００５８】
マルチプレクサ６３から出力されたトランスポートストリームは、放送送信装置６４で放送信号帯域に変換された後、ディジタル放送信号として送信される。この送信ディジタル放送信号は、放送用衛星６５を介して地上の受信器（セットトップボックス）６６のアンテナ６７で受信された後、受信装置６８で高周波増幅、ベースバンドへの周波数変換など公知の受信処理が行われ、デマルチプレクサ６９に入力される。
【００５９】
デマルチプレクサ６９は、入力受信信号がある映像に２種類の音声と２種類の字幕と１種類の付加情報が多重されたトランスポートストリームであるので、ヘッダに基づいて映像情報、音声情報及び字幕情報からなるストリームはＭＰＥＧデコーダ７０に供給し、トランスポートストリームは付加情報抽出器７２へ供給する。ＭＰＥＧデコーダ７０は公知の方法で入力トランスポートストリームを映像信号及びこれに同期した音声信号及び字幕信号に変換し、これらをテレビジョン受像機７１に供給して、表示等させる。
【００６０】
一方、付加情報抽出器７２は入力トランスポートストリームから前記１種類の付加情報を抽出して第一変換器７３へ供給する。ここで、１種類の付加情報は本実施の形態の付加情報で、例えば、野球放送などで「Ａチームがピンチである。一方、Ｂチームはチャンスである。」というデータを付加情報として送受信される。データ構成は第１の実施の形態と同様である。第一変換器７３では、いずれのチームのファンであるか、使用者の年齢などを設定する。仮に、Ａチームを選んだとする。
【００６１】
第一変換器７３から出力された付加情報は、送信器７４及び送信アンテナ７５を介して、人形３１へ無線送信される。人形３１内の第二変換器３４では第１の実施の形態と同様に、「頑張れ、負けるな、あと少し」等の応援の言葉、「手を振る、首を振る」などの動作を選択する（選択は複数でもよい）。また、使用者の年齢や性別によって発声する内容や言い回し、声色を変えることもできる。
【００６２】
このようにして、この実施の形態では、ディジタル放送信号を利用して、人形３１を介して新しい楽しみ、新しいホームエンタテインメントを提供することができる。また、人形３１の遊び方においても大幅な拡張性／柔軟性を有する。
【００６３】
なお、この場合、受信器６６は必ずしも専用のハードウェアにより構成する必要はなく、例えばパソコンに専用ソフトウェアをインストールすることでも同等の効果を得ることはできる。その際、ディジタル放送がインターネット経由で入来することも想定される。
【００６４】
次に、本発明の第４の実施の形態について説明する。この実施の形態は、ゲーム等インタラクティブ性のあるエンタテインメントにおいて、展開の状況を付加情報として扱うもので、例えば、ゲームマシンにおいて、使用者がゲームのあるステージを何度やってもクリアできないときに、その事実をゲーム機自身は知ることができるので、この情報を上記の付加情報として扱うようにする。ゲームの初期設定では、使用者が初心者レベルか、高レベルかの設定をすることが多い。
【００６５】
これが第一変換に相当する。その結果、再生機器の設定次第で初心者に対しては、何度もクリアできないときには人形が「優しく励ます」内容の発言をすることで応援する。一方、高レベルの時には、「下手であることを笑う」ような発言を選ぶこともできる。これにより、人形は、ゲームをしている横に、あたかも友人がいるかのような振る舞いをする。
【００６６】
この第４の実施の形態について更に具体的に説明するに、図８は本発明の第４の実施の形態のシステム構成図を示す。同図中、図２及び図３と同一構成部分には同一符号を付し、その説明を省略する。この第４の実施の形態ではゲームコントローラ７８により動作が制御されるゲーム機本体８０から人形３１へ付加情報を無線送信する。すなわち、ゲーム機本体８０は、通常のゲーム処理装置８１と、付加情報発生器８２と、送信器８３と、アンテナ８４とからなり、ディスプレイ８５に対して通常のゲーム処理装置８１で処理したゲームの映像／音声情報を供給して画像表示及び発音させると共に、通常のゲーム処理装置８１で処理して得られたゲーム展開情報を付加情報発生器８２に供給する。
【００６７】
このゲーム展開情報としては、例えば、「風船を割って得点を得る。風船を割るチャンスは３回まで」という場合を仮定すると、ゲーム使用者がこのシーンに到達した時点Ａ、風船を割り損なった時点Ｂ、２度失敗した時点Ｃ、割ることに成功した時点Ｄなどがある。これらのすべてのゲーム展開情報について、付加情報発生器８２は付加情報を発生する。
【００６８】
この付加情報は、例えば図５（Ａ）で示した付加情報と同様に、時間データと状況説明データからなり、状況説明データは図５（Ａ）のａ０〜ｃ３の代わりに、ｄ０とｄ１の計２ビットからなる。ここで、ｄ０とｄ１の計２ビットが「００」のときは応援する、「０１」のときは注意を促す、「１０」のときは最後のチャンスであることを知らせる、「１１」のときは誉めるなどの内容を示す。この場合、上記のＡ、Ｂ、Ｃ、Ｄの各時点では、状況説明データｄ０ｄ１は００，０１，１０，１１となる。
【００６９】
上記の付加情報は、ゲーム機本体８０内の送信器８３で送信信号に変換され、更にアンテナ８４から人形３１へ無線送信される。人形３１は、図３及び図４と共に説明したように、受信した付加情報の内容に従って、あたかも同時にゲームを楽しんでくれるもう一人の友人であるかの如くに振る舞う。このとき、掛け声／笑い声等の出力内容は、送信された付加情報一種類につき単一ではなく、第二変換器３４によりゲームの同じ展開情報に対して複数選択可能である。
【００７０】
なお、ゲームの初期設定などのときに、ゲームコントローラ７８を使用して年齢、性別などの第一変換情報を付加情報発生器８２に設定することもできる。この場合は、前記ｄ０，ｄ１の２ビットに加えて第一変換情報用のビットを用意したものを状況説明データとしてゲーム機本体８０から人形３１へ無線送信する。
【００７１】
これにより、人形３１は声の大きさや声の種類など第一変換情報に応じて第二変換による選択の範囲をもつ。更には、付加情報として直接人形３１が発声する言葉を人形３１に送信し、人形３１を介してゲーム攻略のヒントを使用者に知らせる、などの応用も考えられる。
【００７２】
次に、本発明の第５の実施の形態について説明する。図１０は本発明の第５の実施の形態のシステム構成図を示す。同図中、図７と同一構成部分には同一符号を付し、その説明を省略する。この第５の実施の形態では、放送局７６は、例えば、ある映像情報データに２種類の音声データと２種類の字幕データとを、マルチプレクサ６３でマルチプレックスして得たトランスポートストリームを、放送送信装置６４で放送信号帯域に変換した後、ディジタル放送信号として放送用衛星６５へ送信する一方、付加情報生成器６２で生成した付加情報を、専用のデータ送信装置１１０により所定の信号形態に変換した後、上記のディジタル放送信号とは別経路でアンテナ１１１から受信器７７へ送信する。なお、マルチプレクサ６３には、複数のＭＰＥＧエンコーダからのデータを１つのトランスポートストリームに多重化することも可能である。
【００７３】
受信器７７は、ディジタル放送信号を受信する受信装置６８とは別に、上記のデータ送信装置１１０から送信された信号をアンテナ１１２で受信して、内蔵の専用の受信器１１３に供給し、ここで受信した信号を復調して前記付加情報を得る。上記のアンテナ１１１からアンテナ１１２への付加情報の伝送は、一般的な携帯電話、電話回線、ポケットベルなどの有線／無線公衆回線網を利用することができる。
【００７４】
この場合、データ送信装置１１０や受信器１１３は、電話端末やモデム等のインタフェースに相当する。このような別の既存の通信インフラを利用する場合、図示していないが、インフラに応じた中継局などを経由する。また、多数の受信器７７へ放送局７６から付加情報を送信するには、携帯電話やポットベルなどの同報通信を利用できる。
【００７５】
本実施の形態の利用例としては、例えば、放送局７６が野球放送をする放送チャネルＡであり、かつ、現在、受信器７７のユーザがテレビ視聴を行っていなかったとする。チャネルＡの放送局７６は野球中継開始に先立って、チャネルＡの視聴を促す旨の付加情報をデータ送信装置１１０及びアンテナ１１１から送信し、受信器７７のアンテナ１１２で受信させ、更に受信器１１３、第一変換器７３、送信器７４、アンテナ７４を経由して人形３１にリアルタイムで伝送する。
【００７６】
人形３１はこの付加情報を受信し、野球中継が始まるのでチャネルＡを見るように受信器７７のユーザに、その挙動などにより知らせる。これにより、人形３１は放送局７６にとっては番組視聴率を向上させる手段となり、かつ、受信者側にとっては見忘れを防ぐアラーム機能を持つ利点を有する。
【００７７】
次に、第５の実施の形態の変形例について説明する。まず、付加情報生成器６２、データ送信装置１１０及びアンテナ１１１は、放送内容と同期しているのであれば、物理的に放送局とは別の場所に設けてもよく、その場合は、放送局７６の放送事業者とは別の業者により管理保有する構成とすることもできる。
【００７８】
このような場合、付加情報は予め既存のアナログ放送局から送信されても、これとは異なるラジオ局、インターネット経由で送信されても構わない。また、インターネット経由で送信される場合は、送信側はテキストデータで状況を説明するデータを送信し、受信側でこれを図５（Ａ）に示す如く付加情報に変換しても構わない。
【００７９】
また、アンテナ１１２、受信器１１３、第一変換器７３、送信器７４及びアンテナ７５は、受信器７７の外部に設けるようにしてもよい。この場合は、受信器７７を既存のセットトップボックスをそのまま利用できるという利点がある。
【００８０】
更に、アンテナ１１２、受信器１１３、第一変換器７３、送信器７４及びアンテナ７５のうち、アンテナ１１２、受信器１１３及び第一変換器７３を、人形３１内のアンテナ３２及び受信器３３の代わりに内蔵するようにしてもよい。この場合は、送信器７４及びアンテナ７５は不要であり、受信器７７として既存のセットトップボックスをそのまま利用できると共に、受信器７７の主電源がオフでも、人形を放送局７６から直接に制御できるという利点がある。
【００８１】
また、データ送信装置１１０からは例えば１日分の付加情報を予めまとめて送信し、受信器１１３は内蔵の時計と受信して内蔵のメモリに記憶した付加情報中の時間管理情報に基づき、必要な時刻に付加情報を発生させるようにしてもよい。この場合は、人形３１を所望の時刻に制御することができる。
【００８２】
なお、本発明は以上の実施の形態に限定されるものではなく、例えば図１１に示すように、プログラムメモリ３５内に判断処理部１００を設けると共に、通常の制御内容が入るプログラムメモリ３５１以外に学習機能の結果が入るプログラムメモリ３５２を設け、過去の状況判断データの積み重ねから次の制御を行うといった学習機能を加えてもよい。
【００８３】
例えば、図５（Ｂ）に示した「主人公が敵に襲われるがうまく助かる」というシーンの繰り返しでは、ａ０ａ１ｂ０ｂ１ｃ０ｃ１ｃ２ｃ３の８ビットが「００１１１０１０」と「０１１１０１００」という値で連続する。図４に示した実施の形態では、「００１１１０１０」と「０１１１０１００」毎にそれぞれ１６通りの制御内容がメモリされており、それ以外の選択はあり得ない。
【００８４】
しかし、図１１の他の実施の形態では、プログラムメモリ３５に判断機能を持たせ、今回の状況説明データに対応する最新のアドレス１０１と、直前の状況説明データに対応する直前のアドレス１０２とを比較器１０３で比較し、両者が一致したときにカウンタ１０４をカウントアップすることにより、プログラムメモリ３５１からは今回の状況説明データに対応する通常の制御内容が読み出され、これにカウンタ１０４の出力をアドレスとして受けるプログラムメモリ３５２から状況説明データが連続したときの制御内容を加味することができる。
【００８５】
従って、上記のような２種類の状況説明データが連続する場合は、「主人公が襲われるが助かり、また次々に襲われるが助かる。」というシーンであると判断でき、このときには、前記１６通り以外のメモリエリアのプログラムメモリ３５２に格納された異なるデータを読み出し、「発生：これで５回目だ。また助かった。」といったような、判断をもとにした新たな制御結果が得られる。
【００８６】
また、以上の各実施の形態では、第二変換器３４は人形３１の中に設けているが、第二変換器は再生装置、受信器（セットトップボックス）あるいはゲーム機本体の内部に設けて、第二変換後の状況説明データを人形３１に無線送信するようにしてもよい。また、伝送手段は、上記の各実施の形態のような無線伝送に限らず、有線伝送や光伝送でもよい。更に、外部機器として人形３１の例を挙げたが、外部機器の外形形状はどのような形状であってもよい。更に、第二変換器で選択する制御情報は二以上でもよい。また、以上のすべての実施の形態において、付加情報として予め使用者の属性が加味されて送られてくる場合には、第一変換器２１、７３を省略できることはいうまでもない。
【００８７】
【発明の効果】
以上説明したように、本発明によれば、映像／音声発生源から出力された映像情報及び音声情報による所望のシーンに対応した時刻で発生される付加情報に基づいて、所望形状の外部機器に、上記の所望のシーンに応じた挙動をさせることにより、映像／音声発生源から出力された映像情報及び音声情報を、上記の外部機器が使用者と共にあたかも楽しんでいるかの如くに振る舞わせるようにしたため、外部機器を介して従来にない新しいホームエンタテインメントを使用者に提供することができ、新規市場の創造に繋げることができる。
【００８８】
また、本発明によれば、外部機器の挙動は、複数の制御情報の中から選択した一又は二以上の制御情報に基づいて行われ、同一のシーンに対しても、再生あるいは表示する毎に異なる挙動を外部機器に行わせることができるため、従来に比べて、外部機器の遊び方に大幅な拡張性や柔軟性を持たせることができる。
【００８９】
更に、本発明によれば、受信側端末を構成する受信器、第１の変換手段及び第２の変換手段を、それぞれ所望外形形状機器内に組み込まれているように構成した場合は、放送信号は既存の放送信号受信装置で受信できると共に、その放送信号受信装置の動作とは関係なく、既存の放送システムと共存して付加情報を受信して、その付加情報に対応させた動作を所望外形形状機器で行うことができる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態で用いる光ディスクの記録内容及び記録領域の説明図である。
【図２】本発明の第１の実施の形態の要部のブロック図である。
【図３】本発明の第１の実施の形態の他の要部のブロック図である。
【図４】図３中の第二変換器の一例のブロック図である。
【図５】付加情報の説明図である。
【図６】本発明の第２の実施の形態のシステム構成図である。
【図７】本発明の第３の実施の形態のシステム構成図である。
【図８】本発明の第４の実施の形態のシステム構成図である。
【図９】本発明の第２の実施の形態の要部の変形例のブロック図である。
【図１０】本発明の第５の実施の形態のシステム構成図である。
【図１１】本発明の他の実施の形態の要部のブロック図である。
【符号の説明】
１光ディスク
２主記録領域
３副記録領域
４ａ〜４ｃ映像・音声等のデータ
５ａ、５ｃ、５ｅタイムスタンプ
５ｂ、５ｄ、５ｆシーンの情報
６時間データ
７状況説明データ
１０ＤＶＤ再生部
１２本編読取装置
１３、１８タイムスタンプ検出器
１６専用読取装置
１７付加情報再生装置
１９比較器
２０付加情報読み込みタイミング発生器
２１、７３第一変換器
２２、３５、５４プログラムメモリ
２３、７４、８３送信器
３１、４７、９７人形
３３受信器
３４第二変換器
３６制御機器
４１状況説明データ抽出器
４２メモリ読み出しアドレス発生器
４３乱数発生器
４４レジスタ
４５選択器
５１、５３、９１、９２検出器
５２、９３スイッチ回路
６０、７６放送局
６２付加情報生成器
６３マルチプレクサ
６６、７７受信器（セットトップボックス）
６９デマルチプレクサ
７２付加情報抽出器
７８ゲームコントローラ
８０ゲーム機本体
８１通常のゲーム処理装置
８２付加情報発生器
９４Ｄ／Ａ変換器
９５スピーカ
１１０データ送信装置
１１３付加情報用受信器[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an entertainment system and a receiving-side terminal and transmitting-side device used therefor, and in particular, provides home entertainment by causing an external device to perform various behaviors in synchronization with video and audio from a video / audio source. The present invention relates to an entertainment system and a receiving side terminal and transmitting side device used therefor.
[0002]
[Prior art]
When enjoying video software and television broadcasting, you can only enjoy the content itself, and of course you can enjoy the same content no matter how many times you watch it. In addition, there are various package media such as video tapes and discs on the market, but all of them change the form of the media, and the evolution is not satisfied in enjoying the contents.
[0003]
On the other hand, conventionally, an entertainment system that allows an external device to perform various behaviors in synchronization with video and audio from a video / audio source has been considered. As an example of this entertainment system, the present applicant previously disclosed a demonstration device for performing demonstration by synchronizing video and audio in Japanese Patent Laid-Open No. 7-194851. The demonstration device disclosed by the present applicant includes a single recording medium in which video information, audio information, and control information are recorded, means for demodulating the information from the recording medium, demodulated video information and audio information. And a control means for performing a demonstration operation based on the demodulated control information, recording the video information and audio information in a main recording area of the recording medium, and recording the control information It is recorded in the auxiliary recording area of the medium.
[0004]
According to this demonstration apparatus, a demonstration operation (entertainment operation) is performed by the operation of an external device (specifically, a doll or a robot) based on the information reproduced from the single recording medium and demodulated. The content of the demonstration operation (entertainment operation) synchronized with the video and audio can be easily changed simply by changing the single recording medium.
[0005]
[Problems to be solved by the invention]
However, in the above-described demonstration apparatus disclosed by the present applicant, the operation of an external device that is reproduced from the same recording medium and controlled based on demodulated information is a single operation and lacks expandability. There is. Further, in order to change the contents of the demonstration, it is necessary to change the recording medium to be reproduced, and the change operation is troublesome and there is a problem in operability.
[0006]
The present invention has been made in view of the above points, and an object thereof is to provide an entertainment system capable of performing entertainment with expandability and flexibility, and a reception side terminal and a transmission side device used therefor.
[0007]
Another object of the present invention is to provide an entertainment system with improved operability and a receiving side terminal and transmitting side device used therefor.
[0008]
[Means for Solving the Problems]
  In order to achieve the above object, the present invention is compatible with a video / audio generation source that generates video information and audio information synchronized with each other, and a desired scene based on video information and audio information output from the video / audio generation source. At time orAbout the desired sceneAn additional information generating means for generating additional information, and a control device driven by the input control information, and an external device having a desired outer shape that operates according to the input control information by the control device;Restriction information storage means for storing at least one of the user attribute and the use location attribute as restriction information in advance by user setting or automatic setting;Additional information generated by the additional information generating meansRestricted by restriction information read from restriction information storage meansFirst conversion means;Transmitting means for transmitting the restricted additional information output from the first conversion means, and incorporated in the external device, and receiving means for receiving the transmitted restricted additional information, and incorporated in the external device And additional information after restriction received by the receiving meansA plurality of control information that causes an external device to perform different behaviors corresponding to each other is generated, and one or more control information is selected from the plurality of control information.In a random mannerAnd a second conversion unit that selects and outputs as input control information to the control device.
[0009]
According to the present invention, the desired scene is connected to an external device having a desired shape based on additional information generated at a time or time corresponding to a desired scene based on video information and audio information output from a video / audio generation source. It can behave according to. Therefore, the video information and audio information output from the video / audio generation source can be made to behave as if the external device is enjoying with the user.
[0010]
  In the present invention, the behavior of the external device is as follows.Even if there is additional information after the same restriction, multipleFrom the control information ofIn a random mannerSince it is performed based on the selected control information or two or more control information, it is possible to cause the external device to perform a different behavior every time it is reproduced or displayed even for the same scene.
[0011]
In the present invention, the additional information generating means described above includes time data for designating reproduction at a time corresponding to a desired scene based on video information and audio information output from a video / audio generation source, Data including situation explanation data for explaining the situation is generated as additional information. In the present invention, the additional information can be associated with a desired scene based on video information and audio information output from the video / audio generation source.
[0012]
In order to achieve the above object, according to the present invention, the video / audio generation source includes a reading device that reads video information and audio information from a recording medium on which video information and audio information are recorded. The means is characterized by comprising reproducing means for reproducing additional information recorded on the recording medium.
[0013]
In order to achieve the above object, the present invention provides a receiving device in which a video / audio generation source receives a broadcast signal in which at least video information and audio information are synchronized. And an additional information extractor for extracting additional information explaining the status of the program of the broadcast signal transmitted together.
[0014]
Furthermore, in order to achieve the above object, the present invention is a game processing apparatus in which the video / audio generation source generates video information and audio information in synchronization with an instruction from the game controller, and the additional information generating means includes: It is characterized in that description data of the situation corresponding to the game development information obtained from the game processing device is generated as additional information.
[0015]
  In order to achieve the above object, the present invention provides a transmission side device for transmitting additional information of information content related to a broadcast signal program in which video information and audio information are synchronized, and additional information from the transmission side device. A receiving terminal in an entertainment system comprising a receiving terminal for receiving, a receiver for receiving additional information transmitted from the transmitting apparatus, a receiver for receiving additional information transmitted from the transmitting apparatus, and a receiver Additional information received atRestricted by restriction information that is at least one of the user attribute and the location attributeDriven by the first conversion means and the input control informationControl equipment that operates according to the input control information.Desired external shape equipment,Transmitting means for transmitting the additional information after restriction output from the first conversion means, receiving means for receiving the additional information after restriction transmitted by the transmitting means, and additional information after restriction received by the receiving meansA plurality of control information for causing the desired external shape device to perform different behaviors corresponding to the control information is generated, and one or more control information among the plurality of control information is generated.In a random mannerSelectFor control equipmentAnd a second conversion unit that supplies the input control information.
[0016]
  The present invention also provides:From the transmission side device that transmits the additional information of the information content related to the program of the broadcast signal in which the video information and the audio information are synchronized through a different path from the broadcast signal, and the reception side terminal that receives the additional information from the transmission side device In the entertainment system, the receiving terminal is a receiver that receives additional information transmitted from the transmitting apparatus, and the additional information received by the receiver is at least one attribute of a user attribute and a usage location attribute. A first converting means that is restricted by the restriction information, a control device that is driven by the input control information, a desired outer shape device that operates according to the input control information by the control device, and additional information after the restriction A plurality of control information that causes the desired external shape device to perform different behaviors corresponding to each other is generated, and one or more control information is randomized from the plurality of control information. And a second conversion unit that selects and supplies the control device with input control information. The receiver, the first conversion unit, and the second conversion unit are incorporated in the desired external shape device together with the control device. ingIt is characterized by that.
[0017]
  In this invention, since the receiver side, the first conversion unit, and the second conversion unit are incorporated in the desired external shape device together with the control device, the reception side terminal is added from the transmission side device. A broadcast signal transmitted through a different path from information can be received by an existing broadcast signal receiving device, and regardless of the operation of the broadcast signal receiving device, coexisting with an existing broadcast system to receive additional information, The desired external shape device can behave in accordance with the additional information, and the user can enjoy the desired entertainment by purchasing only the desired external shape device without preparing a broadcast signal receiving device. it can.
[0018]
In order to achieve the above object, the present invention provides a transmission-side apparatus that transmits additional information of information content related to a program of a broadcast signal in which video information and audio information are synchronized, via a different route from the broadcast signal, The additional information from the side device is received, the received additional information is converted into a format that takes into account the attributes of the user and output, and further selected from a plurality of control information corresponding to the output additional information Alternatively, a transmission side device in an entertainment system including a receiving side terminal that operates a desired outer shape device having a desired outer shape in accordance with two or more control information, and an operation of the desired outer shape device in the receiving side terminal It is characterized in that situation explanation data explaining the situation of the desired scene is transmitted as additional information so that the desired outer shape device operates corresponding to the desired scene.
[0019]
In the present invention, the broadcast signal can be received by the existing broadcast signal receiving apparatus, and the additional information is transmitted through another route in coexistence with the existing broadcast system, so that the desired external shape device can be set to the desired broadcast signal. It can be controlled to operate according to the scene.
[0020]
DETAILED DESCRIPTION OF THE INVENTION
Next, embodiments of the present invention will be described with reference to the drawings. In the first embodiment of the present invention, video information and audio information recorded on an optical disc 1 such as a DVD (Digital Versatile Disc) as shown in FIG. It is reproduced and wirelessly transmitted to the doll 31 shown in the block diagram of FIG. That is, the entertainment system according to the first embodiment includes the reproduction apparatus shown in FIG. 2 and the doll 31 that is an external device shown in FIG.
[0021]
In the main recording area 2 occupying most of the recording area of the optical disk 1 shown in FIG. 1, for example, video / audio data of the main part of the movie is recorded, and additional information is recorded in the remaining sub-recording area 3. ing.
[0022]
Here, video information and audio information of the main part (for example, a movie) are recorded in the main recording area 2 along the absolute time as in the conventional DVD. That is, as shown in FIG. 1, the information recorded in the main recording area 2 is composed of header data called a time stamp followed by repetition of data such as a movie / audio of the main part.

Reference numerals

4a, 4b, and 4c in FIG. Here, the time stamp indicates time in the order of absolute time, such as time A, time B, and time C, and is recorded intermittently at a constant period. In the playback apparatus shown in FIG. 2 described later, data is played back using this time stamp as a time reference, and the image and sound are decoded and output to the receiver.
[0023]
On the other hand, additional information recorded in the sub-recording area 3 is, for example, “the hero defeats the enemy” in an action scene in the main movie, or “the hero and the other party have a happy ending” in the ending of the content. This means information that describes the situation of each scene and is recorded by means that does not affect the quality of the content data of the main part.
[0024]
As shown in FIG. 1, the additional information is also time stamps 5a, 5c, 5e and additional information 5b, 5e.dAnd 5f are recorded alternately and repeatedly. However, the additional information does not have to be prepared for all scenes, and may be data only at a necessary time. In FIG. 1, the main part has data continuously at times A, B, C, and D, while the additional information records additional information 5b, 5d, and 5f only at times A, C, and F. .
[0025]
Although the sub-recording area 3 is the innermost circumference of the disk in FIG. 1, the sub-recording area 3 may be recorded at any position as long as it does not affect the reproduction of the main part. If the main data to be recorded has an area where additional information can be written, it may be written in that area, or the back surface of the optical disc 1 may be used. Further, the recording medium to be written may be the same material as the main story, or may be a different medium (media) such as an optical disk and a semiconductor.
[0026]
Next, the playback device in FIG. 2 will be described. The playback apparatus shown in the figure is a dedicated playback apparatus that plays back each additional information from the sub-recording area 3 in synchronism with the contents of the recorded movie in the main recording area 2 of the optical disc 1. Perform playback. This information is wirelessly transmitted to an external reproduction device such as a doll shown in FIG.
[0027]
In the reproducing apparatus of FIG. 2, the process of reproducing the main part of the main recording area 2 is performed by the DVD reproducing unit 10 similar to the conventional DVD reproducing apparatus. That is, the recorded main data in the main recording area 2 of the optical disc 1 whose rotation is controlled by the mechanical control device 11 is read by the main reading device 12 and supplied to the time stamp detector 13, while being supplied to the main reading device 15. Is done. The time stamp detector 13 detects the time stamp from the input main part reproduction signal and supplies the time stamp to the reference time generator 14 to generate the reference time. Based on this reference time, the main part reader 15 reproduces the image and sound / subtitles in the main part reproduction signal and displays them on the television receiver 25.
[0028]
On the other hand, the additional information recorded in the sub-recording area 3 of the optical disc 1 is read by the dedicated reading device 16 and supplied to the additional information reproducing device 17 to reproduce the additional information 5b, 5d, and 5f. The time stamps 5a, 5c and 5e are detected by the stamp detector 18. The time stamp of the additional information is compared with the time stamp of the main part by the comparator 19, and the comparison result is supplied to the additional information reading timing generator 20. The additional information reading timing generator 20 outputs the reproduction additional information from the additional information reproducing device 17 at a timing at which the time stamp of the additional information matches the time stamp of the main part.
[0029]
The reproduction additional information read from the additional information reproduction device 17 will be described in more detail with reference to FIG. 5. FIG. 5A shows an example of the format of the additional information. As shown in FIG. 4A, one additional information includes 14-bit time data 6 (corresponding to the time stamp 5a, 5c or 5e in FIG. 1) called a time stamp and 8-bit situation explanation data. 7 (corresponding to the data 5b, 5d or 5f in FIG. 1). The time data 6 represents the absolute time of the performance time of the content, and represents hours, minutes and seconds. Two bits are allocated for time, and 6 bits each for minutes and seconds.
[0030]
The situation explanation data 7 is data explaining “who and who and what situation”. As shown in FIG. 5, “who” has 2 bits a0a1, “who” has 2 bits b0b1, and “what situation” Are assigned with 4 bits c0c1c2c3. Here, a0a1 is prohibited when “00”, the protagonist when “01”, the opponent when “10”, the enemy when “11”, b0b1 is a third party when “00”, “ “01” represents the hero, “10” represents the opponent, and “11” represents the enemy. Furthermore, c0c1c2c3 is, for example, “pleasant” when “0000”, “anger” when “0001”, “help” when “0100”, “dangerous” when “1010”, “death” when “1111”. Indicates the situation. Here, since the situation explanation bits c0 to c3 are 4 bits, 16 kinds of situations can be represented. Of course, more situations can be explained by further increasing the number of bits.
[0031]
Here, it is assumed that reproduction additional information as shown in FIG. 5B is obtained. At time t0, the main story is a dangerous scene where the hero is attacked by an enemy. As the additional information, data most suitable for explaining the situation is selected. That is, in the scene where the main character (a0, a1 = 01) is attacked by an enemy (b0b1 = 11) and is dangerous (c0c1c2c3 = 1010), the situation explanation data 7 is “011111010”. If the scene is attacked at the next instant, time t1, but the scene is saved well, similarly, the situation explanation data 7 is “01110100”. Furthermore, since the opponent is a scene rejoicing with a third party at time t2, the situation explanation data 7 is “10000000”.
[0032]
These situation explanation data 7 are supplied to the first converter 21 of FIG. 2, and restrictions are imposed on the handling of additional information due to regional characteristics. The restriction information is stored in the program memory 22. The restriction information may be determined manually or in the case of automatic setting. The first converter 21 may not add any restrictions. The reproduction additional information taken out from the first converter 21 is supplied to the transmitter 23, where it is converted into a signal in the transmission frequency band and then transmitted wirelessly from the antenna 24.
[0033]
The wireless transmission signal is received by the reception antenna 32 of the doll 31 as an example of the external device shown in FIG. 3, converted into a baseband signal by the receiver 33, and input to the second converter 34. The second converter 34 drives and controls the control device 36 according to any one of the control method data selected at random, for example, among the data of the plurality of control methods read from the program memory 35 according to the received situation explanation data. The control device 36 includes a speaker that utters the voice of the doll 31, a motor that moves the hands and feet of the doll 31, a light that lights the eyes of the doll 31, etc., and these are driven and controlled according to the reception status explanation data.
[0034]
In this case, even if it is the same reception status explanation data, one of the data of a plurality of control methods read from the program memory 35 is selected at random, so the behavior of the doll 31 is not necessarily the same and is rich in changes. Can behave.
[0035]
The configuration and operation of the second converter 34 will be described more specifically with reference to FIG. 4, the same components as those in FIG. 3 are denoted by the same reference numerals, and the description thereof is omitted. In FIG. 4, the second converter 34 includes a situation explanation data extractor 41, a memory read address generator 42, a random number generator 43, a register 44 and a selector 45.
[0036]
The reception signal from the receiver 33 is supplied to the situation explanation data extractor 41 in the second converter 34, and the situation explanation data indicated by 7 in FIG. 5 (A) is extracted. The situation explanation data is supplied to the memory read address generator 42, converted into the read address of the program memory 35, and then supplied to the program memory 35. The program memory 35 stores 16 kinds of control method data for each situation explanation data in advance, and reads the data indicating a plurality of control methods corresponding to the situation explanation data by inputting the above-mentioned read address. 44 to be held. As the above 16 types of control methods corresponding to one situation explanation data, for example, there are those shown in Table 1.
[0037]
[Table 1]

[0038]
Data indicating a plurality of control methods held in the register 44 is randomly selected by the selector 45 to which the random number from the random number generator 43 is input as a selection signal, and is sent to the control device 36. Is output. Here, the situation explanation data extracted by the situation explanation data extractor 41 is, for example, situation explanation data “011111010” indicating that the main character is dangerous at time t0 shown in FIG. For example, when the data of the control method 8 in Table 1 is selected, the doll 31 is generated loudly through the speaker in the control device 36, and the movement of moving the hand by driving the motor in the control device 36 Will be.
[0039]
Since the selection operation by the selector 45 is random, the doll 31 does not always react in the same way when viewing the same optical disk 1 a plurality of times. Therefore, a new way of enjoying “enjoying the doll's reaction” can be obtained through the movie. Of course, the random number generator 43 may be replaced with a selection signal generator according to a certain order.
[0040]
Next, it is assumed that the user is an area that is severe with respect to violent expression for religious reasons. In this case, the data at time A is shaved by the first converter 21 in FIG. On the other hand, in the scene where time B is saved, data is wirelessly transmitted to the doll 31 and the second converter 34 of the doll 31 selects an operation such as “applause”. Furthermore, in the first conversion, it is possible to change the voice color to be uttered by setting whether the user is a man or a woman or the sex of the doll 31.
[0041]
As described above, in the first embodiment, the additional information is reproduced in synchronization with the video and sound of the movie recorded on the optical disc 1, the additional information is wirelessly transmitted to the doll 31, and the doll receives the additional information received. Depending on the information, for example, in the movie “The main character defeats the enemy”, the shout is uttered, and in the “Happy End” scene, applause is performed. Act as if you were a spectator.
[0042]
At this time, the output content such as shout / laughter is not single for each type of additional information recorded, but if the movie is a scene where the “hero cry”, for each type of additional information corresponding to this, “ “Comfort”, “Encourage”, “Cry together”, “Laugh”, and the like can be selected, and further, there are selection ranges depending on the judgment in the doll 31 such as the size and type of voice. Further, when the same additional information is recorded on the optical disc 1 a plurality of times, it is possible to change the way of laughing instead of always laughing in the same manner with the doll 31. This is the operation by the second converter 34.
[0043]
At this time, you may not laugh where you should cry, for reasons such as the country or region of use, or even religious reasons. The operation of the first converter 21 preliminarily limits the range in which the second conversion is performed in this way.
[0044]
Next, a second embodiment of the present invention will be described. FIG. 6 shows a system configuration diagram of the second embodiment of the entertainment system according to the present invention. In the figure, the same components as those in FIG. In the first embodiment, the final behavior of the doll 31 (laughter, movement of limbs, etc.) follows the control content data stored in advance in the program memory 35. In the second embodiment, The control content data is downloaded to the doll.
[0045]
In FIG. 6, the detector 51 detects whether or not the upper 2 bits a0a1 of the situation explanation data are “00” in the additional playback information from the additional information playback device 17. As described with reference to FIG. 5A, the 2-bit a0a1 is prohibited to use “00” in this embodiment, but in this embodiment, it is used as a download header, and the remaining bits. Six bits (b0, b1, c0 to c3) are used as data for the second conversion. Therefore, when the detector 51 detects that a0a1 is “00”, the situation explanation data 8 bits are data for download.
[0046]
The output detection signal of the detector 51 is applied as a switching signal to the switch circuit 52, and this is connected to the terminal 52a or 52b. Here, the terminal 52 a of the switch circuit 52 is connected to the output side of the first converter 21, and the terminal 52 b is connected to the output side of the additional information reproducing device 17. When the detection signal of a0a1 = “00” is not input from the detector 51, the switch circuit 52 is connected to the terminal 52a and outputs the output signal of the first converter 21 to the transmitter 23. Thereby, the additional information is wirelessly transmitted as in the first embodiment.
[0047]
On the other hand, when the detection signal of a0a1 = “00” is input from the detector 51, the switch circuit 52 is connected to the terminal 52b and outputs the download data output from the additional information reproducing device 17 to the transmitter 23. To do. Thereby, the download data is wirelessly transmitted as it is.
[0048]
The doll 47 has a configuration in which a detector 53 is added to the doll 31 and the program memory 54 can be downloaded. The detector 53 in the doll 47 detects whether or not the upper 2 bits a0a1 of the situation explanation data of the received additional information from the receiver 33 is “00”, and outputs a write command to the program memory 54 when it is “00”. To do. Based on this write command, the program memory 54 downloads the lower 6 bits of the situation explanation data. The lower 6 bits of the situation explanation data at this time are data indicating control contents. If 6 bits or more of data indicating the control contents are required, the necessary number of bits can be obtained by transmitting the situation explanation data whose upper 2 bits a0a1 are “00” a plurality of times.
[0049]
Next, a modification of the main part of the second embodiment will be described. FIG. 9 shows a block diagram of a modification of the main part of the second embodiment of the entertainment system according to the present invention. In the figure, the same components as those in FIG. In the second embodiment, the doll 47 selects the control means selected by the second converter 34 from the data once stored in the program memory 54. In this modification, in addition to this, the final control means is recorded in advance on the package medium as “direct” data, and is output from the doll 97. Here, audio will be described as an example.
[0050]
In this modification, the upper 3 bits a0a1b0 of the situation explanation data 7 in the additional information 5 recorded on the optical disc 1 are used as detection signals, and the remaining lower 5 bits b1 to c3 are used as audio data. Further, the configuration of the playback apparatus is the same as that of FIG. 6, but the doll 97 has the configuration shown in FIG. The doll 97 includes an a0a1b0 detector 91 to which a b0 = 0 detector 92 is connected on the output side of the detector 53, and further includes a control device 36 including a switch circuit 93, a D / A converter 94, and a speaker 95. It is a configuration.
[0051]
Similar to the second embodiment, the signal transmitted from the transmitter 23 of FIG. 6 via the antenna 24 is received by the receiver 33 via the antenna 32 of the doll 97 of FIG. 9, and the received signal is a0a1b0. The value of the upper 3 bits a0a1b0 of the situation explanation data input to the detector 91 is detected. Here, when a0a1 is other than “00”, an operation similar to that of the first embodiment is performed, and when a0a1b0 is “000”, an operation similar to that of the second embodiment is performed.
[0052]
That is, in the above case, the switch circuit 93 is connected to the terminal 93b side by the output signal of the a0a1b0 detector 91, and supplies the output signal of the second converter 34 to the D / A converter 94. When a0a1b0 is “000”, the program memory 54 writes the lower 5 bits (b1, c0, c1, c2, c3) of the situation explanation data as download data by the output signal of the a0a1b0 detector 91.
[0053]
On the other hand, when a0a1b0 is "001", the switch circuit 93 is switched to the terminal 93a side by the output signal of the a0a1b0 detector 91, and the lower 5 bits (b1, c0, c1, c2, b2) of the situation explanation data c3) bypasses the second converter 34 as audio data, is supplied to the D / A converter 94 through the switch circuit 93 and converted into an analog audio signal, and then supplied to the speaker 95 to be sounded. . When 5 bits or more are required as the audio signal, the audio data is transmitted a plurality of times in the lower 5 bits of the situation explanation data.
[0054]
Next, a third embodiment of the present invention will be described. This embodiment is an example in which the status of a program is simultaneously transmitted as additional information in real time in synchronization with video / audio of the broadcast in digital broadcasting. For example, in a baseball game, additional information such as “a scene of a one-stroke reversal, winning or losing is determined by the next ball. Team A wins if it is out, Team B wins if it hits” is transmitted.
[0055]
The receiver receives this and decides which team's side to speak according to the user's choice. This corresponds to the first conversion. Next, for example, the doll performs gestures according to a statement or situation supporting Team A. This is the second conversion. Final doll control may be performed by selecting data of a plurality of control methods stored in the program memory in advance as in the first embodiment, or as in the second embodiment. Alternatively, it may be downloaded directly from a digital broadcast or the like.
[0056]
More specifically, the third embodiment will be described. FIG. 7 shows a system configuration diagram of the third embodiment of the present invention. In the figure, the same components as those in FIGS. 2 and 3 are denoted by the same reference numerals, and the description thereof is omitted. In FIG. 7, an MPEG encoder 61 in a broadcasting station 60 compresses and encodes an input video signal, an audio signal, and subtitle information according to an MPEG (Moving Picture Experts Group) method used as a standard in digital broadcasting, and further transports the video signal. After making the stream (TS), it is supplied to the multiplexer 63 where it is multiplexed with the additional information from the additional information generator 62.
[0057]
By using this MPEG system, a plurality of videos, a plurality of sounds, and a plurality of additional information can be multiplexed and handled as a single stream. It is well known that each piece of data is classified by a header called PID, and the broadcast station 60 performs decoding time adjustment between video / audio / additional information by putting a time stamp in the data. Yes. Here, for example, two kinds of audio, two kinds of subtitles, and one kind of additional information can be multiplexed in a certain video by the multiplexer 63.
[0058]
The transport stream output from the multiplexer 63 is converted into a broadcast signal band by the broadcast transmission device 64 and then transmitted as a digital broadcast signal. This transmitted digital broadcast signal is received by an antenna 67 of a terrestrial receiver (set top box) 66 via a broadcasting satellite 65, and then received by a receiver 68 such as high frequency amplification and frequency conversion to baseband. Processing is performed and input to the demultiplexer 69.
[0059]
Since the demultiplexer 69 is a transport stream in which two types of audio, two types of subtitles, and one type of additional information are multiplexed on a video with an input reception signal, video information, audio information, and subtitle information are based on the header. Is supplied to the MPEG decoder 70, and the transport stream is supplied to the additional information extractor 72. The MPEG decoder 70 converts the input transport stream into a video signal and an audio signal and a caption signal synchronized therewith by a known method, and supplies these to the television receiver 71 for display and the like.
[0060]
On the other hand, the additional information extractor 72 extracts the one type of additional information from the input transport stream and supplies it to the first converter 73. Here, one type of additional information is additional information according to the present embodiment. For example, in baseball broadcasting, data such as “Team A is a pinch. On the other hand, Team B is a chance” is transmitted and received as additional information. The The data structure is the same as in the first embodiment. The first converter 73 sets which team the fan is and the age of the user. Suppose that team A is selected.
[0061]
The additional information output from the first converter 73 is wirelessly transmitted to the doll 31 via the transmitter 74 and the transmission antenna 75. As in the first embodiment, the second converter 34 in the doll 31 selects a word of support such as “do your best, do not lose, a little more”, and an action such as “waving your hand, shaking your head”. (There may be multiple selections.) In addition, the content, wording, and voice color can be changed according to the age and sex of the user.
[0062]
Thus, in this embodiment, it is possible to provide new enjoyment and new home entertainment via the doll 31 using the digital broadcast signal. In addition, the method of playing the doll 31 also has great expandability / flexibility.
[0063]
In this case, the receiver 66 does not necessarily have to be configured by dedicated hardware. For example, the same effect can be obtained by installing dedicated software in a personal computer. At that time, it is assumed that digital broadcasting comes in via the Internet.
[0064]
Next, a fourth embodiment of the present invention will be described. This embodiment handles the development status as additional information in interactive entertainment such as games.For example, in a gaming machine, when a user cannot clear a stage with a game many times, Since the game machine itself can know the fact, this information is handled as the additional information. In the initial setting of the game, the user is often set to a beginner level or a high level.
[0065]
This corresponds to the first conversion. As a result, depending on the settings of the playback equipment, beginners are encouraged by saying “encourage gently” when they cannot clear it many times. On the other hand, at a high level, you can choose to say something like “Laughter of being bad”. As a result, the doll behaves as if there is a friend beside the game.
[0066]
More specifically, the fourth embodiment will be described. FIG. 8 shows a system configuration diagram of the fourth embodiment of the present invention. In the figure, the same components as those in FIGS. 2 and 3 are denoted by the same reference numerals, and the description thereof is omitted. In the fourth embodiment, additional information is wirelessly transmitted from the game machine body 80 whose operation is controlled by the game controller 78 to the doll 31. That is, the game machine main body 80 includes a normal game processing device 81, an additional information generator 82, a transmitter 83, and an antenna 84, and a game processed by the normal game processing device 81 with respect to the display 85. The video / audio information is supplied for image display and sound generation, and the game development information obtained by processing by the normal game processing device 81 is supplied to the additional information generator 82.
[0067]
As this game development information, for example, assuming that a score is obtained by breaking a balloon. Up to three chances to break a balloon, when the game user reaches this scene, the balloon is broken. There are a time point B, a time point C that has failed twice, a time point D that succeeds in dividing, and the like. For all these game development information, the additional information generator 82 generates additional information.
[0068]
This additional information is made up of time data and situation explanation data, for example, as in the additional information shown in FIG. 5 (A). The situation explanation data includes d0 and d1 instead of a0 to c3 in FIG. 5 (A). It consists of a total of 2 bits. Here, when 2 bits of d0 and d1 are “00”, support, when “01” call attention, when “10” notify the last chance, when “11” Indicates content such as praise. In this case, the situation explanation data d0d1 is 00, 01, 10, and 11 at the respective points A, B, C, and D described above.
[0069]
The additional information is converted into a transmission signal by the transmitter 83 in the game machine main body 80 and further wirelessly transmitted from the antenna 84 to the doll 31. As described with reference to FIGS. 3 and 4, the doll 31 behaves as if it is another friend who enjoys the game at the same time in accordance with the contents of the received additional information. At this time, the output contents such as shout / laughter are not single for each type of transmitted additional information, but can be selected by the second converter 34 for the same development information of the game.
[0070]
Note that the first conversion information such as age and sex can be set in the additional information generator 82 by using the game controller 78 at the time of initial setting of the game. In this case, in addition to the two bits d0 and d1, a bit for the first conversion information is wirelessly transmitted from the game machine body 80 to the doll 31 as situation explanation data.
[0071]
Thereby, the doll 31 has a selection range by the second conversion in accordance with the first conversion information such as the volume of the voice and the type of the voice. Furthermore, an application is also conceivable in which words uttered directly by the doll 31 are transmitted to the doll 31 as additional information, and the user is informed of a game strategy hint via the doll 31.
[0072]
Next, a fifth embodiment of the present invention will be described. FIG. 10 shows a system configuration diagram of the fifth embodiment of the present invention. In the figure, the same components as those in FIG. 7 are denoted by the same reference numerals, and the description thereof is omitted. In the fifth embodiment, the broadcasting station 76 broadcasts a transport stream obtained by multiplexing, for example, two types of audio data and two types of caption data into certain video information data by the multiplexer 63. After being converted into a broadcast signal band by the transmission device 64, it is transmitted to the broadcasting satellite 65 as a digital broadcast signal, while the additional information generated by the additional information generator 62 is converted into a predetermined signal form by the dedicated data transmission device 110. After that, the signal is transmitted from the antenna 111 to the receiver 77 through a different path from the digital broadcast signal. The multiplexer 63 can also multiplex data from a plurality of MPEG encoders into one transport stream.
[0073]
The receiver 77 receives the signal transmitted from the data transmitting apparatus 110 by the antenna 112 separately from the receiving apparatus 68 that receives the digital broadcast signal, and supplies the signal to the built-in dedicated receiver 113. The additional information is obtained by demodulating the received signal. Transmission of the additional information from the antenna 111 to the antenna 112 can use a wired / wireless public line network such as a general mobile phone, a telephone line, and a pager.
[0074]
In this case, the data transmission device 110 and the receiver 113 correspond to an interface such as a telephone terminal or a modem. When using such another existing communication infrastructure, although not shown, it goes through a relay station or the like corresponding to the infrastructure. In order to transmit additional information from the broadcasting station 76 to a large number of receivers 77, broadcast communication such as a mobile phone or a pot bell can be used.
[0075]
As an example of use of the present embodiment, for example, it is assumed that the broadcast station 76 is a broadcast channel A for baseball broadcasting, and the user of the receiver 77 is not currently watching TV. Prior to the start of the baseball broadcast, the broadcast station 76 of channel A transmits additional information for prompting viewing of channel A from the data transmission device 110 and the antenna 111 and is received by the antenna 112 of the receiver 77. Then, it is transmitted to the doll 31 in real time via the first converter 73, the transmitter 74, and the antenna 74.
[0076]
The doll 31 receives this additional information and informs the user of the receiver 77 by its behavior and the like to watch the channel A because the baseball broadcast starts. As a result, the doll 31 becomes a means for improving the program audience rating for the broadcasting station 76 and has an advantage of having an alarm function for the receiver to prevent forgetting to watch.
[0077]
Next, a modification of the fifth embodiment will be described. First, as long as the additional information generator 62, the data transmission device 110, and the antenna 111 are synchronized with the broadcast content, the additional information generator 62, the data transmission device 110, and the antenna 111 may be physically provided in a place different from the broadcast station. It may be configured to be managed and held by a vendor different from 76 broadcasters.
[0078]
In such a case, the additional information may be transmitted from an existing analog broadcasting station in advance, or may be transmitted via a different radio station or the Internet. In the case of transmission via the Internet, the transmission side may transmit data explaining the situation as text data, and the reception side may convert this into additional information as shown in FIG.
[0079]
The antenna 112, the receiver 113, the first converter 73, the transmitter 74, and the antenna 75 may be provided outside the receiver 77. In this case, there is an advantage that the receiver 77 can use the existing set top box as it is.
[0080]
Further, among the antenna 112, the receiver 113, the first converter 73, the transmitter 74 and the antenna 75, the antenna 112, the receiver 113 and the first converter 73 are replaced with the antenna 32 and the receiver 33 in the doll 31. It may be built in. In this case, the transmitter 74 and the antenna 75 are unnecessary, and an existing set-top box can be used as the receiver 77 as it is, and the doll can be directly controlled from the broadcasting station 76 even when the main power of the receiver 77 is off. There is an advantage.
[0081]
Further, for example, one day's worth of additional information is transmitted from the data transmission device 110 in advance, and the receiver 113 is necessary based on time management information in the additional information received and stored in the built-in memory. Additional information may be generated at any time. In this case, the doll 31 can be controlled at a desired time.
[0082]
The present invention is not limited to the above embodiment. For example, as shown in FIG. 11, the determination processing unit 100 is provided in the program memory 35 and the program memory 351 other than the normal control contents is included. A program memory 352 for storing the result of the learning function may be provided, and a learning function may be added such that the next control is performed by accumulating past situation determination data.
[0083]
For example, in the repetition of the scene shown in FIG. 5B that “the main character is attacked by the enemy but is saved well”, the 8 bits of a0a1b0b1c0c1c2c3 are continuous with the values “00111010” and “01110100”. In the embodiment shown in FIG. 4, 16 kinds of control contents are stored for each of “00111010” and “01110100”, and no other selection is possible.
[0084]
However, in another embodiment of FIG. 11, the program memory 35 has a determination function, and the latest address 101 corresponding to the current situation explanation data and the immediately previous address 102 corresponding to the previous situation explanation data are provided. Comparing by the comparator 103 and counting up the counter 104 when the two match, the normal control contents corresponding to the current situation explanation data are read from the program memory 351, and the output of the counter 104 is output to this. It is possible to take into account the control contents when the situation explanation data continues from the program memory 352 receiving the address.
[0085]
Therefore, when the two types of situation explanation data as described above are continuous, it can be determined that the scene is “the main character is attacked but saved, and then attacked one after another.” Different data stored in the program memory 352 in the memory area is read out, and a new control result based on the determination such as “occurrence: this is the fifth time.
[0086]
In each of the above embodiments, the second converter 34 is provided in the doll 31, but the second converter is provided in the playback device, receiver (set top box) or game machine body. The situation description data after the second conversion may be wirelessly transmitted to the doll 31. Further, the transmission means is not limited to wireless transmission as in each of the above embodiments, but may be wired transmission or optical transmission. Furthermore, although the example of the doll 31 was given as an external device, the external shape of the external device may be any shape. Further, the control information selected by the second converter may be two or more. In all of the above embodiments, it is needless to say that the

first converters

21 and 73 can be omitted when the user attribute is sent in advance as additional information.
[0087]
【The invention's effect】
As described above, according to the present invention, an external device having a desired shape is obtained based on additional information generated at a time corresponding to a desired scene based on video information and audio information output from a video / audio generation source. By making the behavior according to the desired scene, the video and audio information output from the video / audio generation source can behave as if the external device is enjoying with the user. Therefore, it is possible to provide the user with new home entertainment that has never existed before via an external device, which can lead to the creation of a new market.
[0088]
Further, according to the present invention, the behavior of the external device is performed based on one or more control information selected from a plurality of control information, and the same scene is reproduced or displayed each time. Since different behaviors can be performed on the external device, the expandability and flexibility of the playing method of the external device can be provided as compared with the prior art.
[0089]
Furthermore, according to the present invention, when the receiver, the first conversion means, and the second conversion means that constitute the receiving side terminal are each incorporated in the desired external shape device, the broadcast signal Can be received by an existing broadcast signal receiving device, and can receive additional information in coexistence with the existing broadcasting system, regardless of the operation of the broadcast signal receiving device, and the operation corresponding to the additional information can be performed as desired. Can be done with shape equipment.
[Brief description of the drawings]
FIG. 1 is an explanatory diagram of recording contents and recording areas of an optical disc used in a first embodiment of the present invention.
FIG. 2 is a block diagram of a main part of the first embodiment of the present invention.
FIG. 3 is a block diagram of another main part of the first embodiment of the present invention.
4 is a block diagram of an example of a second converter in FIG. 3. FIG.
FIG. 5 is an explanatory diagram of additional information.
FIG. 6 is a system configuration diagram of a second embodiment of the present invention;
FIG. 7 is a system configuration diagram of a third embodiment of the present invention;
FIG. 8 is a system configuration diagram of a fourth embodiment of the present invention;
FIG. 9 is a block diagram of a modification of the main part of the second embodiment of the present invention.
FIG. 10 is a system configuration diagram of a fifth embodiment of the present invention;
FIG. 11 is a block diagram of a main part of another embodiment of the present invention.
[Explanation of symbols]
1 Optical disc
2 Main recording area
3 Sub-recording area
4a-4c Video / audio data
5a, 5c, 5e timestamp
5b, 5d, 5f Scene information
6 hour data
7 Situation explanation data
10 DVD playback unit
12 Main story reader
13, 18 Time stamp detector
16 Dedicated reader
17 Additional information playback device
19 Comparator
20 Additional information reading timing generator
21, 73 First converter
22, 35, 54 Program memory
23, 74, 83 Transmitter
31, 47, 97 Doll
33 Receiver
34 Second converter
36 Control equipment
41 Situation explanation data extractor
42 Memory read address generator
43 Random number generator
44 registers
45 selector
51, 53, 91, 92 Detector
52, 93 Switch circuit
60, 76 broadcasting stations
62 Additional information generator
63 Multiplexer
66, 77 Receiver (set top box)
69 Demultiplexer
72 Additional information extractor
78 Game controller
80 Game console
81 Normal game processing device
82 Additional information generator
94 D / A converter
95 Speaker
110 Data transmission device
113 Receiver for additional information

Claims

A video / audio source that generates synchronized video and audio information;
Additional information generating means for generating additional information related to the desired scene at a time or time corresponding to the desired scene based on the video information and audio information output from the video / audio generation source;
An external device having a desired outer shape that includes a control device driven by the input control information and operates according to the input control information by the control device;
Restriction information storage means for storing at least one of the user attribute and the use location attribute as restriction information in advance by user setting or automatic setting;
First conversion means for restricting the additional information generated by the additional information generating means with the restriction information read from the restriction information storage means ;
Transmitting means for transmitting the limited additional information output from the first converting means;
Receiving means that is incorporated in the external device and receives the transmitted additional information after the restriction;
A plurality of control information that is incorporated in the external device and that causes the external device to perform different behaviors corresponding to the additional information after the restriction received by the receiving unit is generated. And a second conversion means for randomly selecting one or more control information from among the control information and outputting the selected control information to the control device as the input control information.

The additional information generation means describes time data for designating reproduction at a time corresponding to a desired scene based on the video information and audio information output from the video / audio generation source, and a situation of the scene. 2. The entertainment system according to claim 1, wherein data comprising situation explanation data is generated as the additional information.

The video / audio generation source includes a reading device that reads the video information and audio information from a recording medium on which the video information and audio information are recorded, and the additional information generation means is recorded on the recording medium. The entertainment system according to claim 1, further comprising a reproducing unit that reproduces the additional information.

The video / audio generation source is a reception device that receives a broadcast signal in which at least the video information and audio information are synchronized, and the additional information generation means is a program of the broadcast signal transmitted together with the broadcast signal. The entertainment system according to claim 1, wherein the entertainment system is an additional information extractor that extracts additional information that explains a situation.

The video / audio source is a game processing apparatus for generating in synchronism with said video information and audio information by an instruction of the game controller, the additional information generating means, the game development information obtained from the game processing device 2. The entertainment system according to claim 1, wherein explanation data of the corresponding situation is generated as the additional information.

Reception in an entertainment system comprising a transmitting side device that transmits additional information of information content related to a broadcast signal program in which video information and audio information are synchronized, and a receiving side terminal that receives the additional information from the transmitting side device Side terminal,
A receiver for receiving the additional information transmitted from the transmitting device;
First conversion means for limiting the additional information received by the receiver with restriction information that is at least one of a user attribute and a use place attribute ;
And a control device that will be driven by the input control information, and the desired external shape device that an operation corresponding to the input control information by the control device,
Transmitting means for transmitting the limited additional information output from the first converting means;
Receiving means for receiving the limited additional information transmitted by the transmitting means;
A plurality of control information corresponding to the additional information after the restriction received by the receiving unit is generated to cause the desired external shape device to perform different behaviors, and one or two or more of the plurality of control information are generated. And a second conversion unit that randomly selects control information and supplies the control information to the control device as the input control information.

7. The receiving terminal according to claim 6, wherein the receiving means and the second converting means are each incorporated in the desired outer shape device.

The receiver is an interface for receiving the additional information coming through a transmission path, and is configured separately from the desired external shape device together with the first conversion unit and the transmission unit . The receiving terminal according to claim 6.

A transmitting side device that transmits additional information of information content related to a program of a broadcast signal in which video information and audio information are synchronized, and a receiving side that receives the additional information from the transmitting side device. A receiving-side terminal in an entertainment system comprising terminals,
A receiver for receiving the additional information transmitted from the transmitting device;
First conversion means for limiting the additional information received by the receiver with restriction information that is at least one of a user attribute and a use place attribute;
A control device driven by the input control information, and a desired outer shape device that operates according to the input control information by the control device;
A plurality of control information for causing the desired external shape device to perform different behaviors corresponding to the additional information after the restriction is generated, and one or more control information is randomly selected from the plurality of control information. Second conversion means for supplying the control equipment as the input control information, and the receiver, the first conversion means and the second conversion means together with the control equipment and the desired outer shape equipment. A receiving terminal characterized by being incorporated in the terminal.

Transmitting side device that transmits additional information of information content related to a broadcast signal program in which video information and audio information are synchronized, via a different path from the broadcast signal, and receiving and receiving the additional information from the transmitting side device from among the at least one attribute and is then limited by the restriction information and outputs a plurality of control information corresponding to said limited additional information is further output attributes attributes and use the location of the user the additional information A transmission-side device in an entertainment system comprising a receiving-side terminal that operates a desired outer shape device having a desired outer shape in accordance with one or more selected control information,
Regarding the operation of the desired outer shape device at the receiving terminal, the situation explanation data describing the situation of the desired scene is added so that the desired outer shape device operates corresponding to the desired scene of the broadcast signal. A transmission-side apparatus that transmits the information as information.