JP2006129246A - 映像再生装置及び映像再生方法 - Google Patents

Abstract

【課題】拡張性に優れた映像再生が可能な映像再生装置を提供すること。
【解決手段】この発明の映像再生装置は、第１のコンテンツをデコードする第１のデコード手段と、第２のコンテンツをデコードする第２のデコード手段と、前記第１及び第２のデコード手段によりデコードされた前記第１及び第２のコンテンツを比較する比較手段と、前記比較手段による比較結果に基づき、前記第１及び第２のデコード手段による前記第１及び第２のコンテンツのデコードを制御する制御手段と、前記第１及び第２のデコード手段によりデコードされた前記第１及び第２のコンテンツのデコード映像を出力する出力手段とを備えている。
【選択図】 図１

Description

本発明は、主映像及び副映像により構成される映像データ（ＤＶＤコンテンツなど）を再生する映像再生装置及び映像再生方法に関する。

近年、ＤＶＤコンテンツの普及が目覚しく、様々なＤＶＤコンテンツ再生技術が提案されている。例えば、主映像を示す主映像情報と、少なくとも一部が主映像に重ねて表示可能とされる副映像を示す副映像情報とが記録された情報記録媒体を再生する技術が開示されている（特許文献１参照）。
特開２００４−１２８７６９号公報

上記したように、ＤＶＤコンテンツ再生技術については様々な提案がなされているが、あくまでもＤＶＤコンテンツ単独の再生であり、拡張性に乏しいという問題があった。

本発明の目的は、上記課題を解決するためになされたものであり、拡張性に優れた映像再生が可能な映像再生装置及び映像再生方法を提供することにある。

この発明の映像再生装置は、以下のように構成されている。

この発明は、例えば、第１のコンテンツをデコードする第１のデコード手段と、第２のコンテンツをデコードする第２のデコード手段と、前記第１及び第２のデコード手段によりデコードされた前記第１及び第２のコンテンツを比較する比較手段と、前記比較手段による比較結果に基づき、前記第１及び第２のデコード手段による前記第１及び第２のコンテンツのデコードを制御する制御手段と、前記第１及び第２のデコード手段によりデコードされた前記第１及び第２のコンテンツのデコード映像を出力する出力手段とを備えたことを特徴とする映像再生装置である。

この発明は、例えば、第１のデコード手段によりデコードされた第１のコンテンツと、第２のデコード手段によりデコードされた第２のコンテンツとを比較し、比較結果に基づき、前記第１及び第２のデコード手段による前記第１及び第２のコンテンツのデコードを制御し、前記第１及び第２のデコード手段によりデコードされた前記第１及び第２のコンテンツのデコード映像を出力することを特徴とする映像再生方法である。

本発明によれば、拡張性に優れた映像再生が可能な映像再生装置及び映像再生方法を提供できる。

以下、図面を参照し、本発明の実施形態について説明する。

図１は、本発明の一例の映像再生装置の概略構成を示すブロック図である。この映像再生装置は、互いに関連性の無い異なる複数のコンテンツを関連付けて再生することが可能である。本実施形態では、一例として、ＤＶＤコンテンツ（第１のコンテンツ）とＦｌａｓｈコンテンツ（第２のコンテンツ）とを関連付けて再生するケースについて説明する。

図１に示すように、映像再生装置は、副映像デコーダ（Ｓｕｂ−Ｐｉｃｔｕｒｅ Ｄｅｃｏｄｅｒ）１、主映像デコーダ（Ｍａｉｎ Ｖｉｄｅｏ Ｄｅｃｏｄｅｒ）２、Ｆｌａｓｈデコーダ（Ｆｌａｓｈ Ｄｅｃｏｄｅｒ）３、比較／合成部（Ｃｏｍｐａｒｅ／Ｍｉｘｉｎｇ）４、コントローラ５、合成部（Ｍｉｘｉｎｇ）６、Ｆｌａｓｈコンテンツ格納部７、ＤＶＤコンテンツ格納部８、及び操作入力部９などを備えている。

ＤＶＤ−Ｖｉｄｅｏ規格上には、予めＲＯＭディスクに記録されている主映像データおよび副映像データにより構成されるＤＶＤコンテンツと、ＲＯＭディスク上に記録されていないＦｌａｓｈなどのその他の映像コンテンツとの時間や表示位置などを関連付ける規定が存在しない。従って、ＤＶＤコンテンツの映像とＦｌａｓｈコンテンツの映像とを関連付けて再生することができなかった。例えば、Ｆｌａｓｈコンテンツの映像のある動作に対応して、ＤＶＤコンテンツの映像を制御することができなかった。

本発明の映像再生装置は、ＤＶＤコンテンツを構成する副映像データと、ＤＶＤ以外のコンテンツの映像データとを比較し、比較結果に基づきＤＶＤコンテンツとＤＶＤ以外のコンテンツとを関連付けて動作させることができる。ＤＶＤコンテンツを構成する副映像データは、同じくＤＶＤコンテンツを構成する主映像データに関連する関連情報（主映像の位置や大きさ等を示す情報）を含む。この関連情報とＤＶＤ以外のコンテンツの映像データとを比較する。即ち、ＤＶＤの主映像とＤＶＤ以外のコンテンツの映像とを画素単位またはオブジェクト単位で比較することになる。なお、ＤＶＤコンテンツを構成する副映像データは、字幕等の映像データを含むこともできる。本実施形態では、ＤＶＤ以外のコンテンツの一例として、Ｆｌａｓｈコンテンツを挙げて説明する。

例えば、図２に示すような、Ｆｌａｓｈで作成したシューティングゲーム用のＦｌａｓｈコンテンツと、別途作成したＤＶＤコンテンツを想定する。ＤＶＤコンテンツは、シューティングゲームに対応する主映像データ(シューティングのターゲットとなる画像データ)と、この主映像データの画像内容を示す関連情報(シューティングのターゲットの位置や大きさ等を示す情報)を含む副映像データ、さらには字幕等の映像データを含む副映像データにより構成される。なお、副映像データは、１画面の主映像データに対して最大３２個まで定義することができる。

例えば、ユーザが、操作入力部９を介して、Ｆｌａｓｈコンテンツに基づき表示されるスコープ画像の動きを制御することができるとする。Ｆｌａｓｈコンテンツによるスコープ画像とＤＶＤコンテンツによるターゲット画像の表示位置が一致するとターゲット画像が爆発し（ターゲット画像が切り替わり）、両者の表示位置が一致しなければ何も起こらない（ターゲット画像が切り替わらない）という動作は、次のようにして実現される。

副映像デコーダ１は、ＤＶＤコンテンツの副映像データをデコードする。主映像デコーダ２は、ＤＶＤコンテンツの主映像データをデコードする。また、Ｆｌａｓｈデコーダ３は、Ｆｌａｓｈコンテンツをデコードする。比較／合成部４は、デコードされたＤＶＤコンテンツの副映像データ（関連情報）と、デコードされたＦｌａｓｈコンテンツの映像データとを比較し、比較結果を出力する。コントローラ５は、比較結果に基づき、副映像デコーダ１、主映像デコーダ２、Ｆｌａｓｈデコーダ３のデコードを制御する。つまり、比較／合成部４は、Ｆｌａｓｈコンテンツのスコープ画像の画素またはオブジェクトと、ＤＶＤコンテンツのターゲット画像の画素またはオブジェクトとを比較し、両者の一致（完全一致或いは部分一致）又は不一致を示す比較結果を出力する。コントローラ５は、両者の一致を示す比較結果を受けると、各デコーダのデコードを制御し、主映像データのアングルを現在のアングル（ターゲットが爆発していない映像のアングル）から別のアングル（ターゲットが爆発する映像のアングル）へ切り替える。これにより、Ｆｌａｓｈコンテンツの動作とＤＶＤコンテンツの動作を関連付けることが可能となる。

図２を参照して時系列的に説明すると、時刻Ｔ０〜Ｔ１までは、ＦｌａｓｈコンテンツとＤＶＤコンテンツの副映像データ（Ｓｕｂ−Ｐｉｃｔｕｒｅ）とを比較しても、両者は一致していない。よって、比較／合成部４は、不一致を示す比較結果をコントローラ５へ通知する。コントローラ５は、不一致を示す比較結果を受けて、各デコーダを制御する。副映像デコーダ１はＣｈ０の副映像データ（非表示情報）をデコードし、主映像デコーダ２はＡｎｇｌｅ０の主映像データ（Ｍａｉｎ Ｖｉｄｅｏ）をデコードし、Ｆｌａｓｈデコーダ３はＦｌａｓｈコンテンツをデコードする。比較／合成部４は、さらにＦｌａｓｈコンテンツとＣｈ０の副映像データを比較し比較結果をコントローラ５へ通知するとともに、Ｆｌａｓｈコンテンツを合成部６へ出力する。なお、比較／合成部４は、Ｃｈ０の副映像データ（非表示情報）とＦｌａｓｈコンテンツを合成しない。合成部６は、比較／合成部４からのＦｌａｓｈコンテンツと、主映像デコーダ２からのＡｎｇｌｅ０の主映像データとを合成しビデオモニタ１０へ表示画像として出力する（時刻Ｔ１〜Ｔ２）。従って、実際に表示されるのは、ＤＶＤコンテンツの主映像及びＦｌａｓｈコンテンツの映像となる。

時刻Ｔ２では、Ｆｌａｓｈコンテンツと副映像データとを比較すると、両者は一致している。よって、比較／合成部４は、一致を示す比較結果をコントローラ５へ通知する。コントローラ５は、一致を示す比較結果を受けて、各デコーダを制御する。副映像デコーダ１はＣｈ１の副映像データ（字幕等の表示情報）をデコードし、主映像デコーダ２はＡｎｇｌｅ１の主映像データをデコードし、Ｆｌａｓｈデコーダ３はＦｌａｓｈコンテンツをデコードする。比較／合成部４は、これらＦｌａｓｈコンテンツとＣｈ１の副映像データを合成して合成部６へ出力する。合成部６は、比較／合成部４からの合成データと、主映像デコーダ２からのＡｎｇｌｅ１の主映像データとを合成しビデオモニタ１０へ表示画像として出力する（時刻Ｔ３）。実際に表示されるのは、ＤＶＤコンテンツの主映像と副映像及びＦｌａｓｈコンテンツとなる。また、コントローラ５によりＦｌａｓｈデコーダ３のデコードを制御し、時刻Ｔ３のタイミングで表示されるＦｌａｓｈコンテンツの表示画像を切り替えるようにしてもよい。

上記のように副映像データが映像（字幕等）を含む場合には、比較／合成部４は、この副映像データに含まれる映像の全領域又は指定領域の表示／非表示を制御することもできる。つまり、副映像データに含まれる映像表示を完全ＯＦＦにしたり部分ＯＦＦにしたりすることができる。例えば、比較／合成部４は、副映像データに含まれる映像の全領域又は指定領域のコントラストを制御して、表示／非表示を制御する。これにより、ＦｌａｓｈコンテンツとＤＶＤコンテンツを構成する主映像および副映像とを関連付けた同時表示が可能となる。

また、ＦｌａｓｈコンテンツはＤＶＤコンテンツのようにＲＯＭディスクに記録されていないため、このＦｌａｓｈコンテンツと別のＤＶＤコンテンツとを関連付けて再生することもできる。

ＤＶＤコンテンツの主映像データとＦｌａｓｈコンテンツの映像データとを直接比較しないのは、ＤＶＤコンテンツの主映像データは１画面単位のデータで構成されているからである。つまり、１画面中に表示されているオブジェクト（例えば人物など）を認識するには高度な画像認識処理が必要となり、しかも認識率が必ずしも１００％になるとは限らないためである。そこで、オブジェクトの位置や大きさ等を示す関連情報を副映像データに持たせる。ＤＶＤフォーマットで規定されているように、１画面の主映像に対して最大３２種類の副映像データ（関連情報）を持たせることができる。また、副映像データにより複数のオブジェクトを同一画面上に表示することはできないが、それと同様の状況を作り出すことができる。

ＤＶＤコンテンツを構成する副映像データは、２ビットの画素情報と、４ビットの色情報と、４ビットのコントラスト情報とを含み、これら各情報とＦｌａｓｈの映像データとを比較することにより、複数レベルの比較結果を得ることができる。つまり、ＤＶＤコンテンツを構成する主映像データとＦｌａｓｈの映像データとが、どの程度一致しているのかを判別することができる。例えば、シューティングゲームの上級者は、比較精度を高く設定したり、比較領域を小さく設定したりすることにより、難易度の高いゲームを楽しむことができる。逆に、シューティングゲームの初級者は、比較精度を低く設定したり、比較領域を大きく設定したりすることにより、難易度の低いゲームを楽しむことができる。

次に、図３に示すフローチャートを参照して、複数のコンテンツを関連付けた映像再生処理の一例について説明する。本発明の映像再生装置は、複数のコンテンツの中から、いくつかのコンテンツを選択して、これら選択したコンテンツを関連付けて再生することができる。図３に示すフローチャートでは、一例として、複数のコンテンツの中から、一つのＦｌａｓｈコンテンツと一つのＤＶＤコンテンツとを選択し、これら両コンテンツを関連付けて再生するケースについて説明する。

例えば、ユーザは、操作入力部９を介して、Ｗｅｂサイト上から一つのＦｌａｓｈコンテンツを選択する（ＳＴ１）。或いは、ユーザは、操作入力部９を介して、予めダウンロードされＦｌａｓｈコンテンツ格納部７に格納された複数のＦｌａｓｈコンテンツの中から、一つのＦｌａｓｈコンテンツを選択する（ＳＴ１）。

さらに、ユーザは、操作入力部９を介して、Ｗｅｂサイト上から一つのＤＶＤコンテンツを選択する（ＳＴ２）。或いは、ユーザは、操作入力部９を介して、予めＤＶＤコンテンツ格納部８（例えばディスクチェンジャー）に格納された複数のＤＶＤディスクの中から、一つのＤＶＤコンテンツを選択する（ＳＴ２）。

さらに、ユーザは、操作入力部９を介して、ＤＶＤコンテンツの副映像を選択する（ＳＴ３）。上記したように、ＤＶＤコンテンツでは、最大３２種類の副映像データ（関連情報）を持つことができるため、この副映像の選択により様々な再生を楽しむことができる。なお、副映像については、ユーザ指定だけでなく、デフォルト指定を利用することもできる。

さらに、ユーザは、操作入力部９を介して、比較精度及び比較領域を設定することができる（ＳＴ４）。比較精度及び比較領域の設定による効果等は、既に説明したので、ここでは省略する。なお、比較精度及び比較領域についても、ユーザ指定だけでなく、デフォルト指定を利用することもできる。

副映像デコーダ１及び主映像デコーダ２は、選択されたＤＶＤコンテンツの再生を開始し、また、Ｆｌａｓｈデコーダ３は、選択されたＦｌａｓｈコンテンツの再生を開始する（ＳＴ６）。さらに、比較／合成部４は、ＤＶＤコンテンツの副映像データ（関連情報）と、Ｆｌａｓｈコンテンツとを比較し、比較結果を出力する。コントローラ５は、比較結果と設定された比較精度及び比較領域に基づき、副映像デコーダ１、主映像デコーダ２、及びＦｌａｓｈデコーダ３によるデコードを制御する（ＳＴ８）。このデコード制御により、副映像デコーダ１及び主映像デコーダ２から出力されるＤＶＤコンテンツの主映像及び副映像（字幕等の映像データ）が切り換わり、またＦｌａｓｈデコーダ３から出力されるＦｌａｓｈコンテンツの映像が切り換わる。その結果、合成部６は、ＤＶＤコンテンツとＦｌａｓｈコンテンツとを合成することにより、両者を関連付けた画像を出力することができる（ＳＴ９）。ＳＴ６〜ＳＴ９の処理は、コンテンツの再生が終了するまで継続する（ＳＴ１０）。

以上説明したように、本発明によれば、様々なコンテンツの関連付けにより、様々な再生を楽しむことができる。なお、関連付けされるコンテンツは、ＤＶＤコンテンツ同士でもよい。また、関連付けされるコンテンツを構成するデータが、ビットマップデータであってもよいし、ＪＰＥＧなどのデジタル静止画データであってもよい。

なお、本願発明は、上記実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。

本発明の一例の映像再生装置の概略構成を示すブロック図である。 ＦｌａｓｈコンテンツとＤＶＤコンテンツとの関連再生の一例の表示画像を示す図である。 ＦｌａｓｈコンテンツとＤＶＤコンテンツとの関連再生の一例を示すフローチャートである。

符号の説明

１…副映像デコーダ、２…主映像デコーダ、３…Ｆｌａｓｈデコーダ、４…比較／合成部、５…コントローラ、６…合成部、７…Ｆｌａｓｈコンテンツ格納部、８…ＤＶＤコンテンツ格納部、９…操作入力部

Claims (11)

1. 第１のコンテンツをデコードする第１のデコード手段と、
   第２のコンテンツをデコードする第２のデコード手段と、
   前記第１及び第２のデコード手段によりデコードされた前記第１及び第２のコンテンツを比較する比較手段と、
   前記比較手段による比較結果に基づき、前記第１及び第２のデコード手段による前記第１及び第２のコンテンツのデコードを制御する制御手段と、
   前記第１及び第２のデコード手段によりデコードされた前記第１及び第２のコンテンツのデコード映像を出力する出力手段と、
   を備えたことを特徴とする映像再生装置。
2. 前記第１のデコード手段は、前記第１のコンテンツを構成する主映像データをデコードする主映像デコード手段と、前記第１のコンテンツを構成し前記主映像データの関連情報を含む副映像データをデコードする副映像デコード手段とを備え、
   前記比較手段は、前記副映像データに含まれる関連情報と前記第２のコンテンツとを比較する、
   ことを特徴とする請求項１に記載の映像再生装置。
3. 前記第１のデコード手段は、前記第１のコンテンツを構成する主映像データをデコードする主映像デコード手段と、前記第１のコンテンツを構成し前記主映像データの位置情報及びサイズ情報を含む副映像データをデコードする副映像デコード手段とを備え、
   前記比較手段は、前記副映像データに含まれる前記位置情報及びサイズ情報に基づき、前記第１のコンテンツの主映像データの位置及びサイズと前記第２のコンテンツとを比較する、
   ことを特徴とする請求項１に記載の映像再生装置。
4. 前記制御手段は、前記比較手段による比較結果に基づき、前記第１のコンテンツを構成する前記主映像データの切り替えを制御することを特徴とする請求項２又は３に記載の映像再生装置。
5. 前記制御手段は、前記比較手段による比較結果に基づき、前記第１のコンテンツを構成する前記副映像データの切り替えを制御することを特徴とする請求項２又は３に記載の映像再生装置。
6. 比較精度レベルの設定を受け付ける受付手段を備え、
   前記制御手段は、前記比較手段による比較結果及び前記比較精度レベルに基づき、前記第１のコンテンツの前記主映像データ及び前記副映像データの切り替えを制御することを特徴とする請求項２又は３に記載の映像再生装置。
7. 複数のコンテンツの中から前記第２のコンテンツの候補を選択し前記第２のデコード手段へ入力する選択入力手段を備えたことを特徴とする請求項１に記載の映像再生装置。
8. 複数のコンテンツを記憶する記憶手段と、
   前記記憶手段に記憶された複数のコンテンツの中から前記第２のコンテンツの候補を選択し前記第２のデコード手段へ入力する選択入力手段を備えたことを特徴とする請求項１に記載の映像再生装置。
9. 複数のコンテンツの中から前記第１のコンテンツの候補を選択し前記第１のデコード手段へ入力する選択入力手段を備えたことを特徴とする請求項１に記載の映像再生装置。
10. 複数のコンテンツの中から前記第１のコンテンツの候補を選択し、選択された前記第１のコンテンツを構成する複数の副映像データの中から所定の副映像データを選択し、選択された前記第１のコンテンツを構成する主映像データを前記主映像デコーダへ入力し、選択された前記第１のコンテンツを構成し且つ選択された所定の副映像データを前記副映像デコーダへ入力する選択入力手段を備えたことを特徴とする請求項２に記載の映像再生装置。
11. 第１のデコード手段によりデコードされた第１のコンテンツと、第２のデコード手段によりデコードされた第２のコンテンツとを比較し、
    比較結果に基づき、前記第１及び第２のデコード手段による前記第１及び第２のコンテンツのデコードを制御し、
    前記第１及び第２のデコード手段によりデコードされた前記第１及び第２のコンテンツのデコード映像を出力する、
    ことを特徴とする映像再生方法。

Images