JP3772023B2

JP3772023B2 - Image display device and image switching display method applied to the same

Info

Publication number: JP3772023B2
Application number: JP14121498A
Authority: JP
Inventors: 泰博石橋
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 1998-05-22
Filing date: 1998-05-22
Publication date: 2006-05-10
Anticipated expiration: 2018-05-22
Also published as: JPH11341440A

Description

【０００１】
【発明の属する技術分野】
本発明は動画を含むデジタルコンテンツを再生するための画像表示装置、および同装置に適用される画像切り替え表示方法に関する。
【０００２】
【従来の技術】
近年、コンピュータ技術の発達に伴い、デジタルビデオプレーヤ、セットトップボックス、ＴＶ、パーソナルコンピュータ等のマルチメディア対応の電子機器が種々開発されている。
【０００３】
このような電子機器のマルチメディア化に伴い、最近では、ＣＤ−ＲＯＭに代わる新たな蓄積メディアとしてＤＶＤが注目されている。１枚のＤＶＤ−ＲＯＭメディアには、片面で現在のＣＤ−ＲＯＭの約７倍にあたる４．７Ｇバイト程度のデータを記録することができ、両面記録では９．４Ｇバイト程度のデータを記録できる。このＤＶＤ−ＲＯＭメディアを使用することにより、大量の映像情報を含む映画などの動画像をコンピュータやデジタルビデオプレーヤ、セットトップボックス上などで高品質に再生することが可能となる。
【０００４】
ＤＶＤ−ＲＯＭメディアに記録されるビデオ情報のデータ構造はＤＶＤビデオ規格で定められている。ビデオ情報のストリームは、大別すると、プレゼンテーションデータとナビゲーションデータの２種類のデータに分けられる。
【０００５】
プレゼンテーションデータは再生されるビデオオブジェクトの集合であり、ビデオ、サブピクチャ、およびオーディオから構成されている。ビデオデータはＭＰＥＧ２方式で圧縮符号化される。また、サブピクチャおよびオーディオの符号化方式としては、ランレングス符号化およびＡＣ−３などがサポートされている。サブピクチャはビットマップデータであり、映画の字幕や、メニュー画面上の選択肢の表示などに用いられる。１つのビデオオブジェクトには、１チャネルのビデオデータ、最大８チャネルまでのオーディオデータ、最大３２チャネルまでのサブピクチャデータを含ませることができる。
【０００６】
ナビゲーションデータは、プレゼンテーションデータの再生手順を制御する再生制御データである。タイトル再生時には、このナビゲーションデータが解釈されることにより、動画データの再生順序、再生方法などが決定され、それに従って動画の再生が行われる。また、ナビゲーションデータには、ナビゲーションコマンドを埋め込むことができる。ナビゲーションコマンドは、ビデオデータの再生内容や再生順序を変更するためのものである、このナビゲーションコマンドを用いることにより、タイトル作成者はそのタイトルの中に種々の分岐構造を定義することができる。これにより、いわゆるマルチアングル、マルチストーリなどと称される映像ソース切り替え機能を実現することが出来、よりインタラクティブなタイトルを作成することが可能となる。
【０００７】
【発明が解決しようとする課題】
しかし、このような従来のタイトル構造では、ＤＶＤ規格に沿った特定の位置でしか映像ソースを切り替えることが出来きない。映像ソースを切り替えることができる位置は、タイトル作成時にナビゲーションコマンドをビデオストリームのどこに組み込むかによって決定されてしまうからである。
【０００８】
また、切り替え先の映像ソースについても同一のＤＶＤメディアに記録されたある特定の映像ソースに限られてしまい、例えば別のメディアに記録された映像や、インターネットによって提供されるデジタルコンテンツなど、ＤＶＤビデオとそれとは異なる他の任意の映像ソースとをリンクさせるといった制御を行うことは出来ない。
【０００９】
最近では、インターネットを用いた情報の流通が盛んに行われている。このインターネットの普及により、世界各地のありとあらゆるデジタルコンテンツを容易に入手して見ることが可能となっている。このような環境から、ＤＶＤビデオタイトルとインターネット技術とを融合させた新たなコンテンツの作成も求められ始めている。
【００１０】
本発明はこのような点に鑑みてなされたものであり、ビデオタイトルのタイトル構造を変更することなく、そのタイトルを構成する動画像ストリームの任意の再生位置での再生画像の切り替えや、任意の映像ソースへのリンク、さらにはリンク先の映像ソースの自動更新などを実現できるようにし、より自由度の高いタイトル再生を行うことができる画像表示装置、同装置に適用される画像切り替え表示方法を提供することを目的とする。
【００１１】
【課題を解決するための手段】
上述の課題を解決するため、本発明は、記録媒体から動画像ストリームを読み出して再生する画像表示装置において、前記記録媒体には、前記動画像ストリームに挿入すべきリンク画像を指定するためのリンク情報が格納されており、前記記録媒体から読み出された動画像ストリームを再生する再生手段と、前記記録媒体に格納されているリンク情報によって指定されるリンク画像と当該リンク画像に対応するリンク画像挿入時間情報とを、ネットワークを介して外部装置から受信する手段と、前記動画像ストリームの再生開始からの経過時間を計数し、前記再生開始からの経過時間が前記受信したリンク画像挿入時間情報によって指定される時間に達したとき、再生すべき画像データを、前記動画像ストリームから、前記受信したリンク画像に切り替える再生画像切り替え手段とを具備することを特徴とする。
【００１２】
この画像表示装置においては、記録媒体に格納されたリンク情報によって指定されるリンク画像と当該リンク画像に対応するリンク画像挿入時間情報とがネットワークを介して外部装置から受信され、動画像ストリームの再生開始からの経過時間が、受信されたリンク画像挿入時間情報によって指定される時間に達すると、再生すべき画像データは、前記動画像ストリームから、受信されたリンク画像に切り替えられる。このように再生開始からの経過時間を再生画像切り替えのトリガとして使用することにより、映像分岐のためのコマンドが埋め込まれたストリーム内の位置とは無関係に、任意の位置にて再生画像をリンク画像に切り替えることが可能となる。また、リンク画像とリンク画像挿入時間情報はネットワークを介して外部装置から受信されるので、タイトル作成後においても、任意の位置で任意のリンク画像を挿入することが可能となる。また、複数のリンク画像を挿入する場合においては、各リンク画像毎にリンク画像挿入時間を個々に指定することが可能となり、例えばＣＭ情報などのリンク画像を、タイトル再生開始から所定時間間隔で順次挿入するといった制御が可能となる。
【００１５】
また、前記リンク画像としては、プッシュ型情報サービスによって、ネットワークを通じて外部から前記画像表示装置の書き換え可能なローカルストレージに自動配信されるデジタルコンテンツを使用することができる。この場合、ローカルストレージのリンク画像は、前記自動配信によって自動的に書き換えられるので、常に最新のコンテンツをリンク画像として挿入することが可能となる。
【００２０】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態を説明する。
図１には、本発明の一実施形態に係る画像表示装置のハードウェアおよびソフトウェアの基本構成が示されている。
【００２１】
この画像表示装置は、デジタルビデオプレーヤやセットトップボックス、あるいはパーソナルコンピュータとして使用されるものであり、コンピュータグラフィクス、および動画像などを専用のディスプレイモニタや家庭用ＴＶに表示する機能を有する。
【００２２】
この画像表示装置には、ＤＶＤビデオ情報を再生するために必要な主なハードウェアとして、ＤＶＤ−ＲＯＭメディアからそれに記録された情報を読み出すＤＶＤドライブ１１１、画像表示装置の書き換え可能なローカルストレージとして使用されるＨＤＤ１１２、ＤＶＤドライブ１１１から読み出されたＭＰＥＧ２プログラムストリームから構成されるＤＶＤビデオ情報（ビデオ、サブピクチャ、オーディオ）をデコードするＤＶＤデコーダ１１３、ディスプレイモニタ１１５を制御するＶＧＡコントローラ１１４、およびインターネット接続のための通信装置（ＩＳＤＮカードまたはモデム）１１６などが設けられている。
【００２３】
ＤＶＤ−ＲＯＭメディアには、ナビゲーションデータとプレゼンテーションデータとからなる通常のＤＶＤビデオタイトルに加え、ＤＶＤビデオタイトルの再生中にそのＤＶＤビデオと切り替え表示すべきリンク画像を指定するためのリンクファイル情報（Ｌｉｎｋｆｉｌｅ）が格納されている。リンクファイル情報（Ｌｉｎｋｆｉｌｅ）は、ＨＤＤ１１２の所定領域に予めダウンロードされているリンク画像（ＶｉｄｅｏＤａｔａ）を指定する識別情報であり、ファイル名やパス名などから構成されている。なお、所定のＷｅｂサイトのデジタルコンテンツを指定するＵＲＬを、リンクファイル情報（Ｌｉｎｋｆｉｌｅ）として使用することも可能とである。
【００２４】
リンク画像（ＶｉｄｅｏＤａｔａ）は、インターネットを介して外部からプッシュ型情報サービスなどによって自動配信されたデジタルコンテンツ（動画、または静止画など）などである。すなわち、Ｗｅｂキャスティング機能を持つＷＷＷブラウザ２０３は、ＤＶＤタイトル作成者などが経営するＷｅｂサイトから常に新しいデジタルコンテンツを自動的にダウンロードし、それをＨＤＤ１１２上に用意された専用のキャッシュエリアに格納する。これらデジタルコンテンツは、ＭＰＥＧ２ストリームとして提供される。
【００２５】
各リンク画像（ＶｉｄｅｏＤａｔａ）にはタイマ情報（ＴｉｍｅＤａｔａ）が付加されている。タイマ情報（ＴｉｍｅＤａｔａ）は、リンク画像をＤＶＤタイトルに挿入して再生すべきタイミングを指定するためのものであり、ＤＶＤタイトル再生開始時からの経過時間を示す値によって与えられる。
【００２６】
ＤＶＤデコーダ１１３は、ＤＶＤビデオやリンク画像などのＭＰＥＧ２ストリームの再生のためにその復号化処理を行う。復号化されたＤＶＤビデオやリンク画像はデジタルＹＵＶ形式のビデオ信号（ＶＩＤＥＯ）としてＶＧＡコントローラ１１４のビデオ入力ポートに送られる。このＤＶＤデコーダ１１３には、さらに、タイムセットレジスタ１１７とタイムカウンタ１１８が設けられている。
【００２７】
タイムセットレジスタ１１７には、ＤＶＤビデオに挿入して表示すべきリンク画像（ＶｉｄｅｏＤａｔａ）のタイマ情報（ＴｉｍｅＤａｔａ）がリンク画像挿入時間として設定される。タイムカウンタ１１８は、ＤＶＤビデオの再生開始時からの経過時間を計数し、その再生開始からの経過時間がタイムセットレジスタ１１７にセットされたリンク画像挿入時間に一致したとき、それを示す割り込み信号（ＩＮＴ）を発生する。割り込み信号（ＩＮＴ）は、再生中の画像をＤＶＤビデオからリンク画像に切り替えるためのトリガとして使用される。
【００２８】
ＤＶＤ−ＲＯＭメディア上のタイトル再生は、ＤＶＤドライブ１１１およびＤＶＤデコーダ１１３の動作制御機能を持つＤＶＤ再生制御プログラム２０１によって制御される。このＤＶＤ再生制御プログラム２０１は、ハードウェアドライバ群と、それらドライバ群を用いてタイトル再生を行うアプリケーションプログラムなどから構成されている。
【００２９】
このＤＶＤ再生制御プログラム２０１には、ＤＶＤビデオとリンク画像との切り替え表示のためにさらに以下の機能が設けられている。
１）タイムセットレジスタ１１７へのリンク画像挿入時間情報設定機能
２）ＤＶＤデコーダ１１３からの割り込み（ＩＮＴ）に応答して、ＤＶＤデコーダ１１３に送信する画像データを、ＤＶＤビデオからリンク画像に切り替える機能
３）リンク画像の再生終了に応答して、ＤＶＤデコーダ１１３に送信し再生させる画像データをＤＶＤビデオに戻す機能
ＷＷＷブラウザ２０３は、ＨＴＴＰと称されるプロトコルを用いて外部のＷＷＷサーバと通信するためのＷＷＷクライアントであり、通信装置１００を介してＷｅｂサイトからＷｅb コンテンツを受け取り、それをＶＧＡコントローラ１１４を用いて画面表示する。ＷＷＷブラウザ２０３には、プッシュ型情報サービスに対応するためのＷｅｂキャスティング機能が設けられており、これにより常に最新のＷｅb コンテンツが自動配信されて、ＨＤＤ１１２のキャッシュエリアに格納される。
【００３０】
以下、インターネットからＷｅｂコンテンツとして送信されてくる動画または静止画と、ＤＶＤ−ＲＯＭメディア上のＤＶＤビデオとをリンクさせる場合の動作について説明する。
【００３１】
１）インターネットのプッシュ技術を使って、通信装置１１６経由でリンク画像（ＶｉｄｅｏＤａｔａ）と時間情報（ＴｉｍｅＤａｔａ）とから構成されるリンク画像用のコンテンツを外部からダウンロードし、ＨＤＤ１１２のキャッシュエリアにセーブする。
【００３２】
２）ユーザがＤＶＤ再生制御プログラム２０１を起動してあるＤＶＤビデオの再生操作を行うと、ＤＶＤ再生制御プログラム２０１は、ＤＶＤビデオの再生開始に先だって、再生対象のＤＶＤビデオと同一のＤＶＤメディア上に格納されているリンクファイル情報を参照し、リンクすべき画像が設定されているか否かを確認する（リンクファイル情報によって複数のリンク画像を指定することも可能）。
【００３３】
３）ＤＶＤ再生制御プログラム２０１は、リンクファイル情報で指定されたリンク画像をＨＤＤ１１２のキャッシュエリアから検索する。
４）ＤＶＤ再生制御プログラム２０１は、検索したリンク画像に対応する時間情報（ＴｉｍｅＤａｔａ）を、ＤＶＤデコーダ１１３のタイムセットレジスタ１１７にリンク画像挿入時間として設定する。
【００３４】
５）ＤＶＤ再生制御プログラム２０１がＤＶＤビデオの再生をＤＶＤデコーダ１１３に指示し、ＤＶＤデコーダ１１３は、ＤＶＤ再生制御プログラム２０１によってＤＶＤ−ＲＯＭメディアから読み出されたＤＶＤビデオの再生のための復号化処理を開始する。
【００３５】
６）ＤＶＤビデオ再生のための復号化処理が開始されると、タイムカウンタ１１８のカウント動作が始まり、ＤＶＤビデオの再生開始からの経過時間が計数される。
【００３６】
７）タイムカウンタ１１８のカウント値がタイムセットレジスタ１１７に設定されているリンク画像挿入時間を示す値に達すると、ＤＶＤデコーダ１１３は、ＤＶＤビデオの再生を一旦停止し、そして割り込み信号（ＩＮＴ）を発生してリンク画像挿入時間に達したことをＤＶＤ再生制御プログラム２０１に通知する。
【００３７】
８）ＤＶＤ再生制御プログラム２０１は、割り込み信号（ＩＮＴ）を受け取ると、ＨＤＤ１１２に格納されているリンク画像をＤＶＤデコーダ１１３に送り、その再生を指示する。
【００３８】
９）ＤＶＤ再生制御プログラム２０１は、ＤＶＤデコーダ１１３へのリンク画像の転送が終了すると、再生中断されたＤＶＤビデオの続きをＤＶＤデコーダ１１３に送り、その再生を開始させる。
【００３９】
１０）リンクファイル情報によって複数のリンク画像が指定されている場合は、ＤＶＤビデオの続きが再生開始される前に、新しいリンク画像挿入時間をタイムセットレジスタ１１７に設定する。
【００４０】
１１）７から１０を繰り返す。
以上のように、本実施形態においては、ＭＰＥＧ２ストリームから構成されるＤＶＤビデオの再生開始からの経過時間が、予め設定されたリンク画像挿入時間に達すると、再生すべき画像データは、ＤＶＤビデオから、リンクファイル情報によって指定されるリンク画像に切り替えられる。このように再生開始からの経過時間を再生画像切り替えのトリガとして使用することにより、映像分岐のためのコマンドが埋め込まれたストリーム内の位置とは無関係に、任意の位置にて再生画像をリンク画像に切り替えることが可能となる。
【００４１】
図２には、本実施形態の画像表示装置をパーソナルコンピュータとして実現した場合の具体的なシステム構成が示されている。
図示のように、このシステムには、ＰＣＩバス１０、ＣＰＵ１１、主メモリ（ＭＥＭ）１２、ＡＴＡＰＩまたはＳＣＳＩインタフェースから構成されるＤＶＤインターフェース１６、およびオーディオコントローラ１７と、前述のＤＶＤドライブ１１１、ＨＤＤ１１２、ＤＶＤデコーダ１１３、ＶＧＡコントローラ１１４、および通信装置１１６とが設けられている。
【００４２】
ＤＶＤドライブ１１１は、ＤＶＤメディアに蓄積されたＤＶＤビデオストリームを、最大で１０．０８Ｍｂｐｓの転送レートで読み出す。このＤＶＤドライブ１１１は、光ディスクからなるＤＶＤメディア、モータ、ピックアップ、ピックアップドライブ、サーボコントローラ、エラー検出および訂正のためのＥＣＣ回路を含むドライブコントローラなどから構成されている。モータ、ピックアップ、ピックアップドライブ、サーボコントローラ、およびドライブコントローラは、ＤＶＤメディアを駆動し、そのＤＶＤメディアに記録されたデータを読み出すためのドライブ装置として機能する。
【００４３】
ＤＶＤメディアには、例えば、片面で１３５分程度の映画を記録させることができる。この映画情報を構成するプレゼンテーションデータには、主映像（ビデオ）、３２チャネルまでの副映像（サブピクチャ）、および８チャネルまでの音声（オーディオ）を含ませることができる。
【００４４】
ＭＰＥＧ２規格では、ＭＰＥＧ２で符号化されたデータに、他の符号化データを含ませることがことができ、それら符号化データは１本のＭＰＥＧ２プログラムストリームとして扱われる。
【００４５】
ビデオの符号化にはＭＰＥＧ２を使用し、サブピクチャおよびオーディオの符号化にはそれぞれランレングス符号化およびＤＯＬＢＹＡＣ３が使用される。この場合でも、それら符号化されたビデオ、サブピクチャ、およびオーディオは、１本のＭＰＥＧ２プログラムストリームとして扱われる。
【００４６】
ＭＰＥＧ２規格の符号化処理は可変レート符号化であり、単位時間当りに記録／再生する情報量を異ならせることができる。よって、動きの激しいシーンほど、それに対応するフレーム群を構成するＭＰＥＧストリームの転送レートを高くすることによって、高品質の動画再生が可能となる。
【００４７】
図３には、本実施形態で用いられるＤＶＤビデオ情報の記録フォーマットの一例が示されている。この記録フォーマットはＤＶＤビデオ規格に対応するものである。
【００４８】
図３に示されているように、ＤＶＤ−ＲＯＭメディアのボリュームスペースは、ボリュームおよびファイル管理のためのボリューム・ファイル構造、ＤＶＤビデオ情報を構成するＤＶＤビデオゾーン、およびＤＶＤビデオ以外のその他のファイルエリアから構成されており、その他のファイルエリアには、前述のリンクファイル情報が格納されている。このリンクファイル情報には、リンクすべき画像を指定する複数のリンク先ファイル名（またはＵＲＬなどのパス名）を設定することができる。
【００４９】
ＤＶＤビデオゾーンは、ビデオマネージャ（ＶＭＧ）と、１以上のＤＶＤビデオタイトルセット（ＶＴＳ＃１〜ＶＴＳ＃ｎ）とから構成される。
ＶＭＧには、ビデオマネージャインフォメーション（ＶＭＧＩ）、メニュー用のビデオオブジェクトセット（ＶＯＢＳ）、およびバックアップ用のビデオマネージャインフォメーション（ＶＭＧＩ）が含まれる。
【００５０】
ＶＭＧＩは、ＤＶＤメディア上に存在する全てのＤＶＤビデオタイトルセット（ＶＴＳ＃１〜＃ｎ）の目次情報として使用されるものであり、各ビデオタイトルセット（ＶＴＳ）に関するサーチ情報およびパレンタル属性情報などを含む。ＶＭＧ内にメニュー用のビデオオブジェクトセット（ＶＯＢＳ）が含まれている場合には、ＶＭＧＩは、そのメニューの再生制御のための情報としてプログラムチェインフォメーション（ＰＧＣＩ）も含む。このＰＧＣＩは、メニュー用の各ビデオオブジェクト（ＶＯＢ）を構成する複数のセルの再生順序を示すものであり、タイトル作成者はここに前述のナビゲーションコマンド（プレコマンド、ポストコマンド、ボタンコマンド、セルコマンド）を埋め込むことができる。
【００５１】
プレコマンドは、ＰＧＣＩによって再生順序が規定されるセル群（ＰＧＣ内のセル）の再生を開始する前に実行されるナビゲーションコマンド群であり、ＰＧＣ再生前の初期設定などに用いられる。ポストコマンドはＰＧＣ内の全てのセルの再生が終了したときに実行されるナビゲーションコマンド群であり、次に再生するＰＧＣへの分処理などに用いられる。セルコマンドは、ＰＧＣ内の該当するセルの再生が終了した時点で実行されるナビゲーションコマンド群であり、特定セルの繰り返し再生などに用いられる。ボタンコマンドは、メニュー画面中の選択アイテムであるボタンがユーザ操作によって確定された時点で実行されるナビゲーションコマンド群であり、メニューアイテムの実行などに用いられる。
【００５２】
各ビデオタイトルセット（ＶＴＳ）は、ビデオタイトルセットインフォメーション（ＶＴＳＩ）、メニュー用のビデオオブジェクトセット（ＶＯＢＳ）、タイトルを構成するビデオオブジェクトセット（ＶＯＢＳ）、およびバックアップ用のビデオタイトルセットインフォメーション（ＶＴＳＩ）から構成される。
【００５３】
ＶＴＳＩは、そのＶＴＳ内のメニューおよびタイトルの再生制御情報であり、そのタイトルのサーチ情報、およびメニュー及びタイトル内におけるセル再生順序を管理するプログラムチェインインフォメーション（ＰＧＣＩ）を含む。このＰＧＣＩにも、前述のナビゲーションコマンド（プレコマンド、ポストコマンド、ボタンコマンド、セルコマンド）が埋め込まれている。
【００５４】
タイトルを構成するビデオオブジェクトセット（ＶＯＢＳ）は、セルと称される多数のビデオオブジェクト（セル＃１，＃２，…）を含んでいる。各セル（ビデオオブジェクト）は多数のビデオオブジェクトユニットからなり、その先頭にはナビパック（ＮＡＶＩ）が存在する。つまり、ナビパックから次のナビパックまでが１つのセル（ビデオオブジェクト）となる。このナビパックは前述したように１ＧＯＰまたは２ＧＯＰ（０．５秒から１秒）のビデオデータ単位で含まれている。各ナビパックは対応するビデオオブジェクトの再生を制御するためのもの管理情報であり、ディスクサーチインフォメーション（ＤＳＩ）パックおよびプレゼンテーションコントロールインフォメーション（ＰＣＩ）パックから構成されている。ＤＳＩパックは、早送り・巻き戻しなどの特殊再生時における再生開始アドレスの検索情報などとして用いられる。ＰＣＩパックは、マルチアングル再生時のアングル切り替えや、ユーザからの指示に応じてナビゲーションコマンド（ボタンコマンド）を実行させるためのハイライト情報の表示に用いられる。
【００５５】
１つのセルは、ある一定時間例えば、０．５秒から１秒の動画再生に必要な１５フレーム分の情報を構成するものであり、前述したようにＭＰＥＧ２プログラムストリームのＧＯＰ（Ｇｒｏｕｐｏｆｐｉｃｔｕｒｅ）を単位として構成される。各セルには、ビデオパック（Ｖ）、サブピクチャパック（Ｓ）、およびオーディオパック（Ａ）が多重化されて記録されている。これらビデオパック（Ｖ）、サブピクチャパック（Ｓ）、およびオーディオパック（Ａ）は、それぞれ符号化されたビデオ、サブピクチャ、オーディオのデータ単位である。これらパックのデータサイズは固定であるが、１つのセルに含ませることができるパック数は可変である。したがって、動きの激しいシーンに対応するセルほど、多数のビデオパックが含まれることになる。
【００５６】
以上のフォーマットにおいては、ＶＭＧＩ、ＶＴＳＩ、ＰＧＣＩ、ＰＣＩ、およびＤＳＩはナビゲーションデータを構成し、また、各メニューおよびタイトルのためのビデオパック、サブピクチャパック、およびオーディオパックはプレゼンテーションデータを構成する。
【００５７】
次に、図２のシステムの各ユニットについて説明する。
ＣＰＵ１１は、このシステム全体の動作を制御するものであり、システムメモリ（ＭＥＭ）１２に格納されたオペレーティングシステムおよび実行対象のアプリケーションプログラムを実行する。ＤＶＤメディアに記録されたＤＶＤビデオタイトルの再生は、ＣＰＵ１１にＤＶＤ再生制御プログラム２０１を実行させることによって開始される。
【００５８】
ＤＶＤインタフェース１６は、ＨＤＤやＣＤ−ＲＯＭなどの周辺装置をＰＣＩバス１０に接続するための周辺インタフェースであり、この実施形態では、ＤＶＤドライブ１１１との間のデータ転送を行う。
【００５９】
オーディオコントローラ１７は、ＣＰＵ１１の制御の下にサウンドデータの入出力制御を行うものであり、サウンド出力のために、ＰＣＭ音源１７１、ＦＭ音源１７２、マルチプレクサ１７３、およびＤ／Ａコンバータ１７４を備えている。マルチプレクサ１７３には、ＰＣＭ音源１７１およびＦＭ音源１７２からの出力と、ＤＶＤデコーダ１１３から転送されるデジタルオーディオデータが入力され、それらの１つが選択される。なお、このオーディオコントローラ１７のＤ／Ａコンバータに相当する機能はＤＶＤデコーダ１１３にも設けられており、オーディオコントローラ１７を使用せずに、直接アナログ音声信号を出力することもできる。
【００６０】
デジタルオーディオデータは、ＤＶＤドライブ１１１から読み出されたオーディオデータをデコードしたものである。ＤＶＤデコーダ１１３からオーディオコントローラ１７へのデジタルオーディオデータの転送には、オーディオバス１８ａが用いられ、ＰＣＩバス１０は使用されない。従って、コンピュータシステムの性能に影響を与えることなくデジタルオーディオデータの高速転送が可能となる。
【００６１】
ＤＶＤデコーダ１１３は、ＣＰＵ１１の制御の下に、メモリ１２を介して、あるいはＤＶＤ−ＲＯＭドライブ１１１から直接にＭＰＥＧ２プログラムストリームを読み出し、それをビデオ、サブピクチャ、およびオーディオパケットに分離した後、それらをそれぞれデコード処理し同期化して出力する。このＤＶＤデコーダ１１３は、図示のように、トランザクション制御部、ＦＩＦＯバッファ、およびＭＰＥＧ２デコーダを備えている。トランザクション制御部は、ＤＶＤデコーダ１１３をＰＣＩバス１０上にトランザクションを発行するバスマスタ（イニシエータ）として動作させるためのものであり、メモリ１２またはＤＶＤ−ＲＯＭドライブ１１１からＭＰＥＧ２プログラムストリームをリードするためのバスサイクルを実行する。このＭＰＥＧ２プログラムストリームはＦＩＦＯバッファを介してＭＰＥＧ２デコーダに送られ、そこで、ビデオ、サブピクチャ、およびオーディオパケットへの分離と、それらのデコード処理が行われる。
【００６２】
デコードされたオーディオデータは、前述したようにデジタルオーディオデータとしてオーディオバス１８ａを介してオーディオコントローラ１７に転送されたり、あるいは直接外部のＤＳＰなどに出力される。デコードされたビデオおよびサブピクチャは合成されて、デジタルＹＵＶデータとしてＶＧＡコントローラ１１４のビデオ入力ポートに送られる。この場合、ＤＶＤデコーダ１１３からＶＧＡコントローラ１１３へのデジタルＹＵＶデータの転送には、ビデオバス１８ｂが用いられ、ＰＣＩバス１０は使用されない。従って、デジタルＹＵＶデータの転送についても、デジタルオーディオデータと同様に、コンピュータシステムの性能に影響を与えることなく高速に行うことができる。
【００６３】
ビデオバス１８ｂとしては、ＶＥＳＡ規格のＶＡＦＣ（ＶＥＳＡＡｄｖａｎｃｅｄＦｅａｔｕｒｅＣｏｎｎｅｃｔｏｒ）、ＶＭ−Ｃｈａｎｎｅｌ（ＶＥＳＡＭｅｄｉａＣｈａｎｎｅｌ）、Ｓ３ＬＢＰのインターフェース、またはＺＶポートなどを利用することができる。
【００６４】
ＶＧＡコントローラ１１４は、ＣＰＵ１１の制御の下に、このシステムのディスプレイモニタとして使用されるＣＲＴディスプレイやＬＣＤを制御するものであり、ＶＧＡ仕様のテキストおよびグラフィクス表示の他、動画表示をサポートする。このＶＧＡコントローラ１１４には、図示のように、グラフィックス表示制御回路１９１、ビデオ表示制御回路１９２、マルチプレクサ１９３、およびＤ／Ａコンバータ１９４等が設けられている。
【００６５】
グラフィックス表示制御回路１９１は、ＶＧＡ互換のグラフィックスコントローラであり、ビデオメモリ（ＶＲＡＭ）２０に描画されたＶＧＡのグラフィクスデータをＲＧＢビデオデータに変換して出力する。ビデオ表示制御回路１９２は、デジタルＹＵＶデータを貯えるビデオバッファ、及び同バッファに貯えられたＹＵＶデータをＲＧＢビデオデータに変換するＹＵＶ−ＲＧＢ変換回路等をもつ。
【００６６】
マルチプレクサ１９３は、グラフィックス表示制御回路１９１とビデオ表示制御回路１９２の出力データの一方を選択、またはグラフィックス表示制御回路１９１からのＶＧＡグラフィクス上にビデオ表示制御回路１９２からのビデオを合成してＬＣＤおよびＤ／Ａコンバータ１９４に送る。Ｄ／Ａコンバータ１９４は、マルチプレクサ１９４からのビデオデータをアナログＲＧＢ信号に変換して、ＣＲＴディスプレイに出力する。
【００６７】
図４には、ＤＶＤビデオとリンク画像との画像切り替えの様子が示されている。
ここでは、図４（ａ）に示されているＤＶＤビデオのストリームに、図４（ｂ）のリンク画像（リンクコンテンツ１）と図４（ｃ）のリンク画像（リンクコンテンツ２）の二つのリンク画像を挿入する場合を想定する。
【００６８】
リンクコンテンツ１，２がそれぞれ再生時間が２分の映像ソースから構成され、リンクコンテンツ１に対応するリンク画像挿入時間Ｔ１が１０分、リンクコンテンツ２に対応するリンク画像挿入時間Ｔ２が１８分に設定されている場合には、図４（ｄ）に示されているように、ＤＶＤビデオの再生開始から１０分経過した時点で、再生画像はリンクコンテンツ１に切り替えられ、そのリンクコンテンツ１が再生される。リンクコンテンツ１が２分間再生されてその再生が全て完了すると、再び、ＤＶＤビデオの再生が再開される。そして、再生再開からリンク画像挿入時間Ｔ２で指定される１８分経過した時点で、再生画像はリンクコンテンツ２に切り替えられ、そのリンクコンテンツ２が再生される。リンクコンテンツ２が２分間再生されてその再生が全て完了すると、再び、ＤＶＤビデオの再生が再開される。
【００６９】
次に、図５のフローチャートを参照して、ＤＶＤ再生制御プログラム２０１による処理手順を説明する。
ユーザがＤＶＤ再生制御プログラム２０１を起動してあるＤＶＤビデオの再生操作を行うと、ＤＶＤ再生制御プログラム２０１は、ＤＶＤビデオの再生開始に先だって、再生対象のＤＶＤビデオと同一のＤＶＤメディア上に格納されているリンクファイル情報を参照し、リンクすべき画像が設定されているか否かを確認する（ステップＳ１０１，Ｓ１０２）。
【００７０】
リンクファイル情報によってリンクすべき画像が指定されているならば、ＤＶＤ再生制御プログラム２０１は、リンクファイル情報で指定されたリンク画像をＨＤＤ１１２のキャッシュエリアから検索し、その検索したリンク画像に対応する時間情報（ＴｉｍｅＤａｔａ）を、ＤＶＤデコーダ１１３のタイムセットレジスタ１１７にリンク画像挿入時間として設定する（ステップＳ１０３）。
【００７１】
次いで、ＤＶＤ再生制御プログラム２０１は、ＤＶＤ−ＲＯＭメディアから読み出したＤＶＤビデオをＤＶＤデコーダ１１３に送り、その再生を指示する（ステップＳ１０４）。
【００７２】
ＤＶＤデコーダ１１３から割り込みが発生すると、ＤＶＤ再生制御プログラム２０１は、割り込み処理に制御を移す。この割り込み処理では、ＤＶＤ再生制御プログラム２０１は、ＤＶＤビデオの送信を中断し、ＨＤＤ１１２に格納されているリンクコンテンツをＤＶＤデコーダ１１３に送り、その再生を指示する（ステップＳ１０５）。そして、ＤＶＤデコーダ１１３へのリンクコンテンツの転送が終了すると（ステップＳ１０６）、リンクファイル情報で指定されたリンクコンテンツの中に未再生のリンクコンテンツがあるか否かを調べ、あれば次に挿入すべきリンクコンテンツに対応する時間情報（ＴｉｍｅＤａｔａ）をＤＶＤデコーダ１１３のタイムセットレジスタ１１７にリンク画像挿入時間として設定した後（ステップＳ１０７，Ｓ１０８）、メインルーチンに戻り、再生中断されたＤＶＤビデオの続きをＤＶＤデコーダ１１３に送ってその再生を開始させる。
【００７３】
なお、本実施形態では、ＤＶＤビデオと、プッシュ技術によって予めＨＤＤにダウンロードされたコンテンツとの切り替え表示について説明したが、衛星放送やＣＡＴＶによって提供されるデジタル放送番組などのデジタルコンテンツをＤＶＤビデオにリンクさせて再生することも可能である。また、リンク画像を、ＤＶＤビデオとは別のＤＶＤメディアやＣＤ−ＲＯＭメディアなどに記録して配布することも可能である。さらに、ＤＶＤデコーダ１１３からの割り込み発生時に、ＷＷＷブラウザ２０３を使用して、該当するリンク画像をＷｅｂサイトから取得するようにしてもよい。
【００７４】
また、リンク画像としては、ＭＰＥＧ２ストリームから構成される動画像の他、ＤＶＤデコーダ１１３による復号化が不要な他のファイル形式の静止画像であってもよく、この場合には、ＤＶＤ再生制御プログラム２０１は、その静止画像をＶＧＡドライバ２０２を介してＶＧＡコントローラ１１４にグラフィクスデータとして送ることになる。このグラフィクスデータは、ＶＧＡコントローラ１１４のＰＣＩバスインターフェイス経由でＶＲＡＭ２０に描画され、そして画面表示される。
【００７５】
さらに、図５の手順を有するＤＶＤ再生制御プログラムはＣＤ−ＲＯＭなどのコンピュータ読み取り可能な記録媒体を通じて配布することができることはもちろんである。
【００７６】
【発明の効果】
以上説明したように、本発明によれば、ＤＶＤビデオなどのタイトル構造を変更することなく、そのタイトルを構成する動画像ストリームの任意の再生位置での再生画像の切り替えや、任意の映像ソースへのリンク、さらにはプッシュ技術を使用することによりリンク先の映像ソースの自動更新などを実現できるようになり、より自由度の高いタイトル再生を行うことができる。
【図面の簡単な説明】
【図１】本発明の一実施形態に係る画像表示装置を実現するためのハードウェアおよびソフトウェアの基本構成を示すブロック図。
【図２】同実施形態の画像表示装置の具体的なハードウェア構成の一例を示すブロック図。
【図３】同実施形態の画像表示装置で用いられるビデオデータのフォーマットを示す図。
【図４】同実施形態の画像表示装置によるＤＶＤビデオとリンク画像との切り替え表示の一例を示す図。
【図５】同実施形態の画像表示装置に適用される再生画像切り替え処理方法の手順を示すフローチャート。
【符号の説明】
１１１…ＤＶＤドライブ
１１２…ＨＤＤ
１１３…ＤＶＤデコーダ
１１４…ＶＧＡコントローラ
１１５…ディスプレイモニタ
１１６…通信装置
１１７…タイムセットレジスタ
１１８…タイムカウンタ
２０１…ＤＶＤ再生制御プログラム
２０２…ＶＧＡドライバ
２０３…ＷＷＷブラウザ[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image display device for playing back digital content including moving images, and an image switching display method applied to the device.
[0002]
[Prior art]
In recent years, with the development of computer technology, various multimedia compatible electronic devices such as digital video players, set-top boxes, TVs, personal computers and the like have been developed.
[0003]
Along with the use of such electronic devices as multimedia, recently, DVDs have attracted attention as a new storage medium to replace CD-ROM. A single DVD-ROM medium can record about 4.7 Gbytes of data, which is about 7 times the current CD-ROM on one side, and can record about 9.4 Gbytes of data on double-sided recording. By using this DVD-ROM medium, it is possible to reproduce a moving image such as a movie including a large amount of video information with high quality on a computer, a digital video player, a set top box, or the like.
[0004]
The data structure of the video information recorded on the DVD-ROM medium is defined by the DVD video standard. The video information stream is roughly divided into two types of data: presentation data and navigation data.
[0005]
Presentation data is a set of video objects to be played back, and is composed of video, sub-pictures, and audio. Video data is compressed and encoded by the MPEG2 system. In addition, as a sub-picture and audio encoding scheme, run-length encoding, AC-3, and the like are supported. A sub-picture is bitmap data, and is used for displaying subtitles of movies, choices on a menu screen, and the like. One video object can include video data of one channel, audio data of up to 8 channels, and sub-picture data of up to 32 channels.
[0006]
The navigation data is reproduction control data for controlling the presentation data reproduction procedure. At the time of title reproduction, the navigation data is interpreted to determine the reproduction order and reproduction method of the moving image data, and the reproduction of the moving image is performed accordingly. In addition, navigation commands can be embedded in the navigation data. The navigation command is for changing the playback content and playback order of the video data. By using this navigation command, the title creator can define various branch structures in the title. Thus, a video source switching function called so-called multi-angle, multi-story, etc. can be realized, and a more interactive title can be created.
[0007]
[Problems to be solved by the invention]
However, with such a conventional title structure, the video source can be switched only at a specific position in accordance with the DVD standard. This is because the position where the video source can be switched is determined depending on where the navigation command is incorporated in the video stream when the title is created.
[0008]
Also, the video source to be switched to is limited to a specific video source recorded on the same DVD medium. For example, a DVD video such as a video recorded on another medium or digital content provided by the Internet. It is not possible to perform control such as linking with any other video source different from that.
[0009]
Recently, information has been actively distributed using the Internet. With the spread of the Internet, it is possible to easily obtain and view all kinds of digital contents from around the world. In such an environment, creation of new contents in which DVD video titles and Internet technologies are merged has begun to be demanded.
[0010]
The present invention has been made in view of the above points, and without changing the title structure of a video title, switching a playback image at an arbitrary playback position of a moving image stream constituting the title, An image display device that can perform link playback to a video source and automatic update of the video source of the link destination and perform title playback with a higher degree of freedom, and an image switching display method applied to the device. The purpose is to provide.
[0011]
[Means for Solving the Problems]
In order to solve the above-described problem, the present invention provides an image display device that reads and reproduces a moving image stream from a recording medium, and a link for designating a link image to be inserted into the moving image stream on the recording medium. Information is stored, and reproducing means for reproducing a moving image stream read from the recording medium;Means for receiving a link image specified by link information stored in the recording medium and link image insertion time information corresponding to the link image from an external device via a network;Count the elapsed time from the start of playback of the video stream,When the elapsed time from the start of playback reaches the time specified by the received link image insertion time information,Image data to be reproduced is extracted from the moving image stream.The received link imageAnd a reproduced image switching means for switching to the above.
[0012]
In this image display device,A link image specified by link information stored in the recording medium and link image insertion time information corresponding to the link image are received from an external device via a network;The elapsed time from the start of playback of the video stream isTime specified by the received link image insertion time informationThe image data to be reproduced is from the moving image stream,ReceivedSwitch to link image. By using the elapsed time from the start of playback as a trigger for switching the playback image in this way, the playback image can be linked at any position regardless of the position in the stream in which the video branching command is embedded. It becomes possible to switch to.Since the link image and the link image insertion time information are received from the external device via the network, it is possible to insert an arbitrary link image at an arbitrary position even after the title is created. In addition, when a plurality of link images are inserted, it is possible to individually specify the link image insertion time for each link image. For example, link images such as CM information are sequentially displayed at predetermined time intervals from the start of title reproduction. Control such as insertion is possible.
[0015]
Further, as the link image, digital content automatically distributed from the outside to the rewritable local storage of the image display device through a network by a push type information service can be used. In this case, since the link image of the local storage is automatically rewritten by the automatic distribution, it is possible to always insert the latest content as a link image.
[0020]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 shows a basic configuration of hardware and software of an image display apparatus according to an embodiment of the present invention.
[0021]
This image display device is used as a digital video player, a set-top box, or a personal computer, and has a function of displaying computer graphics and moving images on a dedicated display monitor or home TV.
[0022]
This image display device is used as main hardware necessary for reproducing DVD video information, a DVD drive 111 for reading information recorded on the DVD-ROM media, and a rewritable local storage of the image display device. HDD 112, DVD decoder 113 for decoding DVD video information (video, sub-picture, audio) composed of MPEG2 program stream read from DVD drive 111, VGA controller 114 for controlling display monitor 115, and Internet connection A communication device (ISDN card or modem) 116 is provided.
[0023]
In the DVD-ROM media, in addition to a normal DVD video title composed of navigation data and presentation data, link file information (Link) for designating a link image to be switched and displayed with the DVD video during playback of the DVD video title. file) is stored. The link file information (Link file) is identification information for designating a link image (Video Data) downloaded in advance in a predetermined area of the HDD 112, and includes a file name, a path name, and the like. It is also possible to use a URL designating digital content of a predetermined website as link file information (Link file).
[0024]
The link image (Video Data) is digital content (such as a moving image or a still image) automatically distributed from the outside by a push type information service or the like via the Internet. That is, the WWW browser 203 having a Web casting function always automatically downloads new digital content from a Web site operated by a DVD title creator and stores it in a dedicated cache area prepared on the HDD 112. These digital contents are provided as MPEG2 streams.
[0025]
Timer information (Time Data) is added to each link image (Video Data). The timer information (Time Data) is for designating the timing at which the link image is to be inserted into the DVD title and played back, and is given by a value indicating the elapsed time from the start of DVD title playback.
[0026]
The DVD decoder 113 performs a decoding process for reproducing an MPEG2 stream such as a DVD video or a link image. The decoded DVD video or link image is sent to the video input port of the VGA controller 114 as a digital YUV format video signal (VIDEO). The DVD decoder 113 is further provided with a time set register 117 and a time counter 118.
[0027]
In the time set register 117, timer information (Time Data) of the link image (Video Data) to be inserted and displayed in the DVD video is set as the link image insertion time. The time counter 118 counts the elapsed time from the start of playback of the DVD video, and when the elapsed time from the start of playback matches the link image insertion time set in the time set register 117, an interrupt signal ( INT). The interrupt signal (INT) is used as a trigger for switching the image being reproduced from the DVD video to the link image.
[0028]
Title reproduction on the DVD-ROM medium is controlled by a DVD reproduction control program 201 having an operation control function of the DVD drive 111 and the DVD decoder 113. The DVD playback control program 201 includes a hardware driver group and an application program that performs title playback using the driver group.
[0029]
The DVD playback control program 201 is further provided with the following functions for switching display between the DVD video and the link image.
1) Function for setting link image insertion time information to time set register 117
2) A function of switching the image data to be transmitted to the DVD decoder 113 from the DVD video to the link image in response to an interrupt (INT) from the DVD decoder 113.
3) Function of returning image data to be transmitted and reproduced to the DVD decoder 113 to DVD video in response to completion of reproduction of the link image
The WWW browser 203 is a WWW client for communicating with an external WWW server using a protocol called HTTP, receives Web content from a Web site via the communication device 100, and uses the VGA controller 114 to receive it. Display on the screen. The WWW browser 203 is provided with a Web casting function for supporting the push type information service, whereby the latest Web content is always automatically distributed and stored in the cache area of the HDD 112.
[0030]
Hereinafter, an operation when linking a moving image or still image transmitted as Web content from the Internet and a DVD video on a DVD-ROM medium will be described.
[0031]
1) Using the Internet push technology, the content for the link image composed of the link image (Video Data) and the time information (Time Data) is downloaded from the outside via the communication device 116 and saved in the cache area of the HDD 112. To do.
[0032]
2) When the user performs a playback operation of the DVD video in which the DVD playback control program 201 is activated, the DVD playback control program 201 is placed on the same DVD medium as the DVD video to be played back before starting the playback of the DVD video. The stored link file information is referred to and it is confirmed whether or not an image to be linked is set (a plurality of link images can be designated by the link file information).
[0033]
3) The DVD playback control program 201 searches the cache area of the HDD 112 for the link image specified by the link file information.
4) The DVD playback control program 201 sets time information (Time Data) corresponding to the searched link image in the time set register 117 of the DVD decoder 113 as the link image insertion time.
[0034]
5) The DVD reproduction control program 201 instructs the DVD decoder 113 to reproduce the DVD video, and the DVD decoder 113 decodes the DVD video read from the DVD-ROM medium by the DVD reproduction control program 201. To start.
[0035]
6) When the decoding process for DVD video playback is started, the counting operation of the time counter 118 starts and the elapsed time from the start of DVD video playback is counted.
[0036]
7) When the count value of the time counter 118 reaches the value indicating the link image insertion time set in the time set register 117, the DVD decoder 113 temporarily stops the playback of the DVD video and sends an interrupt signal (INT). The DVD reproduction control program 201 is notified that the link image insertion time has been reached.
[0037]
8) Upon receiving the interrupt signal (INT), the DVD playback control program 201 sends the link image stored in the HDD 112 to the DVD decoder 113 and instructs the playback thereof.
[0038]
9) When the transfer of the link image to the DVD decoder 113 is completed, the DVD playback control program 201 sends the continuation of the playback interrupted DVD video to the DVD decoder 113 to start the playback.
[0039]
10) When a plurality of link images are specified by the link file information, a new link image insertion time is set in the time set register 117 before the playback of the DVD video is started.
[0040]
11) Repeat 7 to 10.
As described above, in this embodiment, when the elapsed time from the start of playback of a DVD video composed of an MPEG2 stream reaches a preset link image insertion time, the image data to be played back is from the DVD video. The link image specified by the link file information is switched to. By using the elapsed time from the start of playback as a trigger for switching the playback image in this way, the playback image can be linked at any position regardless of the position in the stream in which the video branching command is embedded. It becomes possible to switch to.
[0041]
FIG. 2 shows a specific system configuration when the image display apparatus of the present embodiment is realized as a personal computer.
As shown in the figure, this system includes a PCI bus 10, a CPU 11, a main memory (MEM) 12, a DVD interface 16 including an ATAPI or SCSI interface, an audio controller 17, and the above-described DVD drive 111, HDD 112, and DVD. A decoder 113, a VGA controller 114, and a communication device 116 are provided.
[0042]
The DVD drive 111 reads out the DVD video stream stored in the DVD medium at a maximum transfer rate of 10.08 Mbps. The DVD drive 111 includes a DVD medium made of an optical disk, a motor, a pickup, a pickup drive, a servo controller, a drive controller including an ECC circuit for error detection and correction, and the like. The motor, the pickup, the pickup drive, the servo controller, and the drive controller function as a drive device for driving the DVD medium and reading data recorded on the DVD medium.
[0043]
For example, a movie of about 135 minutes on one side can be recorded on the DVD medium. The presentation data making up the movie information can include main video (video), sub-video up to 32 channels (sub-picture), and audio (audio) up to 8 channels.
[0044]
In the MPEG2 standard, other encoded data can be included in the data encoded by MPEG2, and these encoded data are handled as one MPEG2 program stream.
[0045]
MPEG2 is used for video encoding, and run-length encoding and DOLBY AC3 are used for sub-picture and audio encoding, respectively. Even in this case, the encoded video, sub-picture, and audio are treated as one MPEG2 program stream.
[0046]
The encoding process of the MPEG2 standard is variable rate encoding, and the amount of information recorded / reproduced per unit time can be varied. Therefore, a scene with more intense motion can be reproduced with higher quality by increasing the transfer rate of the MPEG stream constituting the corresponding frame group.
[0047]
FIG. 3 shows an example of a recording format of DVD video information used in this embodiment. This recording format corresponds to the DVD video standard.
[0048]
As shown in FIG. 3, the volume space of the DVD-ROM media includes a volume file structure for volume and file management, a DVD video zone constituting DVD video information, and other file areas other than DVD video. In the other file area, the above-mentioned link file information is stored. In this link file information, a plurality of link destination file names (or path names such as URLs) that specify images to be linked can be set.
[0049]
The DVD video zone includes a video manager (VMG) and one or more DVD video title sets (VTS # 1 to VTS # n).
The VMG includes video manager information (VMGI), a video object set for menu (VOBS), and video manager information for backup (VMGI).
[0050]
The VMGI is used as table of contents information of all DVD video title sets (VTS # 1 to #n) existing on the DVD medium, and search information and parental attribute information about each video title set (VTS). including. When a video object set (VOBS) for a menu is included in the VMG, the VMGI also includes program check information (PGCI) as information for playback control of the menu. This PGCI indicates the playback order of a plurality of cells constituting each menu video object (VOB), and the title creator uses the above navigation commands (pre-command, post-command, button command, cell command). ) Can be embedded.
[0051]
The pre-command is a navigation command group that is executed before starting reproduction of a cell group (cells in the PGC) whose reproduction order is defined by PGCI, and is used for initial setting before PGC reproduction. The post command is a navigation command group that is executed when the reproduction of all the cells in the PGC is completed, and is used for the division processing to the PGC to be reproduced next. The cell command is a navigation command group that is executed when the reproduction of the corresponding cell in the PGC is completed, and is used for repeated reproduction of a specific cell. The button command is a navigation command group that is executed when a button that is a selection item in the menu screen is confirmed by a user operation, and is used for executing a menu item.
[0052]
Each video title set (VTS) includes video title set information (VTSI), a video object set for menu (VOBS), a video object set (VOBS) constituting a title, and a video title set information for backup (VTSI). Composed.
[0053]
The VTSI is playback control information for menus and titles in the VTS, and includes search information for the titles and program chain information (PGCI) for managing the cell playback order in the menus and titles. The navigation commands (pre-command, post-command, button command, cell command) described above are also embedded in this PGCI.
[0054]
A video object set (VOBS) constituting a title includes a large number of video objects (cells # 1, # 2,...) Called cells. Each cell (video object) is composed of a large number of video object units, and a navigation pack (NAVI) is present at the top thereof. That is, one cell (video object) is from the navigation pack to the next navigation pack. As described above, this navigation pack is included in video data units of 1 GOP or 2 GOP (0.5 seconds to 1 second). Each navigation pack is management information for controlling playback of a corresponding video object, and is composed of a disc search information (DSI) pack and a presentation control information (PCI) pack. The DSI pack is used as search information for a reproduction start address during special reproduction such as fast forward and rewind. The PCI pack is used for angle switching at the time of multi-angle playback and for displaying highlight information for executing a navigation command (button command) according to an instruction from the user.
[0055]
One cell constitutes information for 15 frames necessary for moving image reproduction for a certain period of time, for example, 0.5 seconds to 1 second. As described above, GOP (Group of Picture) of MPEG2 program stream Configured as a unit. In each cell, a video pack (V), a sub-picture pack (S), and an audio pack (A) are multiplexed and recorded. These video pack (V), sub-picture pack (S), and audio pack (A) are encoded video, sub-picture, and audio data units, respectively. The data size of these packs is fixed, but the number of packs that can be included in one cell is variable. Therefore, a cell corresponding to a scene with high motion includes more video packs.
[0056]
In the above format, VMGI, VTSI, PGCI, PCI, and DSI constitute navigation data, and the video pack, sub-picture pack, and audio pack for each menu and title constitute presentation data.
[0057]
Next, each unit of the system of FIG. 2 will be described.
The CPU 11 controls the operation of the entire system, and executes an operating system and an execution target application program stored in a system memory (MEM) 12. The reproduction of the DVD video title recorded on the DVD medium is started by causing the CPU 11 to execute the DVD reproduction control program 201.
[0058]
The DVD interface 16 is a peripheral interface for connecting a peripheral device such as an HDD or a CD-ROM to the PCI bus 10. In this embodiment, the DVD interface 16 performs data transfer with the DVD drive 111.
[0059]
The audio controller 17 performs input / output control of sound data under the control of the CPU 11, and includes a PCM sound source 171, an FM sound source 172, a multiplexer 173, and a D / A converter 174 for sound output. . The multiplexer 173 receives the outputs from the PCM sound source 171 and the FM sound source 172 and the digital audio data transferred from the DVD decoder 113, and selects one of them. A function corresponding to the D / A converter of the audio controller 17 is also provided in the DVD decoder 113, and an analog audio signal can be directly output without using the audio controller 17.
[0060]
The digital audio data is obtained by decoding the audio data read from the DVD drive 111. For transferring digital audio data from the DVD decoder 113 to the audio controller 17, the audio bus 18a is used, and the PCI bus 10 is not used. Accordingly, digital audio data can be transferred at high speed without affecting the performance of the computer system.
[0061]
The DVD decoder 113 reads the MPEG2 program stream via the memory 12 or directly from the DVD-ROM drive 111 under the control of the CPU 11 and separates it into video, sub-picture, and audio packets, and then converts them. Each of them is decoded and output after being synchronized. As shown in the figure, the DVD decoder 113 includes a transaction control unit, a FIFO buffer, and an MPEG2 decoder. The transaction control unit is for operating the DVD decoder 113 as a bus master (initiator) for issuing a transaction on the PCI bus 10, and a bus cycle for reading the MPEG2 program stream from the memory 12 or the DVD-ROM drive 111. Execute. This MPEG2 program stream is sent to an MPEG2 decoder via a FIFO buffer, where it is separated into video, sub-picture, and audio packets and their decoding processing is performed.
[0062]
The decoded audio data is transferred as digital audio data to the audio controller 17 via the audio bus 18a as described above, or directly output to an external DSP or the like. The decoded video and sub-picture are synthesized and sent to the video input port of the VGA controller 114 as digital YUV data. In this case, the video bus 18b is used to transfer the digital YUV data from the DVD decoder 113 to the VGA controller 113, and the PCI bus 10 is not used. Therefore, the transfer of digital YUV data can be performed at high speed without affecting the performance of the computer system, similarly to the digital audio data.
[0063]
As the video bus 18b, a VASA standard VAFC (VESA Advanced Feature Connector), VM-Channel (VESA Media Channel), an S3 LBP interface, or a ZV port can be used.
[0064]
The VGA controller 114 controls a CRT display and LCD used as a display monitor of this system under the control of the CPU 11, and supports moving picture display in addition to text and graphics display of VGA specifications. As shown in the figure, the VGA controller 114 is provided with a graphics display control circuit 191, a video display control circuit 192, a multiplexer 193, a D / A converter 194, and the like.
[0065]
The graphics display control circuit 191 is a VGA-compatible graphics controller, which converts VGA graphics data drawn in a video memory (VRAM) 20 into RGB video data and outputs the RGB video data. The video display control circuit 192 includes a video buffer that stores digital YUV data, a YUV-RGB conversion circuit that converts the YUV data stored in the buffer into RGB video data, and the like.
[0066]
The multiplexer 193 selects one of the output data of the graphics display control circuit 191 and the video display control circuit 192, or synthesizes the video from the video display control circuit 192 on the VGA graphics from the graphics display control circuit 191 to display the LCD. And to the D / A converter 194. The D / A converter 194 converts the video data from the multiplexer 194 into an analog RGB signal and outputs it to a CRT display.
[0067]
FIG. 4 shows a state of image switching between the DVD video and the link image.
Here, the DVD video stream shown in FIG. 4 (a) has two links, the link image (link content 1) in FIG. 4 (b) and the link image (link content 2) in FIG. 4 (c). Assume that an image is to be inserted.
[0068]
Each of the link contents 1 and 2 is composed of a video source having a playback time of 2 minutes, the link image insertion time T1 corresponding to the link content 1 is set to 10 minutes, and the link image insertion time T2 corresponding to the link content 2 is set to 18 minutes. 4D, when 10 minutes have elapsed from the start of the DVD video playback, the playback image is switched to the link content 1, and the link content 1 is played back. The When the link content 1 is reproduced for 2 minutes and all the reproduction is completed, the reproduction of the DVD video is resumed. Then, when 18 minutes specified by the link image insertion time T2 have elapsed since the resumption of reproduction, the reproduction image is switched to the link content 2, and the link content 2 is reproduced. When the link content 2 is reproduced for 2 minutes and all the reproduction is completed, the reproduction of the DVD video is resumed.
[0069]
Next, a processing procedure performed by the DVD playback control program 201 will be described with reference to the flowchart of FIG.
When the user performs a playback operation of the DVD video in which the DVD playback control program 201 is activated, the DVD playback control program 201 is stored on the same DVD medium as the DVD video to be played back before the DVD video playback is started. The link file information is referred to, and it is confirmed whether or not an image to be linked is set (steps S101 and S102).
[0070]
If the image to be linked is specified by the link file information, the DVD playback control program 201 searches the link area specified by the link file information from the cache area of the HDD 112, and the time corresponding to the searched link image. Information (Time Data) is set in the time set register 117 of the DVD decoder 113 as the link image insertion time (step S103).
[0071]
Next, the DVD playback control program 201 sends the DVD video read from the DVD-ROM medium to the DVD decoder 113 and instructs the playback thereof (step S104).
[0072]
When an interrupt is generated from the DVD decoder 113, the DVD playback control program 201 shifts control to interrupt processing. In this interrupt process, the DVD playback control program 201 interrupts the transmission of the DVD video, sends the link content stored in the HDD 112 to the DVD decoder 113, and instructs the playback (step S105). When the transfer of the link content to the DVD decoder 113 is completed (step S106), it is checked whether or not there is an unreproduced link content in the link content specified by the link file information. After the time information (Time Data) corresponding to the link content to be set is set as the link image insertion time in the time set register 117 of the DVD decoder 113 (steps S107 and S108), the process returns to the main routine to continue the playback interrupted DVD video. Is sent to the DVD decoder 113 to start its reproduction.
[0073]
In this embodiment, the switching display between the DVD video and the content previously downloaded to the HDD by the push technology has been described. However, digital content such as a digital broadcast program provided by satellite broadcasting or CATV is linked to the DVD video. It is also possible to play it back. Further, the link image can be recorded and distributed on a DVD medium or a CD-ROM medium other than the DVD video. Further, when an interrupt from the DVD decoder 113 occurs, the WWW browser 203 may be used to acquire the corresponding link image from the website.
[0074]
The link image may be a still image of another file format that does not need to be decoded by the DVD decoder 113 in addition to a moving image composed of an MPEG2 stream. In this case, the DVD reproduction control program 201 The still image is sent as graphics data to the VGA controller 114 via the VGA driver 202. The graphics data is drawn on the VRAM 20 via the PCI bus interface of the VGA controller 114 and displayed on the screen.
[0075]
Furthermore, the DVD reproduction control program having the procedure of FIG. 5 can be distributed through a computer-readable recording medium such as a CD-ROM.
[0076]
【The invention's effect】
As described above, according to the present invention, without changing the title structure of a DVD video or the like, it is possible to switch a playback image at an arbitrary playback position of a moving image stream constituting the title, or to an arbitrary video source. By using this link, and further using the push technology, it is possible to automatically update the video source of the link destination, and to perform title reproduction with a higher degree of freedom.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a basic configuration of hardware and software for realizing an image display apparatus according to an embodiment of the present invention.
FIG. 2 is an exemplary block diagram showing an example of a specific hardware configuration of the image display apparatus according to the embodiment;
FIG. 3 is an exemplary view showing a format of video data used in the image display apparatus of the embodiment.
FIG. 4 is an exemplary view showing an example of switching display between a DVD video and a link image by the image display apparatus of the embodiment.
FIG. 5 is an exemplary flowchart illustrating the procedure of a reproduction image switching processing method applied to the image display apparatus according to the embodiment;
[Explanation of symbols]
111 ... DVD drive
112 ... HDD
113 ... DVD decoder
114 ... VGA controller
115 ... Display monitor
116: Communication device
117: Time set register
118 ... Time counter
201 ... DVD playback control program
202 ... VGA driver
203 ... WWW browser

Claims

In an image display device that reads and reproduces a moving image stream from a recording medium,
Link information for designating a link image to be inserted into the moving image stream is stored in the recording medium,
Playback means for playing back a moving image stream read from the recording medium;
Means for receiving a link image specified by link information stored in the recording medium and link image insertion time information corresponding to the link image from an external device via a network;
The elapsed time from the start of playback of the moving image stream is counted, and when the elapsed time from the start of playback reaches the time specified by the received link image insertion time information, the image data to be played back is An image display device comprising: a reproduction image switching means for switching from an image stream to the received link image .

The image display device according to claim 1, wherein the link image is a moving image or a still image.

In an image display device that reads and reproduces a moving image stream from a recording medium,
Link information for designating a link image to be inserted into the moving image stream is stored in the recording medium,
Playback means for playing back a moving image stream read from the recording medium;
Means for receiving a link image and link image insertion time information corresponding to the link image from an external device via a network using a push type information service, and writing the information to a rewritable local storage of the image display device;
Means for searching the local storage for a link image designated by link information stored in the recording medium;
The elapsed time from the start of playback of the moving image stream is counted and should be played back when the elapsed time from the start of playback reaches the time specified by the link image insertion time information corresponding to the searched link image An image display device comprising: a reproduction image switching means for switching image data from the moving image stream to the searched link image.

The image display apparatus according to claim 3, wherein the link image is a moving image or a still image.

An image switching display method applied to an image display device that reads and reproduces a moving image stream stored therein from a recording medium,
Link information for designating a link image to be inserted into the moving image stream is stored in the recording medium,
Receiving a link image specified by link information stored in the recording medium and link image insertion time information corresponding to the link image from an external device via a network;
The elapsed time from the start of playback of the moving image stream is counted, and when the elapsed time from the start of playback reaches the time specified by the received link image insertion time information, the image data to be played back is An image switching display method, wherein an image stream is switched to the received link image.

6. The image switching display method according to claim 5, wherein the link image is a moving image or a still image.

An image switching display method applied to an image display device that reads and reproduces a moving image stream stored therein from a recording medium,
Link information for designating a link image to be inserted into the moving image stream is stored in the recording medium,
Using a push-type information service, link images and images from external devices via the network The link image insertion time information corresponding to the link image is received and written to the rewritable local storage of the image display device,
A link image specified by link information stored in the recording medium is searched from the local storage;
The elapsed time from the start of playback of the moving image stream is counted and should be played back when the elapsed time from the start of playback reaches the time specified by the link image insertion time information corresponding to the searched link image An image switching display method characterized in that image data is switched from the moving image stream to the searched link image.

8. The image switching display method according to claim 7, wherein the link image is a moving image or a still image.