JP4625781B2 - 再生装置 - Google Patents

再生装置 Download PDF

Info

Publication number
JP4625781B2
JP4625781B2 JP2006078219A JP2006078219A JP4625781B2 JP 4625781 B2 JP4625781 B2 JP 4625781B2 JP 2006078219 A JP2006078219 A JP 2006078219A JP 2006078219 A JP2006078219 A JP 2006078219A JP 4625781 B2 JP4625781 B2 JP 4625781B2
Authority
JP
Japan
Prior art keywords
data
sub
video data
video
graphics
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006078219A
Other languages
English (en)
Other versions
JP2007258872A (ja
Inventor
真司 久野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2006078219A priority Critical patent/JP4625781B2/ja
Priority to TW96101474A priority patent/TW200809692A/zh
Priority to US11/657,960 priority patent/US8385726B2/en
Priority to KR20070009577A priority patent/KR100865425B1/ko
Priority to CN2007100032445A priority patent/CN101043600B/zh
Publication of JP2007258872A publication Critical patent/JP2007258872A/ja
Application granted granted Critical
Publication of JP4625781B2 publication Critical patent/JP4625781B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B31/00Arrangements for the associated working of recording or reproducing apparatus with related apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/93Regeneration of the television signal or of selected parts thereof
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2310/00Command of the display device
    • G09G2310/02Addressing, scanning or driving the display screen or processing steps related thereto
    • G09G2310/0224Details of interlacing
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0435Change or adaptation of the frame rate of the video stream
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/10Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G09G2340/125Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels wherein one of the images is motion video

Description

本発明は、HD DVD(High Definition Digital Versatile Disc)プレーヤのような再生装置および同装置の再生方法に関する。
近年、動画像のデジタル圧縮符号化技術の進展に伴い、HD(High Definition)規格の高精細映像を扱うことが可能な再生装置(プレーヤ)の開発が進められている。
この種のプレーヤにおいては、インタラクティブ性を高めるために、複数の画像データを高次元で融合させるための機能が要求されている。
例えば特許文献1には、グラフィクスデータとビデオデータとをディスプレイコントローラによって合成するシステムが開示されている。このシステムにおいては、ディスプレイコントローラは、ビデオデータをキャプチャし、そのキャプチャしたビデオデータをグラフィクス画面上の一部のエリア上に合成する。
特開平8−205092号公報
ところで、この特許文献1に記載のシステムを含むこれまでのシステムでは、比較的低解像度のビデオデータを扱うことを前提としており、HD規格のビデオデータのような高精細画像を扱うことについては考慮されていない。また、それほど多くの画像データを重ね合わせることを予定していない。
一方、HD規格では、最多で5つの画像データを適宜に重ね合わせる必要がある。そのため、現実的な処理能力を越える程度にまでその処理量が達する状況にある。従って、この複数の画像データを重ね合わせる処理については、負荷を考慮した適切な分散化や効率化が強く求められている。
この発明は、このような事情を考慮してなされたものであり、複数の画像データの重ね合わせ処理をその負荷のピークを一定以内に抑えつつ実行することを可能とする再生装置を提供することを目的とする。
前述の目的を達成するために、本発明の再生装置は、第1のビデオデータと、前記第1のビデオデータよりも低い画質の第2のビデオデータおよびピクチャデータとを出力する出力手段と、前記第2のビデオデータと、前記ピクチャデータとを合成する第1のブレンド処理手段と、前記第1のブレンド処理手段により得られた合成データと、前記第1のビデオデータとを合成する第2のブレンド処理手段と、前記第2のビデオデータの合成を、前記第1のブレンド処理手段から前記第2のブレンド処理手段へと切り換え可能な切り換え手段と、を具備することを特徴とする。
本発明によれば、複数の画像データの重ね合わせ処理をその負荷のピークを一定以内に抑えつつ実行することを可能とする再生装置を提供することができる。
以下、図面を参照して本発明の実施形態を説明する。
図1には、本発明の一実施形態に係る再生装置の構成例が示されている。この再生装置はオーディオ・ビデオ(AV)コンテンツを再生するメディアプレーヤである。この再生装置は、例えば、HD DVD(High Definition Digital Versatile Disc)規格のDVDメディアに格納されたオーディオ・ビデオ(AV)コンテンツを再生するHD DVDプレーヤとして実現されている。
このHD DVDプレーヤは、図1に示されているように、CPU(Central Processing Unit)11、ノースブリッジ12、主メモリ13、サウスブリッジ14、不揮発性メモリ15、USB(Universal Serial Bus)コントローラ17、HD DVDドライブ18、グラフィクスバス20、PCI(Peripheral Component Interconnect)バス21、ビデオコントローラ22、オーディオコントローラ23、ビデオデコーダ25、ブレンド処理部30、メインオーディオデコーダ31、サブオーディオデコーダ32、オーディオミキサ(Audio Mix)33、ビデオエンコーダ40、およびHDMI(High Definition Multimedia Interface)のようなAVインタフェース(HDMI−TX)41等から構成されている。
本HD DVDプレーヤにおいては、プレーヤアプリケーション150と、オペレーティングシステム(OS)151とが予め不揮発性メモリ15にインストールされている。プレーヤアプリケーション150はOS151上で動作するソフトウェアであり、HD DVDドライブ18から読み出されるAVコンテンツを再生するための制御を行う。
HD DVDドライブ18によって駆動されるHD DVDメディアのような蓄積メディアに格納されたAVコンテンツは、圧縮符号化されたメインビデオデータ、圧縮符号化されたメインオーディオデータ、圧縮符号化されたサブビデオデータ、圧縮符号化されたサブピクチャデータ、アルファデータを含むグラフィクスデータ、圧縮符号化されたサブオーディオデータ、AVコンテンツの再生を制御するナビゲーションデータ等から構成されている。
圧縮符号化されたメインビデオデータは、主映像(主画面イメージ)として用いられる動画像データをH.264/AVC規格の圧縮符号化方式で圧縮符号化したデータである。メインビデオデータはHD規格の高精細画像から構成されている。また、SD(Standard Definition)規格のメインビデオデータを使用することもできる。圧縮符号化されたメインオーディオデータは、メインビデオデータに対応するオーディオデータである。メインオーディオデータの再生は、メインビデオデータの再生と同期して実行される。
圧縮符号化されたサブビデオデータはメインビデオ上に重ね合わされた状態で表示される副映像(副画面イメージ)であり、メインビデオデータを補足する動画像(例えば映画監督のインタビューシーンなど)から構成されている。圧縮符号化されたサブオーディオデータは、サブビデオデータに対応するオーディオデータである。サブオーディオデータの再生は、サブビデオデータの再生と同期して実行される。
グラフィクスデータもメインビデオ上に重ね合わされた状態で表示される副映像(副画面イメージ)であり、例えば、メニューオブジェクトのような操作ガイダンスを表示するための各種データ(Advanced Elements)から構成されている。各Advanced Elementは、静止画、動画(アニメーションを含む)、またテキストから構成されている。プレーヤアプリケーション150はユーザによるマウス操作に従って絵を描くドローウィング機能を有している。このドローウィング機能によって描画されたイメージもグラフィクスデータとして用いられ、メインビデオ上に重ね合わされた状態で表示することができる。
圧縮符号化されたサブピクチャデータは、字幕等のテキストから構成されている。
ナビゲーションデータは、コンテントの再生順を制御するプレイリストと、サブビデオおよびグラフィクス(Advanced Elements)等の再生を制御するスクリプトとを含んでいる。スクリプトは、XMLのようなマークアップ言語によって記述されている。
HD規格のメインビデオデータは例えば1920×1080ピクセルまたは1280×720ピクセルの解像度を持つ。また、サブビデオデータ、サブピクチャデータ、およびグラフィクスデータの各々は、例えば720×480ピクセルの解像度を持つ。
本HD DVDプレーヤにおいては、HD DVDドライブ18から読み出されるHD DVDストリームからメインビデオデータ、メインオーディオデータ、サブビデオデータ、サブオーディオデータ、サブピクチャデータを分離する分離処理と、サブビデオデータ、サブピクチャデータ、およびグラフィクスデータをデコードするデコード処理はソフトウェア(プレーヤアプリケーション150)によって実行される。一方、多くの処理量を必要とする処理、つまりメインビデオデータをデコードする処理、およびメインオーディオデータおよびサブオーディオデータをデコードするデコード処理等は、ハードウェアによって実行される。
CPU11は、本HD DVDプレーヤの動作を制御するために設けられたプロセッサであり、不揮発性メモリ15から主メモリ13にロードされる、OS151およびプレーヤアプリケーション150を実行する。主メモリ13内の記憶領域の一部は、ビデオメモリ(VRAM)131として使用される。なお、必ずしも主メモリ13内の記憶領域の一部をVRAM131として使用する必要はなく、主メモリ13とは独立した専用のメモリデバイスをVRAM131として使用してもよい。
ノースブリッジ12は、CPU11のローカルバスとサウスブリッジ14との間を接続するブリッジデバイスである。このノースブリッジ12には、主メモリ13をアクセス制御するメモリコントローラが内蔵されている。さらに、このノースブリッジ12には、GPU(Graphics Processing Unit)120も内蔵されている。
GPU120は、主メモリ13の一部の記憶領域に割り当てられたビデオメモリ(VRAM)131にCPU11によって書き込まれたデータから、グラフィクス画面イメージを形成するグラフィクス信号を生成するグラフィクスコントローラである。GPU120は、ビットブロック転送(bit block transfer)のようなグラフィクス演算機能を用いて、グラフィクス信号を生成する。例えば、CPU11によってVRAM131上の4つのプレーンにそれぞれ画像データ(サブビデオ、サブピクチャ、グラフィクス、カーソル)が書き込まれた場合、GPU120は、それら4つのプレーンに対応する画像データ同士をピクセル毎に重ね合わせるブレンド処理をビットブロック転送を用いて実行し、これによってメインビデオと同じ解像度(例えば1920×1080ピクセル)を有するグラフィクス画面イメージを形成するためのグラフィクス信号を生成する。ブレンド処理は、サブビデオ、サブピクチャ、グラフィクスそれぞれに対応するアルファデータを用いて実行される。アルファデータは、そのアルファデータに対応する画像データの各ピクセルの透明度(または不透過度)を示す係数である。サブビデオ、サブピクチャ、グラフィクスそれぞれに対応するアルファデータは、それらサブビデオ、サブピクチャ、グラフィクスの画像データと一緒にHD DVDメディアに格納されている。すなわち、サブビデオ、サブピクチャ、グラフィクスの各々は、画像データとアルファデータとから構成されている。
GPU120によって生成されたグラフィクス信号はRGB色空間を有している。グラフィクス信号の各ピクセルはデジタルRGBデータ(24bit)によって表現される。
GPU120は、グラフィクス画面イメージを形成するグラフィクス信号を生成するだけでなく、その生成したグラフィクス信号に対応するアルファデータを外部に出力する機能も有している。
具体的には、GPU120は、生成したグラフィクス信号をデジタルRGBビデオ信号として外部に出力すると共に、その生成したグラフィクス信号に対応するアルファデータも外部に出力する。アルファデータは、生成されたグラフィクス信号(RGBデータ)の各ピクセルの透明度(または不透明度)を示す係数(8bit)である。GPU120は、グラフィクス信号(24bitのデジタルRGBビデオ信号)とアルファデータ(8bit)とから構成されるアルファデータ付きのグラフィクス出力データ(32bitのRGBAデータ)を、ピクセル毎に出力する。アルファデータ付きのグラフィクス出力データ(32bitのRGBAデータ)は専用のグラフィクスバス20を介してブレンド処理部30に送られる。グラフィクスバス20は、GPU120とブレンド処理部30との間を接続する伝送線路である。
このように、本HD DVDプレーヤにおいては、アルファデータ付きのグラフィクス出力データがグラフィクスバス20を介してGPU120からブレンド処理部30に直接的に転送される。これにより、PCIバス21等を介してアルファデータをVRAM131からブレンド処理部30を転送する必要が無くなり、アルファデータの転送によるPCIバス21のトラフィックの増大を防止することができる。
もしPCIバス21等を介してアルファデータをVRAM131からブレンド処理部30に転送したならば、GPU120から出力されるグラフィクス信号とPCIバス21経由で転送されるアルファデータとをブレンド処理部30内で同期化しなければならず、そのためにブレンド処理部30の構成が複雑化される。本HD DVDプレーヤにおいては、GPU120はグラフィクス信号とアルファデータとをピクセル毎に同期して出力する。このため、グラフィクス信号とアルファデータとの同期化を容易に実現することができる。
サウスブリッジ14は、PCIバス21上の各デバイスを制御する。また、サウスブリッジ14は、HD DVDドライブ18を制御するためのIDE(Integrated Drive Electronics)コントローラを内蔵している。さらに、サウスブリッジ14は、不揮発性メモリ15、およびUSBコントローラ17を制御する機能も有している。USBコントローラ17は、マウスデバイス171の制御を行う。ユーザは、マウスデバイス171を操作することにより、メニューの選択等を行うことができる。もちろん、マウスデバイス171の代わりに、リモコンユニット等を用いることもできる。
HD DVDドライブ18は、HD DVD規格に対応するオーディオ・ビデオ(AV)コンテンツが格納されたHD DVDメディアのような蓄積メディアを駆動するためのドライブユニットである。
ビデオコントローラ22は、PCIバス21に接続されている。このビデオコントローラ22は、ビデオデコーダ25とのインタフェースを実行するためのLSIである。ソフトウェアによってHD DVDストリームから分離されたメインビデオデータのストリーム(Video Stream)は、PCIバス21およびビデオコントローラ22を介して、ビデオデコーダ25に送られる。また、CPU11から出力されるデコード制御情報(Control)も、PCIバス21およびビデオコントローラ22を介して、ビデオデコーダ25に送られる。
ビデオデコーダ25は、H.264/AVC規格に対応するデコーダであり、HD規格のメインビデオデータをデコードして例えば1920×1080ピクセルの解像度のビデオ画面イメージを形成するデジタルYUVビデオ信号を生成する。このデジタルYUVビデオ信号はブレンド処理部30に送られる。
ブレンド処理部30は、GPU120およびビデオデコーダ25にそれぞれ結合されており、GPU120から出力されるグラフィクス出力データとビデオデコーダ25によってデコードされたメインビデオデータとを重ね合わせるためのブレンド処理を実行する。このブレンド処理においては、GPU120からグラフィクスデータ(RGB)と一緒に出力されるアルファデータに基づいて、グラフィクスデータを構成するデジタルRGBビデオ信号とメインビデオデータを構成するデジタルYUVビデオ信号とをピクセル単位で重ね合わせるためのブレンド処理(アルファブレンディング処理)が実行される。この場合、メインビデオデータは下側の画面イメージとして用いられ、グラフィクスデータはメインビデオデータ上に重ねられる上側の画面イメージとして用いられる。
ブレンド処理によって得られる出力画像データは例えばデジタルYUVビデオ信号としてビデオエンコーダ40およびAVインタフェース(HDMI−TX)41にそれぞれ供給される。ビデオエンコーダ40は、ブレンド処理によって得られる出力画像データ(デジタルYUVビデオ信号)をコンポーネントビデオ信号またはS−ビデオ信号に変換して、TV受像機のような外部の表示装置(モニタ)に出力する。AVインタフェース(HDMI−TX)41は、デジタルYUVビデオ信号とデジタルオーディオ信号とを含むデジタル信号群を外部のHDMI機器に出力する。
オーディオコントローラ23は、PCIバス21に接続されている。オーディオコントローラ23は、メインオーディオデコーダ31およびサブオーディオデコーダ32それぞれとのインタフェースを実行するためのLSIである。ソフトウェアによってHD DVDストリームから分離されたメインオーディオデータのストリームは、PCIバス21およびオーディオコントローラ23を介して、メインオーディオデコーダ31に送られる。また、ソフトウェアによってHD DVDストリームから分離されたサブオーディオデータのストリームは、PCIバス21およびオーディオコントローラ23を介して、サブオーディオデコーダ32に送られる。CPU11から出力されるデコード制御情報(Control)も、ビデオコントローラ22を介して、メインオーディオデコーダ31およびサブオーディオデコーダ32それぞれに供給される。
メインオーディオデコーダ31は、メインオーディオデータをデコードしてI2S(Inter-IC Sound)形式のデジタルオーディオ信号を生成する。このデジタルオーディオ信号は、オーディオミキサ(Audio Mix)33に送られる。メインオーディオデータは、予め決められた複数種の圧縮符号化方式(つまり複数種のオーディオコーデック)の中の任意の一つを用いて圧縮符号化されている。このため、メインオーディオデコーダ31は、複数種の圧縮符号化方式それぞれに対応するデコード機能を有している。すなわち、メインオーディオデコーダ31は、複数種の圧縮符号化方式の内の任意の一つを用いて圧縮符号化されたメインオーディオデータをデコードしてデジタルオーディオ信号を生成する。メインオーディオデータに対応する圧縮符号化方式の種類は、例えば、CPU11からのデコード制御情報によってメインオーディオデコーダ31に通知される。
サブオーディオデコーダ32は、サブオーディオデータをデコードしてI2S(Inter-IC Sound)形式のデジタルオーディオ信号を生成する。このデジタルオーディオ信号は、オーディオミキサ(Audio Mix)33に送られる。サブオーディオデータも、予め決められた上述の複数種の圧縮符号化方式(つまり複数種のオーディオコーデック)の中の任意の一つを用いて圧縮符号化されている。このため、サブオーディオデコーダ32も、複数種の圧縮符号化方式それぞれに対応するデコード機能を有している。すなわち、サブオーディオデコーダ32は、複数種の圧縮符号化方式の内の任意の一つを用いて圧縮符号化されたサブオーディオデータをデコードしてデジタルオーディオ信号を生成する。サブオーディオデータに対応する圧縮符号化方式の種類は、例えば、CPU11からのデコード制御情報によってサブオーディオデコーダ32に通知される。
オーディオミキサ(Audio Mix)33は、メインオーディオデコーダ31によってデコードされたメインオーディオデータとサブオーディオデコーダ32によってデコードされたサブオーディオデータとをミックスするミキシング処理を実行してデジタルオーディオ出力信号を生成する。このデジタルオーディオ出力信号はAVインタフェース(HDMI−TX)41に送出されるとともに、アナログオーディオ出力信号に変換された後に外部に出力される。
次に、図2を参照して、CPU11によって実行されるプレーヤアプリケーション150の機能構成を説明する。
プレーヤアプリケーション150は、デマルチプレクス(Demux)モジュール、デコード制御モジュール、サブピクチャ(Sub-Picture)デコードモジュール、サブビデオ(Sub-Video)デコードモジュール、グラフィクスデコードモジュール等を備えている。
Demuxモジュールは、HD DVDドライブ18から読み出されたストリームから、メインビデオデータ、メインオーディオデータ、サブピクチャデータ、サブビデオデータ、サブオーディオデータを分離するデマルチプレクス処理を実行するソフトウェアである。デコード制御モジュールは、ナビゲーションデータに基づいて、メインビデオデータ、メインオーディオデータ、サブピクチャデータ、サブビデオデータ、サブオーディオデータ、グラフィクスデータそれぞれのデコード処理を制御するソフトウェアである。
サブピクチャ(Sub-Picture)デコードモジュールは、サブピクチャデータをデコードする。サブビデオ(Sub-Video)デコードモジュールは、サブビデオデータをデコードする。グラフィクスデコードモジュールは、グラフィクスデータ(Advanced Elements)をデコードする。
グラフィクスドライバは、GPU120を制御するためのソフトウェアである。デコードされたサブピクチャデータ、デコードされたサブビデオデータ、およびデコードされたグラフィクスデータは、グラフィクスドライバを介してGPU120に送られる。また、グラフィクスドライバは、GPU120に対して各種描画命令を発行する。
PCIストリーム転送ドライバは、PCIバス21を介してストリームを転送するためのソフトウェアである。メインビデオデータ、メインオーディオデータ、およびサブオーディオデータは、PCIストリーム転送ドライバによって、PCIバス21を介してビデオデコーダ25、メインオーディオデコーダ31、およびサブオーディオデコーダ32にそれぞれ転送される。
次に、図3を参照して、CPU11によって実行されるプレーヤアプリケーション150によって実現されるソフトウェアデコーダの機能構成を説明する。
ソフトウェアデコーダは、図示のように、データ読み取り部101、暗号化解除処理部102、デマルチプレクス(Demux)部103、サブピクチャデコーダ104、サブビデオデコーダ105、グラフィクスデコーダ106、およびナビゲーション制御部201等を備えている。
HD DVDドライブ18のHD DVDメディアに格納されたコンテント(メインビデオデータ、サブビデオデータ、サブピクチャデータ、メインオーディオデータ、サブオーディオデータ、グラフィクスデータ、ナビゲーションデータ)は、データ読み取り部101によってHD DVDドライブ18から読み出される。メインビデオデータ、サブビデオデータ、サブピクチャデータ、メインオーディオデータ、サブオーディオデータ、グラフィクスデータ、ナビゲーションデータはそれぞれ暗号化されている。メインビデオデータ、サブビデオデータ、サブピクチャデータ、メインオーディオデータ、サブオーディオデータは、HD DVDストリームに多重化されている。データ読み取り部101によってHD DVDメディアから読み出されたメインビデオデータ、サブビデオデータ、サブピクチャデータ、メインオーディオデータ、サブオーディオデータ、グラフィクスデータ、ナビゲーションデータはそれぞれコンテント暗号化解除処理部102に入力される。暗号化解除処理部102は各データの暗号化を解除するための処理を実行する。暗号化が解除されたナビゲーションデータはナビゲーション制御部201に送られる。また、暗号化が解除されたHD DVDストリームはデマルチプレクス(Demux)部103に送られる。
ナビゲーション制御部201はナビゲーションデータに含まれるスクリプト(XML)を解析して、グラフィクスデータ(Advanced Elements)の再生を制御する。グラフィクスデータ(Advanced Elements)はグラフィクスデコーダ106に送られる。グラフィクスデコーダ106はプレーヤアプリケーション150のグラフィクスデコードモジュールから構成されており、グラフィクスデータ(Advanced Elements)をデコードする。
また、ナビゲーション制御部201は、ユーザによるマウスデバイス171の操作に応じてカーソルを移動する処理、およびメニュー選択に応答して効果音を再生するため処理等も実行する。前述のドローウィング機能によるイメージの描画は、ユーザによるマウスデバイス171の操作をナビゲーション制御部201が取得し、その軌跡、つまりカーソルの軌跡からなる絵のグラフィックスデータをGPU120に生成させた後、グラフィクスデコーダ106でデコードされるナビゲーションデータによるグラフィックスデータと同等のグラフィクスデータとしてGPU120に再投入することで実現される。
このDemux103は、プレーヤアプリケーション150のDemuxモジュールによって実現されている。Demux103は、HD DVDストリームからメインビデオデータ、メインオーディオデータ、サブオーディオデータ、サブピクチャデータ、サブビデオデータ等を分離する。
メインビデオデータは、PCIバス21を介してビデオデコーダ25に送られる。メインビデオデータはビデオデコーダ25によってデコードされる。デコードされたメインビデオデータはHD規格の例えば1920×1080ピクセルの解像度を有し、デジタルYUVビデオ信号としてブレンド処理部30に送られる。
メインオーディオデータは、PCIバス21を介してメインオーディオデコーダ31に送られる。メインオーディオデータはメインオーディオデコーダ31によってデコードされる。デコードされたメインオーディオデータは、I2S形式のデジタルオーディオ信号としてオーディオミキサ33に送られる。
サブオーディオデータは、PCIバス21を介してサブオーディオデコーダ32に送られる。サブオーディオデータはサブオーディオデコーダ32によってデコードされる。デコードされたサブオーディオデータは、I2S形式のデジタルオーディオ信号としてオーディオミキサ33に送られる。
サブピクチャデータおよびサブビデオデータは、それぞれサブピクチャデコーダ104およびサブビデオデコーダ105にそれぞれ送られる。これらサブピクチャデコーダ104およびサブビデオデコーダ105は、サブピクチャデータおよびサブビデオデータをそれぞれデコードする。これらサブピクチャデコーダ104およびサブビデオデコーダ105は、それぞれプレーヤアプリケーション150のサブピクチャデコードモジュールおよびサブビデオデコードモジュールによって実現されている。
サブピクチャデコーダ104、サブビデオデコーダ105、およびグラフィクスデコーダ106によってそれぞれデコードされたサブピクチャデータ、サブビデオデータ、およびグラフィクスデータは、CPU11によってVRAM131に書き込まれる。また、VRAM131にはカーソルイメージに対応するカーソルデータもCPU11によって書き込まれる。サブピクチャデータ、サブビデオデータ、グラフィクスデータ、およびカーソルデータの各々は、ピクセル毎にRGBデータとアルファデータ(A)とを含む。
GPU120は、CPU11によってVRAM131に書き込まれた、サブビデオデータ、グラフィクスデータ、サブピクチャデータ、およびカーソルデータから、例えば1920×1080ピクセルのグラフィクス画面イメージを形成するグラフィクス出力データを生成する。この場合、サブビデオデータ、グラフィクスデータ、サブピクチャデータ、およびカーソルデータは、GPU120のミキサ(MIX)部121によって実行されるアルファブレンディング処理によってピクセル毎に重ね合わされる。
このアルファブレンド処理においては、VRAM131に書き込まれた、サブビデオデータ、グラフィクスデータ、サブピクチャデータ、およびカーソルデータそれぞれに対応するアルファデータが用いられる。すなわち、VRAM131に書き込まれたサブビデオデータ、グラフィクスデータ、サブピクチャデータ、およびカーソルデータの各々は、画像データとアルファデータとから構成されている。ミキサ(MIX)部121は、サブビデオデータ、グラフィクスデータ、サブピクチャデータ、およびカーソルデータそれぞれに対応するアルファデータと、CPU11によって指定される、それらサブビデオデータ、グラフィクスデータ、サブピクチャデータ、およびカーソルデータそれぞれの位置情報とに基づいてブレンド処理を実行することにより、例えば1920×1080ピクセルの背景画像上にサブビデオデータ、グラフィクスデータ、サブピクチャデータ、およびカーソルデータが重ね合わされたグラフィクス画面イメージを生成する。
背景画像の各ピクセルに対応するアルファ値は、当該ピクセルが透明であることを示す値つまり0である。グラフィクス画面イメージの内、画像データ同士が重ね合わされた領域については、その領域に対応する新たなアルファデータがミキサ(MIX)部121によって算出される。
このようにして、GPU120は、サブビデオデータ、グラフィクスデータ、サブピクチャデータ、およびカーソルデータから、1920×1080ピクセルのグラフィクス画面イメージを形成するグラフィクス出力データ(RGB)およびそのグラフィクスデータに対応するアルファデータを生成する。なお、サブビデオデータ、グラフィクスデータ、サブピクチャデータ、およびカーソルデータのいずれか一つの画像のみが表示されるシーンについては、1920×1080ピクセルの背景画像上に当該画像(例えば720×480)のみが配置されたグラフィクス画面イメージに対応するグラフィクスデータおよびそのグラフィクスデータに対応するアルファデータが生成される。
GPU120によって生成されたグラフィクスデータ(RGB)およびアルファデータは、グラフィクスバス20を介してRGBAデータとしてブレンド処理部30に送られる。
次に、図4を参照して、ブレンド処理部30によって実行されるブレンド処理(アルファブレンディング処理)を説明する。
アルファブレンディング処理は、グラフィクスデータ(RGB)に付随するアルファデータ(A)に基づいて、グラフィクスデータとメインビデオデータとをピクセル単位で重ね合せるブレンド処理である。この場合、グラフィクスデータ(RGB)はオーバーサーフェースとして用いられ、ビデオデータ上に重ね合される。GPU120から出力されるグラフィクスデータの解像度は、ビデオデコーダ25から出力されるメインビデオデータの解像度と同一である。
いま、1920×1080ピクセルの解像度を持つメインビデオデータ(Video)が画像データCとしてブレンド処理部30に入力され、1920×1080ピクセルの解像度を持つグラフィクスデータが画像データGとしてブレンド処理部30に入力された場合を想定する。ブレンド処理部30は、1920×1080ピクセルの解像度を持つアルファデータ(A)に基づき、画像データC上に画像データGをピクセル単位で重ね合わせるための演算を実行する。この演算は、以下の式(1)によって実行される。
V=α×G+(1−α)C …(1)
ここで、Vはアルファブレンディング処理によって得られる出力画像データの各ピクセルの色、αはグラフィクスデータGの各ピクセルに対応するアルファ値である。
次に、図5を参照して、GPU120のMIX部121によって実行されるブレンド処理(アルファブレンディング処理)を説明する。
ここでは、VRAM131に書き込まれたSub-PictureデータおよびSub-Videoデータから1920×1080ピクセルの解像度を持つグラフィクスデータを生成する場合を想定する。Sub-PictureデータおよびSub-Videoデータの各々は、例えば720×480ピクセルの解像度を持つ。この場合、Sub-PictureデータおよびSub-Videoデータの各々には、例えば720×480ピクセルの解像度のアルファデータも付随する。
例えば、Sub-Pictureデータに対応するイメージはオーバーサーフェースとして使用され、Sub-Videoデータに対応するイメージはアンダーフェースとして使用される。
Sub-Pictureデータに対応するイメージとSub-Videoデータに対応するイメージとが重なった領域の各ピクセルの色は、以下の式(2)によって求められる。
G=Go×αo+Gu(1−αo)αu …(2)
ここで、Gは重なった領域の各ピクセルの色、Goはオーバーサーフェースとして使用されるSub-Pictureデータの各ピクセルの色、αoはオーバーサーフェースとして使用されるSub-Pictureデータの各ピクセルのアルファ値、Guはアンダーフェースとして使用されるSub-Videoデータの各ピクセルの色である。
また、Sub-Pictureデータに対応するイメージとSub-Videoデータに対応するイメージとが重なった領域の各ピクセルのアルファ値は、以下の式(3)によって求められる。
α=αo+αu×(1−αo) …(3)
ここで、αは重なった領域の各ピクセルのアルファ値、αuはアンダーサーフェースとして使用されるSub-Videoデータの各ピクセルのアルファ値である。
このように、GPU120のMIX部121は、Sub-Pictureデータに対応するアルファデータおよびSub-Videoデータに対応するアルファデータの内、オーバーサーフェースとして使用される方のアルファデータを用いて、Sub-PictureデータとSub-Videoデータとを重ね合わせ、これにより1920×1080ピクセルの画面イメージを形成するグラフィクスデータを生成する。さらに、GPU120のMIX部121は、Sub-Pictureデータに対応するアルファデータとSub-Videoデータに対応するアルファデータとから、1920×1080ピクセルの画面イメージを形成するグラフィクスデータの各ピクセルのアルファ値を算出する。
具体的には、GPU120のMIX部121は、1920×1080ピクセルのサーフェース(全ピクセルの色=黒、全ピクセルのアルファ値=0)と、720×480ピクセルのSub-Videoデータのサーフェースと、720×480ピクセルのSub-Pictureデータのサーフェースとを重ね合わせるブレンド処理を実行することにより、1920×1080ピクセルの画面イメージを形成するグラフィクスデータと1920×1080ピクセルのアルファデータとを算出する。1920×1080ピクセルのサーフェースが最も下側のサーフェースとして使用され、Sub-Videoデータのサーフェースが2番目に下側のサーフェースとして使用され、Sub-Pictureデータのサーフェースが最も上側のサーフェースとして使用される。
1920×1080ピクセルの画面イメージの内、Sub-PictureデータおよびSub-Videoデータのどちらも存在しない領域の各ピクセルの色は黒となる。また、Sub-Pictureデータのみが存在する領域内の各ピクセルの色は、Sub-Pictureデータの対応する各ピクセルの本来の色と同じとなる。同様に、Sub-Videoデータのみが存在する領域内の各ピクセルの色は、Sub-Videoデータの対応する各ピクセルの本来の色と同じとなる。
また1920×1080ピクセルの画面イメージの内、Sub-PictureデータおよびSub-Videoデータのどらも存在しない領域の各ピクセルに対応するアルファ値は零となる。Sub-Pictureデータのみが存在する領域内の各ピクセルのアルファ値は、Sub-Pictureデータの対応する各ピクセルの本来のアルファ値と同じとなる。同様に、Sub-Videoデータのみが存在する領域内の各ピクセルのアルファ値は、Sub-Videoデータの対応する各ピクセルの本来のアルファ値と同じとなる。
図6には、1920×1080ピクセルのメインビデオデータ上に720×480ピクセルのサブビデオデータが重ねて表示される様子が示されている。
図6においては、グラフィクスデータは、1920×1080ピクセルのサーフェース(全ピクセルの色=黒、全ピクセルのアルファ値=0)と、720×480ピクセルのSub-Videoデータのサーフェースとをピクセル毎に重ね合わせるブレンド処理によって生成される。
前述したように、表示装置に出力される出力画像データ(Video+Graphics)は、グラフィクスデータとメインビデオデータとをブレンドすることによって生成される。
1920×1080ピクセルのグラフィクスデータの内、720×480ピクセルのサブビデオデータが存在しない領域の各ピクセルのアルファ値は零である。このため、720×480ピクセルのサブビデオデータが存在しない領域は透明となるので、その領域にはメインビデオデータが100パーセントの不透明度で表示される。
720×480ピクセルのサブビデオデータの各ピクセルは、サブビデオデータに対応するアルファデータで指定される透明度でメインビデオデータ上に表示される。例えば、アルファ値=1のサブビデオデータのピクセルは100パーセントの不透明度で表示され、当該ピクセル位置に対応するメインビデオデータのピクセルは表示されない。
また、図7に示すように、720×480ピクセルの解像度に縮小されたメインビデオデータを、1920×1080ピクセルの解像度に拡大されたサブビデオデータ上の一部の領域に表示することもできる。
図7の表示形態は、GPU120が有するスケーリング機能およびビデオデコーダ25が有するスケーリング機能を用いて実現される。
具体的には、GPU120は、CPU11からの指示に従って、サブビデオデータの解像度(画像サイズ)が1920×1080ピクセルになるまでサブビデオデータの解像度を段階的に拡大するスケーリング処理を実行する。このスケーリング処理は、ピクセル補間を用いて実行される。サブビデオデータの解像度が大きくなるに従い、1920×1080ピクセルのグラフィクスデータの内、720×480ピクセルのサブビデオデータが存在しない領域(アルファ値=0の領域)は徐々に小さくなる。これにより、メインビデオデータ上に重ねて表示されるサブビデオデータのサイズは徐々に大きくなり、逆にアルファ値=0の領域は徐々小さくなる。サブビデオデータの解像度(画像サイズ)が1920×1080ピクセルになった場合、GPU120は、例えば、720×480ピクセルのサーフェース(全ピクセルの色=黒、全ピクセルのアルファ値=0)を1920×1080ピクセルのサブビデオデータ上にピクセル毎に重ね合わせるブレンド処理を実行して、1920×1080ピクセルのサブビデオデータ上にアルファ値=0の720×480ピクセルの領域を配置する。
一方、ビデオデコーダ25は、CPU11からの指示に従って、メインビデオデータの解像度を720×480ピクセルに縮小するスケーリング処理を実行する。
720×480ピクセルに縮小されたメインビデオデータは、1920×1080ピクセルのサブビデオデータ上に配置された、720×480ピクセルのアルファ値=0の領域に表示される。すなわち、GPU120から出力されるアルファデータは、メインビデオデータが表示される領域を制限するためのマスクとしても使用することができる。
このように、GPU120から出力されるアルファデータはソフトウェアによって自由に制御することができるので、グラフィクスデータを効果的にメインビデオデータ上に重ねて表示することができ、これによりインタラクティブ性の高い映像表現を容易に実現することができる。さらに、アルファデータはグラフィクスデータと一緒にGPU120からブレンド処理部30に自動的に転送されるので、ソフトウェアは、ブレンド処理部30へのアルファデータの転送を意識する必要はない。
図8は、本HD DVDプレーヤによって再生されるHD規格のAVコンテンツ中の複数の画像データそれぞれが、前述のように動作するGPU120とブレンド処理部30とによってどのような手順で重ね合わされるのかを示す概念図である。
HD規格では、レイヤ1〜レイヤ5の5つのレイヤが定義されており、各レイヤに前述のカーソル、グラフィクス、サブピクチャ、サブビデオ、メインビデオがそれぞれ割り当てられている。そして、本HDD DVDプレーヤでは、図8に示すように、このレイヤ1〜レイヤ5のうち、レイヤ1〜レイヤ4の4つの画像a1〜画像a4の重ね合わせを前段処理としてGPU120のミキサ部121で実行し、このGPU120の出力画像とレイヤ5の画像a5との重ね合わせを後段処理としてブレンド処理部30で実行することにより、目的の画像a6を作成している。
このように、HD規格で定義されるレイヤ1〜レイヤ5の5つの画像データの重ね合わせを2段階に分離させることで、本HD DVDプレーヤは、第1に、適切な負荷分散を図っている。また、レイヤ5のメインビデオは高精細映像であり、30フレーム/秒の各フレームについて更新を欠かせない。そのために、このメインビデオを扱うブレンド処理部30での重ね合わせは30回/秒必要となる。これに対して、レイヤ1〜レイヤ4のカーソル、グラフィクス、サブピクチャ、サブビデオは、メインビデオ程の高い画質は要求されていないので、GPU120のミキサ部121での重ね合わせは例えば10回/秒で良い。仮に、このレイヤ1〜レイヤ4のカーソル、グラフィクス、サブピクチャ、サブビデオの重ね合わせをレイヤ5のメインビデオとともにブレンド処理部30で実行したならば、レイヤ1〜レイヤ4の各レイヤについても30回/秒、つまり20回/秒も必要以上に重ね合わせを実行することになる。つまり、本HD DVDプレーヤは、第2に、適切な効率化を図っている。
レイヤ1〜レイヤ4のカーソル、グラフィクス、サブピクチャ、サブビデオは、プレーヤアプリケーション150からGPU120に供給されるが、このGPU120への各画像データの供給のために、プレーヤアプリケーション150は、図8に示すように、前述のサブピクチャデコーダ104、サブビデオデコーダ105、グラフィクスデコーダ(エレメントデコーダ)106のほか、カーソルドローウィングマネージャ107およびサーフェースマネジメント/タイミングコントローラ108を有している。
カーソルドローウィングマネージャ107は、ナビゲーション制御部201の一機能として実現され、ユーザによるマウスデバイス171の操作に応じてカーソルを移動させるためのカーソル描画制御を実行する。一方、サーフェースマネジメント/タイミングコントローラ108は、サブピクチャデコーダ104によってデコードされたサブピクチャデータの画像を適時に表示させるためのタイミング制御を実行する。
なお、図中のCursor Controlは、マウスデバイス171の操作に応じてUSBコントローラ17が発行するカーソル移動用の制御データである。ECMA Scriptは、点、線、図形等の描画を指示するdrawingAPIが記述されたスクリプトである。iHD Markupは、様々なAdvanced Elementを適時に表示させるためにマークアップ言語で記述されたテキストデータである。
また、GPU120は、前述のミキサ部121のほか、スケーリング処理部122、ルーマキー処理部123および3Dグラフィクスエンジン124を有している。
スケーリング処理部122は、図7の説明で触れたスケーリング処理を実行する。ルーマキー処理部123は、輝度値がしきい値以下のピクセルのアルファ値を0にすることによって画像中の背景(黒)を取り除くルーマキー処理を実行する。3Dグラフィクスエンジン124は、前述のドローウィング機能のための(カーソルの軌跡からなる絵の)イメージ生成を含むグラフィクスデータの生成処理を実行する。
本HD DVDプレーヤでは、図8に示すように、レイヤ2〜レイヤ4の画像a2〜画像a4についてスケーリング処理を行い、レイヤ4の画像a4についてはさらにルーマキー処理を行っている。そして、本HD DVDプレーヤでは、このスケーリング処理やルーマキー処理をそれぞれ単独でGPU120に実行させるのではなく、(ミキサ部121による)ブレンド処理を実行させる際、このブレンド処理と並行して実行させる。プレーヤアプリケーション150の立場から言えば、このスケーリング処理やルーマキー処理をブレンド処理と同時に依頼する。仮に、このスケーリング処理やルーマキー処理をそれぞれ単独でGPU120に実行させたならば、スケーリング処理後の画像やルーマキー処理後の画像を一時的に格納する中間バッファが必要となり、また、この中間バッファとGPU120との間のデータ転送が必要となる。これに対して、GPU120内において、スケーリング処理部122の出力が随時にルーマキー処理部123に入力され、さらにルーマキー処理部123の出力が随時にミキサ部121に入力されていくといった、スケーリング処理部122、ルーマキー処理部123およびミキサ部121を協働させたいわゆるパイプライン処理を行う本HD DVDプレーヤでは、中間バッファが不要であり、中間バッファとGPU120との間のデータ転送も生じさせない。つまり、本HD DVDプレーヤは、この点でも、適切な効率化を図っている。
なお、図8に示すPixelバッファマネージャ153は、3Dグラフィクスエンジン124を使ったマウス操作による絵の描画やエレメントデコーダ106による操作ガイダンス等のオブジェクトの描画のための作業領域として使用されるPixelバッファの割り当て管理を実行するミドルウェアである。ハードウェアであるPixelバッファをソフトウェアで使用するために用意されるドライバによる割り当て管理をより最適化するために、Pixelバッファマネージャ153は、このドライバとPixelバッファを用いる上位システムとの間に介在して設けられる。
以上のように、本HD DVDプレーヤにおいては、HD規格で定義されるレイヤ1〜レイヤ5の5つの画像データの重ね合わせを2段階に分離させることで、適切な負荷分散および効率化を図っており、また、スケーリング処理やルーマキー処理をブレンド処理と並行して実行することで、さらなる効率化を図っている。
ところで、ここでは、レイヤ1〜レイヤ5のうち、レイヤ1〜レイヤ4の画像a1〜画像a4の重ね合わせを前段、レイヤ5の画像a5の重ね合わせを後段として分離する例を説明したが、例えばレイヤ4の画像a4、つまりサブビデオの分離先を前段と後段との間で動的に切り換え可能とすることも有効である。図9は、このサブビデオの重ね合わせをGPU120のミキサ部121またはブレンド処理部30のいずれかで選択的に実行させるための一構成例を示す図である。
例えば、サブビデオにもメインビデオと同等の高い画質を要求し、30フレーム/秒の各フレームについて更新させたい場合に、図9(A)の状態から図9(B)の状態への切り換えを実施する等が考えられる。そのトリガは、ナビゲーションデータに含まれるスクリプトとして与えることが可能である。
また、図9(B)の状態を基本として、本HD DVDプレーヤが予め定められた基準値を越える高負荷状態となった場合に、図9(A)の状態への切り換えを実施する等も考えられる。プレーヤアプリケーション150は、OS151から負荷状態を取得することができるので、そのトリガを得ることは容易である。
さらに、ここでは、前段の重ね合わせをソフトウェアであるGPU120、後段の重ね合わせをハードウェアであるブレンド処理部30で行う例を説明したが、本発明の本質はソフトウェア処理とハードウェア処理との分離にはないので、例えば前段および後段の両方をソフトウェア処理で行う場合にも当然に適用できる。
このように、本発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に構成要素を適宜組み合わせてもよい。
本発明の一実施形態に係る再生装置の構成を示すブロック図 図1の再生装置で用いられるプレーヤアプリケーションの構成を示す図 図2のプレーヤアプリケーションによって実現されるソフトウェアデコーダの機能構成を説明するための図 図1の再生装置に設けられたブレンド処理部によって実行されるブレンド処理を説明するための図 図1の再生装置に設けられたGPUによって実行されるブレンド処理を説明するための図 図1の再生装置においてメインビデオデータ上にサブビデオデータが重ねて表示される様子を示す図 図1の再生装置においてサブビデオデータ上の一部の領域にメインビデオデータが表示される様子を示す図。 図1の再生装置においてHD規格のAVコンテンツ中の複数の画像データそれぞれがどのような手順で重ね合わされるのかを示す概念図 図1の再生装置においてサブビデオの重ね合わせをGPUまたはブレンド処理部のいずれかで選択的に実行させるための一構成例を示す図
符号の説明
11…CPU、18…HD DVDドライブ、30…ブレンド処理部、101…データ読取り部、102…暗号化解除処理部、103…デマルチプレクス部、104…サブピクチャデコーダ、105…サブビデオデコーダ、106…グラフィクスデコーダ、120…GPU、121…ミキサ部、122…スケーリング処理部、123…ルーマキー処理部、150…プレーヤアプリケーション、201…ナビゲーション制御部。

Claims (3)

  1. 第1のビデオデータと、前記第1のビデオデータよりも低い画質の第2のビデオデータおよびピクチャデータとを出力する出力手段と、
    前記第2のビデオデータと、前記ピクチャデータとを合成する第1のブレンド処理手段と、
    前記第1のブレンド処理手段により得られた合成データと、前記第1のビデオデータとを合成する第2のブレンド処理手段と、
    前記第2のビデオデータの合成を、前記第1のブレンド処理手段から前記第2のブレンド処理手段へと切り換え可能な切り換え手段と、
    を具備することを特徴とする再生装置。
  2. 前記第2のビデオデータが前記第1のビデオデータと同等の高い画質であった場合、前記第2のビデオデータの合成を前記第2のブレンド処理手段に実行させ、前記第2のビデオデータが前記第1のビデオデータよりも低い画質であった場合、前記第2のビデオデータの合成を前記第1のブレンド処理手段に実行させるように前記切り換え手段を駆動制御する制御手段をさらに具備することを特徴とする請求項記載の再生装置。
  3. 前記再生装置が低負荷の状態にある場合、前記第2のビデオデータの合成を前記第2のブレンド処理手段に実行させ、前記再生装置が高負荷の状態にある場合には、前記第2のビデオデータの合成を前記第1のブレンド処理手段に実行させるように前記切り換え手段を駆動制御する制御手段をさらに具備することを特徴とする請求項記載の再生装置。
JP2006078219A 2006-03-22 2006-03-22 再生装置 Expired - Fee Related JP4625781B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2006078219A JP4625781B2 (ja) 2006-03-22 2006-03-22 再生装置
TW96101474A TW200809692A (en) 2006-03-22 2007-01-15 Playback apparatus and playback method using the playback apparatus
US11/657,960 US8385726B2 (en) 2006-03-22 2007-01-25 Playback apparatus and playback method using the playback apparatus
KR20070009577A KR100865425B1 (ko) 2006-03-22 2007-01-30 재생장치 및 재생장치를 사용하는 재생 방법
CN2007100032445A CN101043600B (zh) 2006-03-22 2007-01-31 重放设备和使用该重放设备的重放方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006078219A JP4625781B2 (ja) 2006-03-22 2006-03-22 再生装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2010200113A Division JP5159846B2 (ja) 2010-09-07 2010-09-07 再生装置および再生装置の再生方法

Publications (2)

Publication Number Publication Date
JP2007258872A JP2007258872A (ja) 2007-10-04
JP4625781B2 true JP4625781B2 (ja) 2011-02-02

Family

ID=38533531

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006078219A Expired - Fee Related JP4625781B2 (ja) 2006-03-22 2006-03-22 再生装置

Country Status (5)

Country Link
US (1) US8385726B2 (ja)
JP (1) JP4625781B2 (ja)
KR (1) KR100865425B1 (ja)
CN (1) CN101043600B (ja)
TW (1) TW200809692A (ja)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8543420B2 (en) * 2007-09-19 2013-09-24 Fresenius Medical Care Holdings, Inc. Patient-specific content delivery methods and systems
JP4625781B2 (ja) * 2006-03-22 2011-02-02 株式会社東芝 再生装置
JP4858129B2 (ja) * 2006-12-01 2012-01-18 富士ゼロックス株式会社 画像処理装置と画像形成システムおよびプログラム
US8174620B2 (en) 2007-11-06 2012-05-08 Microsoft Corporation High definition media content processing
JP4346663B2 (ja) 2008-01-18 2009-10-21 株式会社東芝 情報処理装置、及びプログラム
JP5322529B2 (ja) * 2008-07-29 2013-10-23 キヤノン株式会社 表示装置、表示制御方法
US8300056B2 (en) 2008-10-13 2012-10-30 Apple Inc. Seamless display migration
US8698741B1 (en) 2009-01-16 2014-04-15 Fresenius Medical Care Holdings, Inc. Methods and apparatus for medical device cursor control and touchpad-based navigation
US8632485B2 (en) * 2009-11-05 2014-01-21 Fresenius Medical Care Holdings, Inc. Patient treatment and monitoring systems and methods
US10799117B2 (en) 2009-11-05 2020-10-13 Fresenius Medical Care Holdings, Inc. Patient treatment and monitoring systems and methods with cause inferencing
US8648868B2 (en) 2010-01-06 2014-02-11 Apple Inc. Color correction to facilitate switching between graphics-processing units
US8368702B2 (en) * 2010-01-06 2013-02-05 Apple Inc. Policy-based switching between graphics-processing units
US8797334B2 (en) 2010-01-06 2014-08-05 Apple Inc. Facilitating efficient switching between graphics-processing units
KR101688153B1 (ko) * 2010-08-11 2016-12-20 엘지전자 주식회사 3차원 영상의 편집 방법 및 이를 이용하는 이동 단말기
JP2013025619A (ja) * 2011-07-22 2013-02-04 Olympus Corp 画像表示装置および画像表示方法
TW201308131A (zh) * 2011-08-08 2013-02-16 Ite Tech Inc 減少數位廣播內容游標反應時間的方法與其裝置
CN105898539B (zh) * 2013-05-15 2018-12-25 宁夏天绿健知识产权运营有限公司 使用hevc视频解码的超高清数字电视接收机
KR20150033162A (ko) * 2013-09-23 2015-04-01 삼성전자주식회사 컴포지터, 이를 포함하는 시스템온칩 및 이의 구동 방법
JP6307716B2 (ja) * 2015-06-11 2018-04-11 株式会社アクセル 画像情報処理方法
CN105898614A (zh) * 2015-08-21 2016-08-24 乐视致新电子科技(天津)有限公司 一种设置屏幕菜单的透明度的方法、装置和芯片
US10291849B1 (en) * 2015-10-16 2019-05-14 Tribune Broadcasting Company, Llc Methods and systems for determining that a video-capturing device is unsteady
KR20170083889A (ko) * 2016-01-11 2017-07-19 삼성전자주식회사 디스플레이 장치 및 그 동작 방법
US11256528B2 (en) * 2018-10-26 2022-02-22 Nvidia Corporation Individual application window streaming suitable for remote desktop applications

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07236136A (ja) * 1994-02-23 1995-09-05 Hitachi Ltd 動画情報の伝送制御方式および表示制御方式
JP2000194354A (ja) * 1998-12-25 2000-07-14 Toshiba Corp マルチウインドウ画像表示装置
JP2002247498A (ja) * 2001-02-16 2002-08-30 Toshiba Corp 情報再生装置
JP2002335497A (ja) * 2001-05-10 2002-11-22 Toshiba Corp サブピクチャ表示倍率変換方法及び装置
JP2003259213A (ja) * 2002-02-28 2003-09-12 Sanyo Electric Co Ltd 画像処理装置および画像処理方法

Family Cites Families (82)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5027212A (en) * 1989-12-06 1991-06-25 Videologic Limited Computer based video/graphics display system
US5890190A (en) * 1992-12-31 1999-03-30 Intel Corporation Frame buffer for storing graphics and video data
JPH06335022A (ja) 1993-05-25 1994-12-02 Mitsubishi Electric Corp 静止画記憶装置
US5535137A (en) 1994-02-14 1996-07-09 Sony Corporation Of Japan Random access audio/video processor with compressed video resampling to allow higher bandwidth throughput
JPH0865512A (ja) 1994-08-22 1996-03-08 Canon Inc 画像処理装置およびその方法
JP3135808B2 (ja) 1995-01-24 2001-02-19 株式会社東芝 コンピュータシステムおよびこのコンピュータシステムに適用されるカード
WO2004080069A1 (ja) * 1995-01-24 2004-09-16 Hiroki Zenda マルチメディアコンピュータシステム
US6741617B2 (en) * 1995-04-14 2004-05-25 Koninklijke Philips Electronics N.V. Arrangement for decoding digital video signals
JPH0946722A (ja) 1995-07-28 1997-02-14 Ekushingu:Kk カラースーパーインポーズ装置
US6008860A (en) * 1995-12-29 1999-12-28 Thomson Consumer Electronics, Inc. Television system with provisions for displaying an auxiliary image of variable size
US6311204B1 (en) * 1996-10-11 2001-10-30 C-Cube Semiconductor Ii Inc. Processing system with register-based process sharing
JP3226804B2 (ja) 1996-11-08 2001-11-05 日本電気株式会社 画像・音声再生システム
JP3742167B2 (ja) * 1996-12-18 2006-02-01 株式会社東芝 画像表示制御装置
KR100254612B1 (ko) * 1996-12-28 2000-06-01 구자홍 광디스크 재생장치의 가변전송레이트 버퍼 관리장치 및 그 제어방법
JP3684740B2 (ja) * 1997-01-24 2005-08-17 セイコーエプソン株式会社 Yuv−rgbデジタル変換回路並びにそれを用いた画像表示装置及び電子機器
JPH10320922A (ja) 1997-05-22 1998-12-04 Hitachi Ltd データ処理装置及びディスク状記憶媒体の記憶データ再生装置
JPH1153580A (ja) 1997-07-31 1999-02-26 Sony Corp 3次元画像処理装置及びビデオ合成方法
JP3756647B2 (ja) 1997-12-02 2006-03-15 株式会社東芝 多画面表示装置
JPH11203444A (ja) 1998-01-09 1999-07-30 Mitsubishi Electric Corp 画像合成装置
EP0979005B1 (en) * 1998-02-20 2007-12-05 Matsushita Electric Industrial Co., Ltd. Image decoder
JP2000100073A (ja) * 1998-09-28 2000-04-07 Sony Corp 記録装置および方法、再生装置および方法、記録媒体、並びに提供媒体
US6573905B1 (en) * 1999-11-09 2003-06-03 Broadcom Corporation Video and graphics system with parallel processing of graphics windows
US6414996B1 (en) * 1998-12-08 2002-07-02 Stmicroelectronics, Inc. System, method and apparatus for an instruction driven digital video processor
US7365757B1 (en) * 1998-12-17 2008-04-29 Ati International Srl Method and apparatus for independent video and graphics scaling in a video graphics system
JP2000209580A (ja) * 1999-01-13 2000-07-28 Canon Inc 画像処理装置およびその方法
JP2000305546A (ja) 1999-04-16 2000-11-02 Nec Corp 半導体メモリおよび画像表示装置
JP2000324419A (ja) 1999-05-14 2000-11-24 Canon Inc 画像処理装置及び方法
JP3380859B2 (ja) 1999-06-02 2003-02-24 松下電器産業株式会社 マルチレイヤ画像合成装置
US6606127B1 (en) * 1999-06-10 2003-08-12 Enseo, Inc. System and method for synchronizing, storing and accurately reproducing video signals
US6912350B1 (en) * 1999-12-08 2005-06-28 Intel Corporation DVD subpicture rendering without loss of color resolution
US7483042B1 (en) * 2000-01-13 2009-01-27 Ati International, Srl Video graphics module capable of blending multiple image layers
DE10001369A1 (de) * 2000-01-14 2001-07-19 Infineon Technologies Ag Verfahren und Schaltungsanordnung zur Grafikdarstellung, insbesondere in einem digitalen Fernsehgerät
US6552750B1 (en) * 2000-03-21 2003-04-22 Tvia, Inc. Apparatus for improving the presentation of graphics data on a television display
JPWO2002028100A1 (ja) * 2000-09-29 2004-02-12 株式会社東芝 記録再生装置およびこの記録再生装置の録画予約方法
JP4215423B2 (ja) 2000-10-19 2009-01-28 三洋電機株式会社 画像データ出力装置
TW475122B (en) * 2000-10-24 2002-02-01 Cyberlink Corp Film commentary data service device
US6903753B1 (en) * 2000-10-31 2005-06-07 Microsoft Corporation Compositing images from multiple sources
JP3548521B2 (ja) * 2000-12-05 2004-07-28 Necマイクロシステム株式会社 半透明画像処理装置及び方法
JP2002297198A (ja) 2001-03-30 2002-10-11 Seiko Epson Corp オーディオ復号装置
JP3540761B2 (ja) 2001-04-02 2004-07-07 株式会社東芝 コンピュータシステムおよび動画再生方法
JP4151234B2 (ja) 2001-04-25 2008-09-17 カシオ計算機株式会社 画像合成処理装置
US6828987B2 (en) * 2001-08-07 2004-12-07 Ati Technologies, Inc. Method and apparatus for processing video and graphics data
JP3785983B2 (ja) 2001-10-05 2006-06-14 株式会社日立製作所 ディジタル情報記録装置および情報記録再生装置
JP2003162276A (ja) 2001-11-29 2003-06-06 Matsushita Electric Ind Co Ltd オンスクリーン表示回路
JP2003224862A (ja) 2002-01-29 2003-08-08 Nec Access Technica Ltd グラフィックコントローラ及び表示メモリ容量低減方式
JP3730586B2 (ja) 2002-03-20 2006-01-05 株式会社リコー 画像処理装置
US6771274B2 (en) * 2002-03-27 2004-08-03 Sony Corporation Graphics and video integration with alpha and video blending
US7330640B2 (en) * 2002-04-15 2008-02-12 Thomson Licensing Display of closed caption and sub-picture information during limited speedup video trick modes
JP2003317395A (ja) * 2002-04-15 2003-11-07 Pioneer Electronic Corp 情報記録装置および情報記録方法
US7539391B2 (en) * 2002-06-27 2009-05-26 Nxp B.V. Method and apparatus for trick-mode support of audio/video/data streams with conditional access
US7463311B2 (en) * 2002-09-09 2008-12-09 General Instrument Corporation Method and system for including non-graphic data in an analog video output signal of a set-top box
ES2413529T3 (es) * 2002-09-26 2013-07-16 Koninklijke Philips N.V. Aparato para recibir una señal de información digital
JP4442564B2 (ja) 2002-11-28 2010-03-31 ソニー株式会社 再生装置、再生方法、再生プログラムおよび記録媒体
US7580614B2 (en) * 2002-12-09 2009-08-25 Kabushiki Kaisha Toshiba Information playback apparatus having expansion information storage unit and information playback method
JP4261893B2 (ja) * 2002-12-13 2009-04-30 キヤノン株式会社 情報処理装置及び情報処理方法
US7554608B2 (en) * 2003-04-01 2009-06-30 Panasonic Corporation Video composition circuit for performing vertical filtering to α-blended video data and successively input video data
JP4466117B2 (ja) 2003-04-09 2010-05-26 ヤマハ株式会社 画像合成装置
TWI229562B (en) * 2003-04-17 2005-03-11 Mediatek Inc Apparatus and method for signal processing of format conversion and combination of video signals
JP2004328226A (ja) 2003-04-23 2004-11-18 Funai Electric Co Ltd Dvdプレーヤ、及び合成映像再生装置
US7400360B2 (en) * 2003-09-22 2008-07-15 Lsi Corporation Device for simultaneous display of video at two resolutions with different fractions of active regions
KR20050034448A (ko) * 2003-10-09 2005-04-14 엘지전자 주식회사 다중 그래픽 중첩을 위한 온 스크린 디스플레이 장치
US7251322B2 (en) * 2003-10-24 2007-07-31 Microsoft Corporation Systems and methods for echo cancellation with arbitrary playback sampling rates
TWI263925B (en) * 2003-12-16 2006-10-11 Via Tech Inc Graphics card for smoothing the playing of video
US7486337B2 (en) 2003-12-22 2009-02-03 Intel Corporation Controlling the overlay of multiple video signals
US7535478B2 (en) * 2003-12-24 2009-05-19 Intel Corporation Method and apparatus to communicate graphics overlay information to display modules
US8175444B2 (en) * 2004-01-14 2012-05-08 Samsung Electronics Co., Ltd. Method of reproducing from storage medium storing interactive graphics stream activated in response to user's command
JP2005341169A (ja) * 2004-05-26 2005-12-08 Funai Electric Co Ltd 光ディスク再生装置
JP2005341132A (ja) * 2004-05-26 2005-12-08 Toshiba Corp 映像データ処理装置及び処理方法
JP2006004486A (ja) * 2004-06-16 2006-01-05 Toshiba Corp 情報記録媒体及び情報再生装置
US20050281342A1 (en) * 2004-06-22 2005-12-22 Broadcom Corporation Slow motion and high speed for digital video
JP2006065365A (ja) 2004-08-24 2006-03-09 Fuji Photo Film Co Ltd 画像処理装置および方法並びにプログラム
JP2007065928A (ja) * 2005-08-30 2007-03-15 Toshiba Corp 情報記憶媒体、情報処理方法、情報転送方法、情報再生方法、情報再生装置、情報記録方法、情報記録装置、及びプログラム
EP1667448A1 (en) * 2004-12-02 2006-06-07 Deutsche Thomson-Brandt Gmbh Method and apparatus for encoding and for decoding a main video signal and one or more auxiliary video signals
JP4568120B2 (ja) * 2005-01-04 2010-10-27 株式会社東芝 再生装置
JP4417854B2 (ja) * 2005-01-04 2010-02-17 株式会社東芝 再生装置
JP4737991B2 (ja) * 2005-01-04 2011-08-03 株式会社東芝 再生装置
JP4519658B2 (ja) * 2005-01-04 2010-08-04 株式会社東芝 再生装置
JP2006236411A (ja) * 2005-02-22 2006-09-07 Toshiba Corp 情報記憶媒体、情報記録方法、および情報再生方法
JP4968506B2 (ja) * 2005-03-04 2012-07-04 ソニー株式会社 再生装置、再生方法、およびプログラム
US7903172B2 (en) * 2005-03-29 2011-03-08 Snell Limited System and method for video processing
JP2007258873A (ja) * 2006-03-22 2007-10-04 Toshiba Corp 再生装置および再生方法
JP4625781B2 (ja) * 2006-03-22 2011-02-02 株式会社東芝 再生装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07236136A (ja) * 1994-02-23 1995-09-05 Hitachi Ltd 動画情報の伝送制御方式および表示制御方式
JP2000194354A (ja) * 1998-12-25 2000-07-14 Toshiba Corp マルチウインドウ画像表示装置
JP2002247498A (ja) * 2001-02-16 2002-08-30 Toshiba Corp 情報再生装置
JP2002335497A (ja) * 2001-05-10 2002-11-22 Toshiba Corp サブピクチャ表示倍率変換方法及び装置
JP2003259213A (ja) * 2002-02-28 2003-09-12 Sanyo Electric Co Ltd 画像処理装置および画像処理方法

Also Published As

Publication number Publication date
CN101043600B (zh) 2011-07-06
CN101043600A (zh) 2007-09-26
JP2007258872A (ja) 2007-10-04
US20070223877A1 (en) 2007-09-27
TW200809692A (en) 2008-02-16
US8385726B2 (en) 2013-02-26
KR20070095761A (ko) 2007-10-01
KR100865425B1 (ko) 2008-10-24

Similar Documents

Publication Publication Date Title
JP4625781B2 (ja) 再生装置
KR100845066B1 (ko) 정보 재생 장치 및 정보 재생 방법
KR100885578B1 (ko) 정보 처리 장치 및 정보 처리 방법
US7973806B2 (en) Reproducing apparatus capable of reproducing picture data
US20060164437A1 (en) Reproducing apparatus capable of reproducing picture data
JP4247291B1 (ja) 再生装置および再生方法
JPH11196386A (ja) コンピュータシステムおよびクローズドキャプション表示方法
JP2005107780A (ja) 画像混合方法および混合画像データ生成装置
US7936360B2 (en) Reproducing apparatus capable of reproducing picture data
JP2007257114A (ja) 再生装置および再生装置のバッファ管理方法
JP2007257701A (ja) 再生装置
US20060164938A1 (en) Reproducing apparatus capable of reproducing picture data
JP2009081540A (ja) 情報処理装置および合成映像生成方法
JP5159846B2 (ja) 再生装置および再生装置の再生方法
JP5060584B2 (ja) 再生装置
JP2000036940A (ja) コンピュータシステムおよびデコーダ装置
JP2010035230A (ja) 情報処理装置及び映像再生方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080530

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091215

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100309

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100430

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100608

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100907

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20100921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101012

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101108

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131112

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees