JP6053767B2 - 高ダイナミックレンジ・ビデオのためのグラフィック処理 - Google Patents

高ダイナミックレンジ・ビデオのためのグラフィック処理 Download PDF

Info

Publication number
JP6053767B2
JP6053767B2 JP2014515315A JP2014515315A JP6053767B2 JP 6053767 B2 JP6053767 B2 JP 6053767B2 JP 2014515315 A JP2014515315 A JP 2014515315A JP 2014515315 A JP2014515315 A JP 2014515315A JP 6053767 B2 JP6053767 B2 JP 6053767B2
Authority
JP
Japan
Prior art keywords
video
hdr
data
display mode
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014515315A
Other languages
English (en)
Other versions
JP2014528182A (ja
Inventor
フィリップ ステフェン ニュートン
フィリップ ステフェン ニュートン
ハーン ウィーベ デ
ハーン ウィーベ デ
チャールズ レオナルドス コーネリウス マリア ニベレル
チャールズ レオナルドス コーネリウス マリア ニベレル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2014528182A publication Critical patent/JP2014528182A/ja
Application granted granted Critical
Publication of JP6053767B2 publication Critical patent/JP6053767B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37Details of the operation on graphic patterns
    • G09G5/377Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/309Table of contents
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327Table of contents
    • G11B27/329Table of contents on a disc [VTOC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H04N21/43635HDMI
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42653Internal components of the client ; Characteristics thereof for processing graphics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4854End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Picture Signal Circuits (AREA)
  • Image Processing (AREA)

Description

本発明は、ビデオ情報を処理するための装置、ビデオ情報を受信するための入力ユニットを有する装置、低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを含むビデオ情報、並びに、LDR表示モード及びHDR表示モードのうちのいずれか1つである特定の表示モードにおける表示のためにビデオ・データを処理することによって表示信号を生成し、ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理するビデオ・プロセッサに関する。
本発明はさらに、ビデオ情報を転送するためのビデオ信号、ビデオ情報を生成するための装置、ビデオ情報を処理するための方法、及び、ビデオ情報を生成するための方法に関する。
本発明は、高ダイナミックレンジ[HDR]ディスプレイ上でビデオ情報を表示する分野に関する。高い輝度レベル、及び、画像の暗い部分と画像の明るい部分との間の非常に高いコントラストを提供することが可能であるディスプレイ・ユニットが、現在開発されている。そのようなディスプレイ能力を完全に活用するために、ビデオ情報は、より高い輝度及びHDRコントラスト範囲を考慮して、適応されたビデオ情報を提供することによって改良されることができ、例えば、より高い解像度を持つ。HDRから区別するために、従来のビデオ情報は、本明細書において、低ダイナミックレンジ[LDR]ビデオと呼ばれる。このように、LDRビデオ情報は、改善されたコントラストのためにHDR表示モードにおいてHDRディスプレイ・ユニットに表示されることができる。しかしながら、例えば、より良好な視覚的効果のための改善された解像度を活用し、又は、僅かに異なる色を用いることによる視覚的バンディングを回避しつつ明るい若しくは暗い領域における視認性を改善するために、ビデオ情報自体がHDRビデオ・フォーマットで生成されるときに、より説得力ある画像が成し遂げられる。画像データの精度を改良することに加えて、映画監督は、例えば爆発を強調することによって、経験を局所的に改良することができるか、及び/又は、明るい若しくは暗いシーン/領域における視認性を改善することができる。グラフィカル・データ(例えばポップアップメニュー又は字幕)が、オーバレイのためのビデオ情報中に含まれる場合がある。
ビデオ処理装置は、ブルーレイ・ディスク・プレーヤであることができ、適切なインタフェース(好ましくはHDMIのような高速デジタル・インタフェース)を介して、HDR対応TVセット又はモニタのような表示装置に接続されることができる。HDRディスプレイは、ビデオ処理装置と一体化されることもできる。
文献US2004/0067041は、グラフィック・データの再生を管理するためのデータ構造を有する記録媒体、記録及び再生方法並びに装置を記述する。記録媒体は、その中に記録される少なくとも1つのグラフィック画像情報セグメント及び少なくとも1つのパレット情報セグメントを有するグラフィック情報領域を含む。各々のパレット情報セグメントは、色情報を提供する。各々のグラフィック画像情報セグメントは、1つ以上のグラフィック画像を再生するための再生情報を提供する。複数のカラー・パレットが提案され、各々のパレッは、8ビットと24ビットとの間であるメイン・ビデオの異なるカラー階調に対応する。
US2004/0067041におけるグラフィカル・データのための提案されたデータ構造は、それぞれのパレットがグラフィカル・データの異なる解像度に対応する、異なるカラー・パレットのうちの1つが用いられることを可能にする。異なるグラフィカル画像が、メイン・ビデオに同時にオーバレイされる場合があり、それぞれのグラフィカル画像は異なるサイズ及びカラー階調を有する。しかしながら、そのようなビデオ情報フォーマットは、結果として、受信機における問題点又は追加的なコストをもたらす可能性がある。例えば、それぞれのパレットは、特定のカラー階調でグラフィカル画像を表示するために含まれる必要がある。実際のカラー階調は、重要度の程度及びグラフィカル画像のサイズに基づいて再生装置において決定される場合がある。
既知のグラフィカル・データ構造は、再生装置における好ましい表示モードが変化するときに、グラフィカル・データ構造の異なるパレット及びサイズが、結果として、事前に決められたパレットを用いるグラフィカル画像に基づくオーバレイの事前に決められた固定の生成をもたらすという問題点を有する。
オーバレイの生成が好ましい表示モードに順応できる、ビデオ情報を表示するシステムを提供することが本発明の目的である。
この目的のために、本発明の第1の態様によれば、冒頭の段落に記述されるビデオ情報を処理するための装置において、入力ユニットは、ビデオ情報に含まれるグラフィック処理制御データを受信するように構成され、グラフィック処理制御データは、HDR表示モードでグラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含み、ビデオ・プロセッサは、特定の表示モード及びHDR処理命令に依存してグラフィック・データをオーバレイするときに処理を適応させるように構成される。HDRビデオ又は画像が符号化されるときに、それは異なる態様で実行されることができる。例えば、ピクセル・カラーの輝度のために12又は16ビット・ワードを用いることができ、シーン中の広範囲の輝度を符号化するためにわずかな非線形性を用いることができる。高い非線形性によって、8ビット・ワードでHDRシーンを符号化することができ、そしてこれは、LDRディスプレイ上での直接表示にも比較的適しているが、どの駆動信号が任意のHDRディスプレイ上でのシーンのフルHDRコンテンツ(例えば2000又は15000nitピーク輝度)をレンダリングするために最適であるかにも変換できる。ここで、更なる最適化無しでグラフィック・ピクセル符号(例えば、「グラフィック白」である何らかの値)を直接使用するとしたら、レンダリングにおける実際の表示、及び観察環境などに応じて、そして、潜在的に例えばスクリーン上のそのサイズ又は位置のようなグラフィクスのクラスに応じて、その白は、明るすぎるか又は暗すぎるものとして知覚される可能性があるような態様で、字幕のような任意のグラフィックが符号化される可能性がある。提案されたHDR処理命令によって、レンダリングのために用いられるディスプレイのようないくつかのコンフィギュレーションのためにアップワードであるか、他のコンフィギュレーションのためにダウンワードであるかにかかわらず、そして(HDR)画像及びグラフィックスが符号化されるそれぞれの態様のいずれにおいても、(少なくともHDR画像上で一緒に示すことによって調整されるときに、通常LDRとして知覚されるが、結局はHDRでもある)グラフィクスを最適に調整することができる。制御情報は、受信ディスプレイが、創作側によって予知されるタイプのうちの1つとして操作されること、並びに、ビデオ/画像及びグラフィクスの提供された共同レンダリング・オプションのどれが最適であるかを自身で決定することを可能にする。
本発明のさらに別の態様では、ビデオ信号は、ビデオ情報をビデオ処理装置へ転送するためのものであり、当該ビデオ情報は、低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを有し、ビデオ信号は、ビデオ情報中に含まれるグラフィック処理制御データを有し、グラフィック処理制御データは、特定の表示モード及びHDR処理命令に依存してグラフィック・データをオーバレイするときの処理を適応させるためのHDR表示モードにおいてグラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含む。
本発明のさらに別の態様では、光学記録担体は、光学的に読み取り可能なマークのトラックを有し、マークは上記のビデオ信号を表す。
本発明のさらに別の態様では、ビデオ情報を生成するための装置は、ビデオ情報をビデオ処理装置へ転送するための出力ユニットを有し、ビデオ情報は、低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを有し、ビデオ処理装置は、LDR表示モード及びHDR表示モードのうちのいずれか1つである特定の表示モードにおける表示のためにビデオ・データを処理することによって表示信号を生成し、ビデオ・データをオーバレイするためのオーバレイを生成するためにグラフィック・データを処理するように用意され、当該装置はさらに、グラフィック処理制御データを含むビデオ情報を生成するためのビデオ・プロセッサを有し、グラフィック処理制御データは、ビデオ処理装置において、特定の表示モード及びHDR処理命令に依存してグラフィック・データをオーバレイするときの処理を適応させるための、HDR表示モードにおいてグラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含む。
本発明のさらに別の態様では、ビデオ情報を処理する方法は、LDR表示モード及びHDR表示モードのうちのいずれか1つである特定の表示モードにおける表示のためにビデオ・データを処理し、ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理し、ビデオ情報中に含まれるグラフィック処理制御データを受信し、グラフィック処理制御データは、特定の表示モード及びHDR処理命令に依存してグラフィック・データをオーバレイするときの処理を適応させるための、HDR表示モードにおいてグラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含む。
本発明のさらに別の態様では、ビデオ情報を生成する方法は、ビデオ処理装置において、特定の表示モード及びHDR処理命令に依存してグラフィック・データをオーバレイするときの処理を適応させるための、HDR表示モードにおいてグラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含むグラフィック処理制御データを生成し、ビデオ情報中にグラフィック処理制御データを含める。
さらに、ビデオ情報を処理するためのコンピュータ・プログラム製品は、上述の方法をプロセッサに実行させるように実施される。
グラフィック処理制御データは、オーバレイを生成するため又はメイン・ビデオの処理を適応させるようにHDRモードにおける処理を適応させるために適用されるグラフィカル・コマンド又は設定のような、グラフィック・データをオーバレイするためのHDR処理命令を含む。特に、グラフィカル命令は、特定のディスプレイがHDR表示モードであるときに適用される処理を定める。ビデオ・プロセッサは、グラフィック・データをオーバレイするときにグラフィック・データ及び/又はビデオ・データの処理を適応させるように用意される。
これらの手段は、グラフィック・データ及び/又はビデオ・データの処理の適応が、グラフィック処理制御データ中に含まれるそれぞれの前記HDR処理命令に従ってビデオ処理装置において決定された特定の表示モードに応じて制御されるという効果を有する。したがって、それぞれのHDR処理命令がビデオ情報のソースにおいて提供されるので、グラフィック処理制御データが、再生装置において実行される実際の処理動作を定めて制御する。有利には、ビデオ情報の作成者は、表示がHDR表示モードで生成されるときのグラフィック・データの表示を制御することを可能にされる。例えば、オーサリング側の制御の下で、受信側で処理を適切に適応させることによって、グラフィック資産の1つのセットが用いられることができるので、LDRモード又はHDRモードでビデオを表示するための別々のグラフィック資産を作成する苦労が回避されることができる。
本発明は、以下の認識に基づく。既存のビデオ・システムをHDRに拡張するとき、進化した表示装置において利用可能な高いコントラスト比が、鮮明な及び現実的なビデオ画像を達成するために用いられる。しかしながら、本発明者らは、そのようなHDR表示モードにおいてグラフィクスをオーバレイするときに、いくつかの問題が発生する場合があることを認識した。例えば、HDRビデオ上の(半透明の)グラフィクス・オーバレイによって発生する可能性がある問題は、HDRビデオ中のいくつかのシーンは、非常に明るい場合があることである。これは、同時に示される字幕又はメニューのようなグラフィクスの可読性を大幅に低減する。発生する可能性がある他の問題は、字幕の文字が明るすぎて読む人にとって不快であったり疲労を生じさせたりすることである。さらに、極端に明るい字幕又はメニューは、ハロー効果又はグレアを引き起こし、したがって、知覚されるビデオの品質を低下させる場合がある。本発明者らは、メイン・ビデオを復号することによって入力ビデオを処理して、そして前記HDR処理命令によって指示されるようにグラフィック・データをオーバレイする新規なビデオ処理装置によって処理されることができる、前記HDR処理命令をビデオ情報中に提供することによって、そのような問題に対処した。
オプションとして、ビデオ情報は、オーバレイを生成するためのパラメータを定めるセグメントを含み、セグメントは、それぞれのセグメント・タイプを有し、セグメントは、グラフィック処理制御データを構成するためのHDR処理定義タイプのHDR処理定義セグメントを有し、ビデオ・プロセッサは、HDR処理定義セグメントからのHDR処理命令に従って処理を適応させるように用意される。有利には、ビデオ情報のフォーマットは、ビデオ・パラメータを定めるセグメントを用いて拡張され、このセグメントは、他の復号化情報のために用いられることもできる。
オプションとして、グラフィック・データは、少なくとも1つのLDRカラー・パレットを定めるLDRパレット情報及び少なくとも1つのHDRカラー・パレットを定めるHDRパレット情報を有し、グラフィック処理制御データは、HDRパレットを選択するためのパレット選択命令を有し、ビデオ・プロセッサは、パレット選択命令に依存してHDR表示モードにおいてHDRカラー・パレットを選択するように用意される。ビデオ・データは、LDRカラー・パレット及びHDRカラー・パレットの両方を有し、パレット選択命令は、HDR表示モードにおいてそれぞれのパレットを選択することを可能にする。
オプションとして、グラフィック処理制御データは、LDR表示モードにおける透明度に関する透明度の低減を定める透明度命令を有し、ビデオ・プロセッサは、透明度命令に依存してHDR表示モードにおけるオーバレイ中のグラフィック・データの透明度を適応させるように用意される。長所として、グラフィック・データの透明度は、それぞれのHDRビデオ・シーンに対して調節されることができる。
オプションとして、グラフィック処理制御データは、特定の表示モードがHDR表示モードである間、ビデオ・データの処理をLDR表示モードに切り替えるべきかどうかを定めるビデオ切り替え命令を有し、ビデオ・プロセッサは、ビデオ切り替え命令に依存して、特定の表示モードがHDR表示モードであるときにビデオ・データをオーバレイするとき、ビデオ・データをLDR表示モードに切り替えるように用意され、或いは、グラフィック処理制御データは、特定の表示モードがHDR表示モードである間、HDRグラフィック・データのストリームを読み出すべきかどうかを定めるグラフィクス選択命令を有し、ビデオ・プロセッサは、グラフィクス選択命令に依存して、特定の表示モードがHDR表示モードであるときにビデオ・データをオーバレイするとき、HDRグラフィック・データを用いるように用意される。長所として、ビデオ表示が、グラフィック・データをオーバレイする間、一時的にLDRモードに切り替えられることができるか、又は、グラフィック処理が、専用のHDRグラフィック・ストリームを用いるために設定されることができる。
オプションとして、グラフィック処理制御データは、LDR表示モードにおける輝度に関する輝度の低減を定める輝度命令を含み、ビデオ・プロセッサは、当該輝度命令に依存してHDR表示モードにおけるオーバレイのグラフィック・データの輝度を定めるように用意される。有利には、グラフィック・データの輝度は、HDR表示モードで表示されるときに都合が良いように調節されることができる。
オプションとして、グラフィック処理制御データは、HDR表示モードにおいてポップアップ・グラフィック・データをオーバレイするときのHDR処理命令を定めるポップアップ処理記述子を含む。有利には、それぞれのHDR処理命令に従ってポップアップ(例えばメニュー又はボタン)を表示するために装置が作動するときの処理が適応される。
オプションとして、グラフィック処理制御データは、HDR表示モードにおいて字幕グラフィック・データをオーバレイするときのHDR処理命令を定める字幕処理記述子を含む。有利には、それぞれのHDR処理命令に従って字幕を表示するために装置が作動するときの処理が適応される。それゆえに、HDRモードにおいて字幕を表示するときに特定の処理が実行される。
オプションとして、ビデオ・プロセッサは、表示信号を受信するために接続される表示装置から取得される表示能力情報に依存して特定の表示モードを設定するように用意される。
オプションとして、ビデオ・プロセッサは、表示信号を受信するために接続される表示装置から受信される表示モード情報に依存して特定の表示モードを設定するように用意される。有利には、処理は、それぞれの表示モードに自動的に適応されることができる。
オプションとして、ビデオ・プロセッサは、ビデオ情報のダイナミックレンジを示す、ビデオ情報中に含まれるダイナミックレンジ情報に依存して特定の表示モードを設定するように用意される。有利には、処理は、受信されるビデオ情報に自動的に適応されることができる。
オプションとして、ビデオ・プロセッサは、ユーザ設定に基づく表示モード設定に依存して特定の表示モードを設定するように用意される。有利には、処理は、ユーザ設定に従ってそれぞれの表示モードに適応されることができる。
上記のオプションは、本発明によるさらに好ましい装置及び方法の実施の形態を構成するために、適切に組み合わせられることができる。更なる実施の形態が添付の請求の範囲に与えられ、その開示は参照として本願明細書に組み込まれる。特定の方法又は装置のための、上記において又は従属請求項において定められる特徴は、他の装置又は方法にも同様に適用される。
本発明のこれらの及び他の態様は、以下の詳細な説明において添付の図面を参照して一例として説明される実施の形態から明らかであり、それらを参照してより更に説明される。
ビデオ情報を転送するシステム 受信装置中のビデオ処理システム グラフィクスを有するBDデータ・ストリーム セグメントのタイプ グラフィック処理制御データ ポップアップ・グラフィクスのためのHDRグラフィック処理命令 字幕グラフィクスのためのHDRグラフィック処理命令 LDRビデオ・データのみを有するビデオ情報の入力ストリームのためのHDRグラフィック処理命令 LDRビデオ・データのみを有するビデオ情報の入力ストリームのためのグラフィック処理制御データ及び表示モードを介して制御されるビデオ処理 LDR及びHDRビデオ・データを有するビデオ情報の入力ストリームのためのグラフィック処理制御データ及び表示モードを介して制御されるビデオ処理
図は単に概略であって、尺度通りに描かれていない。図において、すでに説明された要素に対応する要素は同じ参照符号を有する。
高ダイナミックレンジ(High Dynamic Range:HDR)ディスプレイは、通常のディスプレイよりも非常に高い光出力及び白黒間のコントラストを提供することができる。そのようなディスプレイは、40.000:1以上のダイナミックレンジを有する表示を提供するバックライト中の高効率LEDのマトリックスを有する場合がある。高い(局所的な)光出力と組み合わせたそのような大きいダイナミックレンジは、ディスプレイに示される画像のリアリズムを大いに増加させる。これらのディスプレイの大きいダイナミックレンジ及び高い輝度を十分に利用するために、コンテンツは、輝度及びカラーにおける十分な忠実性及び解像度をサポートする必要がある。
オーディオ・ビデオ(A/V)コンテンツの配布は、いくつかの規格(例えば、放送のためのDVB及びパッケージ化されたメディア用のブルーレイ・ディスク又はDVD)において記述される。これらの規格を用いて送信されるデジタルビデオ・コンテンツは、MPEGグループからの規格を用いて、YUV4:2:0又はより良好なYUV4:2:2としてサンプリングされて符号化される。送信の後、コンテンツは、復号されて、関連した規格を実施する装置(例えばブルーレイ・ディスク・プレーヤ)で再生される。このとき、復号されたコンテンツは、適切なインタフェースを用いてディスプレイに送信される。従来の規格に従って符号化されたビデオは、本明細書において、低ダイナミックレンジ(LDR)ビデオと呼ばれる。規格は、HDRビデオをサポートするために拡張されることができる。
ブルーレイ・ディスク(BD)規格は、字幕、フルスクリーン・メニュー、アニメーション及びポップアップ・グラフィクスのためのグラフィクス・オーバレイをサポートする。BDプレーヤは、一般的にオン・スクリーン・ディスプレイ(On Screen Display:OSD)メニューを特徴とする。このため、グラフィクス情報は、局所的に生成される場合がある。HDRディスプレイ上のビデオ背景上のグラフィクスのオーバレイに関するいくつかの問題が対処される。例えば、発生する可能性がある問題は、字幕中の文字が明る過ぎて、読む人にとって不快であるか疲労を引き起こすことである。HDRビデオ上の(半透明の)グラフィクス・オーバレイによって発生する可能性がある他の問題は、HDRビデオ中のいくつかのシーンが、例外的に明るい場合があることである。これは、同時に示される字幕又はメニューのようなグラフィクスの可読性を著しく低減する。表示されているビデオのタイプ(LDR又はHDRビデオ)に応じて字幕又はポップアップ・メニューのようなグラフィクスの処理を調節することが説明される。さらに、データ・ストリームが1つの種類のビデオのみ(LDR又はHDR)を含む場合、HDRディスプレイ上にグラフィクスと組み合わせてこのビデオを表示するときに、問題が発生する可能性がある。それゆえに、提案されるソリューションは、LDR、HDR又はLDR及びHDRビデオ・データ両方を含むビデオ情報に関連する。
- HDR対応ディスクがレガシー・プレーヤで正しく再生されることを保証すること、
- グラフィクスの半透明のオーバレイ及びビデオ背景の例外的に明るい領域が、字幕又はメニューのようなグラフィクスを判読しにくくする場合があること、
- 字幕が、極端な輝度のために、不快であるか疲労を引き起こす可能性があること、
- 極端に明るい字幕又はポップアップ・メニューが、ビデオの知覚される品質に負の影響を及ぼす可能性があること(これは、ハロー効果によって又はグレアによって引き起こされる場合がある)、
- HDRディスプレイに表示する場合に必要なグラフィック処理は、異なるタイプのグラフィクス・コンテンツ(例えばメニュー及び字幕)に対して異なる場合があること、
のような、手短に述べられたさまざまな問題は、提案されるシステムによって対処される。
図1は、ビデオ情報を転送するシステムを示す。システムは、転送媒体130 (例えば光学ディスク140、インターネット又は放送ネットワーク)を介してビデオ処理装置110へ転送されるビデオ転送信号104を提供するビデオ・ソース100を有する。処理装置は、入力ユニット112において記録媒体又は放送からビデオ信号111を受信する受信機を構成する。受信機は、HDR表示装置120に表示信号114を提供する(例えば高ダイナミックレンジ(HDR)表示モードでビデオを表示することが可能なTV又は投射システムに対するHDMI信号)。あるいは、受信機は、LDR表示装置(図示せず)に接続されることができ、その場合LDR表示信号を生成することができる。受信機は、ブルーレイ・ディスク(BD)プレーヤ又はセットトップ・ボックス(STB)若しくは衛星受信機のような、別々の装置であることができる。別の態様では、受信機110及びHDRディスプレイ120は、1つの装置に組み込まれる(例えば、デジタル・チューナ及びビデオ・プロセッサが組み込まれたデジタルHDRテレビ)。
システムは、例えばこのように知られるビデオ・フォーマットに従って、ビデオ転送信号中に多重化される複数のデータ・ストリームでビデオ情報を転送するために配置される。ビデオ情報は、低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを含み、さらに字幕又はメニューのようなグラフィック・データを含む場合がある。HDRビデオ・データは、ビデオ・ソース装置100のメイン入力101に提供される。グラフィック・データは、ビデオ・ソース100の補助入力102に提供されることができ、メイン・ビデオ・データ上のオーバレイにおける表示のために用意される(例えば字幕)。グラフィック・データの複数のストリームが含まれることができることが留意されるべきである。ポップアップ・メニューのような更なるグラフィック・データは、いつでもプリローディング及び活性化を可能にするために、通常は多重化されたリアルタイム・ビデオ・データ・ストリーム外で(いわゆるout-of-mux)別々に転送される別のグラフィック・ストリーム中に符号化されることができる。さらに、追加のグラフィック・データが下流で生成されることができる(例えば受信機110において受信側で生成されるメニュー) 。
システムは、ソース側において、ビデオ転送信号中に、以下で説明されるグラフィック処理制御データを含めるための機能に対応する。グラフィック処理制御データは、HDR表示モードにおいてグラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含む。この機能は、ソース装置中のビデオ・プロセッサ103において実施されることができるが、放送スタジオなどにおける専用のコンピュータ・プログラムに基づくオーサリング・システムにおいて実行されることもできる。
メイン・ビデオは、ビデオ伝送フォーマットに従ってHDRビデオ・データを用意することによって処理される。適用可能な伝送規格によって、システムは、受信機がメイン・ビデオ・データを再生することを可能にし、グラフィック・データをオーバレイするために、受信機にパラメータを示すための制御データを提供する。最後に、ビデオ転送信号104中のデータ・トランスポート・ストリームは、転送媒体130を介した伝送のために、上述のように組み立てられ、以下で詳細に説明されるグラフィック処理制御データを含む。
HDRビデオ情報及びグラフィック処理制御データを転送するためのビデオ転送信号104は、転送媒体130(例えば、BDのような光学ディスク140、公共のTV伝送網、衛星ネットワーク、インターネットなど)を介して転送される。ビデオ信号において、トランスポート・ストリームは、HDRビデオ情報を表す。ビデオ情報転送プラットホームは、デジタル・ビデオ放送(Digital Video Broadcast:DVB)である。DVBは、オーディオ/ビデオ、グラフィクス(字幕など)及びインタラクティブ・アプリケーション(Javaアプリケーション又はHTML/XML)のトランスポート及び関連するシグナリングのために、地上波、ケーブル、衛星及びモバイルのためのさまざまな規格を利用する。ディスプレイ技術における現在の進歩は、大衆市場視聴者に対してHDRビデオを導入することを可能にしている。したがって、HDRコンテンツの広範囲にわたる分配を可能にするために、DVB規格は、HDRコンテンツの放送を可能にするように拡張されることができる。更なる転送メディアはBD光学ディスク、インターネットなどを含み、それぞれのビデオ・フォーマットはHDRビデオに適応されることができる。特に、そのようなビデオ・フォーマットは、提案されるグラフィック処理制御データを含むようにビデオ転送信号を定めることによって改善されることができる。ビデオ情報が、オプションとしてHDR拡張ビデオ情報と組み合わせて、三次元(3D)ビデオ・データを表示するようにさらに用意されることができることが留意されるべきである。
受信機110は、ビデオ信号111、すなわち上述のように転送媒体130を介して転送した後のビデオ転送信号104を受信するための入力ユニット112を有する。ビデオ情報及びグラフィック処理制御データが読み出されて、ビデオ・プロセッサ113に接続される。ビデオ・プロセッサは、LDR表示モード及びHDR表示モードのいずれか一方である特定の表示モードにおける表示のためにビデオ・データを処理し、ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理することによって、表示信号114を生成するための信号処理構造を有する。ビデオ・プロセッサは、以下で詳細に説明されるように、特定の表示モード及びHDR処理命令に依存してグラフィック・データをオーバレイするときに処理を適応させる。
ソース装置100はビデオ情報を生成するためにあり、装置はビデオ情報をビデオ処理装置110へ転送するための出力ユニット105を有する。ソース装置は、グラフィック処理制御データを含むビデオ情報を生成するためのビデオ・プロセッサ103を有し、グラフィック処理制御データは、ビデオ処理装置において、特定の表示モード及びHDR処理命令に依存してグラフィック・データをオーバレイするときに処理を適応させるための、HDR表示モードにおいてグラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含む。
ビデオ信号111は、ビデオ情報をビデオ処理装置へ転送するための信号であり、ビデオ処理装置は、LDR表示モード及びHDR表示モードのいずれか一方である特定の表示モードにおける表示のためにビデオ・データを処理し、ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理することによって表示信号を生成するように、用意される。ビデオ信号は、ビデオ情報中にグラフィック処理制御データを含む。グラフィック処理制御データは、特定の表示モード及びHDR処理命令に依存してグラフィック・データをオーバレイするときの処理を適応させるための、HDR表示モードにおいてグラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含む。
実施の形態において、ビデオ信号は、光学記録担体140(例えばDVD又はBD)で提供される。光学記録担体は光学的に読み取り可能なマークのトラックを有し、マークは上述のようなビデオ信号を表す。BDに基づくグラフィック処理制御データを含むビデオ情報を記憶するために使用される特定のビデオ・フォーマットの実際的な例が以下に説明される。
図2は、受信装置におけるビデオ処理システムを示す。装置は、例えばBDプレーヤ、デジタルテレビ・セット又はセットトップ・ボックスであることができる。入力ユニット201は、ビデオ信号からビデオ情報を読み出すための復調器を含む。入力ユニットは、光学記録担体からビデオ情報を読み出すための光学記録担体ユニットを含むことができる。復調器はビデオ信号からトランスポート・ストリームを読み出し、このトランスポート・ストリームは逆多重化装置ユニット202に接続されて、逆多重化装置ユニットは、さらに、トランスポート・ストリームからさまざまなデータ・ストリーム及び制御データを読み出すために、逆スクランブル装置を含むことができる。データ・ストリームは、ビデオ及びオーディオ・データを復号するための主復号器203に、そしてグラフィック・データ及び制御データを復号するための補助復号器204に接続される。復号器及び更なる素子は、例えばHDMIによる表示信号を生成するために中央処理ユニット(CPU)、グラフィックス・プロセッサ206、メモリ207及び出力段208に、システム・バス209を介して接続される。
いくつかの実施態様において、ビデオ及び字幕の処理パイプラインは異なっており、別々である。A/V復号化及びグラフィック処理(フィルタ動作など)のような処理及び高帯域動作は、専用のASICにおいて実行され、一方、低帯域情報(例えば字幕)の処理は、低電力汎用プロセッサによって実行される。字幕及びビデオは、処理パイプラインの最後の最後まで組み合わせられない。
以下において、ビデオ情報は、ブルーレイ・ディスク・フォーマットに従って議論される。BDフォーマットは実際的な例であり、同様のグラフィック処理制御データは任意の他の適切なビデオ・フォーマット中にも含まれることができることに留意する必要がある。
図3は、グラフィクスを有するBDデータ・ストリームを示す。ブルーレイ・ディスク・データストリームは、トランスポート・パケット34を有するトランスポート・ストリーム31を含む。パケット34のサブセットが、同じパケット識別子PIDを有することができ、エレメンタリ・パケットの専用のストリーム(PES)を形成して、前記PESパケットがグラフィック・エレメンタリ・ストリーム32を構成する。セグメント33は、PESパケットのストリーム中に組み込まれるデータ構造である。BDシステムに関する詳しい情報は、US出願US2006580647及びUS20090103895、並びに、ブルーレイ・ディスク協会から利用可能なBD-ROM A/V White Paper_100604(1)-15916中に見つけることができる。これらの文献は、ストリームがブルーレイ・ディスク・プレーヤにおいてどのように処理されるか、並びに、説得力のある動画経験を生成するために、同期されたグラフィクス及び音声データとビデオがどのように組み合わせられるのかを記載する。ブルーレイ・ディスクにおいて、オーディオ及びグラフィック・データは、メイン・トランスポート・ストリームに組み込まれることができるか、又は、ユーザからの入力に依存してメイン・トランスポート・ストリームのコンテンツと同期して示されることができるデータを含む他の補助トランスポート・ストリームに組み込まれることができる。例えば、プレイリストは、異なる言語のための複数の字幕ストリームによって定められることができる。ブルーレイ・ディスクにおいて、これは例えば、プレイリストが複数のプレイアイテムによって定められ、それによって各々のプレイアイテムは複数のサブ・プレイアイテムを有することができ、そしてこれらのサブ・プレイアイテムは、システムがユーザ入力に依存して選択することができる異なる字幕ストリームを含むことを意味する。
メイン・ビデオとの同期は、PESパケット中のプレゼンテーション・タイム・スタンプ(Presentation Time Stamp:PTS)値を用いてエレメンタリ・ストリーム・レベルで実行される。ブルーレイ・ディスク・グラフィクス・セグメントは、セグメント記述子及びセグメント・データから成る。セグメント記述子は、セグメントのタイプ及び長さを含む。
例えば以下のように、ビデオ再生モードがHDRに設定されるときにグラフィクスをどのように処理するかに関する情報を伝達する新たなセグメント・タイプを定めることが提案される。
HDR対応ディスク上のプレゼンテーション・グラフィック(Presentation Graphics)、インタラクティブ・グラフィック(Interactive Graphics)又はテキスト(Text)字幕ストリームは、さらに、HDR処理定義(HDR_Processing_definition)セグメントを含む。このセグメントは、復号器が、HDRビデオの場合に、高解像度映画(High Definition Movie:HDMV)モード及び/又はBD Java(BD-J)モードにおいてプレゼンテーション・グラフィック又はテキスト字幕グラフィクスを、そしてインタラクティブ・グラフィック(HDMVモード)を、処理する態様を定める。HDR処理定義セグメントは、ストリーム中のパレット定義セグメントごとに新たなHDRパレット定義(HDR_palette definition)を含むこともできる。BDグラフィクス復号器モデル中のHDMVプレゼンテーション・グラフィック復号器、HDMVインタラクティブ・グラフィック復号器及びHDMVテキスト字幕復号器のための合成バッファは、LDR及びHDRプレゼンテーションの両方のためのパレット・データを記憶することが可能であるように拡張される。メニューが起動させられると、グラフィクス復号器モデルは、LDR/HDR再生モードを示す新たなレジスタ又は新たに定められた(最初は予約されている)レジスタ・ビットを通して、表示モードを確認する。LDRからHDRへのモード変更が実行されると、グラフィクス復号器モデルは、HDR処理定義セグメントにおいて定義されるようにグラフィックスを処理する。グラフィクス復号器モデルは、標準パレット定義を無視して、その代わりに、合成バッファからCLUT(カラー・ルックアップ・テーブル)へと、新たなHDRパレット定義をロードすることができる。LDRモードへと元に切り替えると、標準パレット定義セグメントが、合成バッファからCLUTへとロードされ、HDRパレットは無視される。グラフィック処理のための他のアルゴリズムも、HDR処理定義セグメントにおいても定められることができる。
このアプローチの利点は、既存のLDRプレーヤは新たなセグメント・タイプを無視するので、後方互換性ソリューションを提供することである。さらに、それは、追加されたHDR処理定義セグメントが比較的小さいデータしか必要としない一方、二重のグラフィック・オブジェクトを必要としないので、ディスク容量及び帯域を節約する。そのうえ、パレットを用いることは、異なるタイプのグラフィック・コンテンツに対する異なる処理を可能にする。
ポップアップ・メニューのための更なる実施の形態において、ビデオは、ユーザがBD-Javaポップアップ・メニューを起動させると、元のLDRモードへと自動的に切り替えられる。ポップアップ・メニューがオフに切り替えられると、ビデオは、自動的に元のHDRへと切り替えられる。
他の実施例において、2つの異なるグラフィック・ストリームからなるセットが定められる。一方のグラフィック・ストリームはLDRに提供され、他方は少なくとも実質的に同じコンテンツを有するが、HDRに対して適応されている。HDRグラフィクス指標は、グラフィック・ストリームの属性中に提供されることができる。どのグラフィック・ストリームが、特定のLDRグラフィック・ストリームに対応するHDRグラフィック・ストリームであるかを示すために、LDRグラフィック・ストリームと、対応するHDRグラフィック・ストリームとの間のリンキング・メカニズムが提供されることができる(例えばポインタ)。HDRバージョン指標は、例えばプレイリスト・ファイルの拡張データ中に含まれることができ、対応するLDRバージョンに対するリンクを含むことができる。それゆえに、再生装置が両方のストリームのうちのそれぞれ1つを選択することが可能にされる。実施の形態において、グラフィック処理制御データは、特定の表示モードがHDR表示モードである間にHDRグラフィック・データのストリームを読み出すべきかどうかを定めるグラフィクス選択命令を有することができ、ビデオ・プロセッサは、グラフィクス選択命令に依存して特定の表示モードがHDR表示モードであるときにビデオ・データにオーバレイする間にHDRグラフィック・データを用いるように用意される。
図4は、セグメントのタイプを示す。さまざまなタイプのセグメント(例えばパレット定義セグメント、オブジェクト定義セグメントなど)がブルーレイ・ディスク規格において定められており、0x83から0xFFの値は予約されている。この表は、例えばHDR処理定義セグメントを含むセグメントを示す値0x83を有する新たなセグメント・タイプ41を有する。一般に、HDR処理定義セグメントは、グラフィクス復号器がHDR表示モードにおいてグラフィクスを処理する態様に影響を及ぼすパラメータ及び/又は命令を含む。したがって、表示モードがHDRである場合、パラメータ及び/又は命令は、標準の処理の結果を変更する。
図5は、グラフィック処理制御データを示す。この表は、HDR処理定義セグメントの構造がどのようなものであるかの例を示す。この例では、HDR処理定義セグメントは、ポップアップ処理記述子(Pop-up_process_descriptor)51及び字幕処理記述子(Subtitle_process_descriptor)52の2つの処理命令を含む。このセグメントは、表示モードがHDRであるときに用いられるHDRパレット53を含むことができる。(ここではLDRパレットと呼ばれる)元のパレットは、BD規格において定義される他のセグメント中に提供されることに留意する必要がある。更に、HDRパレットは、元のLDRパレットと同じ数のエントリーを含むが、エントリーは、以下のようにHDR表示モードに適応される。
- パレット中のY, Cr及びCb値が、関連するHDRビデオ・ストリームと同じ色行列を有する。
- Y, Cr, Cb及びTの値が、HDR表示モードにおいてグラフィクスを組み合わせるときの問題を低減するように適応される。
図6は、ポップアップ・グラフィクスのためのHDRグラフィック処理命令を示す。命令ポップアップ処理記述子は、HDRビデオと組み合わせたポップアップ・グラフィクスの場合におけるグラフィクスの追加の処理を特定する。一例として、このパラメータは、以下の値を有することができる。
- Pop-up_process_descriptor = 0x00は、HDRビデオのためのグラフィック処理がLDRビデオのための処理と同じであることを指示する命令である。
- Pop-up_process_descriptor = 0x01〜0x09は、透明度がLDR透明度値の特定の割合に低減されるべきであることを指示する透明度命令61である。
- Pop-up_process_descriptor = 0x0Aは、ポップアップ・グラフィックが活性化されるとLBRビデオに切り替えて、ポップアップ・グラフィックが不活性化されると元のHDRに切り替えるようにプレーヤに指示するビデオ切り替え命令62である。
- Pop-up_process_descriptor = 0x0B2は、グラフィックス・プロセッサにHDRパレットを用いるように指示するHDR命令63である。
透明度命令について、透明度は、元のデータが透明の場合にのみ低減される必要あることが留意されるべきである。表中の低減値は単なる例であって、実際の値は異なる場合があり、例えば、より少ないレベル、対数スケールなどを有する。ビデオ切り替え命令について、以下が留意される。HDMVモードにおいて、プレーヤは、単に、事前に決められたPopUp On()及びPopUp Off()ユーザ動作並びにプレーヤ・ステータス・レジスタ(PSR)の未定義フィールド中のオプションのプリファランス設定に応答する。プリファランスは、タイトルのためのプレイリスト中の値を通して設定されることができ、ポップアップ・メニューが示されるときに、ビデオは元のLDRへと切り替えるべきであることを示す。プリファランスが元のLDRへと切り替えるように設定される場合、プレーヤは、PopUp On()ユーザ動作が起動させられると自動的にLDRに切り替え、PopUp Off()が起動させられると元のHDRに切り替える。BD-Jモードにおいて、BD-Jプログラムに、VK_POPUP_MENU BD-J Eventsに応答して適切にビデオ・ストリーム選択及び再生を制御させることによって、同じような挙動が達成されることができる。
図7は、字幕グラフィクス(例えばプレゼンテーション・グラフィクス又はテキスト字幕)のためのHDRグラフィック処理命令を示す。命令Subtitle_process_descriptorは、HDRビデオと組み合わせた字幕グラフィクスの場合におけるグラフィクスの追加の処理を特定する。一例として、このパラメータは、以下の値を有することができる。
- Subtitle_process_descriptor = 0x00は、HDRビデオにおけるグラフィック処理がLDRモードと同じであることを指示する命令である。
- Subtitle_process_descriptor = 0x01〜0x09は、輝度値がLDR輝度値の特定のパーセンテージに低減されるべきであることを指示する輝度命令71である(輝度値は輝度を表し、通常はYとして示される)。
- Subtitle_process_descriptor = 0x0Aは、グラフィックス・プロセッサにHDRパレットを用いるように指示するHDR命令である。
さらに、ポップアップ・グラフィクスのための及び/又は字幕グラフィクスのためのHDRグラフィック処理命令は、上述のグラフィクス選択命令をより更に含むことができる。
加えて、HDRグラフィック処理命令は、スクリーン上のグラフィクス及び/又はビデオの位置を変えるための命令をさらに含むことができる。したがって、グラフィクス及びビデオの非常に明るい領域の重なりは、少なくとも1つの前記位置を変更することによって回避されることができる。例えば、レターボックス・フォーマットにおいて、ビデオは上に動かれることができ、字幕はビデオの下の黒いバー中に配置されることができる。
なお、表示モードは、例えばHDMI信号を介してビデオ処理装置に接続される表示装置の能力に基づいて決定されることができる。さらに、表示モード(LDR又はHDR)を選択するための表示装置におけるユーザ設定が処理装置に通信されることができる。HDMIは、ソース装置へのシンク装置の表示能力の通信(例えばEDID又は表示ポート)を提供する(例えば、HDRがサポートされることを定める1ビットの指標)。BDプレーヤは、表示能力レジスタを設定するために、この指標を用いることができる。あるいは、ユーザが設定手順の間に表示能力を設定することができる。最後に、ユーザが表示モードを動的に切り替えることができ、すなわち、ユーザが、変化する好みに基づいて再生の間に異なる表示モードを選択する。表示モード及びグラフィック処理を制御するためのさまざまなオプションは、以下の図によって説明される。
図8は、LDRビデオ・データのみを有するビデオ情報の入力ストリームのためのHDRグラフィック処理命令を示す。ビデオは元々LDRビデオである場合があり、それがここではHDR表示モードにおいて表示されることに留意する必要がある。ビデオ情報は、表示モードがHDRであるときのグラフィック処理を制御するためのHDRグラフィック処理命令を備える。実際の命令は図6と同様であるが、切り替え命令62は存在しない。
図9は、LDRビデオ・データのみを有するビデオ情報の入力ストリームのためのグラフィック処理制御データ及び表示モードを介して制御されたビデオ処理を示す。ビデオ処理システム91(例えばBDプレーヤ)は、ビデオ情報(例えばBDデータストリーム92)の入力ストリームを受信する。LDRビデオ・データは、LDRビデオ復号器LDR-dec94において処理される。グラフィック・データは、グラフィクス復号器GR-dec96において処理されて、さらに追加的に追加のグラフィックス・プロセッサGR-ex97において処理される。モード・コントローラMOD-CTR 98は、ビデオ処理システムの出力に接続されるシンク装置によって設定される表示モードを示す表示モード信号154を受信することができる。モード・コントローラは、ユーザ・コマンド(例えばユーザ表示モード設定150又は一時的に表示モードを反転させるためのユーザ一時設定151)を受信することができる。モード・コントローラは、例えばBDプレーヤのプレーヤ・レジスタ中の、実際の表示モードを示すレジスタ中の1ビット設定を制御することができる。モード・コントローラは、追加のグラフィックス・プロセッサに、LDR表示モード及びHDR表示モードのうちの任意の1つである表示モードを示すモード・データ153を提供する。追加のグラフィックス・プロセッサは、さらに、上述のHDR処理命令を含むグラフィック処理制御データ152を受信する。処理されたグラフィック・データは、表示信号93(例えばHDMI信号)を生成するために、ビデオにオーバレイするためにオーバレイ・プロセッサOVR95において用いられるオーバレイを構成する。実施の形態において、グラフィック処理は、HDR処理定義セグメントによって定められるHDR命令、及び、表示モードがLDRであるかHDRであるかを示すモード・データ153によって、指示される。
図10は、LDR及びHDRビデオ・データを有するビデオ情報の入力ストリームのためのグラフィック処理制御データ及び表示モードを介して制御されたビデオ処理を示す。このシステムは図9と同様の要素を有する。ビデオ処理システム191(例えばBDプレーヤ)は、ビデオ情報(例えばLDRビデオ・データ及びHDRビデオ・データの両方を有するBDデータ・ストリーム192)の入力ストリームを受信する。モード・コントローラMOD-CTR 198は、ビデオ処理システムの出力に接続されるシンク装置によって設定される表示モードを示す表示モード信号154を受信することができる。モード・コントローラは、ユーザ・コマンド(例えばユーザ表示モード設定150又は一時的に表示モードを反転させるためのユーザ一時設定151)を受信することができる。モード・コントローラは、例えばBDプレーヤのプレーヤ・レジスタ中の、実際の表示モードを示すレジスタ中の1ビット設定を制御することができる。モード・コントローラは、追加のグラフィックス・プロセッサに、LDR表示モード及びHDR表示モードのうちの任意の1つである表示モードを示すモード・データ153を提供する。モード・コントローラは、ビデオ・ストリーム選択信号155を介してLDRビデオ・データ・ストリーム又はHDRビデオ・データ・ストリームそれぞれを復号するためのLDR復号器194かHDR復号器199かの選択を制御する。グラフィック・データは、グラフィクス復号器GR-dec196において処理され、さらに追加的に追加のグラフィックス・プロセッサGR-ex197において処理される。追加のグラフィックス・プロセッサは、さらに、上述のHDR処理命令を含むグラフィック処理制御データ152を受信する。処理されたグラフィック・データは、表示信号193(例えばHDMI信号)を生成するために、ビデオにオーバレイするためにオーバレイ・プロセッサOVR195において用いられるオーバレイを構成する。
実施の形態において、グラフィック処理は、HDR処理定義セグメントによって定められるHDR命令及び表示モードがLDRであるかHDRであるかを示すモード・データ153によって指示され、一方、ビデオ・ストリームの復号化は、それに応じて選択される。実施の形態において、図10と同様の処理システムは、追加のグラフィック処理197及びモード・コントローラ198を備えるが、HDR復号器199は備えない(例えば、低コストプレーヤ)。システムは、HDRディスプレイに接続される可能性がある。入力ストリームは、LDRビデオ・データ及びHDRビデオ・データの両方を有するビデオ・データ・ストリーム192であることができる。システムは、LDR復号器を介して復号されるべきLDRビデオ・データ・ストリームを自動的に選択するが、モード・コントローラによって定められる表示モードに依存して追加のグラフィック処理197を制御する。
本発明の異なる態様によれば、ビデオ信号は、ビデオ情報をビデオ処理装置へ転送するための信号であり、ビデオ情報は、低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを含み、ビデオ信号は、ビデオ情報中に含まれるLDRグラフィック・データ及びHDRグラフィック・データを含む。グラフィック・データの両方のストリームは、完全に独立に符号化されることができるか、又はいくつかのエレメントを共有することができる。それぞれLDR表示モード及びHDR表示モードのためのグラフィック・データの2つの別々のストリームを有することは、有利には、ビデオのソースが別々に両方の表示モードのためのグラフィック機能を完全に制御することを可能にする。オプションとして、HDR指標はグラフィック・ストリームの属性中に含まれて、LDRグラフィック・ストリームと、対応するHDRグラフィック・ストリームとの間をリンクするメカニズムが提供される。
なお、伝統的に、表示の間の輝度及びコントラストは、ユーザによって再生側においてのみ制御されている。本発明者らは、従来のグラフィクスがユーザ制御の下でHDR表示モードにおいて表示される場合に問題が発生することを認識した。いくつかの問題は、更なるユーザ制御(例えばHDRモードのための別個のユーザ透明度設定)を提供することによって軽減されるが、本発明者らは、これはユーザを混乱させる可能性があることを認識し、ソース側において、ビデオ信号にLDRグラフィック・ストリームとHDRグラフィック・ストリームの両方を追加することを提案した。これは、転送される必要があるデータの量を制限しようと試みる信号伝達システムの分野における慣例に反する。
オプションとして、ポップアップ・グラフィック・データ、字幕グラフィック・データ及びインタラクティブ・グラフィックアプリケーションのような他のグラフィック・データのいずれか又は全てが、ビデオ信号の前記2つのバージョン中に含まれることができる。さらに、別々のバージョンは、ビデオ信号中の限られた期間のみ、例えば、ソースが上記の問題が実際に発生したことを決定したときにのみ、提供されることもできる。グラフィック・データの前記2つのバージョンを有する期間において、再生装置は、表示モードに応じてLDRバージョンか又はHDRバージョンを選択する。ビデオ信号の他の期間において、再生装置は、提供される1つのグラフィック・ストリームを用いる。2つのバージョンを有する期間は、ビデオ信号中に含まれる特別なグラフィクス選択インジケータ・データによってマークされることができる。
図10と同様のビデオ処理システムは、HDRディスプレイの特定の表示モードに応じてLDRグラフィック・ストリーム及びHDRグラフィック・ストリームのうちの1つを選択するためのグラフィクス選択ユニットを有する。ビデオ情報を処理するための装置は、LDRビデオ・データ及び/又はHDRビデオ・データを有するビデオ情報を受信するための入力ユニット、LDR表示モード及びHDR表示モードのうちのいずれか1つである特定の表示モードにおける表示のためにビデオ・データを処理することによって表示信号を生成し、ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理するためのビデオ・プロセッサを有する。ビデオ情報は、LDRグラフィック・データ及びHDRグラフィック・データを含む。装置において、入力ユニットは、ビデオ情報のためのLDRグラフィック・データ又はHDRグラフィック・データを読み出すように構成され、ビデオ・プロセッサは、特定の表示モードに依存してグラフィック・データをオーバレイするときにLDRグラフィック・データ又はHDRグラフィック・データを選択するように構成される。
有利には、LDRグラフィック・データ及びHDRグラフィック・データの両方は、オーサリング・システムを用いて、又は、例えばコンピュータ・プログラムとして実施されるビデオ処理装置へ転送するためのビデオ情報を生成する方法において、ビデオ信号中に提供される。それゆえに、作成者が、それぞれの表示モードにおいて表示されるグラフィクスを完全に制御することが可能になる。LDRビデオ・データ及びHDRビデオ・データの両方がビデオ信号中に含まれると、対応するLDR又はHDRグラフィック・データは、再生側で表示信号を生成するために用いられることができる。
特定の場合において、ビデオ・データはHDRビデオ・データのみを有する場合があるが、依然としてLDRグラフィック・データ及びHDRグラフィック・データの両方を有することもできる。ビデオ信号が1つのビデオ・データ・ストリームのみを含むが、これは依然として、HDRビデオ・データが従来の(LDR)ディスプレイ・ユニットでの表示のために再生されるときに、LDRグラフィック・データを選択することを可能にする。HDRグラフィック・データは、HDR表示モードにおける表示のために選択される。
オプションとして、ビデオ・データはLDRビデオ・データのみを有する場合があるが、依然としてLDRグラフィック・データ及びHDRグラフィック・データの両方を有する。LDRグラフィック・データは、LDR表示モードにおける表示のために選択される。ビデオ信号が1つのビデオ・データ・ストリームのみを含むが、これは依然として、LDRビデオ・データが改善されたHDRディスプレイ・ユニット上での表示のために再生されるときに、HDRグラフィック・データを選択することを可能にする。
本発明は、プログラム可能なコンポーネントを用いて、ハードウェア及び/又はソフトウェアで実施されることができることに留意する必要ある。発明を実施するための、ビデオ情報を生成するため又はビデオ情報を処理するための方法は、図1を参照して説明されるシステムのために定められる機能に対応するステップを有する。
本発明が主にBDを介した信号伝達を用いる実施の形態によって説明されたが、本発明は、デジタルチャネル(例えばDVB放送又はインターネット)を介したビデオの任意の配信にも適している。明確性のための前記説明が異なる機能ユニット及びプロセッサを参照して本発明の実施の形態を記述したことはいうまでもない。しかしながら、本発明から逸脱することなく、異なる機能ユニットまたはプロセッサ間で機能を適切に分散させることができることは明らかである。例えば、別々のユニット、プロセッサ又はコントローラによって実行されると説明された機能は、同じプロセッサ又はコントローラによって実行されることができる。したがって、特定の機能ユニットに対する参照は、単に説明される機能を提供するための適切な手段に対する参照として見なされるべきであり、厳密な論理的又は物理的構造又は機構を示すわけではない。本発明は、ハードウェア、ソフトウェア、ファームウェア又はこれらの任意の組み合わせを含む任意の適切な形態で実施されることができる。
なお、本明細書において、「有する」、「含む」などの用語は、挙げられたもの以外の他の要素又はステップの存在を除外せず、ある要素に先行する「a」又は「an」という語は、斯かる要素が複数存在することを除外するものではなく、いかなる参照符号も請求の範囲を制限せず、本発明は、ハードウェア及びソフトウェアの両方によって実施されることができ、いくつかの「手段」又は「ユニット」は、ハードウェア又はソフトウェアの同じアイテムによって表されることができ、プロセッサは、おそらくハードウェア要素と協同して、1つ以上のユニットの機能を実現することができる。さらに、本発明は実施の形態に限られず、本発明は上記で説明された又は相互に異なる従属請求項中に列挙される任意の新規な特徴又は特徴の組み合わせにもある。

Claims (15)

  1. ビデオ情報を処理するための装置であって、
    低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを含むビデオ情報を受信するための入力ユニット、並びに
    LDR表示モード及びHDR表示モードのいずれかである特定の表示モードにおける表示のために前記ビデオ・データを処理し、前記ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理することによって、表示信号を生成するためのビデオ・プロセッサ、
    を有し、
    前記入力ユニットは、前記ビデオ情報中に含まれるグラフィック処理制御データを受信するように構成され、前記グラフィック処理制御データは前記HDR表示モードにおいて前記グラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含み、
    前記ビデオ・プロセッサは、前記特定の表示モード及び前記HDR処理命令に依存して前記グラフィック・データをオーバレイするときの処理を適応させるように構成される、装置。
  2. 前記ビデオ情報が、前記オーバレイを生成するためのパラメータを定めるセグメントを有し、前記セグメントはそれぞれのセグメント・タイプを有し、前記セグメントは前記グラフィック処理制御データを構成するためのHDR処理定義タイプのHDR処理定義セグメントを有し、前記ビデオ・プロセッサは、前記HDR処理定義セグメントからの前記HDR処理命令によって処理を適応させるように用意される、請求項1に記載の装置。
  3. 前記グラフィック・データが、少なくとも1つのLDRカラー・パレットを定めるLDRパレット情報及び少なくとも1つのHDRカラー・パレットを定めるHDRパレット情報を有し、前記グラフィック処理制御データが、HDRパレットを選択するためのパレット選択命令を有し、前記ビデオ・プロセッサが、前記パレット選択命令に依存して前記HDR表示モードにおいて前記HDRカラー・パレットを選択するように用意される、請求項1に記載の装置。
  4. 前記グラフィック処理制御データが、LDR表示モードにおける透明度に対する透明度の低減を定める透明度命令を有し、前記ビデオ・プロセッサが、前記透明度命令に依存して前記HDR表示モードにおけるオーバレイ中の前記グラフィック・データの透明度を適応させるように用意されるか、あるいは、前記グラフィック処理制御データが、LDR表示モードにおける輝度に対する輝度の低減を定める輝度命令を有し、前記ビデオ・プロセッサが、前記輝度命令に依存して前記HDR表示モードにおけるオーバレイ中の前記グラフィック・データの輝度を定めるように用意される、請求項1に記載の装置。
  5. 前記グラフィック処理制御データが、前記特定の表示モードがHDR表示モードである間に前記ビデオ・データの処理をLDR表示モードに切り替えるべきかを定めるビデオ切り替え命令を有し、前記ビデオ・プロセッサが、前記ビデオ切り替え命令に依存して、前記特定の表示モードがHDR表示モードであるときに前記ビデオ・データにオーバレイする間前記ビデオ・データをLDR表示モードに切り替えるように用意されるか、あるいは、前記グラフィック処理制御データが、前記特定の表示モードがHDR表示モードである間HDRグラフィック・データのストリームを読み出すべきかを定めるグラフィック選択命令を有し、前記ビデオ・プロセッサが、前記グラフィック選択命令に依存して前記特定の表示モードがHDR表示モードであるときに前記ビデオ・データにオーバレイする間前記HDRグラフィック・データを用いるように用意される、請求項1に記載の装置。
  6. 前記グラフィック処理制御データが、
    前記HDR表示モードにおいてポップアップ・グラフィック・データをオーバレイするときのHDR処理命令を定めるポップアップ処理記述子、
    前記HDR表示モードにおいて字幕グラフィック・データをオーバレイするときのHDR処理命令を定める字幕処理記述子、
    のうちの少なくとも1つを有する、請求項1に記載の装置。
  7. 前記ビデオ・プロセッサが、
    前記表示信号を受信するために接続される表示装置から取得される表示能力情報、
    前記表示信号を受信するために接続される表示装置から受信される表示モード情報、
    前記ビデオ情報のダイナミックレンジを示す、前記ビデオ情報に含まれるダイナミックレンジ情報、
    ユーザ設定に基づく表示モード・プリファランス、
    のうちの少なくとも1つに依存して、前記特定の表示モードを設定するように用意される、請求項1に記載の装置。
  8. LDR表示モード及びHDR表示モードのいずれかである前記特定の表示モードにおいて前記表示信号を表示するための表示ユニット、
    光学記録担体から前記ビデオ情報を読み出すための前記入力ユニットに含まれる光学記録担体ユニット、
    のうちの少なくとも1つを有する、請求項1に記載の装置。
  9. ビデオ処理装置にビデオ情報を転送するためのビデオ信号を表す光学的に読み取り可能なマークのトラックを有する光学記録担体であって、
    前記ビデオ情報は、低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを有し、
    前記ビデオ処理装置は、LDR表示モード及びHDR表示モードのいずれかである特定の表示モードにおける表示のために前記ビデオ・データを処理し、前記ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理することにより、表示信号を生成するように用意され、
    前記ビデオ信号は、前記ビデオ情報中に含まれるグラフィック処理制御データを有し、前記グラフィック処理制御データは、前記特定の表示モード及びHDR処理命令に依存して前記グラフィック・データをオーバレイするときの処理を適応させるための、前記HDR表示モードにおいて前記グラフィック・データをオーバレイするための少なくとも1つの前記HDR処理命令を含む、光学記録担体
  10. 前記ビデオ情報が、前記オーバレイを生成するためのパラメータを定めるセグメントを有し、前記セグメントはそれぞれのセグメント・タイプを有し、前記セグメントは前記グラフィック処理制御データを構成するためのHDR処理定義タイプのHDR処理定義セグメントを有する、請求項9に記載の光学記録担体
  11. 前記HDR処理定義セグメントが、プレゼンテーション・グラフィック・ストリーム及び/又はインタラクティブ・グラフィック・ストリームに含まれる、請求項10に記載の光学記録担体
  12. 低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを有するビデオ情報をビデオ処理装置に転送するための出力ユニットを有するビデオ情報を生成する装置であって、前記ビデオ処理装置は、LDR表示モード及びHDR表示モードのいずれかである特定の表示モードにおける表示のために前記ビデオ・データを処理し、前記ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理することによって、表示信号を生成するように用意され、
    当該装置は、グラフィック処理制御データを含む前記ビデオ情報を生成するためのビデオ・プロセッサを有し、前記グラフィック処理制御データは、前記ビデオ処理装置において、前記特定の表示モード及びHDR処理命令に依存して、前記グラフィック・データをオーバレイするときの処理を適応させるための、前記HDR表示モードにおいて前記グラフィック・データをオーバレイするための少なくとも1つの前記HDR処理命令を含む、装置。
  13. 低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを有するビデオ情報を処理する方法であって、
    ビデオ・プロセッサが、
    LDR表示モード及びHDR表示モードのいずれかである特定の表示モードにおける表示のために前記ビデオ・データを処理し、
    前記ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理し、
    当該方法はさらに、
    入力ユニットが、
    前記HDR表示モードにおいて前記グラフィック・データをオーバレイするための少なくとも1つのHDR処理命令を含む、前記ビデオ情報に含まれるグラフィック処理制御データを受信し、
    前記ビデオ・プロセッサが、
    前記特定の表示モード及び前記HDR処理命令に依存して前記グラフィック・データをオーバレイするときの処理を適応させる、方法。
  14. ビデオ処理装置に転送するためのビデオ情報を生成する方法であって、前記ビデオ情報は低ダイナミックレンジ[LDR]ビデオ・データ及び/又は高ダイナミックレンジ[HDR]ビデオ・データを有し、
    前記ビデオ処理装置は、LDR表示モード及びHDR表示モードのいずれかである特定の表示モードにおける表示のために前記ビデオ・データを処理し、前記ビデオ・データにオーバレイするためのオーバレイを生成するためにグラフィック・データを処理することにより、表示信号を生成するように用意され、
    当該方法は、
    ビデオ・プロセッサが、
    グラフィック処理制御データを生成し、前記グラフィック処理制御データは、前記ビデオ処理装置において、前記特定の表示モード及びHDR処理命令に依存して前記グラフィック・データをオーバレイするときの処理を適応させるための、前記HDR表示モードにおいて前記グラフィック・データをオーバレイするための少なくとも1つの前記HDR処理命令を含み、
    当該方法はさらに、
    前記ビデオ・プロセッサが、
    前記ビデオ情報に前記グラフィック処理制御データを含める、方法。
  15. プロセッサに請求項13又は請求項14に記載の方法を実行させる、ビデオ情報を処理するためのコンピュータ・プログラム。
JP2014515315A 2011-06-14 2012-06-07 高ダイナミックレンジ・ビデオのためのグラフィック処理 Active JP6053767B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP11169746 2011-06-14
EP11169746.2 2011-06-14
PCT/IB2012/052873 WO2012172460A1 (en) 2011-06-14 2012-06-07 Graphics processing for high dynamic range video

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2016230980A Division JP6279694B2 (ja) 2011-06-14 2016-11-29 高ダイナミックレンジ・ビデオのためのグラフィック処理

Publications (2)

Publication Number Publication Date
JP2014528182A JP2014528182A (ja) 2014-10-23
JP6053767B2 true JP6053767B2 (ja) 2016-12-27

Family

ID=46397346

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2014515315A Active JP6053767B2 (ja) 2011-06-14 2012-06-07 高ダイナミックレンジ・ビデオのためのグラフィック処理
JP2016230980A Active JP6279694B2 (ja) 2011-06-14 2016-11-29 高ダイナミックレンジ・ビデオのためのグラフィック処理

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2016230980A Active JP6279694B2 (ja) 2011-06-14 2016-11-29 高ダイナミックレンジ・ビデオのためのグラフィック処理

Country Status (10)

Country Link
US (1) US9443495B2 (ja)
EP (1) EP2721811B1 (ja)
JP (2) JP6053767B2 (ja)
CN (1) CN103597812B (ja)
BR (1) BR112013031870B1 (ja)
ES (1) ES2774219T3 (ja)
MX (1) MX340266B (ja)
PL (1) PL2721811T3 (ja)
RU (1) RU2605435C2 (ja)
WO (1) WO2012172460A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10547821B2 (en) 2015-01-23 2020-01-28 Sony Corporation Reproduction apparatus and information processing method
US10554944B2 (en) 2015-01-09 2020-02-04 Sony Corporation Playing apparatus, playing method, information processing apparatus, and information processing method

Families Citing this family (89)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105009567B (zh) * 2013-02-21 2018-06-08 杜比实验室特许公司 用于合成叠加图形的外观映射的系统和方法
US10055866B2 (en) 2013-02-21 2018-08-21 Dolby Laboratories Licensing Corporation Systems and methods for appearance mapping for compositing overlay graphics
JP2015005878A (ja) * 2013-06-20 2015-01-08 ソニー株式会社 再生装置、再生方法、および記録媒体
CN110867198B (zh) 2013-06-20 2022-02-25 索尼公司 显示装置
TWI684364B (zh) * 2013-06-21 2020-02-01 日商新力股份有限公司 送訊裝置、高動態範圍影像資料送訊方法、收訊裝置、高動態範圍影像資料收訊方法及程式
JP2015008360A (ja) * 2013-06-24 2015-01-15 ソニー株式会社 再生装置、再生方法、および記録媒体
JP2015008361A (ja) * 2013-06-24 2015-01-15 ソニー株式会社 再生装置、再生方法、および記録媒体
CN105324988B (zh) * 2013-06-24 2019-12-06 索尼公司 再现装置、再现方法以及记录介质
JP6528683B2 (ja) * 2013-07-12 2019-06-12 ソニー株式会社 再生装置、再生方法
CN105409225B (zh) * 2013-07-19 2019-09-17 皇家飞利浦有限公司 Hdr元数据传输
KR20150025214A (ko) * 2013-08-28 2015-03-10 삼성전자주식회사 동영상에 비주얼 객체를 중첩 표시하는 방법, 저장 매체 및 전자 장치
WO2015066214A1 (en) * 2013-11-04 2015-05-07 Dolby Laboratories Licensing Corporation Single and multi-modulator projector systems with global dimming
JP6381215B2 (ja) * 2014-01-29 2018-08-29 キヤノン株式会社 画像処理装置、画像処理方法、表示装置、表示装置の制御方法、及び、プログラム
US9584786B2 (en) * 2014-03-05 2017-02-28 Dolby Laboratories Licensing Corporation Graphics blending for high dynamic range video
WO2015139176A1 (zh) * 2014-03-17 2015-09-24 富士通株式会社 基于调色板的编码装置、方法以及图像处理设备
JP6551401B2 (ja) * 2014-05-01 2019-07-31 ソニー株式会社 通信装置又は通信方法、並びにコンピューター・プログラム
RU2670599C9 (ru) * 2014-05-12 2018-11-22 Сони Корпорейшн Устройство связи, способ связи и компьютерная программа
WO2015174108A1 (ja) * 2014-05-15 2015-11-19 ソニー株式会社 通信装置及び通信方法、並びにコンピューター・プログラム
CN106416216B (zh) * 2014-05-16 2019-07-12 松下知识产权经营株式会社 变换方法及变换装置
JP5948619B2 (ja) * 2014-06-10 2016-07-06 パナソニックIpマネジメント株式会社 表示システム、表示方法および表示装置
MX363812B (es) * 2014-06-10 2019-04-04 Panasonic Ip Man Co Ltd Método de conversión y aparato de conversión.
JP6643669B2 (ja) * 2014-06-10 2020-02-12 パナソニックIpマネジメント株式会社 表示装置および表示方法
EP3570555B1 (en) * 2014-06-16 2023-10-18 Panasonic Intellectual Property Management Co., Ltd. Display method and display device using type information and hdmi and hdcp
WO2015198552A1 (ja) * 2014-06-25 2015-12-30 パナソニックIpマネジメント株式会社 コンテンツデータ生成方法、映像ストリーム伝送方法及び映像表示方法
CN110708439A (zh) * 2014-06-26 2020-01-17 松下知识产权经营株式会社 显示装置及数据输出方法
MX2019005231A (es) * 2014-06-27 2019-09-10 Panasonic Ip Man Co Ltd Dispositivo de salida de datos, metodo de salida de datos y metodo de generacion de datos.
EP3163894B1 (en) * 2014-06-27 2020-08-19 Panasonic Intellectual Property Management Co., Ltd. Data output device, data output method, and data generation method
MX2019008149A (es) * 2014-06-30 2019-09-05 Panasonic Ip Man Co Ltd Metodo de reproduccion de datos y dispositivo de reproduccion de datos.
JP6512458B2 (ja) * 2014-06-30 2019-05-15 パナソニックIpマネジメント株式会社 データ再生方法及び再生装置
WO2016027423A1 (ja) * 2014-08-19 2016-02-25 パナソニックIpマネジメント株式会社 伝送方法、再生方法及び再生装置
WO2016027426A1 (ja) * 2014-08-19 2016-02-25 パナソニックIpマネジメント株式会社 映像ストリーム生成方法、再生装置及び記録媒体
EP3193333B1 (en) * 2014-09-08 2020-12-23 Sony Corporation Information processing device, information recording medium, information processing method, and program
CN111212251B (zh) * 2014-09-10 2022-05-27 松下电器(美国)知识产权公司 再现装置以及再现方法
EP3196882A4 (en) * 2014-09-12 2018-05-16 Sony Corporation Information processing device, information processing method, program, and recording medium
JP2016062637A (ja) * 2014-09-12 2016-04-25 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 記録媒体、再生装置、および再生方法
EP3196880B1 (en) * 2014-09-12 2019-08-28 Sony Corporation Playback device, playback method, information processing device, information processing method, program, and recording medium
CN111933189B (zh) * 2014-09-12 2022-01-04 松下电器(美国)知识产权公司 再现装置以及再现方法
JP5995129B2 (ja) * 2014-09-22 2016-09-21 パナソニックIpマネジメント株式会社 再生方法および再生装置
JP2016081553A (ja) * 2014-10-17 2016-05-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 記録媒体、再生方法、および再生装置
TWI685837B (zh) 2014-10-23 2020-02-21 日商新力股份有限公司 資訊處理裝置、資訊處理方法、及程式產品、以及記錄媒體
JP2020022179A (ja) * 2014-11-04 2020-02-06 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 再生方法、プログラムおよび再生装置
EP3217656B1 (en) 2014-11-04 2021-03-03 Panasonic Intellectual Property Corporation of America Reproduction method, reproduction device, and program
WO2016074999A1 (en) 2014-11-10 2016-05-19 Koninklijke Philips N.V. Method for encoding, video processor, method for decoding, video decoder
JP2016100039A (ja) * 2014-11-17 2016-05-30 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 記録媒体、再生方法、および再生装置
WO2016079925A1 (ja) * 2014-11-17 2016-05-26 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 記録媒体、再生方法、および再生装置
TW201633779A (zh) * 2014-12-16 2016-09-16 湯姆生特許公司 將圖像之高動態範圍版本轉換至該圖像之標準動態範圍版本之方法及裝置
EP3240285B1 (en) 2014-12-22 2021-04-21 Sony Corporation Information processing device, information recording medium, information processing method, and program
JP6584916B2 (ja) * 2015-01-20 2019-10-02 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 再生制御方法、再生装置及び再生システム
CN107211169B (zh) * 2015-02-03 2020-11-20 索尼公司 发送装置、发送方法、接收装置以及接收方法
KR102295970B1 (ko) * 2015-02-06 2021-08-30 엘지전자 주식회사 영상표시장치,
EP3261339B1 (en) * 2015-02-16 2022-01-05 Sony Group Corporation Information processing device, information recording medium and information processing method, and program
US20180070083A1 (en) * 2015-03-24 2018-03-08 Sony Corporation Transmission device, transmission method, reception device, and reception method
WO2016158554A1 (ja) * 2015-04-03 2016-10-06 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
WO2017002541A1 (ja) * 2015-06-30 2017-01-05 ソニー株式会社 情報処理装置、情報処理システム、情報記録媒体、および情報処理方法、並びにプログラム
WO2017018333A1 (ja) * 2015-07-24 2017-02-02 シャープ株式会社 受信装置、表示制御方法、及びプログラム
JP6820507B2 (ja) * 2015-09-14 2021-01-27 パナソニックIpマネジメント株式会社 映像受信方法、映像送信方法、映像受信装置及び映像送信装置
EP3352467A4 (en) * 2015-09-18 2019-05-15 Sharp Kabushiki Kaisha RECEIVING DEVICE, RECEIVING METHOD AND PROGRAM
CN113660522A (zh) 2015-09-25 2021-11-16 麦克赛尔株式会社 接收装置
JP6441247B2 (ja) * 2015-10-01 2018-12-19 マクセル株式会社 表示制御方法
WO2017051808A1 (ja) 2015-09-25 2017-03-30 日立マクセル株式会社 放送受信装置
JP6616212B2 (ja) * 2015-09-28 2019-12-04 マクセル株式会社 表示制御方法
WO2017061071A1 (ja) * 2015-10-07 2017-04-13 パナソニックIpマネジメント株式会社 映像送信方法、映像受信方法、映像送信装置及び映像受信装置
JP6830190B2 (ja) * 2015-10-07 2021-02-17 パナソニックIpマネジメント株式会社 映像送信方法、映像受信方法、映像送信装置及び映像受信装置
JP6519441B2 (ja) 2015-10-22 2019-05-29 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
RU2728766C2 (ru) 2015-11-09 2020-07-31 Томсон Лайсенсинг Способ и устройство для адаптации видеоконтента, декодированного из элементарных потоков, под характеристики устройства отображения
JP6872098B2 (ja) * 2015-11-12 2021-05-19 ソニーグループ株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
CN105472255B (zh) * 2015-12-30 2019-02-26 深圳Tcl数字技术有限公司 视频播放控制方法及装置
WO2017127445A1 (en) * 2016-01-21 2017-07-27 Astral Images Corporation Processing image content for enabling high dynamic range (hdr) output thereof and computer-readable program product having such hdr content
JP2017169097A (ja) * 2016-03-17 2017-09-21 シャープ株式会社 受信装置、表示制御方法、及びプログラム
JP6700908B2 (ja) * 2016-03-30 2020-05-27 キヤノン株式会社 表示装置及び表示方法
WO2018070255A1 (ja) * 2016-10-11 2018-04-19 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
CN106686363B (zh) * 2016-11-01 2019-08-09 青岛海信电器股份有限公司 显示终端中的信号混合处理方法及装置
HUE060571T2 (hu) * 2016-11-22 2023-03-28 Saturn Licensing Llc Átviteli eszköz, átviteli eljárás, vevõkészülék és vételi eljárás
JP6957332B2 (ja) * 2017-01-17 2021-11-02 キヤノン株式会社 画像処理装置および画像処理方法
JP2018117281A (ja) * 2017-01-19 2018-07-26 日本放送協会 文字スーパー合成装置及びそのプログラム
JP2018180335A (ja) 2017-04-14 2018-11-15 シャープ株式会社 画像表示装置、外部機器、画像表示方法および画像表示システム
US10334141B2 (en) 2017-05-25 2019-06-25 Denso International America, Inc. Vehicle camera system
EP3654657B1 (en) * 2017-07-14 2021-11-24 Panasonic Intellectual Property Management Co., Ltd. Video display device and video display method
KR102523672B1 (ko) 2017-11-14 2023-04-20 삼성전자주식회사 디스플레이장치 및 그 제어방법과 기록매체
JP6625113B2 (ja) * 2017-12-27 2019-12-25 キヤノン株式会社 電子機器
CN116489454A (zh) * 2018-06-25 2023-07-25 华为技术有限公司 一种包含字幕的高动态范围视频处理的方法及装置
CN108924599A (zh) 2018-06-29 2018-11-30 北京优酷科技有限公司 视频字幕显示方法及装置
US10832389B2 (en) 2018-12-13 2020-11-10 Ati Technologies Ulc Method and system for improved visibility in blended layers for high dynamic range displays
JP6958645B2 (ja) * 2019-04-25 2021-11-02 ソニーグループ株式会社 送信装置、送信方法、受信装置および受信方法
WO2021076149A1 (en) * 2019-10-18 2021-04-22 Hewlett-Packard Development Company, L.P. Display mode setting determinations
JP7418233B2 (ja) * 2020-02-13 2024-01-19 キヤノン株式会社 表示装置、制御方法およびプログラム
CN111489705B (zh) * 2020-04-14 2023-05-09 深圳市隆利科技股份有限公司 图像分区显示的方法
KR20220000735A (ko) * 2020-06-26 2022-01-04 삼성전자주식회사 전자 장치 및 그 제어 방법
CN118138846A (zh) * 2024-05-08 2024-06-04 荣耀终端有限公司 字幕亮度调整方法及相关设备

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5309551A (en) * 1990-06-27 1994-05-03 Texas Instruments Incorporated Devices, systems and methods for palette pass-through mode
JP3164379B2 (ja) * 1990-06-27 2001-05-08 テキサス インスツルメンツ インコーポレイテツド パレット装置
JP4103192B2 (ja) * 1998-09-17 2008-06-18 ソニー株式会社 編集システム及び編集方法
JP4508330B2 (ja) * 1999-01-25 2010-07-21 キヤノン株式会社 表示装置
DE60027368T2 (de) 1999-08-27 2007-04-19 Sony Corp. Editierapparat und Editierverfahren
JP4348457B2 (ja) * 2002-03-13 2009-10-21 ドルビー ラボラトリーズ ライセンシング コーポレイション 高ダイナミックレンジのディスプレイ、ディスプレイコントローラ及び画像表示方法
JP4343111B2 (ja) * 2002-10-02 2009-10-14 エルジー エレクトロニクス インコーポレーテッド グラフィックデータの再生を管理するためのデータ構造を有する記録媒体、該記録媒体による記録・再生方法、およびその装置
JP3833653B2 (ja) * 2003-06-13 2006-10-18 シャープ株式会社 情報再生装置、情報再生装置の制御方法、コンテンツ記録媒体、制御プログラム、制御プログラムを記録したコンピュータ読み取り可能な記録媒体
CN101527863B (zh) 2003-06-30 2011-09-07 松下电器产业株式会社 再现装置、记录方法和再现方法
US7142723B2 (en) * 2003-07-18 2006-11-28 Microsoft Corporation System and process for generating high dynamic range images from multiple exposures of a moving scene
JP2005250235A (ja) * 2004-03-05 2005-09-15 Seiko Epson Corp 光変調装置、光学表示装置、光変調制御プログラム及び光学表示装置制御プログラム、並びに光変調制御方法及び光学表示装置制御方法
JP4029852B2 (ja) * 2004-03-23 2008-01-09 セイコーエプソン株式会社 光学表示装置、光学表示装置制御プログラム及び光学表示装置制御方法
US8218625B2 (en) * 2004-04-23 2012-07-10 Dolby Laboratories Licensing Corporation Encoding, decoding and representing high dynamic range images
US20050243176A1 (en) * 2004-04-30 2005-11-03 James Wu Method of HDR image processing and manipulation
JP3938774B2 (ja) * 2004-08-05 2007-06-27 オリンパス株式会社 内視鏡用信号処理装置、内視鏡用信号用モニタおよび内視鏡システム
CN100492152C (zh) * 2004-08-23 2009-05-27 英华达股份有限公司 将一高动态范围影像转换成一低动态范围影像的方法及其装置
US8050512B2 (en) 2004-11-16 2011-11-01 Sharp Laboratories Of America, Inc. High dynamic range images from low dynamic range images
JP4379408B2 (ja) * 2004-12-07 2009-12-09 セイコーエプソン株式会社 信号処理部および撮像装置
EP1713075B1 (en) 2005-01-28 2012-05-02 Panasonic Corporation Recording medium, reproduction device, program, reproduction method, recording method
JP2007206343A (ja) * 2006-02-01 2007-08-16 Seiko Epson Corp 光学表示装置及びその方法
US7986375B2 (en) 2006-08-17 2011-07-26 Koninklijke Philips Electronics N.V. Multi-view autostereoscopic display device having particular driving means and driving method
US8111941B2 (en) * 2006-11-22 2012-02-07 Nik Software, Inc. Method for dynamic range editing
CN101193202A (zh) * 2006-12-22 2008-06-04 陈珉 高动态范围图像在传统输出设备上的显示方法
JP4709784B2 (ja) * 2007-02-13 2011-06-22 オリンパス株式会社 内視鏡用信号処理装置
CN101082992A (zh) * 2007-07-06 2007-12-05 浙江大学 实时高动态范围图像的绘制和显示方法
US8233738B2 (en) * 2007-07-30 2012-07-31 Dolby Laboratories Licensing Corporation Enhancing dynamic ranges of images
KR20090098247A (ko) * 2008-03-13 2009-09-17 삼성전자주식회사 영상처리장치, 이를 포함하는 영상처리시스템 및 그제어방법
EP2144444B1 (en) 2008-07-10 2012-06-27 The University Of Warwick HDR video data compression devices and methods
EP2230839A1 (en) * 2009-03-17 2010-09-22 Koninklijke Philips Electronics N.V. Presentation of video content
JP5317825B2 (ja) * 2009-05-18 2013-10-16 キヤノン株式会社 画像処理装置及び画像処理方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10554944B2 (en) 2015-01-09 2020-02-04 Sony Corporation Playing apparatus, playing method, information processing apparatus, and information processing method
US10547821B2 (en) 2015-01-23 2020-01-28 Sony Corporation Reproduction apparatus and information processing method

Also Published As

Publication number Publication date
JP2017085587A (ja) 2017-05-18
US20140125696A1 (en) 2014-05-08
JP2014528182A (ja) 2014-10-23
MX2013014545A (es) 2014-02-19
US9443495B2 (en) 2016-09-13
EP2721811A1 (en) 2014-04-23
RU2605435C2 (ru) 2016-12-20
BR112013031870A2 (pt) 2016-12-13
CN103597812A (zh) 2014-02-19
CN103597812B (zh) 2017-11-21
WO2012172460A1 (en) 2012-12-20
JP6279694B2 (ja) 2018-02-14
RU2014100893A (ru) 2015-07-20
BR112013031870B1 (pt) 2022-05-10
MX340266B (es) 2016-07-04
PL2721811T3 (pl) 2020-06-01
ES2774219T3 (es) 2020-07-17
EP2721811B1 (en) 2019-12-25

Similar Documents

Publication Publication Date Title
JP6279694B2 (ja) 高ダイナミックレンジ・ビデオのためのグラフィック処理
JP6671022B2 (ja) 表示装置、表示方法及びコンピュータプログラム
CN111901599B (zh) 再现装置
JP6512458B2 (ja) データ再生方法及び再生装置
JP6566271B2 (ja) 伝送方法及び再生装置
JP5734282B2 (ja) ビデオデータ処理装置及び方法
WO2015198552A1 (ja) コンテンツデータ生成方法、映像ストリーム伝送方法及び映像表示方法
JP6928885B2 (ja) 表示装置、表示方法及びコンピュータプログラム
JP6731627B2 (ja) 再生装置で実行される方法、及び再生装置
JP2017139511A (ja) コンテンツデータ生成方法、映像ストリーム伝送方法及び映像表示方法
JP2021153299A (ja) 再生装置
JP6751893B2 (ja) 再生方法、再生装置、表示方法及び表示装置
WO2006018786A1 (en) Method of storing and transferring image signals

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150525

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160525

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161101

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161129

R150 Certificate of patent or registration of utility model

Ref document number: 6053767

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250