WO2018159125A1 - 画像処理装置及び画像処理方法 - Google Patents
画像処理装置及び画像処理方法 Download PDFInfo
- Publication number
- WO2018159125A1 WO2018159125A1 PCT/JP2018/001131 JP2018001131W WO2018159125A1 WO 2018159125 A1 WO2018159125 A1 WO 2018159125A1 JP 2018001131 W JP2018001131 W JP 2018001131W WO 2018159125 A1 WO2018159125 A1 WO 2018159125A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- color bar
- signal
- transfer function
- display device
- conversion
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/006—Electronic inspection or testing of displays and display drivers, e.g. of LED or LCD displays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/10—Intensity circuits
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/02—Diagnosis, testing or measuring for television systems or their details for colour television signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/04—Diagnosis, testing or measuring for television systems or their details for receivers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/67—Circuits for processing colour signals for matrixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
- H04N9/69—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits for modifying the colour signals by gamma correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0007—Image acquisition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/60—Memory management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/02—Improving the quality of display appearance
- G09G2320/0242—Compensation of deficiencies in the appearance of colours
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/02—Improving the quality of display appearance
- G09G2320/0271—Adjustment of the gradation levels within the range of the gradation scale, e.g. by redistribution or clipping
- G09G2320/0276—Adjustment of the gradation levels within the range of the gradation scale, e.g. by redistribution or clipping for the purpose of adaptation to the characteristics of a display device, i.e. gamma correction
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0606—Manual adjustment
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0673—Adjustment of display parameters for control of gamma adjustment, e.g. selecting another gamma curve
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0693—Calibration of display systems
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
- G09G2370/042—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller for monitor identification
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Hardware Design (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Processing Of Color Television Signals (AREA)
- Controls And Circuits For Display Device (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Image Processing (AREA)
Abstract
Description
なお、上記の効果は必ずしも限定的なものではなく、上記の効果と共に、又は上記の効果に代えて、本明細書に示されたいずれかの効果、又は本明細書から把握され得る他の効果が奏されてもよい。
1.関連技術の説明
1-1.SDR及びHDR
1-2.様々な特性定義手法
1-3.課題の説明
1-4.基本的な原理
2.第1の実施形態
2-1.システムの概要
2-2.撮像装置の第1の構成例
2-3.撮像装置の第2の構成例
3.第2の実施形態
3-1.システムの概要
3-2.信号変換装置の第1の構成例
3-3.信号変換装置の第2の構成例
4.ハードウェア構成例
5.総括
[1-1.SDR及びHDR]
近年、実世界の様子をより忠実に再現し又はより豊富な明るさ及び色彩で映像を表示することを可能とするための、映像信号表現の拡張が進められている。HDRは、従来の標準的なダイナミックレンジであるSDRよりも広い輝度ダイナミックレンジで画像又は映像を表現しようとする概念である。
一般に、撮像装置における光から画像信号への信号変換の特性は、OETF(Opto-Electronic Transfer Function;光電気伝達関数)でモデル化される。図3は、典型的なSDR用の信号フォーマットのOETF及びHDR用の信号フォーマットのOETFのそれぞれの例を示している。図3において、横軸は、変換前の光の輝度ダイナミックレンジを表し、100%が100nitの輝度に相当する。縦軸は、変換後の画像信号の符号値を表し、10bitの場合には符号値は0から1023までの値をとり得る。図中に破線で示したSDR用の信号フォーマットのOETFと実線で示したHDR用のOETFとを比較すると、特に符号値が相対的に大きい部分において伝達関数の傾きの違いが顕著である。これは、こうした部分において、HDRのケースではSDRと比較して画像情報がより高い圧縮比で圧縮されていること、即ち同程度の符号値がHDRのケースではSDRのケースよりも高い輝度を表すことを意味している。
このように映像信号の多様な表現手法が実用化され始めた昨今、コンテンツを制作し又は放送若しくは配信する事業者が、異なる特性を有する2つ以上のモニタを用いて同じ映像コンテンツの見え方を検証するケースが増加している。コンテンツの見え方を検証するユーザは、個々のモニタの特性上の個体差が検証作業に及ぼす影響を排除するために、通常、検証に先立ってカラーバーを用いてモニタの設定を調整し又は校正する。
図5は、本開示に係る技術の基本的な原理について説明するための説明図である。本開示に係る技術のいくつかの実施形態において、図5に示したようなマルチフォーマットカラーバー提供装置30が提供される。マルチフォーマットカラーバー提供装置30は、光と画像信号との間の変換に関する伝達関数であって、複数の伝達関数のうち表示装置において使用される伝達関数を判定し、判定した伝達関数に対応するカラーバー信号を当該表示装置へ出力する。図5の例では、マルチフォーマットカラーバー提供装置30は、信号源20から画像信号を取得する入力インタフェース32を備える。例えば、マルチフォーマットカラーバー提供装置30は、撮像装置又は撮像装置により具備される信号処理装置であってもよい。この場合、信号源20は、イメージセンサであり得る。代替的に、マルチフォーマットカラーバー提供装置30は、撮像装置と表示装置との間の伝送経路上に存在する信号変換装置であってもよい。この場合、信号源20は、撮像装置であり得る。マルチフォーマットカラーバー提供装置30は、それぞれ表示装置へ接続され得る1つ以上の出力インタフェース34a、34b、34cをさらに備える。
[2-1.システムの概要]
図7には、本開示に係る技術の第1の実施形態に係る画像処理システム100の構成の一例が示されている。画像処理システム100は、撮像装置110、及び1つ以上の表示装置40a、40b、40c、・・・を含む。撮像装置110は、前節で説明したマルチフォーマットカラーバー提供装置の一態様である。撮像装置110は、例えば、デジタルビデオカメラ、デジタルカムコーダ若しくはデジタルスチルカメラ、又は映像撮影機能を有する任意の種類の装置であってよい。撮像装置110は、1つ以上の出力インタフェース170を備え、出力インタフェース170の各々は1つの表示装置40へ接続され得る。表示装置40a、40b、40cは、互いに異なる伝達関数で入力画像信号を光へと変換するモニタであり得る。例えば、上述したように、表示装置40aはBT.1886に従ってSDR映像を表示し、表示装置40b及び表示装置40cはHDR映像を表示する。なお、これらダイナミックレンジ及び伝達関数の種類は説明のための例に過ぎず、他のダイナミックレンジ又は他の種類の伝達関数が各表示装置により使用されてもよい。
第1の構成例において、撮像装置110は、第1の伝達関数に対応する基準カラーバー信号を定義する第1のカラーバー情報に加えて、少なくとも第2の伝達関数に対応する他のカラーバー信号を定義する第2のカラーバー情報を予め記憶する。そして、撮像装置110は、ある出力インタフェースへ接続された表示装置により使用される伝達関数に対応するカラーバー信号を、予め記憶しているいずれかのカラーバー情報から生成して出力する。
図8は、撮像装置110の第1の構成例を示すブロック図である。図8を参照すると、撮像装置110は、イメージセンサ120、補正部122、制御部130、1つ以上の信号処理ブランチ140(140a、140b、…)及び1つ以上の出力インタフェース170(170a、170b、…)を備える。各信号処理ブランチ140は、色変換部142(142a、142b、…)、信号変換部144(144a、144b、…)、選択部146(146a、146b、…)及びカラーバー信号生成部150(150a、150b、…)を含む。
a)各出力インタフェースに表示装置が接続されているか否か
b)表示装置が接続されている出力インタフェースの各々について、接続されている表示装置において使用される伝達関数
c)表示装置が接続されている出力インタフェースの各々について、接続されている表示装置において使用される色域
d)表示装置が接続されている出力インタフェースの各々についての出力モード(カメラモード又はカラーバーモード)
e)ユーザが表示することを望むカラーバーの種類
ユーザインタフェースは、撮像装置110の筐体に設けられる例えばタッチパネル、ボタン又はスイッチのような物理的な入力デバイスであってもよい。代替的に、ユーザインタフェースは、通信インタフェースを介して遠隔的に接続される装置上でGUI(Graphical User Interface)として提供されてもよい。また、制御部130は、表示装置40から出力インタフェース170を介して受信される制御情報に基づいて、上で列挙したうちの1つ以上の判定を行ってもよい。
図12は、図8に示した撮像装置における出力信号の選択について説明するための説明図である。図12を参照すると、図8と同様のブロック図に、1つのシナリオにおける信号の流れを示す矢印が重ねて示されている。実線の矢印は撮像画像信号又はカラーバー信号であり得る画像信号の流れを表し、破線の矢印は制御信号の流れを表す。本シナリオでは、出力インタフェース170aについてカメラモードが設定され、出力インタフェース170bについてカラーバーモードが設定されているものとする。また、出力インタフェース170bへ表示装置40bが接続されているものとする。制御部130は、信号処理ブランチ140aにおいて色変換部142a及び信号変換部144aをターンオンし、これら処理ブロックを通じて処理される撮像画像信号を選択部146aから出力インタフェース170aを介して出力させる。カラーバー信号生成部150aはターンオフされる。一方、制御部130は、信号処理ブランチ140bにおいてカラーバー信号生成部150bをターンオンし、表示装置40bにおいて使用される伝達関数に対応するカラーバー信号C2をカラーバー信号生成部150bに生成させ、カラーバー信号C2を選択部146bから出力インタフェース170bを介して出力させる。色変換部142b及び信号変換部144bはターンオフされる。
図13は、第1の構成例に係る撮像装置110により実行される画像処理の流れの一例を示すフローチャートである。本フローチャートには複数の処理ステップが記述されているが、これら処理ステップは、必ずしも示された通りの順序で実行されなくてもよい。いくつかの処理ステップは、並列的に実行されてもよい。また、追加的な処理ステップが採用されてもよく、一部の処理ステップが省略されてもよい
第2の構成例において、撮像装置110は、第1の伝達関数に対応するカラーバー信号を定義する第1のカラーバー情報を予め記憶する。第1の伝達関数に対応するカラーバー信号は、基準カラーバー信号である。第1のカラーバー情報を基準カラーバー情報という。そして、撮像装置110は、各出力インタフェース170へ接続されている表示装置40において使用されると判定される伝達関数に対応するカラーバー信号を、基準カラーバー情報から動的に生成する。
図14は、撮像装置110の第2の構成例を示すブロック図である。図14を参照すると、撮像装置110は、イメージセンサ120、補正部122、制御部135、1つ以上の信号処理ブランチ160(160a、160b、…)、1つ以上の出力インタフェース170(170a、170b、…)及び基準カラーバー信号生成部180を備える。各信号処理ブランチ160は、選択部162(162a、162b、…)、色変換部164(164a、164b、…)、逆OOTF変換部166(166a、166b、…)及びガンマ変換部168(168a、168b、…)を含む。
図16Aは、図14に示した撮像装置における出力信号の選択について説明するための第1の説明図である。図12に例示したシナリオとは異なり、ここでは、出力インタフェース170a及び出力インタフェース170bの双方についてカメラモードが設定されているものとする。制御部135は、信号処理ブランチ160aにおいて、選択部162aに撮像画像信号を選択させる。そして、制御部135は、信号処理ブランチ160a内の逆OOTF変換部166aを除く処理ブロックをターンオンし、これら処理ブロックを通じて処理される撮像画像信号を出力インタフェース170aを介して出力させる。制御部135は、同様に、信号処理ブランチ160bにおいて、選択部162bに撮像画像信号を選択させる。そして、制御部135は、信号処理ブランチ160b内の逆OOTF変換部166bを除く処理ブロックをターンオンし、これら処理ブロックを通じて処理される撮像画像信号を出力インタフェース170bを介して出力させる。出力インタフェース170a及び170bへそれぞれ接続されている表示装置の信号伝達特性が異なる場合、それらインタフェースから出力される撮像画像信号は、互いに異なる信号変換が適用された結果として、異なる信号値を有する。カラーバーモードが設定された出力インタフェース170が存在しない場合、基準カラーバー信号生成部180はターンオフされる。
図17は、第2の構成例に係る撮像装置110により実行される画像処理の流れの一例を示すフローチャートである。本フローチャートには複数の処理ステップが記述されているが、これら処理ステップは、必ずしも示された通りの順序で実行されなくてもよい。いくつかの処理ステップは、並列的に実行されてもよい。また、追加的な処理ステップが採用されてもよく、一部の処理ステップが省略されてもよい
[3-1.システムの概要]
図19には、本開示に係る技術の第2の実施形態に係る画像処理システム200の構成の一例が示されている。画像処理システム200は、撮像装置205、信号変換装置210及び1つ以上の表示装置40a、40b、40c、・・・を含む。撮像装置205は、映像コンテンツを表現する画像信号であるコンテンツ信号を信号変換装置210へ提供する信号源である。画像処理システム200は、信号源として、撮像装置205の代わりに、映像コンテンツを記憶しているデータサーバ、又はシステムの外部からコンテンツ信号を受信して中継する受信機などを含んでもよい。複数の信号源が信号変換装置210へ接続されてもよい。信号変換装置210は、上で説明したマルチフォーマットカラーバー提供装置の一態様である。信号変換装置210は、1つ以上の出力インタフェース270を備え、出力インタフェース270の各々は1つの表示装置40へ接続され得る。
第1の構成例において、信号変換装置210は、第1の伝達関数に対応する基準カラーバー信号を定義する第1のカラーバー情報に加えて、少なくとも第2の伝達関数に対応する他のカラーバー信号を定義する第2のカラーバー情報を予め記憶する。そして、信号変換装置210は、ある出力インタフェースへ接続された表示装置により使用される伝達関数に対応するカラーバー信号を、予め記憶しているいずれかのカラーバー情報から生成して出力する。
図20は、信号変換装置210の第1の構成例を示すブロック図である。図20を参照すると、信号変換装置210は、SDRデガンマ変換部222、制御部230、1つ以上の信号処理ブランチ240(240a、240b、…)及び1つ以上の出力インタフェース270(270a、270b、…)を備える。各信号処理ブランチ240は、色変換部242(242a、242b、…)、信号変換部244(244a、244b、…)、選択部246(246a、246b、…)及びカラーバー信号生成部250(250a、250b、…)を含む。
図21は、図20に示した信号変換装置における出力信号の選択について説明するための説明図である。図21を参照すると、図20と同様のブロック図に、1つのシナリオにおける信号の流れを示す矢印が重ねて示されている。実線の矢印はコンテンツ信号又はカラーバー信号であり得る画像信号の流れを表し、破線の矢印は制御信号の流れを表す。本シナリオでは、出力インタフェース270aについてカメラモードが設定され、出力インタフェース270bについてカラーバーモードが設定されているものとする。また、出力インタフェース270bへ表示装置40bが接続されているものとする。制御部230は、信号処理ブランチ240aにおいて色変換部242a及び信号変換部244aをターンオンし、これら処理ブロックを通じて処理されるコンテンツ信号を選択部246aから出力インタフェース270aを介して出力させる。カラーバー信号生成部250aはターンオフされる。一方、制御部230は、信号処理ブランチ240bにおいてカラーバー信号生成部250bをターンオンし、表示装置40bにおいて使用される伝達関数に対応するカラーバー信号C2をカラーバー信号生成部250bに生成させ、カラーバー信号C2を選択部246bから出力インタフェース270bを介して出力させる。色変換部242b及び信号変換部244bはターンオフされる。
図22は、第1の構成例に係る信号変換装置210により実行される画像処理の流れの一例を示すフローチャートである。本フローチャートには複数の処理ステップが記述されているが、これら処理ステップは、必ずしも示された通りの順序で実行されなくてもよい。いくつかの処理ステップは、並列的に実行されてもよい。また、追加的な処理ステップが採用されてもよく、一部の処理ステップが省略されてもよい
第2の構成例において、信号変換装置210は、第1の伝達関数に対応するカラーバー信号を定義する第1のカラーバー情報を予め記憶する。ここでの第1の伝達関数に対応するカラーバー信号は基準カラーバー信号であり、第1のカラーバー情報は基準カラーバー情報である。そして、信号変換装置210は、各出力インタフェース270へ接続されている表示装置40において使用されると判定される伝達関数に対応するカラーバー信号を、基準カラーバー情報から動的に生成する。
図23は、信号変換装置210の第2の構成例を示すブロック図である。図23を参照すると、信号変換装置210は、SDRデガンマ変換部222、制御部235、1つ以上の信号処理ブランチ260(260a、260b、…)、1つ以上の出力インタフェース270(270a、270b、…)、及び基準カラーバー信号生成部280を備える。各信号処理ブランチ260は、選択部262(262a、262b、…)、色変換部264(264a、264b、…)、逆OOTF変換部266(266a、266b、…)及びガンマ変換部268(268a、268b、…)を含む。
図24Aは、図23に示した信号変換装置における出力信号の選択について説明するための第1の説明図である。図21に例示したシナリオとは異なり、ここでは、出力インタフェース270a及び出力インタフェース270bの双方についてカメラモードが設定されているものとする。制御部235は、信号処理ブランチ260aにおいて、選択部262aにコンテンツ信号を選択させる。そして、制御部235は、信号処理ブランチ260a内の逆OOTF変換部266aを除く処理ブロックをターンオンし、これら処理ブロックを通じて処理されるコンテンツ信号を出力インタフェース270aを介して出力させる。制御部235は、同様に、信号処理ブランチ260bにおいて、選択部262bにコンテンツ信号を選択させる。そして、制御部235は、信号処理ブランチ260b内の逆OOTF変換部266bを除く処理ブロックをターンオンし、これら処理ブロックを通じて処理されるコンテンツ信号を出力インタフェース270bを介して出力させる。出力インタフェース270a及び270bへそれぞれ接続されている表示装置の信号伝達特性が異なる場合、それらインタフェースから出力されるコンテンツ信号は、互いに異なる信号変換が適用された結果として、異なる信号値を有する。カラーバーモードが設定された出力インタフェース270が存在しない場合、基準カラーバー信号生成部280はターンオフされる。
図25は、第2の構成例に係る信号変換装置210により実行される画像処理の流れの一例を示すフローチャートである。本フローチャートには複数の処理ステップが記述されているが、これら処理ステップは、必ずしも示された通りの順序で実行されなくてもよい。いくつかの処理ステップは、並列的に実行されてもよい。また、追加的な処理ステップが採用されてもよく、一部の処理ステップが省略されてもよい
前節までに説明した実施形態は、ソフトウェア、ハードウェア、及びソフトウェアとハードウェアとの組合せのいずれを用いて実現されてもよい。撮像装置110又は信号変換装置210がソフトウェアを使用する場合、ソフトウェアを構成するプログラムは、例えば、装置の内部又は外部に設けられる記憶媒体(非一時的な媒体:non-transitory media)に予め格納される。そして、各プログラムは、例えば、実行時にRAM(Random Access Memory)に読み込まれ、CPU(Central Processing Unit)などのプロセッサにより実行される。
ここまで、図1~図26を用いて本開示に係る技術のいくつかの実施形態について説明した。上述した実施形態によれば、光と画像信号との間の変換に関する伝達関数であって、複数の伝達関数のうち表示装置において使用される伝達関数に対応するカラーバー信号が画像処理装置において生成され、生成されたカラーバー信号が当該表示装置へ出力される。従って、複数の表示装置において使用される伝達関数が相違し、又は1つの表示装置において異なるタイミングで使用される伝達関数が相違する場合であっても、それら伝達関数の差異を吸収するように調整されたカラーバー信号をそれぞれの表示装置へ提供して、カラーバーの見え方を実質的に等価にすることができる。それにより、カラーバーを用いて表示装置の設定を適切に調整し又は校正することが可能となる。例えば、各表示装置へ提供されるカラーバー信号は、当該カラーバー信号に基づくカラーバーが表示装置において表示される際の輝度を基準カラーバーの輝度に一致させるように、表示装置の伝達関数に応じて基準カラーバー信号を変換することにより動的に生成され又は予め定義された信号であってよい。それにより、伝達関数の相違する複数の表示装置にわたって、又は伝達関数を切り換えることの可能な表示装置においてその切り替えに関わらず、定常的に基準カラーバーと同じ見え方でカラーバーを表示させることができる。
(1)
光と画像信号との間の変換に関する伝達関数であって、複数の伝達関数のうち表示装置において使用される伝達関数を判定する判定部と、
前記判定部により判定された伝達関数に対応するカラーバー信号を生成して、生成された前記カラーバー信号を前記表示装置へ出力する生成部と、
を備える画像処理装置。
(2)
前記画像処理装置は、第1の伝達関数に対応するカラーバー信号を定義する第1のカラーバー情報を記憶する記憶部、をさらに備え、
前記生成部は、前記第1のカラーバー情報から、前記判定された伝達関数に対応するカラーバー信号を生成する、
前記(1)に記載の画像処理装置。
(3)
前記生成部は、前記判定された伝達関数が第2の伝達関数である場合には、前記第1のカラーバー情報から生成されるカラーバー信号に前記第2の伝達関数に応じた信号変換を適用することにより、前記第2の伝達関数に対応するカラーバー信号を生成する、前記(2)に記載の画像処理装置。
(4)
前記第1の伝達関数に対応するカラーバー信号は、基準カラーバー信号であり、
前記第2の伝達関数に応じた前記信号変換は、前記カラーバー信号に基づくカラーバーが前記表示装置において表示される際の輝度を基準カラーバーの輝度に一致させるように、前記第2の伝達関数に応じて前記基準カラーバー信号を変換すること、を含む、
前記(3)に記載の画像処理装置。
(5)
前記第2の伝達関数に応じた前記信号変換は、前記第2の伝達関数に対応するガンマカーブに基づくガンマ変換を含む、前記(3)又は前記(4)に記載の画像処理装置。
(6)
前記生成部は、前記第1の伝達関数と共に使用される色域と、前記第2の伝達関数と共に使用される色域とが異なる場合には、前記カラーバー信号に色域変換をさらに適用することにより、前記第2の伝達関数に対応するカラーバー信号を生成する、前記(3)~(5)のいずれか1項に記載の画像処理装置。
(7)
前記画像処理装置は、第1の伝達関数に対応するカラーバー信号を定義する第1のカラーバー情報、及び第2の伝達関数に対応するカラーバー信号を定義する第2のカラーバー情報を記憶する記憶部、をさらに備え、
前記生成部は、前記判定された伝達関数が前記第1の伝達関数である場合には、前記第1のカラーバー情報から前記第1の伝達関数に対応するカラーバー信号を生成し、前記判定された伝達関数が前記第2の伝達関数である場合には、前記第2のカラーバー情報から前記第2の伝達関数に対応するカラーバー信号を生成する、
前記(1)に記載の画像処理装置。
(8)
前記第1のカラーバー情報は、基準カラーバーを表現する基準カラーバー信号を定義し、
前記第2のカラーバー情報は、前記第2の伝達関数に対応するカラーバー信号に基づくカラーバーが前記表示装置において表示される際の輝度を前記基準カラーバーの輝度に一致させるように前記第2の伝達関数に応じて前記基準カラーバー信号を変換することにより予め生成されたカラーバー信号を定義する、
前記(7)に記載の画像処理装置。
(9)
前記複数の伝達関数は、第1のダイナミックレンジに対応する第1の伝達関数と、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジに対応する第2の伝達関数とを含む、前記(1)~(8)のいずれか1項に記載の画像処理装置。
(10)
前記複数の伝達関数は、第1のガンマカーブを有する第1の伝達関数と、前記第1のガンマカーブとは異なる第2のガンマカーブを有する第2の伝達関数とを含む、前記(1)~(8)のいずれか1項に記載の画像処理装置。
(11)
前記判定部は、ユーザインタフェースを介して取得される入力情報に基づいて、前記表示装置において使用される伝達関数を判定する、前記(1)~(10)のいずれか1項に記載の画像処理装置。
(12)
前記判定部は、前記表示装置から受信される制御情報に基づいて、前記表示装置において使用される伝達関数を判定する、前記(1)~(10)のいずれか1項に記載の画像処理装置。
(13)
前記画像処理装置は、
第1の表示装置へ接続される第1の出力インタフェースと、
第2の表示装置へ接続される第2の出力インタフェースと、
をさらに備え、
前記判定部は、前記第1の表示装置及び前記第2の表示装置においてそれぞれ使用される伝達関数を判定し、
前記生成部は、前記第1の表示装置について判定された伝達関数に対応するカラーバー信号を前記第1の出力インタフェースを介して前記第1の表示装置へ出力し、前記第2の表示装置について判定された伝達関数に対応するカラーバー信号を前記第2の出力インタフェースを介して前記第2の表示装置へ出力する、
前記(1)~(12)のいずれか1項に記載の画像処理装置。
(14)
前記画像処理装置は、
撮像部と、
前記撮像部により生成される画像信号に信号変換を適用する信号処理部と、
をさらに備え、
前記生成部は、前記信号処理部における前記画像信号のための前記信号変換と共用される回路を用いて、前記カラーバー信号のための前記信号変換を実行する、
前記(3)~(6)のいずれか1項に記載の画像処理装置。
(15)
前記画像処理装置は、
信号源から画像信号を取得する入力インタフェースと、
前記画像信号又は前記カラーバー信号を選択的に前記表示装置へ出力する出力インタフェースと、
をさらに備える、前記(1)~(13)のいずれか1項に記載の画像処理装置。
(16)
画像処理装置において、光と画像信号との間の変換に関する伝達関数であって複数の伝達関数のうち表示装置において使用される伝達関数を判定することと、
判定された伝達関数に対応するカラーバー信号を生成することと、
生成された前記カラーバー信号を前記表示装置へ出力することと、
を含む画像処理方法。
20 信号源
30 マルチフォーマットカラーバー提供装置(画像処理装置)
40 表示装置
100,200 画像処理システム
110 撮像装置(画像処理装置)
120 イメージセンサ(撮像部)
130,135 制御部(判定部)
140,160 信号処理ブランチ(信号処理部)
150 カラーバー信号生成部
170 出力インタフェース
180 基準カラーバー信号生成部
210 信号変換装置(画像処理装置)
230,235 制御部(判定部)
240,260 信号処理ブランチ(信号処理部)
250 カラーバー信号生成部
270 出力インタフェース
280 基準カラーバー信号生成部
Claims (16)
- 光と画像信号との間の変換に関する伝達関数であって、複数の伝達関数のうち表示装置において使用される伝達関数を判定する判定部と、
前記判定部により判定された伝達関数に対応するカラーバー信号を生成して、生成された前記カラーバー信号を前記表示装置へ出力する生成部と、
を備える画像処理装置。 - 前記画像処理装置は、第1の伝達関数に対応するカラーバー信号を定義する第1のカラーバー情報を記憶する記憶部、をさらに備え、
前記生成部は、前記第1のカラーバー情報から、前記判定された伝達関数に対応するカラーバー信号を生成する、
請求項1に記載の画像処理装置。 - 前記生成部は、前記判定された伝達関数が第2の伝達関数である場合には、前記第1のカラーバー情報から生成されるカラーバー信号に前記第2の伝達関数に応じた信号変換を適用することにより、前記第2の伝達関数に対応するカラーバー信号を生成する、請求項2に記載の画像処理装置。
- 前記第1の伝達関数に対応するカラーバー信号は、基準カラーバー信号であり、
前記第2の伝達関数に応じた前記信号変換は、前記カラーバー信号に基づくカラーバーが前記表示装置において表示される際の輝度を基準カラーバーの輝度に一致させるように、前記第2の伝達関数に応じて前記基準カラーバー信号を変換すること、を含む、
請求項3に記載の画像処理装置。 - 前記第2の伝達関数に応じた前記信号変換は、前記第2の伝達関数に対応するガンマカーブに基づくガンマ変換を含む、請求項3に記載の画像処理装置。
- 前記生成部は、前記第1の伝達関数と共に使用される色域と、前記第2の伝達関数と共に使用される色域とが異なる場合には、前記カラーバー信号に色域変換をさらに適用することにより、前記第2の伝達関数に対応するカラーバー信号を生成する、請求項3に記載の画像処理装置。
- 前記画像処理装置は、第1の伝達関数に対応するカラーバー信号を定義する第1のカラーバー情報、及び第2の伝達関数に対応するカラーバー信号を定義する第2のカラーバー情報を記憶する記憶部、をさらに備え、
前記生成部は、前記判定された伝達関数が前記第1の伝達関数である場合には、前記第1のカラーバー情報から前記第1の伝達関数に対応するカラーバー信号を生成し、前記判定された伝達関数が前記第2の伝達関数である場合には、前記第2のカラーバー情報から前記第2の伝達関数に対応するカラーバー信号を生成する、
請求項1に記載の画像処理装置。 - 前記第1のカラーバー情報は、基準カラーバーを表現する基準カラーバー信号を定義し、
前記第2のカラーバー情報は、前記第2の伝達関数に対応するカラーバー信号に基づくカラーバーが前記表示装置において表示される際の輝度を前記基準カラーバーの輝度に一致させるように前記第2の伝達関数に応じて前記基準カラーバー信号を変換することにより予め生成されたカラーバー信号を定義する、
請求項7に記載の画像処理装置。 - 前記複数の伝達関数は、第1のダイナミックレンジに対応する第1の伝達関数と、前記第1のダイナミックレンジよりも広い第2のダイナミックレンジに対応する第2の伝達関数とを含む、請求項1に記載の画像処理装置。
- 前記複数の伝達関数は、第1のガンマカーブを有する第1の伝達関数と、前記第1のガンマカーブとは異なる第2のガンマカーブを有する第2の伝達関数とを含む、請求項1に記載の画像処理装置。
- 前記判定部は、ユーザインタフェースを介して取得される入力情報に基づいて、前記表示装置において使用される伝達関数を判定する、請求項1に記載の画像処理装置。
- 前記判定部は、前記表示装置から受信される制御情報に基づいて、前記表示装置において使用される伝達関数を判定する、請求項1に記載の画像処理装置。
- 前記画像処理装置は、
第1の表示装置へ接続される第1の出力インタフェースと、
第2の表示装置へ接続される第2の出力インタフェースと、
をさらに備え、
前記判定部は、前記第1の表示装置及び前記第2の表示装置においてそれぞれ使用される伝達関数を判定し、
前記生成部は、前記第1の表示装置について判定された伝達関数に対応するカラーバー信号を前記第1の出力インタフェースを介して前記第1の表示装置へ出力し、前記第2の表示装置について判定された伝達関数に対応するカラーバー信号を前記第2の出力インタフェースを介して前記第2の表示装置へ出力する、
請求項1に記載の画像処理装置。 - 前記画像処理装置は、
撮像部と、
前記撮像部により生成される画像信号に信号変換を適用する信号処理部と、
をさらに備え、
前記生成部は、前記信号処理部における前記画像信号のための前記信号変換と共用される回路を用いて、前記カラーバー信号のための前記信号変換を実行する、
請求項3に記載の画像処理装置。 - 前記画像処理装置は、
信号源から画像信号を取得する入力インタフェースと、
前記画像信号又は前記カラーバー信号を選択的に前記表示装置へ出力する出力インタフェースと、
をさらに備える、請求項1に記載の画像処理装置。 - 画像処理装置において、光と画像信号との間の変換に関する伝達関数であって複数の伝達関数のうち表示装置において使用される伝達関数を判定することと、
判定された伝達関数に対応するカラーバー信号を生成することと、
生成された前記カラーバー信号を前記表示装置へ出力することと、
を含む画像処理方法。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019502496A JP7143838B2 (ja) | 2017-02-28 | 2018-01-17 | 画像処理装置及び画像処理方法 |
EP18761298.1A EP3591968A4 (en) | 2017-02-28 | 2018-01-17 | IMAGE PROCESSING DEVICE AND METHOD |
KR1020197024556A KR20190118585A (ko) | 2017-02-28 | 2018-01-17 | 화상 처리 장치 및 화상 처리 방법 |
US16/480,919 US11100682B2 (en) | 2017-02-28 | 2018-01-17 | Image processing device and image processing method |
CN201880012997.9A CN110337808B (zh) | 2017-02-28 | 2018-01-17 | 图像处理装置和图像处理方法 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017036949 | 2017-02-28 | ||
JP2017-036949 | 2017-02-28 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2018159125A1 true WO2018159125A1 (ja) | 2018-09-07 |
Family
ID=63370378
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2018/001131 WO2018159125A1 (ja) | 2017-02-28 | 2018-01-17 | 画像処理装置及び画像処理方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11100682B2 (ja) |
EP (1) | EP3591968A4 (ja) |
JP (1) | JP7143838B2 (ja) |
KR (1) | KR20190118585A (ja) |
CN (1) | CN110337808B (ja) |
WO (1) | WO2018159125A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7332325B2 (ja) | 2019-04-15 | 2023-08-23 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、及びプログラム |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10755392B2 (en) * | 2017-07-13 | 2020-08-25 | Mediatek Inc. | High-dynamic-range video tone mapping |
WO2020227534A1 (en) | 2019-05-07 | 2020-11-12 | Precision Biosciences, Inc. | Optimization of engineered meganucleases for recognition sequences |
JP2021153236A (ja) * | 2020-03-24 | 2021-09-30 | キヤノン株式会社 | 表示装置および表示方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015025726A1 (ja) * | 2013-08-20 | 2015-02-26 | ソニー株式会社 | 再生装置、再生方法、および記録媒体 |
WO2015190044A1 (ja) * | 2014-06-10 | 2015-12-17 | パナソニックIpマネジメント株式会社 | 表示システム、表示方法および表示装置 |
JP2016082388A (ja) | 2014-10-16 | 2016-05-16 | 日本放送協会 | カラーバー生成装置および信号変換装置 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7643675B2 (en) * | 2003-08-01 | 2010-01-05 | Microsoft Corporation | Strategies for processing image information using a color information data structure |
WO2010039440A1 (en) * | 2008-09-30 | 2010-04-08 | Dolby Laboratories Licensing Corporation | Systems and methods for applying adaptive gamma in image processing for high brightness and high dynamic range displays |
US9330606B2 (en) * | 2012-06-08 | 2016-05-03 | Apple Inc. | Electronic device with display brightness control |
CN106031172B (zh) * | 2014-02-25 | 2019-08-20 | 苹果公司 | 用于视频编码和解码的自适应传递函数 |
US20150249848A1 (en) * | 2014-02-28 | 2015-09-03 | Apple Inc. | Intelligent Video Quality Adjustment |
DE102014016643A1 (de) * | 2014-11-11 | 2016-05-12 | Novomatic Ag | Anzeigevorrichtung und Verfahren zum Betreiben einer solchen Anzeigevorrichtung |
JP6502677B2 (ja) | 2015-01-16 | 2019-04-17 | 日本放送協会 | 基準信号パターン及び基準信号発生装置 |
-
2018
- 2018-01-17 CN CN201880012997.9A patent/CN110337808B/zh active Active
- 2018-01-17 KR KR1020197024556A patent/KR20190118585A/ko not_active Application Discontinuation
- 2018-01-17 EP EP18761298.1A patent/EP3591968A4/en not_active Ceased
- 2018-01-17 WO PCT/JP2018/001131 patent/WO2018159125A1/ja unknown
- 2018-01-17 US US16/480,919 patent/US11100682B2/en active Active
- 2018-01-17 JP JP2019502496A patent/JP7143838B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015025726A1 (ja) * | 2013-08-20 | 2015-02-26 | ソニー株式会社 | 再生装置、再生方法、および記録媒体 |
WO2015190044A1 (ja) * | 2014-06-10 | 2015-12-17 | パナソニックIpマネジメント株式会社 | 表示システム、表示方法および表示装置 |
JP2016082388A (ja) | 2014-10-16 | 2016-05-16 | 日本放送協会 | カラーバー生成装置および信号変換装置 |
Non-Patent Citations (4)
Title |
---|
"Image parameter values for high dynamic range television for use in production and international programme exchange", RECOMMENDATION ITU-R BT.2100-0, July 2016 (2016-07-01) |
"MULTIFORMAT COLOR BAR", ARIB STD-B28, 14 December 2000 (2000-12-14) |
"SMPTE RECOMMENDED PRACTICE Ultra High-Definition, 2048 x 1080 and 4096 x 2160 Compatible Color Bar Signal", SMPTE RP 219-2: 2016, 16 September 2016 (2016-09-16) |
See also references of EP3591968A4 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7332325B2 (ja) | 2019-04-15 | 2023-08-23 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
EP3591968A1 (en) | 2020-01-08 |
KR20190118585A (ko) | 2019-10-18 |
JPWO2018159125A1 (ja) | 2020-01-09 |
US20200013198A1 (en) | 2020-01-09 |
JP7143838B2 (ja) | 2022-09-29 |
CN110337808A (zh) | 2019-10-15 |
US11100682B2 (en) | 2021-08-24 |
EP3591968A4 (en) | 2020-01-22 |
CN110337808B (zh) | 2021-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7065376B2 (ja) | 表示装置、変換装置、表示方法、および、コンピュータプログラム | |
TWI734978B (zh) | 用於執行高動態範圍視訊的色調映射的方法及裝置 | |
WO2018159125A1 (ja) | 画像処理装置及び画像処理方法 | |
JP6663214B2 (ja) | 表示方法および表示装置 | |
TWI631505B (zh) | 應用於播放裝置的影像處理方法及相關的電路 | |
US10832636B2 (en) | Image processing apparatus, image processing method, and program | |
KR20070111389A (ko) | 화상 보정 회로, 화상 보정 방법, 및 화상 디스플레이 | |
US8139079B2 (en) | Color gamut component analysis apparatus, method of analyzing color gamut component, and color gamut component analysis program | |
US10726315B2 (en) | Image processing device, image processing method, and program | |
JP4930781B2 (ja) | 画像補正回路、画像補正方法および画像表示装置 | |
US20060082686A1 (en) | Method and device for independent color management | |
JP5904754B2 (ja) | 情報処理システム、情報処理装置、それらの制御方法、およびプログラム | |
WO2016181584A1 (ja) | 表示方法および表示装置 | |
JP2002132225A (ja) | 映像信号補正装置およびそれを用いたマルチメディア計算機システム | |
JP2015170905A (ja) | 画像処理装置及び画像処理方法、並びに画像表示装置 | |
JP2006086728A (ja) | 画像出力装置 | |
US8792712B2 (en) | Method for correcting color and apparatus using the same | |
JP5012195B2 (ja) | 画像補正回路、画像補正方法および画像表示装置 | |
US20140375675A1 (en) | Image output apparatus and display device | |
US11749232B2 (en) | Image generation apparatus and image generation method | |
KR100771618B1 (ko) | 색 조정 장치 및 방법 | |
KR100561720B1 (ko) | 화면 분할 시리얼 전송 방식을 이용한 화면 표시 시스템및 표시 방법 | |
JP2018207282A (ja) | 表示制御装置、表示装置及び表示制御方法 | |
KR101047535B1 (ko) | 카메라 신호 처리 칩 및 화질 개선 방법 | |
JP2004135009A (ja) | オンスクリーンディスプレイ装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 18761298 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2019502496 Country of ref document: JP Kind code of ref document: A |
|
ENP | Entry into the national phase |
Ref document number: 20197024556 Country of ref document: KR Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
ENP | Entry into the national phase |
Ref document number: 2018761298 Country of ref document: EP Effective date: 20190930 |