JP6257319B2 - Imaging apparatus and image processing apparatus - Google Patents
Imaging apparatus and image processing apparatus Download PDFInfo
- Publication number
- JP6257319B2 JP6257319B2 JP2013269407A JP2013269407A JP6257319B2 JP 6257319 B2 JP6257319 B2 JP 6257319B2 JP 2013269407 A JP2013269407 A JP 2013269407A JP 2013269407 A JP2013269407 A JP 2013269407A JP 6257319 B2 JP6257319 B2 JP 6257319B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- image signal
- gamma characteristic
- parameter
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、撮像装置および画像処理装置に関し、特に、撮像された画像に対して画像処理を行うために用いて好適なものである。 The present invention relates to an imaging apparatus and an image processing apparatus, and is particularly suitable for use in performing image processing on a captured image.
従来から、人物等の被写体を撮像して動画像として記録するデジタルカメラ等の撮像装置が存在する。また、デジタルシネマ等の制作現場においては、カット編集と共に、撮影した画像を所望の見た目に補正するカラーグレーディング処理を施すことが一般的である。このカラーグレーディング処理は、撮影後に、編集スタジオ等においてカラーグレーディング装置を用いて行われる。その一方で、撮影現場において、撮影時に大まかな仮カラーグレーディング（オンセットグレーディング）を行っておき、微調整である本カラーグレーディングを撮影後に行うワークフローも用いられている。このように撮影時に撮影現場で仮カラーグレーディングをしておくことで、最終的な仕上がりの印象を撮影時に把握すると共に、撮影後に行う本カラーグレーディングの負荷を減らすことができる。 2. Description of the Related Art Conventionally, there are imaging devices such as digital cameras that capture a subject such as a person and record it as a moving image. Also, in production sites such as digital cinema, it is common to perform color grading processing that corrects a photographed image to a desired appearance together with cut editing. This color grading process is performed using a color grading apparatus in an editing studio or the like after shooting. On the other hand, a workflow in which rough provisional color grading (onset grading) is performed at the time of shooting at the shooting site and the main color grading, which is a fine adjustment, is performed after shooting is also used. As described above, provisional color grading is performed at the shooting site at the time of shooting, so that an impression of the final finish can be grasped at the time of shooting and the load of the actual color grading performed after shooting can be reduced.
撮影時に仮カラーグレーディングを行う場合、デジタルカメラは、画像を記録すると共に、３Ｇ−ＳＤＩ、ＨＤ−ＳＤＩケーブル等を通じて外部のカラーグレーディング装置に対して画像を出力する。カラーグレーディング装置は、入力した画像に対してカラーグレーディング処理を施し、カラーグレーディングのパラメータを記録しておく。また、撮影時に仮カラーグレーディングをカメラ内で行う画像処理装置が開示されている（特許文献１を参照）。 When temporary color grading is performed at the time of shooting, the digital camera records an image and outputs the image to an external color grading apparatus through a 3G-SDI, HD-SDI cable, or the like. The color grading apparatus performs color grading processing on the input image, and records color grading parameters. In addition, an image processing apparatus that performs provisional color grading in a camera at the time of photographing is disclosed (see Patent Document 1).
前述の従来技術によれば、撮影時に仮カラーグレーディングのパラメータを撮影画像に付加する。撮影後の本カラーグレーディング工程においては、撮影時に撮影画像に対して付加しておいた仮カラーグレーディングのパラメータに基づく処理を施すことで、撮影時の仮カラーグレーディングの結果を再現する。ユーザは、仮カラーグレーディング後の画像に対して微調整（本カラーグレーディング）を行う。これにより、前述のとおり、撮影後の本カラーグレーディング作業の負荷を低減させることができる。 According to the above-described prior art, provisional color grading parameters are added to a captured image at the time of shooting. In the final color grading process after shooting, the result of the temporary color grading at the time of shooting is reproduced by performing processing based on the parameters of the temporary color grading added to the shot image at the time of shooting. The user performs fine adjustment (main color grading) on the image after provisional color grading. Thereby, as described above, it is possible to reduce the load of the main color grading work after photographing.
しかしながら、仮カラーグレーディング装置と本カラーグレーディング装置とで、想定される入力画像信号のガンマ特性が異なる場合がある。この場合、仮カラーグレーディング装置で行った仮カラーグレーディング処理を、本カラーグレーディング処理で再現できないということがあり得る。
そこで、本発明は、画像処理装置で行われた画像処理の内容を、別の画像処理装置で再現できるようにすることを目的とする。
However, the assumed gamma characteristics of the input image signal may be different between the provisional color grading apparatus and the present color grading apparatus. In this case, the provisional color grading process performed by the provisional color grading apparatus may not be reproduced by this color grading process.
Therefore, an object of the present invention is to enable the content of image processing performed by an image processing device to be reproduced by another image processing device.
本発明の撮像装置は、撮像手段と、外部の画像処理装置で画像処理を行った際に使用されたパラメータを、前記外部の画像処理装置から取得するパラメータ取得手段と、前記撮像手段で撮像された画像信号と、前記パラメータ取得手段により取得されたパラメータと、前記撮像手段により撮像された画像信号のガンマ特性および色空間の少なくとも何れか一方とを相互に関連付けて記憶する記憶手段と、を有することを特徴とする。
本発明の画像処理装置は、画像信号を入力する入力手段と、外部の画像処理装置で画像信号に対する画像処理を行った際に使用されたパラメータを取得するパラメータ取得手段と、前記パラメータに関連付けられたガンマ特性および色空間の少なくとも何れか一方を取得するガンマ特性取得手段と、前記ガンマ特性取得手段により取得されたガンマ特性および色空間の少なくとも何れか一方に従って、前記画像信号のガンマ特性および色空間の少なくとも何れか一方を変更する変更手段と、前記パラメータ取得手段により取得されたパラメータを用いて、前記ガンマ特性および色空間の少なくとも何れか一方が変更された画像信号に対して、前記画像処理を行う画像処理手段と、を有することを特徴とする。
The image pickup apparatus of the present invention is picked up by an image pickup means, a parameter acquisition means for acquiring parameters used when image processing is performed by an external image processing apparatus from the external image processing apparatus, and the image pickup means. Storage means for storing the image signal, the parameter acquired by the parameter acquisition means, and at least one of the gamma characteristic and the color space of the image signal captured by the imaging means in association with each other. It is characterized by that.
Image processing equipment of the present invention comprises input means for inputting an image signal, a parameter acquisition unit that acquires parameters used when performing image processing for the image signal in an external image processing apparatus, associated with said parameter a gamma characteristic acquisition means for acquiring at least one of gamma characteristics and color space defined, the following at least one of the acquired gamma characteristic and color space gamma characteristic acquisition unit, a gamma characteristic and color of the image signal The image processing is performed on an image signal in which at least one of the gamma characteristic and the color space is changed using a changing unit that changes at least one of the spaces, and a parameter acquired by the parameter acquiring unit. And an image processing means for performing.
本発明によれば、画像処理装置で行われた画像処理の内容を、別の画像処理装置で再現することができる。 According to the present invention, the contents of the image processing performed by the image processing apparatus can be reproduced by another image processing apparatus.
以下、図面を参照しながら、本発明の実施形態を詳細に説明する。
本実施形態では、撮影時に撮像装置でカラーグレーディングに相当する画像処理を行い、カラーグレーディングのパラメータを記録する場合を例に挙げて説明する。
図１は、カラーグレーディング処理を行う機器の関係（カラーグレーディングシステムの構成）の一例を示す図である。
仮カラーグレーディング装置３００は、撮像時の画像に対して、色・輝度の補正等の仮カラーグレーディングを施す。モニタ２００は、仮グレーディングが施された画像を表示する。本カラーグレーディング装置４００は、撮像装置１００で撮像された画像に対して本カラーグレーディング処理を行う。モニタ２０１は、本グレーディング処理が施された画像を表示する。カラーグレーディング処理を施すことにより、画像の見た目（ルック）が変更される。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
In the present embodiment, an example will be described in which image processing corresponding to color grading is performed by the imaging apparatus during shooting and color grading parameters are recorded.
FIG. 1 is a diagram illustrating an example of the relationship between devices that perform color grading processing (configuration of a color grading system).
The provisional
図１に示すカラーグレーディングシステムにおける各機器の動作の概要の一例を説明する。
撮像装置１００は、被写体を撮像し、撮像した画像を記録メディアに記録すると共に、撮像中の画像をＨＤ−ＳＤＩケーブル等を通じて仮カラーグレーディング装置３００に出力する。仮カラーグレーディング装置３００は、撮像装置１００から入力された撮像中の画像に対して仮カラーグレーディング処理を行い、画像の見た目（ルック）を大まかに調整する。仮カラーグレーディング装置３００は、仮カラーグレーディング処理を行った後の画像を、３Ｇ−ＳＤＩケーブル等を通じてモニタ２００に出力する。
An example of an outline of the operation of each device in the color grading system shown in FIG. 1 will be described.
The
本カラーグレーディング装置４００は、撮像装置１００による撮像が終了した後に、撮像装置１００で撮影された画像信号を、記録媒体から読み出す。また、本カラーグレーディング装置４００は、仮カラーグレーディング装置３００から出力されるカラーグレーディングのパラメータに基づき、記録媒体から読み出した画像データに対して、仮カラーグレーディングと等価な処理を施す。更に、本カラーグレーディング装置４００は、仮カラーグレーディングと同等の処理を行った後の画像に対して、本カラーグレーディングを行い、詳細なルックの調整を行う。また、本カラーグレーディング装置４００は、本カラーグレーディング処理を行った後の画像信号を、３Ｇ−ＳＤＩケーブル等を通じてモニタ２０１へ出力する。
次に、図１に示したカラーグレーディングシステムにおける各機器の詳細な構成の一例について説明する。
図２は、撮像装置１００の構成の一例を示す図である。
図２において、レンズ群１０１は、ズームレンズ、フォーカスレンズ等を含む。シャッター１０２は、絞り機能を備える。撮像部１０３は、光学像を電気信号に変換するＣＣＤやＣＭＯＳ素子等を備える。Ａ／Ｄ変換器１０４は、撮像部１０３から出力されたアナログ信号をデジタル信号に変換する。画像処理部１０５は、Ａ／Ｄ変換器１０４から出力される画像信号に対し、ホワイトバランス処理、γ処理、色補正処理等の各種画像処理を行う。メモリ制御部１０７は、画像メモリ１０６における記憶動作を制御する。Ｄ／Ａ変換器１０８は、メモリ制御部１０７から入力したデジタル信号をアナログ信号に変換する。表示部１０９は、画像の表示を行うＬＣＤ等の表示器である。コーデック部１１０は、画像データを圧縮符号化・復号化する。
The color grading apparatus 400 reads an image signal captured by the
Next, an example of a detailed configuration of each device in the color grading system illustrated in FIG. 1 will be described.
FIG. 2 is a diagram illustrating an example of the configuration of the
In FIG. 2, the
記録インタフェース（Ｉ／Ｆ）１１１は、記録媒体１１２との間でデータの授受を行う。記録媒体１１２は、メモリカードやハードディスク等の外部記録媒体である。外部出力インタフェース（Ｉ／Ｆ）１１３は、仮カラーグレーディング装置３００等の外部の装置への画像信号の出力を制御する。システム制御部５０は、撮像装置１００のシステム全体を制御する。
A recording interface (I / F) 111 exchanges data with the recording medium 112. The recording medium 112 is an external recording medium such as a memory card or a hard disk. An external output interface (I / F) 113 controls output of an image signal to an external device such as the provisional
操作部１２０は、撮像装置１００に対してユーザが各種の動作指示を入力するためのものである。不揮発性メモリ１２１は、電気的にデータの消去・記録が可能なメモリであり、例えばＥＥＰＲＯＭ等が不揮発性メモリ１２１として用いられる。
システムタイマ１２４は、各種制御に用いる時間や、内蔵された時計の時間を計測する。システムメモリ１２５は、システム制御部５０の動作に必要な定数・変数や、不揮発性メモリ１２１から読み出したプログラム等を展開する。通信部１２６は、仮カラーグレーディング装置３００等の外部の装置と無線で通信を行う。
The
The
次に、被写体を撮像する際の撮像装置１００における基本的な処理の流れの一例について説明する。
撮像部１０３は、レンズ群１０１及びシャッター１０２を介して入射した光を光電変換し、アナログの画像信号としてＡ／Ｄ変換器１０４へ出力する。Ａ／Ｄ変換器１０４は、撮像部１０３から出力されるアナログの画像信号をデジタルの画像信号に変換して画像処理部１０５に出力する。
Next, an example of a basic processing flow in the
The
画像処理部１０５は、Ａ／Ｄ変換器１０４から出力された画像信号、又は、メモリ制御部１０７から読み出した画像信号に対し、ホワイトバランス等の色変換処理、γ処理等を行う（これらの処理の詳細については後述する）。また、画像処理部１０５は、Ａ／Ｄ変換器１０４から出力された画像信号を用いて所定の演算処理を行う。システム制御部５０は、当該演算処理の結果に基づいて、露光制御、測距制御を行う。これにより、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理や、ＡＥ（自動露出）処理等が行われる。画像処理部１０５は更に、Ａ／Ｄ変換器１０４から出力された画像信号を用いて光源を推定し、推定した光源に基づきＡＷＢ（オートホワイトバランス）処理を行う。
The
画像処理部１０５から出力された画像信号は、画像データとして、メモリ制御部１０７を介して画像メモリ１０６に書き込まれる。画像メモリ１０６は、Ａ／Ｄ変換器１０４から出力された画像信号や、表示部１０９に表示するための画像信号を、画像データとして格納する。
Ｄ／Ａ変換器１０８は、画像メモリ１０６に格納されている表示用の画像データをアナログの信号に変換して表示部１０９に供給する。表示部１０９は、ＬＣＤ等の表示器に、Ｄ／Ａ変換器１０８から出力されたアナログの信号に応じた表示を行う。また、メモリ制御部１０７は、画像メモリ１０６に格納されている画像データを、外部出力インタフェース１１３を介して、外部の仮カラーグレーディング装置３００に出力する。
The image signal output from the
The D /
コーデック部１１０は、画像メモリ１０６に記録された画像データをＭＰＥＧ等の規格に基づきそれぞれ圧縮符号化する。システム制御部５０は、コーデック部１１０で符号化した画像データ、又は、非圧縮の画像データを、記録インタフェース１１１を介して記録媒体１１２に格納する。
以上、撮像装置１００の撮像時の基本動作について説明した。
The
In the above, the basic operation at the time of imaging of the
以上の基本動作以外に、システム制御部５０は、前述した不揮発性メモリ１２１に記録されたプログラムを実行することで、後述する本実施形態の各処理を実現する。ここでいうプログラムとは、本実施形態にて後述する各種フローチャートおよびシーケンス図の内容を実行するためのプログラムのことである。この際、システム制御部５０の動作用の定数・変数や、不揮発性メモリ１２１から読み出したプログラム等は、システムメモリ１２５に展開される。
In addition to the basic operations described above, the
次に、撮像装置１００の画像処理部１０５の処理の詳細の一例を説明する。図３は、画像処理部１０５の詳細な構成の一例を示す図である。
図３において、画像処理部１０５は、色信号生成部１０５１、ＷＢ（ホワイトバランス）増幅部１０５２、色補正処理部１０５３、ガンマ処理部１０５４、輝度・色差信号生成部１０５５、色空間変換部１０５６、及びガンマ処理部１０５７を有する。
Next, an example of details of processing of the
In FIG. 3, an
前述したように、図２に示したＡ／Ｄ変換器１０４から画像処理部１０５に画像信号が入力される。
画像処理部１０５に入力された画像信号は、ベイヤーＲＧＢのＲＡＷ形式の信号であり、色信号生成部１０５１に入力される。
As described above, an image signal is input to the
The image signal input to the
色信号生成部１０５１は、入力された画像信号に対して同時化処理を行い、ＲＧＢの色信号Ｒ、Ｇ、Ｂを生成する。色信号生成部１０５１は、生成したＲＧＢの色信号Ｒ、Ｇ、ＢをＷＢ増幅部１０５２へ出力する。
ＷＢ増幅部１０５２は、システム制御部５０で算出されるホワイトバランスゲイン値に基づき、ＲＧＢの色信号Ｒ、Ｇ、Ｂにゲインをかけ、ホワイトバランスを調整する。
The color
Based on the white balance gain value calculated by the
色補正処理部１０５３は、ホワイトバランスが調整されたＲＧＢの色信号Ｒ、Ｇ、Ｂに対して、３×３のマトリクス演算処理や３次元のＬＵＴ（Ｌｏｏｋ Ｕｐ Ｔａｂｌｅ）処理を行い、色調を補正する。
ガンマ処理部１０５４は、色調が補正されたＲＧＢの色信号Ｒ、Ｇ、Ｂに対して、Ｒｅｃ．７０９等の規格に沿ったガンマや、ログ形式のガンマを掛ける等のガンマ補正を行う。
The color
The
輝度・色差信号生成部１０５５は、ガンマ補正が行われたＲＧＢの色信号Ｒ、Ｇ、Ｂから、輝度信号Ｙと色差信号Ｒ−Ｙ、Ｂ−Ｙ信号とを生成する。輝度・色差信号生成部１０５５は、生成した輝度信号Ｙ・色差信号Ｒ−Ｙ、Ｂ−Ｙを、外部出力インタフェース及び記録インタフェース１１１へ出力する。
一方、色空間変換部１０５６は、ホワイトバランスが調整されたＲＧＢの色信号Ｒ、Ｇ、Ｂの色空間を、外部モニタ出力用の色空間に変換する。
The luminance / color difference
On the other hand, the color
本実施形態では、外部モニタ出力用の色空間として、ｓＲＧＢ色空間、又は、ＡＣＥＳ色空間に変換する場合を例に挙げて説明する。ＡＣＥＳ色空間は、映画芸術科学アカデミー（ＡＭＰＡＳ）が提案しているＡＣＥＳ（Ａｃａｄｅｍｙ Ｃｏｌｏｒ Ｅｎｃｏｒｄｉｎｇ Ｓｙｓｔｅｍ）規格の色空間である。 In the present embodiment, a case where the color space for external monitor output is converted to the sRGB color space or the ACES color space will be described as an example. The ACES color space is an ACES (Academy Color Encoding System) standard color space proposed by the Academy of Motion Picture Arts and Sciences (AMPAS).
外部モニタ出力用の色空間がｓＲＧＢ色空間である場合、色空間変換部１０５６は、ホワイトバランスが調整されたＲＧＢの色信号Ｒ、Ｇ、ＢのＲＧＢ値を、ｓＲＧＢ色空間のＲＧＢ値に変換する処理を行う。一方、外部モニタ出力用の色空間がＡＣＥＳ色空間である場合、色空間変換部１０５６は、ホワイトバランスが調整されたＲＧＢの色信号Ｒ、Ｇ、Ｂに対して、ＡＣＥＳ規格におけるＩＤＴ（Ｉｎｐｕｔ Ｄｅｖｉｃｅ Ｔｒａｎｓｆｏｒｍ）処理を行う。このＩＤＴ処理により、ＡＣＥＳ色空間のＲＧＢ値が生成される。尚、ＩＤＴ処理は、色再現性の補正処理と、色空間の変換処理とを含む処理である。
When the color space for external monitor output is the sRGB color space, the color
ガンマ処理部１０５７は、色空間変換部１０５６で色空間が変換されたリニアな画像信号に対して、ガンマ処理（ガンマ補正）を施す。具体的に、外部モニタ出力用の色空間がｓＲＧＢ色空間である場合、ガンマ処理部１０５７は、色空間変換部１０５６で色空間が変換されたリニアな画像信号に対して、撮像装置１００独自のログガンマを適用する（図７（ａ）を参照）。尚、本実施形態では、撮像装置１００独自のログガンマをログガンマ１とする。ガンマ処理部１０５７は、ガンマ処理を行った後の画像信号（ｓＲＧＢ信号）を外部出力インタフェース１１３へ出力する。尚、ログガンマとは、入出力の関係が対数関数の関係で表されるガンマ曲線をいう。
The
一方、外部モニタ出力用の色空間がＡＣＥＳ色空間である場合、ガンマ処理部１０５７は、色空間変換部１０５６で色空間が変換されたリニアな画像信号に対して、ＡＣＥＳ−Ｐｒｏｘｙ形式のガンマを掛けるガンマ処理を行う（図７（ｂ）を参照）。ガンマ処理部１０５７は、ガンマ処理を行った後の画像信号（ＲＧＢ信号（ＡＣＥＳ信号（ＡＣＥＳ−Ｐｒｏｘｙ ＲＧＢ）））を外部出力インタフェース１１３へ出力する。尚、ＡＣＥＳ−Ｐｒｏｘｙとは、現在規格化が進行中のＡＣＥＳ信号の伝送規格である。
以上、画像処理部１０５の詳細について説明した。
On the other hand, when the color space for external monitor output is the ACES color space, the
The details of the
図２の説明に戻り、記録インタフェース１１１は、記録媒体１１２との間でやりとりされる信号を制御して、入力された画像信号を画像データとして記録媒体１１２に出力する。本実施形態で記録媒体１１２に記録される画像データは、前述のベイヤーＲＧＢのＲＡＷ形式の信号、又は、輝度信号Ｙ・色差信号Ｒ−Ｙ、Ｂ−Ｙである。
また、外部出力インタフェース１１３は、画像処理部１０５から出力されたガンマ処理後の画像信号（ＡＣＥＳ信号等）を、３Ｇ−ＳＤＩ信号として伝送できる形に変形し、ガンマ処理後の画像信号を仮カラーグレーディング装置３００に出力する。
以上、撮像装置１００の構成と、撮像時の画像信号の流れについて説明した。
Returning to the description of FIG. 2, the recording interface 111 controls a signal exchanged with the recording medium 112, and outputs the input image signal to the recording medium 112 as image data. The image data recorded on the recording medium 112 in the present embodiment is the aforementioned Bayer RGB RAW format signal, or the luminance signal Y / color difference signals RY and BY.
Also, the
The configuration of the
次に、仮カラーグレーディング装置３００の構成及び動作の一例について説明する。
図４は、仮カラーグレーディング装置３００の概略構成の一例を示す図である。
図４において、入力インタフェース（Ｉ／Ｆ）３０１は、撮像装置１００から出力された画像信号を受信する。画像メモリ３０２は、画像信号を記憶する。画像処理部３０３は、画像信号に対して、色変換や階調変換等の各種画像処理を行う。外部モニタインタフェース（Ｉ／Ｆ）３０４は、外部モニタであるモニタ２００（外部の表示装置）への出力を制御する。
Next, an example of the configuration and operation of the provisional
FIG. 4 is a diagram illustrating an example of a schematic configuration of the provisional
In FIG. 4, an input interface (I / F) 301 receives an image signal output from the
システム制御部３５０は、仮カラーグレーディング装置３００のシステム全体を制御する。操作部３２０は、マウスやキーボード、タッチパネル等から構成され、仮カラーグレーディング装置３００に対してユーザが各種の動作指示を入力するためのものである。通信部３２１は、撮像装置１００等の外部機器と通信を行う。
The system control unit 350 controls the entire system of the provisional
不揮発性メモリ３２３は、電気的にデータの消去・記録が可能なメモリである。システムタイマ３２４は、各種制御に用いる時間や、内蔵された時計の時間を計測する。システムメモリ３２５は、システム制御部３５０の動作に必要な定数・変数や、不揮発性メモリ３２３から読み出したプログラム等を展開する。
The
次に、以上のように構成された仮カラーグレーディング装置３００の基本的な動作の一例を説明する。ここでは、前述の撮像装置１００の外部出力インタフェース１１３を介して出力された画像信号を、入力インタフェース３０１で受信し、受信した画像信号に対して、仮カラーグレーディング処理する場合を例に挙げて説明する。
システム制御部３５０は、入力インタフェース３０１を介して入力された、撮像装置１００からの画像信号を、画像メモリ３０２に記録する。
システム制御部３５０は、ユーザによる入力指示と後述の制御とによって、画像処理部３０３で画像処理（仮カラーグレーディング処理）を行う際に使用するパラメータを決定し、画像処理部３０３へ当該パラメータを設定する。
Next, an example of the basic operation of the provisional
The system control unit 350 records the image signal from the
The system control unit 350 determines a parameter to be used when the
画像処理部３０３は、設定されたパラメータに従って仮カラーグレーディング処理を含む画像処理を画像信号に対して行い、当該画像処理を行った画像信号を画像メモリ３０２に記録する。また、システム制御部３５０は、仮カラーグレーディング処理が行われた後の画像信号を画像メモリ３０２から読み出し、外部モニタインタフェース３０４を介して、モニタ２００へ出力する。
以上、仮カラーグレーディング装置３００において、撮像装置１００から出力された画像信号に対して、仮カラーグレーディング処理を行い、仮カラーグレーディング処理を行った後の画像信号を外部のモニタ２００へ出力する処理の流れについて説明した。
The
As described above, the provisional
次に、仮カラーグレーディング装置３００の画像処理部３０３の処理の詳細の一例を説明する。図５（ａ）は、仮カラーグレーディング装置３００の画像処理部３０３の詳細な構成の一例を示す図である。
正規化処理部５０１には、撮像装置１００から、ガンマ処理が行われた後の画像信号（ＲＧＢ信号）が入力される。この画像信号（ＲＧＢ信号）は、前述のとおり、ＡＣＥＳ−Ｐｒｏｘｙ規格のＲＧＢ信号、又は、ｓＲＧＢ色空間でログガンマ１が適用されたＲＧＢ信号である。
Next, an example of details of processing of the
The
正規化処理部５０１は、入力した画像信号の正規化を行う。本実施形態では、１０ビット整数型で入力されたＣｏｄｅＶａｌｕｅで、０〜１０２３の値を有するＲＧＢ信号を、０（ゼロ）〜１の間の値に変換することで正規化を行う。ここでは、入力した画像信号のＣｏｄｅＶａｌｕｅの最小値０を０に、ＣｏｄｅＶａｌｕｅの最大値１０２３を１に対応付けて正規化する。
The
０（ゼロ）〜１の間の値に正規化されたＲＧＢ信号Ｒ'、Ｇ'、Ｂ'は、カラーグレーディング処理部５０２へ入力される。
カラーグレーディング処理部５０２は、ユーザによる入力指示に応じたカラーグレーディング処理を行う。本実施形態では、カラーグレーディング処理として、ＡＳＣ（Ｔｈｅ Ａｍｅｒｉｃａｎ Ｓｏｃｉｅｔｙ Ｏｆ Ｃｉｎｅｍａｔｏｇｒａｐｈｅｒｓ）が定義しているＣＤＬ（Ｃｏｌｏｒ Ｄｅｃｉｓｉｏｎ Ｌｉｓｔ）で記載可能なカラーグレーディング処理を行うものとする。
The RGB signals R ′, G ′, and B ′ normalized to a value between 0 (zero) and 1 are input to the color
The color
ＣＤＬに基づくカラーグレーディング処理は、カラーグレーディング処理部５０２への入力をIn、カラーグレーディング処理部５０２からの出力をOutで示すと、以下の（１）式表現することが可能である。
Out＝（slope×In＋offset）power ・・・（１）
The color grading process based on CDL can be expressed by the following expression (1), where In is an input to the color
Out = (slope × In + offset) power (1)
ここで、slope、offset、powerが、画像処理部３０３でカラーグレーディング処理を行う際に使用されるパラメータとなる。尚、以下の説明では、カラーグレーディング処理を行う際に使用されるパラメータを必要に応じて、カラーグレーディング処理のパラメータと称する。
仮カラーグレーディング装置３００のシステム制御部３５０は、カラーグレーディング処理のパラメータ（slope、offset、power）を設定するために操作部３２０に対してユーザによって行われた操作の内容を受信する。そして、システム制御部３５０は、当該カラーグレーディング処理のパラメータをカラーグレーディング処理部５０２に設定する。
Here, slope, offset, and power are parameters used when the
The system control unit 350 of the provisional
カラーグレーディング処理部５０２は、カラーグレーディング処理が行われた後のＲＧＢの画像信号Ｒ''、Ｇ''、Ｂ''を、表示用処理部５０３へ出力する。表示用処理部５０３は、処理対象のＲＧＢの画像信号Ｒ''、Ｇ''、Ｂ''に対して、表示用のガンマ処理等を施す。また、入力されたＲＧＢの画像信号のフォーマットが、ＡＣＥＳ‐Ｐｒｏｘｙ規格である場合、カラーグレーディング処理部５０２は、以下の処理を行う。すなわち、カラーグレーディング処理部５０２は、ＡＣＥＳ規格で定義されているＲＲＴ（Ｒｅｆｅｒｅｎｃｅ Ｒｅｎｄｅｒｉｎｇ Ｔｒａｎｓｆｏｒｍ）処理・ＯＤＴ（Ｏｕｔｐｕｔ Ｄｅｖｉｃｅ Ｔｒａｎｓｆｏｒｍ）処理を行う。ＲＲＴ処理によって、表示用に画像の見た目（ルック）の補正が行われ、ＯＤＴ処理によって、出力先のモニタ２００の規格特性に合わせた、ガンマ特性及び色空間の変換が行われる。
The color
本実施形態では、仮カラーグレーディング装置３００に接続されたモニタ２００がＲｅｃ．７０９規格のモニタである場合を例に挙げて説明する。この場合、表示用処理部５０３は、Ｒｅｃ．７０９規格の色空間に収まるように、入力信号（ＲＧＢの画像信号Ｒ''、Ｇ''、Ｂ''）の色空間を変換する。そして、表示用処理部５０３は、色空間を変換した入力信号（ＲＧＢの画像信号Ｒ''、Ｇ''、Ｂ''）に対して、Ｒｅｃ．７０９規格に基づくガンマ処理を施す。表示用処理部５０３は、ガンマ処理を行った後の画像信号（７０９＿ＲＧＢ信号）を、外部モニタインタフェース３０４を介してモニタ２００へ出力する。
以上、仮カラーグレーディング装置３００の構成と、撮像時の画像信号の流れについて説明した。
In the present embodiment, the
The configuration of the provisional
以上のような、撮像装置１００、仮カラーグレーディング装置３００、及びモニタ２００の組み合わせによって、ユーザは、撮像時に、モニタ２００に表示された画像を目的の見た目（ルック）に近づけるような仮カラーグレーディングを行うことが可能である。
次に、撮像装置１００と仮カラーグレーディング装置３００とが通信を行い、カラーグレーディング処理のパラメータ（ＣＤＬパラメータ）をやりとりする処理の一例について説明する。
The combination of the
Next, an example of processing in which the
図６は、撮像装置１００と仮カラーグレーディング装置３００の動作の一例を説明するフローチャートである。
図６のステップＳ６０１において、撮像装置１００は、通信部１２６を介して、仮カラーグレーディング装置３００との接続を確立する。一方、ステップＳ６１１において、仮カラーグレーディング装置３００は、通信部３２１を介して、撮像装置１００と接続を確立する。
FIG. 6 is a flowchart for explaining an example of operations of the
In step S <b> 601 of FIG. 6, the
次に、ステップＳ６０２において、撮像装置１００は、モニタ出力用のフォーマットを設定する。前述のように本実施形態では、モニタ出力用のフォーマットとして、以下のフォーマットＡ及びフォーマットＢの２種類を切り替え可能であるとする。
フォーマットＡ（色空間：ＡＣＥＳ ガンマ：ＡＣＥＳ−Ｐｒｏｘｙ）
フォーマットＢ（色空間：ｓＲＧＢ ガンマ：ログガンマ１）
Next, in step S602, the
Format A (Color space: ACES Gamma: ACES-Proxy)
Format B (color space: sRGB gamma: log gamma 1)
撮像装置１００は、操作部１２０に対するユーザによる入力指示に基づいて、これらのモニタ出力用のフォーマットを切り替えることができる。また、撮像装置１００は、仮カラーグレーディング装置３００に接続されたモニタ２００と通信を行い、モニタ２００の設定に応じて、これらのモニタ出力用のフォーマットを切り替えてもよい。撮像装置１００は、これらのフォーマットに基づいて決定した色空間及びガンマ特性に応じて、色空間変換部１０５６及びガンマ処理部１０５７に、パラメータを設定する。
The
ステップＳ６０３において、撮像装置１００は、ステップＳ６０２で設定したフォーマット情報（ガンマ及び色空間の情報）を、通信部１２６を介して、仮カラーグレーディング装置３００へ送信する。
仮カラーグレーディング装置３００の処理に移り、ステップＳ６１２において、仮カラーグレーディング装置３００は、撮像装置１００から送信されたフォーマット情報を取得する。
ステップＳ６１３において、仮カラーグレーディング装置３００は、ＣＤＬに基づくカラーグレーディング処理において、０〜１０２３の値を有するＲＧＢ信号を、０（ゼロ）〜１の値に正規化する際のパラメータを正規化処理部５０１に設定する。前述の通り、１０ビットの場合、ＣｏｄｅＶａｌｕｅ＝０を０、ＣｏｄｅＶａｌｕｅ＝１０２３を１とする正規化が行われる。
In step S603, the
The process proceeds to the provisional
In step S613, the provisional
ステップＳ６１４において、仮カラーグレーディング装置３００は、画像信号（ＲＧＢ信号）を正規化し、正規化した画像に対して、ＣＤＬに基づくカラーグレーディング処理のパラメータをカラーグレーディング処理部５０２に設定する。これにより、正規化した画像信号（ＲＧＢ信号）に対してＣＤＬに基づくカラーグレーディング処理が（１）式により行われる。
また、仮カラーグレーディング装置３００は、ＣＤＬに基づくカラーグレーディング処理のパラメータの設定を行った後に、ＣＤＬファイルを生成する。図８は、ＣＤＬファイル８００の一例を示す図である。本実施形態では、ＣＤＬはタグを用いて記述される。図８に示す（Ａ）は、フォーマット情報を示す。また、（Ｃ）は、ＲＧＢ信号毎のＳｌｏｐｅ、Ｏｆｆｓｅｔ、Ｐｏｗｅｒのパラメータの値を示す。
In step S614, the provisional
The provisional
ステップＳ６１５において、仮カラーグレーディング装置３００は、ステップＳ６１４で作成したＣＤＬファイル８００に、仮カラーグレーディング処理を施した際に採用されたガンマ特性の情報を記録・出力する。図８に示す（Ｂ）は、仮カラーグレーディング処理を施した際に採用されたガンマ特性の情報を示す。図８に示す（Ｂ）の例では、ＡＣＥＳ−Ｐｒｏｘｙ形式のガンマ特性に対して処理したＣＤＬであることを示す。
ステップＳ６１６において、仮カラーグレーディング装置３００は、生成したＣＤＬファイル８００を撮像装置１００へ送信する。
In step S615, the provisional
In step S616, the provisional
ステップＳ６０４において、撮像装置１００は、ＣＤＬファイル８００を受信する。本実施形態では、この処理により、撮像装置のパラメータ取得手段とガンマ特性取得手段の一例が実現される。
ステップＳ６０５において、撮像装置１００は、撮像（記録）を行う。
ステップＳ６０６において、撮像装置１００は、撮像した画像ファイルのファイルヘッダに、ステップＳ６０４で取得したＣＤＬファイル８００を記録する。図９は、画像ファイルのファイルヘッダの一例を示す図である。
In step S604, the
In step S605, the
In step S606, the
図９は、撮像装置１００で記録するクリップのファイル構成を示す。画像ファイル９００は、画像クリップファイル全体を示す。画像ファイル９００の内部には、ファイルヘッダ９０１と、画像フレームデータ９１０、９１１とが含まれる。カラーグレーディングパラメータ９０２は、ステップＳ６０４で取得したＣＤＬファイル８００のデータである。カラーグレーディングパラメータ９０２は、ファイルヘッダ９０１の一部として、カラーグレーディング処理のパラメータ（ＣＤＬパラメータ）を記録する。
以上、撮像装置１００及び仮カラーグレーディング装置３００における撮像時のカラーグレーディング動作について説明した。
FIG. 9 shows a file structure of a clip recorded by the
The color grading operation at the time of imaging in the
次に、以上のようにして撮像装置１００で記録した画像に対して、本カラーグレーディング装置４００で、本カラーグレーディング処理する場合の動作の一例について説明する。
本カラーグレーディング装置４００の概略構成は、図４に示した仮カラーグレーディング装置３００の概略構成と同一であるため、ここでは、その詳細な説明を省略する。本カラーグレーディング装置４００は、仮カラーグレーディング装置３００と、画像処理部３０３の構成及び処理内容が異なる。
Next, an example of the operation when the color grading apparatus 400 performs the main color grading process on the image recorded by the
Since the schematic configuration of the present color grading apparatus 400 is the same as the schematic configuration of the provisional
図５（ｂ）は、本カラーグレーディング装置４００の画像処理部３０３の詳細な構成の一例を示す図である。
図５（ｂ）において、色空間変換処理部５１０は、後述する入力フォーマットの条件に応じて、入力した画像信号（ＲＧＢ信号）の色空間を変換する。ガンマ変換部５１１は、後述する入力フォーマットの条件に応じて色空間が変換された画像信号に対してガンマの形状変換を施す。正規化処理部５１２は、ガンマの形状変換が施された画像信号に対して、仮カラーグレーディング装置３００での正規化に対応した正規化処理を行う。仮グレーディングＣＤＬ処理部５１３は、正規化処理が行われた画像信号に対して、仮カラーグレーディング装置３００で行った仮カラーグレーディング処理（ＣＤＬ処理）を適用し、当該仮カラーグレーディング処理に相当する処理を行う。
FIG. 5B is a diagram illustrating an example of a detailed configuration of the
In FIG. 5B, the color space conversion processing unit 510 converts the color space of the input image signal (RGB signal) according to the input format conditions described later. A
正規化処理部５１４は、仮カラーグレーディング処理に相当する処理が行われた画像信号に対して、本グレーディング用の正規化を行う。本グレーディング処理部５１５は、本グレーディング用の正規化が行われた画像信号に対して、本カラーグレーディング処理を行う。表示用処理部５１６は、モニタ２０１等の出力機器に応じて、表示機器用のガンマ処理や色空間の変換等を行う。
The
図５（ｂ）に示した各処理部に対して、後述するフローチャートに基づき制御パラメータが設定され、各種処理が実行される。
次に、図１０のフローチャートを参照しながら、画像ファイルを読み込み、本カラーグレーディングを行う際の、本カラーグレーディング装置４００のシステム制御部３５０の動作の一例について説明する。
まず、ステップＳ１００１において、システム制御部３５０は、操作部３２０に対するユーザによる操作を受け付け、カラーグレーディングする画像ファイル９００を選択する。前述したように、画像ファイル９００のファイルヘッダ９０１の内部には、ＣＤＬファイル８００のデータであるカラーグレーディングパラメータ９０２が記憶されている。
Control parameters are set for each processing unit shown in FIG. 5B based on a flowchart described later, and various processes are executed.
Next, an example of the operation of the system control unit 350 of the color grading apparatus 400 when the image file is read and the color grading is performed will be described with reference to the flowchart of FIG.
First, in step S1001, the system control unit 350 receives an operation by the user on the
ステップＳ１００２において、システム制御部３５０は、画像ファイル９００のファイルヘッダ９０１から、カラーグレーディングパラメータ９０２であるＣＤＬ情報を取得する。そして、システム制御部３５０は、取得したＣＤＬ情報から、仮カラーグレーディング処理の際に採用したフォーマット情報（ガンマ特性・色空間）を抽出する。本実施形態では、このような処理により、パラメータ取得手段とガンマ特性取得手段の一例が実現される。
ステップＳ１００３において、システム制御部３５０は、ＣＤＬ情報に基づき、仮カラーグレーディング処理で採用されたガンマ特性と、現在読み込んだ画像ファイルのフォーマット特性とが同一であるか否かを判定する。
この判定の結果、仮カラーグレーディング処理で採用されたガンマ特性と、現在読み込んだ画像ファイルのフォーマット特性とが同一である場合は、ステップＳ１００４、Ｓ１００５を省略して後述するステップＳ１００６に進む。
In step S <b> 1002, the system control unit 350 acquires CDL information that is a color grading parameter 902 from the file header 901 of the image file 900. Then, the system control unit 350 extracts the format information (gamma characteristic / color space) adopted in the provisional color grading process from the acquired CDL information. In this embodiment, an example of a parameter acquisition unit and a gamma characteristic acquisition unit is realized by such processing.
In step S1003, the system control unit 350 determines whether the gamma characteristic employed in the provisional color grading process and the format characteristic of the currently read image file are the same based on the CDL information.
As a result of this determination, if the gamma characteristic employed in the provisional color grading process is the same as the format characteristic of the currently read image file, steps S1004 and S1005 are omitted, and the process proceeds to step S1006 described later.
一方、仮カラーグレーディング処理で採用されたガンマ特性と、現在読み込んだ画像ファイルのフォーマット特性とが異なる場合にはステップＳ１００４に進む。
ステップＳ１００４において、システム制御部３５０は、本カラーグレーディング装置４００で処理するフォーマット（色空間およびガンマ特性）を決定する。ガンマ特性に関しては、仮カラーグレーディングで採用したガンマと少なくとも一部が相似もしくは同一のガンマになるようにガンマ特性を決定する。
On the other hand, if the gamma characteristic employed in the provisional color grading process is different from the format characteristic of the currently read image file, the process proceeds to step S1004.
In step S1004, the system control unit 350 determines a format (color space and gamma characteristic) to be processed by the color grading apparatus 400. With respect to the gamma characteristic, the gamma characteristic is determined so that at least a part of the gamma used in the provisional color grading is similar or the same gamma.
このガンマ特性の決定方法の一例を、図１１を用いて説明する。図１１の例１は、仮カラーグレーディング処理で採用されたガンマ特性がＡＣＥＳ−Ｐｒｏｘｙであることを示す（図１１のカラーグレーディングフォーマットを参照）。この場合には、本カラーグレーディング装置４００で読み込んだ画像ファイル９００内のガンマ特性が何であるかに関わらず、仮カラーグレーディング処理で採用されたガンマ特性であるＡＣＥＳ−Ｐｒｏｘｙと部分的に相似なＡＣＥＳ−Ｌｏｇを選択する。ＡＣＥＳ−Ｌｏｇは、図７（ｃ）に示すものであり、入力反射率が約７００００％までがＡＣＥＳ−Ｐｒｏｘｙとほぼ相似な形状になっている。また、色空間に関しても、仮カラーグレーディング装置３００で、ＡＣＥＳ色空間を採用していたため、本カラーグレーディング装置４００でもＡＣＥＳ色空間を採用する。このようにステップＳ１００３では、本カラーグレーディング装置４００に入力された画像信号の色空間と仮カラーグレーディング装置３００で採用された色空間とが同じであるか否かも判定する。
An example of this gamma characteristic determination method will be described with reference to FIG. Example 1 in FIG. 11 indicates that the gamma characteristic employed in the provisional color grading process is ACES-Proxy (see the color grading format in FIG. 11). In this case, regardless of what the gamma characteristic in the image file 900 read by the color grading apparatus 400 is, ACES partially similar to the ACES-Proxy that is the gamma characteristic employed in the provisional color grading process. -Select Log. The ACES-Log is shown in FIG. 7C, and the input reflectance is approximately similar to that of the ACES-Proxy up to about 70000%. Also, regarding the color space, since the temporary
図１０の説明に戻り、ステップＳ１００５において、システム制御部３５０は、ステップＳ１００４で決定した、色空間およびガンマ特性に変換するためのパラメータを色空間変換処理部５１０及びガンマ変換部５１１に設定する。図１１の例１の場合、色空間をｓＲＧＢ色空間からＡＣＥＳ色空間に変換するパラメータを色空間変換処理部５１０に設定し、ログガンマ１をＡＣＥＳ−Ｌｏｇに変換するパラメータをガンマ変換部５１１に設定する。また、正規化処理部５１２には、仮カラーグレーディング処理における正規化に相当する正規化パラメータを設定する。具体的には、図１１の例１の場合、仮カラーグレーディング装置３００で採用されたガンマ特性であるＡＣＥＳ−Ｐｒｏｘｙは、約７００００％の入力反射率で正規化されている。そのため、ＡＣＥＳ−Ｌｏｇも仮カラーグレーディング処理における正規化と同様に、７００００％の入力反射率で正規化する。この正規化の基準となる入力反射率は、仮カラーグレーディング処理時のガンマ特性に対応付けられて本カラーグレーディング装置４００の不揮発性メモリ３２３に事前に記録されており、フォーマット情報により正規化する際の基準となる入力反射率を決定する。
Returning to the description of FIG. 10, in step S1005, the system control unit 350 sets the parameters for conversion to the color space and the gamma characteristic determined in step S1004 in the color space conversion processing unit 510 and the
次に、ステップＳ１００３で、仮カラーグレーディング処理で採用されたガンマ特性と、現在読み込んだ画像ファイルのフォーマット特性とが同じである場合について説明する。この場合は、図１１の例２に示すように、本カラーグレーディング装置４００への入力フォーマットをそのまま採用する。そのため、色空間変換処理部５１０、ガンマ変換部５１１には何も処理をしないパラメータが設定される。また、正規化処理部５１２には、仮カラーグレーディング処理と同様の入力反射率で正規化が行われる。図１１の例２の場合は、１０００％の入力反射率で正規化が行われる。
Next, a case where the gamma characteristic employed in the provisional color grading process and the format characteristic of the currently read image file are the same in step S1003 will be described. In this case, as shown in Example 2 of FIG. 11, the input format to the color grading apparatus 400 is employed as it is. Therefore, parameters for performing no processing are set in the color space conversion processing unit 510 and the
図１０の説明に戻り、ステップＳ１００６において、システム制御部３５０は、仮カラーグレーディング処理時に生成したＣＤＬパラメータ（仮カラーグレーディング処理のパラメータ）を仮グレーディングＣＤＬ処理部５１３に設定する。
ステップＳ１００７において、システム制御部３５０は、本カラーグレーディング装置４００で本カラーグレーディング処理を行うための正規化パラメータを正規化処理部５１４に設定する。図１１の例１では、ＡＣＥＳ−Ｌｏｇで正規化するため、ＡＣＥＳ−Ｌｏｇのフルレンジ（入力反射率６５５３５００％）で正規化するパラメータが設定される。また、図１１の例２では、ログガンマ１のフルレンジ（入力反射率１０００％）で正規化するパラメータが設定される。
Returning to the description of FIG. 10, in step S <b> 1006, the system control unit 350 sets the CDL parameter (temporary color grading processing parameter) generated during the temporary color grading process in the temporary grading
In step S <b> 1007, the system control unit 350 sets a normalization parameter for performing the main color grading process in the normal color grading apparatus 400 in the
ステップＳ１００８において、システム制御部３５０は、操作部３２０に対するユーザによる入力指示を受け付け、本カラーグレーディング処理のパラメータ（ＣＤＬパラメータ）を生成し、本グレーディング処理部５１５に設定する。
ステップＳ１００９において、システム制御部３５０は、本カラーグレーディング装置４００に接続されたモニタ２０１の特性情報を取得する。モニタ２０１と通信してモニタ２０１の特性情報を取得してもよいし、操作部３２０に対するユーザの操作を受け付けてモニタ２０１の特性情報を取得してもよい。
ステップＳ１０１０において、システム制御部３５０は、ステップＳ１００９で取得したモニタ２０１の特性情報に応じて、表示用処理部５１６の処理の内容を決定する。例えば、モニタ２０１が、Ｒｅｃ.７０９規格用のモニタである場合、仮グレーディングＣＤＬ処理部５１３は、Ｒｅｃ．７０９に適したガンマ変換もしくはＯＤＴ処理（ＡＣＥＳの場合）を行って出力する。
ステップＳ１０１１において、システム制御部３５０は、読み込んだ画像ファイルに対して、図５（ｂ）の画像処理部３０３に対して動作を開始する。
In step S <b> 1008, the system control unit 350 accepts an input instruction from the user to the
In step S <b> 1009, the system control unit 350 acquires characteristic information of the
In step S1010, the system control unit 350 determines the processing content of the
In step S <b> 1011, the system control unit 350 starts an operation for the read image file with respect to the
以上のように本実施形態では、仮カラーグレーディング装置３００は、仮カラーグレーディング処理の際に採用したガンマ特性を、カラーグレーディング処理のパラメータ（ＣＤＬパラメータ）と関連付けて出力・記録する。また、本カラーグレーディング装置４００は、仮カラーグレーディング処理の際に採用されたガンマ特性と部分的に相似もしくは同一のガンマ特性を採用する。そして、読み込んだ画像信号を、仮カラーグレーディング処理と同様のガンマ特性に従って変換した後に、仮カラーグレーディング処理のパラメータを適用する。
このようにすることで、仮カラーグレーディング装置３００で処理したガンマと、本カラーグレーディング装置４００の入力ガンマとが異なった場合でも、仮カラーグレーディング処理の結果を、本カラーグレーディング装置４００で再現することが可能となる。すなわち、撮像時の仮カラーグレーディング処理の内容を、撮像後の本カラーグレーディング処理でより正しく再現することので、カラーグレーディング処理の結果について、ユーザに混乱を与えることを抑制することができる。
As described above, in the present embodiment, the provisional
By doing in this way, even if the gamma processed by the provisional
本実施形態では、カラーグレーディング処理のパラメータを記録するＣＤＬファイル８００内に、仮カラーグレーディング処理の際に採用されたガンマ特性の情報を記録する形式を例に挙げて説明した。しかしながら、カラーグレーディング処理のパラメータと、仮カラーグレーディング処理の際に採用されたガンマ特性の情報とを相互に関連付けて記録する方法であれば、どのような方法をとってもかまわない。例えば、カラーグレーディング処理のパラメータと、仮カラーグレーディング処理の際に採用されたガンマ特性の情報と個別のファイルで記録しておいてもよい。このようにした場合には、例えば、カラーグレーディング処理のパラメータのファイルに、仮カラーグレーディング処理の際に採用されたガンマ特性の情報へのリンクを記載しておく方法をとることも可能である。 In the present embodiment, the description has been given by taking as an example the format for recording the information of the gamma characteristic employed in the provisional color grading process in the CDL file 800 that records the parameters of the color grading process. However, any method may be used as long as it is a method for recording the parameters of the color grading process and the information of the gamma characteristics employed in the provisional color grading process in association with each other. For example, the parameters of the color grading process, the information on the gamma characteristics employed in the provisional color grading process, and individual files may be recorded. In such a case, for example, a method of describing a link to information on the gamma characteristics employed in the provisional color grading process in a color grading process parameter file may be used.
また、本実施形態では、仮カラーグレーディング装置３００が、撮像装置１００から入力されたガンマ特性をそのまま利用する場合を例に挙げて説明した。しかしながら、仮カラーグレーディング装置３００内で、ガンマ特性を変換してもよい。例えば、仮カラーグレーディング装置３００に入力された画像信号のガンマ特性がログガンマ１であり、色空間がｓＲＧＢ色空間であるとする。この場合には、仮カラーグレーディング装置３００内の画像処理部３０３で、入力された画像信号のガンマ特性、色空間を、それぞれＬｏｇＡＣＥＳ、ＡＣＥＳ色空間等に変換してもよい。
この場合、カラーグレーディング処理のパラメータのファイルに記録するガンマ特性の情報は、実際に仮カラーグレーディング処理の際に採用されたガンマ特性の情報を記録する。また、色空間も含めて変更した場合は、色空間の情報も合わせて、カラーグレーディング処理のパラメータのファイルに、ガンマ特性の情報と相互に関連付けて記録する。
Further, in the present embodiment, the case where the provisional
In this case, the gamma characteristic information recorded in the parameter file of the color grading process records the gamma characteristic information actually used in the provisional color grading process. If the color space is changed, the color space information is recorded in the color grading parameter file in association with the gamma characteristic information.
また、本実施形態では、仮カラーグレーディング処理の際に使用したガンマ特性の情報を、ガンマ特性を識別する文字列情報で記述する場合を例に挙げて説明した。しかしながら、ガンマ特性の情報の記述方法は、これに限定されるものではない。例えば、ガンマ特性の情報は、ガンマ特性を識別するＩＤや数式、テーブルデータ等どのような形態であっても構わない。 Further, in the present embodiment, the case where the gamma characteristic information used in the provisional color grading process is described as character string information for identifying the gamma characteristic has been described as an example. However, the description method of the gamma characteristic information is not limited to this. For example, the gamma characteristic information may be in any form such as an ID for identifying the gamma characteristic, a mathematical expression, or table data.
また、本実施形態では、仮カラーグレーディング装置３００が、ＣＤＬファイル８００に、ガンマ特性の情報を記録する場合を例に挙げて説明した。しかしながら、撮像装置１００側で、カラーグレーディング処理のパラメータ（ＣＤＬパラメータ）とガンマ特性の情報とを相互に関連付ける構成をとってもよい。例えば、仮カラーグレーディング装置３００からＣＤＬファイル８００を受け取った際に、撮像装置１００が、カメラ出力のガンマ特性の情報を記録する構成をとってもよい。
In the present embodiment, the case where the temporary
また、本実施形態では、カラーグレーディングの情報として、ＣＤＬファイル８００を記録する場合を例に挙げて説明した。しかしながら、カラーグレーディングの情報の記録は、ＣＤＬファイル８００に限定されるものではない。仮カラーグレーディング処理の内容が本カラーグレーディング装置４００へ伝えられるのであれば、カラーグレーディングの情報は、どのような形態であってもかまわない。
例えば、本カラーグレーディング装置４００における、色空間変換処理部５１０、ガンマ変換部５１１、正規化処理部５１２、仮グレーディングＣＤＬ処理部５１３の処理を一括のＬＵＴ（Ｌｏｏｋ Ｕｐ Ｔａｂｌｅ）として生成してもよい。この場合、そのＬＵＴのファイルに、カラーグレーディングの情報（仮グレーディング処理の内容）が記録される。また、この場合、生成したＬＵＴファイルに対して、ガンマ特性の情報を付加する。また、この場合、本カラーグレーディング装置４００の画像処理部３０３は、色空間変換処理部５１０、ガンマ変換部５１１、正規化処理部５１２、仮グレーディングＣＤＬ処理部５１３の代わりに、ＬＵＴ処理部を備える構成とする。そして、このＬＵＴ処理部により、ＬＵＴの処理を実行する。
In the present embodiment, the case where the CDL file 800 is recorded as color grading information has been described as an example. However, recording of color grading information is not limited to the
For example, the processing of the color space conversion processing unit 510, the
尚、前述した実施形態は、何れも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。 The above-described embodiments are merely examples of implementation in carrying out the present invention, and the technical scope of the present invention should not be construed in a limited manner. That is, the present invention can be implemented in various forms without departing from the technical idea or the main features thereof.
（その他の実施例）
本発明は、以下の処理を実行することによっても実現される。即ち、まず、以上の実施形態の機能を実現するソフトウェア（コンピュータプログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）が当該コンピュータプログラムを読み出して実行する。
(Other examples)
The present invention is also realized by executing the following processing. That is, first, software (computer program) for realizing the functions of the above embodiments is supplied to a system or apparatus via a network or various storage media. Then, the computer (or CPU, MPU, etc.) of the system or apparatus reads and executes the computer program.
１００：撮像装置、２００、２０１：モニタ、３００：仮カラーグレーディング装置、４００：本カラーグレーディング装置 100: imaging device, 200, 201: monitor, 300: provisional color grading device, 400: main color grading device
Claims (12)
外部の画像処理装置で画像処理を行った際に使用されたパラメータを、前記外部の画像処理装置から取得するパラメータ取得手段と、
前記撮像手段で撮像された画像信号と、前記パラメータ取得手段により取得されたパラメータと、前記撮像手段により撮像された画像信号のガンマ特性および色空間の少なくとも何れか一方とを相互に関連付けて記憶する記憶手段と、
を有することを特徴とする撮像装置。 Imaging means;
Parameter acquisition means for acquiring parameters used when image processing is performed by an external image processing apparatus from the external image processing apparatus;
An image signal captured by the imaging unit, a parameter acquired by the parameter acquisition unit, and at least one of a gamma characteristic and a color space of the image signal captured by the imaging unit are stored in association with each other. Storage means;
An imaging device comprising:
前記記憶手段は、前記撮像手段で撮像された画像信号と、前記パラメータ取得手段により取得されたパラメータと、前記ガンマ特性取得手段により取得された前記ガンマ特性および色空間の少なくとも何れか一方とを相互に関連付けて記憶することを特徴とする請求項１に記載の撮像装置。 Gamma characteristic acquisition means for acquiring from the external image processing apparatus at least one of the gamma characteristic and the color space adopted in the image processing in the external image processing apparatus;
The storage means mutually receives an image signal picked up by the image pickup means, a parameter acquired by the parameter acquisition means, and at least one of the gamma characteristic and color space acquired by the gamma characteristic acquisition means. The image capturing apparatus according to claim 1, wherein the image capturing apparatus is stored in association with the image capturing apparatus.
前記記憶手段は、前記撮像手段で撮像された画像信号と、前記パラメータ取得手段により取得されたパラメータと、前記出力手段により前記外部の画像処理装置に出力される前記ガンマ特性および色空間の少なくとも何れか一方を相互に関連付けて記憶することを特徴とする請求項１に記載の撮像装置。 An output unit that outputs at least one of a gamma characteristic and a color space of the image signal captured by the imaging unit to the external image processing apparatus;
The storage unit includes at least one of an image signal captured by the imaging unit, a parameter acquired by the parameter acquisition unit, and the gamma characteristic and color space output to the external image processing apparatus by the output unit. The imaging apparatus according to claim 1, wherein one of the two is stored in association with each other.
外部の画像処理装置で画像信号に対する画像処理を行った際に使用されたパラメータを取得するパラメータ取得手段と、
前記パラメータに関連付けられたガンマ特性および色空間の少なくとも何れか一方を取得するガンマ特性取得手段と、
前記ガンマ特性取得手段により取得されたガンマ特性および色空間の少なくとも何れか一方に従って、前記画像信号のガンマ特性および色空間の少なくとも何れか一方を変更する変更手段と、
前記パラメータ取得手段により取得されたパラメータを用いて、前記ガンマ特性および色空間の少なくとも何れか一方が変更された画像信号に対して、前記画像処理を行う画像処理手段と、
を有することを特徴とする画像処理装置。 An input means for inputting an image signal;
Parameter acquisition means for acquiring parameters used when image processing is performed on the image signal in an external image processing apparatus;
Gamma characteristic acquisition means for acquiring at least one of a gamma characteristic and a color space associated with the parameter;
Changing means for changing at least one of the gamma characteristic and the color space of the image signal in accordance with at least one of the gamma characteristic and the color space acquired by the gamma characteristic acquisition means;
Image processing means for performing image processing on an image signal in which at least one of the gamma characteristic and color space is changed using the parameter acquired by the parameter acquisition means;
An image processing apparatus comprising:
前記変更手段は、前記判定手段により、前記画像信号のガンマ特性と、前記パラメータに関連付けられたガンマ特性とが同じでないと判定された場合に、当該パラメータに関連付けられたガンマ特性に従って、前記画像信号のガンマ特性を変更し、
前記画像処理手段は、前記判定手段により、前記画像信号のガンマ特性と、前記パラメータに関連付けられたガンマ特性とが同じであると判定された場合には、前記入力手段により入力された画像信号に対して、前記画像処理を行い、前記判定手段により、前記画像信号のガンマ特性と、前記パラメータに関連付けられたガンマ特性とが同じでないと判定された場合には、前記パラメータ取得手段により取得されたパラメータを用いて、前記ガンマ特性が変更された画像信号に対して、前記画像処理を行うことを特徴とする請求項５に記載の画像処理装置。 Determination means for determining whether the gamma characteristic of the image signal and the gamma characteristic associated with the parameter are the same;
When the determining unit determines that the gamma characteristic of the image signal and the gamma characteristic associated with the parameter are not the same, the changing unit determines the image signal according to the gamma characteristic associated with the parameter. Change the gamma characteristics of
In the case where the determination unit determines that the gamma characteristic of the image signal is the same as the gamma characteristic associated with the parameter, the image processing unit applies an image signal input by the input unit to the image signal. On the other hand, the image processing is performed, and when the determination unit determines that the gamma characteristic of the image signal is not the same as the gamma characteristic associated with the parameter, the image acquisition unit acquires the image signal. The image processing apparatus according to claim 5 , wherein the image processing is performed on an image signal in which the gamma characteristic is changed using a parameter.
前記変更手段は、前記判定手段により、前記画像信号の色空間と、前記パラメータに関連付けられた色空間とが同じでないと判定された場合に、当該パラメータに関連付けられた色空間に、前記画像信号の色空間を変更し、
前記画像処理手段は、前記判定手段により、前記画像信号の色空間と、前記パラメータに関連付けられた色空間とが同じであると判定された場合には、前記入力手段により入力された画像信号に対して、前記画像処理を行い、前記判定手段により、前記画像信号の色空間と、前記パラメータに関連付けられた色空間とが同じでないと判定された場合には、前記パラメータ取得手段により取得されたパラメータを用いて、前記色空間が変更された画像信号に対して、前記画像処理を行うことを特徴とする請求項５〜７の何れか１項に記載の画像処理装置。 Determination means for determining whether or not the color space of the image signal and the color space associated with the parameter are the same;
When the determining unit determines that the color space of the image signal is not the same as the color space associated with the parameter, the changing unit includes the image signal in the color space associated with the parameter. Change the color space of
When the determination unit determines that the color space of the image signal and the color space associated with the parameter are the same, the image processing unit applies an image signal input by the input unit to the image signal. On the other hand, when the image processing is performed and the determination unit determines that the color space of the image signal and the color space associated with the parameter are not the same, the image acquisition unit acquires the parameter. using the parameters for the image signal in which the color space is changed, the image processing apparatus according to any one of claims 5-7, wherein: performing the image processing.
前記パラメータ取得手段は、前記ファイルの内部に含まれる前記パラメータを読み出し、
前記ガンマ特性取得手段は、前記ファイルの内部に含まれる前記ガンマ特性および前記色空間の少なくとも何れか一方を読み出すことを特徴とする請求項５〜８の何れか１項に記載の画像処理装置。 The input means reads the image signal included in the file of the image signal captured by an external imaging device,
The parameter acquisition means reads the parameter included in the file,
The gamma characteristic acquisition unit, an image processing apparatus according to any one of claims 5-8, characterized in that reading out at least one of the gamma characteristic and the color space are contained within the file.
撮像手段で撮像された画像信号と、前記パラメータ取得工程により取得されたパラメータと、撮像手段により撮像された画像信号のガンマ特性および色空間の少なくとも何れか一方とを相互に関連付けて記憶する記憶工程と、
を有することを特徴とする撮像装置の制御方法。 A parameter acquisition step of acquiring parameters used when image processing is performed by an external image processing apparatus from the external image processing apparatus;
A storage step of storing the image signal captured by the imaging unit, the parameter acquired by the parameter acquisition step, and at least one of the gamma characteristic and the color space of the image signal captured by the imaging unit in association with each other When,
A method for controlling an imaging apparatus, comprising:
外部の画像処理装置で画像信号に対する画像処理を行った際に使用されたパラメータを取得するパラメータ取得工程と、
前記パラメータに関連付けられたガンマ特性および色空間の少なくとも何れか一方を取得するガンマ特性取得工程と、
前記ガンマ特性取得工程により取得されたガンマ特性および色空間の少なくとも何れか一方に従って、前記画像信号のガンマ特性および色空間の少なくとも何れか一方を変更する変更工程と、
前記パラメータ取得工程により取得されたパラメータを用いて、前記ガンマ特性および色空間の少なくとも何れか一方が変更された画像信号に対して、前記画像処理を行う画像処理工程と、
を有することを特徴とする画像処理方法。 An input process for inputting an image signal;
A parameter acquisition step for acquiring parameters used when image processing is performed on the image signal in an external image processing device;
A gamma characteristic acquisition step of acquiring at least one of a gamma characteristic and a color space associated with the parameter;
A changing step of changing at least one of the gamma characteristic and the color space of the image signal according to at least one of the gamma characteristic and the color space acquired by the gamma characteristic acquisition step;
An image processing step for performing the image processing on an image signal in which at least one of the gamma characteristic and the color space is changed using the parameter acquired by the parameter acquisition step;
An image processing method comprising:
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013269407A JP6257319B2 (en) | 2013-12-26 | 2013-12-26 | Imaging apparatus and image processing apparatus |
| US15/104,910 US10009588B2 (en) | 2013-12-26 | 2014-12-11 | Image processing apparatus and imaging apparatus |
| PCT/JP2014/083491 WO2015098669A1 (en) | 2013-12-26 | 2014-12-11 | Image processing apparatus and imaging apparatus |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013269407A JP6257319B2 (en) | 2013-12-26 | 2013-12-26 | Imaging apparatus and image processing apparatus |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2015126377A JP2015126377A (en) | 2015-07-06 |
| JP6257319B2 true JP6257319B2 (en) | 2018-01-10 |
Family
ID=53536800
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013269407A Active JP6257319B2 (en) | 2013-12-26 | 2013-12-26 | Imaging apparatus and image processing apparatus |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6257319B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109417588B (en) | 2016-06-27 | 2022-04-15 | 索尼公司 | Signal processing apparatus, signal processing method, camera system, video system, and server |
| JP6848718B2 (en) * | 2016-06-27 | 2021-03-24 | ソニー株式会社 | Signal processing equipment, signal processing methods and video systems |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6136086B2 (en) * | 2011-12-28 | 2017-05-31 | ソニー株式会社 | Imaging apparatus and image processing apparatus |
-
2013
- 2013-12-26 JP JP2013269407A patent/JP6257319B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2015126377A (en) | 2015-07-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2013106284A (en) | Light source estimation device, light source estimation method, light source estimation program, and imaging apparatus | |
| US10009588B2 (en) | Image processing apparatus and imaging apparatus | |
| JP6468868B2 (en) | Image processing apparatus, imaging apparatus, image processing method, and program | |
| JP6057705B2 (en) | IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND PROGRAM | |
| JP6008716B2 (en) | Imaging apparatus, image processing apparatus, image processing system, and control method | |
| KR20140080815A (en) | Photographing apparatus, method for controlling the same, and computer-readable storage medium | |
| JP2002305684A (en) | Imaging system and program | |
| JP6049425B2 (en) | Imaging apparatus, image processing apparatus, and control method | |
| JP6257319B2 (en) | Imaging apparatus and image processing apparatus | |
| JP6576018B2 (en) | Image processing apparatus and imaging apparatus | |
| US20140192239A1 (en) | Image apparatus and imaging method | |
| JP2011091753A (en) | Imaging apparatus, image processing apparatus, and program | |
| JP6265625B2 (en) | Image processing apparatus and image processing method | |
| JP2005268952A (en) | Image pickup apparatus, apparatus, system and method for image processing | |
| US10217196B2 (en) | Image processing apparatus having image refocusing function, control method for image processing apparatus, and storage medium | |
| JP2011244053A (en) | Image processing apparatus, imaging apparatus, and image processing program | |
| JP2010124114A (en) | Digital camera and image data processing program | |
| JP2020036162A (en) | Image processing device, imaging device, image processing method, and program | |
| WO2022079989A1 (en) | Information processing system, information processing device, information processing method, information processing program, imaging device, and control method and control program for imaging device | |
| JP2005269144A (en) | Apparatus, system and method for image processing | |
| JP2010022068A (en) | Electron camera device, color control method, and program | |
| JP6292870B2 (en) | Image processing apparatus, image processing method, and program | |
| JP2014176004A (en) | Imaging apparatus and image processing method | |
| JP6274829B2 (en) | Image processing apparatus and control method thereof | |
| JP2021078051A (en) | Image processing device and image control method, program, and storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161221 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170712 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170808 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170926 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171107 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171205 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6257319 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |