【0001】
【発明の属する技術分野】
本発明は低感度画像と高感度画像の両方を撮像するデジタルカメラとその撮像画像データ記録方法に係り、特に、撮像画像データをRAWデータ(固体撮像素子から出力された撮像画像データで未加工のままの生データ)でメモリに記録するデジタルカメラ及びその撮像画像データ記録方法に関する。
【0002】
【従来の技術】
デジタルスチルカメラやデジタルビデオカメラ等のデジタルカメラでは、固体撮像素子の各画素を構成するフォトダイオードに蓄積される電荷の飽和量が高画素化すなわちフォトダイオードの微細化に伴って小さくなり、撮像画像のダイナミックレンジが狭くなってしまうという欠点を有している。
【0003】
この欠点を克服するため、例えば特開2001―8104号公報記載の従来技術では、固体撮像素子に、高感度画素と低感度画素の2種類の画素を設け、高感度画素から得られた撮像画像データと、低感度画素から得られた撮像画像データとを合成することで、撮像画像のダイナミックレンジを広げるようにしている。
【0004】
また、その一方で、近年の様に固体撮像素子の高画素化が進展してくると、銀塩カメラと同等の画像が撮像されるようになり、このため、固体撮像素子から出力される撮像画像データを、ホワイトバランス補正やガンマ補正,JPEG圧縮などせずに未加工のままRAWデータでメモリに保存し、パーソナルコンピュータ等でこの画像データを読み取り、ホワイトバランス補正やガンマ補正,色調補正などを自分の好みに応じて行いたいというユーザの要望が高くなってきている。このため、デジタルカメラには、RAWデータで画像データを記録するものが増えてきている。
【0005】
【特許文献1】
特開2001―8104号公報
【0006】
【発明が解決しようとする課題】
上述したように低感度画像と高感度画像の両方を撮像するデジタルカメラでは、撮像画像データをRAWデータでメモリに記録する場合、低感度画像の撮像画像データと高感度画像の撮像画像データの両方を記録する様になっている。そして、これらの撮像画像データをメモリから読み出してプリントするプリンタ等の再生装置は、メモリから読み出した高感度画像データと低感度画像データとを合成して広ダイナミックレンジの撮像画像データを生成し、プリント等することになる。
【0007】
しかし、高感度画像と低感度画像の両方を撮像するデジタルカメラが普及する前の既存のプリンタは、高感度画像と低感度画像とを合成する機能を搭載していないため、低感度画像データと高感度画像データとが夫々RAWデータでメモリに記録されていてもそれを利用して広ダイナミックレンジの撮像画像をプリントすることができないという問題がある。
【0008】
本発明の目的は、画像合成機能を搭載していない再生装置でも広ダイナミックレンジの撮像画像を再生することが可能な撮像画像データをRAWデータで記録するデジタルカメラとその撮像画像データ記録方法を提供することにある。
【0009】
【課題を解決するための手段】
上記目的を達成する本発明のデジタルカメラは、高感度画素と低感度画素を有する固体撮像素子と、前記高感度画素から得られた高感度画像データと前記低感度画素から得られた低感度画像データとをRAWデータで記録媒体に記録すると共に前記高感度画像データと前記低感度画像データとを合成した合成画像データをRAWデータで前記記録媒体に記録するRAWデータ記録手段とを備えることを特徴とする。
【0010】
この構成により、画像合成機能を持つ再生装置は、高感度画像データと低感度画像データを読み出して画像合成することで撮像画像を再生でき、画像合成機能を持たない再生装置は、合成画像データを読み込むことで撮像画像を再生することができる。
【0011】
本発明のデジタルカメラの前記RAWデータ記録手段は、前記高感度画像データをRAWデータで記録するときに該高感度画像データを該高感度画像データと前記合成画像データの差分情報で記録することを特徴とする。
【0012】
この構成により、高感度画像データを可逆的に圧縮して記録するため、情報量を損なうことなく記録媒体の必要メモリ容量を削減でき、また、同一記録媒体に記録可能な撮像画像の枚数を多くすることができる。
【0013】
上記目的を達成する本発明のデジタルカメラの撮像画像データ記録方法は、固体撮像素子の高感度画素から得られた高感度画像データと前記固体撮像素子の低感度画素から得られた低感度画像データとをRAWデータで記録媒体に記録すると共に前記高感度画像データと前記低感度画像データとを合成した合成画像データをRAWデータで前記記録媒体に記録することを特徴とする。
【0014】
この構成により、画像合成機能を持つ再生装置は、高感度画像データと低感度画像データを読み出して画像合成することで撮像画像を再生でき、画像合成機能を持たない再生装置は、合成画像データを読み込むことで撮像画像を再生することができる。
【0015】
本発明のデジタルカメラの撮像画像データ記録方法は、更に、前記高感度画像データをRAWデータで記録するときに該高感度画像データを該高感度画像データと前記合成画像データの差分情報で記録することを特徴とする。
【0016】
この構成により、高感度画像データを可逆的に圧縮して記録するため、情報量を損なうことなく記録媒体の必要メモリ容量を削減でき、また、同一記録媒体に記録可能な撮像画像の枚数を多くすることができる。
【0017】
【発明の実施の形態】
以下、本発明の一実施形態を図面を参照して説明する。
【0018】
図1は、本発明の第1実施形態に係るデジタルスチルカメラのブロック構成図である。このデジタルスチルカメラは、CCDやCMOSイメージセンサ等の固体撮像素子10を備える。
【0019】
図2は、この固体撮像素子10の表面模式図である。固体撮像素子10の表面には多数の画素1がアレイ状に配置され、偶数行の各画素1に対して奇数行の各画素1が水平方向に1/2ピッチずらして配置され、各画素1から読み出された信号電荷を垂直方向に転送する垂直転送路(図示せず)が、垂直方向の各画素1を避けるように蛇行配置される構成をとっている。
【0020】
そして、本実施形態に係る固体撮像素子の各画素1は、図示する例では、画素1の面積の約1/4を占める低感度画素2と、残りの約3/4の面積を占める高感度画素3とに分割して設けられ、各低感度画素2の信号電荷と、各高感度画素3の信号電荷とを区別して上記垂直転送路に読み出し転送することができるようになっている。尚、画素1をどのような割合、どの様な位置で分割するかは設計的に決められるものであり、図2は単なる例示に過ぎない。
【0021】
図1に戻り、本実施形態に係るデジタルスチルカメラは、固体撮像素子10の他に、固体撮像素子10から出力されるアナログの高感度画像信号をこの例では10ビットのデジタルデータに変換するA/D変換器11と、固体撮像素子10から出力されるアナログの低感度画像信号をこの例では8ビットのデジタルデータに変換するA/D変換器12と、各A/D変換器11,12から夫々出力される高感度画像データHと低感度画像データLとを合成して広ダイナミックレンジの画像データC’を生成する合成回路13と、合成した撮像画像データC’中のハイライト部分を圧縮するハイライト圧縮処理回路14とを備える。
【0022】
このデジタルスチルカメラは、更に、ハイライト圧縮処理回路14から出力される広ダイナミックレンジの合成画像データCに対してホワイトバランスゲイン補正やガンマ補正を行うゲイン・ガンマ処理回路15と、これら補正後の画像データに対して同時化処理や色差マトリクス演算処理等を行う信号処理回路16と、信号処理回路16の処理後の画像データを例えばJPEG圧縮する等して記録媒体20に記録する記録回路17とを備える。ここまでの構成は、高感度画素と低感度画素を有する固体撮像素子を搭載したデジタルスチルカメラの通常の構成である。
【0023】
本実施形態のデジタルスチルカメラは、JPEG圧縮した撮像画像データの他に、RAWデータでも記録媒体20に画像データを記録できる様にしている。そのため、ゲイン・ガンマ処理前の、A/D変換器11から出力される高感度画像データHと、A/D変換器12から出力される低感度画像データLと、ハイライト圧縮処理回路14から出力される合成画像データCとを取り込んで記録媒体20に記録する記録回路18を備えている。
【0024】
斯かる構成のデジタルスチルカメラでは、デジタルスチルカメラに設けられた手操作スイッチ等(図示せず)でユーザが完成画像記録モードを選択すれば、記録回路17が動作し、広ダイナミックレンジの合成画像データCがゲイン補正,ガンマ補正等された後、JPEG圧縮されて記録媒体20に記録される。この記録モードのときは、記録回路18は動作せず、RAWデータは記録されない。
【0025】
ユーザがRAWデータ記録モードを選択すると、JPEG圧縮した画像データの記録は行われず、上述した3種類のRAWデータが、図3に示す様に、記録媒体20に記録される。
【0026】
図3は、RAWデータで撮像画像データを記録媒体20に記録したときの記録媒体20のデータ構成図である。撮像画像データをRAWデータで記録媒体20に記録するときは、その撮像画像データを示すファイル番号等のファイル情報21と、撮像したときの露光量やシャッタ速度等の撮影情報22と、ハイライト圧縮処理回路14から出力されたゲイン・ガンマ補正処理前のRAWデータである合成画像データ(C)23と、A/D変換器11から出力された高感度画像データ(H)24と、A/D変換器12から出力された低感度画像データ(L)25とが関連付けられて記録される。
【0027】
図4は、画像合成機能付き再生装置の構成図である。この再生装置は、記録媒体20の記録情報を読み取る読取り回路30と、読取り回路30が読み取った高感度画像データ(H)24(図3参照)及び低感度画像データ(L)25を合成する合成回路31と、合成回路31の合成した合成画像データ(C’)からハイライト部分を圧縮するハイライト圧縮処理回路32と、ハイライト圧縮処理回路32から出力される合成画像データ(C)に対してホワイトバランスゲイン補正やガンマ補正を行うゲイン・ガンマ処理回路33と、ゲイン・ガンマ処理回路33から出力される画像データに対して同時化処理や色差マトリクス演算処理等を行う信号処理回路34と、信号処理回路34で処理された画像データをプリント40として印刷する出力回路35とを備えて構成される。
【0028】
この画像合成機能付き再生装置は、機能としては図1に示すデジタルスチルカメラの合成回路13、ハイライト圧縮処理回路14、ゲイン・ガンマ処理回路15、信号処理回路16と同一機能を備えるが、デジタルスチルカメラに比べて各回路が高機能で複雑な処理をより高速に処理することが可能となっており、また、ユーザが任意にゲイン量やガンマ値、色差マトリクスの係数値などのパラメータを操作可能となっている。
【0029】
この様に、記録媒体20に高感度画像データ(H)と低感度画像データ(L)のRAWデータが記録されている場合には、それらのRAWデータを読取り回路30が読み出し、デジタルスチルカメラよりも高機能な合成回路31が合成し、ユーザが所望の補正処理を行って撮像画像をプリントアウトすることができる。
【0030】
図5は、画像合成機能を有さない再生装置の構成図である。この再生装置は、記録媒体20に記録されているRAWデータを読み出す読取り回路36と、読取り回路36の読み取ったRAWデータをゲイン補正やガンマ補正するゲイン・ガンマ処理回路37と、これらの補正後の画像データに対して同時化処理などを行う信号処理回路38と、信号処理後の画像データをプリント40として印刷する出力回路39とを備える。
【0031】
この再生装置は、通常のRAWデータ(高感度画像データと低感度画像データに分けた画像データではなく、1つの標準感度画像データだけのRAWデータ)を読み出してプリントアウトする機能を持つが、記録媒体20に記録されたRAWデータが、高感度画像データと低感度画像データに分けられ、且つ、それ以外のRAWデータがない場合には、プリントアウト処理が不能である。
【0032】
しかしながら、本実施形態に係るデジタルスチルカメラでは、ハイライト圧縮処理回路14から出力される合成画像データ(C)23(図3参照)も高感度画像データ(H)及び低感度画像データ(L)の各RAWデータと共に記録媒体20に記録するため、図5に示す再生装置は、この合成画像データ(C)を標準感度画像データのRAWデータとして読み取り、出力回路39によってプリントアウトする。
【0033】
この様に、本実施形態のデジタルスチルカメラでは、高感度画像データと低感度画像データの夫々のRAWデータの他に、ゲイン補正やガンマ補正前の合成画像データもRAWデータで記録媒体に記録するため、既存の画像合成機能を持たない再生装置でも撮像画像を再生することが可能となる。
【0034】
尚、図4や図5の再生装置は、これを専用ハードウェアにて実現した再生装置であっても、また、パーソナルコンピュータ上で動作するアプリケーションソフトウェアにて実現した再生装置でもよい。
【0035】
図6は、本発明の第2実施形態に係るデジタルスチルカメラのブロック構成図である。基本構成は、図1の第1実施形態と同じであるが、異なるのは、RAWデータの記録回路18の前段に差分回路19を設け、この差分回路19で、A/D変換器11から出力される高感度画像データ(H)とハイライト圧縮処理回路14の出力データ(合成画像データC)との差分情報(H−C)をとり、記録回路18は、この差分情報(H−C)と、A/D変換器12から出力される低感度画像データ(L)と、ハイライト圧縮処理回路14から出力される合成画像データ(C)を撮像画像のRAWデータとして記録する様になっている。
【0036】
図7は、図6の記録回路18が記録媒体20に記録したデータ構成図である。図3と比較すると、高感度画像データ(H)26を差分情報として記録するため、メモリ容量を削減できるという利点がある。即ち、差分回路19は、高感度画像データ(H)の可逆圧縮回路として機能する。
【0037】
図8は、高感度画素と低感度画素を備える固体撮像素子10から出力される信号特性を示すグラフである。低感度画素の出力データ(L)は、レベル“255”で飽和してしまうのに対し、高感度画素の出力データ(H)はレベル“1023”まで飽和しない。そして、ハイライト圧縮後の合成画像データ(C)は、合成前の高感度画像データ(H)との差が小さいため、その差分情報(H−C)の情報量は小さくて済む。
【0038】
第2の実施形態でも、ハイライト圧縮後の合成画像データ(C)を記録媒体20に格納するため、差分情報(H−C)を高感度画像テータ(H)に代えて記録することで、同一の記録媒体20により多くの枚数の撮像画像を記録することが可能となる。尚、画像合成機能付き再生装置では、合成画像データ(C)と差分情報(H−C)とから高感度画像データ(H)を復元する手段が必要となる。
【0039】
【発明の効果】
本発明によれば、高感度画像データと低感度画像データを出力する固体撮像素子を搭載したデジタルスチルカメラの撮像画像をRAWデータで記録媒体に記録したとき、画像合成機能を持った再生装置ではも画像合成機能を持たない再生装置でもこの撮像画像を再生することができ、汎用性が向上する。
【図面の簡単な説明】
【図1】本発明の第1実施形態に係るデジタルスチルカメラのブロック構成図である。
【図2】図1に示す固体撮像素子の表面模式図である。
【図3】本発明の第1実施形態に係るデジタルスチルカメラで撮像した画像データをRAWデータで記録媒体に記録したときのデータ構成図である。
【図4】画像合成機能付き再生装置の一例を示すブロック構成図である。
【図5】画像合成機能を持たない再生装置の一例を示すブロック構成図である。
【図6】本発明の第2実施形態に係るデジタルスチルカメラのブロック構成図である。
【図7】本発明の第2実施形態に係るデジタルスチルカメラで撮像した画像データをRAWデータで記録媒体に記録したときのデータ構成図である。
【図8】図2に示す固体撮像素子から得られる信号の特性図である。
【符号の説明】
1 画素
2 低感度画素
3 高感度画素
10 固体撮像素子
11 A/D変換器(高感度画像のRAWデータを出力)
12 A/D変換器(低感度画像のRAWデータを出力)
13 合成回路
14 ハイライト圧縮処理回路(合成画像のRAWデータを出力)
15 ゲイン・ガンマ処理回路
16 信号処理回路
18 RAWデータの記録回路
19 差分回路
20 記録媒体[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a digital camera that captures both a low-sensitivity image and a high-sensitivity image and a captured image data recording method thereof. In particular, the captured image data is converted to RAW data (raw image data output from a solid-state image sensor). The present invention relates to a digital camera and a captured image data recording method thereof.
[0002]
[Prior art]
In digital cameras such as digital still cameras and digital video cameras, the saturation amount of charge accumulated in the photodiodes that make up each pixel of the solid-state image sensor decreases as the number of pixels increases, that is, the photodiodes become smaller. Has a drawback that the dynamic range becomes narrow.
[0003]
In order to overcome this drawback, for example, in the conventional technique described in Japanese Patent Application Laid-Open No. 2001-8104, a solid-state image sensor is provided with two types of pixels, a high-sensitivity pixel and a low-sensitivity pixel, and a captured image obtained from the high-sensitivity pixel. The dynamic range of the captured image is expanded by combining the data and the captured image data obtained from the low sensitivity pixels.
[0004]
On the other hand, when the number of pixels of a solid-state image sensor increases as in recent years, an image equivalent to that of a silver salt camera is picked up. The image data is saved in raw memory as raw data without white balance correction, gamma correction, JPEG compression, etc., and this image data is read by a personal computer etc., and white balance correction, gamma correction, color tone correction, etc. Users' desire to do according to their own preference is increasing. For this reason, an increasing number of digital cameras record image data as RAW data.
[0005]
[Patent Document 1]
Japanese Patent Laid-Open No. 2001-8104
[Problems to be solved by the invention]
As described above, in the digital camera that captures both the low-sensitivity image and the high-sensitivity image, when the captured image data is recorded in the memory as RAW data, both the captured image data of the low-sensitivity image and the captured image data of the high-sensitivity image are recorded. Is to be recorded. Then, a reproducing apparatus such as a printer that reads out the captured image data from the memory and prints it combines the high-sensitivity image data and the low-sensitivity image data read from the memory to generate captured image data with a wide dynamic range, It will be printed.
[0007]
However, the existing printers before digital cameras that capture both high-sensitivity images and low-sensitivity images do not have a function to synthesize high-sensitivity images and low-sensitivity images. There is a problem that even if high-sensitivity image data is recorded as RAW data in a memory, a captured image with a wide dynamic range cannot be printed using the data.
[0008]
An object of the present invention is to provide a digital camera that records captured image data as RAW data that can reproduce a captured image having a wide dynamic range even with a playback device that does not have an image composition function, and a captured image data recording method thereof. There is to do.
[0009]
[Means for Solving the Problems]
The digital camera of the present invention that achieves the above object includes a solid-state imaging device having high-sensitivity pixels and low-sensitivity pixels, high-sensitivity image data obtained from the high-sensitivity pixels, and low-sensitivity image obtained from the low-sensitivity pixels. RAW data recording means for recording data on a recording medium as RAW data and for recording composite image data obtained by synthesizing the high-sensitivity image data and the low-sensitivity image data on the recording medium as RAW data. And
[0010]
With this configuration, a playback device having an image composition function can reproduce a captured image by reading out high-sensitivity image data and low-sensitivity image data and combining the images, and a playback device that does not have an image composition function can store composite image data. The captured image can be reproduced by reading.
[0011]
The RAW data recording means of the digital camera of the present invention records the high-sensitivity image data as difference information between the high-sensitivity image data and the composite image data when the high-sensitivity image data is recorded as RAW data. Features.
[0012]
With this configuration, high-sensitivity image data is reversibly compressed and recorded, so that the required memory capacity of the recording medium can be reduced without losing the amount of information, and the number of captured images that can be recorded on the same recording medium is increased. can do.
[0013]
A method for recording captured image data of a digital camera according to the present invention that achieves the above object includes high-sensitivity image data obtained from high-sensitivity pixels of a solid-state image sensor and low-sensitivity image data obtained from low-sensitivity pixels of the solid-state image sensor. Are recorded on the recording medium as RAW data, and combined image data obtained by synthesizing the high-sensitivity image data and the low-sensitivity image data is recorded as RAW data on the recording medium.
[0014]
With this configuration, a playback device having an image composition function can reproduce a captured image by reading out high-sensitivity image data and low-sensitivity image data and combining the images, and a playback device that does not have an image composition function can store composite image data. The captured image can be reproduced by reading.
[0015]
According to the digital camera captured image data recording method of the present invention, when the high-sensitivity image data is recorded as RAW data, the high-sensitivity image data is recorded as difference information between the high-sensitivity image data and the composite image data. It is characterized by that.
[0016]
With this configuration, high-sensitivity image data is reversibly compressed and recorded, so that the required memory capacity of the recording medium can be reduced without losing the amount of information, and the number of captured images that can be recorded on the same recording medium is increased. can do.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
[0018]
FIG. 1 is a block diagram of a digital still camera according to the first embodiment of the present invention. This digital still camera includes a solid-state imaging device 10 such as a CCD or a CMOS image sensor.
[0019]
FIG. 2 is a schematic diagram of the surface of the solid-state image sensor 10. A large number of pixels 1 are arranged in an array on the surface of the solid-state imaging device 10, and each pixel 1 in the odd-numbered row is arranged with a ½ pitch shift in the horizontal direction with respect to each pixel 1 in the even-numbered row. A vertical transfer path (not shown) for transferring the signal charges read from the vertical direction is meandering so as to avoid each pixel 1 in the vertical direction.
[0020]
In the illustrated example, each pixel 1 of the solid-state imaging device according to the present embodiment includes a low-sensitivity pixel 2 that occupies about 1/4 of the area of the pixel 1 and a high-sensitivity that occupies the remaining about 3/4. The signal charges of the low-sensitivity pixels 2 and the signal charges of the high-sensitivity pixels 3 can be distinguished from each other and read and transferred to the vertical transfer path. It should be noted that the ratio and the position at which the pixel 1 is divided are determined by design, and FIG. 2 is merely an example.
[0021]
Returning to FIG. 1, the digital still camera according to the present embodiment converts an analog high-sensitivity image signal output from the solid-state image sensor 10 into 10-bit digital data in this example, in addition to the solid-state image sensor 10. A / D converter 11, an A / D converter 12 that converts an analog low-sensitivity image signal output from the solid-state image sensor 10 into 8-bit digital data in this example, and A / D converters 11, 12 Are combined with the high-sensitivity image data H and the low-sensitivity image data L, respectively, to generate image data C ′ having a wide dynamic range, and highlight portions in the combined captured image data C ′ are displayed. And a highlight compression processing circuit 14 for compression.
[0022]
The digital still camera further includes a gain / gamma processing circuit 15 that performs white balance gain correction and gamma correction on the wide dynamic range composite image data C output from the highlight compression processing circuit 14, and the corrected result. A signal processing circuit 16 that performs synchronization processing, color difference matrix calculation processing, and the like on the image data; and a recording circuit 17 that records the image data processed by the signal processing circuit 16 on the recording medium 20 by JPEG compression, for example. Is provided. The configuration so far is a normal configuration of a digital still camera equipped with a solid-state imaging device having high sensitivity pixels and low sensitivity pixels.
[0023]
The digital still camera according to the present embodiment is capable of recording image data on the recording medium 20 using RAW data in addition to JPEG-compressed captured image data. Therefore, the high sensitivity image data H output from the A / D converter 11, the low sensitivity image data L output from the A / D converter 12, and the highlight compression processing circuit 14 before the gain / gamma processing. A recording circuit 18 that captures the output composite image data C and records it on the recording medium 20 is provided.
[0024]
In the digital still camera having such a configuration, when the user selects a completed image recording mode with a manual operation switch or the like (not shown) provided in the digital still camera, the recording circuit 17 operates and a composite image with a wide dynamic range is obtained. After the data C is subjected to gain correction, gamma correction, etc., it is JPEG compressed and recorded on the recording medium 20. In this recording mode, the recording circuit 18 does not operate and RAW data is not recorded.
[0025]
When the user selects the RAW data recording mode, JPEG-compressed image data is not recorded, and the above three types of RAW data are recorded on the recording medium 20 as shown in FIG.
[0026]
FIG. 3 is a data configuration diagram of the recording medium 20 when captured image data is recorded on the recording medium 20 using RAW data. When the captured image data is recorded on the recording medium 20 as RAW data, file information 21 such as a file number indicating the captured image data, shooting information 22 such as an exposure amount and a shutter speed when captured, and highlight compression. Composite image data (C) 23 that is RAW data before gain / gamma correction processing output from the processing circuit 14, high-sensitivity image data (H) 24 output from the A / D converter 11, and A / D The low sensitivity image data (L) 25 output from the converter 12 is recorded in association with it.
[0027]
FIG. 4 is a block diagram of a playback apparatus with an image composition function. This reproducing apparatus combines a reading circuit 30 that reads recorded information on the recording medium 20, and high-sensitivity image data (H) 24 (see FIG. 3) and low-sensitivity image data (L) 25 read by the reading circuit 30. A circuit 31, a highlight compression processing circuit 32 that compresses a highlight portion from the synthesized image data (C ′) synthesized by the synthesis circuit 31, and a synthesized image data (C) output from the highlight compression processing circuit 32 A gain / gamma processing circuit 33 that performs white balance gain correction and gamma correction, a signal processing circuit 34 that performs synchronization processing, color difference matrix calculation processing, and the like on the image data output from the gain / gamma processing circuit 33; And an output circuit 35 that prints the image data processed by the signal processing circuit 34 as a print 40.
[0028]
This playback device with an image synthesis function has the same functions as the synthesis circuit 13, highlight compression processing circuit 14, gain / gamma processing circuit 15 and signal processing circuit 16 of the digital still camera shown in FIG. Compared with a still camera, each circuit has advanced functions and can perform complex processing at a higher speed, and the user can arbitrarily manipulate parameters such as gain amount, gamma value, and color difference matrix coefficient value. It is possible.
[0029]
As described above, when the high-sensitivity image data (H) and the low-sensitivity image data (L) are recorded on the recording medium 20, the reading circuit 30 reads the raw data, and the digital still camera reads them. The high-performance synthesis circuit 31 can synthesize, and the user can perform desired correction processing and print out the captured image.
[0030]
FIG. 5 is a configuration diagram of a playback apparatus that does not have an image composition function. The reproducing apparatus includes a reading circuit 36 that reads RAW data recorded on the recording medium 20, a gain / gamma processing circuit 37 that performs gain correction and gamma correction on the RAW data read by the reading circuit 36, and a circuit after these corrections. A signal processing circuit 38 that performs synchronization processing on the image data and an output circuit 39 that prints the image data after the signal processing as a print 40 are provided.
[0031]
This playback device has a function of reading out and printing out normal RAW data (RAW data of only one standard sensitivity image data, not image data divided into high sensitivity image data and low sensitivity image data). If the RAW data recorded on the medium 20 is divided into high-sensitivity image data and low-sensitivity image data, and there is no other RAW data, the printout process is impossible.
[0032]
However, in the digital still camera according to the present embodiment, the composite image data (C) 23 (see FIG. 3) output from the highlight compression processing circuit 14 is also the high sensitivity image data (H) and the low sensitivity image data (L). 5, the reproducing apparatus shown in FIG. 5 reads the composite image data (C) as RAW data of standard sensitivity image data, and prints it out by the output circuit 39.
[0033]
As described above, in the digital still camera of this embodiment, in addition to the RAW data of the high-sensitivity image data and the low-sensitivity image data, the composite image data before gain correction and gamma correction is recorded on the recording medium as RAW data. Therefore, the captured image can be reproduced even by a reproduction device that does not have an existing image composition function.
[0034]
4 and FIG. 5 may be a playback device realized by dedicated hardware or a playback device realized by application software running on a personal computer.
[0035]
FIG. 6 is a block diagram of a digital still camera according to the second embodiment of the present invention. The basic configuration is the same as that of the first embodiment shown in FIG. 1 except that a difference circuit 19 is provided in the preceding stage of the RAW data recording circuit 18 and is output from the A / D converter 11 by the difference circuit 19. The difference information (HC) between the high-sensitivity image data (H) to be output and the output data (composite image data C) of the highlight compression processing circuit 14 is taken, and the recording circuit 18 takes this difference information (HC). The low-sensitivity image data (L) output from the A / D converter 12 and the composite image data (C) output from the highlight compression processing circuit 14 are recorded as RAW data of the captured image. Yes.
[0036]
FIG. 7 is a data configuration diagram recorded on the recording medium 20 by the recording circuit 18 of FIG. Compared with FIG. 3, since the high-sensitivity image data (H) 26 is recorded as difference information, there is an advantage that the memory capacity can be reduced. That is, the difference circuit 19 functions as a reversible compression circuit for high-sensitivity image data (H).
[0037]
FIG. 8 is a graph showing signal characteristics output from the solid-state imaging device 10 including high-sensitivity pixels and low-sensitivity pixels. The output data (L) of the low sensitivity pixel is saturated at the level “255”, whereas the output data (H) of the high sensitivity pixel is not saturated until the level “1023”. The composite image data (C) after highlight compression has a small difference from the high-sensitivity image data (H) before synthesis, so that the information amount of the difference information (HC) can be small.
[0038]
Also in the second embodiment, since the composite image data (C) after highlight compression is stored in the recording medium 20, the difference information (HC) is recorded instead of the high-sensitivity image data (H). A large number of captured images can be recorded on the same recording medium 20. Note that the reproduction apparatus with an image composition function requires means for restoring the high sensitivity image data (H) from the composite image data (C) and the difference information (HC).
[0039]
【The invention's effect】
According to the present invention, when a captured image of a digital still camera equipped with a solid-state imaging device that outputs high-sensitivity image data and low-sensitivity image data is recorded on a recording medium as RAW data, a playback device having an image composition function is used. However, even a playback device that does not have an image composition function can play back this captured image, improving versatility.
[Brief description of the drawings]
FIG. 1 is a block diagram of a digital still camera according to a first embodiment of the present invention.
FIG. 2 is a schematic surface view of the solid-state imaging device shown in FIG.
FIG. 3 is a data configuration diagram when image data captured by the digital still camera according to the first embodiment of the present invention is recorded on a recording medium as RAW data.
FIG. 4 is a block diagram showing an example of a playback apparatus with an image composition function.
FIG. 5 is a block diagram showing an example of a playback apparatus that does not have an image composition function.
FIG. 6 is a block diagram of a digital still camera according to a second embodiment of the present invention.
FIG. 7 is a data configuration diagram when image data captured by a digital still camera according to a second embodiment of the present invention is recorded on a recording medium as RAW data.
FIG. 8 is a characteristic diagram of a signal obtained from the solid-state imaging device shown in FIG.
[Explanation of symbols]
1 pixel 2 low-sensitivity pixel 3 high-sensitivity pixel 10 solid-state imaging device 11 A / D converter (outputs RAW data of high-sensitivity image)
12 A / D converter (low-sensitivity image RAW data is output)
13 Compositing circuit 14 Highlight compression processing circuit (outputs RAW data of composite image)
15 Gain / gamma processing circuit 16 Signal processing circuit 18 Raw data recording circuit 19 Difference circuit 20 Recording medium