【０００１】
【発明の属する技術分野】
本発明は低感度画像と高感度画像の両方を撮像するデジタルカメラとその撮像画像データ記録方法に係り、特に、撮像画像データをＲＡＷデータ（固体撮像素子から出力された撮像画像データで未加工のままの生データ）でメモリに記録するデジタルカメラ及びその撮像画像データ記録方法に関する。
【０００２】
【従来の技術】
デジタルスチルカメラやデジタルビデオカメラ等のデジタルカメラでは、固体撮像素子の各画素を構成するフォトダイオードに蓄積される電荷の飽和量が高画素化すなわちフォトダイオードの微細化に伴って小さくなり、撮像画像のダイナミックレンジが狭くなってしまうという欠点を有している。
【０００３】
この欠点を克服するため、例えば特開２００１―８１０４号公報記載の従来技術では、固体撮像素子に、高感度画素と低感度画素の２種類の画素を設け、高感度画素から得られた撮像画像データと、低感度画素から得られた撮像画像データとを合成することで、撮像画像のダイナミックレンジを広げるようにしている。
【０００４】
また、その一方で、近年の様に固体撮像素子の高画素化が進展してくると、銀塩カメラと同等の画像が撮像されるようになり、このため、固体撮像素子から出力される撮像画像データを、ホワイトバランス補正やガンマ補正，ＪＰＥＧ圧縮などせずに未加工のままＲＡＷデータでメモリに保存し、パーソナルコンピュータ等でこの画像データを読み取り、ホワイトバランス補正やガンマ補正，色調補正などを自分の好みに応じて行いたいというユーザの要望が高くなってきている。このため、デジタルカメラには、ＲＡＷデータで画像データを記録するものが増えてきている。
【０００５】
【特許文献１】
特開２００１―８１０４号公報
【０００６】
【発明が解決しようとする課題】
上述したように低感度画像と高感度画像の両方を撮像するデジタルカメラでは、撮像画像データをＲＡＷデータでメモリに記録する場合、低感度画像の撮像画像データと高感度画像の撮像画像データの両方を記録する様になっている。そして、これらの撮像画像データをメモリから読み出してプリントするプリンタ等の再生装置は、メモリから読み出した高感度画像データと低感度画像データとを合成して広ダイナミックレンジの撮像画像データを生成し、プリント等することになる。
【０００７】
しかし、高感度画像と低感度画像の両方を撮像するデジタルカメラが普及する前の既存のプリンタは、高感度画像と低感度画像とを合成する機能を搭載していないため、低感度画像データと高感度画像データとが夫々ＲＡＷデータでメモリに記録されていてもそれを利用して広ダイナミックレンジの撮像画像をプリントすることができないという問題がある。
【０００８】
本発明の目的は、画像合成機能を搭載していない再生装置でも広ダイナミックレンジの撮像画像を再生することが可能な撮像画像データをＲＡＷデータで記録するデジタルカメラとその撮像画像データ記録方法を提供することにある。
【０００９】
【課題を解決するための手段】
上記目的を達成する本発明のデジタルカメラは、高感度画素と低感度画素を有する固体撮像素子と、前記高感度画素から得られた高感度画像データと前記低感度画素から得られた低感度画像データとをＲＡＷデータで記録媒体に記録すると共に前記高感度画像データと前記低感度画像データとを合成した合成画像データをＲＡＷデータで前記記録媒体に記録するＲＡＷデータ記録手段とを備えることを特徴とする。
【００１０】
この構成により、画像合成機能を持つ再生装置は、高感度画像データと低感度画像データを読み出して画像合成することで撮像画像を再生でき、画像合成機能を持たない再生装置は、合成画像データを読み込むことで撮像画像を再生することができる。
【００１１】
本発明のデジタルカメラの前記ＲＡＷデータ記録手段は、前記高感度画像データをＲＡＷデータで記録するときに該高感度画像データを該高感度画像データと前記合成画像データの差分情報で記録することを特徴とする。
【００１２】
この構成により、高感度画像データを可逆的に圧縮して記録するため、情報量を損なうことなく記録媒体の必要メモリ容量を削減でき、また、同一記録媒体に記録可能な撮像画像の枚数を多くすることができる。
【００１３】
上記目的を達成する本発明のデジタルカメラの撮像画像データ記録方法は、固体撮像素子の高感度画素から得られた高感度画像データと前記固体撮像素子の低感度画素から得られた低感度画像データとをＲＡＷデータで記録媒体に記録すると共に前記高感度画像データと前記低感度画像データとを合成した合成画像データをＲＡＷデータで前記記録媒体に記録することを特徴とする。
【００１４】
この構成により、画像合成機能を持つ再生装置は、高感度画像データと低感度画像データを読み出して画像合成することで撮像画像を再生でき、画像合成機能を持たない再生装置は、合成画像データを読み込むことで撮像画像を再生することができる。
【００１５】
本発明のデジタルカメラの撮像画像データ記録方法は、更に、前記高感度画像データをＲＡＷデータで記録するときに該高感度画像データを該高感度画像データと前記合成画像データの差分情報で記録することを特徴とする。
【００１６】
この構成により、高感度画像データを可逆的に圧縮して記録するため、情報量を損なうことなく記録媒体の必要メモリ容量を削減でき、また、同一記録媒体に記録可能な撮像画像の枚数を多くすることができる。
【００１７】
【発明の実施の形態】
以下、本発明の一実施形態を図面を参照して説明する。
【００１８】
図１は、本発明の第１実施形態に係るデジタルスチルカメラのブロック構成図である。このデジタルスチルカメラは、ＣＣＤやＣＭＯＳイメージセンサ等の固体撮像素子１０を備える。
【００１９】
図２は、この固体撮像素子１０の表面模式図である。固体撮像素子１０の表面には多数の画素１がアレイ状に配置され、偶数行の各画素１に対して奇数行の各画素１が水平方向に１／２ピッチずらして配置され、各画素１から読み出された信号電荷を垂直方向に転送する垂直転送路（図示せず）が、垂直方向の各画素１を避けるように蛇行配置される構成をとっている。
【００２０】
そして、本実施形態に係る固体撮像素子の各画素１は、図示する例では、画素１の面積の約１／４を占める低感度画素２と、残りの約３／４の面積を占める高感度画素３とに分割して設けられ、各低感度画素２の信号電荷と、各高感度画素３の信号電荷とを区別して上記垂直転送路に読み出し転送することができるようになっている。尚、画素１をどのような割合、どの様な位置で分割するかは設計的に決められるものであり、図２は単なる例示に過ぎない。
【００２１】
図１に戻り、本実施形態に係るデジタルスチルカメラは、固体撮像素子１０の他に、固体撮像素子１０から出力されるアナログの高感度画像信号をこの例では１０ビットのデジタルデータに変換するＡ／Ｄ変換器１１と、固体撮像素子１０から出力されるアナログの低感度画像信号をこの例では８ビットのデジタルデータに変換するＡ／Ｄ変換器１２と、各Ａ／Ｄ変換器１１，１２から夫々出力される高感度画像データＨと低感度画像データＬとを合成して広ダイナミックレンジの画像データＣ’を生成する合成回路１３と、合成した撮像画像データＣ’中のハイライト部分を圧縮するハイライト圧縮処理回路１４とを備える。
【００２２】
このデジタルスチルカメラは、更に、ハイライト圧縮処理回路１４から出力される広ダイナミックレンジの合成画像データＣに対してホワイトバランスゲイン補正やガンマ補正を行うゲイン・ガンマ処理回路１５と、これら補正後の画像データに対して同時化処理や色差マトリクス演算処理等を行う信号処理回路１６と、信号処理回路１６の処理後の画像データを例えばＪＰＥＧ圧縮する等して記録媒体２０に記録する記録回路１７とを備える。ここまでの構成は、高感度画素と低感度画素を有する固体撮像素子を搭載したデジタルスチルカメラの通常の構成である。
【００２３】
本実施形態のデジタルスチルカメラは、ＪＰＥＧ圧縮した撮像画像データの他に、ＲＡＷデータでも記録媒体２０に画像データを記録できる様にしている。そのため、ゲイン・ガンマ処理前の、Ａ／Ｄ変換器１１から出力される高感度画像データＨと、Ａ／Ｄ変換器１２から出力される低感度画像データＬと、ハイライト圧縮処理回路１４から出力される合成画像データＣとを取り込んで記録媒体２０に記録する記録回路１８を備えている。
【００２４】
斯かる構成のデジタルスチルカメラでは、デジタルスチルカメラに設けられた手操作スイッチ等（図示せず）でユーザが完成画像記録モードを選択すれば、記録回路１７が動作し、広ダイナミックレンジの合成画像データＣがゲイン補正，ガンマ補正等された後、ＪＰＥＧ圧縮されて記録媒体２０に記録される。この記録モードのときは、記録回路１８は動作せず、ＲＡＷデータは記録されない。
【００２５】
ユーザがＲＡＷデータ記録モードを選択すると、ＪＰＥＧ圧縮した画像データの記録は行われず、上述した３種類のＲＡＷデータが、図３に示す様に、記録媒体２０に記録される。
【００２６】
図３は、ＲＡＷデータで撮像画像データを記録媒体２０に記録したときの記録媒体２０のデータ構成図である。撮像画像データをＲＡＷデータで記録媒体２０に記録するときは、その撮像画像データを示すファイル番号等のファイル情報２１と、撮像したときの露光量やシャッタ速度等の撮影情報２２と、ハイライト圧縮処理回路１４から出力されたゲイン・ガンマ補正処理前のＲＡＷデータである合成画像データ（Ｃ）２３と、Ａ／Ｄ変換器１１から出力された高感度画像データ（Ｈ）２４と、Ａ／Ｄ変換器１２から出力された低感度画像データ（Ｌ）２５とが関連付けられて記録される。
【００２７】
図４は、画像合成機能付き再生装置の構成図である。この再生装置は、記録媒体２０の記録情報を読み取る読取り回路３０と、読取り回路３０が読み取った高感度画像データ（Ｈ）２４（図３参照）及び低感度画像データ（Ｌ）２５を合成する合成回路３１と、合成回路３１の合成した合成画像データ（Ｃ’）からハイライト部分を圧縮するハイライト圧縮処理回路３２と、ハイライト圧縮処理回路３２から出力される合成画像データ（Ｃ）に対してホワイトバランスゲイン補正やガンマ補正を行うゲイン・ガンマ処理回路３３と、ゲイン・ガンマ処理回路３３から出力される画像データに対して同時化処理や色差マトリクス演算処理等を行う信号処理回路３４と、信号処理回路３４で処理された画像データをプリント４０として印刷する出力回路３５とを備えて構成される。
【００２８】
この画像合成機能付き再生装置は、機能としては図１に示すデジタルスチルカメラの合成回路１３、ハイライト圧縮処理回路１４、ゲイン・ガンマ処理回路１５、信号処理回路１６と同一機能を備えるが、デジタルスチルカメラに比べて各回路が高機能で複雑な処理をより高速に処理することが可能となっており、また、ユーザが任意にゲイン量やガンマ値、色差マトリクスの係数値などのパラメータを操作可能となっている。
【００２９】
この様に、記録媒体２０に高感度画像データ（Ｈ）と低感度画像データ（Ｌ）のＲＡＷデータが記録されている場合には、それらのＲＡＷデータを読取り回路３０が読み出し、デジタルスチルカメラよりも高機能な合成回路３１が合成し、ユーザが所望の補正処理を行って撮像画像をプリントアウトすることができる。
【００３０】
図５は、画像合成機能を有さない再生装置の構成図である。この再生装置は、記録媒体２０に記録されているＲＡＷデータを読み出す読取り回路３６と、読取り回路３６の読み取ったＲＡＷデータをゲイン補正やガンマ補正するゲイン・ガンマ処理回路３７と、これらの補正後の画像データに対して同時化処理などを行う信号処理回路３８と、信号処理後の画像データをプリント４０として印刷する出力回路３９とを備える。
【００３１】
この再生装置は、通常のＲＡＷデータ（高感度画像データと低感度画像データに分けた画像データではなく、１つの標準感度画像データだけのＲＡＷデータ）を読み出してプリントアウトする機能を持つが、記録媒体２０に記録されたＲＡＷデータが、高感度画像データと低感度画像データに分けられ、且つ、それ以外のＲＡＷデータがない場合には、プリントアウト処理が不能である。
【００３２】
しかしながら、本実施形態に係るデジタルスチルカメラでは、ハイライト圧縮処理回路１４から出力される合成画像データ（Ｃ）２３（図３参照）も高感度画像データ（Ｈ）及び低感度画像データ（Ｌ）の各ＲＡＷデータと共に記録媒体２０に記録するため、図５に示す再生装置は、この合成画像データ（Ｃ）を標準感度画像データのＲＡＷデータとして読み取り、出力回路３９によってプリントアウトする。
【００３３】
この様に、本実施形態のデジタルスチルカメラでは、高感度画像データと低感度画像データの夫々のＲＡＷデータの他に、ゲイン補正やガンマ補正前の合成画像データもＲＡＷデータで記録媒体に記録するため、既存の画像合成機能を持たない再生装置でも撮像画像を再生することが可能となる。
【００３４】
尚、図４や図５の再生装置は、これを専用ハードウェアにて実現した再生装置であっても、また、パーソナルコンピュータ上で動作するアプリケーションソフトウェアにて実現した再生装置でもよい。
【００３５】
図６は、本発明の第２実施形態に係るデジタルスチルカメラのブロック構成図である。基本構成は、図１の第１実施形態と同じであるが、異なるのは、ＲＡＷデータの記録回路１８の前段に差分回路１９を設け、この差分回路１９で、Ａ／Ｄ変換器１１から出力される高感度画像データ（Ｈ）とハイライト圧縮処理回路１４の出力データ（合成画像データＣ）との差分情報（Ｈ−Ｃ）をとり、記録回路１８は、この差分情報（Ｈ−Ｃ）と、Ａ／Ｄ変換器１２から出力される低感度画像データ（Ｌ）と、ハイライト圧縮処理回路１４から出力される合成画像データ（Ｃ）を撮像画像のＲＡＷデータとして記録する様になっている。
【００３６】
図７は、図６の記録回路１８が記録媒体２０に記録したデータ構成図である。図３と比較すると、高感度画像データ（Ｈ）２６を差分情報として記録するため、メモリ容量を削減できるという利点がある。即ち、差分回路１９は、高感度画像データ（Ｈ）の可逆圧縮回路として機能する。
【００３７】
図８は、高感度画素と低感度画素を備える固体撮像素子１０から出力される信号特性を示すグラフである。低感度画素の出力データ（Ｌ）は、レベル“２５５”で飽和してしまうのに対し、高感度画素の出力データ（Ｈ）はレベル“１０２３”まで飽和しない。そして、ハイライト圧縮後の合成画像データ（Ｃ）は、合成前の高感度画像データ（Ｈ）との差が小さいため、その差分情報（Ｈ−Ｃ）の情報量は小さくて済む。
【００３８】
第２の実施形態でも、ハイライト圧縮後の合成画像データ（Ｃ）を記録媒体２０に格納するため、差分情報（Ｈ−Ｃ）を高感度画像テータ（Ｈ）に代えて記録することで、同一の記録媒体２０により多くの枚数の撮像画像を記録することが可能となる。尚、画像合成機能付き再生装置では、合成画像データ（Ｃ）と差分情報（Ｈ−Ｃ）とから高感度画像データ（Ｈ）を復元する手段が必要となる。
【００３９】
【発明の効果】
本発明によれば、高感度画像データと低感度画像データを出力する固体撮像素子を搭載したデジタルスチルカメラの撮像画像をＲＡＷデータで記録媒体に記録したとき、画像合成機能を持った再生装置ではも画像合成機能を持たない再生装置でもこの撮像画像を再生することができ、汎用性が向上する。
【図面の簡単な説明】
【図１】本発明の第１実施形態に係るデジタルスチルカメラのブロック構成図である。
【図２】図１に示す固体撮像素子の表面模式図である。
【図３】本発明の第１実施形態に係るデジタルスチルカメラで撮像した画像データをＲＡＷデータで記録媒体に記録したときのデータ構成図である。
【図４】画像合成機能付き再生装置の一例を示すブロック構成図である。
【図５】画像合成機能を持たない再生装置の一例を示すブロック構成図である。
【図６】本発明の第２実施形態に係るデジタルスチルカメラのブロック構成図である。
【図７】本発明の第２実施形態に係るデジタルスチルカメラで撮像した画像データをＲＡＷデータで記録媒体に記録したときのデータ構成図である。
【図８】図２に示す固体撮像素子から得られる信号の特性図である。
【符号の説明】
１ 画素
２ 低感度画素
３ 高感度画素
１０ 固体撮像素子
１１ Ａ／Ｄ変換器（高感度画像のＲＡＷデータを出力）
１２ Ａ／Ｄ変換器（低感度画像のＲＡＷデータを出力）
１３ 合成回路
１４ ハイライト圧縮処理回路（合成画像のＲＡＷデータを出力）
１５ ゲイン・ガンマ処理回路
１６ 信号処理回路
１８ ＲＡＷデータの記録回路
１９ 差分回路
２０ 記録媒体[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a digital camera that captures both a low-sensitivity image and a high-sensitivity image and a captured image data recording method thereof. In particular, the captured image data is converted to RAW data (raw image data output from a solid-state image sensor). The present invention relates to a digital camera and a captured image data recording method thereof.
[0002]
[Prior art]
In digital cameras such as digital still cameras and digital video cameras, the saturation amount of charge accumulated in the photodiodes that make up each pixel of the solid-state image sensor decreases as the number of pixels increases, that is, the photodiodes become smaller. Has a drawback that the dynamic range becomes narrow.
[0003]
In order to overcome this drawback, for example, in the conventional technique described in Japanese Patent Application Laid-Open No. 2001-8104, a solid-state image sensor is provided with two types of pixels, a high-sensitivity pixel and a low-sensitivity pixel, and a captured image obtained from the high-sensitivity pixel. The dynamic range of the captured image is expanded by combining the data and the captured image data obtained from the low sensitivity pixels.
[0004]
On the other hand, when the number of pixels of a solid-state image sensor increases as in recent years, an image equivalent to that of a silver salt camera is picked up. The image data is saved in raw memory as raw data without white balance correction, gamma correction, JPEG compression, etc., and this image data is read by a personal computer etc., and white balance correction, gamma correction, color tone correction, etc. Users' desire to do according to their own preference is increasing. For this reason, an increasing number of digital cameras record image data as RAW data.
[0005]
[Patent Document 1]
Japanese Patent Laid-Open No. 2001-8104
[Problems to be solved by the invention]
As described above, in the digital camera that captures both the low-sensitivity image and the high-sensitivity image, when the captured image data is recorded in the memory as RAW data, both the captured image data of the low-sensitivity image and the captured image data of the high-sensitivity image are recorded. Is to be recorded. Then, a reproducing apparatus such as a printer that reads out the captured image data from the memory and prints it combines the high-sensitivity image data and the low-sensitivity image data read from the memory to generate captured image data with a wide dynamic range, It will be printed.
[0007]
However, the existing printers before digital cameras that capture both high-sensitivity images and low-sensitivity images do not have a function to synthesize high-sensitivity images and low-sensitivity images. There is a problem that even if high-sensitivity image data is recorded as RAW data in a memory, a captured image with a wide dynamic range cannot be printed using the data.
[0008]
An object of the present invention is to provide a digital camera that records captured image data as RAW data that can reproduce a captured image having a wide dynamic range even with a playback device that does not have an image composition function, and a captured image data recording method thereof. There is to do.
[0009]
[Means for Solving the Problems]
The digital camera of the present invention that achieves the above object includes a solid-state imaging device having high-sensitivity pixels and low-sensitivity pixels, high-sensitivity image data obtained from the high-sensitivity pixels, and low-sensitivity image obtained from the low-sensitivity pixels. RAW data recording means for recording data on a recording medium as RAW data and for recording composite image data obtained by synthesizing the high-sensitivity image data and the low-sensitivity image data on the recording medium as RAW data. And
[0010]
With this configuration, a playback device having an image composition function can reproduce a captured image by reading out high-sensitivity image data and low-sensitivity image data and combining the images, and a playback device that does not have an image composition function can store composite image data. The captured image can be reproduced by reading.
[0011]
The RAW data recording means of the digital camera of the present invention records the high-sensitivity image data as difference information between the high-sensitivity image data and the composite image data when the high-sensitivity image data is recorded as RAW data. Features.
[0012]
With this configuration, high-sensitivity image data is reversibly compressed and recorded, so that the required memory capacity of the recording medium can be reduced without losing the amount of information, and the number of captured images that can be recorded on the same recording medium is increased. can do.
[0013]
A method for recording captured image data of a digital camera according to the present invention that achieves the above object includes high-sensitivity image data obtained from high-sensitivity pixels of a solid-state image sensor and low-sensitivity image data obtained from low-sensitivity pixels of the solid-state image sensor. Are recorded on the recording medium as RAW data, and combined image data obtained by synthesizing the high-sensitivity image data and the low-sensitivity image data is recorded as RAW data on the recording medium.
[0014]
With this configuration, a playback device having an image composition function can reproduce a captured image by reading out high-sensitivity image data and low-sensitivity image data and combining the images, and a playback device that does not have an image composition function can store composite image data. The captured image can be reproduced by reading.
[0015]
According to the digital camera captured image data recording method of the present invention, when the high-sensitivity image data is recorded as RAW data, the high-sensitivity image data is recorded as difference information between the high-sensitivity image data and the composite image data. It is characterized by that.
[0016]
With this configuration, high-sensitivity image data is reversibly compressed and recorded, so that the required memory capacity of the recording medium can be reduced without losing the amount of information, and the number of captured images that can be recorded on the same recording medium is increased. can do.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
[0018]
FIG. 1 is a block diagram of a digital still camera according to the first embodiment of the present invention. This digital still camera includes a solid-state imaging device 10 such as a CCD or a CMOS image sensor.
[0019]
FIG. 2 is a schematic diagram of the surface of the solid-state image sensor 10. A large number of pixels 1 are arranged in an array on the surface of the solid-state imaging device 10, and each pixel 1 in the odd-numbered row is arranged with a ½ pitch shift in the horizontal direction with respect to each pixel 1 in the even-numbered row. A vertical transfer path (not shown) for transferring the signal charges read from the vertical direction is meandering so as to avoid each pixel 1 in the vertical direction.
[0020]
In the illustrated example, each pixel 1 of the solid-state imaging device according to the present embodiment includes a low-sensitivity pixel 2 that occupies about 1/4 of the area of the pixel 1 and a high-sensitivity that occupies the remaining about 3/4. The signal charges of the low-sensitivity pixels 2 and the signal charges of the high-sensitivity pixels 3 can be distinguished from each other and read and transferred to the vertical transfer path. It should be noted that the ratio and the position at which the pixel 1 is divided are determined by design, and FIG. 2 is merely an example.
[0021]
Returning to FIG. 1, the digital still camera according to the present embodiment converts an analog high-sensitivity image signal output from the solid-state image sensor 10 into 10-bit digital data in this example, in addition to the solid-state image sensor 10. A / D converter 11, an A / D converter 12 that converts an analog low-sensitivity image signal output from the solid-state image sensor 10 into 8-bit digital data in this example, and A / D converters 11, 12 Are combined with the high-sensitivity image data H and the low-sensitivity image data L, respectively, to generate image data C ′ having a wide dynamic range, and highlight portions in the combined captured image data C ′ are displayed. And a highlight compression processing circuit 14 for compression.
[0022]
The digital still camera further includes a gain / gamma processing circuit 15 that performs white balance gain correction and gamma correction on the wide dynamic range composite image data C output from the highlight compression processing circuit 14, and the corrected result. A signal processing circuit 16 that performs synchronization processing, color difference matrix calculation processing, and the like on the image data; and a recording circuit 17 that records the image data processed by the signal processing circuit 16 on the recording medium 20 by JPEG compression, for example. Is provided. The configuration so far is a normal configuration of a digital still camera equipped with a solid-state imaging device having high sensitivity pixels and low sensitivity pixels.
[0023]
The digital still camera according to the present embodiment is capable of recording image data on the recording medium 20 using RAW data in addition to JPEG-compressed captured image data. Therefore, the high sensitivity image data H output from the A / D converter 11, the low sensitivity image data L output from the A / D converter 12, and the highlight compression processing circuit 14 before the gain / gamma processing. A recording circuit 18 that captures the output composite image data C and records it on the recording medium 20 is provided.
[0024]
In the digital still camera having such a configuration, when the user selects a completed image recording mode with a manual operation switch or the like (not shown) provided in the digital still camera, the recording circuit 17 operates and a composite image with a wide dynamic range is obtained. After the data C is subjected to gain correction, gamma correction, etc., it is JPEG compressed and recorded on the recording medium 20. In this recording mode, the recording circuit 18 does not operate and RAW data is not recorded.
[0025]
When the user selects the RAW data recording mode, JPEG-compressed image data is not recorded, and the above three types of RAW data are recorded on the recording medium 20 as shown in FIG.
[0026]
FIG. 3 is a data configuration diagram of the recording medium 20 when captured image data is recorded on the recording medium 20 using RAW data. When the captured image data is recorded on the recording medium 20 as RAW data, file information 21 such as a file number indicating the captured image data, shooting information 22 such as an exposure amount and a shutter speed when captured, and highlight compression. Composite image data (C) 23 that is RAW data before gain / gamma correction processing output from the processing circuit 14, high-sensitivity image data (H) 24 output from the A / D converter 11, and A / D The low sensitivity image data (L) 25 output from the converter 12 is recorded in association with it.
[0027]
FIG. 4 is a block diagram of a playback apparatus with an image composition function. This reproducing apparatus combines a reading circuit 30 that reads recorded information on the recording medium 20, and high-sensitivity image data (H) 24 (see FIG. 3) and low-sensitivity image data (L) 25 read by the reading circuit 30. A circuit 31, a highlight compression processing circuit 32 that compresses a highlight portion from the synthesized image data (C ′) synthesized by the synthesis circuit 31, and a synthesized image data (C) output from the highlight compression processing circuit 32 A gain / gamma processing circuit 33 that performs white balance gain correction and gamma correction, a signal processing circuit 34 that performs synchronization processing, color difference matrix calculation processing, and the like on the image data output from the gain / gamma processing circuit 33; And an output circuit 35 that prints the image data processed by the signal processing circuit 34 as a print 40.
[0028]
This playback device with an image synthesis function has the same functions as the synthesis circuit 13, highlight compression processing circuit 14, gain / gamma processing circuit 15 and signal processing circuit 16 of the digital still camera shown in FIG. Compared with a still camera, each circuit has advanced functions and can perform complex processing at a higher speed, and the user can arbitrarily manipulate parameters such as gain amount, gamma value, and color difference matrix coefficient value. It is possible.
[0029]
As described above, when the high-sensitivity image data (H) and the low-sensitivity image data (L) are recorded on the recording medium 20, the reading circuit 30 reads the raw data, and the digital still camera reads them. The high-performance synthesis circuit 31 can synthesize, and the user can perform desired correction processing and print out the captured image.
[0030]
FIG. 5 is a configuration diagram of a playback apparatus that does not have an image composition function. The reproducing apparatus includes a reading circuit 36 that reads RAW data recorded on the recording medium 20, a gain / gamma processing circuit 37 that performs gain correction and gamma correction on the RAW data read by the reading circuit 36, and a circuit after these corrections. A signal processing circuit 38 that performs synchronization processing on the image data and an output circuit 39 that prints the image data after the signal processing as a print 40 are provided.
[0031]
This playback device has a function of reading out and printing out normal RAW data (RAW data of only one standard sensitivity image data, not image data divided into high sensitivity image data and low sensitivity image data). If the RAW data recorded on the medium 20 is divided into high-sensitivity image data and low-sensitivity image data, and there is no other RAW data, the printout process is impossible.
[0032]
However, in the digital still camera according to the present embodiment, the composite image data (C) 23 (see FIG. 3) output from the highlight compression processing circuit 14 is also the high sensitivity image data (H) and the low sensitivity image data (L). 5, the reproducing apparatus shown in FIG. 5 reads the composite image data (C) as RAW data of standard sensitivity image data, and prints it out by the output circuit 39.
[0033]
As described above, in the digital still camera of this embodiment, in addition to the RAW data of the high-sensitivity image data and the low-sensitivity image data, the composite image data before gain correction and gamma correction is recorded on the recording medium as RAW data. Therefore, the captured image can be reproduced even by a reproduction device that does not have an existing image composition function.
[0034]
4 and FIG. 5 may be a playback device realized by dedicated hardware or a playback device realized by application software running on a personal computer.
[0035]
FIG. 6 is a block diagram of a digital still camera according to the second embodiment of the present invention. The basic configuration is the same as that of the first embodiment shown in FIG. 1 except that a difference circuit 19 is provided in the preceding stage of the RAW data recording circuit 18 and is output from the A / D converter 11 by the difference circuit 19. The difference information (HC) between the high-sensitivity image data (H) to be output and the output data (composite image data C) of the highlight compression processing circuit 14 is taken, and the recording circuit 18 takes this difference information (HC). The low-sensitivity image data (L) output from the A / D converter 12 and the composite image data (C) output from the highlight compression processing circuit 14 are recorded as RAW data of the captured image. Yes.
[0036]
FIG. 7 is a data configuration diagram recorded on the recording medium 20 by the recording circuit 18 of FIG. Compared with FIG. 3, since the high-sensitivity image data (H) 26 is recorded as difference information, there is an advantage that the memory capacity can be reduced. That is, the difference circuit 19 functions as a reversible compression circuit for high-sensitivity image data (H).
[0037]
FIG. 8 is a graph showing signal characteristics output from the solid-state imaging device 10 including high-sensitivity pixels and low-sensitivity pixels. The output data (L) of the low sensitivity pixel is saturated at the level “255”, whereas the output data (H) of the high sensitivity pixel is not saturated until the level “1023”. The composite image data (C) after highlight compression has a small difference from the high-sensitivity image data (H) before synthesis, so that the information amount of the difference information (HC) can be small.
[0038]
Also in the second embodiment, since the composite image data (C) after highlight compression is stored in the recording medium 20, the difference information (HC) is recorded instead of the high-sensitivity image data (H). A large number of captured images can be recorded on the same recording medium 20. Note that the reproduction apparatus with an image composition function requires means for restoring the high sensitivity image data (H) from the composite image data (C) and the difference information (HC).
[0039]
【The invention's effect】
According to the present invention, when a captured image of a digital still camera equipped with a solid-state imaging device that outputs high-sensitivity image data and low-sensitivity image data is recorded on a recording medium as RAW data, a playback device having an image composition function is used. However, even a playback device that does not have an image composition function can play back this captured image, improving versatility.
[Brief description of the drawings]
FIG. 1 is a block diagram of a digital still camera according to a first embodiment of the present invention.
FIG. 2 is a schematic surface view of the solid-state imaging device shown in FIG.
FIG. 3 is a data configuration diagram when image data captured by the digital still camera according to the first embodiment of the present invention is recorded on a recording medium as RAW data.
FIG. 4 is a block diagram showing an example of a playback apparatus with an image composition function.
FIG. 5 is a block diagram showing an example of a playback apparatus that does not have an image composition function.
FIG. 6 is a block diagram of a digital still camera according to a second embodiment of the present invention.
FIG. 7 is a data configuration diagram when image data captured by a digital still camera according to a second embodiment of the present invention is recorded on a recording medium as RAW data.
FIG. 8 is a characteristic diagram of a signal obtained from the solid-state imaging device shown in FIG.
[Explanation of symbols]
1 pixel 2 low-sensitivity pixel 3 high-sensitivity pixel 10 solid-state imaging device 11 A / D converter (outputs RAW data of high-sensitivity image)
12 A / D converter (low-sensitivity image RAW data is output)
13 Compositing circuit 14 Highlight compression processing circuit (outputs RAW data of composite image)
15 Gain / gamma processing circuit 16 Signal processing circuit 18 Raw data recording circuit 19 Difference circuit 20 Recording medium
