JPH1169226A - Electronic camera - Google Patents
Electronic cameraInfo
- Publication number
- JPH1169226A JPH1169226A JP9219607A JP21960797A JPH1169226A JP H1169226 A JPH1169226 A JP H1169226A JP 9219607 A JP9219607 A JP 9219607A JP 21960797 A JP21960797 A JP 21960797A JP H1169226 A JPH1169226 A JP H1169226A
- Authority
- JP
- Japan
- Prior art keywords
- image
- electronic camera
- memory
- images
- camera according
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000015654 memory Effects 0.000 claims abstract description 106
- 238000006243 chemical reaction Methods 0.000 claims abstract description 76
- 238000012545 processing Methods 0.000 claims abstract description 66
- 238000000034 method Methods 0.000 claims description 35
- 230000003287 optical effect Effects 0.000 claims description 13
- 230000000875 corresponding effect Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 238000000926 separation method Methods 0.000 description 8
- 230000007423 decrease Effects 0.000 description 5
- 230000035945 sensitivity Effects 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003321 amplification Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000012634 optical imaging Methods 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
Landscapes
- Picture Signal Circuits (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Television Signal Processing For Recording (AREA)
- Color Television Image Signal Generators (AREA)
- Studio Devices (AREA)
Abstract
Description
【0001】[0001]
【発明の属する技術分野】本発明は電子カメラに関し、
詳しくは、画像信号におけるノイズを低減するための技
術に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an electronic camera,
More specifically, the present invention relates to a technique for reducing noise in an image signal.
【0002】[0002]
【従来の技術】近年、被写体の光画像を、撮像レンズ,
絞り等の光学撮像系を介してCCD等の2次元の固体撮
像素子(光電変換素子)に結像させ、該撮像素子により
光電変換されて出力される電気画像信号をデジタルデー
タに変換して記録媒体に記憶させるよう構成された電子
カメラが実用化されている。2. Description of the Related Art In recent years, an optical image of a subject has been captured by an imaging lens,
An image is formed on a two-dimensional solid-state imaging device (photoelectric conversion device) such as a CCD via an optical imaging system such as an aperture, and an electric image signal that is photoelectrically converted and output by the imaging device is converted into digital data and recorded. Electronic cameras configured to store the data on a medium have been put to practical use.
【0003】また、撮影手段における蓄積時間を設定
し、蓄積時間が所定の時間よりも長い場合に、連続して
2回以上撮影し、複数枚の画像をメモリにおいて加算合
成し、1枚の画像にして出力する電子式スチルカメラ
が、特公平7−38701号公報に開示されている。[0003] In addition, an accumulation time in the photographing means is set, and when the accumulation time is longer than a predetermined time, two or more images are continuously photographed, a plurality of images are added and synthesized in a memory, and one image is obtained. An electronic still camera which outputs the image data is disclosed in Japanese Patent Publication No. Hei 7-38701.
【0004】[0004]
【発明が解決しようとする課題】上記従来のものでは、
シャッタスピードが所定の時間以上のスローシャッタの
とき、2回以上連続して撮影を行い画像合成を行うが、
通常のシャッタスピードで撮影できる場合でも、高輝度
と低輝度を含む被写体では、高輝度部分では画像データ
が飽和し、低輝度部分では暗電流によるランダムノイズ
が目立つ場合がある。このような被写体に対し、上記従
来カメラは対応できない。SUMMARY OF THE INVENTION In the above prior art,
When the shutter speed is a slow shutter of a predetermined time or more, the image is synthesized by performing shooting twice or more consecutively,
Even when shooting can be performed at a normal shutter speed, in a subject including high brightness and low brightness, image data may be saturated in a high brightness portion, and random noise due to dark current may be conspicuous in a low brightness portion. The conventional camera described above cannot handle such a subject.
【0005】また、補色(イエロー,シアン,マゼンタ
を含む)カラーフィルタを使ったCCDでは、カラーフ
ィルタの分光特性が、各色でオーバーラップするため色
分離が悪く、色変換後の画像で色ノイズが目立つ欠点が
ある。この色ノイズは、通常のシャッタスピードで撮影
できる被写体でも発生するため、従来カメラでは対応で
きない。In a CCD using complementary color (including yellow, cyan, and magenta) color filters, the spectral characteristics of the color filters overlap with each other, resulting in poor color separation, and color noise in a color-converted image. There are noticeable drawbacks. This color noise also occurs in a subject that can be photographed at a normal shutter speed, and cannot be handled by a conventional camera.
【0006】更に、低光量の被写体を撮影した場合、C
CDの感度特性のバラツキで画像のカラーバランスが崩
れることがある。CCDの感度特性は、通常照度領域で
は各色がリニアに変化するが、低照度領域ではリニアで
ないため、通常照度領域でカラーバランスを合わせる
と、低照度領域はバランスが崩れるためである。また、
上記従来のカメラでは、メモリへのアクセスを高速にす
るために、加算器と複数のメモリを必要とするため、コ
ストアップになる。Further, when a low light quantity subject is photographed, C
The color balance of the image may be lost due to the variation in the sensitivity characteristic of the CD. The sensitivity characteristic of the CCD is that each color changes linearly in the normal illuminance region, but is not linear in the low illuminance region. Therefore, if the color balance is adjusted in the normal illuminance region, the balance in the low illuminance region is lost. Also,
The above-mentioned conventional camera requires an adder and a plurality of memories in order to access the memory at a high speed, which increases the cost.
【0007】また、同一被写体の画像を重ね合わせた場
合、画像取り込み時などに発生する固定ノイズが相対的
に大きくなってしまうという問題もあった。本発明は上
記問題点に鑑みなされたものであり、ランダムノイズを
低減するための重ね合わせ処理を、電子カメラにおいて
簡易に実行できるようにすることを目的とする。Further, when images of the same subject are superimposed, there has been a problem that fixed noise generated at the time of capturing an image becomes relatively large. SUMMARY OF THE INVENTION The present invention has been made in view of the above problems, and has as its object to enable an electronic camera to easily execute a superposition process for reducing random noise.
【0008】また、電子カメラにおいて前記重ね合わせ
処理を行わせたときに、重ね合わせによる固定ノイズの
増大を回避できるようにすることを目的とする。Another object of the present invention is to make it possible to avoid an increase in fixed noise due to superposition when the superposition processing is performed in an electronic camera.
【0009】[0009]
【課題を解決するための手段】そのため請求項1記載の
発明は、被写体の光学像を光電変換素子により画像信号
に変換して記録媒体に記録するように構成される電子カ
メラであって、撮影枚数を設定し、同一被写体を撮影し
た複数枚の画像を重ね合わせて1枚の画像にして記憶さ
せる構成とした。According to the present invention, there is provided an electronic camera configured to convert an optical image of a subject into an image signal by a photoelectric conversion element and record the image signal on a recording medium. The number of images is set, and a plurality of images of the same subject are superimposed and stored as one image.
【0010】かかる構成によると、予め撮影枚数を設定
して、同一被写体を前記設定枚数だけ撮影して、これら
の画像を重ね合わせることでランダムノイズの低減を図
る。請求項2記載の発明では、前記複数枚の画像を重ね
合わせた画像から固定パターンノイズを除去する構成と
した。かかる構成によると、重ね合わせた画像から、一
定のパターンで発生する固定ノイズを除去する。According to this configuration, the number of images to be photographed is set in advance, the same object is photographed by the set number of images, and these images are superimposed to reduce random noise. According to the second aspect of the present invention, the fixed pattern noise is removed from the image obtained by superimposing the plurality of images. According to such a configuration, fixed noise generated in a fixed pattern is removed from the superimposed images.
【0011】請求項3記載の発明では、前記固定パター
ンノイズを、真暗画像を撮影して得た画像信号に基づい
て設定する構成とした。かかる構成によると、例えばレ
ンズキャップや機械式シャッターで遮光した状態で撮影
を行わせることで、真暗画像に対応する画像信号を得
て、このときの画像信号を固定パターンノイズとする。According to the third aspect of the invention, the fixed pattern noise is set based on an image signal obtained by photographing a true-dark image. According to such a configuration, for example, an image signal corresponding to a true-dark image is obtained by photographing in a state where light is shielded by a lens cap or a mechanical shutter, and this image signal is used as fixed pattern noise.
【0012】尚、固定パターンノイズが各ライン毎に略
同じである場合には、一次元のデータとして固定パター
ンノイズを設定しても良い。請求項4記載の発明では、
前記固定パターンノイズの除去を黒基準設定と同時に行
う構成とした。かかる構成によると、黒基準を設定する
ときに同時に固定パターンノイズの除去が行われる。When the fixed pattern noise is substantially the same for each line, the fixed pattern noise may be set as one-dimensional data. In the invention according to claim 4,
The fixed pattern noise is removed simultaneously with the black reference setting. According to such a configuration, the fixed pattern noise is removed at the same time when the black reference is set.
【0013】請求項5記載の発明では、前記重ね合わせ
画像のデータビット幅を、撮影画像のデータビット幅よ
りも広くする構成とした。かかる構成によると、例えば
撮影画像が10ビットデータであるときに、前記重ね合わ
せ画像のデータビット幅を例えば16ビットとし、加算処
理によるデータの増大に対応する。[0013] According to a fifth aspect of the present invention, the data bit width of the superimposed image is made wider than the data bit width of the photographed image. According to such a configuration, for example, when the captured image is 10-bit data, the data bit width of the superimposed image is set to, for example, 16 bits, thereby coping with an increase in data due to the addition processing.
【0014】請求項6記載の発明では、光電変換素子か
らの1枚の画像の読み込みを、複数回に分けて行う構成
とした。かかる構成によると、1枚の画像を一度に読み
込むのではなく、複数回に分けて読み込む。請求項7記
載の発明では、1つのメモリ内に、1画面の画像を重ね
合わせる領域と、光電変換素子から読み込んだ画像を記
憶させる領域とを持つ構成とした。According to the sixth aspect of the present invention, one image is read from the photoelectric conversion element in a plurality of times. According to such a configuration, one image is not read at once, but is read a plurality of times. According to the seventh aspect of the present invention, one memory has an area for superimposing an image of one screen and an area for storing an image read from the photoelectric conversion element.
【0015】かかる構成によると、撮影画像の記憶領域
と、重ね合わせの作業領域とが1つのメモリ内に併存す
ることになる。請求項8記載の発明では、第1メモリと
第2メモリとの2つのメモリを備え、撮影毎に画像にヘ
ッダを付けて前記第1メモリに記録し、設定した枚数を
撮影した後、記録した画像を前記第2メモリへ転送し、
画像の重ね合わせを行う構成とした。According to this configuration, the storage area for the photographed image and the work area for superimposition coexist in one memory. In the invention according to claim 8, two memories, a first memory and a second memory, are provided, and a header is attached to each image and recorded in the first memory. Transferring the image to the second memory,
It was configured to superimpose images.
【0016】かかる構成によると、撮影された画像は、
まず、ヘッダが付けられて第1メモリに記録され、画像
の重ね合わせは、前記第1メモリの内容を第2メモリに
転送して行われる。請求項9記載の発明では、前記第1
メモリへ記録する際に、画像を圧縮する構成とした。According to this configuration, the photographed image is
First, a header is added and recorded in the first memory, and the superposition of images is performed by transferring the contents of the first memory to the second memory. In the invention according to claim 9, the first
When recording to the memory, the image is compressed.
【0017】かかる構成によると、撮影された画像は画
像圧縮されて第1メモリに記録され、その後、重ね合わ
せ処理時に第2メモリに転送される。請求項10記載の発
明では、前記ヘッダに、重ね合わせの画像であることを
示すタグが入っている構成とした。かかる構成による
と、第1メモリに撮影画像を記録するときに、ヘッダに
重ね合わせ画像であるか否かを示すタグが入っており、
通常の撮影画像と重ね合わせを行わせる画像との判別が
行われる。According to this configuration, the photographed image is image-compressed and recorded in the first memory, and then transferred to the second memory during the superimposition processing. According to the tenth aspect of the present invention, the header includes a tag indicating that the image is a superimposed image. According to this configuration, when the captured image is recorded in the first memory, a tag indicating whether the image is a superimposed image is included in the header,
A distinction is made between a normal captured image and an image to be superimposed.
【0018】請求項11記載の発明では、前記第1のメモ
リの空き容量から撮影枚数を決定する構成とした。かか
る構成によると、撮影画像を記録させる第1メモリの空
き容量の大小から、同一被写体を撮影させる撮影枚数が
決定される。請求項12記載の発明では、前記電子カメラ
が、光電変換素子とモザイクカラーフィルタとを組み合
わせてカラー撮影を行う電子カメラであり、前記複数枚
の画像の階調変換及び重ね合わせの処理を、補間処理を
行う前のモザイクカラーフィルタを介してえられた画像
のままで行わせる構成とした。According to the eleventh aspect of the present invention, the number of photographed images is determined from the free space of the first memory. According to this configuration, the number of images to be photographed for the same subject is determined from the size of the free space in the first memory for recording the photographed image. In the invention according to claim 12, the electronic camera is an electronic camera that performs color photographing by combining a photoelectric conversion element and a mosaic color filter, and performs the gradation conversion and superimposition processing of the plurality of images by interpolation. The configuration is such that the image obtained through the mosaic color filter before the processing is performed as it is.
【0019】かかる構成によると、例えばRGBの各フ
ィルタがモザイク状に配列されたカラーフィルタを通し
て光電変換素子に被写体の光学像を結像させる電子カメ
ラにおいて、上記カラーフィルタを介して得られる画像
信号に基づいて各色毎の画像信号に分離する補間処理が
行われるが、かかる補間処理が行われる前の各色のデー
タがモザイク状に配列される画像信号のままで階調変換
及び重ね合わせが行われる。According to this configuration, for example, in an electronic camera that forms an optical image of a subject on a photoelectric conversion element through a color filter in which RGB filters are arranged in a mosaic pattern, an image signal obtained through the color filter is Interpolation is performed to separate image signals for each color based on the image signal. However, tone conversion and superimposition are performed with the image signal in which the data of each color is arranged in a mosaic before the interpolation is performed.
【0020】請求項13記載の発明では、階調変換処理
を、前記重ね合わせが行われた後の画像信号に対して施
す構成とした。かかる構成によると、撮影画像を重ね合
わせた後、該重ね合わせ画像に対してガンマ変換などの
階調変換処理を施す。例えば、前記モザイクカラーフィ
ルタを用いる電子カメラなどでは、色分離を行った後に
階調変換処理を施す必要があるが、色分離によって画像
の情報量が増大するので、階調変換処理を重ね合わせ処
理の前に行う構成では、結果的に、重ね合わせ処理を行
わせる情報量が多くなるので、重ね合わせを行ってから
階調変換処理を行わせ、重ね合わせ処理に要するメモリ
容量を少なくする。According to a thirteenth aspect of the present invention, the gradation conversion processing is performed on the image signal after the superposition. According to this configuration, after the captured images are superimposed, a gradation conversion process such as gamma conversion is performed on the superimposed images. For example, in an electronic camera or the like using the mosaic color filter, it is necessary to perform gradation conversion processing after performing color separation. However, since the amount of information of an image increases due to the color separation, the gradation conversion processing is performed by superposition processing. In the configuration performed before the above, as a result, the amount of information for performing the superimposition processing is increased. Therefore, the gradation conversion processing is performed after the superposition is performed, and the memory capacity required for the superposition processing is reduced.
【0021】請求項14記載の発明では、前記固定パター
ンノイズを除去した画像に対して階調変換処理を施す構
成とした。かかる構成によると、画像の重ね合わせ処
理,固定パターンノイズの除去,階調変換処理の順で処
理が進められ、ランダムノイズ及び固定ノイズが除去さ
れた画像について階調処理が行われる。According to a fourteenth aspect of the present invention, a gradation conversion process is performed on an image from which the fixed pattern noise has been removed. According to such a configuration, the processing proceeds in the order of image superposition processing, removal of fixed pattern noise, and gradation conversion processing, and gradation processing is performed on the image from which random noise and fixed noise have been removed.
【0022】請求項15記載の発明では、前記複数枚の画
像の重ね合わせ前に、低光量専用の階調変換処理を施す
構成とした。かかる構成によると、光量が少ない被写体
の撮影に適した特性の階調変換処理が、重ね合わせ前に
実行される。According to a fifteenth aspect of the present invention, a gradation conversion process dedicated to low light quantity is performed before the plurality of images are superimposed. According to such a configuration, tone conversion processing with characteristics suitable for photographing a subject with a small amount of light is performed before superimposition.
【0023】[0023]
【発明の効果】請求項1記載の発明では、設定した枚数
に応じて画像の重ね合わせを行うため、通常のシャッタ
スピードで撮影できる被写体に対しても、ランダムノイ
ズを低減することができる。請求項2記載の発明では、
少ないメモリ容量で画像を重ね合わせてランダムノイズ
を低減できると共に、固定ノイズを低減できる。According to the first aspect of the present invention, since images are superimposed in accordance with the set number, random noise can be reduced even for a subject which can be photographed at a normal shutter speed. In the invention according to claim 2,
Random noise can be reduced by superimposing images with a small memory capacity, and fixed noise can be reduced.
【0024】請求項3記載の発明では、電子カメラ個々
に特有な固定パターンノイズを容易に求めることがで
き、以て、固定ノイズを効果的に低減できる。請求項4
記載の発明では、黒基準設定と同時に固定パターンノイ
ズの除去を行うことで演算量が増大しない。請求項5記
載の発明では、重ね合わせ処理を加算処理で行わせると
きに、加算値のオーバーフローを防止して階調劣化を回
避できる。According to the third aspect of the present invention, fixed pattern noise peculiar to each electronic camera can be easily obtained, so that fixed noise can be effectively reduced. Claim 4
In the described invention, the amount of calculation does not increase by removing the fixed pattern noise simultaneously with the black reference setting. According to the fifth aspect of the invention, when the superimposition processing is performed by the addition processing, it is possible to prevent an overflow of the added value and to avoid the gradation deterioration.
【0025】請求項6記載の発明では、メモリ容量が少
ない場合でも、光電変換素子から読み込んだ画像を記憶
させるための領城を小さくすることで、回路溝成を変更
することなく、演算用に複数のメモリを持たずに重ね合
わせ処理ができ、ランダムノイズを低減することかでき
る。請求項7記載の発明では、加算器が必要ないため、
従来の回路構成を変更しなくてよい。また、1つのメモ
リで重ね合せ処埋と光電変換からの画像の取り込みとを
行うため、コストをかけずに画像の重ね合わせができ、
ランダムノイズを低減することができる。According to the sixth aspect of the present invention, even when the memory capacity is small, the area for storing the image read from the photoelectric conversion element is reduced, so that it is possible to perform the calculation without changing the circuit groove configuration. Superposition processing can be performed without having a plurality of memories, and random noise can be reduced. In the invention according to claim 7, since an adder is not required,
There is no need to change the conventional circuit configuration. In addition, since the superimposition processing and the capture of the image from the photoelectric conversion are performed by one memory, the superposition of the images can be performed without increasing the cost.
Random noise can be reduced.
【0026】請求項8記載の発明では、重ね合わせる画
像を、複数のメモリに分けて書き込むことが可能であ
り、また、重ね合わせの画像をコンピュータに転送して
処理を行わせることが可能である。請求項9記載の発明
では、画像を圧縮することで第1メモリに書き込める画
像枚数が増加する。According to the eighth aspect of the present invention, the superimposed image can be divided and written in a plurality of memories, and the superimposed image can be transferred to a computer for processing. . According to the ninth aspect of the present invention, the number of images that can be written to the first memory increases by compressing the images.
【0027】請求項10記載の発明では、ヘッダのタグを
検索することで、重ね合わせる画像であることを識別す
ることができる。請求項11記載の発明では、撮影可能枚
数をカメラが管理するため、ユーザーがメモリの空き容
量を計算して、撮影枚数を設定する必要がない。請求項
12記載の発明では、モザイクカラーフィルタを介して得
られた画像のままで重ね合わせ処理を行うため、画像処
理中に情報量が減ることが少ない。According to the tenth aspect of the present invention, it is possible to identify an image to be superimposed by searching for a tag in the header. According to the eleventh aspect of the present invention, since the number of shootable images is managed by the camera, the user does not need to calculate the free space in the memory and set the number of shootable images. Claim
According to the invention described in 12, the superimposition process is performed as it is on the image obtained through the mosaic color filter, so that the amount of information during image processing is rarely reduced.
【0028】請求項13記載の発明では、重ね合わせ後に
階調処理を行わせることで、重ね合わせ処理で扱う画像
の情報量を抑制でき、以て、重ね合わせ処理で使用する
メモリ容量を少なくできる。請求項14記載の発明では、
固定ノイズを除去して階調処理を行わせることで、階調
処理を行った後に固定ノイズを除去する方法に比べ、固
定ノイズの階調処理を行う必要がないため、計算時間を
減らすことができる。According to the thirteenth aspect of the present invention, by performing the gradation processing after the superposition, the information amount of the image handled in the superposition processing can be suppressed, and the memory capacity used in the superposition processing can be reduced. . In the invention according to claim 14,
By removing fixed noise and performing gradation processing, there is no need to perform fixed noise gradation processing compared to the method of removing fixed noise after performing gradation processing, so the calculation time can be reduced. it can.
【0029】請求項15記載の発明では、低光量によるカ
ラーバランスの崩れを補正することができる。また、階
調変換を重ね合わせの前に行うことで、階調数の低下を
避けることができる。According to the fifteenth aspect of the present invention, it is possible to correct the color balance collapse due to a low light quantity. Further, by performing the gradation conversion before the superposition, it is possible to avoid a decrease in the number of gradations.
【0030】[0030]
【発明の実施の形態】以下に本発明の実施の形態を説明
する。図1は、実施の形態における電子カメラの基本構
成を示す図である。この図1において、被写体からの光
学像は、撮影レンズ2を介して光電変換素子としてのC
CD1上に結像され、CCD1は、前記被写体の光学像
を光電変換して電気信号に変換する。Embodiments of the present invention will be described below. FIG. 1 is a diagram illustrating a basic configuration of an electronic camera according to an embodiment. In FIG. 1, an optical image from a subject is transmitted through a photographing lens 2 to C as a photoelectric conversion element.
An image is formed on the CD 1, and the CCD 1 photoelectrically converts the optical image of the subject into an electric signal.
【0031】前記CCD1には、各種フィルタを介して
被写体の光学像が照射されるようになっており、前記各
種フィルタとしては、空間周波数の低域のみを通過させ
る低域通過フィルタ、赤外線をカットする赤外線カット
フィルタ、RGB又はCMYGなどの色フィルタの組み
合わせからなるモザイクカラーフィルタが用いられる。The CCD 1 is illuminated with an optical image of a subject through various filters. Examples of the various filters include a low-pass filter that passes only a low spatial frequency band, and an infrared ray cut filter. A mosaic color filter composed of a combination of an infrared cut filter and a color filter such as RGB or CMYG is used.
【0032】尚、本実施の形態における電子カメラは、
所謂単板式のカラー電子カメラである。そして、前記モ
ザイクカラーフィルタとしてRGBの色フィルタの組み
合わせのものを用いる場合には、CCD1の各画素(本
実施の形態では646 ×484 画素)毎にR,G,Bのいず
れか1つの情報のみが得られることになるので、補間演
算により各画素毎にR,G,Bのデータをそれぞれ得
て、R,G,Bの各色毎の画像信号に分離する。The electronic camera according to the present embodiment is
This is a so-called single-panel color electronic camera. When a combination of RGB color filters is used as the mosaic color filter, only one of R, G, and B information is provided for each pixel of the CCD 1 (646 × 484 pixels in the present embodiment). Is obtained, R, G, and B data are obtained for each pixel by interpolation, and separated into image signals for each of R, G, and B colors.
【0033】前記CCD1からの画像信号は、CDS/
AGC回路3で、相関二重サンプリング処理,増幅処理
がなされた後、A/D変換器4でA/D変換される。A
/D変換された画像データは、Main-CPU5によるソ
フトウェア処理によって種々の画像処理が施され、記録
用メモリ6に記録される。メモリとしては、前記記録用
メモリ6の他、パラメータ記憶用メモリ7,演算用メモ
リ8が設けられる。The image signal from the CCD 1 is CDS /
After the AGC circuit 3 performs the correlated double sampling process and the amplification process, the A / D converter 4 performs A / D conversion. A
The / D-converted image data is subjected to various types of image processing by software processing by the Main-CPU 5, and is recorded in the recording memory 6. As a memory, a parameter storage memory 7 and an operation memory 8 are provided in addition to the recording memory 6.
【0034】また、画像圧縮回路9は、画像データを圧
縮処理して記録するための回路であり、液晶表示装置10
には、撮影画像や撮影情報の表示などが行われる。Sub
−CPU11は、前記Main-CPU5と相互通信可能に構
成される一方、モードスイッチ12,電源スイッチ13から
の信号が入力され、CCD駆動回路14,CDS/AGC
回路3及びA/D変換器4にタイミング信号を出力する
タイミング発生回路15を制御すると共に、露出制御回路
16を制御する。The image compression circuit 9 is a circuit for compressing and recording image data, and
, Display of a photographed image and photographing information is performed. Sub
-The CPU 11 is configured to be able to communicate with the Main-CPU 5 while receiving signals from the mode switch 12 and the power switch 13 and receiving the signals from the CCD drive circuit 14, the CDS / AGC.
A timing generation circuit 15 for outputting a timing signal to the circuit 3 and the A / D converter 4;
Control 16
【0035】上記構成において、同一被写体を撮影した
複数枚の画像を重ね合わせて1枚の画像にして記憶させ
る撮影処理を説明する。請求項7の発明に対応する第1
の実施の形態では、まず、図1のモードスイッチ12で撮
影枚数が設定される。そして、1枚目の画像を撮影し、
この1枚目の画像データの全画素(710×484)を
演算用メモリ8に書き込む。このメモリは、通常DRA
Mが用いられる。この画像には、図2に示すように、各
ラインの647画素から710画素目までオプティカル
ブラック領域が付いている。前記オプティカルブラック
領域は遮光されており、この領域の画素データを使って
後述する黒基準の計算を行う。A description will be given of a photographing process in which a plurality of images of the same subject are superimposed and stored as one image in the above configuration. A first aspect corresponding to the invention of claim 7
In the embodiment, first, the number of images to be shot is set by the mode switch 12 in FIG. And take the first image,
All the pixels (710 × 484) of the first image data are written into the operation memory 8. This memory is usually DRA
M is used. As shown in FIG. 2, this image has an optical black area from the 647th pixel to the 710th pixel of each line. The optical black area is shielded from light, and a later-described black reference calculation is performed using the pixel data in this area.
【0036】以下は、低光量の被写体を撮影する場合に
ついて説明する。前記画像データをMain-CPU5で低
光量専用の階調変換を行う。この階調変換テーブルは、
パラメータ記録用メモリ7に記録されている。このメモ
リには、EEPROMやフラッシュメモリなどが用いら
れる。そして、階調変換された10ビットの画像データ
を、演算用メモリ8上に1画素あたり16ビット幅で記
憶させる。このメモリ領域は、加算処理による重ね合わ
せ画像を記憶させるためものである。重ね合わせ画像の
ビット幅を画像データのビット幅(10ビット)よりも
広くすることで、加算処理によるオーバーフローの発生
を防止している。本実施の形態では、重ね合わせの枚数
を後述するように16枚とするので、確実にオーバーフ
ローの発生は回避される。In the following, a case where a subject with a low light quantity is photographed will be described. The image data is subjected to gradation conversion exclusively for low light quantity by the Main-CPU 5. This gradation conversion table is
It is recorded in the parameter recording memory 7. As this memory, an EEPROM, a flash memory, or the like is used. Then, the gradation-converted 10-bit image data is stored in the calculation memory 8 with a 16-bit width per pixel. This memory area is for storing a superimposed image obtained by the addition processing. By making the bit width of the superimposed image wider than the bit width (10 bits) of the image data, the occurrence of overflow due to the addition processing is prevented. In the present embodiment, since the number of superimposed sheets is 16 as described later, the occurrence of overflow is reliably avoided.
【0037】次に2枚目を撮影し、この画像の偶数ライ
ンのデータのみを読み込み、演算用メモリ8の空き領域
に書き込む。この画像データを1枚目と同様にMain-C
PU5で階調変換して、1枚目の画像が記憶されている
領域の対応する画素と加算する。次に奇数ラインの画像
データのみを読み込み、偶数ラインの画像データが書き
込まれていた領域に記憶させる。偶数ラインの画像デー
タと同様に、階調変換したあと、重ね合わせ画像の対応
する画素と加算する。Next, the second image is photographed, and only the data of the even-numbered line of this image is read and written in the empty area of the operation memory 8. This image data is stored in Main-C in the same manner as the first sheet.
The gradation is converted by the PU 5 and added to the corresponding pixel in the area where the first image is stored. Next, only the image data of the odd line is read and stored in the area where the image data of the even line has been written. Similar to the image data of the even-numbered line, after the gradation conversion, it is added to the corresponding pixel of the superimposed image.
【0038】そして、3枚目以降も2枚目と同様にし
て、演算用メモリに記憶されているそれまでの重ね合わ
せ画像に順次重ねる処理を行わせる。このようにして、
CPUを使ったソフト処理であれば、加算器や複数のメ
モリを用いずに重ね合わせを行うことができる。また、
演算用メモリ8に余裕があれば、光電変換素子(CCD
1)から、画像データを1回で読み込むことも可能であ
る。また、光電変換素子から画像データを画素単位或い
はライン単位で読み込むことが可能ならば、1ライン分
の画像データのみを読み込む構成にしても良い。Then, in the same manner as in the second image, the third and subsequent images are sequentially superimposed on the superimposed images stored in the operation memory. In this way,
In the case of software processing using a CPU, superposition can be performed without using an adder or a plurality of memories. Also,
If there is room in the operation memory 8, a photoelectric conversion element (CCD)
From 1), it is also possible to read the image data at one time. In addition, if image data can be read from the photoelectric conversion element in pixel units or line units, a configuration may be adopted in which only one line of image data is read.
【0039】また、Main-CPU5として内部にDRA
Mを備えたRISC−MPUを使えば、内部クロックで
画像データをアクセスできるため、高速な演算処理も可
能である。請求項8の発明に対応する第2の実施の形態
では、撮影した画像を演算用メモリ8に読み込んだ後、
画像データにヘッダをつけて記録用メモリ6に書き込
む。このメモリは、内蔵であってもよいし、着脱可能な
ものでもよい。これには通常フラッシュメモリや、フロ
ッピーディスクなどが用いられる。このヘッダに、重ね
合わせ画像であることを示すタグをつけて、すべての枚
数を撮影したあと、記録用メモリ6(第1メモリ)から
演算用メモリ8に画像データを呼び出して重ね合わせを
行う。The DRA is internally provided as the Main-CPU 5.
If a RISC-MPU equipped with M is used, image data can be accessed with an internal clock, so that high-speed arithmetic processing is also possible. In the second embodiment corresponding to the invention of claim 8, after the taken image is read into the arithmetic memory 8,
The image data is added to the header and written into the recording memory 6. This memory may be built-in or detachable. For this, a flash memory or a floppy disk is usually used. A tag indicating that the image is a superimposed image is attached to this header, and after all the images have been photographed, image data is called from the recording memory 6 (first memory) to the arithmetic memory 8 and superimposed.
【0040】この構成では、Sub−CPU11が、記録用
メモリ6に記録されている画像データの容量を管理して
いる。そして、記録用メモリ6の空き容量に基づく撮影
可能枚数を液晶表示装置10に表示し、その枚数以下の枚
数が設定される。最後に撮影した画像は記録用メモリ6
に記録せずに、低光量専用の階調変換を行い、1画素1
6ビット幅で演算用メモリの重ね合わせを行う領域に記
憶させる。そして、記録用メモリ6の画像データのヘッ
ダのタグを検索し、撮影した画像を演算用メモリ8にラ
イン単位で読み込む。そしで、階調変換を行い重ね合わ
せ画像の対応する画素と加算を行う。In this configuration, the Sub-CPU 11 manages the capacity of the image data recorded in the recording memory 6. Then, the number of recordable images based on the free space of the recording memory 6 is displayed on the liquid crystal display device 10, and the number of images less than the number is set. The last photographed image is stored in the recording memory 6.
Without recording on a pixel, performs gradation conversion exclusively for low light quantity,
A 6-bit width is stored in an area of the arithmetic memory to be superimposed. Then, the tag of the header of the image data in the recording memory 6 is searched, and the photographed image is read into the arithmetic memory 8 line by line. Then, gradation conversion is performed, and addition is performed with the corresponding pixel of the superimposed image.
【0041】このような構成にすることで、光電変換素
子から読み込んだ画像を書き込む領域が確保できない楊
合でも、重ね合せを行うことができる。CCDは通常全
画面かあるいはフィールド単位でしか、画像データを読
み出すことができないが、記録された画像データは、バ
イト単位で読み込むことが可能であるため、演算用メモ
リ8に確保する領域は少なくてよい。By adopting such a configuration, it is possible to perform the superposition even when the area where the image read from the photoelectric conversion element cannot be secured is not secured. The CCD can usually read image data only on the entire screen or in field units. However, since the recorded image data can be read in byte units, the area secured in the arithmetic memory 8 is small. Good.
【0042】撮影した画像データを記録用メモリ6に書
き込む際は、この画像データを画像圧縮回路9で圧縮す
ることも可能である。重ね合わせる前の画像は情報量を
保存する必要があるので、ランレングス符号化などの可
逆圧縮を行う。また、この構成では、撮影した画像デー
タを撮影直後に重ね合わせる必要がないため、例えば記
録用メモリ6として着脱可能なものを使用すれば、1枚
のメモリが一杯になっても、複数の記録用メモリ6に分
けて書き込むことが可能である。更に、記録用メモリ6
に書き込まれた重ね合わせのための画像データを、コン
ピュータ(コンピュータの第2メモリ)へ転送し、コン
ピュータ上のソフトウェアで重ね合わせを行うこともで
きる。このような構成にすることで、演算用メモリ8で
重ね合わせ処理ができない場合でも、コンピュータ上の
ソフトウェアで同様の処理が実現できる。When writing the captured image data into the recording memory 6, the image data can be compressed by the image compression circuit 9. Since the amount of information needs to be preserved for the image before superimposition, lossless compression such as run-length encoding is performed. Further, in this configuration, it is not necessary to superimpose the photographed image data immediately after photographing. For example, if a detachable memory is used as the recording memory 6, even if one memory becomes full, a plurality of recordings can be performed. It is possible to write data separately for the memory 6. Further, the recording memory 6
Can be transferred to a computer (second memory of the computer), and can be superimposed by software on the computer. By adopting such a configuration, the same processing can be realized by software on a computer even when the overlay processing cannot be performed in the arithmetic memory 8.
【0043】例えば同一被写体について16枚の画像を重
ね合わせる設定の場合には、16枚目の画像を演算用メモ
リ8上の画像に重ね合わせる処理が終了すると、次に、
16枚の画像が重ね合わされた演算用メモリ8上の画像デ
ータの各ラインから固定パターンノイズに応じた値を引
く演算処理を行う。上記のようにして同一被写体につい
て複数枚(16枚)の画像を重ね合わせると、ランダムノ
イズが低減されることになるが、相対的に固定ノイズが
大きくなってしまうので、重ね合わせによって増大する
固定ノイズを上記の固定パターンノイズの減算によって
除去するものである。この固定パターンノイズの除去
は、黒基準設定と同時に行うことが可能である。黒基準
設定は、CCDの転送路の信号レベルを減算し、画像信
号の0基準を設定する処理である。これは、通常図2の
オプティカルブラック領域の平均値を求め、画像データ
から減算して行う。For example, in a case where 16 images of the same subject are set to be superimposed, when the process of superimposing the 16th image on the image on the arithmetic memory 8 is completed,
A calculation process is performed to subtract a value corresponding to the fixed pattern noise from each line of the image data on the calculation memory 8 on which the 16 images are superimposed. When a plurality of (16) images of the same subject are superimposed as described above, the random noise is reduced, but the fixed noise becomes relatively large. The noise is removed by subtracting the fixed pattern noise. The removal of the fixed pattern noise can be performed simultaneously with the black reference setting. The black reference setting is a process of subtracting the signal level of the transfer path of the CCD and setting the 0 reference of the image signal. This is usually performed by calculating the average value of the optical black area in FIG. 2 and subtracting the average value from the image data.
【0044】ここで、前記固定パターンノイズは、図1
におけるCCD駆動回路の信号が画像データに重畳して
発生する。この固定パターンノイズは、1次元データh
(x)として表すことができ、これをパラメータ記憶用
メモリに記憶させておく。各画素の座標を(x,y),
出力画像データをf(x,y),重ね合わされた画像デ
ータをg(x,y)とすると、前記固定パターンノイズ
を除去する演算処理は、 f(x,y).=g(x,y)−n×h(x)+a として表される。ここで、nは撮影枚数を表し、aはオ
プティカルブラック領域の平均値を表す。Here, the fixed pattern noise corresponds to FIG.
The signal of the CCD driving circuit is superimposed on the image data. This fixed pattern noise is one-dimensional data h
(X), which is stored in the parameter storage memory. Let the coordinates of each pixel be (x, y),
Assuming that the output image data is f (x, y) and the superimposed image data is g (x, y), the arithmetic processing for removing the fixed pattern noise is f (x, y). = G (x, y) −n × h (x) + a. Here, n represents the number of shots, and a represents the average value of the optical black area.
【0045】固定パターンノイズが除去された画像デー
タは、色変換,ガンマ変換(階調変換処理)が施された
後、各画素を各色毎に8ビットデータとして記録用メモ
リ6に書き込まれる。固定パターンノイズが除去された
後で、ガンマ変換などの階調変換処理を施す構成であれ
ば、撮影画像が低コントラストであるときに、出力画像
の階調を落とさずに高コントラストの画像を得ることが
可能である。The image data from which the fixed pattern noise has been removed is subjected to color conversion and gamma conversion (gradation conversion processing), and then each pixel is written to the recording memory 6 as 8-bit data for each color. With a configuration in which gradation conversion processing such as gamma conversion is performed after the fixed pattern noise is removed, when the captured image has low contrast, a high-contrast image is obtained without lowering the gradation of the output image. It is possible.
【0046】図7は第1の実施の形態における演算処理
を示すフローチャートであり、1枚目画像を演算用メモ
リ8ヘ書き込むと(Sl)、階調変換を行い(S2)、
画像枚数を示すnをゼロリセットする(S3)。そし
て、n枚目の画像の偶数ラインのデータを演算用メモリ
8に書き込み(S4)、階調変換後に演算用メモリ8の
該当するデータに加算する処理を行わせる(S5)。次
に、n枚目の画像の奇数ラインのデータを演算用メモリ
8に書き込み(S6)、階調変換後に演算用メモリ8の
該当する画素に加算する処理を行わせる(S7)。FIG. 7 is a flowchart showing the calculation processing in the first embodiment. When the first image is written into the calculation memory 8 (S1), gradation conversion is performed (S2).
N indicating the number of images is reset to zero (S3). Then, the data of the even-numbered line of the n-th image is written into the calculation memory 8 (S4), and a process of adding the data to the corresponding data in the calculation memory 8 after gradation conversion is performed (S5). Next, the data of the odd-numbered line of the n-th image is written into the calculation memory 8 (S6), and a process of adding the data to the corresponding pixel of the calculation memory 8 after gradation conversion is performed (S7).
【0047】そして、1枚の画像の加算処理が行われる
と、前記枚数nをカウントアップし(S8)、前記カウ
ントアツプした枚数が15になるまで加算処理を繰り返
し行わせる(S9→S4)。重ね合わせ画像の枚数が規
定枚数に達すると(S9)、演算用メモリ8に記憶され
ている重ね合わせ画像データから、固定ノイズを引く処
理を行い(S10)、さらに、補間処理,色変換,ガン
マ変換(階調変換処理)を施し(Sll)、最終的に得
られた画像データを記録用メモリ6に記憶させる。When the addition processing of one image is performed, the number n is counted up (S8), and the addition processing is repeated until the counted-up number becomes 15 (S9 → S4). When the number of superimposed images reaches the specified number (S9), a process of subtracting fixed noise from superimposed image data stored in the calculation memory 8 is performed (S10), and further, interpolation processing, color conversion, and gamma Conversion (gradation conversion processing) is performed (S11), and the finally obtained image data is stored in the recording memory 6.
【0048】図8及び図9は、請求項8の発明に対応す
る第2の実施の形態の演算処理を示すフローチャートで
あり、重ね合わせる画像枚数nをゼロリセットし(S1
2)、1枚目画像を演算用メモリ8へ書き込むと(S1
3)、ヘッダを付けて重ね合わせる画像であることを示
すタグを挿入する(S14)。そして、記録用メモリ6
(第1メモリ)へ書き込み(S13)、画像枚数nをカ
ウントアップする(S16)。前記カウントアップした
枚数が15になるまで書き込みを繰り返し行わせる(S
17→S13)。FIGS. 8 and 9 are flowcharts showing the arithmetic processing according to the second embodiment of the present invention, in which the number n of superimposed images is reset to zero (S1).
2) When the first image is written into the calculation memory 8 (S1
3) Insert a tag indicating that the image is a superimposed image with a header (S14). Then, the recording memory 6
(S13), and the number n of images is counted up (S16). The writing is repeated until the counted number reaches 15 (S
17 → S13).
【0049】重ね合わせ画像の枚数が規定枚数に達する
と(S17)、演算用メモリ8に16枚目の画像データ
を書き込み(S18)、階調変換を行う(S19)。そ
して、画像枚数nと重ね合わせを行うライン数mをゼロ
リセットする(S20、S21)。次に、n枚目の画像
のm番目のラインの画像データを演算用メモリ8に書き
込み(S22)、階調変換後に演算用メモリ8上の該当
するラインに加算する処理を行わせる(S23)。When the number of superimposed images reaches the specified number (S17), the 16th image data is written into the arithmetic memory 8 (S18), and gradation conversion is performed (S19). Then, the number n of images and the number m of lines to be superimposed are reset to zero (S20, S21). Next, the image data of the m-th line of the n-th image is written in the calculation memory 8 (S22), and a process of adding the image data to the corresponding line on the calculation memory 8 after gradation conversion is performed (S23). .
【0050】1ライン単位での加算処理が行われると、
前記ライン数mをカウントアップし(S24)、前記カ
ウントアップしたライン数が484になるまでライン毎
の加算処理を繰り返し行わせる(S25→S22)。そ
して最終ラインについての加算処理が終了して、前記ラ
イン数mが484になると(S25)、次の画像の重ね
合わせを行うべく、画像枚数nをカウントアップし(S
26)、前記枚数が規定枚数である15になるまで(S
27→S22)、先頭ライン(m=0)から最終ライン
(m=483)までの画像データを、それまでの重ね合
わせ画像の該当ラインに順次加算する処理を繰り返す。When the addition processing is performed for each line,
The number m of lines is counted up (S24), and the addition process for each line is repeated until the number of lines counted up becomes 484 (S25 → S22). When the addition process for the last line is completed and the number m of lines becomes 484 (S25), the number n of images is counted up in order to superimpose the next image (S25).
26) until the number reaches 15 which is the specified number (S
27 → S22), the process of sequentially adding the image data from the first line (m = 0) to the last line (m = 483) to the corresponding line of the superimposed image up to that point is repeated.
【0051】重ね合わせ画像の枚数が規定枚数に達する
と(S27)、演算用メモリ8に記憶されている重ね合
わせ画像データから、固定ノイズを引く処理を行い(S
28)、更に、補間処理,色変換,ガンマ変換(階調変
換処理)を施し(S29)、最終的に得られた画像デー
タを記録用メモリに記憶させる。上記では、重ね合わせ
る画像枚数を固定としたが、データの加算でオーバーフ
ローが起きる直前に撮影を中断し、重ね合わせ画像の枚
数を減少させても良く、また、重ね合わせの枚数を任意
に設定できるようにしても良い。When the number of superimposed images reaches the specified number (S27), a process for subtracting fixed noise from the superimposed image data stored in the operation memory 8 is performed (S27).
28) Further, interpolation processing, color conversion, and gamma conversion (gradation conversion processing) are performed (S29), and the finally obtained image data is stored in the recording memory. In the above description, the number of images to be superimposed is fixed. However, photographing may be interrupted immediately before an overflow occurs due to addition of data to reduce the number of superimposed images, and the number of images to be superimposed can be set arbitrarily. You may do it.
【0052】また、メモリ容量が少なく、出力画素のビ
ット幅(8ビット)以上での演算が全画素について行え
ない場合には、画像を縮小して(画素を間引いて)上記
の処理手順を実行させるようにすれば良い。更に、メモ
リ容量が少なく、出力画素のビット幅(8ビット)以上
での演算が行えない場合に、出力画素のビット幅で演算
を行って、撮影枚数に応じた除算を行うことで、重ね合
わせの画像データを得る構成としても良い。If the memory capacity is small and the calculation cannot be performed for all the pixels with the bit width (8 bits) or more of the output pixel, the image is reduced (pixels are thinned out) and the above processing procedure is executed. You can make it happen. Furthermore, when the memory capacity is small and the calculation cannot be performed with the bit width (8 bits) of the output pixel or more, the calculation is performed with the bit width of the output pixel and the division according to the number of photographed images is performed, thereby superimposing. May be obtained.
【0053】また、重ね合わせの方法として相加平均を
用いる場合には、演算時間を短縮すべく、撮影枚数を2
のべき乗として、平均化をビットシフト演算で行っても
良い。一方、固定パターンノイズは、図1におけるCC
D駆動回路14の信号が画像データに重畳して発生する。
これは、図3のように、画像中に縦筋となって表れる。When arithmetic averaging is used as a method of superposition, the number of shots is reduced to 2 in order to reduce the calculation time.
Averaging may be performed by a bit shift operation as a power of. On the other hand, the fixed pattern noise corresponds to CC in FIG.
The signal of the D drive circuit 14 is generated by being superimposed on the image data.
This appears as a vertical streak in the image as shown in FIG.
【0054】このノイズに対しては、製品出荷時におい
て、暗室で撮影したり、またはレンズ面にキャップ又は
レンズバリアをしたまま撮影したり、またはメカシャッ
タを閉じたまま電子シャッタで撮影するなどの手段によ
り真暗画像を撮影する。そして、Main-CPU5で低光
量専用の階調変換を行う。この画像データを縦方向に平
均化し、次にCCD1のオプティカルブラック領域の平
均値を求め、その平均値を1次元のデータから減算す
る。そして、このデータにローパスフイルタをかけて、
高周波成分のノイズを減らす。これを固定パターンノイ
ズの平均的なデータとして、図1のパラメータ記憶用メ
モリ7に記憶させる。For this noise, at the time of product shipment, means such as taking a picture in a dark room, taking a picture with a cap or a lens barrier on the lens surface, or taking a picture with an electronic shutter with the mechanical shutter closed. To photograph a true-dark image. Then, the Main-CPU 5 performs gradation conversion dedicated to low light quantity. This image data is averaged in the vertical direction, then the average value of the optical black area of the CCD 1 is obtained, and the average value is subtracted from the one-dimensional data. And apply a low-pass filter to this data,
Reduces high frequency noise. This is stored in the parameter storage memory 7 of FIG. 1 as average data of fixed pattern noise.
【0055】また、経時的な変化に対応するために、ユ
ーザが撮影前または後、または定期的に真暗画像を撮影
し、固定パターンノイズを更新することもできる。これ
は、電源スイッチがONになったときに、カメラが自動
的に行うこともできる。また、本実施の形態のようにモ
ザイクカラーフィルタを用いる場合には、CCD1で得
られた画像を補間演算等を行って色分離する前に、重ね
合わせ処理を行わせるようにすれば、重ね合わせ処理の
対象となるデータ量が少なくなり、メモリ容量を節約で
きる。そして、重ね合わせ後に色分離を行い、続いて、
色分離された画像信号に対してガンマ変換等の階調変換
処理を施すことになる。Further, in order to cope with a change over time, the user can photograph a pure dark image before or after photographing, or periodically, and update the fixed pattern noise. This can be done automatically by the camera when the power switch is turned on. In the case of using a mosaic color filter as in the present embodiment, if the image obtained by the CCD 1 is subjected to a superposition process before color separation by performing an interpolation operation or the like, the superposition process is performed. The amount of data to be processed is reduced, and the memory capacity can be saved. Then, after overlapping, color separation is performed.
Tone conversion processing such as gamma conversion is performed on the color-separated image signal.
【0056】重ね合わせ処理の前に階調変換処理を行わ
せる構成であっても良いが、この場合、階調処理の前に
上記色分離などの処理を行って画像信号を作成しておく
必要があり、これによって、重ね合わせ処理の対象とな
る情報量が多くなり、以て、使用メモリ容量も多くなっ
てしまう。但し、重ね合わせ処理の前に階調変換を行わ
せる構成であれば、撮影画像データの階調数が低下する
ことを回避できる。本実施の形態では、入出力が10ビ
ットの階調変換テーブルを用いるが、この特性の傾きが
1以上の領域(図10の境界線の左側)では、出力値に対
する階調特性のサンプルが粗くなるため、階調数が低下
してしまう。そこで、階調変換後に重ね合わせを行うこ
とで、この画像劣化を補償し、階調数の低下を避けるこ
とができる。The configuration may be such that the gradation conversion processing is performed before the superposition processing. In this case, however, it is necessary to generate the image signal by performing the above-described processing such as color separation before the gradation processing. As a result, the amount of information to be superimposed increases, and the memory capacity used also increases. However, if the configuration is such that the gradation conversion is performed before the superposition processing, it is possible to avoid a decrease in the number of gradations of the captured image data. In the present embodiment, a 10-bit input / output gradation conversion table is used. In a region where the slope of this characteristic is 1 or more (left side of the boundary line in FIG. 10), a sample of the gradation characteristic with respect to the output value is coarse. Therefore, the number of gradations decreases. Therefore, by performing the superposition after the gradation conversion, this image deterioration can be compensated and the decrease in the number of gradations can be avoided.
【0057】即ち、重ね合わせ前の階調変換処理は、色
分離などの処理による情報量の増大を招くので、使用メ
モリ容量の増大が必要となるが、階調数の減少は抑制さ
れることになり、逆に、重ね合わせ後の階調変換処理
は、色分離などの処理が行われる前に重ね合わせが行わ
れることになるので、重ね合わせ処理における使用メモ
リ容量が少なくて良いが、階調数の減少が生じてしまう
ものである。That is, the tone conversion processing before the superposition causes an increase in the amount of information due to processing such as color separation, so that it is necessary to increase the memory capacity to be used. Conversely, in the gradation conversion processing after the superposition, the superposition is performed before the processing such as the color separation is performed. This causes a decrease in the number of tones.
【0058】また、前記ガンマ変換などの階調変換にお
いては、予め低光量の被写体に適合する階調変換テーブ
ルを備えるようにし、夕方の遠景などを撮影して重ね合
わせ処理を実行させる場合には、前記低光量専用の変換
テーブルを用いて階調変換させる構成とすると良い。C
CDの感度特性は、各色で異なる特性を持つが、低照度
領域では図4に示すように、バラツキがリニアでないた
め、通常照度領域でカラーバランスを合わせても、低照
度領域では崩れてしまう。また、図5に示すように、通
常の階調変換テーブルを用いると、そのばらつきが大き
くなることがある。そこで、図6に示すように低光量専
用の階調変換テーブルを用いることにより、低照度領域
のバラツキを補正することができる。In the gradation conversion such as the above-mentioned gamma conversion, a gradation conversion table suitable for a subject with a low light quantity is provided in advance. It is preferable that the conversion is performed by using the conversion table dedicated to low light quantity. C
The sensitivity characteristics of the CD have different characteristics for each color, but since the variation is not linear in the low illuminance area as shown in FIG. 4, even if the color balance is adjusted in the normal illuminance area, the sensitivity is lost in the low illuminance area. In addition, as shown in FIG. 5, when a normal gradation conversion table is used, the variation may be large. Therefore, by using a gradation conversion table dedicated to low light quantity as shown in FIG. 6, it is possible to correct variations in the low illuminance area.
【0059】尚、重ね合わせる画像の撮影は、一枚ずつ
撮影者によるレリーズスイッチの操作に基づいて行わせ
る構成であっても良いし、レリーズスイッチが1回操作
されると、所期の枚数が自動的に撮影される構成であっ
ても良い。The superimposed images may be photographed one by one based on the operation of the release switch by the photographer. When the release switch is operated once, the expected number of images is reduced. A configuration in which an image is automatically taken may be used.
【図1】実施の形態における電子カメラのシステム構成
図。FIG. 1 is a system configuration diagram of an electronic camera according to an embodiment.
【図2】上記実施の形態におけるモザイクカラーフィル
タとオプティカルブラック領域とを示す図。FIG. 2 is a diagram showing a mosaic color filter and an optical black area in the embodiment.
【図3】固定パターンノイズの様子を示す図。FIG. 3 is a diagram illustrating a state of fixed pattern noise.
【図4】CCDの感度特性を示す線図。FIG. 4 is a diagram showing sensitivity characteristics of a CCD.
【図5】CCDの出力特性と通常の階調変換の特性とを
示す線図。FIG. 5 is a diagram showing output characteristics of a CCD and characteristics of normal gradation conversion.
【図6】CCDの出力特性と低光量専用の階調変換の特
性とを示す線図。FIG. 6 is a diagram showing output characteristics of a CCD and characteristics of gradation conversion dedicated to low light intensity.
【図7】第1の実施の形態における重ね合わせ処理の様
子を示すフローチャート。FIG. 7 is a flowchart illustrating a state of a superimposing process according to the first embodiment;
【図8】第2の実施の形態における重ね合わせ処理の様
子を示すフローチャート。FIG. 8 is a flowchart illustrating a state of a superimposing process according to the second embodiment.
【図9】第2の実施の形態における重ね合わせ処理の様
子を示すフローチャート。FIG. 9 is a flowchart illustrating a state of a superimposition process according to the second embodiment;
【図10】階調変換テーブルの特性を示す線図。FIG. 10 is a diagram illustrating characteristics of a gradation conversion table.
1 CCD 2 撮影レンズ 3 CDS/AGC回路 4 A/D変換器 5 Main-CPU 6 記録用メモリ 7 パラメータ記憶用メモリ 8 演算用メモリ 9 画像圧縮回路 10 液晶表示装置 11 Sub- CPU 12 モードスイッチ 13 電源スイッチ 14 CCD駆動回路 15 タイミング発生回路 16 露出制御回路 Reference Signs List 1 CCD 2 shooting lens 3 CDS / AGC circuit 4 A / D converter 5 Main-CPU 6 recording memory 7 parameter storage memory 8 operation memory 9 image compression circuit 10 liquid crystal display device 11 Sub-CPU 12 mode switch 13 power supply Switch 14 CCD drive circuit 15 Timing generation circuit 16 Exposure control circuit
Claims (15)
信号に変換して記録媒体に記録するように構成される電
子カメラであって、 撮影枚数を設定し、同一被写体を撮影した複数枚の画像
を重ね合わせて1枚の画像にして記憶させることを特徴
とする電子カメラ。An electronic camera configured to convert an optical image of an object into an image signal by a photoelectric conversion element and record the image signal on a recording medium, wherein the number of images to be photographed is set, and a plurality of images of the same object are photographed. An electronic camera wherein images are superimposed and stored as one image.
固定パターンノイズを除去することを特徴とする請求項
1記載の電子カメラ。2. The electronic camera according to claim 1, wherein fixed pattern noise is removed from an image obtained by superimposing the plurality of images.
影して得た画像信号に基づいて設定することを特徴とす
る請求項2記載の電子カメラ。3. The electronic camera according to claim 2, wherein said fixed pattern noise is set based on an image signal obtained by photographing a true-dark image.
定と同時に行うことを特徴とする請求項2記載の電子カ
メラ。4. The electronic camera according to claim 2, wherein the removal of the fixed pattern noise is performed simultaneously with the black reference setting.
撮影画像のデータビット幅よりも広くすることを特徴と
する請求項1〜4のいずれか1つに記載の電子カメラ。5. A data bit width of the superimposed image,
The electronic camera according to any one of claims 1 to 4, wherein the data bit width is wider than a data bit width of a captured image.
を、複数回に分けて行うことを特徴とする請求項1〜5
のいずれか1つに記載の電子カメラ。6. The method according to claim 1, wherein the reading of one image from the photoelectric conversion element is performed a plurality of times.
The electronic camera according to any one of the above.
わせる領域と、光電変換素子から読み込んだ画像を記憶
させる領域とを持つことを特徴とする請求項1〜6のい
ずれか1つに記載の電子カメラ。7. The memory according to claim 1, wherein one memory has an area for superimposing an image of one screen and an area for storing an image read from the photoelectric conversion element. An electronic camera according to claim 1.
を備え、撮影毎に画像にヘッダを付けて前記第1メモリ
に記録し、設定した枚数を撮影した後、記録した画像を
前記第2メモリへ転送し、画像の重ね合わせを行うこと
を特徴とする請求項1〜6のいずれか1つに記載の電子
カメラ。8. An image processing apparatus comprising two memories, a first memory and a second memory, wherein a header is attached to each image and recorded in the first memory. The electronic camera according to any one of claims 1 to 6, wherein the electronic camera is transferred to a second memory to superimpose images.
縮することを特徴とする請求項8記載の電子カメラ。9. The electronic camera according to claim 8, wherein an image is compressed when recording to said first memory.
とを示すタグが入っていることを特徴とする請求項8又
は9に記載の電子カメラ。10. The electronic camera according to claim 8, wherein a tag indicating that the image is a superimposed image is included in the header.
決定することを特徴とする請求項8〜10のいずれか1つ
に記載の電子カメラ。11. The electronic camera according to claim 8, wherein the number of photographed images is determined from a free space of the first memory.
クカラーフィルタとを組み合わせてカラー撮影を行う電
子カメラであり、前記複数枚の画像の階調変換及び重ね
合わせの処理を、補間処理を行う前のモザイクカラーフ
ィルタを介してえられた画像のままで行わせることを特
徴とする請求項1〜11のいずれか1つに記載の電子カメ
ラ。12. The electronic camera according to claim 1, wherein the electronic camera performs color photographing by combining a photoelectric conversion element and a mosaic color filter, and performs a gradation conversion and a superposition process of the plurality of images by performing an interpolation process. The electronic camera according to any one of claims 1 to 11, wherein the processing is performed with an image obtained through a previous mosaic color filter.
た後の画像信号に対して施すことを特徴とする請求項1
〜11のいずれか1つに記載の電子カメラ。13. The image processing apparatus according to claim 1, wherein a gradation conversion process is performed on the image signal after the superimposition is performed.
12. The electronic camera according to any one of items 11 to 11.
対して階調変換処理を施すことを特徴とする請求項2〜
4のいずれか1つに記載の電子カメラ。14. The image processing apparatus according to claim 2, wherein a gradation conversion process is performed on the image from which the fixed pattern noise has been removed.
5. The electronic camera according to any one of 4.
量専用の階調変換処理を施すことを特徴とする請求項1
〜11のいずれか1つに記載の電子カメラ。15. The method according to claim 1, wherein a gradation conversion process dedicated to a low light amount is performed before the plurality of images are superimposed.
12. The electronic camera according to any one of items 11 to 11.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP9219607A JPH1169226A (en) | 1997-08-14 | 1997-08-14 | Electronic camera |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP9219607A JPH1169226A (en) | 1997-08-14 | 1997-08-14 | Electronic camera |
Publications (1)
Publication Number | Publication Date |
---|---|
JPH1169226A true JPH1169226A (en) | 1999-03-09 |
Family
ID=16738189
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP9219607A Pending JPH1169226A (en) | 1997-08-14 | 1997-08-14 | Electronic camera |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPH1169226A (en) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003078820A (en) * | 2001-08-30 | 2003-03-14 | Nikon Corp | Electronic camera |
WO2007111264A1 (en) * | 2006-03-24 | 2007-10-04 | Nikon Corporation | Signal processing method, signal processing system, coefficient generating device, and digital camera |
JP2007281546A (en) * | 2006-04-03 | 2007-10-25 | Samsung Techwin Co Ltd | Imaging apparatus and imaging method |
JP2008263315A (en) * | 2007-04-10 | 2008-10-30 | Sony Corp | Imaging device and imaging method |
JP2008263314A (en) * | 2007-04-10 | 2008-10-30 | Sony Corp | Imaging device and imaging method |
US7978238B2 (en) | 2002-02-20 | 2011-07-12 | Canon Kabushiki Kaisha | Image data correction processing based on sensitivity |
JP2012142827A (en) * | 2011-01-05 | 2012-07-26 | Sony Corp | Image processing device and image processing method |
JP2013258596A (en) * | 2012-06-13 | 2013-12-26 | Denso Corp | Image pick-up device |
-
1997
- 1997-08-14 JP JP9219607A patent/JPH1169226A/en active Pending
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003078820A (en) * | 2001-08-30 | 2003-03-14 | Nikon Corp | Electronic camera |
US7978238B2 (en) | 2002-02-20 | 2011-07-12 | Canon Kabushiki Kaisha | Image data correction processing based on sensitivity |
WO2007111264A1 (en) * | 2006-03-24 | 2007-10-04 | Nikon Corporation | Signal processing method, signal processing system, coefficient generating device, and digital camera |
US8106970B2 (en) | 2006-03-24 | 2012-01-31 | Nikon Corporation | Signal processing method, signal processing system, coefficient generating device, and digital camera |
JP5157895B2 (en) * | 2006-03-24 | 2013-03-06 | 株式会社ニコン | Signal processing method, signal processing system, coefficient generation apparatus, and digital camera |
JP2007281546A (en) * | 2006-04-03 | 2007-10-25 | Samsung Techwin Co Ltd | Imaging apparatus and imaging method |
JP4662880B2 (en) * | 2006-04-03 | 2011-03-30 | 三星電子株式会社 | Imaging apparatus and imaging method |
JP2008263315A (en) * | 2007-04-10 | 2008-10-30 | Sony Corp | Imaging device and imaging method |
JP2008263314A (en) * | 2007-04-10 | 2008-10-30 | Sony Corp | Imaging device and imaging method |
JP2012142827A (en) * | 2011-01-05 | 2012-07-26 | Sony Corp | Image processing device and image processing method |
JP2013258596A (en) * | 2012-06-13 | 2013-12-26 | Denso Corp | Image pick-up device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100957261B1 (en) | Image pickup device and chromatic aberration correction method | |
JP5108172B2 (en) | Image data size conversion processing apparatus, electronic still camera, and image data size conversion processing recording medium | |
JP4008778B2 (en) | Imaging device | |
US7253836B1 (en) | Digital camera, storage medium for image signal processing, carrier wave and electronic camera | |
EP1246453A2 (en) | Signal processing apparatus and method, and image sensing apparatus | |
JP2007281546A (en) | Imaging apparatus and imaging method | |
JPH1042182A (en) | Image pickup device | |
JP2002199410A (en) | Imaging device, compensating processing method for deteriorated image and storage medium | |
JP3980781B2 (en) | Imaging apparatus and imaging method | |
JP4817529B2 (en) | Imaging apparatus and image processing method | |
JPH1169226A (en) | Electronic camera | |
US7499597B2 (en) | Image processing device | |
JP3839733B2 (en) | Imaging apparatus and image data output method | |
JP2001307079A (en) | Image processor, image processing method and recording medium | |
JP2001203969A (en) | Image pickup device and its operation control method | |
JP3730063B2 (en) | Color component generation apparatus, color component generation method, and multicolor image pickup apparatus using the same | |
JP5299159B2 (en) | Imaging apparatus and program | |
JPH0338986A (en) | Still video camera | |
JP2006129264A (en) | Chrominance signal correcting method, apparatus and program | |
JPH07123421A (en) | Image pickup device | |
JP2005277618A (en) | Photography taking apparatus and device and method for correcting shading | |
JP5912586B2 (en) | Image signal processing method, image signal processing circuit, and imaging apparatus | |
Allen et al. | Digital cameras and scanners | |
JP2002209224A (en) | Image processing unit, image processing method and recording medium | |
JP2006109046A (en) | Imaging device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050913 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060124 |