JP4342926B2 - Image input method and image input apparatus - Google Patents

Image input method and image input apparatus Download PDF

Info

Publication number
JP4342926B2
JP4342926B2 JP2003427009A JP2003427009A JP4342926B2 JP 4342926 B2 JP4342926 B2 JP 4342926B2 JP 2003427009 A JP2003427009 A JP 2003427009A JP 2003427009 A JP2003427009 A JP 2003427009A JP 4342926 B2 JP4342926 B2 JP 4342926B2
Authority
JP
Japan
Prior art keywords
image
image data
bright
memory
corrected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003427009A
Other languages
Japanese (ja)
Other versions
JP2005191641A (en
Inventor
委千弘 阿部
教之 小守
徹也 久野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2003427009A priority Critical patent/JP4342926B2/en
Publication of JP2005191641A publication Critical patent/JP2005191641A/en
Application granted granted Critical
Publication of JP4342926B2 publication Critical patent/JP4342926B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Description

この発明は、電子スチルカメラ等の画像入力方法及び画像入力装置に関するものであり、さらに詳しくは、長時間露光を行う画像入力方法及び画像入力装置に関するものである。   The present invention relates to an image input method and an image input apparatus such as an electronic still camera, and more particularly to an image input method and an image input apparatus that perform long exposure.

通常、光量が十分でない被写体を撮像する場合は、画像入力装置内にある撮像素子の電荷蓄積時間を長くするために、シャッターを長時間開く長時間露光を行う。これにより低照度下でもストロボ等の補助照明を用いることなく撮像を行ったり、星空を撮像したりすることができるからである。しかし、長時間露光を行うと、ノイズの一種である暗電流が撮像素子上に多く発生するため、ダイナミックレンジが狭くなる、得られた撮像画像のノイズが多くなる等の問題が発生していた。   Normally, when imaging a subject with insufficient light quantity, long exposure is performed by opening the shutter for a long time in order to increase the charge accumulation time of the image sensor in the image input device. This is because it is possible to capture an image without using an auxiliary illumination such as a strobe or image the starry sky even under low illumination. However, when a long exposure is performed, a dark current, which is a kind of noise, is generated on the image sensor, causing problems such as a narrow dynamic range and noise in the obtained captured image. .

この問題に対する対策として、例えば下記特許文献1には、以下のような撮像方法が記載されている。まず、被写体の撮像に必要な明るさを確保するための全体の電荷蓄積時間、すなわち撮像時間を求める。次に1枚の画像の撮像時間を、暗電流の増加が問題にならない程度の短い時間に設定し、この設定された時間にて、それぞれの画像の撮像を行う。撮像は、各々の画像の撮像時間の合計が、先ほど求めた全体の撮像時間に達するまで行う。そして最後に、得られた画像データを積算することにより、最終的な画像データを得る方法である。   As a countermeasure against this problem, for example, the following imaging method is described in Patent Document 1 below. First, the total charge accumulation time for securing the brightness necessary for imaging the subject, that is, the imaging time is obtained. Next, the imaging time of one image is set to a short time such that an increase in dark current does not cause a problem, and each image is captured at the set time. Imaging is performed until the total imaging time of each image reaches the total imaging time obtained earlier. Finally, the final image data is obtained by integrating the obtained image data.

特開平9−18793号公報(例えば、段落0063から0065)JP-A-9-18793 (for example, paragraphs 0063 to 0065)

しかし、上記の方法では、例えば、全体の撮像時間が128秒、暗電流の増加が問題とならない時間が2秒、画像を記憶するメモリ容量が8bit=256階調の場合、128(秒)/2(秒/枚)=64(枚)の画像が必要となる。しかし、メモリ容量の制限から、256(階調)/64(枚)=4(階調/枚)となり、1枚に対し4階調しか割り当てることができない。このような4階調という低階調の画像を64枚積算しても、得られる画像は、やはり低階調のものか、元の画像とは異なる画像となってしまう。   However, in the above method, for example, when the total imaging time is 128 seconds, the time when the increase in dark current is not a problem is 2 seconds, and the memory capacity for storing images is 8 bits = 256 gradations, 128 (seconds) / 2 (seconds / sheet) = 64 (sheets) images are required. However, 256 (gradation) / 64 (sheet) = 4 (gradation / sheet) due to memory capacity limitations, and only four gradations can be assigned to one sheet. Even if 64 images of such a low gradation of 4 gradations are integrated, the obtained image is still of a low gradation or an image different from the original image.

また、例えば、メモリ容量が8bit=256階調、暗電流の増加が問題とならない時間が1秒の場合において、必要な画像枚数は、256(階調)/1(階調/枚)=256(枚)である。したがって、1枚の画像に割り当てられる階調数は、256(階調)/256(枚)=1(階調/枚)にしかならない。さらに、光量を確保するために必要な全体の撮像時間が256秒より長くなると、1枚の画像に割り当てることができる階調数が1以下となることから、撮像ができないことになる。これはすなわち、被写体の光量が非常に少なく、暗い画像は、撮像ができないことを意味する。   For example, when the memory capacity is 8 bits = 256 gradations and the time when the increase in dark current is not a problem is 1 second, the required number of images is 256 (gradation) / 1 (gradation / sheet) = 256. (Sheets). Accordingly, the number of gradations assigned to one image is only 256 (gradation) / 256 (sheets) = 1 (gradation / sheet). Furthermore, if the total imaging time required for securing the light amount is longer than 256 seconds, the number of gradations that can be assigned to one image is 1 or less, and imaging cannot be performed. This means that the amount of light of the subject is very small and a dark image cannot be captured.

このように、従来の画像入力方法では、被写体の光量を測定した後撮像枚数を決めていたので、光量が十分でない暗い被写体を撮像する場合、得られた画像が低階調、あるいは元の画像とは異なる場合があり、さらに、撮像ができない場合もあった。この発明は、このような問題点を解消するためになされたものであり、従来の画像入力装置と同じメモリ容量であっても、高階調の画像データを得ることができる画像入力方法及び画像入力装置を提供することを目的とする。   As described above, in the conventional image input method, the number of images to be captured is determined after measuring the light amount of the subject. Therefore, when capturing a dark subject with insufficient light amount, the obtained image has a low gradation or the original image. In some cases, imaging may not be possible. The present invention has been made to solve such a problem, and an image input method and image input capable of obtaining high gradation image data even with the same memory capacity as that of a conventional image input apparatus. An object is to provide an apparatus.

この発明は、被写体の光量を測定し、測光結果を出力する測光ステップと、
当該測光結果に基づいて撮像時間を出力する第1の撮像時間出力ステップと、
当該撮像時間から画像1枚あたりの撮像時間を出力する第2の撮像時間出力ステップと、
メカニカルシャッターを開き、前記画像1枚あたりの撮像時間にて明画像を撮像する第1の明画像撮像ステップと、
当該撮像された明画像の明画像データをメモリに累積加算して補正画像データとして記憶する第1のメモリ演算ステップと、
前記補正画像データに基づいて画像の明るさを判断し、当該判断の結果に基づいて明画像の撮像を強制的に終了させる強制終了ステップとを備え、
前記補正画像データは、前記第1の明画像撮像ステップで撮像された明画像データから、メカニカルシャッターを閉じ、前記画像1枚あたりの撮像時間にて撮像する暗画像の暗画像データを減算した後、前記メモリに累積加算して記憶されることとしたものである。
The present invention provides a photometric step for measuring the amount of light of a subject and outputting a photometric result;
A first imaging time output step for outputting an imaging time based on the photometric result;
A second imaging time output step for outputting an imaging time per image from the imaging time;
A first bright image capturing step of opening a mechanical shutter and capturing a bright image at an image capturing time per image;
A first memory calculation step of accumulating the bright image data of the captured bright image in a memory and storing it as corrected image data;
Determining the brightness of the image based on the corrected image data, and forcibly ending the imaging of the bright image based on the result of the determination ,
The corrected image data is obtained by subtracting dark image data of a dark image captured at the imaging time per image from the bright image data captured in the first bright image capturing step. The cumulative addition is stored in the memory .

この発明は、限られたメモリ容量であっても、高階調の画像データを得ることができる。   According to the present invention, high gradation image data can be obtained even with a limited memory capacity.

実施の形態1.
この発明に係る画像入力方法は、被写体の光量を測定し、測定結果から明画像を得るために必要な全体の露光時間を出力する。そして、出力された露光時間を予め決められた撮像枚数を基に複数の時間に分割し、各分割時間に明画像データを取得する。また、各暗画像の撮像も、出力された分割時間を基準に行う。最後に、明画像データから暗画像データを減算することにより、最終的な画像データを得ようとするものである。
以下、この発明をその実施の形態を示す図面に基づいて具体的に説明する。
Embodiment 1 FIG.
The image input method according to the present invention measures the amount of light of a subject and outputs the entire exposure time necessary for obtaining a bright image from the measurement result. Then, the output exposure time is divided into a plurality of times based on a predetermined number of captured images, and bright image data is acquired at each division time. Each dark image is also picked up based on the output divided time. Finally, the final image data is obtained by subtracting the dark image data from the bright image data.
Hereinafter, the present invention will be specifically described with reference to the drawings showing embodiments thereof.

図1は、実施の形態1における画像入力装置20の構成を示すブロック図である。図1を用いて、画像入力処理の概略を説明する。
まず、操作部10内にあるレリーズボタンを押し下げることにより、処理がスタートする。レリーズボタンの押し下げは、操作部10からシステムコントローラ7に入力される。システムコントローラ7は、タイミングジェネレータ(以下、「TG」と記す。)6を介し、CCD3の駆動タイミングを見計らい、シャッター駆動部8を駆動し、メカニカルシャッター1の開閉動作を行う。なお、メカニカルシャッター1が開かれている露光時間は、測光部9から出力される被写体やその周辺の光量に基づいて、システムコントローラ7が決定する。レンズ2を介しCCD3上に結像した被写体のアナログ画像信号は、相関二重サンプリング部(Correlated Double Sampling。以下、「CDS」と記す。)4とA/D変換器5を通り、内部メモリ11上に原画像データとして保存される。内部メモリ11に保存された原画像データは、画像処理機能も有するシステムコントローラ7において、カラー化や補正等の画像処理が行われる。画像処理が行われた画像データは、LCD等により構成される表示部13にて表示、または装置外部にデータを移送可能な記録媒体12に記録される。
FIG. 1 is a block diagram illustrating a configuration of an image input device 20 according to the first embodiment. The outline of the image input process will be described with reference to FIG.
First, the process starts by depressing the release button in the operation unit 10. The depression of the release button is input from the operation unit 10 to the system controller 7. The system controller 7 estimates the drive timing of the CCD 3 via a timing generator (hereinafter referred to as “TG”) 6, drives the shutter drive unit 8, and opens and closes the mechanical shutter 1. The exposure time during which the mechanical shutter 1 is opened is determined by the system controller 7 based on the subject output from the photometry unit 9 and the amount of light around it. An analog image signal of a subject imaged on the CCD 3 via the lens 2 passes through a correlated double sampling unit (hereinafter referred to as “CDS”) 4 and an A / D converter 5, and is then stored in an internal memory 11. It is stored as original image data above. The original image data stored in the internal memory 11 is subjected to image processing such as colorization and correction in the system controller 7 having an image processing function. The image data subjected to the image processing is displayed on a display unit 13 constituted by an LCD or the like, or recorded on a recording medium 12 capable of transferring data to the outside of the apparatus.

なお、測光部9にて行っている被写体やその周辺の光量の測定は、CCD3により行うことも可能である。すなわち、CCD3に入射される光量をCDS4、A/D変換器5を通り出力される画像データから算出する方法である。また、測光方法には、その他、重点測光、マルチパターン測光等の方法があるが、本発明ではどの方法を採用してもよい。   Note that the measurement of the amount of light in the subject and the surrounding area performed by the photometric unit 9 can also be performed by the CCD 3. In other words, the amount of light incident on the CCD 3 is calculated from image data output through the CDS 4 and the A / D converter 5. In addition, the photometry method includes other methods such as priority photometry and multi-pattern photometry, but any method may be adopted in the present invention.

図2は、実施の形態1における画像入力処理のフローを示す図である。画像処理フローは、ステップ1、2の明画像の露光時間を決定する工程と、ステップ3からステップ9までの暗画像データを取得する工程と、ステップ10からステップ14までの明画像データを取得する工程とに大別される。暗画像データは、各画像入力装置が持つ固有の固定パターンノイズの検出に用いられる。以下、図2を用いて詳細に説明する。   FIG. 2 is a diagram showing a flow of image input processing in the first embodiment. In the image processing flow, the step of determining the exposure time of the bright image in steps 1 and 2, the step of acquiring dark image data from step 3 to step 9, and the bright image data from step 10 to step 14 are acquired. It is roughly divided into processes. The dark image data is used for detection of fixed pattern noise unique to each image input device. Hereinafter, it demonstrates in detail using FIG.

なお、本実施の形態では、例えば、メモリ容量8bit=256階調、暗電流が問題とならない短い時間が2秒、光量を確保するために必要な全体の撮像時間が128秒とする。なお、このような条件の場合、従来の画像入力方法であれば、上記で説明したように、1枚につき4階調の画像しか得ることができない。   In this embodiment, for example, the memory capacity is 8 bits = 256 gradations, the short time in which the dark current is not a problem is 2 seconds, and the total imaging time required to secure the light amount is 128 seconds. In such a condition, if the conventional image input method is used, only four gradation images can be obtained per sheet as described above.

まず、操作部10内にあるレリーズボタンを押し下げることにより、以下の一連の処理がスタートする。測光装置9により被写体及びその周辺の光量を測定し、システムコントローラ7は撮像に必要な光量を確保することができる露光時間Tを算出する(ステップ1)。今、上記で説明したように、T=128秒である。さらに、A/D変換器5のメモリ容量等、ハードウェアの制約により、あらかじめ決められている撮像枚数nを用い、各明画像Aiの露光時間、すなわち1枚の画像における光量を確保するための蓄積時間TnをT/nとして求める(ステップ2)。今、n=8枚とすると、Tn=128(秒)/8(枚)=16(秒/枚)である。また、1枚の画像データの階調は、256(階調)/8(枚)=32(階調/枚)となる。これは、従来の8倍の階調の画像データを得られることを意味する。   First, by depressing the release button in the operation unit 10, the following series of processes starts. The photometric device 9 measures the amount of light in the subject and its surroundings, and the system controller 7 calculates an exposure time T that can secure the amount of light necessary for imaging (step 1). Now, as explained above, T = 128 seconds. Further, due to hardware restrictions such as the memory capacity of the A / D converter 5, a predetermined number n of images is used to secure the exposure time of each bright image Ai, that is, the amount of light in one image. The accumulation time Tn is obtained as T / n (step 2). If n = 8, Tn = 128 (seconds) / 8 (sheets) = 16 (seconds / sheet). The gradation of one image data is 256 (gradation) / 8 (sheet) = 32 (gradation / sheet). This means that it is possible to obtain image data with 8 times the gradation of the conventional image data.

なお、取得する画像データの階調数を予め決めておき、この階調数とメモリ容量とから、撮像枚数nを決めることもできる。例えば、1枚の画像データの階調数を64(階調/枚)、メモリ容量が10bit=1024(階調)の場合、撮像枚数n=1024(階調)/64(階調/枚)=16(枚)となる。   It should be noted that the number of gradations of image data to be acquired can be determined in advance, and the number n of captured images can be determined from the number of gradations and the memory capacity. For example, when the number of gradations of one piece of image data is 64 (gradation / sheet) and the memory capacity is 10 bits = 1024 (gradation), the number of captured images n = 1024 (gradation) / 64 (gradation / sheet) = 16 (sheets).

次に、暗画像データの取得の工程である、ステップ3からステップ7について説明する。なお、暗画像データは、各画像入力装置が持つ固有の固定パターンノイズの検出に用いられる。まず、メカニカルシャッター1を閉じ(ステップ3)、ステップ2にて算出した蓄積時間Tnにて暗画像を撮像する(ステップ4)。取得された暗画像データBjは、図4(M11)に記載する動作により、メモリBに記憶される(ステップ5)。なお、メモリBは、図1の内部メモリ11内の、ある領域である。同様に、後述するメモリA、及びメモリBも、内部メモリ11内の、ある領域をさす。   Next, step 3 to step 7, which are dark image data acquisition steps, will be described. The dark image data is used for detection of fixed pattern noise unique to each image input device. First, the mechanical shutter 1 is closed (step 3), and a dark image is captured at the accumulation time Tn calculated in step 2 (step 4). The acquired dark image data Bj is stored in the memory B by the operation described in FIG. 4 (M11) (step 5). The memory B is a certain area in the internal memory 11 of FIG. Similarly, a memory A and a memory B, which will be described later, indicate a certain area in the internal memory 11.

次に、暗画像の撮像枚数がm−1枚に達しているか否かを判定し(ステップ6)、達していなければステップ4に戻り(ステップ7)、さらに暗画像の撮像を行う。なお、暗画像の撮像枚数mも、明画像の撮像枚数nと同様、A/D変換器5のメモリ容量等のハードウェアの制約により、あらかじめ決められている。暗画像の撮像枚数がm枚に達した場合は(ステップ8)、図4(M12)に記載されているように、A/D変換器5から新たに出力された暗画像データBmと、メモリBに蓄積されていたm−1枚目までの暗画像データとを加算し、加算したデータを撮像枚数mで除算した後、この計算結果を平均暗画像データBaveとしてメモリBに記憶する。今、例えば、m=6枚とすると、平均暗画像データBaveを得るのに必要な時間は、16(秒/枚)×6(枚)=96(秒)以上となる。   Next, it is determined whether or not the number of captured dark images has reached m−1 (step 6). If not, the process returns to step 4 (step 7), and further dark images are captured. The number m of dark images is determined in advance by hardware restrictions such as the memory capacity of the A / D converter 5 in the same manner as the number n of bright images. When the number of captured dark images has reached m (step 8), as described in FIG. 4 (M12), the dark image data Bm newly output from the A / D converter 5 and the memory After adding up to m−1th dark image data stored in B, and dividing the added data by the number m of images to be captured, the calculation result is stored in memory B as average dark image data Bave. Now, for example, if m = 6 sheets, the time required to obtain the average dark image data Bave is 16 (seconds / sheet) × 6 (sheets) = 96 (seconds) or more.

次に、明画像データの取得の工程である、ステップ10からステップ15について説明する。メカニカルシャッター1を開いた後(ステップ10)、ステップ2にて算出した蓄積時間Tnにて明画像を撮像する(ステップ11)。さらに、図4(M13)に示すように、A/D変換器5から新たに出力された明画像データAiから平均暗画像のデータBaveを減算し、さらに、すでにメモリAに蓄積されていた補正画像データを加算した後、新たな補正画像データYiとしてメモリAに記憶する(ステップ12)。メモリAから読み出された補正画像データYiは、画像処理機能を有するシステムコントローラ7により画像処理が行われた後、表示部13に送られ画像として表示される(ステップ13)。ステップ14では、明画像Aiの撮像枚数がn枚に達しているか否かを判定し、達していなければステップ10に戻り(ステップ15)、さらに明画像の撮像を行う。明画像の撮像枚数がn枚に達した場合は処理を終了する。一連の処理が終了した段階では、補正画像データYiをn枚積算した、長時間露光画像データYaddがメモリAに記憶された状態となり、この画像データYaddが表示部13に表示されている。なお、この画像データの取得の工程には、Tn・n=128秒以上となる。   Next, step 10 to step 15 which are processes for obtaining bright image data will be described. After the mechanical shutter 1 is opened (step 10), a bright image is taken at the accumulation time Tn calculated in step 2 (step 11). Further, as shown in FIG. 4 (M13), the average dark image data Bave is subtracted from the bright image data Ai newly output from the A / D converter 5, and the correction already stored in the memory A is performed. After adding the image data, it is stored in the memory A as new corrected image data Yi (step 12). The corrected image data Yi read from the memory A is subjected to image processing by the system controller 7 having an image processing function, and then sent to the display unit 13 and displayed as an image (step 13). In step 14, it is determined whether or not the number of bright images Ai taken has reached n. If not, the procedure returns to step 10 (step 15), and further bright images are taken. If the number of bright images picked up reaches n, the process ends. At the stage where a series of processing is completed, n pieces of corrected image data Yi are accumulated, and the long-exposure image data Yadd is stored in the memory A, and the image data Yadd is displayed on the display unit 13. Note that Tn · n = 128 seconds or longer in the image data acquisition step.

図3は、画像入力装置の動作と、明画像データ及び暗画像データの取得のタイミングを示したタイミングチャートである。図3(a)に示すように、画像入力装置はレリーズボタンの押し下げにより動作を開始する。システムコントローラ7は測光装置からの出力から全体の露光時間を決定し、蓄積時間Tnを算出する(ステップ1、2)。図3(b)に示すように、メカニカルシャッター1が閉じられた後、図3(c)に示しように、撮像時間Tnにて暗画像をm枚撮像する。撮像された暗画像は、図3(d)に示すように、A/D変換器5を介し暗画像データBjとしてメモリBに出力される(ステップ3から9)。次に、メカニカルシャッター1を開き、電荷蓄積時間Tnにて明画像をn枚撮像する。撮像された明画像はA/D変換器5を介し明画像データAiとしてメモリAに出力される(ステップ10から15)。   FIG. 3 is a timing chart showing the operation of the image input apparatus and the timing of acquiring bright image data and dark image data. As shown in FIG. 3A, the image input apparatus starts operation by pressing the release button. The system controller 7 determines the total exposure time from the output from the photometry device, and calculates the accumulation time Tn (steps 1 and 2). As shown in FIG. 3B, after the mechanical shutter 1 is closed, as shown in FIG. 3C, m dark images are taken at the imaging time Tn. The captured dark image is output to the memory B as dark image data Bj via the A / D converter 5, as shown in FIG. 3 (d) (steps 3 to 9). Next, the mechanical shutter 1 is opened, and n bright images are taken at the charge accumulation time Tn. The captured bright image is output to the memory A as the bright image data Ai through the A / D converter 5 (steps 10 to 15).

本実施の形態における画像入力方法では、図4(M13)に示すように、一回の処理により明画像データA1〜AnがメモリAに入力されるのではなく、電荷蓄積が行われた順にメモリAに蓄積される。したがって、表示部13に表示される画像データは、図5に示すように、時間経過とともに明るくなる。   In the image input method according to the present embodiment, as shown in FIG. 4 (M13), the bright image data A1 to An are not input to the memory A by a single process, but are stored in the order in which charges are accumulated. Accumulated in A. Therefore, the image data displayed on the display unit 13 becomes brighter with time as shown in FIG.

このように、本実施の形態に係る画像入力方法は、例えば、メモリ容量が8bit=256階調であっても、このメモリ容量で撮像が可能なように撮像枚数を予めn=8枚と決めておくことにより、1枚の画像当たり32階調という高階調な画像データを得ることができる。すなわち、限られたメモリ容量であっても、高階調の画像データを得ることができる。   Thus, in the image input method according to the present embodiment, for example, even if the memory capacity is 8 bits = 256 gradations, the number of images to be captured is determined as n = 8 in advance so that the image can be captured with this memory capacity. By doing so, it is possible to obtain image data having a high gradation of 32 gradations per image. That is, even with a limited memory capacity, high gradation image data can be obtained.

ここでポイントとなる点は、従来の画像入力方法が被写体の光量を測定した後に撮像枚数を決定していたのに対し、本実施の形態に係る画像入力方法は、予め撮像枚数を決定しておく点にある。これにより、従来では撮像できないような暗い被写体であっても、撮像を可能となった。   The point here is that the conventional image input method determines the number of images to be captured after measuring the amount of light of the subject, whereas the image input method according to the present embodiment determines the number of images to be captured in advance. There is a point. As a result, even a dark subject that cannot be imaged conventionally can be imaged.

なお、本実施の形態に係る画像入力方法は、説明に用いられた数値に限定されるのではなく、あらゆるメモリ容量、求められる階調数に適応可能であることはいうまでもない。   It should be noted that the image input method according to the present embodiment is not limited to the numerical values used in the description, and it is needless to say that it can be applied to any memory capacity and required number of gradations.

また、図3に示すタイミングチャートでは、暗画像データBmがメモリBに取り込まれた後にメカニカルシャッター1を開き、明画像の電荷蓄積、明画像データA1の取り込みを始めている。しかし、図6に示すように、暗画像の撮像が終わった後、暗画像データBmのメモリBへの取り込みを待たずにメカニカルシャッター1を開き、明画像の撮像を行ってもよい。これにより、全体の撮像時間をさらに短縮することが可能となる。   In the timing chart shown in FIG. 3, after the dark image data Bm is taken into the memory B, the mechanical shutter 1 is opened, and the charge accumulation of the bright image and the taking of the bright image data A1 are started. However, as shown in FIG. 6, after the dark image is captured, the mechanical shutter 1 may be opened to capture the bright image without waiting for the dark image data Bm to be taken into the memory B. Thereby, it is possible to further shorten the entire imaging time.

実施の形態2.
この実施の形態では、被写体やその周辺の光量が増大した場合への対応が可能な画像入力方法について説明する。すなわち、実施の形態1で説明した画像入力方法では、明画像の撮像中に被写体からの光量が増大した場合、最終的に得られる画像が明るくなりすぎる場合がある。本実施の形態では、このような、明画像の撮像中における光量の増大という現象が生じた場合にも対応可能な画像入力方法について説明する。
Embodiment 2. FIG.
In this embodiment, a description will be given of an image input method that can cope with an increase in the amount of light in the subject and its surroundings. In other words, in the image input method described in the first embodiment, when the amount of light from the subject increases during the bright image capturing, the finally obtained image may become too bright. In the present embodiment, an image input method that can cope with such a phenomenon that the amount of light increases during bright image capturing will be described.

図7は、実施の形態2における画像入力処理のフローを示す図である。画像処理フローは、ステップ21、22の明画像の露光時間を決定する工程と、ステップ23からステップ29までの暗画像データを取得する工程と、ステップ30からステップ36までの明画像データを取得する工程とに大別される。実施の形態1における画像入力処理のフローと異なるのは、明画像データの取り込みを強制的に終了することできるように、ステップ34が加えられた点である。   FIG. 7 is a diagram illustrating a flow of image input processing according to the second embodiment. The image processing flow includes the steps of determining the exposure time of the bright image in steps 21 and 22, the step of acquiring dark image data from step 23 to step 29, and the bright image data from step 30 to step 36. It is roughly divided into processes. The difference from the flow of the image input process in the first embodiment is that step 34 is added so that the capture of bright image data can be forcibly terminated.

ステップ21では、被写体の光量の測定を行い、適正な露光時間Tを算出する。しかし、その後、被写体からの光量が増大し、明画像の撮像時には、露光時間が算出された露光時間Tよりも短くてすむ場合がある。このような場合、図5に示すような徐々に明るくなる画像データを表示部13により確認しながら、明画像データの取り込みを強制的に終了させることにより(ステップ34)、適切な明るさの画像データを得ることが可能となる。また、システムコントローラ7に画像データYaddの明るさを確認させることにより、明画像データ取り込みをシステムコントローラ7による指令で強制的に終了させることも可能である。   In step 21, the amount of light of the subject is measured and an appropriate exposure time T is calculated. However, thereafter, the amount of light from the subject increases, and when a bright image is captured, the exposure time may be shorter than the calculated exposure time T. In such a case, an image with appropriate brightness is obtained by forcibly terminating the capture of the bright image data while confirming gradually brightening image data as shown in FIG. 5 by the display unit 13 (step 34). Data can be obtained. It is also possible to forcibly end bright image data capture by a command from the system controller 7 by causing the system controller 7 to confirm the brightness of the image data Yadd.

実施の形態3.
この実施の形態では、被写体やその周辺の光量が増大、または低下した場合への対応が可能な画像入力方法について説明する。すなわち、実施の形態2では、適正な露光時間Tの算出後に被写体の光量が増大した場合のみに対応が可能な画像入力方法について説明した。しかし、本実施の形態では、適正な露光時間Tの算出後、被写体の光量が増大した結果、得られた画像データが明るすぎる場合や、適正な露光時間Tの算出後に被写体の光量が低下した場合への対応が可能な画像入力方法について説明する。
Embodiment 3 FIG.
In this embodiment, a description will be given of an image input method that can cope with a case where the amount of light in the subject and its surroundings increases or decreases. That is, in the second embodiment, the image input method that can be used only when the amount of light of the subject increases after calculating the appropriate exposure time T has been described. However, in the present embodiment, the light amount of the subject increases after the calculation of the appropriate exposure time T. As a result, the obtained image data is too bright, or the light amount of the subject decreases after the calculation of the appropriate exposure time T. An image input method capable of handling the case will be described.

図8.1及び8.2は、実施の形態3における画像入力処理のフローを示す図である。画像処理フローは、ステップ41、42の明画像の露光時間を決定する工程と、ステップ43から49までの暗画像データを取得する工程と、ステップ50から56までの明画像データを取得する工程と、ステップ57から65までの画像データの明るさを調整する工程とに大別される。実施の形態2における画像入力処理のフローと異なるのは、ステップ57から65までの画像データの明るさを調整する工程が加えられた点である。   FIGS. 8.1 and 8.2 are diagrams showing a flow of image input processing in the third embodiment. The image processing flow includes a step of determining the exposure time of the bright image in steps 41 and 42, a step of acquiring dark image data in steps 43 to 49, and a step of acquiring bright image data in steps 50 to 56. The process is roughly divided into steps 57 to 65 for adjusting the brightness of the image data. The difference from the flow of the image input process in the second embodiment is that a process for adjusting the brightness of the image data in steps 57 to 65 is added.

また、図9(M21)から(M25)は、図8.1及び図8.2に示した実施の形態3に係る画像処理フローの各ステップにおけるメモリ演算操作を示す。なお、図9(M21)、(M22)、(M23)は、それぞれステップ45、49、52におけるメモリ演算操作である。ところで、ステップ45、49、52はそれぞれ図3におけるステップ5、9、12に対応している。したがって、図9(M21)、(M22)、(M23)のメモリ演算操作も図4(M11)、(M12)、(M13)と同じであるので、詳細な説明は省略する。   9 (M21) to (M25) show memory calculation operations in each step of the image processing flow according to the third embodiment shown in FIGS. 8.1 and 8.2. 9 (M21), (M22), and (M23) are memory calculation operations in steps 45, 49, and 52, respectively. Steps 45, 49, and 52 correspond to steps 5, 9, and 12 in FIG. 9 (M21), (M22), and (M23) are the same as those in FIGS. 4 (M11), (M12), and (M13), and thus detailed description thereof is omitted.

まず、ステップ56までにおいて、一旦、画像データYaddを取得する。しかしながら、例えば、露光時間Tの算出後、被写体の光量が低下し、得られた画像データが暗すぎる場合がある。また、被写体の光量が増大し、得られた画像が明るくなることが予想される場合は、ステップ54において明画像データの取り込みを強制的に終了させることができる。しかし、適切なタイミングで強制終了が行われなかった結果、得られた画像データが明るすぎる場合がある。このような場合は、以下で説明するステップ57から65において、画像データの明るさを調整する。   First, until step 56, image data Yadd is once acquired. However, for example, after the exposure time T is calculated, the amount of light of the subject decreases, and the obtained image data may be too dark. If it is expected that the amount of light of the subject will increase and the resulting image will be bright, the bright image data can be forcibly terminated in step 54. However, as a result of the forced termination not being performed at an appropriate timing, the obtained image data may be too bright. In such a case, the brightness of the image data is adjusted in steps 57 to 65 described below.

まず、得られた画像データの明るさが適切かどうかを判断する(ステップ57)。適切な場合は処理を終了する。画像データが明るすぎると判断した場合は、ステップ58から61に示すように、画像データの明るさを下げるための操作を行う。すなわち、まず、蓄積時間Tnにて明画像を撮像する(ステップ58)。そして、図9(M24)に示すように、A/D変換器5から新たに出力された明画像データAiから、メモリBに記憶されている平均暗画像データBaveを減算し、この減算結果を、すでにメモリAに蓄積されていた補正画像データから減算することにより、補正画像データYの明るさを下げる(ステップ59)。補正画像データYは表示部13に表示されるので(ステップ60)、画像内容を確認しながらさらに明るさの調整を行うか否かを判断する(ステップ61)。   First, it is determined whether the brightness of the obtained image data is appropriate (step 57). If appropriate, terminate the process. If it is determined that the image data is too bright, an operation for reducing the brightness of the image data is performed as shown in steps 58 to 61. That is, first, a bright image is captured at the accumulation time Tn (step 58). Then, as shown in FIG. 9 (M24), the average dark image data Bave stored in the memory B is subtracted from the bright image data Ai newly output from the A / D converter 5, and this subtraction result is obtained. Then, the brightness of the corrected image data Y is lowered by subtracting it from the corrected image data already stored in the memory A (step 59). Since the corrected image data Y is displayed on the display unit 13 (step 60), it is determined whether or not the brightness is further adjusted while checking the image content (step 61).

ステップ57において、画像データが暗すぎると判断した場合は、ステップ62から65に示すように、画像データの明るさを上げるための操作を行う。すなわち、蓄積時間Tnにて明画像を撮像する(ステップ62)。そして、図9(M25)に示すように、A/D変換器5から新たに出力された明画像データAiからメモリBに記憶されている平均暗画像データBaveを減算し、さらに、すでにメモリAに蓄積されていた補正画像データと加算することにより、補正画像データYの明るさを上げる(ステップ63)。補正画像データYは表示部13に表示されるので(ステップ64)、画像内容を確認しながらさらに明るさの調整を行うか否かを判断する(ステップ65)。   If it is determined in step 57 that the image data is too dark, as shown in steps 62 to 65, an operation for increasing the brightness of the image data is performed. That is, a bright image is captured at the accumulation time Tn (step 62). Then, as shown in FIG. 9 (M25), the average dark image data Bave stored in the memory B is subtracted from the bright image data Ai newly output from the A / D converter 5, and the memory A has already been subtracted. The brightness of the corrected image data Y is increased by adding to the corrected image data stored in (step 63). Since the corrected image data Y is displayed on the display unit 13 (step 64), it is determined whether or not the brightness is further adjusted while checking the image content (step 65).

このように、本実施の形態に係る画像入力方法では、画像データの明るさを調整することが可能となる。すなわち、一旦得られた画像データが明るすぎる場合や暗すぎる場合でも、表示部13を確認しながら画像データの明るさを調整することが可能となるので、適切な明るさの画像データとすることが可能となる。また、システムコントローラ7に画像データYaddの明るさを確認させることにより、明画像データ取り込みをシステムコントローラ7による指令で強制的に終了させることも可能である。   Thus, in the image input method according to the present embodiment, the brightness of the image data can be adjusted. That is, even when the obtained image data is too bright or too dark, it is possible to adjust the brightness of the image data while checking the display unit 13, so that the image data has an appropriate brightness. Is possible. It is also possible to forcibly end bright image data capture by a command from the system controller 7 by causing the system controller 7 to confirm the brightness of the image data Yadd.

実施の形態4.
この実施の形態では、暗画像の撮像枚数mをCCD3の温度を考慮した数にすることができる画像入力方法について説明する。
Embodiment 4 FIG.
In this embodiment, an image input method capable of setting the number m of dark images taken in consideration of the temperature of the CCD 3 will be described.

実施の形態1において、暗画像の撮像枚数mは、CDS4から出力される画像信号のS/NやA/D変換器5のビット精度等から予め決められていると説明した。しかしながら、装置周りの温度が変化した場合や、装置が動作することによる発生する熱により、CCD3の温度が変化することも考えられる。図10に示すように、ノイズの一種である暗電流は、温度の上昇に対し指数関数的に増加することが知られている。したがって、暗電流等による固定パターンノイズの検出に用いられる暗画像の撮像枚数も、温度変化に従い増減させてもよい。すなわち、暗画像の撮像枚数mをCCD3の温度を考慮した数とすることにより、暗画像データBaveの精度が向上し、最終的に得られる画像データYaddの精度も向上する。   In the first embodiment, it has been described that the number m of dark image images is determined in advance from the S / N of the image signal output from the CDS 4, the bit accuracy of the A / D converter 5, and the like. However, it is conceivable that the temperature of the CCD 3 changes when the temperature around the device changes or due to the heat generated by the operation of the device. As shown in FIG. 10, it is known that dark current, which is a kind of noise, increases exponentially with increasing temperature. Therefore, the number of captured dark images used for detecting fixed pattern noise due to dark current or the like may be increased or decreased according to the temperature change. That is, by setting the number m of dark images to be taken into consideration, the accuracy of the dark image data Bave is improved and the accuracy of the finally obtained image data Yadd is also improved.

図11は、実施の形態4における画像入力装置の動作と、明画像データ及び暗画像データの取得のタイミングを示したタイミングチャートである。図11(a)に示すように、まずレリーズボタンの押し下げにより動作を開始する。次に、図11(b)に示すように、メカニカルシャッター1が閉じられた後、撮像時間Cでサンプル画像の撮像を行う。なお、撮像時間Cは、CCD3の電子シャッターが動作する場合の最短の時間である。そして、得られたサンプル画像データC1における全画素の画面平均輝度値P1を算出する。算出された平均輝度値P1と、例えば、この画像入力装置の出荷前に25℃で測定され記録されているP0とを比較し、P0とP1との差分値から暗画像データの撮像枚数mを決定する。そして、暗画像をm枚撮像し、図11(d)に示すように、m枚の暗画像データBjを得る。その後の明画像の撮像、明画像データの取得は図2に示す場合と同様であるので、説明を省略する。   FIG. 11 is a timing chart showing the operation of the image input apparatus according to the fourth embodiment and the timing of obtaining bright image data and dark image data. As shown in FIG. 11A, the operation is first started by pressing the release button. Next, as shown in FIG. 11B, after the mechanical shutter 1 is closed, a sample image is captured at an imaging time C. The imaging time C is the shortest time when the electronic shutter of the CCD 3 operates. Then, the screen average luminance value P1 of all pixels in the obtained sample image data C1 is calculated. The calculated average luminance value P1 is compared with, for example, P0 measured and recorded at 25 ° C. before shipment of the image input device, and the number m of dark image data captured is determined from the difference value between P0 and P1. decide. Then, m dark images are taken, and m dark image data Bj are obtained as shown in FIG. Subsequent bright image capturing and bright image data acquisition are the same as in the case shown in FIG.

なお、平均輝度値P0とP1から暗画像の撮像枚数を求める場合、P0とP1との差分値から演算により撮像枚数mを決定しているが、P0とP1との差分値からルックアップテーブルを参照することにより撮像枚数mを決定してもよい。   When obtaining the number of dark images to be picked up from the average luminance values P0 and P1, the number of picked-up images m is determined by calculation from the difference value between P0 and P1, but a lookup table is obtained from the difference value between P0 and P1. The image pickup number m may be determined by referring to it.

また、図11では、サンプル画像の撮像回数が1回の場合について説明したが、図12に示すように、サンプル画像の撮像回数を複数回としてもよい。これにより、複数の画像データClを用いることが可能となり、平均輝度値P1の精度が向上し、暗画像の撮像枚数mを決定することができる。   Further, in FIG. 11, the case where the number of times of capturing the sample image has been described, but as illustrated in FIG. As a result, a plurality of image data Cl can be used, the accuracy of the average luminance value P1 is improved, and the number m of dark images can be determined.

さらに、撮像時間Cは、CCD3の電子シャッターが動作する場合の最短の時間としたが、暗画像や明画像の撮像時間より短い時間であればよく、電子シャッターの最短動作時間より長くてもよい。   Furthermore, although the imaging time C is the shortest time when the electronic shutter of the CCD 3 operates, it may be shorter than the imaging time of the dark image or the bright image, and may be longer than the minimum operating time of the electronic shutter. .

このように、本実施の形態に係る画像入力方法では、暗画像の撮像枚数mをCCD3の温度を考慮した数とすることができ、得られる暗画像データの精度が向上することから、画像データYaddの精度も向上する。   As described above, in the image input method according to the present embodiment, the number m of dark images that can be taken can be set in consideration of the temperature of the CCD 3, and the accuracy of the obtained dark image data is improved. The accuracy of Yadd is also improved.

実施の形態5.
この実施の形態では、実施の形態1から4にて説明した画像入力方法において、メモリの容量を考慮した画像処理方法について説明する。
Embodiment 5 FIG.
In this embodiment, an image processing method in consideration of memory capacity in the image input methods described in the first to fourth embodiments will be described.

実施の形態1から4では、図4(M11)、図9(M21)に示すように、暗画像データBjをメモリBに単純に積算した後、最後に撮像枚数mにて除算し、平均暗画像データBaveを求めている。したがって、暗画像データを単純に積算している途中でメモリ容量が不足する「桁あふれ」という現象が起こる可能性が高くなる。このような「桁あふれ」と呼ばれる現象が起こると、演算に割り当てるビット数を増やす等のメモリ操作が必要となる。このようなメモリ操作ためには、通常の演算時間以上に時間が必要となる。そこで、以下のような方法によりこの問題に対処する。   In Embodiments 1 to 4, as shown in FIG. 4 (M11) and FIG. 9 (M21), the dark image data Bj is simply added to the memory B, and then finally divided by the number of images to be picked up m to obtain the average darkness. The image data Bave is obtained. Therefore, there is a high possibility that a phenomenon of “digit overflow” in which the memory capacity is insufficient during the simple integration of the dark image data will occur. When such a phenomenon called “overflow” occurs, a memory operation such as increasing the number of bits allocated to the operation becomes necessary. For such a memory operation, more time than the normal calculation time is required. Therefore, this problem is addressed by the following method.

図13.1及び図13.2は、実施の形態5における画像入力処理のフローを示す図である。画像処理フローは、ステップ71、72の明画像の露光時間を決定する工程と、ステップ73から79までの画像データを取得する工程と、ステップ80からステップ85までの暗画像データを取得する工程と、ステップ86から91までの明画像データを取得する工程とに大別される。本実施の形態では、ステップ73から79、及びステップ80から85また、図14(M31)から(M35)は、図13.1及び図13.2に示した本実施の形態の画像処理フローの各ステップにおけるメモリ演算操作を示す。なお、図14(M31)、(M32)、(M33)、(M34)、(M35)は、それぞれステップ75、79、81、85、88におけるメモリ演算操作である。また、図15は、実施の形態5における画像入力装置の動作と、明画像データ及び暗画像データの取得のタイミングを示したタイミングチャートである。   FIG. 13.1 and FIG. 13.2 are diagrams showing the flow of the image input process in the fifth embodiment. The image processing flow includes a step of determining the exposure time of the bright image in steps 71 and 72, a step of acquiring image data from steps 73 to 79, and a step of acquiring dark image data from step 80 to step 85. The process is roughly divided into steps 86 to 91 for obtaining bright image data. In the present embodiment, steps 73 to 79 and steps 80 to 85 and FIG. 14 (M31) to (M35) are the image processing flow of the present embodiment shown in FIG. 13.1 and FIG. 13.2. The memory calculation operation in each step is shown. 14 (M31), (M32), (M33), (M34), and (M35) are memory calculation operations in steps 75, 79, 81, 85, and 88, respectively. FIG. 15 is a timing chart showing the operation of the image input apparatus according to the fifth embodiment and the timing of obtaining bright image data and dark image data.

以下、フローを説明する。まず、図15(a)に示すように、まず、レリーズボタンの押し下げにより動作を開始する。次に、明画像の露光時間を決定する(ステップ71、72)。そして、図15(b)に示すように、メカニカルシャッター1を閉じ(ステップ73)、図15(c)に示すように、CCD3の電子シャッターが動作する最短の電荷蓄積時間でサンプル画像の撮像を行う。次に、サンプル画像データC1から暗画像データBjの撮像枚数mを決定し、サンプル画像Ckについても、m枚の撮像を行う(ステップ74から79)。この際、ステップ75におけるメモリ演算は、図14(M31)に示すように、新たに入力されたサンプル画像データCkに、すでにメモリCに記憶されているデータを加算して、メモリCに記憶される。   Hereinafter, the flow will be described. First, as shown in FIG. 15A, first, the operation is started by pressing the release button. Next, the exposure time of the bright image is determined (steps 71 and 72). Then, as shown in FIG. 15B, the mechanical shutter 1 is closed (step 73), and as shown in FIG. 15C, the sample image is taken in the shortest charge accumulation time during which the electronic shutter of the CCD 3 operates. Do. Next, the number m of dark image data Bj to be captured is determined from the sample image data C1, and m images are also captured for the sample image Ck (steps 74 to 79). At this time, the memory calculation in step 75 is stored in the memory C by adding the data already stored in the memory C to the newly input sample image data Ck as shown in FIG. 14 (M31). The

画像データCmに関するメモリ操作(ステップ79)は、図14(M32)に示すように、A/D変換器5から新たに出力されたサンプル画像データCmと、メモリCに蓄積されてたm−1枚目までのサンプル画像データとを加算し、加算したデータを撮像枚数mで除算した後、その計算結果を平均サンプル画像データCaveとしてメモリCに記憶する。   As shown in FIG. 14 (M32), the memory operation relating to the image data Cm (step 79) includes the sample image data Cm newly output from the A / D converter 5 and the m−1 stored in the memory C. The sample image data up to the first sheet is added, and the added data is divided by the number m of captured images, and the calculation result is stored in the memory C as average sample image data Cave.

暗画像データを取得する工程(ステップ80から85)は、基本的に実施の形態1と同じであるので、詳細な説明は省略する。ただし、ステップ81のメモリ操作は、図14(M33)に示すように、A/D変換器5から新たに出力された暗画像データBjから平均サンプル画像データCaveを減算し、さらに、すでにメモリBに蓄積されていた暗画像データを加算した後、暗画像データBjとしてメモリBに記憶する。また、ステップ85のメモリ操作は、図14(M34)に示すように、A/D変換器5から新たに出力された暗画像データBmから、平均サンプル画像データCaveを減算し、この減算結果に、すでにメモリBに蓄積されていた暗画像データを加算し、撮像枚数mで除算した後、暗画像データBjとしてメモリBに記憶する。この操作により、画像データBaveを得る。   Since the process of acquiring dark image data (steps 80 to 85) is basically the same as that of the first embodiment, detailed description thereof is omitted. However, in the memory operation in step 81, the average sample image data Cave is subtracted from the dark image data Bj newly output from the A / D converter 5, as shown in FIG. Are stored in the memory B as dark image data Bj. Further, in the memory operation in step 85, as shown in FIG. 14 (M34), the average sample image data Cave is subtracted from the dark image data Bm newly output from the A / D converter 5, and the subtraction result is obtained. The dark image data already accumulated in the memory B is added, divided by the number m of captured images, and stored in the memory B as dark image data Bj. By this operation, image data Bave is obtained.

明画像データを取得する工程(ステップ86から91)については、実施の形態1と同じであるので詳細は省略する。   Since the process of obtaining bright image data (steps 86 to 91) is the same as that of the first embodiment, its details are omitted.

このように、本実施の形態では、メモリBには、サンプル画像データCaveが減算された暗画像データが記憶されるので、実施の形態1よりもメモリBの容量が少なくすむため、「桁あふれ」を起こす可能性を低くすることができる。   Thus, in this embodiment, since the dark image data obtained by subtracting the sample image data Cave is stored in the memory B, the capacity of the memory B is smaller than that in the first embodiment. ”Can be reduced.

実施の形態6.
この実施の形態では、暗画像の撮像における蓄積時間を変化させる。
Embodiment 6 FIG.
In this embodiment, the accumulation time for capturing a dark image is changed.

すなわち、上記実施の形態1から5においては、電荷蓄積時間をTnとして、各暗画像の撮像を行ってきたが、図16に示すように、蓄積時間をTp=Tn×mとして、1度の撮像動作により撮像を行うことも可能である。このような撮像方法とすることにより、CCD3の電子シャッターを開閉させる動作が不要となるので、暗画像BjとBj+1との間にあるブランク期間を削減できることから、全体の露光時間を削減することが可能となる。   That is, in the first to fifth embodiments, each dark image is captured with the charge accumulation time as Tn. However, as shown in FIG. 16, the accumulation time is Tp = Tn × m. It is also possible to perform imaging by an imaging operation. By adopting such an imaging method, the operation of opening and closing the electronic shutter of the CCD 3 becomes unnecessary, so that the blank period between the dark images Bj and Bj + 1 can be reduced, so that the overall exposure time can be reduced. It becomes possible.

実施の形態1における画像入力装置の構成を示すブロック図である。1 is a block diagram illustrating a configuration of an image input device according to Embodiment 1. FIG. 実施の形態1における画像入力処理のフローを示す図である。FIG. 5 is a diagram showing a flow of image input processing in the first embodiment. 実施の形態1における画像入力装置の動作のタイミングを示す図である。6 is a diagram illustrating operation timing of the image input apparatus according to Embodiment 1. FIG. 実施の形態1におけるメモリ演算の動作を示す図である。6 is a diagram illustrating an operation of memory calculation in the first embodiment. FIG. 実施の形態1における表示部に表示される画像の時間経過を示す図である。6 is a diagram illustrating a time lapse of an image displayed on the display unit in the first embodiment. FIG. 実施の形態1における画像入力装置の動作のタイミングを示す図である。6 is a diagram illustrating operation timing of the image input apparatus according to Embodiment 1. FIG. 実施の形態2における画像入力処理のフローを示す図である。FIG. 10 is a diagram illustrating a flow of image input processing in the second embodiment. 実施の形態3における画像入力処理のフローを示す図である。FIG. 10 is a diagram illustrating a flow of image input processing in the third embodiment. 実施の形態3における画像入力処理のフローを示す図である。FIG. 10 is a diagram illustrating a flow of image input processing in the third embodiment. 実施の形態3におけるメモリ演算の動作を示す図である。FIG. 10 is a diagram illustrating an operation of memory calculation in the third embodiment. 暗電流と温度との対応を示す図である。It is a figure which shows a response | compatibility with dark current and temperature. 実施の形態4における画像入力装置の動作のタイミングを示す図である。FIG. 20 is a diagram illustrating operation timing of the image input apparatus according to the fourth embodiment. 実施の形態4における画像入力装置の動作のタイミングを示す図である。FIG. 20 is a diagram illustrating operation timing of the image input apparatus according to the fourth embodiment. 実施の形態5における画像入力処理のフローを示す図である。FIG. 20 is a diagram illustrating a flow of image input processing in the fifth embodiment. 実施の形態5における画像入力処理のフローを示す図である。FIG. 20 is a diagram illustrating a flow of image input processing in the fifth embodiment. 実施の形態5におけるメモリ演算の動作を示す図である。FIG. 20 is a diagram illustrating an operation of memory calculation in the fifth embodiment. 実施の形態6における画像入力装置の動作のタイミングを示す図である。FIG. 20 is a diagram illustrating operation timing of the image input apparatus according to the sixth embodiment. 実施の形態6における画像入力装置の動作のタイミングを示す図である。FIG. 20 is a diagram illustrating operation timing of the image input apparatus according to the sixth embodiment.

符号の説明Explanation of symbols

1 メカニカルシャッター、2 レンズ、3 CCD、4 CDS、5 A/D変換器、6 タイミングジェネレータ、7 システムコントローラ、8 シャッター駆動部、9 測光部、10 操作部、11 内部メモリ、12 記録媒体、13 表示部、14 圧縮伸長部、20 画像入力装置   DESCRIPTION OF SYMBOLS 1 Mechanical shutter, 2 Lens, 3 CCD, 4 CDS, 5 A / D converter, 6 Timing generator, 7 System controller, 8 Shutter drive part, 9 Photometry part, 10 Operation part, 11 Internal memory, 12 Recording medium, 13 Display unit, 14 compression / decompression unit, 20 image input device

Claims (6)

被写体の光量を測定し、測光結果を出力する測光ステップと、
当該測光結果に基づいて撮像時間を出力する第1の撮像時間出力ステップと、
当該撮像時間から画像1枚あたりの撮像時間を出力する第2の撮像時間出力ステップと、
メカニカルシャッターを開き、前記画像1枚あたりの撮像時間にて明画像を撮像する第1の明画像撮像ステップと、
当該撮像された明画像の明画像データをメモリに累積加算して補正画像データとして記憶する第1のメモリ演算ステップと、
前記補正画像データに基づいて画像の明るさを判断し、当該判断の結果に基づいて明画像の撮像を強制的に終了させる強制終了ステップとを備え、
前記補正画像データは、前記第1の明画像撮像ステップで撮像された明画像データから、メカニカルシャッターを閉じ、前記画像1枚あたりの撮像時間にて撮像する暗画像の暗画像データを減算した後、前記メモリに累積加算して記憶されることを特徴とする画像入力方法。
A metering step that measures the amount of light of the subject and outputs the metering result; and
A first imaging time output step for outputting an imaging time based on the photometric result;
A second imaging time output step for outputting an imaging time per image from the imaging time;
A first bright image capturing step of opening a mechanical shutter and capturing a bright image at an image capturing time per image;
A first memory calculation step of accumulating the bright image data of the captured bright image in a memory and storing it as corrected image data;
Determining the brightness of the image based on the corrected image data, and forcibly ending the imaging of the bright image based on the result of the determination ,
The corrected image data is obtained by subtracting dark image data of a dark image captured at the imaging time per image from the bright image data captured in the first bright image capturing step. An image input method characterized by being accumulated and stored in the memory .
前記第2の撮像時間出力ステップで出力される画像1枚あたりの撮像時間は、前記第1の撮像時間出力ステップで出力された撮像時間を、予め決められた撮像枚数で除算して求めることを特徴とする請求項1に記載の画像入力方法。 The imaging time per image output in the second imaging time output step is obtained by dividing the imaging time output in the first imaging time output step by a predetermined number of images. The image input method according to claim 1, wherein: 前記補正画像データが所定の明るさより明るいと判断した場合は、
メカニカルシャッターを開き、前記画像1枚あたりの撮像時間にて明画像をさらに1枚撮像する第2の明画像撮像ステップと、
前記第1のメモリ演算ステップにより前記メモリに累積加算され記憶された画像から前記第2の明画像撮像ステップで撮像した画像データを減算し、メモリに記憶することで前記補正画像データの明るさを下げる第2のメモリ演算ステップと、
を備え、
前記補正画像データが所定の明るさより暗いと判断した場合は、
メカニカルシャッターを開き、前記画像1枚あたりの撮像時間にて明画像をさらに1枚撮像する第3の明画像撮像ステップと、
前記第1のメモリ演算ステップにより前記メモリに累積加算され記憶された画像に前記第3の明画像撮像ステップで撮像した画像データを加算し、メモリに記憶することで前記補正画像データの明るさを上げる第3のメモリ演算ステップと
を備えることを特徴とする請求項1又は2に記載の画像入力方法。
When it is determined that the corrected image data is brighter than a predetermined brightness,
A second bright image capturing step of opening a mechanical shutter and capturing one more bright image at an image capturing time per image;
The brightness of the corrected image data is reduced by subtracting the image data captured in the second bright image capturing step from the image accumulated and added to the memory by the first memory calculation step and storing the image data in the memory. A second memory calculation step to lower;
With
When it is determined that the corrected image data is darker than a predetermined brightness,
A third bright image capturing step of opening a mechanical shutter and capturing one more bright image at the image capturing time per image;
The image data captured in the third bright image capturing step is added to the image accumulated and stored in the memory in the first memory calculation step, and the brightness of the corrected image data is stored in the memory. A third memory calculation step to raise and
The image input method according to claim 1 or 2, characterized in that it comprises a.
前記第2のメモリ演算ステップで演算する画像は、前記第2の明画像撮像ステップで撮像された前記明画像からメカニカルシャッターを閉じ、前記画像1枚あたりの撮像時間にて撮像する暗画像を減算した画像であること
を特徴とする請求項に記載の画像入力方法。
For the image calculated in the second memory calculation step, the mechanical shutter is closed from the bright image captured in the second bright image capturing step, and the dark image captured in the imaging time per one image is subtracted. the image input method according to claim 3, characterized in <br/> be images.
被写体の光量を測定し、測光結果を出力する測光手段と、
前記被写体の光学像を電気的な画像データに変換する撮像手段と、
前記撮像手段から出力される画像データを記憶する記憶手段と、
前記測光結果の出力と予め決められた撮像枚数とから、画像1枚あたりの撮像時間を決定すると共に、メカニカルシャッターを開き、前記画像1枚あたりの撮像時間にて撮像されて前記撮像手段から出力される明画像の明画像データを、前記記憶手段に記憶された補正画像データに累積加算して補正画像データとして前記記憶手段に記憶させる画像処理手段とを備え、
前記画像処理手段は、前記補正画像データの明るさを判断し、当該判断の結果に基づいて明画像の撮像を強制的に終了させ、
前記画像処理手段によって前記記憶手段に記憶される前記補正画像データは、前記明画像データから、メカニカルシャッターを閉じ、前記画像1枚あたりの撮像時間にて撮像する暗画像の暗画像データを減算した後、前記記憶手段に記憶された補正画像データに累積加算して前記記憶手段に記憶されること
を特徴とする画像入力装置
A photometric means for measuring the amount of light of the subject and outputting a photometric result;
Imaging means for converting the optical image of the subject into electrical image data;
Storage means for storing image data output from the imaging means;
Based on the output of the photometric result and a predetermined number of images, the imaging time per image is determined, the mechanical shutter is opened, and the image is captured at the imaging time per image and output from the imaging means. Image processing means for accumulating the bright image data of the bright image to be added to the corrected image data stored in the storage means and storing it as corrected image data in the storage means,
The image processing means determines the brightness of the corrected image data, forcibly ends bright image capturing based on the determination result,
The corrected image data stored in the storage unit by the image processing unit is obtained by subtracting dark image data of a dark image captured at the imaging time per one image from the bright image data by closing a mechanical shutter. after, the storage means images input device you characterized in that it is stored in the storage means cumulatively adds the stored correction image data.
前記画像処理手段が、前記補正画像データが所定の明るさより明るいと判断した場合に、
前記撮像手段によりさらに1枚の明画像を撮像し、当該明画像の明画像データを前記記憶手段に記憶されている累積加算された補正画像データから減算して補正画像データの明るさを下げ、
前記画像処理手段が、前記補正画像データが所定の明るさより暗いと判断した場合に、
前記撮像手段によりさらに1枚の明画像を撮像し、当該明画像の明画像データを前記記憶手段に記憶されている累積加算された補正画像データに加算して補正画像データの明るさを上げることを特徴とする請求項5に記載の画像入力装置。
When the image processing means determines that the corrected image data is brighter than a predetermined brightness,
A further bright image is captured by the imaging means, and the brightness of the corrected image data is lowered by subtracting the bright image data of the bright image from the cumulatively added corrected image data stored in the storage means,
When the image processing means determines that the corrected image data is darker than a predetermined brightness,
A further bright image is picked up by the image pickup means, and the bright image data of the bright image is added to the corrected correction image data stored in the storage means to increase the brightness of the corrected image data. The image input device according to claim 5 .
JP2003427009A 2003-12-24 2003-12-24 Image input method and image input apparatus Expired - Fee Related JP4342926B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003427009A JP4342926B2 (en) 2003-12-24 2003-12-24 Image input method and image input apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003427009A JP4342926B2 (en) 2003-12-24 2003-12-24 Image input method and image input apparatus

Publications (2)

Publication Number Publication Date
JP2005191641A JP2005191641A (en) 2005-07-14
JP4342926B2 true JP4342926B2 (en) 2009-10-14

Family

ID=34786394

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003427009A Expired - Fee Related JP4342926B2 (en) 2003-12-24 2003-12-24 Image input method and image input apparatus

Country Status (1)

Country Link
JP (1) JP4342926B2 (en)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4662880B2 (en) * 2006-04-03 2011-03-30 三星電子株式会社 Imaging apparatus and imaging method
JP2008236661A (en) * 2007-03-23 2008-10-02 Olympus Corp Imaging apparatus and dark current component cancel processing method
JP5229224B2 (en) * 2007-06-14 2013-07-03 ソニー株式会社 Imaging apparatus, imaging control method, and imaging control program
JP4942572B2 (en) * 2007-07-13 2012-05-30 富士フイルム株式会社 Image adding apparatus and method, and program
JP4735994B2 (en) 2008-08-27 2011-07-27 ソニー株式会社 Imaging apparatus and method, program, and recording medium
JP5889323B2 (en) * 2011-10-12 2016-03-22 キヤノン株式会社 IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
WO2013054403A1 (en) * 2011-10-12 2013-04-18 キヤノン株式会社 Image pickup apparatus and method of controlling image pickup apparatus
US9979890B2 (en) 2015-04-23 2018-05-22 Apple Inc. Digital viewfinder user interface for multiple cameras
US9854156B1 (en) 2016-06-12 2017-12-26 Apple Inc. User interface for camera effects
WO2018096813A1 (en) * 2016-11-24 2018-05-31 ソニーセミコンダクタソリューションズ株式会社 Solid-state image capturing element, solid-state image capturing device, and solid-state image capturing element control method
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. User interfaces for simulated depth effects
US10645294B1 (en) 2019-05-06 2020-05-05 Apple Inc. User interfaces for capturing and managing visual media
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
CN112887586B (en) * 2019-05-06 2022-05-10 苹果公司 User interface for capturing and managing visual media
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
US11039074B1 (en) 2020-06-01 2021-06-15 Apple Inc. User interfaces for managing media
US11212449B1 (en) 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
US12112024B2 (en) 2021-06-01 2024-10-08 Apple Inc. User interfaces for managing media styles

Also Published As

Publication number Publication date
JP2005191641A (en) 2005-07-14

Similar Documents

Publication Publication Date Title
JP4342926B2 (en) Image input method and image input apparatus
JP4695541B2 (en) Imaging device
JP3897520B2 (en) IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
US8023012B2 (en) Image capture device correcting defective pixel information
JP3748267B2 (en) Imaging device
US7167204B2 (en) Automatic exposure control apparatus and method
US6992712B2 (en) Imaging apparatus
JP2010157925A (en) Imaging apparatus, control method thereof and program
JP5553199B2 (en) Imaging apparatus and imaging control method
JP4542962B2 (en) Digital camera
CN101656819A (en) Image capturing device, and smear reduction method
US7663677B2 (en) Imaging apparatus with gradation sequence conversion based at least upon zoom position
JP4508740B2 (en) Image processing device
JP2003046871A (en) Image pickup device
JP3630149B2 (en) Imaging apparatus, white balance control method, and white balance control program
US7440014B2 (en) Electronic camera with basic operating clock frequency change based on photography mode
JP2007214933A (en) Color image pickup device and its control method
JP4054780B2 (en) Imaging device
EP1615452A2 (en) Still image photography
JP2001230976A (en) Device and method for picking up image, and computer- readable recording medium with recorded program for computer for executing the same
JP2002176653A (en) Pixel defect detecting method and electronic camera
JP5445956B2 (en) Imaging device
JP2006033158A (en) Imaging apparatus
JP4869837B2 (en) Microscope imaging apparatus, microscope imaging program, and microscope imaging method
JP3845771B2 (en) Imaging apparatus, white balance control method, and white balance control program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050510

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071219

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080108

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20080218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080306

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090414

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090611

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090707

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090708

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120717

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120717

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130717

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees