JP4243844B2 - Image capturing apparatus and image capturing method - Google Patents

Image capturing apparatus and image capturing method Download PDF

Info

Publication number
JP4243844B2
JP4243844B2 JP2003341866A JP2003341866A JP4243844B2 JP 4243844 B2 JP4243844 B2 JP 4243844B2 JP 2003341866 A JP2003341866 A JP 2003341866A JP 2003341866 A JP2003341866 A JP 2003341866A JP 4243844 B2 JP4243844 B2 JP 4243844B2
Authority
JP
Japan
Prior art keywords
shooting
image
light receiving
receiving unit
curtain sync
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003341866A
Other languages
Japanese (ja)
Other versions
JP2005109979A (en
Inventor
茂雄 関野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2003341866A priority Critical patent/JP4243844B2/en
Publication of JP2005109979A publication Critical patent/JP2005109979A/en
Application granted granted Critical
Publication of JP4243844B2 publication Critical patent/JP4243844B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images

Description

本発明は、撮影装置及びその撮影方法に係り、詳しくは、撮影条件や撮影モードの異なる撮影を1台で同時に行うことができる撮影装置及び撮影方法に関する。   The present invention relates to an image capturing apparatus and an image capturing method thereof, and more particularly to an image capturing apparatus and an image capturing method capable of simultaneously performing image capturing with different image capturing conditions and image capturing modes.

従来、デジタルカメラにおいては、被写体の撮影に影響を与えるべく、シャッタースピード、絞り等の撮影条件を変化させて撮影する手法は古くからある銀塩カメラと同様であるが、デジタルカメラにおいは、撮影した画像をその場で直ぐに見ることができ、撮影条件を変えての取り直しが可能である。
また、静止画、動画、連写撮影等の撮影モードを設定して撮影することも可能である。
Conventionally, in digital cameras, the method of shooting by changing the shooting conditions such as shutter speed and aperture to affect the shooting of the subject is the same as the old silver halide camera, but in digital cameras, The captured image can be seen immediately on the spot, and it is possible to retake it by changing the shooting conditions.
It is also possible to set a shooting mode such as still image, moving image, continuous shooting, etc.

また、下記特許公開公報には、撮影モードに対応するプログラムが複数設定され、そのプログラム制御に従い撮影する発明が開示されている。詳しくは、絞り、シャッタースピードだけでなく、色合いや感度などデジタル処理を加えたプログラム制御により撮影を行なうというものである。   Further, the following patent publication discloses an invention in which a plurality of programs corresponding to shooting modes are set and shooting is performed according to the program control. Specifically, shooting is performed not only with the aperture and shutter speed, but also with program control that adds digital processing such as hue and sensitivity.

公開特許公報 特開2000−196946(段落「0039」および段落「0046」参照)Published Patent Publication JP 2000-196946 (see paragraph “0039” and paragraph “0046”)

しかしながら、従来のデジタルカメラ(単体のデジタルカメラ)にあっては、予め1つの撮影条件および撮影モードを設定して撮影を行なうため、以下のような問題点があった。
(a)予め1つの撮影条件(例えば、シャッタースピード等)等を設定するため、決定的瞬間などの撮り直しがきかないシャッターチャンスの場合に、撮影条件等の設定ミスにより撮影が失敗するということがあった。
(b)撮影条件と撮影モードを1つしか設定できないため、複数の異なった撮影条件および撮影モードで同じ対象物を同時に撮影することができなかった。また、再び撮影条件を変えて撮影したい場合は、撮影時にわざわざ撮影条件等の設定を変えなければならず、手間と時間がかかり、面倒がかかった。
(c)デジタルカメラを用いて連写撮影を行う場合においても、デジタルカメラの機能等の問題から連写撮影のスピードに限界があった。
(d)デジタルカメラを用いて同じ対象物を同時に動画撮影及び静止画撮影を同時に行う場合には、動画撮影を一旦中断し、静止画撮影を行うしかなかった。
(e)また、上記した(a)〜(c)は1台で撮影する場合であり、どうしても撮影条件や撮影モードを変えて同時に被写体を撮影したい場合は、2つの別個のデジタルカメラを予め用意しておき、撮影条件と撮影モードをそれぞれ変えた2つデジタルカメラを1人で持って、被写体を撮影するしかなく、手間がかかり、面倒であった。
However, the conventional digital camera (single digital camera) has the following problems because it performs shooting by setting one shooting condition and shooting mode in advance.
(A) Since one shooting condition (for example, shutter speed, etc.) is set in advance, in the case of a shutter chance that cannot be retaken such as a decisive moment, the shooting fails due to a setting error of the shooting condition, etc. there were.
(B) Since only one shooting condition and shooting mode can be set, the same object cannot be simultaneously shot under a plurality of different shooting conditions and shooting modes. In addition, when it is desired to change the shooting conditions again, it is necessary to change settings such as the shooting conditions at the time of shooting, which is troublesome, time consuming and troublesome.
(C) Even when continuous shooting is performed using a digital camera, the speed of continuous shooting is limited due to problems such as the function of the digital camera.
(D) In the case of simultaneously performing moving image shooting and still image shooting of the same object using a digital camera, moving image shooting must be temporarily interrupted to perform still image shooting.
(E) The above (a) to (c) are for shooting with one camera. If you want to shoot a subject at the same time by changing shooting conditions and shooting modes, prepare two separate digital cameras in advance. I had to take two digital cameras with different shooting conditions and shooting modes by myself to shoot the subject, which was troublesome and cumbersome.

そこで本発明は、かかる従来の問題点に鑑みてなされたものであり、単体のデジタルカメラで撮影条件や撮影モードの異なる複数の画像を同時に撮影することができ、また、動画撮影の中断を伴わない静止画撮影を容易に行うことができる撮影装置及びその撮影方法を提供することを目的とする。   Therefore, the present invention has been made in view of such conventional problems, and a single digital camera can simultaneously shoot a plurality of images with different shooting conditions and shooting modes, and is accompanied by interruption of movie shooting. It is an object of the present invention to provide a photographing apparatus capable of easily performing still image photographing and a photographing method thereof.

上記目的達成のため、請求項1記載の発明による撮影装置は、被写体を撮影する2つの撮影手段1回の撮影指示で先幕シンクロ撮影と後幕シンクロ撮影とを行う撮影モードを設定する設定手段と、前記設定手段により前記撮影モードが設定されている状態で撮影指示が為された場合、一方の撮影手段で先幕シンクロ撮影が実行され、且つ他方の撮影手段で、撮影開始タイミングが前記先幕シンクロ撮影の撮影開始タイミングと異なるとともに露光期間が前記先幕シンクロ撮影の露光期間と一部重なる後幕シンクロ撮影が実行されるように、前記2つの撮影手段を制御する制御手段と、を備えることを特徴とする。 For the above purpose achieve, the imaging apparatus according to the first aspect of the invention, the photography mode is set to perform the two photographing means for photographing a subject, and a one shot instruction in the first-curtain synchronization capturing and rear curtain sync If the shooting instruction is given in a state where the shooting mode is set by the setting unit, the first-curtain sync shooting is executed by one shooting unit, and the shooting start timing is set by the other shooting unit. Is different from the shooting start timing of the first-curtain sync shooting, and control means for controlling the two shooting means so that the second-curtain sync shooting is executed so that the exposure period partially overlaps the exposure period of the first-curtain sync shooting It is characterized by providing.

また、請求項2記載の発明による撮影装置は、請求項1記載の撮影装置において、前記制御手段は、前記先幕シンクロ撮影に係るストロボ発光が終了した後、当該先幕シンクロ撮影に係る露光期間が終了するまでの間に、前記後幕シンクロ撮影に係る露光を開始させることを特徴とする。According to a second aspect of the present invention, there is provided the photographing apparatus according to the first aspect, wherein after the flash emission related to the first-curtain sync shooting is completed, the control means is an exposure period related to the first-curtain sync shooting. Until the end of the exposure, exposure related to the trailing curtain sync photographing is started.

また、請求項3記載の発明による撮影装置は、請求項2記載の撮影装置において、前記先幕シンクロ撮影に係る露光期間の長さは、前記後幕シンクロ撮影に係る露光期間の長さ以下であることを特徴とする。According to a third aspect of the present invention, in the photographing apparatus according to the second aspect, the length of the exposure period related to the front curtain sync shooting is less than the length of the exposure period related to the rear curtain sync shooting. It is characterized by being.

また、請求項4記載の発明による撮影装置の撮影方法は、被写体を撮影する2つの撮影手段を備える撮影装置の撮影方法であって、1回の撮影指示で先幕シンクロ撮影と後幕シンクロ撮影とを行う撮影モードを設定する設定工程と、前記設定工程により前記撮影モードが設定されている状態で撮影指示が為された場合、一方の撮影手段で先幕シンクロ撮影が実行され、且つ他方の撮影手段で、撮影開始タイミングが前記先幕シンクロ撮影の撮影開始タイミングと異なるとともに露光期間が前記先幕シンクロ撮影の露光期間と一部重なる後幕シンクロ撮影が実行されるように、前記2つの撮影手段を制御する制御工程と、を備えることを特徴とする。According to a fourth aspect of the present invention, there is provided a photographing method of a photographing apparatus comprising two photographing means for photographing a subject, wherein first-curtain sync shooting and rear-curtain sync shooting with one shooting instruction. A setting step for setting a shooting mode for performing the shooting, and when a shooting instruction is given in a state where the shooting mode is set by the setting step, leading curtain sync shooting is executed by one shooting means, and the other shooting mode is set. The two shootings are performed so that shooting start timing is different from shooting start timing of the first-curtain sync shooting and rear-curtain sync shooting is performed with an exposure period partially overlapping with the exposure period of the first-curtain sync shooting. And a control step for controlling the means.

請求項1及び4記載の発明によれば、1回の撮影指示で、先幕シンクロ撮影と後幕シンクロ撮影とが実行されるので、同一の被写体の先幕シンクロ撮影画像と後幕シンクロ撮影画像とを略同時に得ることができる。According to the first and fourth aspects of the present invention, the first-curtain sync shooting and the second-curtain sync shooting are executed by one shooting instruction, and therefore the first-curtain sync shooting image and the second-curtain sync shooting image of the same subject. Can be obtained almost simultaneously.

請求項2記載の発明によれば、先幕シンクロ撮影に係るストロボ発光による後幕シンクロ撮影の露光への影響を避けることが出来る。According to the second aspect of the present invention, it is possible to avoid the influence on the exposure of the rear curtain sync photographing due to the flash emission related to the front curtain sync photographing.

請求項3記載の発明によれば、撮像手段毎のシャッタースピードが異なる場合であっても、先幕シンクロ撮影に係るストロボ発光による後幕シンクロ撮影の露光への影響を避けることが出来る。According to the third aspect of the present invention, even if the shutter speeds of the image pickup units are different, it is possible to avoid the influence on the exposure of the rear curtain sync photographing due to the flash emission related to the front curtain sync photographing.

以下、本発明の実施の形態を、デジタルカメラ(1台)に適用した一例として図面を参照して説明する。   Hereinafter, an embodiment of the present invention will be described with reference to the drawings as an example applied to a single digital camera.

[実施の形態]
図1は、デジタルカメラ1の概略構成を示すブロック図である。図1のデジタルカメラ1は、CCD2、CCD3、TG(timing Generator)4、ユニット回路5、CPU6、DRAM7、ROM8、RAM9、画像表示部10、キー入力部11、カードI/F12、レンズ14、レンズ15、絞り兼用シャッター16、絞り兼用シャッター17、モータ駆動ブロック18、モータ駆動ブロック19を備えており、カードI/F12には、図示しないカメラ本体のカードスロットに着脱自在に装着されたメモリ・カード13が接続されている。
[Embodiment]
FIG. 1 is a block diagram showing a schematic configuration of the digital camera 1. 1 includes a CCD 2, a CCD 3, a TG (timing generator) 4, a unit circuit 5, a CPU 6, a DRAM 7, a ROM 8, a RAM 9, an image display unit 10, a key input unit 11, a card I / F 12, a lens 14, and a lens. 15, an aperture / shutter 16, an aperture / shutter 17, a motor drive block 18, and a motor drive block 19, and a memory card that is detachably mounted in a card slot of a camera body (not shown) on the card I / F 12. 13 is connected.

レンズ14、15は図示しないフォーカスレンズ、ズームレンズから構成されている。また、駆動ブロック18、19はフォーカスレンズ、ズームレンズを光軸方向に駆動するフォーカスモータ及びズームモータと、CPU6から送られる制御信号に従いフォーカスモータ及びズームモータをそれぞれ駆動するモータドライバとから構成されている(図示略)。
絞り兼用シャッター16、絞り兼用シャッター17は図示しない駆動回路を含み、駆動回路はCPU6から送られる制御信号に従って絞り兼用シャッターを動作させる。また、絞り兼用シャッター16は、CCD2とレンズ14との間に設置され、絞り兼用シャッター17は、CCD3とレンズ15との間に設置されている。
The lenses 14 and 15 are composed of a focus lens and a zoom lens (not shown). The drive blocks 18 and 19 include a focus lens and a zoom motor that drive the focus lens and the zoom lens in the optical axis direction, and motor drivers that respectively drive the focus motor and the zoom motor according to control signals sent from the CPU 6. (Not shown).
The diaphragm / shutter 16 and the diaphragm / shutter 17 include a driving circuit (not shown), and the driving circuit operates the diaphragm / shutter in accordance with a control signal sent from the CPU 6. The diaphragm / shutter 16 is installed between the CCD 2 and the lens 14, and the diaphragm / shutter 17 is installed between the CCD 3 and the lens 15.

CCD2はレンズ14を介して投影された被写体を光電変換し撮像信号としてユニット回路5に出力する。CCD3はレンズ15を介して投影された被写体を光電変換し撮像信号としてユニット回路5に出力する。なお、CCD2及びCCD3は同一の被写体に向かって、互いの光軸が平行になるように設定されている。
また、CCD2、CCD3は、TG4によって生成された所定周波数のタイミング信号によって駆動される。TG4にはユニット回路が接続されている。ユニット回路5は、CCD2及びCCD3から出力される撮像信号を相関二重サンプリングして保持するCDS(Correlated Double Sampling)回路、その撮像信号を増幅するゲイン調整アンプ(AGC)、増幅後の撮像信号をデジタル信号に変換するA/D変換器(AD)から構成されており、CCD2、CCD3の出力信号はユニット回路5を経てデジタル信号としてCPU6に送られる。
The CCD 2 photoelectrically converts the subject projected through the lens 14 and outputs it to the unit circuit 5 as an imaging signal. The CCD 3 photoelectrically converts the subject projected through the lens 15 and outputs it to the unit circuit 5 as an imaging signal. The CCDs 2 and 3 are set so that their optical axes are parallel to each other toward the same subject.
The CCD2 and CCD3 are driven by a timing signal having a predetermined frequency generated by the TG4. A unit circuit is connected to TG4. The unit circuit 5 includes a CDS (Correlated Double Sampling) circuit that holds the imaging signals output from the CCD 2 and the CCD 3 by correlated double sampling, a gain adjustment amplifier (AGC) that amplifies the imaging signals, and the amplified imaging signals. It is composed of an A / D converter (AD) for converting it into a digital signal, and the output signals of the CCD 2 and CCD 3 are sent to the CPU 6 as a digital signal through the unit circuit 5.

画像表示部10はカラーLCDとその駆動回路とを含み、撮影待機状態にあるときにはCCD2及びCCD3によって撮像された被写体画像をスルー画像として表示し、記録画像の再生時には保存用メモリ・カード13から読み出され伸張された記録画像(静止画又は動画)を表示する。キー入力部11はシャッターボタン、実行キー、キャンセルキー、電源キー、MENUキー等の複数の操作キーを含み、使用者によるキー操作に応じたキー入力信号をCPU6に出力する。   The image display unit 10 includes a color LCD and its driving circuit, displays the subject image captured by the CCD 2 and the CCD 3 as a through image when in the shooting standby state, and reads it from the storage memory card 13 when reproducing the recorded image. The extracted recorded image (still image or moving image) is displayed. The key input unit 11 includes a plurality of operation keys such as a shutter button, an execution key, a cancel key, a power key, and a MENU key, and outputs a key input signal corresponding to the key operation by the user to the CPU 6.

DRAM7はCCD2、CCD3により撮像された後、デジタル化された被写体の画像データを一時記憶するバッファメモリとして使用されるとともに、CPU6のワーキングメモリとしても使用される。
ROM8、RAM9にはCPU6による各部の制御に必要な制御プログラム及び必要なデータが格納されている。特に、撮影条件(シャッタースピード、絞り、ズーム、強調色、感度等)、撮影モード(静止画/動画モード、高速連写モード、先幕/後幕シンクロ等)のプログラム、データが記録されている。
The DRAM 7 is used as a buffer memory for temporarily storing digitized subject image data after being imaged by the CCD 2 and the CCD 3, and also as a working memory for the CPU 6.
The ROM 8 and RAM 9 store control programs and necessary data necessary for the control of each unit by the CPU 6. In particular, programs and data for shooting conditions (shutter speed, aperture, zoom, emphasis color, sensitivity, etc.) and shooting modes (still image / movie mode, high-speed continuous shooting mode, front curtain / rear curtain sync, etc.) are recorded. .

ここで、静止画/動画モードとは、どちらか一方のCCDで静止画を撮像し、他方のCCDで動画を撮像する撮影モードことである。
また、高速連写モードとは、CCD2及びCCD3が一定間隔で被写体を連続的に撮像することであり、絞り兼用シャッター16の開閉の周期と絞り兼用シャッター17の開閉の周期とは同じ周期であるが位相が半周期ずれており、それぞれのCCD2、CCD3が被写体を連続的に撮像する撮影モードのことである。なお、周期の遅れは半周期に限らず、任意に設定することもできる。
Here, the still image / moving image mode is a shooting mode in which a still image is captured by one of the CCDs and a moving image is captured by the other CCD.
Further, the high-speed continuous shooting mode is that the CCD 2 and the CCD 3 continuously image a subject at a constant interval, and the opening / closing cycle of the aperture / shutter 16 and the opening / closing cycle of the aperture / shutter 17 are the same cycle. Is a shooting mode in which the phases are shifted by a half cycle, and each of the CCDs 2 and 3 continuously images the subject. Note that the delay of the cycle is not limited to a half cycle, and can be arbitrarily set.

そして、先幕シンクロ/後幕シンクロモードとは、どちらか一方のCCDによって先幕シンクロで被写体を撮像し、他方のCCDによって後幕シンクロで被写体を撮像する撮影モードのことである。先幕シンクロとは、絞りシャッターを開くと同時に図示しないストロボを発光させて被写体を撮像することであり、後幕シンクロとは、絞りシャッターを閉じる直前にストロボを発光させて被写体を撮像することである。 The first-curtain sync / second-curtain sync mode is a shooting mode in which one of the CCDs captures the subject with the first-curtain sync and the other CCD captures the subject with the second-curtain sync. First-curtain sync is to capture a subject by firing a strobe (not shown) at the same time that the aperture shutter is opened. is there.

このとき、例えば、CCD2で先幕シンクロ、CCD3で後幕シンクロとして撮像する場合は、まず、絞り兼用シャッター16を開くと同時にストロボを発光させ、CCD2によって先幕シンクロ画像の撮像を開始する。このときは、絞り兼用シャッター17は閉じたままである。そして、ストロボの光が十分なくなってから、絞り兼用シャッター17を開き、CCD3によって後幕シンクロ画像の撮像を開始する。そして、先幕シンクロの撮像が終了してから(絞り兼用シャッター16が閉じてから)ストロボを発光させて、後幕シンクロの撮像を終了する(絞り兼用シャッター17を閉じる)。
したがって、ROM8、RAM9には、絞り兼用シャッター16、17を制御したり、先幕/後幕によってストロボを発光させるタイミングを制御したりするプログラム等が記録されている。
At this time, for example, when imaging with the CCD 2 as the first-curtain sync and with the CCD 3 as the second-curtain sync, first, the aperture / shutter 16 is opened and at the same time, the strobe is emitted, and the CCD 2 starts capturing the first-curtain sync image. At this time, the aperture / shutter 17 remains closed. Then, after the strobe light is sufficiently exhausted, the aperture / shutter 17 is opened, and the CCD 3 starts to capture the rear curtain sync image. Then, after the first-curtain sync imaging is completed (after the aperture / shutter 16 is closed), the strobe is emitted, and the rear-curtain sync imaging is terminated (the aperture / shutter 17 is closed).
Accordingly, the ROM 8 and RAM 9 store programs for controlling the diaphragm shutters 16 and 17 and controlling the timing at which the strobe light is emitted by the front curtain / rear curtain.

ユーザがキー入力部11を操作することにより撮影条件、撮影モードが選択された場合は、CPU6は、RAM、ROM上から該選択されたプログラム、データを読み出し、該選択されたプログラム、データにしたがって、レンズ14及びレンズ15、絞り兼用シャッター16及び絞り兼用シャッター17等を制御し、また、選択された撮影モードにしたがって、静止画又は動画撮影等を行う。   When the shooting condition and shooting mode are selected by the user operating the key input unit 11, the CPU 6 reads the selected program and data from the RAM and ROM, and according to the selected program and data. Further, the lens 14 and the lens 15, the diaphragm / shutter 16 and the diaphragm / shutter 17 are controlled, and still images or moving images are photographed according to the selected photographing mode.

つまり、CCD2、レンズ14、絞り兼用シャッター16、TG4、ユニット回路5、CPU6は、本発明の撮像手段を構成し、CCD3、レンズ15、絞り兼用シャッター17、TG4、ユニット回路5、CPU6も、本発明の撮像手段を構成する。本実施の形態のデジタルカメラ1は、1台で2つの撮像手段を有することになる。
そして、CPU6、ROM8、RAM9は、本発明の設定手段、制御手段を構成する。
That is, the CCD 2, lens 14, aperture / shutter 16, TG 4, unit circuit 5, and CPU 6 constitute the imaging means of the present invention, and the CCD 3, lens 15, aperture / shutter 17, TG 4, unit circuit 5, and CPU 6 are also present. The imaging means of the invention is configured. One digital camera 1 according to the present embodiment has two imaging units.
The CPU 6, ROM 8, and RAM 9 constitute setting means and control means of the present invention.

次に、動作を説明する。
図2〜図5は本実施の形態におけるデジタルカメラの動作を説明するためのフローチャートである。
図6は画像表示部に表示された画像の一例を示す図である。
図6(a)は撮影しようとする風景をスルー画像を通して、画像表示部10に表示させたときの画像の一例を示す図である。画像100は、家110、山130、山と大地の境界線120とから構成されている。
次に、図2〜図5のフローチャートに従って説明する。
図2において、ステップS1で、ユーザは受光ユニットA、Bのそれぞれの撮影条件、撮影モードを選択する。ここで、受光ユニットAは、CCD2、レンズ14、絞り兼用シャッター16、モータ駆動ブロック18、TG4、ユニット回路5及びCPU6で構成され、受光ユニットBは、CCD3、レンズ15、絞り兼用シャッター17、モータ駆動ブロック19、TG4、ユニット回路5及びCPU6で構成される。また、どちらかの受光ユニットだけを選択することにより、選択された受光ユニットのみで撮像することもできる。また、便宜上、2つの受光ユニットを有する1台のデジタルカメラ1を用いて説明するが、これに限るものではなく、3つ以上の受光ユニットを備えたデジタルカメラであってもよい。
Next, the operation will be described.
2 to 5 are flowcharts for explaining the operation of the digital camera in this embodiment.
FIG. 6 is a diagram illustrating an example of an image displayed on the image display unit.
FIG. 6A is a diagram illustrating an example of an image when a landscape to be photographed is displayed on the image display unit 10 through a through image. The image 100 includes a house 110, a mountain 130, and a boundary line 120 between the mountain and the earth.
Next, a description will be given according to the flowcharts of FIGS.
In FIG. 2, in step S <b> 1, the user selects the shooting conditions and shooting modes of the light receiving units A and B, respectively. Here, the light receiving unit A is composed of the CCD 2, the lens 14, the diaphragm / shutter 16, the motor driving block 18, the TG 4, the unit circuit 5 and the CPU 6, and the light receiving unit B is the CCD 3, the lens 15, the diaphragm / shutter 17, and the motor. The driving block 19, TG4, unit circuit 5 and CPU 6 are included. Further, by selecting only one of the light receiving units, it is possible to capture an image with only the selected light receiving unit. For convenience, the description will be made using one digital camera 1 having two light receiving units. However, the present invention is not limited to this, and a digital camera including three or more light receiving units may be used.

次に撮影条件とは、シャッタースピード、絞り、強調色、ズーム、感度等のことをいい、撮影条件はROM8、RAM9上に記録されている。ズームとは、望遠側、広角側をいう。撮影モードとは、どちらか一方の受光ユニットを静止画撮影、他方の受光ユニットを動画撮影とする静止画/動画モード、連続して被写体を撮影する高速連写モード、先幕シンクロ/後幕シンクロモードがある。また、静止画/動画モードを選択し、片方の受光ユニットのみで撮像することにより、普通の動画撮影のみを行うこともできる。さらに、撮影モードの中に、動画撮影モードというものを設けてもよい。
なお、撮影モードを選択しない場合は、あらかじめ定められた方法による撮影が行われるようにしておくものとする。ここでは、その一例として静止画撮影が行なわれる場合の例を以下に説明する。
ユーザによる撮影モードの選択があった場合、または、選択がなされずにあらかじめ定められた撮影が行われる場合には、ステップS2に進み、ユーザにより撮影モードの選択があるか否かを判別する。撮影モードの選択がある場合には、YESに分岐する。撮影モードの選択については、後で詳細に述べる。
Next, the shooting conditions include shutter speed, aperture, highlight color, zoom, sensitivity, and the like, and the shooting conditions are recorded on the ROM 8 and RAM 9. Zoom refers to the telephoto side and the wide-angle side. The shooting mode is a still image / moving image mode in which one of the light receiving units is used for still image shooting, and the other light receiving unit is used for moving image shooting, a high-speed continuous shooting mode for continuously shooting subjects, front curtain sync / rear curtain sync. There is a mode. Further, by selecting a still image / moving image mode and capturing an image with only one light receiving unit, it is possible to perform only normal moving image shooting. Further, a moving image shooting mode may be provided in the shooting mode.
If the shooting mode is not selected, shooting is performed by a predetermined method. Here, an example in which still image shooting is performed will be described below as an example.
If the user selects a shooting mode or if a predetermined shooting is performed without making a selection, the process proceeds to step S2 to determine whether or not the user has selected a shooting mode. If there is a shooting mode selection, the process branches to YES. The selection of the shooting mode will be described in detail later.

まず、ユーザによって撮影条件のみの選択があった場合を説明する。
撮影モードの選択がない場合には、ステップS3に進み、選択された撮影条件に従って、受光ユニットA、受光ユニットBをそれぞれ設定する。これにより、受光ユニットAのシャッタースピード、絞り、ズーム等と、受光ユニットBのシャッタースピード、絞り、ズーム等とが異なった数値、値等となり、同じ被写体を撮影した場合でも、受光ユニットAと受光ユニットBとでは撮影した画像が異なった印象を与えることになる。なお、撮影条件の選択がない場合には、自動的に撮影条件を設定するようにしてもよいし、前回撮影した撮影条件を設定するようにしてもよい。
First, a case where only a shooting condition is selected by the user will be described.
If no shooting mode is selected, the process proceeds to step S3, and the light receiving unit A and the light receiving unit B are set according to the selected shooting condition. As a result, the shutter speed, aperture, zoom, etc. of the light receiving unit A and the shutter speed, aperture, zoom, etc. of the light receiving unit B have different values, values, etc. Even when the same subject is photographed, the light receiving unit A and the light receiving unit The photographed image gives a different impression with the unit B. If there is no selection of shooting conditions, the shooting conditions may be set automatically, or the shooting conditions shot last time may be set.

次いで、ステップS4に進み、受光ユニットA、受光ユニットBによる撮像を開始して、被写体のスルー画像を画像表示部10に表示させる。このとき、受光ユニットAにより撮像された画像と、受光ユニットBにより撮像された画像を左右に分割して画像表示部10に表示させる。あるいはまた、一方の受光ユニットによる撮像画像を全画面表示し、もう一方の受光ユニットによる撮像画像を子画面等の形式で表示することとしても差し支えない。また、撮影条件等の選択時に、どちらか一方の受光ユニットにより撮像された画像をスルー画像として表示させるようにもよい。なお、どちらか一方の受光ユニットを広角側、他方の受光ユニットを望遠側、と設定した場合には、CCD2とCCD3によって撮像された映像を左右に分割して表示させることが望ましい。 Next, the process proceeds to step S4, where imaging by the light receiving unit A and the light receiving unit B is started, and a through image of the subject is displayed on the image display unit 10. At this time, the image captured by the light receiving unit A and the image captured by the light receiving unit B are divided into left and right parts and displayed on the image display unit 10. Alternatively, the image captured by one light receiving unit may be displayed on the full screen, and the image captured by the other light receiving unit may be displayed in a form such as a sub-screen. In addition, when a shooting condition or the like is selected, an image captured by one of the light receiving units may be displayed as a through image. When one of the light receiving units is set to the wide-angle side and the other light receiving unit is set to the telephoto side, it is desirable that the images picked up by the CCD 2 and the CCD 3 are divided and displayed on the left and right.

次いで、ステップS5に進み、シャッターボタン操作がされたか否かを判別し、操作があった場合には、ステップS6に進み、静止画撮影処理を行う。ここで、CCD2、CCD3に比較的長い出力撮像タイミングで1画面中の偶数ラインの画素信号と、奇数ラインの画素信号とを順に出力し、全面素分のデータをバッファメモリ(DRAM7)に取り込む。なお、ここでは、シャッターボタンが操作された場合は、受光ユニットAと受光ユニットBとで同時に撮影するようにしているが、これに限らず、受光ユニットA、受光ユニットBとで別々に撮影するようにしてもよい。つまり、受光ユニットAと受光ユニットBとでは撮影する時刻を異ならせることができる。
一方、ステップS5でシャッターボタン操作がない場合には、ステップS5に留まり、操作があるまでスルー画像表示を継続する。
Next, the process proceeds to step S5, where it is determined whether or not the shutter button has been operated. If there has been an operation, the process proceeds to step S6 to perform still image shooting processing. Here, the even-numbered pixel signals and odd-numbered pixel signals in one screen are sequentially output to the CCD 2 and CCD 3 at a relatively long output imaging timing, and the data for the entire surface is taken into the buffer memory (DRAM 7). Here, when the shutter button is operated, the light receiving unit A and the light receiving unit B are simultaneously photographed. However, the present invention is not limited to this, and the light receiving unit A and the light receiving unit B are photographed separately. You may do it. That is, it is possible to make the photographing time different between the light receiving unit A and the light receiving unit B.
On the other hand, if there is no shutter button operation in step S5, the process stays in step S5, and the through image display is continued until there is an operation.

次いで、ステップS7に進み、撮影した静止画像を画像表示部10に表示させる。このとき撮影した画像の表示の方法としては、受光ユニットA及び受光ユニットBにより撮影された画像を左右に分割して画像表示部10に表示させる。または、どちらか一方の受光ユニットにより撮影された画像を画像表示部10に表示し、ユーザがキー入力部11を操作することにより、他方の受光ユニットにより撮像された画像を画像表示部10に表示させてもよい。この場合は、キー入力部11の操作により、表示される画像が切り替わる。なお、キー入力部11の操作ではなくて、所定の時間間隔で画像が切り替わるようにしてもよい。 Next, the process proceeds to step S7, and the captured still image is displayed on the image display unit 10. As a method of displaying the image captured at this time, the image captured by the light receiving unit A and the light receiving unit B is divided into left and right parts and displayed on the image display unit 10. Alternatively, an image captured by one of the light receiving units is displayed on the image display unit 10, and an image captured by the other light receiving unit is displayed on the image display unit 10 by the user operating the key input unit 11. You may let them. In this case, the displayed image is switched by operating the key input unit 11. Note that the image may be switched at a predetermined time interval instead of the operation of the key input unit 11.

また、図6(b)は、受光ユニットAを広角側として同図(a)を撮像したときの画像140を示すものであり、図6(c)は、受光ユニットBを望遠側として同図(a)を撮像したときの画像150を示すものである。
受光ユニットA及び受光ユニットBで撮影した画像を画像表示部10に表示する際には、図6(d)に示すように、受光ユニットAで撮像した画像140を主体的に表示させ、受光ユニットBで撮像した画像150を右上のほうに小さく表示させてもよい。また、それとは逆に、同図(e)に示すように、受光ユニットBで撮像した画像150を主体的に表示させ、受光ユニットBで撮像した画像140を右上に小さく表示させてもよい。
つまり、受光ユニットA及び受光ユニットBで撮像した画像をPinP(Picture in Picture)にて表示させるようにしてもよい。
FIG. 6B shows an image 140 when the light receiving unit A is on the wide angle side and the image of FIG. 6A is taken. FIG. 6C shows the light receiving unit B on the telephoto side. The image 150 when (a) is imaged is shown.
When displaying the images taken by the light receiving unit A and the light receiving unit B on the image display unit 10, as shown in FIG. 6D, the image 140 taken by the light receiving unit A is mainly displayed, and the light receiving unit is displayed. The image 150 captured in B may be displayed smaller in the upper right. On the other hand, as shown in FIG. 5E, the image 150 captured by the light receiving unit B may be mainly displayed, and the image 140 captured by the light receiving unit B may be displayed small in the upper right.
That is, an image captured by the light receiving unit A and the light receiving unit B may be displayed by PinP (Picture in Picture).

次いで、ステップ8に進み、受光ユニットA,受光ユニットBにより撮影された画像を記録するか否かを判断し、記録すると判断した場合は、DRAM7に取り込んだ画像データを圧縮し、静止画ファイル(JPEG形式等のファイル)を生成し、メモリ・カード13に記録する。このときも、受光ユニットAで撮影された画像と受光ユニットBで撮影された画像とをPinPにて記録するようにしてもよい。また、キー入力部11の操作により、例えば、受光ユニットAで撮影した画像のみを記録し、受光ユニットBで撮影した画像を記録しないようにしてもよい。記録が終了したらリターンする。
また、ステップS8で記録しないと判断したときも、リターンする。
なお、リターンの際には、例えば、ユーザによりキー入力部11の操作がない場合には、設定した撮影条件のままで再び撮影ができるようにしてもよい。
Next, the process proceeds to step 8 where it is determined whether or not to record the images taken by the light receiving unit A and the light receiving unit B. If it is determined to record, the image data taken into the DRAM 7 is compressed and a still image file ( JPEG format file) is generated and recorded in the memory card 13. Also at this time, an image photographed by the light receiving unit A and an image photographed by the light receiving unit B may be recorded by PinP. Further, by operating the key input unit 11, for example, only an image photographed by the light receiving unit A may be recorded, and an image photographed by the light receiving unit B may not be recorded. Return when recording is complete.
If it is determined not to record in step S8, the process returns.
When returning, for example, if the user does not operate the key input unit 11, it may be possible to take a picture again under the set photographing conditions.

次に、ユーザによって撮影モードの選択があった場合を説明する。
まず、最初に静止画/動画モードの選択があった場合のデジタルカメラ1の動作を図3のフローチャートに従って説明する。
ステップS2でユーザから撮影モードの選択があると判断すると、図3のステップ11に進み、静止画/動画モードであるか否かを判断する。静止画/動画モードである場合には、ステップS12に進み、選択された撮影条件、静止画/動画モードに従って、受光ユニットA、受光ユニットBをそれぞれ設定する。ここでは、受光ユニットAを静止画撮影モード、受光ユニットBを動画撮影モードと設定したものとする。
次いで、ステップS13に進み、スルー画像を画像表示部10に表示させる。このときも、受光ユニットA、受光ユニットBにより撮像された画像を左右に分割して表示させる。また、撮影条件等の選択時に、どちらか一方の受光ユニットにより撮像された画像をスルー画像として表示させるようにしてもよい。
次いで、ステップS14に進む。
Next, a case where the user has selected a shooting mode will be described.
First, the operation of the digital camera 1 when the still image / moving image mode is first selected will be described with reference to the flowchart of FIG.
If it is determined in step S2 that the user has selected a shooting mode, the process proceeds to step 11 in FIG. 3 to determine whether the still image / moving image mode is set. If the still image / moving image mode is selected, the process proceeds to step S12, and the light receiving unit A and the light receiving unit B are set according to the selected shooting condition and still image / moving image mode. Here, it is assumed that the light receiving unit A is set to the still image shooting mode and the light receiving unit B is set to the moving image shooting mode.
Next, the process proceeds to step S13, and the through image is displayed on the image display unit 10. Also at this time, the images picked up by the light receiving unit A and the light receiving unit B are divided and displayed on the left and right. In addition, when a shooting condition or the like is selected, an image captured by one of the light receiving units may be displayed as a through image.
Next, the process proceeds to step S14.

ステップS14では、シャッターボタンが操作されたか否かを判別し、操作があったと判断するとステップS15及びステップS17に進む。なお、このステップS15とステップS17は、それぞれ受光ユニットAとBの動作を別々に分けて表したものであり、実際には、1台のデジタルカメラ1の内部で並列処理的に実行されるものである。一方、シャッターボタンが操作されない場合は、操作があるまで、ステップS14に留まり、スルー画像表示を継続する。
まず、静止画撮影について説明する。
ステップS15に進むと、受光ユニットAは静止画撮影処理を開始する。つまり、CCD2に比較的長い出力撮像タイミングで1画面中の偶数ラインの画素信号と、奇数ラインの画素信号とを順に出力し、全面素分のデータをバッファメモリ(DRAM7)に取り込む。
次いで、ステップS16に進み、DRAM7に取り込んだ画像データを圧縮し、静止画ファイル(JPEG形式等のファイル)を生成し、メモリ・カード13に記録する。
In step S14, it is determined whether or not the shutter button has been operated. If it is determined that the operation has been performed, the process proceeds to step S15 and step S17. Steps S15 and S17 represent the operations of the light receiving units A and B separately, and are actually executed in parallel processing within one digital camera 1. It is. On the other hand, if the shutter button is not operated, the process stays at step S14 until the operation is performed, and the through image display is continued.
First, still image shooting will be described.
In step S15, the light receiving unit A starts a still image shooting process. That is, even-numbered pixel signals and odd-numbered pixel signals in one screen are sequentially output to the CCD 2 at a relatively long output imaging timing, and the data of the entire area is taken into the buffer memory (DRAM 7).
In step S16, the image data captured in the DRAM 7 is compressed to generate a still image file (file in JPEG format or the like) and recorded in the memory card 13.

次に、動画撮影について説明する。
ステップS17に進むと、受光ユニットBは動画撮影処理を開始する。つまり、所定のフレームレート(1/30秒等の固定周期)で画像(動画フレーム)を撮像し記憶する動画撮影処理を開始する。次いで、ステップS18に進み、シャッターボタンが操作されたか否かを判断し、押下された場合は、ステップS19に進み、動画撮影処理を停止する。なお、シャッターボタンの押下によって動画を停止する代わりに、動画撮影開始後、所定時間が経過したら、自動的に動画撮影を終了するようにしても良い。
次いで、ステップS20に進み、それまでの間にバッファメモリ(DRAM7)上に展開されている動画データを用いて動画ファイルを生成し、メモリ・カード13に記録する。
そして、静止画、動画をメモリ・カード13に記録するとリターンする。このとき、ユーザによりキー入力部11の操作がない場合には、設定した撮影条件、静止画/動画モードのままで再び撮影ができるようにしてもよい。
Next, movie shooting will be described.
In step S17, the light receiving unit B starts moving image shooting processing. That is, the moving image shooting process for capturing and storing images (moving image frames) at a predetermined frame rate (a fixed period such as 1/30 seconds) is started. Next, the process proceeds to step S18, where it is determined whether or not the shutter button has been operated. If the shutter button has been pressed, the process proceeds to step S19, where the moving image shooting process is stopped. Instead of stopping the moving image by pressing the shutter button, the moving image shooting may be automatically ended when a predetermined time has elapsed after starting the moving image shooting.
Next, the process proceeds to step S20, where a moving image file is generated using the moving image data that has been developed on the buffer memory (DRAM 7) so far, and is recorded on the memory card 13.
When a still image and a moving image are recorded on the memory card 13, the process returns. At this time, if there is no operation of the key input unit 11 by the user, it may be possible to shoot again with the set shooting conditions and still image / moving image mode.

なお、このときに記録した静止画像を記録した動画像のサムネイル画像として関連付けて記録してもよい。さらに、受光ユニットA、受光ユニットBの撮影開始時期を異ならせるようにしてもよい。これにより、ユーザが一番気に入った画像を静止画として撮影することで、この画像を動画像のサムネイル画像として使用することもできる。   Note that the still image recorded at this time may be recorded in association with the recorded moving image thumbnail image. Further, the photographing start times of the light receiving unit A and the light receiving unit B may be different. Thus, by photographing the image that the user likes most as a still image, this image can also be used as a thumbnail image of a moving image.

次に、高速連写モードの選択があった場合のデジタルカメラ1の動作を図4のフローチャートにしたがって説明する。
ステップS11で、撮影モードが静止画/動画モードでないと判断すると、図4のステップS31に進む。
ステップS31で、撮影モードが高速連写モードであるか否かを判断する。高速連写モードである場合には、ステップS32に進む。ステップS32で、選択された撮影条件、高速連写モードに従って、受光ユニットA及び受光ユニットBを設定する。高速連写モードとは、受光ユニットA、受光ユニットBのそれぞれが連写で、例えば、0.2秒間隔で被写体を連続的に撮影することである。また、受光ユニットAと受光ユニットBの連写撮影の周期は同じであるが、位相が半周期ずれている。
Next, the operation of the digital camera 1 when the high-speed continuous shooting mode is selected will be described with reference to the flowchart of FIG.
If it is determined in step S11 that the shooting mode is not the still image / moving image mode, the process proceeds to step S31 in FIG.
In step S31, it is determined whether or not the shooting mode is a high-speed continuous shooting mode. If it is in the high-speed continuous shooting mode, the process proceeds to step S32. In step S32, the light receiving unit A and the light receiving unit B are set according to the selected photographing condition and high-speed continuous shooting mode. In the high-speed continuous shooting mode, each of the light receiving unit A and the light receiving unit B is continuous shooting, and for example, the subject is continuously photographed at intervals of 0.2 seconds. The period of continuous shooting for the light receiving unit A and the light receiving unit B is the same, but the phase is shifted by a half period.

したがって、この場合だと、受光ユニットA及び受光ユニットBはそれぞれ0.2秒間隔で被写体を連写撮影するが、受光ユニットAと受光ユニットBは半周期遅れて撮影するので、結果的に、単体の受光ユニットの連写モードより2倍の、つまり0.1秒間隔で連写撮影が可能となる。また、受光ユニットが複数あれば、例えば4個あれば、4倍の、つまり、0.05秒間隔で連写撮影が可能となる。この場合は、受光ユニットがそれぞれ1/4周期ずつ、つまり0.05秒遅れて被写体を撮像する。
なお、位相の遅れをT/2としているがT/Nにしてもよい(T:周期、N:自然数、又は、受光ユニットの数)。
Therefore, in this case, the light receiving unit A and the light receiving unit B each continuously shoots the subject at intervals of 0.2 seconds, but the light receiving unit A and the light receiving unit B shoot with a half cycle delay. Continuous shooting can be performed at twice the continuous shooting mode of a single light receiving unit, that is, at intervals of 0.1 seconds. Further, if there are a plurality of light receiving units, for example, if there are four, continuous shooting can be performed four times, that is, at intervals of 0.05 seconds. In this case, each of the light receiving units captures the subject with a quarter period, that is, with a delay of 0.05 seconds.
Although the phase delay is T / 2, it may be T / N (T: period, N: natural number, or number of light receiving units).

次いで、ステップS33に進み、画像表示部10にスルー画像を表示させる。このときも、受光ユニットA、受光ユニットBにより撮像された画像を左右に分割して画像表示部10に表示させる。また、撮影条件等の選択時に、どちらか一方の受光ユニットにより撮像された画像をスルー画像として表示させるようにもよい。
次いで、ステップS34でシャッターボタン操作があるか否かを判断する。ステップS34でシャッターボタンの操作があると判断した場合には、ステップS35に進み、受光ユニットAは撮影処理を開始する。このとき撮影した画像をa1とする。次いで、ステップS36に進み、半周期遅れて受光ユニットBも撮影処理を開始する。このときの撮影した画像をb1とする。
Next, the process proceeds to step S33, and a through image is displayed on the image display unit 10. Also at this time, the images picked up by the light receiving unit A and the light receiving unit B are divided into left and right parts and displayed on the image display unit 10. In addition, when a shooting condition or the like is selected, an image captured by one of the light receiving units may be displayed as a through image.
Next, in step S34, it is determined whether or not there is a shutter button operation. If it is determined in step S34 that the shutter button is operated, the process proceeds to step S35, and the light receiving unit A starts the photographing process. The image taken at this time is denoted by a1. Next, the process proceeds to step S36, and the light receiving unit B also starts imaging processing with a half cycle delay. The photographed image at this time is denoted by b1.

次いで、ステップS27に進み、撮影した画像が所定枚数に達したか否かを判断する。例えば、所定枚数が5と設定されている場合は、まだ、受光ユニットA、Bはそれぞれ一枚しか撮影していないので、所定枚数に達していないと判断し、ステップS25に戻り、高速連写撮影を継続する。そして、受光ユニットAで撮影した画像a2、受光ユニットBで撮影した画像b2、というように、画像a5、画像b5まで撮影する。
ここで、ステップS27で所定枚数としているが、DRAM7の空き容量がなくなるまで高速連写で撮影してもよい。
また、所定枚数は、予め設定されていてもよく、ユーザが任意に設定できるようにしてもよい。
Next, the process proceeds to step S27, and it is determined whether or not the number of photographed images has reached a predetermined number. For example, when the predetermined number is set to 5, since only one of the light receiving units A and B is still photographing, it is determined that the predetermined number has not been reached, and the process returns to step S25 to perform high-speed continuous shooting. Continue shooting. Then, an image a5 and an image b5 are photographed, such as an image a2 photographed by the light receiving unit A and an image b2 photographed by the light receiving unit B.
Here, the predetermined number is set in step S27, but high-speed continuous shooting may be performed until the free space of the DRAM 7 is exhausted.
The predetermined number may be set in advance or may be arbitrarily set by the user.

ステップS27で所定枚数に達したと判断すると、ステップS28に進み、撮影した画像を画像表示部10に表示させる。
このときは、高速連写モードで撮影をした画像を、撮影時刻の早い順に表示させる。つまり、受光ユニットAで最初に撮影した画像a1、次に、受光ユニットBで撮影した画像b1、さらに画像a2、画像b2、・・・、画像a5、画像b5というように受光ユニットAで撮影した画像と受光ユニットBで撮影した画像を交互に表示させる。このときの画像の切り換わりは、ユーザがキー入力部11を操作することにより画像が切り換わるようにしてもよいし、所定の時間間隔で自動的に切り換わるようにしてもよい。
また受光ユニットA及びBで撮影したすべての画像を撮影時刻の早い順に並べて画像表示部10に縮小表示させるようにしてもよいし、何画像ずつかに分けて画像表示部10に表示させるようにしてもよい。また、受光ユニットAで撮影した画像と受光ユニットBで撮影した画像とを分けて別々に表示させるようにしてもよい。
If it is determined in step S27 that the predetermined number has been reached, the process proceeds to step S28, and the captured image is displayed on the image display unit 10.
At this time, images taken in the high-speed continuous shooting mode are displayed in order of the shooting time. That is, the image a1 captured first by the light receiving unit A, the image b1 captured by the light receiving unit B, the image a2, the image b2,..., The image a5, and the image b5 are captured by the light receiving unit A. Images and images taken by the light receiving unit B are displayed alternately. The image switching at this time may be performed by the user operating the key input unit 11 or may be performed automatically at predetermined time intervals.
Further, all the images photographed by the light receiving units A and B may be arranged in order from the earliest photographing time so as to be reduced and displayed on the image display unit 10 or may be displayed on the image display unit 10 by dividing them into several images. May be. Alternatively, the image captured by the light receiving unit A and the image captured by the light receiving unit B may be displayed separately.

次いで、ステップS39に進み、撮影された画像を記録するか否かを判断し、記録すると判断した場合は、ステップS40に進み、DRAM7に取り込んだ画像データを圧縮し、静止画ファイル(JPEG形式等のファイル)を生成し、メモリ・カード13に記録したらリターンする。
次いで、ステップS39で、撮影された画像を記録しないと判断した場合でもリターンする。この場合も、ユーザによりキー入力部11の操作がない場合には、設定した撮影条件、高速連写モードのままで再び撮影ができるようにしてもよい。
Next, the process proceeds to step S39, where it is determined whether or not the captured image is to be recorded. If it is determined that the captured image is to be recorded, the process proceeds to step S40 where the image data taken into the DRAM 7 is compressed and a still image file (JPEG format etc. ) Is generated and recorded in the memory card 13, the process returns.
Next, even if it is determined in step S39 that the photographed image is not recorded, the process returns. In this case as well, when the user does not operate the key input unit 11, it may be possible to perform the shooting again with the set shooting conditions and the high-speed continuous shooting mode.

次に、ユーザによって先幕シンクロ/後幕シンクロモードの選択があった場合を図5、図7を用いて説明する。
図5は先幕シンクロ/後幕シンクロモードの選択があったときのデジタルカメラ1の動作を示すフローチャートである。
図7は、先幕シンクロ及び後幕シンクロのシャッターの開閉及びストロボ発光の動作と時間の関係を示した図である。tは時間軸を表わす。
ステップS31で高速連写モードでないと判断すると、ステップS51に進み、先幕シンクロ/後幕シンクロモードであると判断する。そして、ステップS52に進む。
ステップS52で、選択された撮影条件、先幕シンクロ/後幕シンクロモードに従って、受光ユニットAと受光ユニットBを設定する。ここでは、受光ユニットAを先幕シンクロ、受光ユニットBを後幕シンクロと設定したものとする。
Next, the case where the user selects the first curtain / second curtain synchronization mode will be described with reference to FIGS.
FIG. 5 is a flowchart showing the operation of the digital camera 1 when the first-curtain sync / second-curtain sync mode is selected.
FIG. 7 is a diagram showing the relationship between the opening / closing of the shutter and the strobe light emission and the time of the front curtain sync and the rear curtain sync. t represents a time axis.
If it is determined in step S31 that the mode is not the high-speed continuous shooting mode, the process proceeds to step S51, where it is determined that the front curtain sync / rear curtain sync mode is set. Then, the process proceeds to step S52.
In step S52, the light receiving unit A and the light receiving unit B are set according to the selected photographing condition and the first curtain sync / second curtain sync mode. Here, it is assumed that the light receiving unit A is set as the leading curtain sync and the light receiving unit B is set as the trailing curtain sync.

先幕シンクロとは、シャッターを開くと同時にストロボ発光させて静止画像を撮影することをいい、後幕シンクロとは、シャッターを閉じる直前にストロボ発光させて静止画像を撮影することをいう。
次いで、ステップS53に進み、スルー画像を画像表示部10に表示させる。このときも上述したように、受光ユニットA、Bで撮像された画像を左右に分割して表示させるようにしてもよいし、どちらかの受光ユニットで撮像された画像を表示するようにしてもよい。
そして、ステップS54に進み、シャッターボタン操作があるか否かを判断し、シャッターボタン操作があった場合は、ステップS55に進み、シャッターボタン操作がない場合には、操作があるまでステップ54に留まる。
次に、ステップS55に進み、受光ユニットAの先幕シンクロの静止画撮影処理を開始する。ここで、受光ユニットAのシャッターを開くと同時にストロボを発光させる(図7参照)。
First-curtain synchronization refers to shooting a still image by flashing as soon as the shutter is opened, and second-curtain synchronization refers to shooting a still image by flashing immediately before closing the shutter.
Next, the process proceeds to step S53, and a through image is displayed on the image display unit 10. At this time, as described above, the images captured by the light receiving units A and B may be divided and displayed on the left and right, or the images captured by either one of the light receiving units may be displayed. Good.
Then, the process proceeds to step S54 to determine whether or not there is a shutter button operation. If there is a shutter button operation, the process proceeds to step S55. If there is no shutter button operation, the process stays at step 54 until there is an operation. .
In step S55, the first-curtain sync still image shooting process of the light receiving unit A is started. Here, as soon as the shutter of the light receiving unit A is opened, the strobe is emitted (see FIG. 7).

次いで、ステップS56に進み、図7に示すように、受光ユニットAの静止画撮影処理開始からx時間後に受光ユニットBの静止画撮影処理を開始する。このx時間は、受光ユニットAのシャッターを開くと同時に、発光された光が十分になくなるまでの時間である必要がある。光が残像しているうちに受光ユニットBのシャッターを開いてしまうと、受光ユニットBで撮影した画像が、後幕シンクロとならないからである。
そして、受光ユニットAのシャッター時間が経過し、受光ユニットAのシャッターを閉じてから、x時間後に受光ユニットBのシャッター時間が経過するので、シャッター時間が経過する直前に、ストロボを発光し受光ユニットBのシャッターを閉じる。なお、ここでは、受光ユニットAと受光ユニットBのシャッタースピードが同一の場合で説明しているが、これに限るものではなく、受光ユニットAと受光ユニットBのシャッタースピードを異ならせるようにしても、後幕シンクロ/先幕シンクロの静止画撮影を行うことができる。ここで、シャッタースピードを異ならせる場合には、シャッタースピードの短いほうの撮影を先幕シンクロとして撮影する。
Next, the process proceeds to step S56, and as shown in FIG. 7, the still image capturing process of the light receiving unit B is started after x hours from the start of the still image capturing process of the light receiving unit A. The x time needs to be a time until the light emitted from the light-receiving unit A is opened and at the same time the emitted light is sufficiently eliminated. This is because if the shutter of the light receiving unit B is opened while the light is still imaged, the image captured by the light receiving unit B will not be synchronized with the rear curtain.
Since the shutter time of the light receiving unit A elapses and the shutter of the light receiving unit A is closed, the shutter time of the light receiving unit B elapses after x hours, so that the strobe is emitted immediately before the shutter time elapses. Close the B shutter. Here, the case where the light receiving unit A and the light receiving unit B have the same shutter speed has been described, but the present invention is not limited to this, and the light receiving unit A and the light receiving unit B may have different shutter speeds. The second curtain sync / first curtain sync can be taken. Here, when different shutter speeds are used, shooting with the shorter shutter speed is performed as first-curtain sync.

要は、先幕シンクロのために発光された光が十分なくなってから、後幕シンクロで撮影する受光ユニットのシャッターを開き、後幕シンクロのためにストロボを発光するときには、先幕シンクロの撮影が終わって(シャッターが閉じて)いなければならない。
以上の動作により、受光ユニットAで撮影した画像は先幕シンクロ、受光ユニットBで撮影した画像は後幕シンクロとなる。
In short, when there is not enough light emitted for the first-curtain sync, open the shutter of the light receiving unit for shooting with the second-curtain sync, and when you fire the strobe for the second-curtain sync, It must be over (shutter closed).
With the above operation, the image captured by the light receiving unit A is the front curtain sync, and the image captured by the light receiving unit B is the rear curtain sync.

次いで、ステップS57に進み、撮影した静止画像を画像表示部10に表示させる。このとき撮影した画像の表示の方法としては、受光ユニットA及び受光ユニットBにより撮影された画像を左右に分割して画像表示部10に表示させる。または、どちらか一方の受光ユニットにより撮影された画像を画像表示部10に表示し、ユーザがキー入力部11を操作することにより、他方の受光ユニットにより撮像された画像を画像表示部10に表示させてもよい。この場合は、キー入力部11の操作により、表示される画像が切り替わる。なお、キー入力部11の操作ではなくて、所定の時間間隔で画像が交互に切り替わるようにしてもよい。 Next, the process proceeds to step S57, and the captured still image is displayed on the image display unit 10. As a method of displaying the image captured at this time, the image captured by the light receiving unit A and the light receiving unit B is divided into left and right parts and displayed on the image display unit 10. Alternatively, an image captured by one of the light receiving units is displayed on the image display unit 10, and an image captured by the other light receiving unit is displayed on the image display unit 10 by the user operating the key input unit 11. You may let them. In this case, the displayed image is switched by operating the key input unit 11. Note that, instead of operating the key input unit 11, images may be alternately switched at predetermined time intervals.

次いで、ステップS58に進み、受光ユニットA及び受光ユニットBで撮影された画像を記録するか否かを判断し、記録すると判断した場合は、DRAM7に取り込んだ画像データを圧縮し、静止画ファイル(JPEG形式等のファイル)を生成し、メモリ・カード13に記録する。このときに、例えば、受光ユニットAで撮影された画像を記録し、受光ユニットBで撮影した画像を記録しないようにしてもよい。
記録が終了したらリターンする。
また、ステップ58で記録しないと判断したときも、リターンする。
なお、リターンの際には、ユーザによりキー入力部11の操作がない場合には、設定した撮影条件のままで再び撮影ができるようにしてもよい。
Next, the process proceeds to step S58, where it is determined whether or not to record images taken by the light receiving unit A and the light receiving unit B. If it is determined to record, the image data taken into the DRAM 7 is compressed and a still image file ( JPEG format file) is generated and recorded in the memory card 13. At this time, for example, an image captured by the light receiving unit A may be recorded, and an image captured by the light receiving unit B may not be recorded.
Return when recording is complete.
If it is determined not to record in step 58, the process returns.
When returning, if there is no operation of the key input unit 11 by the user, it may be possible to take a picture again with the set photographing condition.

以上のように、本実施の形態によれば、1台のデジタルカメラで撮影条件、撮影モードの異なった複数の画像を同時に撮影したい場合においても、受光ユニットを複数備えているので、手間がかからずに、容易に撮影することができる。
また、異なった印象を与える画像を容易に同時に複数撮影することができ、ユーザが一番気に入った画像を後から選択することができる。
さらに、シャッターチャンスなどの撮り直しのきかない場合であっても、複数の撮影条件等で撮影しているので、ユーザが一番気に入ったベストショットを後から選択することができる。
As described above, according to the present embodiment, even when it is desired to simultaneously photograph a plurality of images with different photographing conditions and photographing modes with a single digital camera, a plurality of light receiving units are provided, which is troublesome. It is easy to shoot without messing around.
In addition, a plurality of images that give different impressions can be easily taken simultaneously, and the image that the user likes most can be selected later.
Furthermore, even when it is difficult to reshoot such as a photo opportunity, since the shooting is performed under a plurality of shooting conditions, the best shot that the user likes most can be selected later.

また、1台のデジタルカメラでシャッタースピード、絞りを受光ユニットごとにそれぞれ異ならせることができるので、カメラ撮影の技術がない人でも、適切なシャッタースピード、絞りで撮られた画像を後で選択することができる。
また、故意にシャッタースピード、絞りを異ならせて、簡易に多彩な画像を取ることもできる。
In addition, the shutter speed and aperture can be set differently for each light-receiving unit with a single digital camera, so even people without camera shooting skills can select images taken with the appropriate shutter speed and aperture later. be able to.
It is also possible to take various images easily by intentionally changing the shutter speed and aperture.

また、ズームの設定を受光ユニットごとにそれぞれ異ならせることができるので、例えば、一方を広角側、他方を望遠側とすることにより、PinPの画像を容易に撮影することができる。
また、受光ユニットごとに交互に連写撮影するので、従来のデジタルカメラよりも数倍の速さで撮影することができるばかりでなく、撮影条件を受光ユニットごとに異ならせることにより、従来には見られない多彩な連写撮影が可能となる。
また、容易に同一の被写体をほぼ同一に、先幕シンクロ、後幕シンクロと容易に撮影することができ、さらに撮影条件を異ならせることにより、先幕シンクロで撮影した画像と後幕シンクロで撮影した画像とでは、まるっきり異なった印象を与えることができる。
Also, since the zoom setting can be made different for each light receiving unit, for example, by setting one to the wide angle side and the other to the telephoto side, a PinP image can be easily taken.
In addition, since continuous shooting is alternately performed for each light receiving unit, not only can it be shot several times faster than a conventional digital camera, but also by changing the shooting conditions for each light receiving unit, Various continuous shooting that can not be seen becomes possible.
In addition, it is possible to easily shoot the same subject almost identically with the front curtain sync and the rear curtain sync, and by using different shooting conditions, the images shot with the front curtain sync and the rear curtain sync can be taken. It is possible to give a completely different impression from the selected image.

さらに、複数の受光ユニットごとに静止画又は動画で撮影するか否かを設定することができるので、容易に動画撮影と静止画撮影を同時に撮影することができる。また、動画撮影と静止画撮影を別々に撮影することにより、動画撮影の中断を伴わずに静止画撮影を行うことができ、また、一番気に入った、印象的な場面を静止画として撮影することができる。
また、撮影した静止画像を動画のサムネイル画像として使用することもできる。さらに、一番気に入った、印象的な画像をサムネイル画像とする事により、ユーザがそのサムネイル画像を見ただけで、「この動画は、あの時の動画か」と容易に識別することができる。
Furthermore, since it is possible to set whether to shoot with still images or moving images for each of the plurality of light receiving units, it is possible to easily shoot moving images and still images simultaneously. In addition, by taking separate video and still image shooting, you can shoot still images without interrupting movie shooting, and you can shoot the most impressive and impressive scenes as still images. be able to.
In addition, the captured still image can be used as a thumbnail image of a moving image. Furthermore, by making the most impressive and impressive image a thumbnail image, the user can easily identify “this moving image is the moving image at that time” simply by looking at the thumbnail image.

変形例として、受光ユニットAで動画撮影を行い、受光ユニットBで先幕シンクロ又は後幕シンクロを撮影したり、連写撮影を行うようにしてもよい。
また、受光ユニットAで先幕又は後幕シンクロとして撮影を行い、受光ユニットBで、連写撮影を行うようにしてもよい。
更に、受光ユニットAで先幕シンクロ、受光ユニットBで後幕シンクロと設定し、受光ユニットA及び受光ユニットBで被写体を連続的に撮影するようにしてもよい。つまり、先幕シンクロ、後幕シンクロで連写撮影することにより、従来には見られない、高速で多彩な連写撮影を簡易に行うことができる。
すなわち、本実施の形態におけるデジタルカメラは、複数の受光ユニットを備えており、それぞれの受光ユニットが独立して画像を撮影することができる。
これにより、多彩な撮影を容易に行うことができ、撮影条件等の設定ミスによる、画像の撮影ミスを未然に防ぐことができる。また、ユーザは撮影が終わってから、一番気に入った画像を選択することができるので、撮影技術のない人でも、うまく画像を撮影することができる。
As a modification, moving image shooting may be performed with the light receiving unit A, and front curtain synchronization or rear curtain synchronization may be performed with the light receiving unit B, or continuous shooting may be performed.
Alternatively, the light receiving unit A may perform shooting as a front curtain or rear curtain sync, and the light receiving unit B may perform continuous shooting.
Further, the light receiving unit A may set the front curtain sync and the light receiving unit B may set the rear curtain sync, and the light receiving unit A and the light receiving unit B may continuously photograph the subject. In other words, by performing continuous shooting with the front curtain sync and the rear curtain sync, it is possible to easily perform a variety of continuous shooting at a high speed that has not been seen in the past.
That is, the digital camera in the present embodiment includes a plurality of light receiving units, and each light receiving unit can independently capture an image.
As a result, various shootings can be easily performed, and image shooting errors due to setting errors such as shooting conditions can be prevented. In addition, since the user can select the image he / she likes most after the shooting is completed, even a person who does not have a shooting technique can take a good image.

上記実施の形態におけるオートフォーカス装置は、上記実施の形態に限定されるものではなく、撮影機能を有した携帯電話、時計、PDA、静止画撮像機能付きムービーカメラ、カメラ付きパソコン等でもよく、要は被写体を撮影する機器を備えたものであればよい。   The autofocus device in the above embodiment is not limited to the above embodiment, and may be a mobile phone having a photographing function, a clock, a PDA, a movie camera with a still image capturing function, a personal computer with a camera, etc. Any device may be used as long as it has a device for photographing a subject.

本発明の実施の形態のデジタルカメラのブロック図である。1 is a block diagram of a digital camera according to an embodiment of the present invention. デジタルカメラの動作を示すフローチャートである。It is a flowchart which shows operation | movement of a digital camera. デジタルカメラの動作を示すフローチャートである。It is a flowchart which shows operation | movement of a digital camera. デジタルカメラの動作を示すフローチャートである。It is a flowchart which shows operation | movement of a digital camera. デジタルカメラの動作を示すフローチャートである。It is a flowchart which shows operation | movement of a digital camera. 画像表示部に表わされた画像を示す図である。It is a figure which shows the image represented on the image display part. 先幕シンクロ/後幕シンクロモードにおけるシャッターの開閉とストロボ発光の関係を示す図である。It is a figure which shows the relationship between shutter opening / closing and strobe light emission in front curtain sync / rear curtain sync mode.

符号の説明Explanation of symbols

1 デジタルカメラ
2 CCD
3 CCD
4 TG
5 ユニット回路
6 CPU
7 DRAM
8 ROM
9 RAM
10 画像表示部
11 キー入力部
12 カードI/F
13 メモリ・カード
14 第1の受光ユニットAを構成するレンズ
15 第2の受光ユニットBを構成するレンズ
16 第1の受光ユニットAを構成する絞り兼用シャッター
17 第2の受光ユニットBを構成する絞り兼用シャッター
18 第1の受光ユニットAを構成するモータ駆動ブロック
19 第2の受光ユニットBを構成するモータ駆動ブロック
1 Digital camera 2 CCD
3 CCD
4 TG
5 Unit circuit 6 CPU
7 DRAM
8 ROM
9 RAM
10 Image display section 11 Key input section 12 Card I / F
DESCRIPTION OF SYMBOLS 13 Memory card 14 Lens which comprises 1st light reception unit A 15 Lens which comprises 2nd light reception unit B 16 Diaphragm | combined shutter which comprises 1st light reception unit A 17 Diaphragm which comprises 2nd light reception unit B Combined shutter 18 Motor drive block constituting first light receiving unit A 19 Motor drive block constituting second light receiving unit B

Claims (4)

被写体を撮影する2つの撮影手段
1回の撮影指示で先幕シンクロ撮影と後幕シンクロ撮影とを行う撮影モードを設定する設定手段と、
前記設定手段により前記撮影モードが設定されている状態で撮影指示が為された場合、一方の撮影手段で先幕シンクロ撮影が実行され、且つ他方の撮影手段で、撮影開始タイミングが前記先幕シンクロ撮影の撮影開始タイミングと異なるとともに露光期間が前記先幕シンクロ撮影の露光期間と一部重なる後幕シンクロ撮影が実行されるように、前記2つの撮影手段を制御する制御手段と、
を備えることを特徴とする撮影装置。
Two photographing means for photographing a subject,
Setting means for setting a shooting mode for performing first-curtain sync shooting and rear-curtain sync shooting with one shooting instruction ;
When a shooting instruction is given in a state where the shooting mode is set by the setting unit, the first-curtain sync shooting is executed by one of the shooting units, and the shooting start timing of the other shooting unit is set to the first-curtain sync. Control means for controlling the two photographing means so as to execute rear curtain sync photographing that is different from the photographing start timing of photographing and whose exposure period partially overlaps the exposure period of the first curtain sync photographing ;
An imaging apparatus comprising:
前記制御手段は、前記先幕シンクロ撮影に係るストロボ発光が終了した後、当該先幕シンクロ撮影に係る露光期間が終了するまでの間に、前記後幕シンクロ撮影に係る露光を開始させることを特徴とする請求項1に記載の撮影装置。The control means starts the exposure related to the rear curtain sync shooting after the end of the strobe emission related to the front curtain sync shooting until the end of the exposure period related to the front curtain sync shooting. The imaging device according to claim 1. 前記先幕シンクロ撮影に係る露光期間の長さは、前記後幕シンクロ撮影に係る露光期間の長さ以下であることを特徴とする請求項に2記載の撮影装置。3. The photographing apparatus according to claim 2, wherein a length of an exposure period related to the front curtain sync photography is equal to or less than a length of an exposure period related to the rear curtain sync photography. 被写体を撮影する2つの撮影手段を備える撮影装置の撮影方法であって、An imaging method for an imaging apparatus comprising two imaging means for imaging a subject,
1回の撮影指示で先幕シンクロ撮影と後幕シンクロ撮影とを行う撮影モードを設定する設定工程と、A setting step for setting a shooting mode for performing first-curtain sync shooting and rear-curtain sync shooting with one shooting instruction;
前記設定工程により前記撮影モードが設定されている状態で撮影指示が為された場合、一方の撮影手段で先幕シンクロ撮影が実行され、且つ他方の撮影手段で、撮影開始タイミングが前記先幕シンクロ撮影の撮影開始タイミングと異なるとともに露光期間が前記先幕シンクロ撮影の露光期間と一部重なる後幕シンクロ撮影が実行されるように、前記2つの撮影手段を制御する制御工程と、When a shooting instruction is made in the state where the shooting mode is set by the setting step, the first curtain sync shooting is executed by one shooting means, and the shooting start timing is set by the first shooting means at the first curtain sync timing. A control step for controlling the two photographing means so that rear curtain sync photographing that is different from the photographing start timing of photographing and an exposure period partially overlaps with the exposure period of the front curtain sync photographing is executed;
を備えることを特徴とする撮影方法。A photographing method characterized by comprising:
JP2003341866A 2003-09-30 2003-09-30 Image capturing apparatus and image capturing method Expired - Fee Related JP4243844B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003341866A JP4243844B2 (en) 2003-09-30 2003-09-30 Image capturing apparatus and image capturing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003341866A JP4243844B2 (en) 2003-09-30 2003-09-30 Image capturing apparatus and image capturing method

Publications (2)

Publication Number Publication Date
JP2005109979A JP2005109979A (en) 2005-04-21
JP4243844B2 true JP4243844B2 (en) 2009-03-25

Family

ID=34536318

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003341866A Expired - Fee Related JP4243844B2 (en) 2003-09-30 2003-09-30 Image capturing apparatus and image capturing method

Country Status (1)

Country Link
JP (1) JP4243844B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4742242B2 (en) * 2005-09-30 2011-08-10 カシオ計算機株式会社 Imaging apparatus and program thereof
US7978239B2 (en) 2007-03-01 2011-07-12 Eastman Kodak Company Digital camera using multiple image sensors to provide improved temporal sampling
JP2010107900A (en) * 2008-10-31 2010-05-13 Fujifilm Corp Imaging apparatus, compound eye imaging apparatus, imaging method and program
US9204026B2 (en) * 2010-11-01 2015-12-01 Lg Electronics Inc. Mobile terminal and method of controlling an image photographing therein
JP2019197946A (en) * 2018-05-07 2019-11-14 シャープ株式会社 Electronic apparatus, program, control apparatus, and control method

Also Published As

Publication number Publication date
JP2005109979A (en) 2005-04-21

Similar Documents

Publication Publication Date Title
JP5895409B2 (en) Imaging device
JP4727457B2 (en) Imaging device
JP2008219428A (en) Imaging apparatus
JP4449973B2 (en) Imaging apparatus and program thereof
JP2007311861A (en) Photographic apparatus and method
JP5578442B2 (en) Imaging apparatus, image composition method, and program
JP2007215091A (en) Imaging apparatus and program therefor
JP4533119B2 (en) Imaging device and image display method of imaging device
JP4697549B2 (en) Image capturing apparatus and face detection method thereof
JP2009058834A (en) Imaging apparatus
JP5909997B2 (en) IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD
JP4977569B2 (en) Imaging control apparatus, imaging control method, imaging control program, and imaging apparatus
JP2001275033A (en) Digital still camera
JP2007096455A (en) Photographing apparatus
JP4033456B2 (en) Digital camera
JP4243844B2 (en) Image capturing apparatus and image capturing method
JP2005086219A (en) Digital camera and photographing control method
JP2008109221A (en) Imaging device
JP4509829B2 (en) Camera device
JP4049291B2 (en) Digital still camera
JP2010087598A (en) Photographic apparatus, photographic control method and program therefor, image display apparatus, image display method and program therefor, and photographic system, control method therefor and program therefor
JP4964992B2 (en) Image capturing apparatus and image recording method thereof
JP5105298B2 (en) Imaging apparatus and program thereof
JP5249078B2 (en) Imaging device
JP2016131378A (en) Imaging apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060811

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080904

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080916

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081210

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081223

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120116

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130116

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130116

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees