WO2016072101A1 - 撮像装置および撮像装置の制御方法 - Google Patents

撮像装置および撮像装置の制御方法 Download PDF

Info

Publication number
WO2016072101A1
WO2016072101A1 PCT/JP2015/059039 JP2015059039W WO2016072101A1 WO 2016072101 A1 WO2016072101 A1 WO 2016072101A1 JP 2015059039 W JP2015059039 W JP 2015059039W WO 2016072101 A1 WO2016072101 A1 WO 2016072101A1
Authority
WO
WIPO (PCT)
Prior art keywords
zoom
image
shooting
exposure
control unit
Prior art date
Application number
PCT/JP2015/059039
Other languages
English (en)
French (fr)
Inventor
兼矢 細野
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Priority to CN201580002474.2A priority Critical patent/CN105765965B/zh
Priority to US15/098,777 priority patent/US9654695B2/en
Publication of WO2016072101A1 publication Critical patent/WO2016072101A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2205/00—Adjustment of optical system relative to image or object surface other than for focusing
    • G03B2205/0046—Movement of one or more optical elements for zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders

Definitions

  • the present invention relates to an imaging apparatus capable of performing zoom driving for changing a focal length during exposure and performing so-called inter-exposure zoom imaging, and a method for controlling the imaging apparatus.
  • zoom exposure between exposures Conventionally, a photography technique called zoom exposure between exposures is known.
  • This inter-exposure zoom photographing is performed while changing the focal length of the photographing optical system during one exposure.
  • the photographing angle of view changes during photographing, and the magnification of the subject image changes accordingly. Therefore, it is possible to obtain an image in which the subject extends radially outward from the center of the subject image.
  • the zoom between exposures it is possible to obtain a photographed image having an effect that the main subject image is emphasized as compared with the background.
  • zoom photography is a well-known photography technique.
  • this is a technique that requires a photographer to have experience in photographing operation in conjunction with zoom driving of the photographing lens.
  • zoom driving it is not easy to perform shooting by synchronizing the zoom driving operation of the photographing lens and the shooting operations related to the exposure start and end operations.
  • a technique that simplifies zoom shooting during exposure by electrically controlling zoom driving and synchronizing the zoom driving and shooting operation (see, for example, Patent Documents 1 and 2).
  • a plurality of image data is acquired and added at the time of zoom exposure during exposure, and this added image data is displayed as a progress image.
  • this method if the zoom speed is slowed down to confirm the effect, overexposure will occur.
  • a so-called exposure omission portion occurs while the image data is acquired and the next image data is acquired. In this case, a part of the trajectory that flows radially does not appear, and the trajectory does not become a straight trajectory without exposure omission.
  • the zoom drive is stopped while acquiring the image data and the next image data is acquired. However, it takes time to reach a constant speed when the zoom drive is restarted. Unevenness occurs.
  • the present invention has been made in view of such circumstances, and it is an object of the present invention to provide an imaging apparatus and a control method for the imaging apparatus in which no exposure omission occurs in the locus when performing zoom exposure during exposure.
  • An image pickup apparatus is an image pickup apparatus that performs zoom exposure during exposure and performs zoom operation during an exposure period.
  • the image pickup lens includes a zoom lens, and the zoom magnification of the shooting lens is variable.
  • an image sensor that continuously captures a subject image formed on the imaging surface by the photographing lens and outputs a plurality of image data.
  • An image processing unit that performs an image synthesis process for generating a composite image from the plurality of acquired image data, a zoom control unit that drives and controls the zoom lens driving unit, and a shooting control that instructs the image sensor to perform shooting And a drive amount by which the zoom control unit changes the zoom magnification of the photographing lens in a predetermined direction with respect to the zoom lens driving unit.
  • the imaging control unit causes the image sensor to perform continuous shooting
  • the zoom control unit causes the zoom lens driving unit to perform each shooting in the continuous shooting.
  • Output a drive amount that causes the zoom drive to operate in a direction opposite to the predetermined direction
  • the shooting control unit causes the zoom position to be overlapped to perform shooting.
  • An image pickup apparatus is an image pickup apparatus for performing zoom exposure during exposure in which a zoom operation is performed during an exposure period.
  • the image pickup lens having a zoom lens and the zoom magnification of the image pickup lens are varied.
  • an image sensor that continuously captures a subject image formed on the imaging surface by the photographing lens and outputs a plurality of image data.
  • An image processing unit that performs an image synthesis process for generating a composite image from the plurality of acquired image data, a zoom control unit that drives and controls the zoom lens driving unit, and a shooting control that instructs the image sensor to perform shooting And the zoom control unit move the photographing lens in the first direction at the first zoom speed with respect to the zoom lens driving unit.
  • the shooting control unit causes the image sensor to perform first continuous shooting
  • the zoom control unit causes the zoom lens driving unit to After the end of the first continuous shooting, it is synchronized with outputting a driving amount that moves at a zoom speed of the same magnitude as the first zoom speed in a second direction opposite to the first direction.
  • the shooting control unit includes an operation control unit that controls the zoom control unit and the shooting control unit at the same time so that the second continuous shooting, which is continuous shooting, is performed.
  • the control unit controls the zoom control unit in a zoom range different from the zoom magnification of the lens when performing the first continuous shooting and when performing the second continuous shooting.
  • An image pickup apparatus control method includes a zoom lens driving unit that varies a zoom magnification by moving a zoom lens with respect to a photographing lens, and performs an exposure operation during zooming during an exposure period.
  • An imaging method using an imaging apparatus that performs zoom shooting wherein a zoom control step for driving and controlling a zoom lens driving unit that varies a zoom magnification of a shooting lens, and a subject image are continuously shot during driving by the zoom lens driving unit.
  • an image pickup apparatus and a control method for the image pickup apparatus that prevent exposure from being lost in the locus when performing zoom exposure during exposure.
  • FIG. 3 is a timing chart illustrating an operation during zoom exposure shooting in the camera according to the first embodiment of the present invention.
  • 4 is a graph showing a zoom position for each image taking in the camera according to the first embodiment of the present invention.
  • 6 is a flowchart showing an operation of zooming between exposures of the camera according to the first embodiment of the present invention. It is a figure which shows the image processing in the camera which concerns on 1st Embodiment of this invention. It is a timing chart which shows the operation
  • FIG. 6 is a graph and chart showing changes in zoom magnification and the like in a camera according to a second modification of the first and second embodiments of the present invention. It is a timing chart which shows the operation
  • a camera has a function of zoom exposure during exposure in which a zoom operation is performed during an exposure period.
  • the camera also has an imaging unit that converts a subject image into image data. Based on the image data acquired by the imaging unit, the subject image is displayed in live view on the display unit. The photographer determines the composition and the photo opportunity by observing the live view display. During the release operation, image data is recorded on the recording medium. The image data recorded on the recording medium can be reproduced and displayed on the display unit when the reproduction mode is selected.
  • the zoom driving and the shooting operation are synchronized, and shooting is performed a plurality of times to acquire a plurality of image data.
  • the zoom drive is stopped in conjunction with reading of the shutter and image data.
  • the zoom position is slightly returned when the zoom drive is stopped at the end of each photographing.
  • the image data acquired in the zoom range where the zoom speed is constant is subjected to comparatively bright combination processing, and a progress image at the time of zoom shooting during exposure is displayed based on the image data generated by the comparative bright combination processing.
  • FIG. 1 is a block diagram mainly showing an electrical configuration of a camera according to the first embodiment of the present invention.
  • the camera in the present embodiment includes an imaging unit 1, an image processing unit 10, a system control unit 20, and a bus 31 and each unit connected thereto.
  • an example in which the photographing lens is configured integrally with the camera body is shown, but an interchangeable lens of a camera system in which the camera body and the photographing lens are separated may be used.
  • the imaging unit 1 includes a lens 2, a zoom lens 3, a mechanical shutter 4, and an image sensor 5.
  • the lens 2 is an optical system that forms an optical image of a subject on the image sensor 5 in cooperation with the zoom lens 3. This lens 2 is provided with an aperture for determining an aperture value for adjusting the exposure amount.
  • the zoom lens 3 changes the focal length of the optical system and changes the angle of view.
  • the zoom lens 3 also has a zoom lens driving unit that varies the zoom magnification of the photographing lens.
  • the mechanical shutter 4 performs exposure and shading to the image sensor 4 by opening and closing operations, and controls the shutter speed.
  • the image sensor 5 includes an image sensor such as a CMOS image sensor or a CCD image sensor, converts an optical image of a subject formed by the lens 2 into an electrical signal for each pixel, and converts the image signal into the image processing unit 10 and the bus.
  • the bus 31 is a signal line for transmitting and receiving signals between the blocks.
  • the image processing unit 10 performs image processing on the image signal output from the image sensor 5.
  • the image processing unit 10 includes a comparatively bright combination unit 11, a development processing unit 12, and a gain application unit 13, and also includes a processing unit for performing display image processing, recording image processing, and the like. Further, the image processing unit 10 detects luminance data of the image data from the image sensor 5 and outputs it to the system control unit 20.
  • the comparative light composition unit 11 uses the image data continuously captured from the image sensor 5 and read out for each photographing and the image data stored in the internal memory 33 to compare the output for each corresponding pixel. . Based on the result of this comparison, a comparatively bright combination process is performed in which brighter pixel data is selected and combined for each pixel. This process is repeated for each shooting, and a comparatively bright combination is performed using the comparatively bright combined image data generated by performing the comparative bright combining process at the previous shooting and the image data read for each shooting. Generate image data.
  • pixel data constituting image data generated based on the image signal first read from the image sensor 5 is stored in the internal memory 33 as the comparatively bright combined image data.
  • the pixel data corresponding to each other is compared, and the larger pixel data, that is, the brighter pixel data is detected, and the brighter pixel data is used to reconstruct comparatively bright composite image data. This process is repeated every time an image signal is read from the image sensor 5. By performing comparatively bright combination processing, an image of a light trace can be obtained.
  • the comparatively bright combining unit 11 functions as an image combining processing unit that generates a combined image from a plurality of acquired image data.
  • the comparatively bright combining unit 11 further functions as an image processing unit that performs comparatively bright combining processing on image data continuously captured in synchronization with the driving of the zoom lens driving unit to generate composite image data.
  • the image composition process is not limited to the comparatively bright composition process, and may be any one of an addition average composition process and a simple addition process.
  • the development processing unit 12 performs development processing such as demosaicing, white balance adjustment, gamma correction, and image compression on the RAW image data generated in the comparative bright combination unit 11 and the image processing unit 10.
  • the gain application unit 13 performs an application process such as multiplication of a predetermined gain on the image data. For example, by multiplying the image data by 0.5 as the gain, the luminance output of the image data is halved and a dark image is obtained. Further, by multiplying by 2 as the gain, the luminance output of the image data becomes a double value and a bright image is obtained.
  • the internal memory 33 temporarily stores various setting information necessary for camera operation and an intermediate image during image processing.
  • the internal memory 33 is composed of a volatile memory and a nonvolatile memory.
  • a volatile memory such as a DRAM is used to temporarily store an intermediate image.
  • a program for operating the system control unit 20 described later, various setting information, and the like use a non-volatile memory such as a flash memory.
  • the external memory 36 is a non-volatile storage medium that can be loaded into the camera body or fixed inside, and is, for example, an SD card or a CF card.
  • the external memory 36 records the image data developed by the development processing unit 16, and at the time of reproduction, the recorded image data can be read out and output to the outside of the camera.
  • the display unit 37 is configured by a rear display unit such as a TFT (Thin Film Transistor) liquid crystal or an organic EL or an EVF (Electronic View Finder), and displays an image (including a live view image) developed by the development processing unit 12. .
  • the display unit 37 also displays a progress image based on the comparatively bright combined image data combined by the comparatively bright combining unit 11 at the time of zooming during exposure. Display control for the display unit 37 is performed by the system control unit 20 described later.
  • the input IF 38 includes an operation member such as a release button, a touch panel for inputting a touch operation on the rear display unit, and the like, and issues various mode settings and instructions for shooting operations such as a release based on a user operation.
  • the system control unit 20 has a CPU (Central Processing Unit) and performs overall control of the camera according to a program stored in the internal memory 33.
  • CPU Central Processing Unit
  • the system control unit 20 functions as a zoom control unit that drives and controls zoom lens driving provided in the zoom lens 3 (see the zoom lens control unit 20b in the system control unit 20 in FIG. 1).
  • the system control unit 20 also functions as a shooting control unit that continuously captures a subject image and acquires a plurality of pieces of image data when driven by the zoom lens driving unit (the shooting control unit in the system control unit 20 of FIG. 1). 20a).
  • the imaging control unit 20a and the zoom control unit 20b are executed by the CPU controlling each unit in the camera by software. However, in addition to software processing, part or all of the functions may be processed by hardware. The same applies to an operation control unit 20c described later.
  • the system control unit 20 performs continuous shooting in synchronization with the zoom lens driving unit changing the zoom magnification of the shooting lens in a predetermined direction (see, for example, times t12 to t13 and t16 to t17 in FIG. 2).
  • the zoom lens drive unit performs zoom driving between the respective shootings in the continuous shooting in a direction opposite to a predetermined direction so that a part of the zoom position being exposed is overlapped and shot ( For example, at times t13 to t14 and t17 to t18 in FIG. 2), the zoom controller and the imaging controller are simultaneously controlled (see an operation controller 20c in the system controller 20 in FIG. 1).
  • the system control unit 20 performs the first continuous shooting in synchronization with the zoom lens driving unit moving the shooting lens in the first direction at the first zoom speed (for example, the time of FIG. 6). t12 to t13, t14 to t15, and t16 to t17), after the first continuous shooting, the zoom lens driving unit performs the first zoom speed in the second direction opposite to the first direction.
  • the zoom control unit and the imaging control unit are set so that the second continuous shooting is performed in synchronization with the movement at the zoom speed of the same size as (see, for example, times t20 to t21 and t22 to t23 in FIG. 6). It functions as an operation control unit that is controlled simultaneously.
  • the operation control unit performs control in a zoom range different from the zoom magnification of the lens when performing the first continuous shooting and when performing the second continuous shooting (see, for example, FIG. 7).
  • the system control unit 20 functions as a luminance determination unit that determines whether light having a predetermined luminance or higher is incident based on the luminance data of the image data (see, for example, S19 in FIG. 4). Further, the system control unit 20 functions as a shooting control unit that discards image data and performs continuous shooting when the luminance determination unit determines that light having a predetermined luminance or more is incident (for example, FIG. 4). S19 Yes ⁇ S23). The system control unit 20 causes the zoom lens driving unit to move the image data again to the discarded zoom magnification position (for example, S23 in FIG. 4), and then causes the shooting control unit to continuously take another shot (FIG. 1). As an operation control unit 20c in the system control unit 20).
  • the system control unit 20 sensitizes and exposes each image according to the amount of change in the zoom magnification controlled by the zoom control unit with respect to shooting conditions when performing continuous shooting with zoom driving by the zoom lens driving unit. It functions as an imaging control unit (see the operation control unit 20c in the system control unit 20 in FIG. 1) that changes the time setting (see, for example, FIG. 13).
  • the system control unit 20 functions as a shooting control unit that performs shooting in a state where zoom driving is stopped at least once at the beginning, middle, and last of continuous shooting when performing continuous shooting with zoom driving by the zoom lens driving unit. (See the photographing control unit 20a in the system control unit 20 in FIG. 1. For example, refer to the operation stop 61a, 61b, 61N in FIG. 9 or FIG. 11). Further, the system control unit 20 functions as a display control unit that performs display control on the display unit 37 (see, for example, comparatively bright combining / display processing in S17 in FIG. 4, S37 in FIG. 8).
  • FIG. 2 is a timing chart showing zoom driving, shutter operation, and reading operation of the image sensor 5 when the during-exposure zoom shooting mode is set.
  • the top row in Fig. 2 shows the shooting operation.
  • zoom shooting during exposure is started. Note that, during zoom shooting during exposure, shooting is repeated a plurality of times according to the opening / closing operation of the shutter. In the uppermost part of FIG. 2, “while shooting” is displayed while this continuous shooting is being performed. Yes.
  • zoom driving is performed to the telephoto side.
  • the drive unit of the zoom lens 3 is driven so that the focal length is on the telephoto side in accordance with an instruction from the system control unit 20.
  • the mechanical shutter 4 is in a closed state, no subject image is formed on the image sensor 5, and therefore no exposure is performed.
  • the driving speed of the zoom lens 3 becomes a constant speed
  • the mechanical shutter 4 is opened
  • a subject image is formed on the image sensor 5, and each pixel of the image sensor 5 performs photoelectric conversion.
  • the mechanical shutter 4 is closed and the zoom is driven to the wide angle side.
  • the time from the time t12 to the time t13 is the first exposure time (shutter speed) out of continuous shooting multiple times.
  • This exposure time is an appropriate exposure time calculated based on the subject brightness.
  • the photographer may set manually or may be determined as a design value.
  • the zoom driving to the wide angle side at time t13 is performed so that the zoom speed becomes a constant speed at the start of exposure by the image sensor 5 when the zoom driving is restarted to the telephoto side at time t15. Because. Therefore, the zoom drive amount to the wide angle side should be a constant speed when the zoom range at the end of the previous exposure is reached when zoom drive is resumed from the position where the zoom position is returned to the telephoto side. Good.
  • zoom driving is stopped and image data is read from the image sensor 5.
  • the image sensor 5 is exposed between time t12 and time t13, and image data generated during this time is read out. Since shooting is performed while changing the focal length of the zoom lens 3, an image of a trajectory in which the angle of view changes and a bright part flows is obtained.
  • zoom drive to the telephoto side is started with the mechanical shutter 4 closed.
  • zoom driving is started on the wide-angle side at time t13
  • the zoom driving is stopped at time t14
  • readout of image data from the image sensor 5 is started at the same time
  • zoom driving is resumed on the telephoto side at time t15.
  • the reading of the image data from the image sensor 5 is finished.
  • the timing is not limited to this, and the zoom lens 4 is once moved to the wide-angle side from time t13 to time 16, and again reaches a constant speed toward the telephoto side. It suffices to complete reading of.
  • zoom driving is started toward the telephoto side (time t11), and when the driving speed reaches a constant speed (time t12), the mechanical shutter 4 is opened and the exposure operation by the image sensor 5 is performed.
  • time t13 When a predetermined time elapses (time t13), the mechanical shutter 4 is closed and image data is read from the image sensor 5 (time t14 to t15).
  • zoom driving is again performed to the telephoto side (time t15 to t16).
  • a plurality of image data can be acquired by repeating this photographing operation (exposure operation).
  • FIG. 3 shows a zoom range when the above-described continuous shooting is repeated.
  • 3A shows the zoom range at the time of shooting the first image in continuous shooting
  • FIG. 3B shows the zoom range of the next second image
  • FIG. 3C shows the third image. Indicates the zoom range.
  • the picture when the first picture is taken, the picture is taken in the zoom range of the focal lengths FL0 to FL1 at times T0 to T1.
  • Time T0 corresponds to time t12 in FIG. 2
  • time T1 corresponds to time t13.
  • zoom shooting is performed in the zoom range of the focal lengths FL1 to FL2 at times T3 to T4.
  • exposure is started from time T2 (corresponding to time t16 in FIG. 2) in the second image capturing, zoom exposure is actually performed from the wide angle side with respect to the focal length FL1. .
  • zoom photographing is performed in the zoom range of the focal lengths FL2 to FL3 (actually from the wide angle side as compared with FL2) at times T5 to T7. Yes.
  • the comparative bright combination unit 11 A single image data is generated by subjecting a plurality of pieces of image data to comparatively bright combination processing.
  • FIG. 3D shows the zoom range during all exposures for the composite image data generated by the comparatively bright combination unit 11 performing the comparatively bright combination process.
  • step S1 zoom driving is started (S1).
  • the timing of step S1 corresponds to time t11 in FIG.
  • the zoom lens driving unit starts driving at a constant speed so as to change the focal length with the zoom lens 3 facing the telephoto side.
  • step S3 When the zoom drive is started, the first exposure is started (S3).
  • the timing of step S3 corresponds to time t12 in FIG.
  • the mechanical shutter 4 is opened to form a subject image on the image sensor 5, and the exposure operation is started.
  • This exposure time corresponds to the time between times t12 and t13 in FIG.
  • the exposure time is set to a proper exposure time, but other setting methods such as manual setting by the photographer may be used.
  • step S7 corresponds to times t13 to t15 in FIG.
  • the mechanical shutter 4 is closed, image data is read from the image sensor 5, and the zoom drive of the zoom lens 3 is stopped.
  • step S7 zoom driving is performed so that the focal length of the zoom lens 3 is changed from the telephoto side to the wide angle side.
  • the amount of return in this case varies depending on the stability when the zoom motor that drives the zoom lens 3 is driven.
  • the return amount may be set to a constant speed when the end of the previous zoom range is reached. For example, if the return drive amount is set to a position that is half the zoom drive amount of the first sheet, it is usually possible to make the speed constant at the end of the previous zoom range.
  • the order of the processes in step S7 may be performed in parallel as appropriate, or the order may be changed, and is not limited to the process procedure at times t13 to t15 in FIG.
  • step S9 the zoom position is recorded and zoom driving is started (S9).
  • the timing of step S9 corresponds to time t15 in FIG.
  • step S7 the zoom position is returned, and the zoom lens 3 is driven so that the focal length changes from this position to the telephoto side.
  • the zoom drive can be stably accelerated by temporarily stopping (time t14 to t15 in FIG. 2).
  • the zoom position recorded in this step is used in step S23 described later.
  • step S11 When the zoom driving is started and the zoom position where the driving speed of the zoom driving becomes constant is reached, the Nth exposure is started (S11).
  • the timing in step S11 corresponds to the timing at time t16 in FIG.
  • step S3 the mechanical shutter 4 is opened to form a subject image on the image sensor 5, and the exposure operation is started.
  • step S5 the process waits for the exposure time to elapse. If the exposure time elapses as a result of the determination in step S13, the exposure of the Nth sheet is finished, the zoom operation is stopped, the Nth image is read, and the zoom position is returned (S15), as in step S7. .
  • the processing unit 11 performs comparatively bright combination processing. Since the focal length has changed (because the zoom magnification has changed), a bright portion becomes a locus by performing comparatively bright combination processing. Further, since exposure is performed in a zoom range where the zoom drive is at a constant speed, unevenness in image density does not occur. In addition, since the zoom position is returned, the first and second exposure images are seamless. Here, the generated comparatively bright composite image data is temporarily stored in the internal memory 33.
  • comparatively bright combination processing is performed using the comparatively bright composite image data generated and temporarily stored last time and the image data read in step S15 this time.
  • step S17 a progress image of the between-exposure zoom shooting is displayed on the display unit 37 based on the image data generated by the comparatively bright combination process.
  • the photographer can confirm whether or not the photograph has been taken as intended, and can determine the end timing of the inter-exposure zoom photography.
  • the level has increased by a photometric point set value or more (S19).
  • a photometric point set value or more it is compared with the first image to determine whether or not the luminance at the photometry point has increased more than the set value. For example, if unexpected light such as a headlight of an automobile enters into the exposure zoom shooting, the image of the exposure zoom shooting as intended by the photographer is not obtained. Therefore, in this step, it is determined whether or not there is such abnormal light. It is convenient if the photographer can arbitrarily set the photometry point from the entire screen.
  • step S19 If the result of determination in step S19 is that there is an increase beyond the set value, the recorded zoom position is returned and the Nth captured image is discarded (S23). In this case, since extraordinary light is incident, the image data read in step S15 and the comparatively bright composite image data generated using this image data are discarded. As image data for comparatively bright combination, image data generated after the (N-1) th exposure is temporarily stored. Then, in order to perform the Nth exposure again, the zoom position recorded in step S9 is returned. When returning to the recorded zoom position, the process proceeds to step S11 and the Nth exposure is performed again.
  • step S21 it is determined whether or not the zoom position is at the end of shooting (S21).
  • the release button is pushed again (or the hand is released from the release button). It is determined whether it is located at the end of the zoom range made. It is similarly determined whether or not it is located at the end of the focal length on the telephoto side.
  • step S21 If the result of determination in step S21 is that the zoom position at which shooting has been completed has not been reached, 1 is added to N for the number of shots, and control returns to step S9 for the next exposure. On the other hand, if the result of determination is that the zoom position at which photography has been completed has been reached, this inter-exposure zoom photography flow ends.
  • the zoom position of the zoom lens is temporarily returned between exposure and exposure, and image data is acquired in a zoom range where the speed is constant (see S7 and S15). For this reason, it is possible to prevent the occurrence of unevenness in the density of the image and the occurrence of exposure loss between exposures when performing comparatively bright combination processing.
  • the wide operation 52a is performed. This corresponds to zoom driving to the wide angle side at times t13 to t14 in FIG. 2, and corresponds to processing for returning the zoom position in step S7 in FIG.
  • the zoom operation 51b is performed.
  • the comparatively bright combination processing 53a is performed, and the image processing 54b is performed on the generated image data.
  • a display image 55b is displayed on the display unit 36 based on the image data subjected to the image processing 54b, and the composite image 2 is stored in the internal memory 33.
  • zoom operation, wide operation, comparatively bright combination processing, image processing, display image display, and composite image storage are sequentially performed.
  • comparatively bright combination processing 53N is performed using the image data based on the bright image_N when the zoom operation 51N is performed, and image processing 54N is performed on the generated image data.
  • the display image 55N is displayed on the display unit 36 as the final image based on the image data subjected to the image processing 54b, and the final recorded image 2 is recorded in the external memory 36.
  • every time image data based on a bright image at the time of each zoom operation is acquired, comparatively bright composition is performed and displayed as a progress image (composite image) on the display unit 36. For this reason, the photographer can check a progress image at the time of zoom exposure shooting.
  • the zoom position is once returned to the wide-angle side and then the zooming is performed on the telephoto side.
  • the zoom driving when shooting is performed while performing zoom driving for a predetermined time on the telephoto side, a plurality of images are directed toward the telephoto side without returning the zoom position to the wide-angle side during shooting.
  • Image data is acquired by shooting with multiple zoom driving operations.
  • zoom driving is performed on the wide-angle side, and image data in a zoom range corresponding to a gap between a plurality of shootings is acquired.
  • the electrical configuration in the present embodiment is the same as the block diagram in FIG.
  • the operation in the present embodiment will be described using the timing chart shown in FIG.
  • the shooting operation is shown at the top of FIG.
  • time t31 when the photographer operates the release button, zoom shooting during exposure is started.
  • shooting is repeated a plurality of times in accordance with the opening / closing operation of the shutter, and in the uppermost row in FIG. "Shooting" is displayed.
  • zoom driving is performed to the telephoto side.
  • the drive unit of the zoom lens 3 is driven so that the focal length is on the telephoto side in accordance with an instruction from the system control unit 20.
  • the mechanical shutter 4 is in a closed state, no subject image is formed on the image sensor 5, and therefore no exposure is performed.
  • the zoom lens 3 is driven at a constant speed, the mechanical shutter 4 is opened, a subject image is formed on the image sensor 5, and each pixel of the image sensor 5 performs photoelectric conversion.
  • the mechanical shutter 4 is closed. However, the zoom drive is not stopped.
  • the time from the time t32 to the time t33 is an exposure time (shutter speed) per time out of a plurality of times of continuous shooting.
  • the exposure time is an appropriate exposure time calculated based on the subject brightness. Other than this, it may be determined in advance, may be determined as a design value, or may be set by the photographer.
  • image data is read from the image sensor 5.
  • the image sensor 5 is exposed between time t32 and time t33, and image data generated during this time is read out. Since the image is taken while the focal length of the zoom lens 3 is changed, a flowing trajectory image is obtained.
  • the mechanical shutter 4 is opened, the subject image is exposed to the image sensor 5, and photoelectric conversion is performed.
  • the mechanical shutter 4 is closed and the image data is read from the image sensor 5 while the zoom drive is continued.
  • the mechanical shutter 4 is opened, the subject image is exposed to the image sensor 5, and photoelectric conversion is performed.
  • zoom driving is stopped, the mechanical shutter 4 is closed, and image data is read from the image sensor 5.
  • zoom driving is started toward the wide angle side, the mechanical shutter 4 is opened, the subject image is exposed to the image sensor 5, and photoelectric conversion is performed.
  • the mechanical shutter 4 is closed and image data is read from the image sensor 5 while continuing zoom driving to the wide angle side.
  • time t36 to t37 is time t1
  • time t38 to t40 is time t2
  • t1> t2 is set. Since the image data read at time t39 may be discarded without being used, the image sensor 5 may simply be reset.
  • the mechanical shutter 4 is opened with the zoom drive continued to the wide angle side, the subject image is exposed to the image sensor 5, and photoelectric conversion is performed.
  • the mechanical shutter 4 is closed and image data is read from the image sensor 5 while continuing zoom driving to the wide angle side. Thereafter, the opening / closing of the mechanical shutter 4, the photoelectric conversion of the image sensor 5, and the reading of image data are repeated while continuing the zoom driving to the wide angle side until returning to the initial position.
  • FIG. 7A shows the zoom range at the time of shooting the first image in continuous shooting
  • FIG. 7B shows the zoom range of the next second image
  • FIG. 7C shows the third image
  • 7D shows the zoom range of the fourth image
  • FIG. 7E shows the zoom range of the fifth image
  • FIG. 7F shows the zoom range of the sixth image.
  • the image is taken within the zoom range of the focal lengths FL0 to FL1a at times T10 to T11.
  • Time T10 corresponds to time t32 in FIG. 6, and time T11 corresponds to time t33.
  • zoom image capturing is performed within the zoom range of the focal lengths FL1b to FL2a from time T12 to T13.
  • Time T12 corresponds to time t34 in FIG. 6, and time T13 corresponds to time t35.
  • photographing is not performed in the zoom range of the focal lengths FL1a to FL1b.
  • the zoom range of this exposure omission is supplemented in the shooting of the sixth sheet (see FIG. 7F) described later.
  • Time T16 corresponds to time t38 in FIG. 6, and time T17 corresponds to time t39.
  • the image data acquired here is not used as described above.
  • Time T18 corresponds to time t40 in FIG. 6, and time T19 corresponds to time t41.
  • Time T20 corresponds to time t42 in FIG. 6, and time T21 corresponds to time t43.
  • FIGS. 7A to 7F when a plurality of images are taken and a plurality of pieces of image data are acquired, one piece of image data is generated by a comparatively bright combination process.
  • FIG. 7G shows the zoom range of the composite image data generated by the comparatively bright composite process.
  • the focal lengths FL0 to FL1a are image data acquired in the first shooting
  • the focal lengths FL1a to FL1b are image data acquired in the sixth shooting
  • the focal lengths FL1b to FL2a are image data acquired in the second shooting
  • the focal lengths FL2a to FL2b can obtain image data for the entire zoom range by using the image data obtained by the fifth shooting
  • the focal lengths FL2b to FL3 can obtain the image data for the entire zoom range.
  • the zoom is not reversed in small increments, but is reversed after continuous shooting is performed in which the zoom is driven in one direction, and the zoom is driven in the reversed direction.
  • the shooting is performed so as to include the zoom range that is missing when continuous shooting is performed in one direction, and the shooting is ended when the zoom position returns to the initial zoom position. For this reason, the time required for the zoom between exposures can be shortened.
  • the zoom range where the exposure is lost when the zoom drive is performed in one direction the image data is acquired when the zoom drive is performed in the reverse direction, so that the exposure is not lost.
  • step S31 the zoom drive is started in the same manner as in step S1 (S31).
  • the timing of step S31 corresponds to time t31 in FIG.
  • driving is started so as to change the focal length with the zoom lens 3 facing the telephoto side.
  • step S3 corresponds to time t32 in FIG.
  • step S3 the mechanical shutter 4 is opened to form a subject image on the image sensor 5, and the exposure operation is started.
  • the first and Nth images are shown separately. However, since it is substantially the same except that the comparatively bright combination processing is not performed at the time of the first shooting, the flow shown in FIG. 8 is described without distinguishing from the first shooting. .
  • This exposure time corresponds to the time between times t32 to t33, t34 to t35, t36 to t37, etc. in FIG.
  • the exposure time is set to a proper exposure time, but other setting methods such as setting by the photographer may be used. If the result of this determination is that the exposure time has not elapsed, the process waits until it has elapsed.
  • step S35 If the result of determination in step S35 is that the exposure time has elapsed, the Nth exposure is terminated, the Nth image data is read out, brightly synthesized, and displayed (S37).
  • the zoom position is the photographing completion (S39).
  • the release button is operated again, and the determination is made based on this operation. Also, when the driving end of the zoom lens 3 is reached, it is determined that the zoom position is the photographing completion. If the result of this determination is that the zoom position is not at the end of shooting, processing returns to step S33 and zoom shooting during exposure is continued.
  • step S41 If the result of determination in step S39 is that the zoom position is at the end of shooting, wide driving is started (S41). This timing corresponds to time 37 in FIG. 6, and the zoom drive direction is reversed, that is, the zoom drive is started toward the wide angle side.
  • the number of shots N in steps S33 to S37 is stored in the internal memory 33.
  • the N-1th sheet is exposed (S45).
  • This timing immediately after the start of wide driving corresponds to time t40 in FIG.
  • the mechanical shutter 4 is opened, the subject image is exposed to the image sensor 5 and subjected to photoelectric conversion.
  • the exposure time corresponds to the time between times t40 to t41, t42 to t43, etc. in FIG.
  • the exposure time is set to a proper exposure time, but other setting methods such as setting by the photographer may be used. If the result of this determination is that the exposure time has not elapsed, the process waits until it has elapsed.
  • step S46 If the result of determination in step S46 is that the exposure time has passed, the exposure for the (N-1) th sheet is terminated, the image data for the (N-1) th sheet is read, a comparatively bright combination process is performed, and display is performed (S47).
  • a plurality of exposures are repeated while zoom driving to the telephoto side (time t32 to t33, t34 to t35, t35 to t36 in FIG. 6, S31 to S39 in FIG. 8).
  • zoom driving to the telephoto side time t32 to t33, t34 to t35, t35 to t36 in FIG. 6, S31 to S39 in FIG. 8.
  • comparatively bright combination processing is performed based on the acquired image data, and a progress image is displayed on the display unit 37 (S37 in FIG. 8).
  • the zoom since the zoom is driven to the telephoto side even when the mechanical shutter 4 is closed, the time during which the mechanical shutter 4 is closed between exposure and exposure is lost.
  • zoom driving is performed by reversing the zoom driving direction to the wide angle side, the mechanical shutter 4 is opened and exposed so as to include at least the zoom range that is not exposed. For this reason, the comparatively bright composite image data finally obtained does not result in exposure omission.
  • an example has been shown in which shooting is performed three times before the zoom position at which shooting is completed.
  • the number is not limited to three, and may be more or less.
  • first and second embodiments when shooting is started, zoom driving is started and exposure is also started. When the zoom position reached the completion of shooting, the zoom drive was stopped and the exposure was also stopped.
  • shooting when shooting is started, shooting is performed in a stopped state before starting zoom driving, and when zooming is completed, shooting is performed while zoom driving is stopped. .
  • An image can be made clear by taking a picture with the zoom drive stopped.
  • FIG. 9 shows the flow of image processing of this modification.
  • image data of the bright image_1 is acquired in a stopped state without performing zoom driving.
  • the zoom lens 3 is zoom-driven to the wide-angle side (wide operation 62a), and once the zoom drive start position is returned to the wide-angle side, the zoom drive is performed to the telephoto side (zoom operation 63a).
  • the image data of the bright image_2 is acquired in a zoom driven state.
  • the image data of the bright image_2 acquired here is subjected to image processing 65b with the image data of the bright image_1 acquired in the stopped state, the display image 66b is displayed, and the composite image 2 is recorded. Thereafter, the imaging is repeated as in the first embodiment.
  • the zoom drive is stopped (operation stop 61N), and the image data of the bright image_N is acquired in the stopped state.
  • comparatively bright combination processing is performed to display the display image 66N and record the final recorded image.
  • the exposure time is set to a proper exposure time, but other setting methods such as setting by the photographer may be used.
  • the first exposure is terminated (S55).
  • the mechanical shutter 4 is closed and image data is read from the image sensor 5.
  • the read image data is temporarily stored in the internal memory 33 and displayed on the display unit 37.
  • the lens is then driven to the wide side (S57).
  • This processing corresponds to the wide operation 62a in FIG.
  • the zoom position is once returned to the wide angle side.
  • This return amount may be an amount that allows a constant speed while moving from the returned position to the first position.
  • the zoom is then driven (S59). This processing corresponds to the zoom operation 63a in FIG.
  • the zoom drive is started from the zoom position once returned toward the telephoto side.
  • step S61 When the zoom drive is started, it is next determined whether or not the zoom position matches the first zoom position (S61).
  • the zoom position is detected while zooming to the telephoto side, and it is determined whether or not it matches the zoom position recorded in step S51. If the result of this determination is that they do not match, the process returns to step S59 to detect the zoom position while performing zoom driving.
  • step S61 If the result of determination in step S61 is that the zoom position matches the zoom position of the first sheet, exposure of the Nth sheet is started (S63). Here, the mechanical shutter 4 is opened, the subject image is exposed to the image sensor 5 and subjected to photoelectric conversion.
  • step S65 When the exposure for the Nth sheet is started, it is next determined whether or not the exposure time has elapsed (S65). Here, as in step S53, the process waits for the exposure time to elapse. If the exposure time has elapsed as a result of the determination in step S65, the Nth exposure is terminated, the zoom operation is stopped, the Nth image is read, a comparatively bright combination process is performed, and displayed (S67).
  • the zoom position is returned (S69).
  • the zoom position is once returned to the wide-angle side so that image data is acquired when the telephoto side is driven at a constant speed.
  • step S73 zoom drive is performed (S73).
  • zoom driving is performed on the telephoto side.
  • the process proceeds to step S63, where the Nth exposure is started. Thereafter, the above-described zoom exposure during exposure is repeated until the zoom position at which shooting is completed is reached.
  • step S71 determines whether the zoom position is at the end of shooting. If the result of determination in step S71 is that the zoom position is at the end of shooting, then exposure of the last bright image is started (S75). This processing corresponds to exposure for obtaining the bright image_N in FIG.
  • the zoom drive is stopped, the mechanical shutter 4 is opened, the subject image is exposed to the image sensor 5, and photoelectric conversion is performed.
  • step S77 the exposure time has passed (S77) as in step S53. If the result of this determination is that the exposure time has not elapsed, the process waits for elapse.
  • step S75 If the result of determination in step S75 is that the exposure time has elapsed, the last image of the bright image is read (S79). This bright image is clear because it was taken with the zoom lens stopped.
  • the image data is read from the image sensor 5, comparatively bright combination processing is performed using the image data, and the image data is displayed on the display unit 37 and recorded in the external memory 36. When this processing is performed, the flow of zoom exposure during exposure is terminated.
  • the image data is acquired with the zoom lens being stationary (S53, S79), and the comparatively bright combination process is performed using the image data. Is going. For this reason, a clear image can be obtained.
  • image data is acquired in a state where the zoom lens is stopped both at the beginning and at the end.
  • the present invention is not limited to this, and image data may be acquired by only one of them.
  • the zoom drive may be stopped in the middle of the zoom drive in the zoom exposure shooting. That is, in addition to the operation stop 61a before the zoom drive start and the operation stop 61N at the end of the zoom drive, the operation stop 61b is performed in the middle, and the comparatively bright combination processing is performed using the image data at this time, and display and recording are performed. You may make it perform.
  • the number of operation stops in the middle is not limited to one and may be two or more.
  • the stop position may be set in advance in addition to being instructed by the photographer using the operation member.
  • 9 to 11 are modifications based on the first embodiment, but the first modification can be applied to the second embodiment as a base.
  • the shooting magnification (image magnification) or focal length (field angle) of the shooting lens is uniform with respect to the driving step instructed to the zoom lens driving unit that drives the zoom lens 3.
  • the photographing magnification of the photographing lens does not always change uniformly with respect to the driving step instructed to the zoom lens driving unit. For this reason, if the zoom drive speed is constant, the luminance of the movement trajectory of each captured image changes according to the imaging magnification when a plurality of image data are combined during zoom shooting during exposure.
  • the zoom drive speed In order to make the brightness of the moving locus uniform, it is possible to change the zoom drive speed according to the shooting magnification and the angle of view. This method cannot be employed when the zoom drive speed cannot be changed. Therefore, in the second modification, the exposure time in each shooting and the detection sensitivity (ISO sensitivity) of the image sensor 5 are changed according to the amount of change in shooting magnification during zoom driving. For this reason, in this modification, it becomes possible to maintain the brightness
  • FIG. 12 (a) shows an example of a photographing lens in which the image enlargement ratio changes at each zoom step.
  • FIG. 12B is a graph showing the relationship of the image enlargement ratio (zoom magnification) for each zoom step in this photographing lens
  • FIG. 12C shows the image enlargement ratio (for each zoom step). It is a graph which shows the variation
  • the image magnification is doubled at zoom steps Zms1 and Zms2 near the wide end (wide-angle side end), the image magnification is tripled at Zms3 and Zms4, and the image magnification is Zms5 and Zms6. Is double.
  • the zoom drive speed may be set to “1 / change in the image enlargement ratio” as described above. If the image enlargement ratio is double, the zoom drive speed is halved. However, there are cases where the zoom drive speed cannot be changed. In this modification, the brightness level is made constant by changing the shooting conditions.
  • the gain is set to m times and the exposure time is set to 1 / m, which is substantially equivalent to the zoom driving speed being multiplied by 1 / m.
  • the gain is doubled and the exposure time is halved.
  • FIG. 13 shows the relationship between zoom drive, enlargement magnification (zoom magnification) change rate, shutter operation, readout operation of the image sensor 5, image output gain, and zoom step when the between-exposure zoom shooting mode is set. It is a timing chart which shows.
  • the zoom drive, shutter operation, and image sensor readout operation are the same as those in the timing chart of FIG. 2 according to the first embodiment.
  • the exposure time during the shutter operation and the gain of the image output are different for each shooting (at each exposure). This point will be mainly described.
  • zoom driving is performed to the telephoto side.
  • the zoom lens 3 is driven at a constant speed, the mechanical shutter 4 is opened, a subject image is formed on the image sensor 5, and each pixel of the image sensor 5 performs photoelectric conversion.
  • the gain application unit 13 applies gain to the image data read out with the gain Sv1 (read out at times t54 to t55).
  • zoom driving is performed to the wide angle side.
  • Zoom driving, shutter driving, reading of image data, and the like from time t53 to t56 are basically performed in the same manner as in the timing chart of FIG. 2, and thus detailed description thereof is omitted (time t57 to t60 described later). The same).
  • the zoom driving speed toward the telephoto side reaches a constant speed. Therefore, similarly to time t52, the mechanical shutter 4 is opened, the subject image is exposed to the image sensor 5, and photoelectric conversion is performed.
  • the gain application unit 13 applies a gain to the image data read at the gain Sv2 (read at time t58 to t59).
  • the mechanical shutter 4 is closed and zoom driving is performed to the wide angle side.
  • the mechanical shutter 4 is opened, the subject image is exposed to the image sensor 5, and photoelectric conversion is performed.
  • the gain application unit 13 applies a gain to the image data read with the gain SV3.
  • the mechanical shutter 4 is closed and zoom driving is performed to the wide angle side.
  • the above-described exposure times TV1 to TV3 and gains Sv1 to Sv3 are values corresponding to the corresponding zoom steps. That is, in the example of FIG. 12, when the zoom step Zms is 2, the exposure time Tv1 is 1/2 of the appropriate exposure time and the gain is doubled. When the zoom step Zms is 4, the exposure time Tv2 is 1/4 of the appropriate exposure time and the gain is 4 times.
  • FIG. 14 shows the zoom range in this modification.
  • the first exposure is performed from time T30 to T31 (time t52 to t53 in FIG. 13), and image data when the focal length is changed to FL0 to FL1 is acquired.
  • the second exposure is performed at times T31 to T32 (times t56 to t57 in FIG. 13), and image data when the focal lengths FL1 to FL2 are changed is acquired.
  • the third exposure is performed from time T33 to T34 (time t60 to t61 in FIG. 13), and image data when the focal lengths FL2 to FL3 are changed is acquired.
  • the comparatively bright combining unit 11 when the first to third exposures are performed, the comparatively bright combining unit 11 performs comparatively bright combining processing using the image data acquired by each exposure.
  • the image data obtained by the comparatively bright combination processing is image data equivalent to a zoom shot image between exposures in which the focal length is changed in the zoom range of the focal lengths FL0 to FL3. .
  • the exposure time and gain of each photographing are changed according to the focal length when performing the inter-exposure zoom photographing. . For this reason, it becomes possible to maintain the brightness
  • the zoom lens driving unit that varies the zoom magnification of the photographing lens has a function of zoom exposure during exposure that performs a zoom operation during the exposure period.
  • a zoom control step for driving and controlling the zoom lens driving unit that changes the zoom magnification of the photographing lens (see, for example, S1 and S9 in FIG. 4), and at the time of driving by the zoom lens driving unit, the subject image is continuously shot,
  • An imaging control step for acquiring a plurality of image data see, for example, S7 and S15 in FIG. 4
  • an image composition processing step for generating a composite image from the acquired plurality of image data (for example, S17 in FIG. 4).
  • the waiting time is a time based on a time lag required for reading image data from the image sensor 5, image synthesis processing, and the like.
  • the zoom operation direction is moved from the normal direction to the reverse direction according to the shutter (exposure control timing) (for example, When the normal direction is changed from the wide-angle side to the telephoto side, the zoom lens control from the telephoto side to the wide-angle side is performed as a reverse operation (see, for example, returning the zoom position at time t13 in FIG. 2 and S7 and S15 in FIG. 4). .
  • zoom lens control for preventing omission of exposure is performed by zooming at an arbitrary speed during continuous shooting so that the shooting timing of continuous shooting is the same as that during zoom driving.
  • the zoom operation at the same speed is automatically controlled in the reverse direction at such a timing (see, for example, FIGS. 6 and 8).
  • each exposure time is varied in accordance with the amount of change in the zoom magnification of the zoom lens when performing zoom exposure during exposure.
  • the enlargement ratio of one step changes depending on the zoom position, and the exposure time is changed according to this enlargement ratio. For this reason, even in the case of a photographic lens in which the change in magnification is not uniform, it is possible to prevent the density unevenness of the locus that occurs according to the change in the focal length.
  • each embodiment and each modification of the present invention when there is a luminance input greater than an arbitrary setting value (when strong incident light is incident) at the time of zoom exposure during exposure, it is greater than the set value.
  • the image data with the luminance input is discarded, and the zoom position is returned to the start of capturing the image, and the image is captured again (see, for example, S19 and S23 in FIG. 4).
  • the image is acquired after the zoom driving is returned to the first shooting start condition, which is the first shooting stage in the inter-exposure zoom shooting. There is no need to start over from the beginning.
  • the zoom drive is stopped and image data is acquired at the beginning, middle, or end of the during-exposure zoom shooting (for example, the operation of FIG. 9).
  • the photographer can shoot while confirming the length of the locus of the photographic image in the inter-exposure zoom photographing with the subject image.
  • the comparative bright combination processing it is possible to prevent a shooting failure due to exposure interruption or exposure unevenness when shooting a plurality of images.
  • zoom driving is performed from the telephoto side to the wide-angle side when performing zooming during exposure.
  • the present invention is not limited to this, and zoom driving may be performed in the opposite direction, that is, from the wide-angle side to the telephoto side.
  • image data of a composite image is generated by a comparatively bright combination process from a plurality of image data acquired by zooming between exposures.
  • the present invention is not limited to the comparatively bright combination process, and other image combination processes such as an average addition process and a simple addition process may be performed.
  • a digital camera has been described as an apparatus for photographing.
  • a digital single-lens reflex camera or a compact digital camera may be used as a camera, and a video camera or movie camera may be used. It may be a camera for moving images such as a mobile phone, a smartphone, a personal digital assistant (PDA), a personal computer (PC), a tablet computer, a game machine, or the like.
  • PDA personal digital assistant
  • PC personal computer
  • the present invention can be applied to any device that can perform photographing while changing the focal length.
  • control mainly described in the flowchart is often settable by a program and may be stored in a recording medium or a recording unit.
  • the recording method for the recording medium and the recording unit may be recorded at the time of product shipment, may be a distributed recording medium, or may be downloaded via the Internet.
  • the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage.
  • various inventions can be formed by appropriately combining a plurality of components disclosed in the embodiment. For example, you may delete some components of all the components shown by embodiment.
  • constituent elements over different embodiments may be appropriately combined.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Lens Barrels (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Details Of Cameras Including Film Mechanisms (AREA)

Abstract

露光間ズーム撮影を行う際に、軌跡に露光抜けが生じないようにした撮像装置および撮像装置の制御方法を提供する。ズームレンズ駆動部を駆動制御するズーム制御部と、被写体像を連続撮影して、それぞれ複数の画像データを取得する撮影制御部とを有し、レンズのズーム倍率を所定の方向へ変化させることに同期させて、連続撮影を行い（ｔ１２～ｔ１３、ｔ１６～ｔ１７）、連続撮影でのそれぞれの撮影の間でズーム駆動を、所定の方向とは逆方向に動作させて（ｔ１３～ｔ１４、ｔ１７～ｔ１８）、露光中のズーム位置の一部を重ねて撮影を行うように、ズーム制御部と撮影制御部を同時に制御させる。

Description

撮像装置および撮像装置の制御方法
　本発明は、露光中に焦点距離を変えるズーム駆動が可能であり、所謂、露光間ズーム撮影を行える撮像装置および撮像装置の制御方法に関する。
　従来、露光間ズーム撮影という撮影技法が知られている。この露光間ズーム撮影は、１回の露光中に撮影光学系の焦点距離を可変させながら撮影を行う。この撮影技法では、撮影中に撮影画角が変わり、それに伴って被写体像の倍率が変わることから、被写体像の中心から被写体が外側に放射状に軌跡が伸びるような画像を得ることができる。露光間ズームによって、主要な被写体像が背景に比べて強調する効果を与えた撮影画像を得ることができる。
　このように、露光間ズーム撮影は従来からよく知られた撮影技法である。しかし、撮影者が撮影レンズのズーム駆動と連携した撮影操作に経験が必要な技術となっている。特に撮影者が手動でズーム駆動をさせるにあたって、撮影レンズのズーム駆動操作と、露光開始および終了操作に係る撮影操作とを同期させて撮影することが容易でない。これを解決するために、ズーム駆動を電動で制御し、ズーム駆動と撮影動作を同期させることにより、露光間ズーム撮影を簡単にする技術が知られている（例えば、特許文献１、２参照）。
日本国公開特許２０１０－１６４７１６号公報 日本国公告特許平７－２３９４９号公報
　電動ズームを用いることにより露光間ズームは、手動でズーム駆動させることより容易になる。しかし、露光間ズーム撮影中には、露光途中の経過画像を確認することができない。このため、露光終了後に撮影効果を確認し、意図通りの撮影ができない場合には、何度も撮影を繰り返し行う必要があった。
　また、露光間ズーム撮影の際に、複数の画像データを取得して加算し、この加算画像データを経過画像として表示することが考えられる。しかし、この方法では、効果を確認するためにズーム速度を遅くすると、露出オーバとなってしまう。また、複数の画像データを取得し、比較合成処理を行うことが考えられる。しかし、この方法では、複数の画像データを取得する際に、画像データを取得し、次の画像データを取得する間に、所謂、露光抜け部分が発生してしまう。この場合には、放射状に流れる軌跡の一部が写らず、露光抜けのない直線の軌跡とはならない。この対策として、画像データと取得し、次の画像データを取得する間は、ズーム駆動を停止することが考えられるが、ズーム駆動の再開時に、一定速度となるまでに時間を要するために、露光ムラが発生してしまう。
　本発明は、このような事情を鑑みてなされたものであり、露光間ズーム撮影を行う際に、軌跡に露光抜けが生じないようにした撮像装置および撮像装置の制御方法を提供することを目的とする。
　本発明の第１の態様に係わる撮像装置は、露光期間中にズーム動作を行う露光間ズーム撮影を行う撮像装置であって、ズームレンズを有する撮影レンズと、上記撮影レンズのズーム倍率を可変させるズームレンズ駆動部と、上記ズームレンズ駆動部が、上記ズームレンズを駆動した時に、上記撮影レンズが撮像面に結像させた被写体像を連続撮影して、それぞれ複数の画像データを出力するイメージセンサと、それぞれ取得した複数の上記画像データから合成画像を生成する画像合成処理をする画像処理部と、上記ズームレンズ駆動部を駆動制御するズーム制御部と、上記イメージセンサに撮影指示をする撮影制御部と、上記ズーム制御部が、上記ズームレンズ駆動部に対して上記撮影レンズのズーム倍率を所定の方向へ変化させる駆動量を出力して駆動制御させることに同期させて、上記撮影制御部に上記イメージセンサに対して連続撮影を行わせ、上記ズーム制御部が、上記ズームレンズ駆動部に、上記連続撮影でのそれぞれの撮影の間でズーム駆動を、上記所定の方向とは逆方向に動作させる駆動量を出力させ、上記撮影制御部が、露光中のズーム位置の一部を重ねて撮影を行わせるように、上記ズーム制御部と上記撮影制御部を同時に制御させる動作制御部と、を有する。
　本発明の第２の態様に係わる撮像装置は、露光期間中にズーム動作を行う露光間ズーム撮影を行う撮像装置であって、ズームレンズを有する撮影レンズと、上記撮影レンズのズーム倍率を可変させるズームレンズ駆動部と、上記ズームレンズ駆動部が、上記ズームレンズを駆動した時に、上記撮影レンズが撮像面に結像させた被写体像を連続撮影して、それぞれ複数の画像データを出力するイメージセンサと、それぞれ取得した複数の上記画像データから合成画像を生成する画像合成処理をする画像処理部と、上記ズームレンズ駆動部を駆動制御するズーム制御部と、上記イメージセンサに撮影指示をする撮影制御部と、上記ズーム制御部が、上記ズームレンズ駆動部に対して、上記撮影レンズを第１の方向へ第１のズーム速度で移動させる駆動量を出力して駆動制御させることに同期させて、上記撮影制御部が、上記イメージセンサに対して第１の連続撮影を行わせ、上記ズーム制御部が、上記ズームレンズ駆動部に、上記第１の連続撮影の終了後に、上記第１の方向とは逆方向となる第２の方向に、上記第１のズーム速度と同じ大きさのズーム速度で移動させる駆動量を出力させることに同期させて、上記撮影制御部が、連続撮影である第２の連続撮影を行わせるように、上記ズーム制御部と上記撮影制御部を同時に制御させる動作制御部と、を有しており、上記動作制御部は、上記ズーム制御部に対して、上記第１の連続撮影を行う際と、上記第２の連続撮影を行う際の上記レンズのズーム倍率とは異なるズーム範囲で制御する。
　本発明の第３の態様に係わる撮像装置の制御方法は、撮影レンズに対してズームレンズを移動させてズーム倍率を可変するズームレンズ駆動部を有し、露光期間中にズーム動作を行う露光間ズーム撮影を行う撮像装置での撮像方法であって、撮影レンズのズーム倍率を可変させるズームレンズ駆動部を駆動制御するズーム制御ステップと、上記ズームレンズ駆動部による駆動時に、被写体像を連続撮影して、それぞれ複数の画像データを取得する撮影制御ステップと、それぞれ取得した複数の上記画像データから合成画像を生成する画像合成処理ステップと、を有し、上記撮影レンズのズーム倍率を所定の方向へ変化させることに同期させて、連続撮影を行い、上記連続撮影でのそれぞれの撮影の間でズーム駆動を、上記所定の方向とは逆方向に動作させて、露光中のズーム位置の一部を重ねて撮影を行うように、上記ズーム制御ステップと上記撮像制御ステップを同時に制御させる。
　本発明によれば、露光間ズーム撮影を行う際に、軌跡に露光抜けが生じないようにした撮像装置および撮像装置の制御方法を提供することができる。
本発明の第１実施形態に係るカメラの主として電気的構成を示すブロック図である。 本発明の第１実施形態に係るカメラにおける露光間ズーム撮影時の動作を示すタイミングチャートである。 本発明の第１実施形態に係るカメラにおいて、撮影毎のズーム位置を示すグラフである。 本発明の第１実施形態に係るカメラの露光間ズームの動作を示すフローチャートである。 本発明の第１実施形態に係るカメラにおける画像処理を示す図である。 本発明の第２実施形態に係るカメラにおける露光間ズーム撮影時の動作を示すタイミングチャートである。 本発明の第２実施形態に係るカメラにおいて、撮影毎のズーム位置を示すグラフである。 本発明の第２実施形態に係るカメラの露光間ズームの動作を示すフローチャートである。 本発明の第１および第２実施形態の第１の変形例に係るカメラにおける画像処理を示す図である。 本発明の第１および第２実施形態の第１の変形例に係るカメラの露光間ズームの動作を示すフローチャートである。 本発明の第１および第２の実施形態の第１の変形例の別の例に係るカメラにおける画像処理を示す図である。 本発明の第１および第２の実施形態の第２の変形例に係るカメラにおいて、ズーム倍率等の変化を示すグラフおよび図表である。 本発明の第１および第２実施形態の第２の変形例に係るカメラにおける露光間ズーム撮影時の動作を示すタイミングチャートである。 本発明の第１および第２実施形態の第２の変形例に係るカメラにおいて、撮影毎のズーム位置を示すグラフである。
　以下、本発明の好ましい実施形態としてデジタルカメラ（以下、カメラと称す）に適用した例について説明する。このカメラは、露光期間中にズーム動作を行う露光間ズーム撮影の機能を有している。また、このカメラは、被写体像を画像データに変換する撮像部を有する。この撮像部によって取得した画像データに基づいて、被写体像を表示部にライブビュー表示する。撮影者はライブビュー表示を観察することにより、構図やシャッタチャンスを決定する。レリーズ操作時には、画像データが記録媒体に記録される。記録媒体に記録された画像データは、再生モードを選択すると、表示部に再生表示することができる。
　また、露光間ズーム撮影モードが設定されると、ズーム駆動と撮影動作を同期させて、複数回の撮影を行って、複数の画像データを取得する。この場合、各撮影の終了時は、シャッタや画像データの読み出しに連動してズーム駆動を停止させる。但し、ズーム駆動の再開時に、駆動速度が一定速となるには時間を要する。そこで、本実施形態においては、各撮影の終了時に、ズーム駆動停止時にズーム位置を少し戻すようにしている。ズーム速度が一定速度のズーム範囲で取得した画像データを比較明合成処理し、この比較明合成処理で生成した画像データに基づいて、露光間ズーム撮影時の経過画像を表示する。
　図１は、本発明の第１実施形態に係るカメラの主として電気的構成を示すブロック図である。本実施形態におけるカメラは、撮像部１、画像処理部１０、システム制御部２０、およびバス３１とこれに接続された各部を有する。なお、本実施形態においては、撮影レンズは、カメラ本体と一体に構成されている例を示しているが、カメラ本体と撮影レンズが別体となるカメラシステムの交換レンズとしても構わない。
　撮像部１は、レンズ２、ズームレンズ３、メカシャッタ４、イメージセンサ５を有する。レンズ２は、ズームレンズ３と協働して、イメージセンサ５に被写体の光学像を結像する光学系である。このレンズ２内には、露出量を調節するための絞り値を決定する絞りを備える。ズームレンズ３は、光学系の焦点距離を変化させ、画角を変化させる。ズームレンズ３は、撮影レンズのズーム倍率を可変させるズームレンズ駆動部も有する。
　メカニカルシャッタ４は、開閉動作によりイメージセンサ４への露出や遮光を行い、シャッタ速度を制御する。イメージセンサ５は、ＣＭＯＳイメージセンサやＣＣＤイメージセンサ等の撮像素子を含み、レンズ２により結像された被写体の光学像を画素毎に電気信号に変換し、画像信号を、画像処理部１０およびバス３１に出力する。バス３１は、各ブロック間で信号の送受信を行うための信号線である。
　画像処理部１０は、イメージセンサ５から出力された画像信号に画像処理を施す。画像処理部１０は、比較明合成部１１、現像処理部１２、およびゲイン印加部１３を有し、その他、表示用の画像処理や記録用の画像処理等も行うための処理部も有する。また、画像処理部１０は、イメージセンサ５からの画像データの輝度データを検出し、システム制御部２０に出力する。
　比較明合成部１１は、イメージセンサ５から連続的に撮影され、各撮影毎に読み出された画像データと、内部メモリ３３に保存された画像データを用い、対応する画素毎に出力を比較する。この比較の結果に基づいて、画素毎に明るい方の画素データを選択して合成する比較明合成処理を行う。この処理を各撮影毎に繰り返し行い、前回の撮影時に比較明合成処理を行って生成された比較明合成画像データと、各撮影毎に読み出された画像データを用いて、新たに比較明合成画像データを生成する。
　すなわち、比較明合成部１１における比較明合成処理では、最初にイメージセンサ５から読み出された画像信号を基に生成された画像データを構成する画素データを比較明合成画像データとして内部メモリ３３に記憶する。次に、イメージセンサ５から読み出された画像信号を基に生成された画像データを構成する画素データと、内部メモリ３３に記憶されている比較明合成画像データを構成する複数の画素データについて、それぞれ対応する画素データを比較し、いずれか大きい方、すなわち明るい方の画素データを検出し、この明るい方の画素データを用いて、比較明合成画像データを再構成する。この処理をイメージセンサ５から画像信号が読み出されるたびに繰り返し行う。比較明合成処理を行うことにより、光跡の画像を得ることができる。
　比較明合成部１１は、それぞれ取得した複数の画像データから合成画像を生成する画像合成処理部として機能する。また、比較明合成部１１は、さらに、ズームレンズ駆動部の駆動と同期して連続撮影した画像データに対して、比較明合成処理を実施して合成画像データを生成する画像処理部として機能する。なお、画像合成処理としては、比較明合成処理に限らず、加算平均合成処理、単純加算処理のいずれか１つであってもよい。
　現像処理部１２は、比較明合成部１１や画像処理部１０内において生成されたＲＡＷ画像データに対して、デモザイキング、ホワイトバランス調整、ガンマ補正、画像圧縮などの現像処理を行う。
　ゲイン印加部１３は、画像データに対して、所定のゲインを乗算等の印加処理を行う。例えば、画像データにゲインとして０．５を乗算することにより、画像データの輝度出力が半分の値にして暗い画像となる。またゲインとして２を乗算することにより、画像データの輝度出力が倍の値になって明るい画像となる。
　内部メモリ３３は、カメラ動作に必要な各種設定情報や、画像処理時に途中経過の画像を一時的に記憶する。内部メモリ３３は、揮発性のメモリと、不揮発性のメモリによって構成されている。ＤＲＡＭ等の揮発性メモリは、途中経過の画像を一時的に記憶することに使用する。また、後述のシステム制御部２０が動作するためのプログラムや、各種設定情報等は、フラッシュメモリ等の不揮発性のメモリを使用する。
　外部メモリ３６は、カメラ本体に装填自在、または内部に固定された不揮発性の記憶媒体であり、例えば、ＳＤカードやＣＦカード等である。この外部メモリ３６は、現像処理部１６で現像処理された画像データを記録し、また再生時には、記録された画像データが読み出され、カメラの外部に出力可能である。
　表示部３７は、ＴＦＴ（Thin Film Transistor）液晶や有機ＥＬなどの背面表示部やＥＶＦ（電子ビューファインダ）によって構成され、現像処理部１２によって現像された画像（ライブビュー画像を含む）を表示する。また、表示部３７は、露光間ズーム撮影時には、比較明合成部１１によって合成された比較明合成画像データに基づく、経過画像の表示も行う。表示部３７に対する表示制御は、後述するシステム制御部２０が行う。
　入力ＩＦ３８は、レリーズ釦等の操作部材や、背面表示部等におけるタッチ操作を入力するためのタッチパネル等を有し、ユーザ操作に基づいて各種のモード設定やレリーズ等撮影動作の指示を行う。
　システム制御部２０は、ＣＰＵ（Central Processing Unit）を有し、内部メモリ３３内に記憶されたプログラムに従ってカメラの全体制御を行う。
　また、システム制御部２０は、ズームレンズ３内に設けられたズームレンズ駆動を駆動制御するズーム制御部として機能する（図１のシステム制御部２０内のズームレンズ制御部２０ｂ参照）。システム制御部２０は、ズームレンズ駆動部による駆動時に、被写体像を連続撮影して、それぞれ複数の画像データを取得する撮影制御部としても機能する（図１のシステム制御部２０内の撮影制御部２０ａ参照）。撮影制御部２０ａおよびズーム制御部２０ｂは、ＣＰＵがソフトウエアによって、カメラ内の各部を制御することにより実行する。しかし、ソフトウエア的な処理以外にも、その機能の一部または全部をハードウエアによって処理するようにしてもよい。後述する動作制御部２０ｃも同様である。
　システム制御部２０は、ズームレンズ駆動部が、撮影レンズのズーム倍率を所定の方向へ変化させることに同期させて、連続撮影を行い（例えば、図２の時刻ｔ１２～ｔ１３、ｔ１６～ｔ１７参照）、ズームレンズ駆動部が、連続撮影でのそれぞれの撮影の間でズーム駆動を、所定の方向とは逆方向に動作させて、露光中のズーム位置の一部を重ねて撮影を行うように（例えば、図２の時刻ｔ１３～ｔ１４、ｔ１７～ｔ１８参照）、ズーム制御部と撮影制御部を同時に制御させる動作制御部として機能する（図１のシステム制御部２０内の動作制御部２０ｃ参照）。
　また、システム制御部２０は、ズームレンズ駆動部が、撮影レンズを第１の方向へ第１のズーム速度で移動させることに同期させて、第１の連続撮影を行い（例えば、図６の時刻ｔ１２～ｔ１３、ｔ１４～ｔ１５、ｔ１６～ｔ１７参照）、ズームレンズ駆動部が、第１の連続撮影の終了後に、第１の方向とは逆方向となる第２の方向に、第１のズーム速度と同じ大きさのズーム速度で移動させることに同期させて、第２の連続撮影を行うように（例えば、図６の時刻ｔ２０～ｔ２１、ｔ２２～ｔ２３参照）、ズーム制御部と撮影制御部を同時に制御させる動作制御部として機能する。この動作制御部は、第１の連続撮影を行う際と、第２の連続撮影を行う際の上記レンズのズーム倍率とは異なるズーム範囲で制御する（例えば、図７参照）。
　システム制御部２０は、画像データの輝度データに基づいて、所定の輝度以上の光が入射されたか否かを判定する、輝度判定部として機能する（例えば、図４のＳ１９参照）。また、システム制御部２０は、輝度判定部が所定の輝度以上の光が入射されたと判定した場合には、画像データを破棄して、連続撮影を行う撮影制御部として機能する（例えば、図４のＳ１９Ｙｅｓ→Ｓ２３）。システム制御部２０は、ズームレンズ駆動部に、画像データを破棄されたズーム倍率位置へ再度移動させた後に（例えば、図４のＳ２３）、撮影制御部に再度連続撮影させる動作制御部（図１のシステム制御部２０内の動作制御部２０ｃ参照）として機能する。
　システム制御部２０は、ズームレンズ駆動部によるズーム駆動で連続撮影する際の撮影条件について、ズーム制御部が制御するズーム拡大率の変化量に応じて、それぞれの画像を撮影する際の感度や露光時間の設定を可変させる撮影制御部（図１のシステム制御部２０内の動作制御部２０ｃ参照）として機能する（例えば、図１３参照）。
　システム制御部２０は、ズームレンズ駆動部によるズーム駆動で連続撮影する際、連続撮影の最初、途中、および最後の少なくとも１回、ズーム駆動を停止させた状態で撮影を行う撮影制御部として機能する（図１のシステム制御部２０内の撮影制御部２０ａ参照。例えば、図９又は図１１の動作停止６１ａ、６１ｂ、６１Ｎ参照）。また、システム制御部２０は、表示部３７に対する表示制御を行う表示制御部として機能する（例えば、図４のＳ１７の比較明合成・表示処理、図８のＳ３７等参照）。
　次に、図２および図３を用いて、本実施形態における露光間ズーム撮影の動作について説明する。図２は、露光間ズーム撮影モードが設定された際の、ズーム駆動、シャッタ動作、およびイメージセンサ５の読出し動作を示すタイミングチャートである。
　図２の最上段には、撮影動作を示す。時刻ｔ１１において、撮影者が入力ＩＦ３８の１つであるレリーズ釦を操作することにより、露光間ズーム撮影が開始される。なお、露光間ズーム撮影時には、シャッタの開閉動作に応じて、複数回の撮影が繰り返されるが、図２の最上段では、この連続撮影が行われている間を「撮影中」と表示している。
　時刻ｔ１１で露光間ズーム撮影が開始されると、まず、望遠側にズーム駆動を行う。ここでは、ズームレンズ３の駆動部が、システム制御部２０からの指示に従って、焦点距離が望遠側になるように駆動する。この時点では、メカシャッタ４は閉じた状態であることから、イメージセンサ５上には被写体像は形成されず、従って露光もされない。
　時刻ｔ１２になると、ズームレンズ３の駆動速度が一定速度となり、メカシャッタ４を開き、イメージセンサ５上に被写体像が形成され、イメージセンサ５の各画素は光電変換を行う。
　時刻ｔ１３になると、メカシャッタ４を閉じ、また広角側にズーム駆動を行う。時刻ｔ１２から時刻ｔ１３までの時間は、複数回、連続撮影を行う内の１回目の露光時間（シャッタ速度）となる。この露光時間は、被写体輝度に基づいて算出された適正露光時間とする。これ以外にも撮影者が手動で設定するようにしてもよく、また設計値として決めておいてもよい。
　また、時刻ｔ１３において、広角側にズーム駆動しているのは、時刻ｔ１５において、望遠側にズーム駆動を再開する際に、イメージセンサ５による露光開始時に、ズーム速度が一定速度となるようにするためである。従って、広角側へのズーム駆動量は、ズーム位置を戻した位置から望遠側にズーム駆動を再開した際に、前回の露光終了時のズーム範囲に達したときに一定速度となる程度であればよい。
　時刻ｔ１４になると、ズーム駆動を停止し、またイメージセンサ５から画像データの読出しを行う。ここでは、時刻ｔ１２から時刻ｔ１３の間にイメージセンサ５が露光し、この間に生成した画像データが読み出される。ズームレンズ３の焦点距離を変化させながら撮影していることから、画角が変化し、明るい部分が流れるような軌跡の画像が得られる。
　時刻ｔ１５になると、時刻ｔ１１と同様に、メカシャッタ４を閉じたままで、望遠側にズーム駆動を開始する。なお、図２において、時刻ｔ１３において広角側にズーム駆動を開始し、時刻ｔ１４においてズーム駆動を停止すると同時にイメージセンサ５から画像データの読出しを開始し、また時刻ｔ１５において望遠側にズーム駆動を再開すると同時にイメージセンサ５からの画像データの読出しを終了している。しかし、このタイミングに限らなくてもよく、時刻ｔ１３から時刻１６までの間に、ズームレンズ４を一旦広角側に移動させ、再度望遠側に向けて一定速度に達し、またイメージセンサ５から画像データの読出しが終了すればよい。
　時刻ｔ１６になると、望遠側へのズーム駆動の駆動速度が一定速度に達するので、時刻ｔ１２と同様に、メカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換を行う。以後、時刻ｔ１３、ｔ１４、・・・と、前述の動作を繰り返し行う。撮影者が再度レリーズ釦を押す（またはレリーズ釦から手を離す）等によって、露光間ズーム撮影の終了を指示すると、撮影を終了する。
　このように、本実施形態においては、望遠側にズーム駆動を開始し（時刻ｔ１１）、駆動速度が一定速度に達すると（時刻ｔ１２）、メカシャッタ４を開き、イメージセンサ５による露光動作を行う。そして、所定の時間が経過すると（時刻ｔ１３）、メカシャッタ４を閉じ、イメージセンサ５から画像データを読み出す（時刻ｔ１４～ｔ１５）。また広角側にズーム駆動した後（時刻ｔ１３～ｔ１４）、再度、望遠側にズーム駆動する（時刻ｔ１５～ｔ１６）。この撮影動作（露光動作）を繰り返し、複数の画像データを取得することができる。これらの動作は、動作制御部２０ｃの指示に従って撮影制御部２０ａとズーム制御部２０ｂが、カメラ内の各部を制御することによって実行する。
　図３は、上述の連続撮影を繰り返した際のズーム範囲を示す。図３（ａ）は連続撮影の内の１枚目の撮影時のズーム範囲を示し、図３（ｂ）は次の２枚目のズーム範囲を示し、図３（ｃ）は３枚目のズーム範囲を示す。
　すなわち、１枚目の撮影にあたって、時刻Ｔ０～Ｔ１において焦点距離ＦＬ０～ＦＬ１のズーム範囲で撮影を行う。時刻Ｔ０は図２の時刻ｔ１２に相当し、時刻Ｔ１は時刻ｔ１３に相当する。また、２枚目の撮影にあたって、時刻Ｔ３～Ｔ４において焦点距離ＦＬ１～ＦＬ２のズーム範囲で露光間ズーム撮影を行う。但し、２枚目の撮影にあたっては、時刻Ｔ２（図２の時刻ｔ１６に相当する）から露光を開始しているので、実際には焦点距離ＦＬ１よりも広角側から露光間ズーム撮影を行っている。
　同様に、図３（ｃ）に示すように、時刻Ｔ５～Ｔ７において焦点距離ＦＬ２～ＦＬ３のズーム範囲（前述したように、実際にはＦＬ２よりも広角側から）で露光間ズーム撮影を行っている。
　図３（ａ）～（ｃ）に示すように、撮像部１によって、露光中にズーム範囲を変えながら複数回の撮影を行い、複数枚の画像データを取得すると、比較明合成部１１は、それぞれ複数枚の画像データを比較明合成処理することによって、１枚の画像データを生成する。図３（ｄ）は、比較明合成部１１が比較明合成処理を行うことにより生成された合成画像データに対して、全ての露光中でのズーム範囲を示す。複数枚の画像データを生成することにより、焦点距離ＦＬ０～ＦＬ２に対応する露光間ズーム撮影の画像を生成することができる。
　本実施形態においては、ズーム駆動の駆動速度が一定速度になってからメカシャッタ４を開き露光していることから、画像にムラがない。また、１枚目の露光が終わると、一旦、広角側に戻した後に、望遠側に駆動を再開するようにしているので、露光抜けが発生しない。
　次に、図４に示すフローチャートを用いて、本実施形態におけるカメラの処理の流れについて説明する。このフローチャートは、内部メモリ３３に記憶されたプログラムに従って、システム制御部２０が各部を制御することにより実行する（後述する図８および図１０も同様）。
　このフローは、露光間ズーム撮影モードが設定されている状態で、レリーズ釦が操作されると、スタートする。まず、ズーム駆動を開始する（Ｓ１）。このステップＳ１のタイミングは、図２の時刻ｔ１１に相当する。このステップでは、ズームレンズ駆動部が、ズームレンズ３を望遠側に向けて焦点距離を変化させるように一定速度で駆動を開始する。
　ズーム駆動を開始すると、次に、１枚目の露光を開始する（Ｓ３）。このステップＳ３のタイミングは、図２の時刻ｔ１２に相当する。このステップでは、メカシャッタ４を開きイメージセンサ５上に被写体像を形成し、露光動作を開始する。
　１枚目の露光を開始すると、次に、露光時間が経過したか否かを判定する（Ｓ５）。この露光時間は、図２の時刻ｔ１２～ｔ１３の間の時間に相当する。露光時間としては、適正露光となる時間とするが、これ以外にも撮影者が手動で設定する等、他の設定方法によってもよい。
　１枚目の露光を開始し、所定の時間が経過すると、１枚目の露光を終了し、画像データの読出しを行い、ズーム動作を停止し、ズーム位置を戻す（Ｓ７）。このステップＳ７のタイミングは、図２の時刻ｔ１３～ｔ１５に相当する。このステップでは、メカシャッタ４を閉じ、イメージセンサ５から画像データを読み出し、ズームレンズ３のズーム駆動を停止する。
　また、このステップＳ７では、ズームレンズ３の焦点距離を望遠側から広角側に向けて変化させるようにズーム駆動を行う。この場合の戻し量は、ズームレンズ３を駆動するズームモータの駆動時の安定度によって異なる。前述したように、望遠側に駆動を開始した際に、前回のズーム範囲の端部に達した時点で一定速度となる程度の戻し量とすればよい。例えば、戻し駆動量は１枚目のズーム駆動量の半分の位置とすれば、通常は、前回のズーム範囲の端部で一定速度にすることができる。なお、ステップＳ７における各処理の順番は適宜、並行して行ってもよく、また、順番を変えてもよく、図２の時刻ｔ１３～ｔ１５における処理手順には限らない。
　次に、ズーム位置を記録し、ズーム駆動を開始する（Ｓ９）。このステップＳ９のタイミングは、図２の時刻ｔ１５に相当する。ステップＳ７において、ズーム位置を戻してあり、この位置から望遠側に焦点距離が変化するようにズームレンズ３の駆動を行う。望遠側へのズーム駆動を開始する前に、一旦停止することにより（図２の時刻ｔ１４～ｔ１５）、ズーム駆動を安定して加速することができる。このステップで記録したズーム位置は、後述するステップＳ２３において使用する。
　ズーム駆動を開始し、ズーム駆動の駆動速度が一定となるズーム位置に達すると、次に、Ｎ枚目の露光を開始する（Ｓ１１）。このステップＳ１１のタイミングは、図２の時刻ｔ１６のタイミングに相当する。ここでは、ステップＳ３と同様に、メカシャッタ４を開きイメージセンサ５上に被写体像を形成し、露光動作を開始する。
　Ｎ枚目の露光を開始すると、次に、露光時間が経過したか否かを判定する（Ｓ１３）。ここでは、ステップＳ５と同様に、露光時間が経過するのを待つ。このステップＳ１３の判定の結果、露光時間が経過すると、ステップＳ７と同様に、Ｎ枚目の露光を終了し、ズーム動作を停止し、Ｎ枚目の画像を読み出し、ズーム位置を戻す（Ｓ１５）。
　続いて、比較明合成処理と表示を行う（Ｓ１７）。今、Ｎ＝２、すなわち、２枚目の画像データを読み出しとすると、ステップＳ７で読み出した１枚目の画像データと、ステップＳ１５で読み出した２枚目の画像データを用いて、比較明合成処理部１１が比較明合成処理を行う。焦点距離が変化しているので（ズーム倍率が変化しているので）、比較明合成処理を行うことにより、明るい部分は軌跡となる。また、ズーム駆動が一定速度となっているズーム範囲で露光を行っているので、画像の濃度のムラが生じない。さらに、ズーム位置を戻していることから、１枚目と２枚目の露光の継ぎ目がない画像となる。ここで、生成された比較明合成画像データは、内部メモリ３３に一時記憶する。
　Ｎ＝３以上の場合には、前回生成して、一時記憶した比較明合成画像データと、今回ステップＳ１５で読み出した画像データを用いて比較明合成処理を行う。
　また、ステップＳ１７では、比較明合成処理によって生成した画像データに基づいて、露光間ズーム撮影の経過画像を表示部３７に表示する。撮影者は、この経過画像を観察することにより、意図通りに撮影できているか否かを確認することができ、また露光間ズーム撮影の終了のタイミングを決めることができる。
　比較明合成処理と表示を行うと、次に、測光ポイント設定値以上のレベル増加か否かを判定する（Ｓ１９）。ここでは、１枚目の画像と比較し、測光ポイントにおける輝度が設定値以上の増加があったか否かを判定する。露光間ズーム撮影に、例えば、自動車のヘッドライト等、想定外の光が入ると、撮影者の意図通りの露光間ズーム撮影の画像とはならない。そこで、このステップでは、このような異常光があったか否かを判定する。なお、測光ポイントは、撮影者が全画面の中から任意に設定可能としておくと便利である。
　ステップＳ１９における判定の結果、設定値以上の増加があった場合には、記録されたズーム位置に戻り、Ｎ枚目の撮影画像を破棄する（Ｓ２３）。この場合は、異常光が入射していることから、ステップＳ１５において読み出した画像データと、この画像データを用いて生成した比較明合成の画像データを破棄する。比較明合成の画像データとしては、Ｎ－１枚目の露光後に生成した画像データを一時記憶しておく。そして、Ｎ枚目の露光を再度行うために、ステップＳ９で記録されたズーム位置に戻る。記録されたズーム位置に戻ると、ステップＳ１１に進み、Ｎ枚目の露光をやり直す。
　ステップＳ１９における判定の結果、設定値以上のレベル増加がない場合には、撮影完了のズーム位置にあるか否かを判定する（Ｓ２１）。本実施形態においては、撮影者が露光間ズーム撮影を終了する場合には、レリーズ釦を再度、押し込む（または、レリーズ釦から手を離す）ので、この操作がなされた場合には、この操作のなされたズーム範囲の端に位置しているか否かを判定する。また、望遠側の焦点距離の端部に位置しているか否かも同様に判定する。
　ステップＳ２１における判定の結果、撮影完了のズーム位置に達していない場合には、撮影枚数のＮに１を加算し、ステップＳ９に戻り、次の露光を行う。一方、判定の結果、撮影完了のズーム位置に達していた場合には、この露光間ズーム撮影のフローを終了する。
　このように、露光間ズーム撮影のフローでは、露光と露光の間で、一旦、ズームレンズのズーム位置を戻し、一定速度となるズーム範囲で画像データを取得している（Ｓ７、Ｓ１５参照）。このため、比較明合成処理した際に、画像の濃度にムラが生ずるや、露光と露光の間で露光抜けが生ずることを防止できる。
　また、異常光が入射した場合には、その異常光が入射した撮影を破棄し、その撮影したズーム範囲について、再度、撮影をやり直すようにしている（Ｓ１９Ｙｅｓ、Ｓ２３、Ｓ１１）。このため、露光間ズーム撮影時の全ての撮影をやり直す必要がない。
　次に、図５を用いて、画像処理の流れを説明する。レリーズ動作で撮影が開始されると（図２の時刻ｔ１１）、ズーム動作５１ａが行われ、このズーム動作がなされた際に露光された明画像＿１の画像データに対して画像処理５４ａが行われる。画像処理５４ａが施された画像データに基づいて表示画像５５ａが表示部３６に表示され、また内部メモリ３３に画像１が記憶される。
　ズーム動作５１ａが終わると、ワイド動作５２ａが行われる。これは、図２の時刻ｔ１３～ｔ１４における広角側へのズーム駆動に相当し、また図２のステップＳ７におけるズーム位置を戻す処理に相当する。
　ワイド動作５２ａが終わると、ズーム動作５１ｂを行う。このとき取得した明画像＿２に基づく画像データと、明画像＿１に基づく画像データを用いて、比較明合成処理５３ａを行い、生成された画像データに対して画像処理５４ｂを施す。この画像処理５４ｂが施された画像データに基づいて表示画像５５ｂが表示部３６に表示され、また内部メモリ３３に合成画像２が記憶される。
　以後、ズーム動作、ワイド動作、比較明合成処理、画像処理、表示画像の表示、合成画像の記憶が順次なされる。そして、撮影終了動作がなされると、ズーム動作５１Ｎがなされた際の明画像＿Ｎに基づく画像データを用いて、比較明合成処理５３Ｎを行い、生成された画像データに対して画像処理５４Ｎを施す。この画像処理５４ｂが施された画像データに基づいて表示画像５５Ｎが最終画像として表示部３６に表示され、また外部メモリ３６に最終記録画像２が記録される。
　このように、本実施形態においては、各ズーム動作時の明画像に基づく画像データを取得する毎に、比較明合成を行い、経過画像（合成画像）として表示部３６に表示される。このため、撮影者は露光間ズーム撮影時の経過画像を確認することができる。
　次に、本発明の第２実施形態について、図６ないし図８を用いて説明する。第１実施形態においては、望遠側に所定時間の間、ズーム駆動を行い撮影すると、一旦、広角側にズーム位置を戻してから、望遠側にズーム駆動を行っていた。これに対して、第２実施形態においては、望遠側に所定時間の間、ズーム駆動を行いながら撮影を行うと、撮影途中に広角側にズーム位置を戻すことなく、望遠側に向けて、複数回のズーム駆動を行い撮影することによって、画像データを取得する。そして、望遠側の最終位置に到達すると、広角側にズーム駆動を行い、複数回の撮影の隙間に相当するズーム範囲の画像データを取得するようにしている。
　本実施形態における電気的構成は図１におけるブロック図と同様であることから説明を省略する。
　図６に示すタイミングチャートを用いて、本実施形態における動作について説明する。図６の最上段に撮影動作を示す。時刻ｔ３１において、撮影者がレリーズ釦を操作することにより、露光間ズーム撮影が開始される。なお、露光間ズーム撮影時には、第１実施形態と同様に、シャッタの開閉動作に応じて、複数回の撮影が繰り返され、図６の最上段では、この連続撮影が行われている間を「撮影中」と表示している。
　時刻ｔ３１で露光間ズーム撮影が開始されると、まず、望遠側にズーム駆動を行う。ここでは、ズームレンズ３の駆動部が、システム制御部２０からの指示に従って、焦点距離が望遠側になるように駆動する。この時点では、メカシャッタ４は閉じた状態であることから、イメージセンサ５上には被写体像は形成されず、従って露光もされない。
　時刻ｔ３２になると、ズームレンズ３の駆動速度が一定速度となり、メカシャッタ４を開き、イメージセンサ５上に被写体像が形成され、イメージセンサ５の各画素は光電変換を行う。
　時刻ｔ３３になると、メカシャッタ４を閉じる。但し、ズーム駆動を停止しない。時刻ｔ３２から時刻ｔ３３までの時間は、複数回、連続撮影を行う内の１回あたりの露光時間（シャッタ速度）となる。第１実施形態と同様に、露光時間は被写体輝度に基づいて算出された適正露光時間とする。これ以外にも予め決めておいてもよく、また設計値として決めておいてもよく、また撮影者が設定できるようにしてもよい。
　また、時刻ｔ３３になると、イメージセンサ５から画像データの読出しを行う。ここでは、時刻ｔ３２から時刻ｔ３３の間にイメージセンサ５が露光し、この間に生成した画像データが読み出される。ズームレンズ３の焦点距離が変化しながら撮影されていることから、流れるような軌跡の画像が得られる。
　時刻ｔ３４になると、メカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換を行う。そして、時刻ｔ３５になると、ズーム駆動を継続したままで、メカシャッタ４を閉じ、イメージセンサ５から画像データを読み出す。同様に、時刻ｔ３６になると、メカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換を行う。そして、時刻ｔ３７になると、ズーム駆動を停止し、メカシャッタ４を閉じ、イメージセンサ５から画像データを読み出す。
　時刻ｔ３８になると、広角側にズーム駆動を開始し、またメカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換を行う。時刻ｔ３９になると、広角側へのズーム駆動を続行したままで、メカシャッタ４を閉じ、イメージセンサ５から画像データを読み出す。時刻ｔ３６～ｔ３７を時間ｔ１とし、時刻ｔ３８～ｔ４０は時間ｔ２とすると、ｔ１＞ｔ２となるように設定する。時刻ｔ３９において読み出された画像データは使用せずに破棄してもよいので、イメージセンサ５にリセット動作を行わせるだけでもよい。
　時刻ｔ４０になると、広角側にズーム駆動を続行したままで、メカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換を行う。時刻ｔ４１になると、広角側へのズーム駆動を続行したままで、メカシャッタ４を閉じ、イメージセンサ５から画像データを読み出す。以後、最初の位置に戻るまで、広角側へのズーム駆動を続行したままでメカシャッタ４の開閉とイメージセンサ５の光電変換と画像データの読出しを繰り返す。
　次に、図７を用いて、連続撮影を繰り返した際のズーム範囲について説明する。図７（ａ）は連続撮影の内の１枚目の撮影時のズーム範囲を示し、図７（ｂ）は次の２枚目のズーム範囲を示し、図７（ｃ）は３枚目のズーム範囲を示し、図７（ｄ）は４枚目のズーム範囲を示し、図７（ｅ）は５枚目のズーム範囲を示し、図７（ｆ）は６枚目のズーム範囲を示す。
　すなわち、図７（ａ）に示す１枚目の撮影にあたって、時刻Ｔ１０～Ｔ１１において焦点距離ＦＬ０～ＦＬ１ａのズーム範囲で撮影を行う。時刻Ｔ１０は図６の時刻ｔ３２に相当し、時刻Ｔ１１は時刻ｔ３３に相当する。また、図７（ｂ）に示す２枚目の撮影にあたって、時刻Ｔ１２～Ｔ１３において焦点距離ＦＬ１ｂ～ＦＬ２ａのズーム範囲で露光間ズーム撮影を行う。時刻Ｔ１２は図６の時刻ｔ３４に相当し、時刻Ｔ１３は時刻ｔ３５に相当する。図７（ａ）（ｂ）から分かるように、焦点距離ＦＬ１ａ～ＦＬ１ｂのズーム範囲においては、撮影を行っていない。この露光抜けのズーム範囲については、後述する６枚目（図７（ｆ）参照）の撮影において補う。
　図７（ｃ）に示す３枚目の撮影にあたって、時刻Ｔ１４～Ｔ１５において、焦点距離ＦＬ２ｂ～ＦＬ３ａのズーム範囲で露光間ズーム撮影を行う。時刻Ｔ１４は図６の時刻ｔ３６に相当し、時刻Ｔ１５は時刻ｔ３７に相当する。図７（ｂ）（ｃ）から分かるように、焦点距離ＦＬ２ａ～ＦＬ２ｂのズーム範囲においては、撮影を行っていない。この露光抜けのズーム範囲については、後述する５枚目（図７（ｅ）参照）の撮影において補う。
　図７（ｄ）に示す４枚目の撮影にあたって、時刻Ｔ１６～Ｔ１７において、焦点距離ＦＬ２ｃ～ＦＬ３ｂのズーム範囲で露光間ズーム撮影を行う。時刻Ｔ１６は図６の時刻ｔ３８に相当し、時刻Ｔ１７は時刻ｔ３９に相当する。ここで取得した画像データは前述したように使用しない。
　図７（ｅ）に示す５枚目の撮影にあたって、時刻Ｔ１８～Ｔ１９において、焦点距離ＦＬ２ｂ～ＦＬ２ａを少なくとも含むズーム範囲で露光間ズーム撮影を行う。時刻Ｔ１８は図６の時刻ｔ４０に相当し、時刻Ｔ１９は時刻ｔ４１に相当する。
　図７（ｆ）に示す６枚目の撮影にあたって、時刻Ｔ２０～Ｔ２１において、焦点距離ＦＬ１ｂ～ＦＬ１ａを少なくとも含むズーム範囲で露光間ズーム撮影を行う。時刻Ｔ２０は図６の時刻ｔ４２に相当し、時刻Ｔ２１は時刻ｔ４３に相当する。
　図７（ａ）～（ｆ）に示すように、複数回の撮影を行い、複数枚の画像データを取得すると、比較明合成処理により、１枚の画像データを生成する。図７（ｇ）は、比較明合成処理により生成された合成画像データのズーム範囲を示す。複数枚の画像データを生成することにより、焦点距離ＦＬ０～ＦＬ２に対応する露光間ズーム撮影の画像を生成することができる。
　すなわち、焦点距離ＦＬ０～ＦＬ１ａは１回目の撮影で取得した画像データ、焦点距離ＦＬ１ａ～ＦＬ１ｂは６回目の撮影で取得した画像データ、焦点距離ＦＬ１ｂ～ＦＬ２ａは２回目の撮影で取得した画像データ、焦点距離ＦＬ２ａ～ＦＬ２ｂは５回目の撮影で取得した画像データ、焦点距離ＦＬ２ｂ～ＦＬ３は３回目の撮影で取得した画像データを用いることにより、全ズーム範囲についての画像データを取得することができる。
　本実施形態においては、第１実施形態のように、ズーム駆動の際に小刻みに反転することがなく、一方向にズーム駆動した連続撮影を行った後に反転し、反転した方向にズーム駆動しながら、一方向で連続撮影した際に抜けているズーム範囲を含むように撮影し、最初のズーム位置に戻ると撮影を終了している。このため、露光間ズームに要する時間を短くすることができる。また、一方向にズーム駆動した際の露光抜けとなったズーム範囲については、逆方向へのズーム駆動する際に画像データを取得するので、露光抜けすることがない。
　次に、図８に示すフローチャートを用いて、本実施形態におけるカメラの処理の流れについて説明する。このフローは、露光間ズーム撮影モードが設定されている状態で、レリーズ釦が操作されると、スタートする。
　スタートすると、まず、ステップＳ１と同様に、ズーム駆動を開始する（Ｓ３１）。このステップＳ３１のタイミングは、図６の時刻ｔ３１に相当する。このステップでは、ズームレンズ３を望遠側に向けて焦点距離を変化させるように駆動を開始する。
　ズーム駆動を開始すると、次に、Ｎ枚目の露光を開始する（Ｓ３３）。このステップＳ３のタイミングは、図６の時刻ｔ３２等に相当する。このステップでは、メカシャッタ４を開きイメージセンサ５上に被写体像を形成し、露光動作を開始する。なお、図４に示したフローチャートでは、１枚目とＮ枚目の撮影を分けて記載した。しかし、１回目の撮影時には比較明合成処理を行わない等の点を除けば実質的に同じであることから、図８に示すフローでは、１枚目の撮影と区別せずに記載してある。
　Ｎ枚目の露光を開始すると、次に、露光時間が経過したか否かを判定する（Ｓ３５）。この露光時間は、図６の時刻ｔ３２～ｔ３３、ｔ３４～ｔ３５、ｔ３６～ｔ３７等の間の時間に相当する。露光時間としては、適正露光となる時間とするが、これ以外にも撮影者が設定する等、他の設定方法によってもよい。この判定の結果、露光時間が経過していない場合には、経過するまで待つ。
　ステップＳ３５における判定の結果、露光時間が経過すると、Ｎ枚目の露光を終了し、Ｎ枚目の画像データを読み出し、明合成を行い、表示を行う（Ｓ３７）。
　続いて、撮影完了のズーム位置か否かを判定する（Ｓ３９）。撮影者が、表示部３７に表示される経過画像を観察し、露光間ズームを終了する場合には、再度、レリーズ釦を操作するので、この操作に基づいて判定する。また、ズームレンズ３の駆動端に達した場合にも撮影完了のズーム位置と判定する。この判定の結果、撮影完了のズーム位置にない場合には、ステップＳ３３に戻り、露光間ズーム撮影を続行する。
　ステップＳ３９における判定の結果、撮影完了のズーム位置の場合には、ワイド駆動を開始する（Ｓ４１）。このタイミングは、図６における時刻３７に相当し、ズーム駆動方向を反転し、すなわち、広角側に向けてズーム駆動を開始する。なお、ワイド駆動開始にあたって、ステップＳ３３～Ｓ３７における撮影枚数Ｎを内部メモリ３３に記憶しておく。
　ワイド駆動を開始すると、ｔ１＞ｔ２となるように画像読出しを行う（Ｓ４３）。ここでは、図６を用いて説明したように、露光時間ｔ１に比較し、短時間で露光（ｔ２）を行う。ここで取得した画像は破棄してもよい。
　続いて、Ｎ－１枚目を露光する（Ｓ４５）。ワイド駆動開始直後のこのタイミングは、図６における時刻ｔ４０に相当する。ここでは、メカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換させる。
　Ｎ－１枚目の露光を開始すると、次に、露光時間が経過したか否かを判定する（Ｓ４６）。この露光時間は、図６の時刻ｔ４０～ｔ４１、ｔ４２～ｔ４３等の間の時間に相当する。露光時間としては、適正露光となる時間とするが、これ以外にも撮影者が設定する等、他の設定方法によってもよい。この判定の結果、露光時間が経過していない場合には、経過するまで待つ。
　ステップＳ４６における判定の結果、露光時間が経過すると、Ｎ－１枚目の露光を終了し、Ｎ－１枚目の画像データを読み出し、比較明合成処理を行い、表示を行う（Ｓ４７）。
　続いて、Ｎ＝１か否かを判定する（Ｓ４９）。ステップＳ４７において画像データを読み出す毎に、撮影枚数を示すＮから１を減算しておき、このステップでＮ＝１か否かを判定する。この判定の結果、Ｎ＝１でない場合には、ステップＳ４５に戻り、広角側にズーム駆動しながら、露光間ズーム撮影を繰り返す。
　ステップＳ４９における判定の結果、Ｎ＝１の場合には、最初のズーム位置に戻ったことから、露光間ズーム撮影のフローを終了する。すなわち、望遠側にズーム駆動しながら撮影した枚数であり、広角側にズーム駆動する方向を反転した後、撮影する毎にＮから１を減算しているので、Ｎ＝１は最初のズーム位置に戻ったことを示している。
　このように、本発明の第２実施形態においては、望遠側にズーム駆動しながら、複数の露光を繰り返し（図６の時刻ｔ３２～ｔ３３、ｔ３４～ｔ３５、ｔ３５～ｔ３６、図８のＳ３１～Ｓ３９）、この間、取得した画像データに基づいて比較明合成処理を行い、表示部３７に経過画像を表示する（図８のＳ３７）。
　また、望遠側にズーム駆動している間に撮影完了のズーム位置となると、広角側にズーム駆動の方向を反転させ、ズーム駆動しながら、複数の露光を繰り返し（図６の時刻ｔ４０～ｔ４１、ｔ４２～ｔ４３、図８のＳ４１～Ｓ４９）、この間、取得した画像データに基づいて比較明合成処理を行い、表示部３７に経過画像を表示する（図８のＳ４７）。
　本実施形態においては、メカシャッタ４を閉じている際にも望遠側にズーム駆動しているため、露光と露光の間でメカシャッタ４を閉じていた時間が露光抜けとなる。しかし、広角側にズーム駆動方向を反転してズーム駆動する際に、露光抜けしたズーム範囲を少なくとも含むように、メカシャッタ４を開いて露光している。このため、最終的に得られる比較明合成画像データは露光抜けとはならない。なお、本実施形態においては、撮影完了のズーム位置までに３回の撮影を行っている例を示した。しかし、３回に限らずに、これより多くても少なくても構わない。
　次に、図９および図１０を用いて、本発明第１および第２実施形態の第１の変形例について説明する。第１および第２の実施形態においては、撮影が開始されると、ズーム駆動を開始し、また露光も開始していた。撮影完了のズーム位置になると、ズーム駆動を停止し、また露光も停止していた。しかし、この第１変形例においては、撮影が開始されるとズーム駆動を開始する前に停止した状態で撮影を行い、また撮影完了のズーム位置になると、ズーム駆動を停止した状態で撮影を行う。ズーム駆動を停止した状態で撮影を行うことにより、画像をはっきりさせることができる。
　図９は、本変形例の画像処理の流れを示す。レリーズ動作で撮影が開始されると、まず、ズーム駆動を行わず、停止した状態で、明画像＿１の画像データを取得する。その後、ズームレンズ３を広角側にズーム駆動して（ワイド動作６２ａ）、一旦、ズーム駆動開始位置を広角側に戻した後、望遠側にズーム駆動を行う（ズーム動作６３ａ）。そして、ズーム駆動した状態で明画像＿２の画像データを取得する。ここで取得した明画像＿２の画像データは、停止状態で取得した明画像＿１の画像データと画像処理６５ｂを行い、表示画像６６ｂを表示し、また合成画像２を記録する。以後、第１実施形態と同様に、撮影を繰り返す。
　撮影完了のズーム位置になると、ズーム駆動を停止し（動作停止６１Ｎ）、停止した状態で、明画像＿Ｎの画像データを取得する。この明画像＿Ｎと、この１枚前の画像データを用いて生成した比較明画像を用いて、比較明合成処理を行い、表示画像６６Ｎを表示すると共に、最終記録画像を記録する。
　次に、図１０に示すフローチャートを用いて、本変形例の動作について説明する。図１０のフローに入ると、まず、１枚目の露光を開始し、１枚目ズーム位置を記録する（Ｓ５１）。ここでは、ズームレンズのズーム駆動を開始することから、停止した状態で、メカシャッタ４を開き、イメージセンサ５上に被写体像を露光させ、光電変換させる。また、このときのズームレンズのズームを検出し、内部メモリ３３に記録する。
　次に、露光時間が経過したか否かを判定する（Ｓ５３）。１枚目の露光が開始してから、露光時間が経過したか否かを判定する。露光時間としては、適正露光となる時間とするが、これ以外にも撮影者が設定する等、他の設定方法によってもよい。
　１枚目の露光を開始し、所定の時間が経過すると、１枚目の露光を終了する（Ｓ５５）。ここでは、メカシャッタ４を閉じ、イメージセンサ５から画像データを読み出す。この読み出された画像データを内部メモリ３３に一時記憶すると共に、表示部３７に表示する。
　１枚目の露光が終了すると、次に、レンズ駆動をワイド側に行う（Ｓ５７）。ここでの処理は、図９のワイド動作６２ａに相当する。望遠側にズーム駆動を開始しても、直ちに一定速度にならないので、ここでは、第１実施形態と同様に、一旦に、広角側にズーム位置を戻す。この戻し量は、戻した位置から最初の位置に移動する間に一定速度になる程度の量であればよい。
　レンズ駆動をワイド側に行うと、次に、ズーム駆動を行い（Ｓ５９）。ここでの処理は図９のズーム動作６３ａに相当する。一旦戻したズーム位置から、望遠側に向けてズーム駆動を開始する。
　ズーム駆動を開始すると、次に、ズーム位置が１枚目のズーム位置を一致するか否かを判定する（Ｓ６１）。ここでは、望遠側にズーム駆動しながら、ズーム位置を検出し、ステップＳ５１において記録したズーム位置と一致するか否かを判定する。この判定の結果、一致しない場合には、ステップＳ５９に戻り、ズーム駆動を行いながらズーム位置の検出を行う。
　ステップＳ６１における判定の結果、ズーム位置が１枚目のズーム位置と一致すると、Ｎ枚目の露光を開始する（Ｓ６３）。ここでは、メカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換させる。
　Ｎ枚目の露光を開始すると、次に、露光時間が経過したか否かを判定する（Ｓ６５）。ここでは、ステップＳ５３と同様に、露光時間が経過するのを待つ。このステップＳ６５の判定の結果、露光時間が経過すると、Ｎ枚目の露光を終了し、ズーム動作を停止し、Ｎ枚目の画像を読み出し、比較明合成処理を行い、表示する（Ｓ６７）。
　続いて、ズーム位置を戻す（Ｓ６９）。第１実施形態の図４のＳ１５等において説明したように、望遠側に一定速度で駆動した際に画像データを取得するように、広角側に一旦ズーム位置を戻す。
　ズーム位置を戻すと、次に、撮影完了のズーム位置か否かを判定する（Ｓ７１）。撮影者が露光間ズーム撮影の終了を指示した場合、またはズーム端に達した場合には、撮影完了のズーム位置と判定する。
　ステップＳ７１における判定の結果、撮影完了のズーム位置でない場合には、ズーム駆動を行う（Ｓ７３）。ここでは、望遠側にズーム駆動を行う。ズーム速度が一定速度になると、ステップＳ６３に進み、Ｎ枚目の露光を開始する。以後、撮影完了のズーム位置になるまで前述の露光間ズーム撮影を繰り返す。
　一方、ステップＳ７１における判定の結果、撮影完了のズーム位置になると、次に、明画像の最後の画像の露光を開始する（Ｓ７５）。この処理は、図９の明画像＿Ｎの取得のための露光に相当する。ズーム駆動を停止させ、メカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換する。
　明画像の最後の画像の露光を開始すると、次に、ステップＳ５３と同様に、露光時間が経過した否かを判定する（Ｓ７７）。この判定の結果、露光時間が経過していない場合には、経過するのを待つ。
　ステップＳ７５における判定の結果、露光時間が経過すると、明画像の最後の画像の読出しを行う（Ｓ７９）。この明画像は、ズームレンズが停止した状態で撮影したことから、はっきりした画像である。イメージセンサ５から画像データを読み出すと、この画像データを用いて、比較明合成処理を行い、表示部３７に表示すると共に、外部メモリ３６に記録する。この処理を行うと、露光間ズーム撮影のフローを終了する。
　このように、本変形例は、ズーム駆動を開始する前と後で、ズームレンズを静止させた状態で画像データを取得し（Ｓ５３、Ｓ７９）、この画像データを用いて、比較明合成処理を行っている。このため、はっきりした画像とすることができる。
　なお、本変形例においては、第１実施形態に示したような望遠側への駆動を行った後、一旦広角側にズーム位置に戻す例に適用した例について説明している。しかし、これに限らず、第２実施形態に示したような望遠側に移動しながら画像データを取得した後、広角側に最初のズーム位置に戻しながら画像データを取得する例に対しても、同様に適用することができる。
　また、本変形例においては、最初と最後の両方で、ズームレンズを停止させた状態で画像データを取得している。しかし、これに限らず、いずれか一方のみで画像データを取得するようにしてもよい。
　また、最初と最後に限らず、図１１に示すように、露光間ズーム撮影のズーム駆動の途中で、ズーム駆動を停止するようにしてもよい。すなわち、ズーム駆動開始前の動作停止６１ａと、ズーム駆動終了時の動作停止６１Ｎ以外に、途中で動作停止６１ｂを行い、このときの画像データを用いて比較明合成処理を行い、表示や記録を行うようにしてもよい。途中の動作停止の回数は、１回に限らず２回以上でも構わない。また、停止位置は、撮影者が操作部材によって指示する以外にも、予め設定するようにしておくようにしても良い。
　なお、図９ないし図１１は、第１実施形態をベースにした変形例であるが、第２実施形態をベースにも第１変形例を適用することができる。
　次に、図１２ないし図１４を用いて、本発明の第１および第２の実施形態の第２の変形例について説明する。第１および第２実施形態においては、ズームレンズ３を駆動するズームレンズ駆動部に指示する駆動ステップに対して、撮影レンズの撮影倍率（像拡大率）または焦点距離（画角）は、一様に変化するとして説明した。撮影レンズの種類によっては、ズームレンズ駆動部に指示する駆動ステップに対して、撮影レンズの撮影倍率は必ずしも一様に変化するとは限らない。このため、ズーム駆動速度が一定であれば、露光間ズーム撮影時に複数の画像データを画像合成した場合に、各撮影画像の移動軌跡の輝度は撮影倍率に応じて変化してしまう。
　移動軌跡の輝度を一様にするために、ズーム駆動速度を撮影倍率や画角に応じて変化さえることが考えられる。この方法は、ズーム駆動速度を変化させることができない場合には採用できない。そこで、第２の変形例では、ズーム駆動時の撮影倍率の変化量に応じて、各撮影での露光時間や、イメージセンサ５の検出感度（ＩＳＯ感度）を変化させるようにしている。このため、本変形例においては、露光間ズーム撮影時の各撮影で取得する画像データの輝度を一定に維持することが可能となる。
　図１２（ａ）は、ズームステップ毎に像拡大率が変化する撮影レンズの一例を示す。また、図１２（ｂ）は、この撮影レンズにおいて、ズームステップ毎の像拡大率（ズーム倍率）の関係を示すグラフであり、また、図１２（ｃ）は、ズームステップ毎の像拡大率（ズーム拡大率）の変化量を示すグラフである。
　図１２に示す例では、ワイド端（広角側端）付近のズームステップＺｍｓ１、Ｚｍｓ２では像拡大率が２倍であり、Ｚｍｓ３、Ｚｍｓ４では像拡大率３倍であり、Ｚｍｓ５、Ｚｍｓ６像拡大率４倍である。この場合、ズーム駆動による像拡大率の変化に関わらず輝度レベルを一定にするには、前述したように、ズーム駆動速度を、「１／像拡大率の変化」にすればよい。像拡大率が２倍であれば、ズーム駆動速度を１／２倍にする。しかし、ズーム駆動速度を変更できない場合があり、本変形例では撮影条件を変更することによって、輝度レベルを一定にしている。
　すなわち、本変形例においては、像拡大率がｍ倍の場合には、ゲインをｍ倍にし、露光時間を１／ｍとすることで、実質的にズーム駆動速度を１／ｍ倍したと同等の効果を得るようにしている。例えば、像拡大率が２倍の場合には、ゲインを２倍にし、露光時間を１／２とする。ゲインをｍ倍にすることにより、ズームによる移動被写体の輝度レベルを一定に保つことができ、露光時間を１／ｍにすることで、ゲインによって背景（ズームによる移動がない被写体）の輝度レベルが上昇した分を低下させることができる。
　次に、図１３を用いて、本変形例における露光間ズームの動作について説明する。図１３は、露光間ズーム撮影モードが設定された際の、ズーム駆動、拡大倍率（ズーム倍率）の変化率、シャッタ動作、およびイメージセンサ５の読出し動作、画像出力のゲイン、ズームステップの関係を示すタイミングチャートである。
　図１３に示した例において、ズーム駆動、シャッタ動作、イメージセンサの読出し動作は、第１実施形態に係る図２のタイミングチャートと同様である。本変形例においては、各撮影（各露光時）で、シャッタ動作の際の露光時間と画像出力のゲインが異ならせている。この点を中心に説明する。
　時刻ｔ５１において、撮影が開始されると、望遠側にズーム駆動を行う。そして、時刻ｔ５２になると、ズームレンズ３の駆動速度が一定速度となり、メカシャッタ４を開き、イメージセンサ５上に被写体像が形成され、イメージセンサ５の各画素は光電変換を行う。この１回目の露光の際には、ゲイン印加部１３はゲインＳｖ１で読み出された画像データ（時刻ｔ５４～ｔ５５で読み出される）に対してゲインを印加する。
　時刻ｔ５２から、１回目の露光時間（Ｔｖ１）が経過した時刻ｔ５３になると、メカシャッタ４を閉じ、また広角側にズーム駆動を行う。時刻ｔ５３～ｔ５６までのズーム駆動、シャッタ駆動、画像データの読出し等は、図２のタイミングチャートと基本的には同様の処理を行っているので、詳しい説明は省略する（後述する時刻ｔ５７～ｔ６０も同様）。
　時刻ｔ５６になると、望遠側へのズーム駆動の駆動速度が一定速度に達するので、時刻ｔ５２と同様に、メカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換を行う。この２回目の露光の際には、ゲイン印加部１３はゲインＳｖ２で読み出された画像データ（時刻ｔ５８～ｔ５９で読み出される）に対してゲインを印加する。時刻ｔ５６から、２回目の露光時間（Ｔｖ２）が経過した時刻ｔ５７になると、メカシャッタ４を閉じ、また広角側にズーム駆動を行う。
　時刻ｔ６０になると、望遠側へのズーム駆動の駆動速度が一定速度に達するので、時刻ｔ５２と同様に、メカシャッタ４を開き、イメージセンサ５に被写体像を露光させ、光電変換を行う。この３回目の露光の際には、ゲイン印加部１３はゲインＳＶ３で読み出された画像データに対してゲインを印加する。時刻ｔ６０から、３回目の露光時間（Ｔｖ３）が経過した時刻ｔ６１になると、メカシャッタ４を閉じ、また広角側にズーム駆動を行う。
　上述の露光時間ＴＶ１～ＴＶ３およびゲインＳｖ１～Ｓｖ３は、それぞれ対応するズームステップに応じた値となる。すなわち、図１２の例では、ズームステップＺｍｓが２の場合には、露光時間Ｔｖ１は適正露光時間の１／２、ゲインを２倍とする。またズームステップＺｍｓが４の場合には、露光時間Ｔｖ２は適正露光時間の１／４、ゲインを４倍とする。
　次に、図１４に本変形例におけるズーム範囲を示す。図１４（ａ）に示すように、時刻Ｔ３０～Ｔ３１において、１回目の露光がなされ（図１３の時刻ｔ５２～ｔ５３）、焦点距離ＦＬ０～ＦＬ１に変化した際の画像データを取得する。また、図１４（ｂ）に示すように、時刻Ｔ３１～Ｔ３２において、２回目の露光がなされ（図１３の時刻ｔ５６～ｔ５７）、焦点距離ＦＬ１～ＦＬ２に変化した際の画像データを取得する。さらに、図１４（ｃ）に示すように、時刻Ｔ３３～Ｔ３４において、３回目の露光がなされ（図１３の時刻ｔ６０～ｔ６１）、焦点距離ＦＬ２～ＦＬ３に変化した際の画像データを取得する。
　図１４において、１回目～３回目の露光がなされと、それぞれの露光で取得した画像データを用いて、比較明合成部１１が比較明合成処理を行う。この比較明合成処理で得られた画像データは、図１４（ｄ）に示すように、焦点距離ＦＬ０～ＦＬ３のズーム範囲で焦点距離を変化させた露光間ズーム撮影画像と同等の画像データである。
　このように、本発明の第１および第２実施形態の第２の変形例においては、露光間ズーム撮影の際に、各撮影の露光時間およびゲインを、焦点距離に応じて、変化させている。このため、露光間ズーム撮影時の各撮影で取得する画像データの輝度を一定に維持することが可能となる。
　なお、図１２ないし図１４は、第１実施形態をベースにした変形例であるが、第２実施形態をベースにも第２変形例を適用することができる。
　以上説明したように、本発明の各実施形態や各変形例においては、撮影レンズのズーム倍率を可変するズームレンズ駆動部を有し、露光期間中にズーム動作を行う露光間ズーム撮影の機能を有している。そして、撮影レンズのズーム倍率を可変させるズームレンズ駆動部を駆動制御するズーム制御ステップと（例えば、図４のＳ１、Ｓ９参照）、ズームレンズ駆動部による駆動時に、被写体像を連続撮影して、それぞれ複数の画像データを取得する撮影制御ステップと（例えば、図４のＳ７、Ｓ１５参照）、それぞれ取得した複数の画像データから合成画像を生成する画像合成処理ステップ（例えば、図４のＳ１７）を有している。そして、撮影レンズのズーム倍率を所定の方向へ変化させることに同期させて、連続撮影を行い、連続撮影でのそれぞれの撮影の間でズーム駆動を、所定の方向とは逆方向に動作させて（例えば、図４のＳ１５）、露光中のズーム位置の一部を重ねて撮影を行うように、ズーム制御ステップと撮影制御ステップを同時に制御させている。このため、合成画像において、軌跡に露光抜けが生じない。
　また、本発明の各実施形態や各変形例においては、露光間ズーム撮影の際、撮影中にズームレンズを駆動制御させて自動的に撮影画角を変えることに同期して、比較明合成処理による多重露光合成を行っている。このため、露光間ズーム撮影を容易に実施することができる。
　また、本発明の各実施形態や各変形例においては、露光間ズーム撮影の際、露光と次の露光が開始されるまでの待ち時間に露光抜け（露光間ズーム時の被写体軌跡が不連続になること）が生じないように、ズームレンズ制御を行っている。待ち時間は、イメージセンサ５からの画像データ読み出しや画像合成処理等に要するタイムラグに基づく時間である。
　露光抜けを防止するためのズームレンズ制御としては、第１実施形態に示したように、シャッタ（露出制御のタイミング）に応じてズーム動作方向を、通常方向から逆方向に動作させている（例えば、通常方向を広角側→望遠側とする場合に、逆方向動作として望遠側→広角側のズームレンズ制御を行う。図２の時刻ｔ１３、図４のＳ７、Ｓ１５のズーム位置を戻す等参照）。
　また、露光抜けを防止するためのズームレンズ制御としては、第２実施形態に示したように、連続撮影中に任意のスピードでズーム動作をさせて、連続撮影の撮影タイミングがズーム駆動時と重ならないようなタイミングで、逆方向に同じスピードのズーム動作を自動制御する（例えば、図６、図８参照）。
　また、本発明の各実施形態や各変形例においては、露光間ズーム撮影の際、ズームレンズでのズーム拡大率の変化量に合わせて、各露光時間を可変させている。図１３に示す例においては、ズームポジションによって１ステップの拡大率が変化し、この拡大率に応じて、露光時間を変更させている。このため、拡大率の変化が一様でない撮影レンズの場合であっても、焦点距離の変化に応じて生ずる軌跡の濃度ムラを防止することができる。
　また、本発明の各実施形態や各変形例においては、露光間ズーム撮影の際、任意の設定値以上の輝度入力がある場合（強い入射光が入光する場合）には、設定値以上の輝度入力がある画像データを破棄し、ズーム位置を破棄した画像の撮影開始時に戻して、再度撮影を行うようにしている（例えば、図４のＳ１９、Ｓ２３参照）。ここでは、強い入射光が入射した際の撮影からやり直しているので、露光間ズーム撮影において、一番最初の撮影段階である、ズーム駆動を１枚目の撮影開始条件に戻してから画像を取得する段階からやり直す必要がない。
　また、本発明の各実施形態や各変形例においては、露光間ズーム撮影の最初、途中、または最後において、ズーム駆動を停止して画像データを取得するようにしている（例えば、図９の動作停止６１ａ、６１Ｎ、図１０のＳ５１、Ｓ５３、図１１の動作停止６１ａ、６１ｂ、６１Ｎ等）。ズーム駆動を停止することにより、露光間ズーム撮影画像の軌跡の最初や最後等の位置の画像をはっきりさせることができる。
　また、本発明の各実施形態や各変形例においては、撮影者が、被写体像で露光間ズーム撮影での撮影像の軌跡の長さを確認しながら撮影できる。また複数枚撮影を行い、比較明合成処理によって画像を得る際に、複数枚撮影時の露光の途切れや露光ムラによる撮影失敗を防止することができる。
　なお、本発明の各実施形態や各変形例においては、露光間ズーム撮影を行うにあたり、望遠側から広角側にズーム駆動を行っていた。しかし、これに限らず、反対方向、すなわち、広角側から望遠側にズーム駆動するようにしてもよい。
　また、本発明の各実施形態や変形例においては、露光間ズーム撮影によって取得した複数の画像データを、比較明合成処理によって合成画像の画像データを生成していた。しかし、比較明合成処理に限らず、例えば、平均加算処理、単純加算処理等、他の画像合成処理を行うようにしてもよい。また、タイムラプス処理等、動画を生成する画像合成処理を行ってもよい。
　また、本発明の各実施形態や変形例においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話、スマートフォン、携帯情報端末（ＰＤＡ：Personal Digital Assist）、パーソナルコンピュータ（ＰＣ）、タブレット型コンピュータ、ゲーム機器等に内蔵されるカメラでも構わない。いずれにしても、焦点距離を変化させながら撮影を行うことが可能な機器であれば、本発明を適用することができる。
　また、本明細書において説明した技術のうち、主にフローチャートで説明した制御に関しては、プログラムで設定可能であることが多く、記録媒体や記録部に収められる場合もある。この記録媒体、記録部への記録の仕方は、製品出荷時に記録してもよく、配布された記録媒体を利用してもよく、インターネットを介してダウンロードしたものでもよい。
　また、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず」、「次に」等の順番を表現する言葉を用いて説明したとしても、特に説明していない箇所では、この順で実施することが必須であることを意味するものではない。
　本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
１・・・撮像部、２・・・レンズ（絞り）、３・・・ズームレンズ、４・・・メカシャッタ、５・・・イメージセンサ、１０・・・画像処理部、１１・・・画像比較合成部、１２・・・現像処理部、１３・・・ゲイン印加部、２０・・・システム制御部、３１・・・バス、３３・・・内部メモリ、３６・・・外部メモリ、３７・・・表示部、３８・・・入力ＩＦ

Claims (7)

  1. 　露光期間中にズーム動作を行う露光間ズーム撮影を行う撮像装置であって、
    　ズームレンズを有する撮影レンズと、
    　上記撮影レンズのズーム倍率を可変させるズームレンズ駆動部と、
    　上記ズームレンズ駆動部が、上記ズームレンズを駆動した時に、上記撮影レンズが撮像面に結像させた被写体像を連続撮影して、それぞれ複数の画像データを出力するイメージセンサと、
    　それぞれ取得した複数の上記画像データから合成画像を生成する画像合成処理をする画像処理部と、
    　上記ズームレンズ駆動部を駆動制御するズーム制御部と、
    　上記イメージセンサに撮影指示をする撮影制御部と、
    　上記ズーム制御部が、上記ズームレンズ駆動部に対して上記撮影レンズのズーム倍率を所定の方向へ変化させる駆動量を出力して駆動制御させることに同期させて、上記撮影制御部に上記イメージセンサに対して連続撮影を行わせ、上記ズーム制御部が、上記ズームレンズ駆動部に、上記連続撮影でのそれぞれの撮影の間でズーム駆動を、上記所定の方向とは逆方向に動作させる駆動量を出力させ、上記撮影制御部が、露光中のズーム位置の一部を重ねて撮影を行わせるように、上記ズーム制御部と上記撮影制御部を同時に制御させる動作制御部と、
    　を有することを特徴とする撮像装置。
  2. 　露光期間中にズーム動作を行う露光間ズーム撮影を行う撮像装置であって、
    　ズームレンズを有する撮影レンズと、
    　上記撮影レンズのズーム倍率を可変させるズームレンズ駆動部と、
    　上記ズームレンズ駆動部が、上記ズームレンズを駆動した時に、上記撮影レンズが撮像面に結像させた被写体像を連続撮影して、それぞれ複数の画像データを出力するイメージセンサと、
    　それぞれ取得した複数の上記画像データから合成画像を生成する画像合成処理をする画像処理部と、
    　上記ズームレンズ駆動部を駆動制御するズーム制御部と、
    　上記イメージセンサに撮影指示をする撮影制御部と、
    　上記ズーム制御部が、上記ズームレンズ駆動部に対して、上記撮影レンズを第１の方向へ第１のズーム速度で移動させる駆動量を出力して駆動制御させることに同期させて、上記撮影制御部が、上記イメージセンサに対して第１の連続撮影を行わせ、上記ズーム制御部が、上記ズームレンズ駆動部に、上記第１の連続撮影の終了後に、上記第１の方向とは逆方向となる第２の方向に、上記第１のズーム速度と同じ大きさのズーム速度で移動させる駆動量を出力させることに同期させて、上記撮影制御部が、連続撮影である第２の連続撮影を行わせるように、上記ズーム制御部と上記撮影制御部を同時に制御させる動作制御部と、
    　を有しており、
    　上記動作制御部は、上記ズーム制御部に対して、上記第１の連続撮影を行う際と、上記第２の連続撮影を行う際の上記レンズのズーム倍率とは異なるズーム範囲で制御することを特徴とする撮像装置。
  3. 　上記画像データと、連続撮影における上記イメージセンサから１回目に取得した画像データとのそれぞれの輝度データに基づいて、上記画像データに所定の輝度以上の光が入射されたか否かを判定する、輝度判定部をさらに有しており、
    　上記撮影制御部は、上記輝度判定部が所定の輝度以上の光が入射されたと判定した場合には、上記画像データを破棄して、上記イメージセンサに対して連続撮影を行い、
    　上記動作制御部は、上記ズーム制御部に対して、上記ズームレンズ駆動部を、上記画像データを破棄されたズーム倍率位置へ再度移動させた後に、上記撮影制御部に再度連続撮影させる、
    　ことを特徴とする、請求項１又は２に記載の撮像装置、
  4. 　上記画像処理部は、上記ズームレンズ駆動部の駆動と同期して連続撮影した画像データに対して、比較明合成処理、加算平均合成、単純加算のいずれか１つなる画像合成処理を実施して合成画像データを生成することを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置
  5. 　上記撮影制御部は、上記ズームレンズ駆動部によるズーム駆動で連続撮影する際の撮影条件について、上記ズーム制御部が制御するズーム拡大率の変化量に応じて、それぞれの画像を撮影する際の感度や露光時間の設定を可変させることを特徴とする請求項４に記載の撮像装置。
  6. 　上記撮影制御部は、上記ズームレンズ駆動部によるズーム駆動で連続撮影する際、連続撮影の最初、途中、および最後の少なくとも１回、ズーム駆動を停止させた状態で撮影を行うことを特徴とする請求項１又は２に記載の撮像装置。
  7. 　撮影レンズに対してズームレンズを移動させてズーム倍率を可変するズームレンズ駆動部を有し、露光期間中にズーム動作を行う露光間ズーム撮影を行う撮像装置での撮像方法であって、
    　撮影レンズのズーム倍率を可変させるズームレンズ駆動部を駆動制御するズーム制御ステップと、
    　上記ズームレンズ駆動部による駆動時に、被写体像を連続撮影して、それぞれ複数の画像データを取得する撮影制御ステップと、
    　それぞれ取得した複数の上記画像データから合成画像を生成する画像合成処理ステップと、
    　を有し、
    　上記撮影レンズのズーム倍率を所定の方向へ変化させることに同期させて、連続撮影を行い、上記連続撮影でのそれぞれの撮影の間でズーム駆動を、上記所定の方向とは逆方向に動作させて、露光中のズーム位置の一部を重ねて撮影を行うように、上記ズーム制御ステップと上記撮像制御ステップを同時に制御させることを特徴とする撮像装置の制御方法。
PCT/JP2015/059039 2014-11-05 2015-03-25 撮像装置および撮像装置の制御方法 WO2016072101A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201580002474.2A CN105765965B (zh) 2014-11-05 2015-03-25 摄像装置和摄像装置的控制方法
US15/098,777 US9654695B2 (en) 2014-11-05 2016-04-14 Imaging device and control method for imaging device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014225115A JP2016092609A (ja) 2014-11-05 2014-11-05 撮像装置および撮像装置の制御方法
JP2014-225115 2014-11-05

Publications (1)

Publication Number Publication Date
WO2016072101A1 true WO2016072101A1 (ja) 2016-05-12

Family

ID=55908840

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/059039 WO2016072101A1 (ja) 2014-11-05 2015-03-25 撮像装置および撮像装置の制御方法

Country Status (4)

Country Link
US (1) US9654695B2 (ja)
JP (1) JP2016092609A (ja)
CN (1) CN105765965B (ja)
WO (1) WO2016072101A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019071442A1 (zh) * 2017-10-10 2019-04-18 深圳传音通讯有限公司 一种变焦控制方法、装置及拍摄终端

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5680573B2 (ja) * 2012-01-18 2015-03-04 富士重工業株式会社 車両の走行環境認識装置
US10158808B2 (en) * 2014-07-02 2018-12-18 Sony Corporation Zoom control device, zoom control method, and program
TWI656693B (zh) * 2015-12-31 2019-04-11 鴻海精密工業股份有限公司 通信裝置
CN107770451A (zh) * 2017-11-13 2018-03-06 广东欧珀移动通信有限公司 拍照处理的方法、装置、终端和存储介质
CN108307117B (zh) * 2018-02-09 2020-03-10 湖南大学 全场光测多功能同步控制装置与方法
CN111771373B (zh) * 2018-03-19 2021-10-15 富士胶片株式会社 摄像装置、曝光期间变焦摄影方法及记录介质
CN108737739B (zh) * 2018-06-15 2021-01-08 Oppo广东移动通信有限公司 一种预览画面采集方法、预览画面采集装置及电子设备
JP6696092B2 (ja) * 2018-07-13 2020-05-20 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ 制御装置、移動体、制御方法、及びプログラム
CN110800286B (zh) * 2019-01-16 2022-05-31 深圳市大疆创新科技有限公司 一种拍摄方法及相关设备
CN110913139B (zh) * 2019-11-28 2022-03-25 维沃移动通信有限公司 拍照方法及电子设备
CN114520870B (zh) * 2020-11-20 2023-06-20 华为技术有限公司 一种显示方法及终端
KR102470211B1 (ko) * 2021-01-13 2022-11-25 (주)비케이 동적 영상 촬영 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003087553A (ja) * 2001-09-17 2003-03-20 Casio Comput Co Ltd 画像合成装置、画像合成方法及びプログラム
JP2010152071A (ja) * 2008-12-25 2010-07-08 Canon Inc 撮像装置、撮像装置の制御方法、撮像装置の制御プログラム
JP2010166483A (ja) * 2009-01-19 2010-07-29 Canon Inc 撮像装置及びその制御方法
JP2014022863A (ja) * 2012-07-17 2014-02-03 Olympus Imaging Corp 撮像装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0723948B2 (ja) 1986-01-07 1995-03-15 株式会社ニコン カメラの撮影情報設定装置
JP2816707B2 (ja) * 1989-06-09 1998-10-27 旭光学工業株式会社 ズームカメラ
JP3695119B2 (ja) * 1998-03-05 2005-09-14 株式会社日立製作所 画像合成装置、及び画像合成方法を実現するプログラムを記録した記録媒体
US7317479B2 (en) * 2003-11-08 2008-01-08 Hewlett-Packard Development Company, L.P. Automated zoom control
US7430004B2 (en) * 2003-11-08 2008-09-30 Hewlett-Packard Development Company, L.P. Volume control linked with zoom control
US7920180B2 (en) * 2004-04-06 2011-04-05 Hewlett-Packard Development Company, L.P. Imaging device with burst zoom mode
JP5322665B2 (ja) 2009-01-14 2013-10-23 キヤノン株式会社 撮像装置及び撮像装置の制御方法
JP5254822B2 (ja) * 2009-01-26 2013-08-07 キヤノン株式会社 撮像装置及びその制御方法
JP5120356B2 (ja) * 2009-10-13 2013-01-16 株式会社ニコン 撮像装置
WO2013190880A1 (ja) * 2012-06-21 2013-12-27 ソニー株式会社 撮像制御装置、撮像制御方法およびプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003087553A (ja) * 2001-09-17 2003-03-20 Casio Comput Co Ltd 画像合成装置、画像合成方法及びプログラム
JP2010152071A (ja) * 2008-12-25 2010-07-08 Canon Inc 撮像装置、撮像装置の制御方法、撮像装置の制御プログラム
JP2010166483A (ja) * 2009-01-19 2010-07-29 Canon Inc 撮像装置及びその制御方法
JP2014022863A (ja) * 2012-07-17 2014-02-03 Olympus Imaging Corp 撮像装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019071442A1 (zh) * 2017-10-10 2019-04-18 深圳传音通讯有限公司 一种变焦控制方法、装置及拍摄终端

Also Published As

Publication number Publication date
US9654695B2 (en) 2017-05-16
US20160234444A1 (en) 2016-08-11
JP2016092609A (ja) 2016-05-23
CN105765965A (zh) 2016-07-13
CN105765965B (zh) 2019-01-29

Similar Documents

Publication Publication Date Title
WO2016072101A1 (ja) 撮像装置および撮像装置の制御方法
JP6034740B2 (ja) 撮像装置および撮像方法
JP5840189B2 (ja) 撮像装置、画像処理装置、および画像処理方法
JP5895409B2 (ja) 撮像装置
JP6278713B2 (ja) 撮像装置および撮像方法
JP6570918B2 (ja) 撮像装置、撮像方法
JP2017220892A (ja) 画像処理装置及び画像処理方法
JP6321990B2 (ja) 撮像装置および撮像方法
JP2009081808A (ja) 撮影制御装置、撮影制御方法、撮影制御プログラム、および撮影装置
JP6250098B2 (ja) 撮像装置および撮像方法
JP6717690B2 (ja) 撮像装置、撮像方法、およびプログラム
JP5909997B2 (ja) 撮像装置および撮像装置の制御方法
JP6096041B2 (ja) 撮像装置および撮像方法
JP6909669B2 (ja) 画像処理装置および画像処理方法
JP2009089037A (ja) 撮影制御装置、撮影制御方法、撮影制御プログラム、および撮影装置
JP2015231192A (ja) 撮像装置および撮像装置の露光制御方法
JP2016019231A (ja) 撮像装置および撮像装置の制御方法
JP6296909B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム
JP2019036885A (ja) 画像処理装置および画像処理方法
JP2016131378A (ja) 撮像装置
JP6418715B2 (ja) 画像処理装置および画像処理方法
JP6284604B2 (ja) 画像処理装置、画像処理方法、およびプログラム
JP6508294B2 (ja) 撮像装置
JP2016054447A (ja) 撮像装置、画像処理装置、画像処理方法、および画像処理プログラム
JP2019110606A (ja) 撮像装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15857077

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15857077

Country of ref document: EP

Kind code of ref document: A1