WO2019181515A1 - 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム - Google Patents

撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム Download PDF

Info

Publication number
WO2019181515A1
WO2019181515A1 PCT/JP2019/008920 JP2019008920W WO2019181515A1 WO 2019181515 A1 WO2019181515 A1 WO 2019181515A1 JP 2019008920 W JP2019008920 W JP 2019008920W WO 2019181515 A1 WO2019181515 A1 WO 2019181515A1
Authority
WO
WIPO (PCT)
Prior art keywords
imaging
brightness
area
divided area
control
Prior art date
Application number
PCT/JP2019/008920
Other languages
English (en)
French (fr)
Inventor
仁史 桜武
小林　誠
長谷川　亮
智紀 増田
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to JP2020508173A priority Critical patent/JP6785395B2/ja
Publication of WO2019181515A1 publication Critical patent/WO2019181515A1/ja
Priority to US17/022,127 priority patent/US11102419B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B11/00—Filters or other obturators specially adapted for photographic purposes
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32—Means for focusing
    • G03B13/34—Power focusing
    • G03B13/36—Autofocus systems
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00—Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/28—Circuitry to measure or to take account of the object contrast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/75—Circuitry for compensating brightness variation in the scene by influencing optical camera components

Definitions

  • the present invention relates to an imaging control device, an imaging device, an imaging control method, and an imaging control program.
  • Patent Document 1 and Patent Document 2 describe an image pickup apparatus including an optical element having a variable transmittance that can adjust the amount of light incident on the image pickup element.
  • the imaging device described in Patent Document 1 partially reduces the amount of subject light by an optical element, corrects the amount of received light for a whiteout region outside the high luminance side dynamic range of the imaging element, and widens the dynamic range. ing.
  • the imaging device described in Patent Document 2 prevents saturation by reducing the transmittance corresponding to the portion of the optical element when there is a portion with high luminance in the object field, and enables accurate photometry.
  • AF Auto Focus, automatic focusing control
  • image data in the focusing target area set in captured image data obtained by imaging a subject is used.
  • the exposure at the time of imaging for AF is determined in accordance with the average value of the brightness of the subject within the focus target area.
  • the person who wants to focus is very dark, such as in backlight, there is a possibility that the person cannot be focused.
  • Patent Documents 1 and 2 only consider preventing saturation of a subject area that is too bright when performing photometry, and do not consider improving AF accuracy.
  • the present invention has been made in view of the above circumstances, and an object thereof is to provide an imaging control device, an imaging device, an imaging control method, and an imaging control program capable of improving focusing accuracy.
  • the imaging control apparatus of the present invention acquires a first captured image signal obtained from the imaging element by imaging the subject with an imaging element that images the subject through a focus lens, and is set as the first captured image signal.
  • the imaging condition of the imaging element is An imaging condition control unit that controls the brightness of the lowest divided area, which is the divided area where the brightness is lowest, to be the set value, and light transmission for each of the plurality of areas arranged in front of the imaging device In the optical element having a variable ratio, the light transmittance of the areas corresponding to the other divided areas other than the lowest divided area is controlled to reduce the brightness of the other divided areas.
  • the imaging device is configured to image a subject with the imaging element in a state where the imaging condition is controlled by the excess rate control unit and the imaging condition control unit, and the light transmittance is controlled by the transmittance control unit.
  • a focus control unit that performs focus control of the focus lens based on the focus target area of the second captured image signal obtained from the above.
  • the imaging device of the present invention includes the imaging control device and the imaging element.
  • the imaging control method of the present invention acquires a first captured image signal obtained from the imaging element by imaging the subject with an imaging element that images the subject through a focus lens, and is set as the first captured image signal.
  • the imaging condition of the imaging element is An imaging condition control step for controlling the brightness of the lowest divided area, which is the divided area where the brightness is lowest, to the state where the set value is set, and light transmission for each of the plurality of areas arranged in front of the imaging device
  • the brightness of the other divided areas is controlled by controlling the light transmittance of the areas corresponding to the other divided areas other than the lowest divided area.
  • the imaging condition is controlled by the transmittance control step for reducing and the imaging condition control step, and the subject is imaged by the imaging element in a state where the light transmittance is controlled by the transmittance control step.
  • a focus control step for performing focus control of the focus lens based on the focus target area of the second captured image signal obtained from the image sensor.
  • the imaging control program of the present invention acquires a first captured image signal obtained from the imaging element by imaging the subject with an imaging element that images the subject through a focus lens, and is set as the first captured image signal.
  • the imaging condition of the imaging element is An imaging condition control step for controlling the brightness of the lowest divided area, which is the divided area where the brightness is lowest, to the state where the set value is set, and light transmission for each of the plurality of areas arranged in front of the imaging device In the optical element having a variable rate, the light transmittance of the area corresponding to the other divided areas other than the lowest divided area is controlled, and the other divided areas are controlled.
  • the imaging element is imaged by the imaging element in a state in which the imaging condition is controlled by the transmittance control step for reducing the light intensity and the light transmittance is controlled by the transmittance control step.
  • the focus control step of performing focus control of the focus lens based on the focus target area of the second captured image signal obtained from the image sensor is to cause the computer to execute the focus control step.
  • an imaging control device an imaging device, an imaging control method, and an imaging control program capable of improving focusing accuracy.
  • FIG. 1 is a diagram illustrating a schematic configuration of a digital camera 100 that is an embodiment of an imaging apparatus of the present invention.
  • 3 is a schematic diagram illustrating an example of division of a variable ND filter 3.
  • FIG. 4 is a schematic diagram illustrating an example of division of a captured image signal 50.
  • FIG. It is a functional block diagram of the system control part 11 shown in FIG. It is a figure which shows the example of a division
  • FIG. 6 is a diagram illustrating an example of the brightness of each of divided areas AF1 to AF3 in FIG. 5 in a focusing target area.
  • FIG. 1 is a diagram illustrating a schematic configuration of a digital camera 100 that is an embodiment of an imaging apparatus of the present invention.
  • 3 is a schematic diagram illustrating an example of division of a variable ND filter 3.
  • FIG. 4 is a schematic diagram
  • FIG. 8 is a diagram showing the brightness of each of the divided areas AF1 to AF3 in a state where the imaging condition is controlled by the imaging condition control unit 11B from the state of FIG.
  • FIG. 9 is a diagram showing the brightness of each of divided areas AF1 to AF3 in a state where the light transmittance is controlled by the transmittance control unit 11C from the state of FIG. 3 is a flowchart for explaining an operation in an imaging mode of the digital camera 100 shown in FIG. 1. It is a figure for demonstrating the 1st modification of the control by the transmittance
  • the external appearance of the smart phone 200 which is one Embodiment of the imaging device of this invention is shown. It is a block diagram which shows the structure of the smart phone 200 shown in FIG.
  • FIG. 1 is a diagram showing a schematic configuration of a digital camera 100 which is an embodiment of an imaging apparatus of the present invention.
  • a digital camera 100 shown in FIG. 1 includes a lens device 40A having an imaging lens 1, an aperture 2, a lens controller 4, a lens driver 8, and an aperture driver 9, and a main body 40B.
  • the lens device 40A may be detachable from the main body 40B, or may be integrated with the main body 40B. In the configuration in which the lens device 40A can be attached to and detached from the main body 40B, the main body 40B constitutes an imaging device.
  • the imaging lens 1 includes a focus lens or a zoom lens that can move in the optical axis direction.
  • the focus lens is a lens for adjusting the focal position of the imaging lens 1 and is composed of a single lens or a plurality of lenses. The focus position is adjusted by moving the focus lens in the optical axis direction of the imaging lens 1.
  • a liquid lens capable of changing the focal position by variably controlling the curved surface of the lens may be used.
  • the lens control unit 4 of the lens device 40A is configured to be able to communicate with the system control unit 11 of the main body unit 40B by wire or wirelessly.
  • the lens control unit 4 controls the focus lens included in the imaging lens 1 via the lens driving unit 8 in accordance with a command from the system control unit 11 to change the position (focus position) of the main point of the focus lens.
  • the zoom lens included in the imaging lens 1 is controlled via the lens driving unit 8 to change the position of the zoom lens, or the aperture value of the aperture 2 is controlled via the aperture driving unit 9.
  • the main body 40B includes an imaging element 5 such as a CCD (Charged Coupled Device) type image sensor or a MOS (Metal Oxide Semiconductor) type image sensor that images a subject through an imaging optical system including an imaging lens 1 and a diaphragm 2, and an imaging element 5.
  • the imaging device 5 has an imaging surface in which a plurality of pixels are two-dimensionally arranged, and a subject image formed on the imaging surface by an imaging optical system is converted into a pixel signal by the plurality of pixels and output. .
  • a set of pixel signals output from each pixel of the image sensor 5 is hereinafter referred to as a captured image signal.
  • the image sensor driving unit 5A drives the image sensor 5 by generating a drive signal based on a command from the system control unit 11 and supplying the drive signal to the image sensor 5.
  • the variable ND filter 3 is an optical element for controlling the amount of light incident on the image sensor 5 and can partially change the light transmittance.
  • the variable ND filter 3 is disposed in front of the imaging surface of the imaging device 5 (subject side with respect to the imaging surface).
  • variable ND filter 3 has a configuration in which characteristic elements (for example, a liquid crystal element or an electrochromic element) whose light transmittance can be changed by an applied voltage are two-dimensionally arranged.
  • characteristic elements for example, a liquid crystal element or an electrochromic element
  • the variable ND filter 3 may be formed integrally with the image sensor 5.
  • the imaging device 5 includes an imaging device chip, a package that accommodates the imaging device chip, and a protective cover that seals the package.
  • the variable ND filter 3 may be laminated
  • the ND driving unit 3A controls the transmittance of the variable ND filter 3 by controlling the voltage applied to each characteristic element of the variable ND filter 3 in accordance with an instruction from the system control unit 11.
  • the system control unit 11 performs overall control of the entire digital camera 100, and has a hardware structure including various processors that execute processing by executing programs including an imaging control program.
  • programmable logic which is a processor whose circuit configuration can be changed after manufacturing, such as a CPU (Central Processing Unit) and an FPGA (Field Programmable Gate Array), which are general-purpose processors that execute programs and perform various processes Examples include a dedicated electrical circuit that is a processor having a circuit configuration that is specifically designed to execute a specific process such as a device (Programmable Logic Device: PLD) or an ASIC (Application Specific Integrated Circuit).
  • PLD Programmable Logic Device
  • ASIC Application Specific Integrated Circuit
  • the structures of these various processors are electric circuits in which circuit elements such as semiconductor elements are combined.
  • the system control unit 11 may be configured by one of various types of processors, or a combination of two or more processors of the same type or different types (for example, a combination of a plurality of FPGAs or a combination of a CPU and an FPGA). May be.
  • the main unit 40B further includes a memory 16 including a RAM (Random Access Memory) and a ROM (Read only memory), a memory control unit 15 that controls data storage in the memory 16 and data reading from the memory 16, and imaging A digital signal processing unit 17 that performs digital signal processing on the captured image signal output from the element 5 to generate captured image data according to various formats such as JPEG (Joint Photographic Experts Group) format, and a storage medium 21
  • the ROM included in the memory 16 stores a program including an imaging control program.
  • the memory control unit 15, the digital signal processing unit 17, the external memory control unit 20, and the display unit 22 are connected to each other by a control bus 24 and a data bus 25, and are controlled by a command from the system control unit 11.
  • the digital signal processing unit 17 is the various processors exemplified above that execute processing by executing a program including an imaging control program.
  • the digital signal processing unit 17 functions as an image processing unit.
  • the light transmission area of the variable ND filter 3 is handled as being divided into a plurality of (for example, 25 in the example of FIG. 2) blocks 30.
  • the picked-up image signal 50 output from the image pickup device 5 is handled as a set of a plurality (25 in the example of FIG. 2) of blocks 50A corresponding to each block 30 of FIG.
  • Each block 50A is obtained by photoelectric conversion from subject light transmitted through the corresponding block 30.
  • the digital camera 100 has an AF function, and can set in advance which subject area included in the captured image signal output from the image sensor 5 should be focused.
  • An area to be focused set in the captured image signal is referred to as an in-focus target area.
  • FIG. 4 is a functional block diagram of the system control unit 11 shown in FIG.
  • the system control unit 11 executes a program including an imaging control program stored in the ROM of the memory 16 to thereby perform a brightness measurement unit 11A, an imaging condition control unit 11B, a transmittance control unit 11C, a focusing control unit 11D, And functions as a photometric processing unit 11E.
  • the photometric processing unit 11E measures the brightness of the subject based on the captured image signal output from the image sensor 5, determines the appropriate exposure based on the measured brightness, and based on the proper exposure, the storage medium 21
  • the imaging conditions for imaging for storage are determined.
  • the brightness measurement unit 11A, the imaging condition control unit 11B, the transmittance control unit 11C, and the focus control unit 11D are functional blocks that operate during AF.
  • the brightness measuring unit 11A divides the focus target area in the captured image signal output from the image sensor 5 into a plurality of divided areas, and obtains the brightness for each divided area.
  • the brightness measuring unit 11A converts the block 50A into divided areas AF1 as shown in FIG.
  • the divided area AF2 and the divided area AF3 are divided into three.
  • FIG. 6 is a diagram showing a block 30 of the variable ND filter 3 corresponding to the block 50A shown in FIG.
  • the block 30 corresponding to the focus target area is divided into an area af1 corresponding to the divided area AF1, an area af2 corresponding to the divided area AF2, and an area af3 corresponding to the divided area AF3.
  • Each of the divided areas AF1 to AF3 in FIG. 5 is obtained by photoelectric conversion from subject light transmitted through the corresponding areas af1 to af3.
  • the imaging condition control unit 11B captures the image of the imaging element 5 during imaging for AF based on the brightness setting value determined based on the brightness of each of the divided areas AF1 to AF3 obtained by the brightness measurement unit 11A. Control the conditions. Specifically, the imaging condition control unit 11B sets the imaging condition so that the brightness of the lowest divided area that is the lowest divided area among the divided areas AF1 to AF3 becomes the above set value. Control.
  • FIG. 7 is a diagram showing an example of the brightness of each of the divided areas AF1 to AF3 in FIG. 5 in the focus target area.
  • the brightness of the divided area AF1 is the lowest, and the divided area AF1 is the lowest divided area.
  • the brightness setting value is obtained as an average value of the brightness of each of the divided areas AF1 to AF3, for example.
  • the set value may be a representative value of the brightness of each of the divided areas AF1 to AF3. For example, a mode value or a median value may be used.
  • the brightness of the divided area AF2 is the above set value
  • the brightness of the divided area AF1 is smaller than the above set value
  • the brightness of the divided area AF3 is the above set value. It is larger than the value.
  • the imaging condition control unit 11B causes the brightness of the divided area AF1, which is the lowest divided area, to be the above set value. A proper exposure is determined, and an imaging condition for obtaining the exposure is set.
  • FIG. 8 is a diagram showing the brightness of each of the divided areas AF1 to AF3 in a state where the imaging condition is set by the imaging condition control unit 11B from the state of FIG.
  • the brightness of each of the divided areas AF1 to AF3 increases by the correction amount D1 corresponding to the difference between the original brightness of the divided area AF1 and the set value by setting the imaging condition.
  • the transmittance control unit 11C controls the light transmittance of an area corresponding to the other divided areas of the variable ND filter 3 other than the lowest divided area among the divided areas AF1 to AF3. Decrease the brightness.
  • the divided area AF2 and the divided area AF3 are other divided areas excluding the lowest divided area.
  • the transmittance controller 11C controls the light transmittance of the area af2 corresponding to the divided area AF2 and the light transmittance of the area af3 corresponding to the divided area AF3, and as shown in FIG. 9, these divided areas AF2 Then, a state is obtained in which the brightness of each of the divided areas AF3 becomes the above set value.
  • the focus control unit 11D performs focus control of the focus lens based on the focus target area of the captured image signal obtained by imaging the subject with the image sensor 5 in such a state. Focus control may be performed by either the contrast AF method or the phase difference AF method.
  • FIG. 10 is a flowchart for explaining the operation of the digital camera 100 shown in FIG. 1 in the imaging mode.
  • the transmittance control unit 11C of the system control unit 11 controls the transmittance of all characteristic elements of the variable ND filter 3 to 100%.
  • the system control unit 11 causes the imaging device 5 to perform imaging for displaying a live view image (step S1).
  • the captured image signal output from the image sensor 5 by this imaging is processed by the digital signal processing unit 17 to generate image data for live view display, and the live view image is displayed on the display unit 22 based on this image data. (Step S2).
  • step S2 the processing of step S1 and step S2 is repeated until an instruction to execute AF and AE (AutoExposure) is issued in step S3 by pressing the release button included in the operation unit 14 or the like.
  • AF and AE AutoExposure
  • step S3 When an instruction to execute AF and AE is given in step S3 (step S3: YES), the photometry processing unit 11E of the system control unit 11 acquires the captured image signal output from the image sensor 5, and uses this captured image signal as the captured image signal. Based on this, the brightness of the subject is measured. Then, an appropriate exposure is determined based on the brightness, and an imaging condition at the time of storage is determined based on the appropriate exposure (step S4). Step S4 constitutes a photometric processing step.
  • the brightness measuring unit 11A of the system control unit 11 acquires the captured image signal output from the image sensor 5, and obtains the brightness of each of the divided areas AF1 to AF3 of the focus target area of the captured image signal ( Step S5).
  • Step S5 constitutes a brightness measurement step.
  • the imaging condition control unit 11B of the system control unit 11 sets imaging conditions for AF imaging by the method described above based on the brightness obtained in step S5 (step S6).
  • the brightness of the lowest divided area for example, divided area AF1 in FIG. 5 in the focus target area is increased to the set value.
  • Step S6 constitutes an imaging condition control step.
  • the transmittance control unit 11C of the system control unit 11 in the variable ND filter 3 corresponds to a divided area other than the lowest divided area (for example, divided areas AF2 and AF3 in FIG. 5) (for example, the area in FIG. 6).
  • the light transmittance of af2, af3) is controlled, and the brightness of the divided areas other than the lowest divided area is reduced to the set value (step S7).
  • Step S7 constitutes a transmittance control step.
  • the focus control unit 11D of the system control unit 11 performs AF imaging on the image sensor 5 under the imaging conditions set in step S6 and the light transmittance controlled in step S7. (Step S8).
  • the focus control unit 11D performs focus control for changing the position of the principal point of the focus lens based on the captured image signal output from the image sensor 5 by the imaging in step S8 (step S9).
  • Step S9 constitutes a focus control step.
  • step S10: YES the system control unit 11 returns the transmittance of all the characteristic elements of the variable ND filter 3 to 100%.
  • the imaging condition is set to the content determined in step S4, and the imaging device 5 performs imaging for storage (step S11). If an imaging instruction has not been given in step S10 (step S10: NO), the process returns to step S8.
  • step S11 the captured image signal output from the image sensor 5 by the imaging in step S11 is processed by the digital signal processing unit 17 to generate captured image data, which is stored in the storage medium 21 (step S12). After step S12, the process returns to step S1 (return).
  • the digital camera 100 it is possible to perform AF imaging in a state where the brightness of each divided area of the focusing target area is equal and close to appropriate. For this reason, even when a very dark subject is partially included in the focusing target area, such as during backlighting, AF imaging can be performed with the dark subject brightened. Focus control can be performed with high accuracy. Further, since the originally bright portion of the focus target area is dimmed to an appropriate brightness by the variable ND filter 3, focus control can be performed with high accuracy.
  • the aperture value of the aperture 2 is preferably set to the same value as the aperture value included in the imaging conditions determined in step S4.
  • the imaging condition is determined so that the brightness of the lowest divided area becomes the above set value by increasing the exposure time or increasing the imaging sensitivity. do it.
  • the aperture value of the aperture 2 may be the same value as the aperture value included in the imaging conditions at the time of imaging for displaying the live view image in step S1. .
  • the number of times the focus lens is moved can be reduced, and AF imaging can be performed at high speed.
  • the focus control by the focus control unit 11D is performed by the phase difference AF method, when the aperture value is on the open side, for example, at the time of imaging for displaying the live view image, the focus accuracy is increased. Can be high.
  • the distance to move the focus lens becomes smaller as the aperture is closer to the open position. It can be reduced to increase the focusing accuracy.
  • step S ⁇ b> 8 when the AF imaging is performed in step S ⁇ b> 8, the captured image signal output from the imaging element 5 by this imaging is processed by the digital signal processing unit 17 and displayed. Image data is generated. The display image data is output to the display unit 22 and displayed on the display unit 22 as a live view image.
  • the brightness of the captured image signal becomes the actual brightness of the subject in steps S6 and S7.
  • the live view image is different from the appearance of the actual subject.
  • the digital signal processing unit 17 determines the overall brightness of the captured image signal obtained by the AF imaging in step S8 as the brightness of the lowest divided area obtained in step S5 and the above-described brightness. Is reduced by a difference from the set value (correction amount D1 in FIG. 8). Further, the digital signal processing unit 17 obtains the brightness of each divided area other than the lowest divided area in the focus target area of the captured image signal obtained by the AF imaging in step S8, which is obtained in step S5. Increase to the brightness of each divided area. This process constitutes an image processing step.
  • the captured image signal obtained by performing such processing and generating display image data By processing the captured image signal obtained by performing such processing and generating display image data, the difference in appearance between the live view image based on the display image data and the actual subject being captured is eliminated. Therefore, it is possible to achieve both improvement in focusing accuracy and improvement in quality of the live view image.
  • FIG. 10 shows the operation when a still image is captured as an image for storage.
  • the processing of steps S5 to S9 is performed after a moving image storage start instruction is issued.
  • the transmittance control unit 11C of the system control unit 11 has the variable ND filter 3 so that the brightness of each of the divided areas AF2 and AF3 other than the lowest divided area of the focusing target area becomes the above set value.
  • the light transmittance was controlled.
  • a modified example of the light transmittance control by the transmittance control unit 11C will be described.
  • FIG. 11 is a diagram for explaining a first modification of control by the transmittance control unit 11C.
  • the transmittance control unit 11C in the state where the brightness of the focus target area of the captured image signal is changed as shown in FIG. 8 according to the imaging condition set by the imaging condition control unit 11B, is divided areas AF2 and AF3. As shown in FIG. 11, the light transmittance of the areas af2 and af3 corresponding to is controlled to a value at which the brightness of the divided areas AF2 and AF3 decreases by the correction amount D1.
  • the first modification it is possible to prevent the brightness of the divided area AF3 from being excessively lowered, and thus it is possible to prevent the blackening of the divided area AF3.
  • the above-described correction processing for displaying the live view image can be performed without any problem, and the quality of the live view image can be improved.
  • the transmittance control unit 11C when the brightness of at least one of the divided area AF2 and the divided area AF3 is equal to or higher than a predetermined threshold, The light transmittance of the area of the variable ND filter 3 corresponding to the divided area may be controlled to a value at which the brightness of the divided area becomes the above set value.
  • the above-described brightness measurement unit 11A, imaging condition control unit 11B, transmittance control unit 11C, focusing control unit 11D, and digital signal processing unit 17 constitute an imaging control device.
  • the system control unit 11 may be configured to perform the function of the digital signal processing unit 17.
  • variable ND filter 3 and the ND drive unit 3A are built in a detachable lens device 40A, and the lens control unit 4 activates the ND drive unit 3A in response to an instruction from the system control unit 11. It may be controlled.
  • FIG. 12 shows an appearance of a smartphone 200 that is an embodiment of the imaging apparatus of the present invention.
  • a smartphone 200 shown in FIG. 12 has a flat housing 201, and a display input in which a display panel 202 as a display surface and an operation panel 203 as an input unit are integrated on one surface of the housing 201. Part 204 is provided.
  • Such a casing 201 includes a speaker 205, a microphone 206, an operation unit 207, and a camera unit 208.
  • the configuration of the housing 201 is not limited thereto, and for example, a configuration in which the display surface and the input unit are independent can be employed, or a configuration having a folding structure or a slide mechanism can be employed.
  • FIG. 13 is a block diagram showing a configuration of the smartphone 200 shown in FIG.
  • the main components of the smartphone include a wireless communication unit 210, a display input unit 204, a call unit 211, an operation unit 207, a camera unit 208, a storage unit 212, and an external input / output unit. 213, a GPS (Global Positioning System) receiving unit 214, a motion sensor unit 215, a power supply unit 216, and a main control unit 220.
  • a wireless communication function for performing mobile wireless communication via a base station device BS (not shown) and a mobile communication network NW (not shown) is provided.
  • the wireless communication unit 210 performs wireless communication with the base station apparatus BS accommodated in the mobile communication network NW according to an instruction from the main control unit 220. Using this wireless communication, transmission / reception of various file data such as audio data and image data, e-mail data, and reception of web data or streaming data are performed.
  • the display input unit 204 displays images (still images and moving images) or character information and visually transmits information to the user, and performs user operations on the displayed information.
  • This is a so-called touch panel for detection, and includes a display panel 202 and an operation panel 203.
  • the display panel 202 uses an LCD (Liquid Crystal Display), an OELD (Organic Electro-Luminescence Display), or the like as a display device.
  • LCD Liquid Crystal Display
  • OELD Organic Electro-Luminescence Display
  • the operation panel 203 is a device that is placed so that an image displayed on the display surface of the display panel 202 is visible and detects one or more coordinates operated by a user's finger or stylus.
  • a detection signal generated due to the operation is output to the main control unit 220.
  • the main control unit 220 detects an operation position (coordinates) on the display panel 202 based on the received detection signal.
  • the display panel 202 and the operation panel 203 of the smartphone 200 exemplified as an embodiment of the photographing apparatus of the present invention integrally constitute a display input unit 204.
  • the arrangement 203 covers the display panel 202 completely.
  • the operation panel 203 may have a function of detecting a user operation even in an area outside the display panel 202.
  • the operation panel 203 includes a detection area (hereinafter referred to as a display area) for an overlapping portion that overlaps the display panel 202 and a detection area (hereinafter, a non-display area) for an outer edge portion that does not overlap the other display panel 202. May be included).
  • the size of the display area and the size of the display panel 202 may be completely matched, it is not always necessary to match the two.
  • the operation panel 203 may include two sensitive areas of the outer edge portion and the other inner portion. Further, the width of the outer edge portion is appropriately designed according to the size of the housing 201 and the like.
  • examples of the position detection method employed in the operation panel 203 include a matrix switch method, a resistive film method, a surface acoustic wave method, an infrared method, an electromagnetic induction method, a capacitance method, and the like. You can also
  • the call unit 211 includes a speaker 205 or a microphone 206, converts user's voice input through the microphone 206 into voice data that can be processed by the main control unit 220, and outputs the voice data to the main control unit 220 or wireless communication.
  • the audio data received by the unit 210 or the external input / output unit 213 is decoded and output from the speaker 205.
  • the speaker 205 can be mounted on the same surface as the surface on which the display input unit 204 is provided, and the microphone 206 can be mounted on the side surface of the housing 201.
  • the operation unit 207 is a hardware key using a key switch or the like, and receives an instruction from the user.
  • the operation unit 207 is mounted on the side surface of the housing 201 of the smartphone 200 and is turned on when pressed with a finger or the like, and is turned off when the finger is released with a restoring force such as a spring. It is a push button type switch.
  • the storage unit 212 is a control program and control data of the main control unit 220, application software, address data that associates the name or telephone number of the communication partner, transmitted / received e-mail data, Web data downloaded by Web browsing, download The stored content data is stored, and streaming data and the like are temporarily stored.
  • the storage unit 212 includes an internal storage unit 217 built in the smartphone and an external storage unit 218 having a removable external memory slot.
  • Each of the internal storage unit 217 and the external storage unit 218 constituting the storage unit 212 includes a flash memory type (hard memory type), a hard disk type (hard disk type), a multimedia card micro type (multimedia card micro type), This is realized using a storage medium such as a card type memory (for example, MicroSD (registered trademark) memory), a RAM (Random Access Memory), a ROM (Read Only Memory), or the like.
  • a flash memory type hard memory type
  • hard disk type hard disk type
  • multimedia card micro type multimedia card micro type
  • a storage medium such as a card type memory (for example, MicroSD (registered trademark) memory), a RAM (Random Access Memory), a ROM (Read Only Memory), or the like.
  • the external input / output unit 213 serves as an interface with all external devices connected to the smartphone 200, and communicates with other external devices (for example, universal serial bus (USB), IEEE 1394, etc.) or a network.
  • external devices for example, universal serial bus (USB), IEEE 1394, etc.
  • a network for example, Internet, wireless LAN, Bluetooth (registered trademark), RFID (Radio Frequency Identification), Infrared Data Association (IrDA) (registered trademark), UWB (Ultra Wideband) (registered trademark) ZigBee) (registered trademark) or the like
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee ZigBee
  • Examples of external devices connected to the smartphone 200 include a wired / wireless headset, wired / wireless external charger, wired / wireless data port, a memory card (Memory card) connected via a card socket, and a SIM (Subscriber).
  • Identity Module Card / UIM User Identity Module Card
  • external audio / video equipment connected via audio / video I / O (Input / Output) terminal
  • external audio / video equipment connected wirelessly, yes / no
  • the external input / output unit 213 transmits data received from such an external device to each component inside the smartphone 200, or causes the data inside the smartphone 200 to be transmitted to the external device. Can do.
  • the GPS receiving unit 214 receives GPS signals transmitted from the GPS satellites ST1 to STn in accordance with instructions from the main control unit 220, executes a positioning calculation process based on the received plurality of GPS signals, A position consisting of longitude and altitude is detected.
  • the GPS reception unit 214 can acquire position information from the wireless communication unit 210 or the external input / output unit 213 (for example, a wireless LAN), the GPS reception unit 214 can also detect the position using the position information.
  • the motion sensor unit 215 includes, for example, a triaxial acceleration sensor, and detects the physical movement of the smartphone 200 in accordance with an instruction from the main control unit 220. By detecting the physical movement of the smartphone 200, the moving direction or acceleration of the smartphone 200 is detected. The detection result is output to the main control unit 220.
  • the power supply unit 216 supplies power stored in a battery (not shown) to each unit of the smartphone 200 in accordance with an instruction from the main control unit 220.
  • the main control unit 220 includes a microprocessor, operates according to a control program and control data stored in the storage unit 212, and controls each unit of the smartphone 200 in an integrated manner.
  • the main control unit 220 includes a mobile communication control function for controlling each unit of the communication system and an application processing function in order to perform voice communication or data communication through the wireless communication unit 210.
  • the application processing function is realized by the main control unit 220 operating according to the application software stored in the storage unit 212.
  • Examples of the application processing function include an infrared communication function for controlling the external input / output unit 213 to perform data communication with the opposite device, an e-mail function for sending and receiving e-mails, and a web browsing function for browsing web pages. .
  • the main control unit 220 also has an image processing function such as displaying video on the display input unit 204 based on received data or downloaded image data such as streaming data (still image or moving image data).
  • the image processing function refers to a function in which the main control unit 220 decodes the image data, performs image processing on the decoding result, and displays an image on the display input unit 204.
  • the main control unit 220 executes display control for the display panel 202 and operation detection control for detecting a user operation through the operation unit 207 and the operation panel 203.
  • the main control unit 220 By executing the display control, the main control unit 220 displays an icon for starting the application software, a software key such as a scroll bar, or a window for creating an e-mail.
  • scroll bar refers to a software key for accepting an instruction to move the display portion of a large image that does not fit in the display area of the display panel 202.
  • the main control unit 220 detects a user operation through the operation unit 207, or accepts an operation on the icon and an input of a character string in the input field of the window through the operation panel 203. Or a display image scroll request through a scroll bar is accepted.
  • the main control unit 220 causes the operation position with respect to the operation panel 203 to overlap with the display panel 202 (display area) or an outer edge part (non-display area) that does not overlap with the other display panel 202.
  • a touch panel control function for controlling the sensitive area of the operation panel 203 or the display position of the software key.
  • the main control unit 220 can also detect a gesture operation on the operation panel 203 and execute a preset function in accordance with the detected gesture operation.
  • Gesture operation is not a conventional simple touch operation, but an operation of drawing a trajectory with at least one of a plurality of positions by drawing a trajectory with a finger or the like, or simultaneously specifying a plurality of positions. means.
  • the camera unit 208 includes configurations other than the external memory control unit 20, the storage medium 21, the display unit 22, and the operation unit 14 in the digital camera 100 shown in FIG.
  • the captured image generated by the camera unit 208 can be stored in the storage unit 212 or output through the external input / output unit 213 or the wireless communication unit 210.
  • the camera unit 208 is mounted on the same surface as the display input unit 204, but the mounting position of the camera unit 208 is not limited thereto, and may be mounted on the back surface of the display input unit 204. .
  • the camera unit 208 can be used for various functions of the smartphone 200.
  • an image acquired by the camera unit 208 can be displayed on the display panel 202, or an image of the camera unit 208 can be used as one of operation inputs of the operation panel 203.
  • the position can also be detected with reference to an image from the camera unit 208.
  • the optical axis direction of the camera unit 208 of the smartphone 200 can be determined without using the triaxial acceleration sensor or in combination with the triaxial acceleration sensor. It is also possible to determine the current usage environment.
  • the image from the camera unit 208 can also be used in the application software.
  • the posture information acquired by the motion sensor unit 215 can be added and stored in the storage unit 212, or can be output through the external input / output unit 213 or the wireless communication unit 210.
  • the focusing accuracy can be improved.
  • the subject is imaged by an imaging device that images the subject through a focus lens, the first captured image signal obtained from the imaging device is obtained, and the focusing area that is set in the first captured image signal is divided.
  • a brightness measurement unit to obtain the brightness of each; Based on the brightness setting value determined based on the brightness for each of the divided areas, the imaging condition of the imaging element is set so that the brightness of the lowest divided area, which is the divided area where the brightness is the lowest, is An imaging condition control unit for controlling the state to be a set value; In the optical element in which the light transmittance is variable for each of the plurality of areas arranged in front of the image sensor, the light transmittance of the area corresponding to the other divided areas other than the lowest divided area is controlled, and A transmittance control unit for reducing the brightness of the other divided areas; A second image obtained from the imaging element by imaging the subject with the imaging element in a state in which the imaging condition is controlled by the imaging condition control unit and the light transmittance is controlled by the transmittance control unit.
  • the imaging control device determines the light transmittance of the area corresponding to the other divided area by the difference between the brightness of the other divided area and the setting value.
  • An imaging control device that controls the value to decrease.
  • the transmittance control unit determines the light transmittance of the area corresponding to the divided area and the brightness of the divided area.
  • An imaging control apparatus that controls the value to be the set value.
  • the imaging control device according to any one of (1) to (4), The overall brightness of the second captured image signal is reduced by the difference between the brightness of the lowest division area obtained by the brightness measurement unit and the set value, and the second captured image is further reduced. From the second captured image signal obtained by increasing the brightness of the other divided area of the focus target area in the signal to the brightness of the other divided area obtained by the brightness measurement unit An imaging control apparatus further comprising an image processing unit that generates display image data to be displayed on the display unit.
  • the imaging control device according to any one of (1) to (5), The imaging control for controlling the imaging condition by the imaging condition control unit and imaging the subject by the imaging element in a state where the light transmittance is controlled by the transmittance control unit is performed at a frequency of once in a plurality of frames.
  • the imaging control device executed in
  • the imaging control device according to any one of (1) to (6), A photometric processing unit that measures the brightness of the subject based on the first captured image signal;
  • the imaging condition control unit controls the imaging condition to the above state, the aperture value of the diaphragm disposed in front of the imaging element is determined based on the brightness measured by the photometric processing unit.
  • An imaging control apparatus that sets the same value as the aperture value of the aperture.
  • the imaging control device When the imaging condition control unit controls the imaging condition to the above state, the aperture value of the aperture disposed in front of the imaging element is set to the aperture value at the time of imaging for obtaining the first captured image signal.
  • the imaging control device which makes the same value as the aperture value.
  • the subject is imaged by an imaging device that images the subject through a focus lens, the first captured image signal obtained from the imaging device is obtained, and the focusing area that is set in the first captured image signal is divided.
  • a brightness measurement step to find the brightness of each; Based on the brightness setting value determined based on the brightness for each of the divided areas, the imaging condition of the imaging element is set so that the brightness of the lowest divided area, which is the divided area where the brightness is the lowest, is An imaging condition control step for controlling to a set value state; In the optical element in which the light transmittance is variable for each of the plurality of areas arranged in front of the image sensor, the light transmittance of the area corresponding to the other divided areas other than the lowest divided area is controlled, and A transmittance control step for reducing the brightness of the other divided areas; A second image obtained from the imaging element by imaging the subject with the imaging element in a state where the imaging condition is controlled by the imaging condition control step and the light transmittance is controlled by the transmittance control step.
  • the imaging control method according to any one of (14), The overall brightness of the second captured image signal is reduced by the difference between the brightness of the lowest divided area obtained by the brightness measurement step and the set value, and the second captured image is further reduced. From the second captured image signal obtained by increasing the brightness of the other divided area of the focus target area in the signal to the brightness of the other divided area obtained by the brightness measurement step.
  • An imaging control method further comprising an image processing step of generating display image data to be displayed on the display unit.
  • the imaging control method according to any one of (15), The imaging control for controlling the imaging condition by the imaging condition control step and imaging the subject by the imaging element in a state in which the light transmittance is controlled by the transmittance control step is performed once in a plurality of frames.
  • the imaging control method to be executed in.
  • the imaging control method according to any one of (11) to (16), A photometric processing step of measuring the brightness of the subject based on the first captured image signal; In the imaging condition control step, when the imaging condition is controlled to the state, an aperture value of an aperture disposed in front of the imaging element is determined based on the brightness measured in the photometric processing step. An imaging control method for setting the same aperture value as the aperture value.
  • the subject is imaged by an imaging device that images the subject through a focus lens, the first captured image signal obtained from the imaging device is obtained, and the focusing area that is set in the first captured image signal is divided.
  • a brightness measurement step to find the brightness of each; Based on the brightness setting value determined based on the brightness for each of the divided areas, the imaging condition of the imaging element is set so that the brightness of the lowest divided area, which is the divided area where the brightness is the lowest, is An imaging condition control step for controlling to a set value state; In the optical element in which the light transmittance is variable for each of the plurality of areas arranged in front of the image sensor, the light transmittance of the area corresponding to the other divided areas other than the lowest divided area is controlled, and A transmittance control step for reducing the brightness of the other divided areas; A second image obtained from the imaging element by imaging the subject with the imaging element in a state where the imaging condition is controlled by the imaging condition control step and the light transmittance is controlled by the transmittance control step.
  • An imaging control program for
  • an imaging control device an imaging device, an imaging control method, and an imaging control program capable of improving focusing accuracy.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)
  • Exposure Control For Cameras (AREA)
  • Focusing (AREA)
  • Blocking Light For Cameras (AREA)

Abstract

合焦精度の向上が可能な撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供する。システム制御部（１１）は、被写体を撮像して得られる第一の撮像画像信号に設定されている合焦対象エリアの分割エリアＡＦ１～ＡＦ３毎の明るさを求め、この明るさに基づいて決められる明るさの設定値に基づいて、撮像素子（５）の撮像条件を、明るさが最低となる分割エリアである最低分割エリアの明るさが設定値となる状態に制御し、可変ＮＤフィルタ（３）における最低分割エリアを除く他の分割エリアに対応するエリアの光透過率を制御して、他の分割エリアの明るさを低下させた後、被写体を撮像して得られる撮像画像信号の合焦対象エリアに基づいて、フォーカスレンズの合焦制御を行う。

Description

撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム
　本発明は、撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムに関する。
　特許文献１と特許文献２には、撮像素子に入射する光量を調節することができる透過率可変の光学素子を備える撮像装置が記載されている。特許文献１に記載の撮像装置は、被写体光の光量を光学素子によって部分的に低下させて、撮像素子の高輝度側ダイナミックレンジ外となる白飛び領域について受光量を補正し、ダイナミックレンジを広げている。
　特許文献２に記載の撮像装置は、被写界中に輝度が高い箇所がある場合に、光学素子のその箇所に対応する透過率を下げることで飽和を防ぎ、正確な測光を可能としている。
日本国特開２０１３－１２９９７号公報 日本国特開平７－１２０３０９号公報
　撮像装置においてＡＦ（Ａｕｔｏ　Ｆｏｃｕｓ、自動合焦制御）を行う場合には、被写体を撮像して得られる撮像画像データに設定される合焦対象エリア内の画像データが用いられる。この合焦対象エリア内に、明るさの異なる被写体が混在している場合に、例えば、合焦対象エリア内の被写体の明るさの平均値に合わせてＡＦ用の撮像時の露出を決めてしまうと、逆光時等、焦点を合わせたい人物が非常に暗くなっている状況では、人物に焦点を合わせられなくなる可能性がある。
　特許文献１，２には、測光を行う際に、明るすぎる被写体領域の飽和を防ぐことしか考慮しておらず、ＡＦの精度を向上させる点については考慮されていない。
　本発明は、上記事情に鑑みてなされたものであり、合焦精度の向上が可能な撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供することを目的とする。
　本発明の撮像制御装置は、フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定部と、上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御部と、上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御部と、上記撮像条件制御部によって上記撮像条件が制御され、且つ、上記透過率制御部によって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御部と、を備えるものである。
　本発明の撮像装置は、上記撮像制御装置と、上記撮像素子と、を備えるものである。
　本発明の撮像制御方法は、フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御ステップと、上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御ステップと、上記撮像条件制御ステップによって上記撮像条件が制御され、且つ、上記透過率制御ステップによって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御ステップと、を備えるものである。
　本発明の撮像制御プログラムは、フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御ステップと、上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御ステップと、上記撮像条件制御ステップによって上記撮像条件が制御され、且つ、上記透過率制御ステップによって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御ステップと、をコンピュータに実行させるためのものである。
　本発明によれば、合焦精度の向上が可能な撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供することができる。
本発明の撮像装置の一実施形態であるデジタルカメラ１００の概略構成を示す図である。 可変ＮＤフィルタ３の分割例を示す模式図である。 撮像画像信号５０の分割例を示す模式図である。 図１に示すシステム制御部１１の機能ブロック図である。 ブロック５０Ａの分割例を示す図である。 図５に示すブロック５０Ａに対応する可変ＮＤフィルタ３のブロック３０を示す図である。 合焦対象エリアにおける図５の分割エリアＡＦ１～ＡＦ３の各々の明るさの一例を示す図である。 図７の状態から撮像条件制御部１１Ｂによって撮像条件が制御された状態の分割エリアＡＦ１～ＡＦ３の各々の明るさを示す図である。 図８の状態から透過率制御部１１Ｃによって光透過率が制御された状態の分割エリアＡＦ１～ＡＦ３の各々の明るさを示す図である。 図１に示すデジタルカメラ１００の撮像モード時の動作を説明するためのフローチャートである。 透過率制御部１１Ｃによる制御の第一の変形例を説明するための図である。 本発明の撮像装置の一実施形態であるスマートフォン２００の外観を示すものである。 図１２に示すスマートフォン２００の構成を示すブロック図である。
　以下、本発明の実施形態について図面を参照して説明する。
　図１は、本発明の撮像装置の一実施形態であるデジタルカメラ１００の概略構成を示す図である。
　図１に示すデジタルカメラ１００は、撮像レンズ１、絞り２、レンズ制御部４、レンズ駆動部８、及び絞り駆動部９を有するレンズ装置４０Ａと、本体部４０Ｂと、を備える。
　レンズ装置４０Ａは、本体部４０Ｂに着脱可能なものであってもよいし、本体部４０Ｂと一体化されたものであってもよい。レンズ装置４０Ａが本体部４０Ｂに着脱可能な構成では、本体部４０Ｂが撮像装置を構成する。
　撮像レンズ１は、光軸方向に移動可能なフォーカスレンズ又はズームレンズ等を含む。フォーカスレンズは、撮像レンズ１の焦点位置を調節するためのレンズであり、単一のレンズ又は複数のレンズで構成される。フォーカスレンズが撮像レンズ１の光軸方向に移動することで焦点位置の調節が行われる。
　なお、フォーカスレンズとしては、レンズの曲面を可変制御して焦点位置を変えることのできる液体レンズを用いてもよい。
　レンズ装置４０Ａのレンズ制御部４は、本体部４０Ｂのシステム制御部１１と有線又は無線によって通信可能に構成される。
　レンズ制御部４は、システム制御部１１からの指令にしたがい、レンズ駆動部８を介して撮像レンズ１に含まれるフォーカスレンズを制御してフォーカスレンズの主点の位置（焦点位置）を変更したり、レンズ駆動部８を介して撮像レンズ１に含まれるズームレンズを制御してズームレンズの位置を変更したり、絞り駆動部９を介して絞り２の絞り値を制御したりする。
　本体部４０Ｂは、撮像レンズ１及び絞り２を含む撮像光学系を通して被写体を撮像するＣＣＤ（Ｃｈａｒｇｅｄ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）型イメージセンサ又はＭＯＳ（Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型イメージセンサ等の撮像素子５と、撮像素子５を駆動する撮像素子駆動部５Ａと、撮像素子５と撮像光学系の間に配置された可変ＮＤ（Ｎｅｕｔｒａｌ　Ｄｅｎｓｉｔｙ）フィルタ３と、可変ＮＤフィルタ３を駆動するＮＤ駆動部３Ａと、全体を統括制御するシステム制御部１１と、操作部１４と、を備える。
　撮像素子５は、複数の画素が二次元状に配置された撮像面を有し、撮像光学系によってこの撮像面に結像される被写体像をこの複数の画素によって画素信号に変換して出力する。撮像素子５の各画素から出力される画素信号の集合を以下では撮像画像信号という。
　撮像素子駆動部５Ａは、システム制御部１１からの指令に基づいて駆動信号を生成してこの駆動信号を撮像素子５に供給することで、撮像素子５を駆動する。
　可変ＮＤフィルタ３は、撮像素子５に入射する光量を制御するための光学素子であり、部分的に光透過率を変えることができるものである。可変ＮＤフィルタ３は、撮像素子５の撮像面の前方（撮像面よりも被写体側）に配置されている。
　可変ＮＤフィルタ３は、具体的には、印加電圧によって光透過率を変えられる特性素子（例えば液晶素子又はエレクトロクロミック素子等）が二次元状に配置された構成である。
　可変ＮＤフィルタ３は、撮像素子５と一体的に形成されたものであってもよい。例えば、撮像素子５は、撮像素子チップと、これを収容するパッケージと、このパッケージを封止する保護カバーとを備える。そして、この保護カバーに可変ＮＤフィルタ３が積層されていてもよい。
　ＮＤ駆動部３Ａは、システム制御部１１からの指示に応じて、可変ＮＤフィルタ３の各特性素子に印加する電圧を制御することによって可変ＮＤフィルタ３の透過率を制御する。
　システム制御部１１は、デジタルカメラ１００全体を統括制御するものであり、ハードウェア的な構造は、撮像制御プログラムを含むプログラムを実行して処理を行う各種のプロセッサである。
　各種のプロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｓｅｓｓｉｎｇ　Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Ｐｒｏｇｒａｍｍａｂｌｅ　Ｌｏｇｉｃ　Ｄｅｖｉｃｅ：ＰＬＤ）、又はＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
　これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
　システム制御部１１は、各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ又はＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。
　本体部４０Ｂは、更に、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｓｅｓｓ　Ｍｅｍｏｒｙ）及びＲＯＭ（Ｒｅａｄ　ｏｎｌｙ　ｍｅｍｏｒｙ）を含むメモリ１６と、メモリ１６へのデータ記憶及びメモリ１６からのデータ読み出しの制御を行うメモリ制御部１５と、撮像素子５から出力される撮像画像信号に対しデジタル信号処理を行って、例えばＪＰＥＧ（Ｊｏｉｎｔ　Ｐｈｏｔｏｇｒａｐｈｉｃ　Ｅｘｐｅｒｔｓ　Ｇｒｏｕｐ）形式等の各種フォーマットにしたがった撮像画像データを生成するデジタル信号処理部１７と、記憶媒体２１へのデータ記憶及び記憶媒体２１からのデータ読み出しの制御を行う外部メモリ制御部２０と、画像を表示するための有機ＥＬ（ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）パネル又は液晶パネル等を含む表示部２２と、を備える。
　メモリ１６に含まれるＲＯＭには、撮像制御プログラムを含むプログラムが記憶されている。
　メモリ制御部１５、デジタル信号処理部１７、外部メモリ制御部２０、及び表示部２２は、制御バス２４及びデータバス２５によって相互に接続され、システム制御部１１からの指令によって制御される。
　デジタル信号処理部１７は、ハードウェア的な構造は、撮像制御プログラムを含むプログラムを実行して処理を行う上記に例示した各種のプロセッサである。デジタル信号処理部１７は画像処理部として機能する。
　可変ＮＤフィルタ３の光透過エリアは、図２に示すように、例えば複数（図２の例では２５個）のブロック３０に分割されたものとして取り扱われる。撮像素子５から出力される撮像画像信号５０は、図３に示すように、図２の各ブロック３０に対応した複数（図２の例では２５個）のブロック５０Ａの集合として取り扱われる。各ブロック５０Ａは、これに対応するブロック３０を透過した被写体光から光電変換して得られたものである。
　デジタルカメラ１００はＡＦ機能を有しており、撮像素子５から出力される撮像画像信号に含まれるどの被写体領域に焦点を合わせるべきかを事前に設定することができる。撮像画像信号に設定される焦点を合わせるべきエリアを合焦対象エリアという。
　図４は、図１に示すシステム制御部１１の機能ブロック図である。
　システム制御部１１は、メモリ１６のＲＯＭに記憶された撮像制御プログラムを含むプログラムを実行することにより、明るさ測定部１１Ａ、撮像条件制御部１１Ｂ、透過率制御部１１Ｃ、合焦制御部１１Ｄ、及び測光処理部１１Ｅとして機能する。
　測光処理部１１Ｅは、撮像素子５から出力される撮像画像信号に基づいて被写体の明るさを測定し、測定した明るさに基づいて適正露出を決定し、この適正露出に基づいて、記憶媒体２１への記憶用の撮像の撮像条件（撮像素子５の露光時間、絞り２の絞り値、及び撮像感度等）を決定する。
　明るさ測定部１１Ａ、撮像条件制御部１１Ｂ、透過率制御部１１Ｃ、及び合焦制御部１１Ｄは、ＡＦ時に動作する機能ブロックである。
　明るさ測定部１１Ａは、撮像素子５から出力される撮像画像信号のうちの合焦対象エリアを複数の分割エリアに分割し、この分割エリア毎の明るさを求める。
　以下では、合焦対象エリアとして図３に示すブロック５０Ａのうちの１つが設定されているものとし、例えば、明るさ測定部１１Ａが、このブロック５０Ａを、図５に示すように、分割エリアＡＦ１、分割エリアＡＦ２、及び分割エリアＡＦ３に３分割するものとして説明する。
　図６は、図５に示すブロック５０Ａに対応する可変ＮＤフィルタ３のブロック３０を示す図である。図６に示すように、合焦対象エリアに対応するブロック３０は、分割エリアＡＦ１に対応するエリアａｆ１と、分割エリアＡＦ２に対応するエリアａｆ２と、分割エリアＡＦ３に対応するエリアａｆ３とに分けられる。図５の各分割エリアＡＦ１～ＡＦ３は、これに対応するエリアａｆ１～ａｆ３を透過した被写体光から光電変換して得られたものとなる。
　撮像条件制御部１１Ｂは、明るさ測定部１１Ａにより求められた分割エリアＡＦ１～ＡＦ３毎の明るさに基づいて決められる明るさの設定値に基づいて、ＡＦ用の撮像時の撮像素子５の撮像条件を制御する。具体的には、撮像条件制御部１１Ｂは、分割エリアＡＦ１～ＡＦ３のうちの明るさが最低となる分割エリアである最低分割エリアの明るさが、上記の設定値となる状態に、撮像条件を制御する。
　図７は、合焦対象エリアにおける図５の分割エリアＡＦ１～ＡＦ３の各々の明るさの一例を示す図である。図７に示す例では、分割エリアＡＦ１の明るさが最低であり、分割エリアＡＦ１が最低分割エリアとなる。
　上記の明るさの設定値は、例えば、これら分割エリアＡＦ１～ＡＦ３の各々の明るさの平均値として求められる。この設定値は、分割エリアＡＦ１～ＡＦ３の各々の明るさの代表値であればよく、例えば最頻値又は中央値等が用いられてもよい。
　図７に示す例では、分割エリアＡＦ２の明るさは上記の設定値となっており、分割エリアＡＦ１の明るさは上記の設定値より小さくなっており、分割エリアＡＦ３の明るさは上記の設定値より大きくなっている。
　明るさ測定部１１Ａによる明るさの測定結果が図７に示すものであった場合には、撮像条件制御部１１Ｂは、最低分割エリアである分割エリアＡＦ１の明るさが上記の設定値となるような露出を決定し、この露出を得るための撮像条件を設定する。
　図８は、図７の状態から撮像条件制御部１１Ｂによって撮像条件が設定された状態の分割エリアＡＦ１～ＡＦ３の各々の明るさを示す図である。図８の例では、撮像条件の設定によって、元々の分割エリアＡＦ１の明るさと設定値の差に相当する補正量Ｄ１だけ、分割エリアＡＦ１～ＡＦ３の各々の明るさが上昇する。
　透過率制御部１１Ｃは、可変ＮＤフィルタ３における、分割エリアＡＦ１～ＡＦ３のうちの上記の最低分割エリアを除く他の分割エリアに対応するエリアの光透過率を制御して、この他の分割エリアの明るさを低下させる。
　図７及び図８の例では、分割エリアＡＦ２と分割エリアＡＦ３が、最低分割エリアを除く他の分割エリアとなる。透過率制御部１１Ｃは、分割エリアＡＦ２に対応するエリアａｆ２の光透過率と、分割エリアＡＦ３に対応するエリアａｆ３の光透過率とを制御して、図９に示すように、これら分割エリアＡＦ２と分割エリアＡＦ３の各々の明るさが上記の設定値となる状態を得る。
　以上の処理によって、分割エリアＡＦ１～ＡＦ３の各々の明るさが均一化された状態を得ることができる。
　合焦制御部１１Ｄは、このような状態にて撮像素子５により被写体を撮像して撮像素子５から得られる撮像画像信号の合焦対象エリアに基づいて、フォーカスレンズの合焦制御を行う。合焦制御は、コントラストＡＦ方式又は位相差ＡＦ方式のどちらで行ってもよい。
　図１０は、図１に示すデジタルカメラ１００の撮像モード時の動作を説明するためのフローチャートである。
　なお、撮像モードを設定した初期の状態では、システム制御部１１の透過率制御部１１Ｃは、可変ＮＤフィルタ３の全ての特性素子の透過率を１００％に制御している。
　撮像モードが設定されると、システム制御部１１は、撮像素子５によりライブビュー画像を表示するための撮像を行わせる（ステップＳ１）。
　この撮像によって撮像素子５から出力された撮像画像信号はデジタル信号処理部１７によって処理されてライブビュー表示用の画像データが生成され、この画像データに基づいてライブビュー画像が表示部２２に表示される（ステップＳ２）。
　ステップＳ２の後、ステップＳ３において、操作部１４に含まれるレリーズボタンの押下等によってＡＦとＡＥ（ＡｕｔｏＥｘｐｏｓｕｒｅ）の実行指示がなされるまでは、ステップＳ１とステップＳ２の処理が繰り返される。
　ステップＳ３においてＡＦとＡＥの実行指示がなされると（ステップＳ３：ＹＥＳ）、システム制御部１１の測光処理部１１Ｅは、撮像素子５から出力された撮像画像信号を取得し、この撮像画像信号に基づいて、被写体の明るさを測定する。そして、この明るさに基づいて適正露出を決定し、適正露出に基づいて記憶時の撮像条件を決定する（ステップＳ４）。ステップＳ４は測光処理ステップを構成する。
　また、システム制御部１１の明るさ測定部１１Ａは、撮像素子５から出力された撮像画像信号を取得し、この撮像画像信号の合焦対象エリアの各分割エリアＡＦ１～ＡＦ３の明るさを求める（ステップＳ５）。ステップＳ５は明るさ測定ステップを構成する。
　システム制御部１１の撮像条件制御部１１Ｂは、ステップＳ５で求められた明るさに基づいて、上述した方法によりＡＦ用の撮像時の撮像条件を設定する（ステップＳ６）。この処理により、合焦対象エリア内の最低分割エリア（例えば図５の分割エリアＡＦ１）の明るさが設定値まで上昇される状態となる。ステップＳ６は撮像条件制御ステップを構成する。
　次に、システム制御部１１の透過率制御部１１Ｃは、可変ＮＤフィルタ３のうち、最低分割エリア以外の分割エリア（例えば図５の分割エリアＡＦ２，ＡＦ３）に対応するエリア（例えば図６のエリアａｆ２，ａｆ３）の光透過率を制御して、最低分割エリア以外の分割エリアの明るさを上記の設定値まで低下させる（ステップＳ７）。ステップＳ７は透過率制御ステップを構成する。
　次に、システム制御部１１の合焦制御部１１Ｄは、ステップＳ６にて設定された撮像条件及びステップＳ７にて制御された光透過率の状態にて、撮像素子５にＡＦ用の撮像を行わせる（ステップＳ８）。
　合焦制御部１１Ｄは、ステップＳ８の撮像により撮像素子５から出力された撮像画像信号に基づいてフォーカスレンズの主点の位置を変更する合焦制御を行う（ステップＳ９）。ステップＳ９は合焦制御ステップを構成する。
　その後、操作部１４に含まれるレリーズボタンの押下によって撮像指示がなされると（ステップＳ１０：ＹＥＳ）、システム制御部１１は、可変ＮＤフィルタ３の全ての特性素子の透過率を１００％に戻し、撮像条件を、ステップＳ４にて決定された内容に設定して、撮像素子５により記憶用の撮像を行わせる（ステップＳ１１）。ステップＳ１０において撮像指示がなされなかった場合（ステップＳ１０：ＮＯ）には、ステップＳ８に処理が戻る。
　ステップＳ１１の後、ステップＳ１１の撮像により撮像素子５から出力された撮像画像信号がデジタル信号処理部１７により処理されて撮像画像データが生成され、これが記憶媒体２１に記憶される（ステップＳ１２）。ステップＳ１２の後は、ステップＳ１に処理が戻る（リターン）。
　以上のように、デジタルカメラ１００によれば、ＡＦ用の撮像を、合焦対象エリアの各分割エリアの明るさが等しい状態且つ適正に近い状態にて行うことができる。このため、逆光時等、合焦対象エリアに部分的に非常に暗い被写体が含まれている場合であっても、この暗い被写体を明るくした状態にてＡＦ用の撮像を行うことができ、合焦制御を高精度に行うことができる。また、合焦対象エリアのもともと明るかった部分については、可変ＮＤフィルタ３によって適正な明るさまで減光されるため、合焦制御を高精度に行うことができる。
　なお、図１０のステップＳ６において設定される撮像条件のうち、絞り２の絞り値については、ステップＳ４にて決定した撮像条件に含まれる絞り値と同じ値とすることが好ましい。絞り値が例えば小絞り側に変更される場合には、露光時間を長くしたり、撮像感度を上げたりする等して、最低分割エリアの明るさが上記の設定値となるよう撮像条件を決定すればよい。
　このようにすることで、ステップＳ８のＡＦ用の撮像と、ステップＳ１１の記憶用の撮像との間において絞り２の駆動が不要となる。このため、記憶用の撮像を高速に行うことが可能となる。
　または、図１０のステップＳ６において設定される撮像条件のうち、絞り２の絞り値については、ステップＳ１のライブビュー画像の表示用の撮像時における撮像条件に含まれる絞り値と同じ値としてもよい。
　このようにすることでも、フォーカスレンズの移動回数を減らすことができ、ＡＦ用の撮像を高速に行うことが可能となる。また、合焦制御部１１Ｄによる合焦制御が位相差ＡＦ方式にて行われる場合には、ライブビュー画像の表示用の撮像時において絞り値が例えば開放側にある場合には、合焦精度を高くすることができる。
　なお、合焦制御部１１Ｄによる合焦制御がコントラストＡＦ方式にて行われる場合であっても、フォーカスレンズを動かす距離は、絞りが開放に近いほど少なくなるため、合焦評価値の計算誤差を減らして合焦精度を高めることができる。
　図１０では説明が省略されているが、ステップＳ８にてＡＦ用の撮像が行われると、この撮像により撮像素子５から出力された撮像画像信号がデジタル信号処理部１７により処理されて、表示用画像データが生成される。そして、この表示用画像データは、表示部２２に出力されて、ライブビュー画像として表示部２２に表示される。
　このように、ステップＳ８のＡＦ用の撮像で得た撮像画像信号からライブビュー画像を表示させる場合には、ステップＳ６とステップＳ７において、この撮像画像信号の明るさが実際の被写体の明るさに対して補正されていることから、ライブビュー画像が実際の被写体の見た目と異なるものとなっている。
　これに対応するため、まず、デジタル信号処理部１７は、ステップＳ８のＡＦ用の撮像で得られた撮像画像信号の全体の明るさを、ステップＳ５にて求められた最低分割エリアの明るさと上記の設定値との差（図８の補正量Ｄ１）だけ減少させる。更に、デジタル信号処理部１７は、ステップＳ８のＡＦ用の撮像で得られた撮像画像信号の合焦対象エリアにおける最低分割エリア以外の各分割エリアの明るさを、ステップＳ５にて求められたこの各分割エリアの明るさまで増加させる。この処理が画像処理ステップを構成する。
　このような処理を行って得た撮像画像信号を処理して表示用画像データを生成することで、表示用画像データに基づくライブビュー画像と、実際の撮像中の被写体との見た目の差をなくすことができ、合焦精度の向上とライブビュー画像の高品質化とを両立させることができる。
　また、図１０では、記憶用の撮像として静止画を撮像する場合の動作を示しているが、動画撮像の場合には、動画の記憶開始指示がなされた後、ステップＳ５～ステップＳ９の処理を、複数フレーム（例えば４フレーム）に１回の頻度にて行うことで、被写体の変化が大きい動画撮像中であっても、高精度の合焦制御を行うことができる。
　以上の説明では、システム制御部１１の透過率制御部１１Ｃは、合焦対象エリアの最低分割エリア以外の各分割エリアＡＦ２，ＡＦ３の明るさが上記の設定値となるように、可変ＮＤフィルタ３の光透過率を制御するものとした。以下では、透過率制御部１１Ｃによる光透過率の制御の変形例について説明する。
　図１１は、透過率制御部１１Ｃによる制御の第一の変形例を説明するための図である。
　透過率制御部１１Ｃは、撮像条件制御部１１Ｂによって設定された撮像条件によって、撮像画像信号の合焦対象エリアの明るさが図８に示すように変更された状態にて、分割エリアＡＦ２，ＡＦ３に対応するエリアａｆ２，ａｆ３の光透過率を、図１１に示すように、分割エリアＡＦ２，ＡＦ３の明るさが補正量Ｄ１の分だけ低下する値に制御する。
　この第一の変形例によれば、分割エリアＡＦ３の明るさが過度に低下するのを防ぐことができるため、分割エリアＡＦ３の黒潰れを防ぐことができる。黒潰れが防がれることで、上述したライブビュー画像表示のための補正処理を問題なく行うことができ、ライブビュー画像品質を向上させることができる。
　なお、透過率制御部１１Ｃは、図１１の制御を行う場合に、分割エリアＡＦ２と分割エリアＡＦ３の少なくとも一方の明るさが予め決めた閾値以上になっている場合には、その閾値以上の明るさの分割エリアに対応する可変ＮＤフィルタ３のエリアの光透過率を、この分割エリアの明るさが上記の設定値となる値に制御してもよい。
　明るさがある程度大きい分割エリアについては、明るさを設定値まで下げても黒潰れの可能性は少ないため、このようにすることで、合焦精度を向上させることができる。
　以上の明るさ測定部１１Ａ，撮像条件制御部１１Ｂ、透過率制御部１１Ｃ、及び合焦制御部１１Ｄと、デジタル信号処理部１７とによって、撮像制御装置が構成される。なお、デジタル信号処理部１７の機能をシステム制御部１１が担う構成としてもよい。
　図１のデジタルカメラ１００において、可変ＮＤフィルタ３とＮＤ駆動部３Ａは、着脱可能なレンズ装置４０Ａに内蔵され、レンズ制御部４が、システム制御部１１からの指示に応じてＮＤ駆動部３Ａを制御するものであってもよい。
　次に、本発明の撮像装置の実施形態としてスマートフォンの構成について説明する。
　図１２は、本発明の撮像装置の一実施形態であるスマートフォン２００の外観を示すものである。
　図１２に示すスマートフォン２００は、平板状の筐体２０１を有し、筐体２０１の一方の面に表示面としての表示パネル２０２と、入力部としての操作パネル２０３とが一体となった表示入力部２０４を備えている。
　また、この様な筐体２０１は、スピーカ２０５と、マイクロホン２０６と、操作部２０７と、カメラ部２０８とを備えている。なお、筐体２０１の構成はこれに限定されず、例えば、表示面と入力部とが独立した構成を採用したり、折り畳み構造又はスライド機構を有する構成を採用したりすることもできる。
　図１３は、図１２に示すスマートフォン２００の構成を示すブロック図である。
　図１３に示すように、スマートフォンの主たる構成要素として、無線通信部２１０と、表示入力部２０４と、通話部２１１と、操作部２０７と、カメラ部２０８と、記憶部２１２と、外部入出力部２１３と、ＧＰＳ（Ｇｌｏｂａｌ　Ｐｏｓｉｔｉｏｎｉｎｇ　Ｓｙｓｔｅｍ）受信部２１４と、モーションセンサ部２１５と、電源部２１６と、主制御部２２０とを備える。
　また、スマートフォン２００の主たる機能として、図示省略の基地局装置ＢＳと図示省略の移動通信網ＮＷとを介した移動無線通信を行う無線通信機能を備える。
　無線通信部２１０は、主制御部２２０の指示にしたがって、移動通信網ＮＷに収容された基地局装置ＢＳに対し無線通信を行うものである。この無線通信を使用して、音声データ、画像データ等の各種ファイルデータ、電子メールデータ等の送受信、ウェブデータ又はストリーミングデータ等の受信を行う。
　表示入力部２０４は、主制御部２２０の制御により、画像（静止画像及び動画像）又は文字情報等を表示して視覚的に利用者に情報を伝達するとともに、表示した情報に対する利用者操作を検出する、いわゆるタッチパネルであって、表示パネル２０２と、操作パネル２０３と、を備える。
　表示パネル２０２は、ＬＣＤ（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）、ＯＥＬＤ（Ｏｒｇａｎｉｃ　Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ　Ｄｉｓｐｌａｙ）等を表示デバイスとして用いたものである。
　操作パネル２０３は、表示パネル２０２の表示面上に表示される画像を視認可能に載置され、利用者の指又は尖筆によって操作される一又は複数の座標を検出するデバイスである。このデバイスを利用者の指又は尖筆によって操作すると、操作に起因して発生する検出信号を主制御部２２０に出力する。次いで、主制御部２２０は、受信した検出信号に基づいて、表示パネル２０２上の操作位置（座標）を検出する。
　図１３に示すように、本発明の撮影装置の一実施形態として例示しているスマートフォン２００の表示パネル２０２と操作パネル２０３とは一体となって表示入力部２０４を構成しているが、操作パネル２０３が表示パネル２０２を完全に覆うような配置となっている。
　係る配置を採用した場合、操作パネル２０３は、表示パネル２０２外の領域についても、利用者操作を検出する機能を備えてもよい。換言すると、操作パネル２０３は、表示パネル２０２に重なる重畳部分についての検出領域（以下、表示領域と称する）と、それ以外の表示パネル２０２に重ならない外縁部分についての検出領域（以下、非表示領域と称する）とを備えていてもよい。
　なお、表示領域の大きさと表示パネル２０２の大きさとを完全に一致させても良いが、両者を必ずしも一致させる必要は無い。また、操作パネル２０３が、外縁部分と、それ以外の内側部分の２つの感応領域を備えていてもよい。さらに、外縁部分の幅は、筐体２０１の大きさ等に応じて適宜設計されるものである。
　さらにまた、操作パネル２０３で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、静電容量方式等が挙げられ、いずれの方式を採用することもできる。
　通話部２１１は、スピーカ２０５又はマイクロホン２０６を備え、マイクロホン２０６を通じて入力された利用者の音声を主制御部２２０にて処理可能な音声データに変換して主制御部２２０に出力したり、無線通信部２１０あるいは外部入出力部２１３により受信された音声データを復号してスピーカ２０５から出力させたりするものである。
　また、図１２に示すように、例えば、スピーカ２０５を表示入力部２０４が設けられた面と同じ面に搭載し、マイクロホン２０６を筐体２０１の側面に搭載することができる。
　操作部２０７は、キースイッチ等を用いたハードウェアキーであって、利用者からの指示を受け付けるものである。例えば、図１２に示すように、操作部２０７は、スマートフォン２００の筐体２０１の側面に搭載され、指等で押下されるとオンとなり、指を離すとバネ等の復元力によってオフ状態となる押しボタン式のスイッチである。
　記憶部２１２は、主制御部２２０の制御プログラム及び制御データ、アプリケーションソフトウェア、通信相手の名称又は電話番号等を対応づけたアドレスデータ、送受信した電子メールのデータ、ＷｅｂブラウジングによりダウンロードしたＷｅｂデータ、ダウンロードしたコンテンツデータを記憶し、またストリーミングデータ等を一時的に記憶するものである。また、記憶部２１２は、スマートフォン内蔵の内部記憶部２１７と着脱自在な外部メモリスロットを有する外部記憶部２１８により構成される。
　なお、記憶部２１２を構成するそれぞれの内部記憶部２１７と外部記憶部２１８は、フラッシュメモリタイプ（ｆｌａｓｈ　ｍｅｍｏｒｙ　ｔｙｐｅ）、ハードディスクタイプ（ｈａｒｄ　ｄｉｓｋ　ｔｙｐｅ）、マルチメディアカードマイクロタイプ（ｍｕｌｔｉｍｅｄｉａ　ｃａｒｄ　ｍｉｃｒｏ　ｔｙｐｅ）、カードタイプのメモリ（例えば、ＭｉｃｒｏＳＤ（登録商標）メモリ等）、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）等の格納媒体を用いて実現される。
　外部入出力部２１３は、スマートフォン２００に連結される全ての外部機器とのインターフェースの役割を果たすものであり、他の外部機器に通信等（例えば、ユニバーサルシリアルバス（ＵＳＢ）、ＩＥＥＥ１３９４等）又はネットワーク（例えば、インターネット、無線ＬＡＮ、ブルートゥース（Ｂｌｕｅｔｏｏｔｈ）（登録商標）、ＲＦＩＤ（Ｒａｄｉｏ　Ｆｒｅｑｕｅｎｃｙ　Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）、赤外線通信（Ｉｎｆｒａｒｅｄ　Ｄａｔａ　Ａｓｓｏｃｉａｔｉｏｎ：ＩｒＤＡ）（登録商標）、ＵＷＢ（Ｕｌｔｒａ　Ｗｉｄｅｂａｎｄ）（登録商標）、ジグビー（ＺｉｇＢｅｅ）（登録商標）等）により直接的又は間接的に接続するためのものである。
　スマートフォン２００に連結される外部機器としては、例えば、有／無線ヘッドセット、有／無線外部充電器、有／無線データポート、カードソケットを介して接続されるメモリカード（Ｍｅｍｏｒｙ　ｃａｒｄ）、ＳＩＭ（Ｓｕｂｓｃｒｉｂｅｒ　Ｉｄｅｎｔｉｔｙ　Ｍｏｄｕｌｅ　Ｃａｒｄ）／ＵＩＭ（Ｕｓｅｒ　Ｉｄｅｎｔｉｔｙ　Ｍｏｄｕｌｅ　Ｃａｒｄ）カード、オーディオ・ビデオＩ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）端子を介して接続される外部オーディオ・ビデオ機器、無線接続される外部オーディオ・ビデオ機器、有／無線接続されるスマートフォン、有／無線接続されるパーソナルコンピュータ、有／無線接続されるパーソナルコンピュータ、イヤホン等がある。
　外部入出力部２１３は、このような外部機器から伝送を受けたデータをスマートフォン２００の内部の各構成要素に伝達したり、スマートフォン２００の内部のデータが外部機器に伝送されるようにしたりすることができる。
　ＧＰＳ受信部２１４は、主制御部２２０の指示にしたがって、ＧＰＳ衛星ＳＴ１～ＳＴｎから送信されるＧＰＳ信号を受信し、受信した複数のＧＰＳ信号に基づく測位演算処理を実行し、スマートフォン２００の緯度、経度、高度からなる位置を検出する。ＧＰＳ受信部２１４は、無線通信部２１０又は外部入出力部２１３（例えば、無線ＬＡＮ）から位置情報を取得できる時には、その位置情報を用いて位置を検出することもできる。
　モーションセンサ部２１５は、例えば、３軸の加速度センサ等を備え、主制御部２２０の指示にしたがって、スマートフォン２００の物理的な動きを検出する。スマートフォン２００の物理的な動きを検出することにより、スマートフォン２００の動く方向又は加速度が検出される。係る検出結果は、主制御部２２０に出力されるものである。
　電源部２１６は、主制御部２２０の指示にしたがって、スマートフォン２００の各部に、バッテリ（図示しない）に蓄えられる電力を供給するものである。
　主制御部２２０は、マイクロプロセッサを備え、記憶部２１２が記憶する制御プログラム及び制御データにしたがって動作し、スマートフォン２００の各部を統括して制御するものである。また、主制御部２２０は、無線通信部２１０を通じて、音声通信又はデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能を備える。
　アプリケーション処理機能は、記憶部２１２が記憶するアプリケーションソフトウェアにしたがって主制御部２２０が動作することにより実現するものである。アプリケーション処理機能としては、例えば、外部入出力部２１３を制御して対向機器とデータ通信を行う赤外線通信機能、電子メールの送受信を行う電子メール機能、又はウェブページを閲覧するウェブブラウジング機能等がある。
　また、主制御部２２０は、受信データ又はダウンロードしたストリーミングデータ等の画像データ（静止画像又は動画像のデータ）に基づいて、映像を表示入力部２０４に表示する等の画像処理機能を備える。
　画像処理機能とは、主制御部２２０が、上記画像データを復号し、この復号結果に画像処理を施して、画像を表示入力部２０４に表示する機能のことをいう。
　さらに、主制御部２２０は、表示パネル２０２に対する表示制御と、操作部２０７、操作パネル２０３を通じた利用者操作を検出する操作検出制御を実行する。
　表示制御の実行により、主制御部２２０は、アプリケーションソフトウェアを起動するためのアイコン又はスクロールバー等のソフトウェアキーを表示したり、あるいは電子メールを作成したりするためのウィンドウを表示する。
　なお、スクロールバーとは、表示パネル２０２の表示領域に収まりきれない大きな画像等について、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。
　また、操作検出制御の実行により、主制御部２２０は、操作部２０７を通じた利用者操作を検出したり、操作パネル２０３を通じて、上記アイコンに対する操作と上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、あるいは、スクロールバーを通じた表示画像のスクロール要求を受け付けたりする。
　さらに、操作検出制御の実行により主制御部２２０は、操作パネル２０３に対する操作位置が、表示パネル２０２に重なる重畳部分（表示領域）か、それ以外の表示パネル２０２に重ならない外縁部分（非表示領域）かを判定し、操作パネル２０３の感応領域又はソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。
　また、主制御部２２０は、操作パネル２０３に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。
　ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指等によって軌跡を描いたり、複数の位置を同時に指定したり、あるいはこれらを組み合わせて、複数の位置から少なくとも１つについて軌跡を描く操作を意味する。
　カメラ部２０８は、図１に示したデジタルカメラ１００における外部メモリ制御部２０、記憶媒体２１、表示部２２、及び操作部１４以外の構成を含む。
　カメラ部２０８によって生成された撮像画像は、記憶部２１２に記憶したり、外部入出力部２１３又は無線通信部２１０を通じて出力したりすることができる。
　図１２に示すスマートフォン２００において、カメラ部２０８は表示入力部２０４と同じ面に搭載されているが、カメラ部２０８の搭載位置はこれに限らず、表示入力部２０４の背面に搭載されてもよい。
　また、カメラ部２０８はスマートフォン２００の各種機能に利用することができる。例えば、表示パネル２０２にカメラ部２０８で取得した画像を表示したり、操作パネル２０３の操作入力のひとつとして、カメラ部２０８の画像を利用したりすることができる。
　また、ＧＰＳ受信部２１４が位置を検出する際に、カメラ部２０８からの画像を参照して位置を検出することもできる。さらには、カメラ部２０８からの画像を参照して、３軸の加速度センサを用いずに、或いは、３軸の加速度センサと併用して、スマートフォン２００のカメラ部２０８の光軸方向を判断したり、現在の使用環境を判断したりすることもできる。勿論、カメラ部２０８からの画像をアプリケーションソフトウェア内で利用することもできる。
　その他、静止画又は動画の画像データにＧＰＳ受信部２１４により取得した位置情報、マイクロホン２０６により取得した音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、モーションセンサ部２１５により取得した姿勢情報等を付加して記憶部２１２に記憶したり、外部入出力部２１３又は無線通信部２１０を通じて出力したりすることもできる。
　以上のような構成のスマートフォン２００においても、合焦精度を向上させることができる。
　以上説明してきたように、本明細書には以下の事項が開示されている。
（１）
　フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定部と、
　上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御部と、
　上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御部と、
　上記撮像条件制御部によって上記撮像条件が制御され、且つ、上記透過率制御部によって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御部と、を備える撮像制御装置。
（２）
　（１）記載の撮像制御装置であって、
　上記透過率制御部は、上記他の上記分割エリアに対応する上記エリアの光透過率を、上記他の上記分割エリアの明るさが上記設定値となる値に制御する撮像制御装置。
（３）
　（１）記載の撮像制御装置であって、
　上記透過率制御部は、上記他の上記分割エリアに対応する上記エリアの光透過率を、上記他の上記分割エリアの明るさが上記最低分割エリアの明るさと上記設定値との差の分だけ低下する値に制御する撮像制御装置。
（４）
　（３）記載の撮像制御装置であって、
　上記透過率制御部は、上記他の上記分割エリアに明るさが閾値以上となる分割エリアがある場合には、その分割エリアに対応する上記エリアの光透過率を、その分割エリアの明るさが上記設定値となる値に制御する撮像制御装置。
（５）
　（１）から（４）のいずれか１つに記載の撮像制御装置であって、
　上記第二の撮像画像信号の全体の明るさを、上記明るさ測定部により求められた上記最低分割エリアの明るさと上記設定値との差の分だけ減少させ、更に、上記第二の撮像画像信号における上記合焦対象エリアの上記他の上記分割エリアの明るさを、上記明るさ測定部により求められた上記他の上記分割エリアの明るさまで増加させて得られる上記第二の撮像画像信号から、表示部に表示するための表示用画像データを生成する画像処理部を更に備える撮像制御装置。
（６）
　（１）から（５）のいずれか１つに記載の撮像制御装置であって、
　上記撮像条件制御部によって上記撮像条件を制御し、且つ、上記透過率制御部によって上記光透過率を制御した状態にて上記撮像素子により被写体を撮像させる撮像制御を、複数フレームに１回の頻度で実行する撮像制御装置。
（７）
　（１）から（６）のいずれか１つに記載の撮像制御装置であって、
　上記第一の撮像画像信号に基づいて被写体の明るさを測定する測光処理部を更に備え、
　上記撮像条件制御部は、上記撮像条件を上記状態に制御する場合に、上記撮像素子の前方に配置される絞りの絞り値を、上記測光処理部によって測定された上記明るさに基づいて決められる上記絞りの絞り値と同じ値にする撮像制御装置。
（８）
　（１）から（６）のいずれか１つに記載の撮像制御装置であって、
　上記撮像条件制御部は、上記撮像条件を上記状態に制御する場合に、上記撮像素子の前方に配置される絞りの絞り値を、上記第一の撮像画像信号を得るための撮像時における上記絞りの絞り値と同じ値にする撮像制御装置。
（９）
　（１）から（８）のいずれか１つに記載の撮像制御装置と、
　上記撮像素子と、を備える撮像装置。
（１０）
　（９）記載の撮像装置であって、
　上記光学素子を更に備える撮像装置。
（１１）
　フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、
　上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御ステップと、
　上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御ステップと、
　上記撮像条件制御ステップによって上記撮像条件が制御され、且つ、上記透過率制御ステップによって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御ステップと、を備える撮像制御方法。
（１２）
　（１１）記載の撮像制御方法であって、
　上記透過率制御ステップでは、上記他の上記分割エリアに対応する上記エリアの光透過率を、上記他の上記分割エリアの明るさが上記設定値となる値に制御する撮像制御方法。
（１３）
　（１１）記載の撮像制御方法であって、
　上記透過率制御ステップでは、上記他の上記分割エリアに対応する上記エリアの光透過率を、上記他の上記分割エリアの明るさが上記最低分割エリアの明るさと上記設定値との差の分だけ低下する値に制御する撮像制御方法。
（１４）
　（１３）記載の撮像制御方法であって、
　上記透過率制御ステップでは、上記他の上記分割エリアに明るさが閾値以上となる分割エリアがある場合には、その分割エリアに対応する上記エリアの光透過率を、その分割エリアの明るさが上記設定値となる値に制御する撮像制御方法。
（１５）
　（１１）から（１４）のいずれか１つに記載の撮像制御方法であって、
　上記第二の撮像画像信号の全体の明るさを、上記明るさ測定ステップにより求められた上記最低分割エリアの明るさと上記設定値との差の分だけ減少させ、更に、上記第二の撮像画像信号における上記合焦対象エリアの上記他の上記分割エリアの明るさを、上記明るさ測定ステップにより求められた上記他の上記分割エリアの明るさまで増加させて得られる上記第二の撮像画像信号から、表示部に表示するための表示用画像データを生成する画像処理ステップを更に備える撮像制御方法。
（１６）
　（１１）から（１５）のいずれか１つに記載の撮像制御方法であって、
　上記撮像条件制御ステップによって上記撮像条件を制御し、且つ、上記透過率制御ステップによって上記光透過率を制御した状態にて上記撮像素子により被写体を撮像させる撮像制御を、複数フレームに１回の頻度で実行する撮像制御方法。
（１７）
　（１１）から（１６）のいずれか１つに記載の撮像制御方法であって、
　上記第一の撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップを更に備え、
　上記撮像条件制御ステップでは、上記撮像条件を上記状態に制御する場合に、上記撮像素子の前方に配置される絞りの絞り値を、上記測光処理ステップによって測定された上記明るさに基づいて決められる上記絞りの絞り値と同じ値にする撮像制御方法。
（１８）
　（１１）から（１６）のいずれか１つに記載の撮像制御方法であって、
　上記撮像条件制御ステップでは、上記撮像条件を上記状態に制御する場合に、上記撮像素子の前方に配置される絞りの絞り値を、上記第一の撮像画像信号を得るための撮像時における上記絞りの絞り値と同じ値にする撮像制御方法。
（１９）
　フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して上記撮像素子から得られる第一の撮像画像信号を取得し、上記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、
　上記分割エリア毎の上記明るさに基づいて決められる明るさの設定値に基づいて、上記撮像素子の撮像条件を、上記明るさが最低となる上記分割エリアである最低分割エリアの明るさが上記設定値となる状態に制御する撮像条件制御ステップと、
　上記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、上記最低分割エリアを除く他の上記分割エリアに対応する上記エリアの光透過率を制御して、上記他の上記分割エリアの明るさを低下させる透過率制御ステップと、
　上記撮像条件制御ステップによって上記撮像条件が制御され、且つ、上記透過率制御ステップによって上記光透過率が制御された状態にて上記撮像素子により被写体を撮像して上記撮像素子から得られる第二の撮像画像信号の上記合焦対象エリアに基づいて、上記フォーカスレンズの合焦制御を行う合焦制御ステップと、をコンピュータに実行させるための撮像制御プログラム。
　以上、図面を参照しながら各種の実施の形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上記実施の形態における各構成要素を任意に組み合わせてもよい。
　なお、本出願は、２０１８年３月２３日出願の日本特許出願（特願２０１８－０５７２４４）に基づくものであり、その内容は本出願の中に参照として援用される。
　本発明によれば、合焦精度の向上が可能な撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラムを提供することができる。
１００　デジタルカメラ
４０Ａ　レンズ装置
１　撮像レンズ
２　絞り
４　レンズ制御部
８　レンズ駆動部
９　絞り駆動部
４０Ｂ　本体部
３　可変ＮＤフィルタ
３Ａ　ＮＤ駆動部
３０　ブロック
ａｆ１、ａｆ２、ａｆ３　エリア
５　撮像素子
５Ａ　撮像素子駆動部
５０　撮像画像信号
５０Ａ　ブロック
ＡＦ１、ＡＦ２、ＡＦ３　分割エリア
１１　システム制御部
１１Ａ　明るさ測定部
１１Ｂ　撮像条件制御部
１１Ｃ　透過率制御部
１１Ｄ　合焦制御部
１１Ｅ　測光処理部
Ｄ１　補正量
１４　操作部
１５　メモリ制御部
１６　メモリ
１７　デジタル信号処理部
２０　外部メモリ制御部
２１　記憶媒体
２２　表示部
２４　制御バス
２５　データバス
２００　スマートフォン
２０１　筐体
２０２　表示パネル
２０３　操作パネル
２０４　表示入力部
２０５　スピーカ
２０６　マイクロホン
２０７　操作部
２０８　カメラ部
２１０　無線通信部
２１１　通話部
２１２　記憶部
２１３　外部入出力部
２１４　ＧＰＳ受信部
２１５　モーションセンサ部
２１６　電源部
２１７　内部記憶部
２１８　外部記憶部
２２０　主制御部
ＳＴ１～ＳＴｎ　ＧＰＳ衛星

Claims (19)

  1. 　フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して前記撮像素子から得られる第一の撮像画像信号を取得し、前記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定部と、
    　前記分割エリア毎の前記明るさに基づいて決められる明るさの設定値に基づいて、前記撮像素子の撮像条件を、前記明るさが最低となる前記分割エリアである最低分割エリアの明るさが前記設定値となる状態に制御する撮像条件制御部と、
    　前記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、前記最低分割エリアを除く他の前記分割エリアに対応する前記エリアの光透過率を制御して、前記他の前記分割エリアの明るさを低下させる透過率制御部と、
    　前記撮像条件制御部によって前記撮像条件が制御され、且つ、前記透過率制御部によって前記光透過率が制御された状態にて前記撮像素子により被写体を撮像して前記撮像素子から得られる第二の撮像画像信号の前記合焦対象エリアに基づいて、前記フォーカスレンズの合焦制御を行う合焦制御部と、を備える撮像制御装置。
  2. 　請求項１記載の撮像制御装置であって、
    　前記透過率制御部は、前記他の前記分割エリアに対応する前記エリアの光透過率を、前記他の前記分割エリアの明るさが前記設定値となる値に制御する撮像制御装置。
  3. 　請求項１記載の撮像制御装置であって、
    　前記透過率制御部は、前記他の前記分割エリアに対応する前記エリアの光透過率を、前記他の前記分割エリアの明るさが前記最低分割エリアの明るさと前記設定値との差の分だけ低下する値に制御する撮像制御装置。
  4. 　請求項３記載の撮像制御装置であって、
    　前記透過率制御部は、前記他の前記分割エリアに明るさが閾値以上となる分割エリアがある場合には、当該分割エリアに対応する前記エリアの光透過率を、当該分割エリアの明るさが前記設定値となる値に制御する撮像制御装置。
  5. 　請求項１から４のいずれか１項記載の撮像制御装置であって、
    　前記第二の撮像画像信号の全体の明るさを、前記明るさ測定部により求められた前記最低分割エリアの明るさと前記設定値との差の分だけ減少させ、更に、前記第二の撮像画像信号における前記合焦対象エリアの前記他の前記分割エリアの明るさを、前記明るさ測定部により求められた前記他の前記分割エリアの明るさまで増加させて得られる前記第二の撮像画像信号から、表示部に表示するための表示用画像データを生成する画像処理部を更に備える撮像制御装置。
  6. 　請求項１から５のいずれか１項記載の撮像制御装置であって、
    　前記撮像条件制御部によって前記撮像条件を制御し、且つ、前記透過率制御部によって前記光透過率を制御した状態にて前記撮像素子により被写体を撮像させる撮像制御を、複数フレームに１回の頻度で実行する撮像制御装置。
  7. 　請求項１から６のいずれか１項記載の撮像制御装置であって、
    　前記第一の撮像画像信号に基づいて被写体の明るさを測定する測光処理部を更に備え、
    　前記撮像条件制御部は、前記撮像条件を前記状態に制御する場合に、前記撮像素子の前方に配置される絞りの絞り値を、前記測光処理部によって測定された前記明るさに基づいて決められる前記絞りの絞り値と同じ値にする撮像制御装置。
  8. 　請求項１から６のいずれか１項記載の撮像制御装置であって、
    　前記撮像条件制御部は、前記撮像条件を前記状態に制御する場合に、前記撮像素子の前方に配置される絞りの絞り値を、前記第一の撮像画像信号を得るための撮像時における前記絞りの絞り値と同じ値にする撮像制御装置。
  9. 　請求項１から８のいずれか１項記載の撮像制御装置と、
    　前記撮像素子と、を備える撮像装置。
  10. 　請求項９記載の撮像装置であって、
    　前記光学素子を更に備える撮像装置。
  11. 　フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して前記撮像素子から得られる第一の撮像画像信号を取得し、前記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、
    　前記分割エリア毎の前記明るさに基づいて決められる明るさの設定値に基づいて、前記撮像素子の撮像条件を、前記明るさが最低となる前記分割エリアである最低分割エリアの明るさが前記設定値となる状態に制御する撮像条件制御ステップと、
    　前記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、前記最低分割エリアを除く他の前記分割エリアに対応する前記エリアの光透過率を制御して、前記他の前記分割エリアの明るさを低下させる透過率制御ステップと、
    　前記撮像条件制御ステップによって前記撮像条件が制御され、且つ、前記透過率制御ステップによって前記光透過率が制御された状態にて前記撮像素子により被写体を撮像して前記撮像素子から得られる第二の撮像画像信号の前記合焦対象エリアに基づいて、前記フォーカスレンズの合焦制御を行う合焦制御ステップと、を備える撮像制御方法。
  12. 　請求項１１記載の撮像制御方法であって、
    　前記透過率制御ステップでは、前記他の前記分割エリアに対応する前記エリアの光透過率を、前記他の前記分割エリアの明るさが前記設定値となる値に制御する撮像制御方法。
  13. 　請求項１１記載の撮像制御方法であって、
    　前記透過率制御ステップでは、前記他の前記分割エリアに対応する前記エリアの光透過率を、前記他の前記分割エリアの明るさが前記最低分割エリアの明るさと前記設定値との差の分だけ低下する値に制御する撮像制御方法。
  14. 　請求項１３記載の撮像制御方法であって、
    　前記透過率制御ステップでは、前記他の前記分割エリアに明るさが閾値以上となる分割エリアがある場合には、当該分割エリアに対応する前記エリアの光透過率を、当該分割エリアの明るさが前記設定値となる値に制御する撮像制御方法。
  15. 　請求項１１から１４のいずれか１項記載の撮像制御方法であって、
    　前記第二の撮像画像信号の全体の明るさを、前記明るさ測定ステップにより求められた前記最低分割エリアの明るさと前記設定値との差の分だけ減少させ、更に、前記第二の撮像画像信号における前記合焦対象エリアの前記他の前記分割エリアの明るさを、前記明るさ測定ステップにより求められた前記他の前記分割エリアの明るさまで増加させて得られる前記第二の撮像画像信号から、表示部に表示するための表示用画像データを生成する画像処理ステップを更に備える撮像制御方法。
  16. 　請求項１１から１５のいずれか１項記載の撮像制御方法であって、
    　前記撮像条件制御ステップによって前記撮像条件を制御し、且つ、前記透過率制御ステップによって前記光透過率を制御した状態にて前記撮像素子により被写体を撮像させる撮像制御を、複数フレームに１回の頻度で実行する撮像制御方法。
  17. 　請求項１１から１６のいずれか１項記載の撮像制御方法であって、
    　前記第一の撮像画像信号に基づいて被写体の明るさを測定する測光処理ステップを更に備え、
    　前記撮像条件制御ステップでは、前記撮像条件を前記状態に制御する場合に、前記撮像素子の前方に配置される絞りの絞り値を、前記測光処理ステップによって測定された前記明るさに基づいて決められる前記絞りの絞り値と同じ値にする撮像制御方法。
  18. 　請求項１１から１６のいずれか１項記載の撮像制御方法であって、
    　前記撮像条件制御ステップでは、前記撮像条件を前記状態に制御する場合に、前記撮像素子の前方に配置される絞りの絞り値を、前記第一の撮像画像信号を得るための撮像時における前記絞りの絞り値と同じ値にする撮像制御方法。
  19. 　フォーカスレンズを通して被写体を撮像する撮像素子により被写体を撮像して前記撮像素子から得られる第一の撮像画像信号を取得し、前記第一の撮像画像信号に設定されている合焦対象エリアの分割エリア毎の明るさを求める明るさ測定ステップと、
    　前記分割エリア毎の前記明るさに基づいて決められる明るさの設定値に基づいて、前記撮像素子の撮像条件を、前記明るさが最低となる前記分割エリアである最低分割エリアの明るさが前記設定値となる状態に制御する撮像条件制御ステップと、
    　前記撮像素子の前方に配置される複数のエリア毎に光透過率が可変の光学素子における、前記最低分割エリアを除く他の前記分割エリアに対応する前記エリアの光透過率を制御して、前記他の前記分割エリアの明るさを低下させる透過率制御ステップと、
    　前記撮像条件制御ステップによって前記撮像条件が制御され、且つ、前記透過率制御ステップによって前記光透過率が制御された状態にて前記撮像素子により被写体を撮像して前記撮像素子から得られる第二の撮像画像信号の前記合焦対象エリアに基づいて、前記フォーカスレンズの合焦制御を行う合焦制御ステップと、をコンピュータに実行させるための撮像制御プログラム。
PCT/JP2019/008920 2018-03-23 2019-03-06 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム WO2019181515A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020508173A JP6785395B2 (ja) 2018-03-23 2019-03-06 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム
US17/022,127 US11102419B2 (en) 2018-03-23 2020-09-16 Imaging control device, imaging apparatus, imaging control method, and imaging control program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-057244 2018-03-23
JP2018057244 2018-03-23

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/022,127 Continuation US11102419B2 (en) 2018-03-23 2020-09-16 Imaging control device, imaging apparatus, imaging control method, and imaging control program

Publications (1)

Publication Number Publication Date
WO2019181515A1 true WO2019181515A1 (ja) 2019-09-26

Family

ID=67986202

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/008920 WO2019181515A1 (ja) 2018-03-23 2019-03-06 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム

Country Status (3)

Country Link
US (1) US11102419B2 (ja)
JP (1) JP6785395B2 (ja)
WO (1) WO2019181515A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2020235166A1 (ja) * 2019-05-21 2020-11-26

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6950072B2 (ja) * 2018-03-09 2021-10-13 富士フイルム株式会社 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム
KR20210149542A (ko) * 2020-06-02 2021-12-09 삼성에스디에스 주식회사 이미지 촬영 및 판독 방법, 이를 위한 장치
CN111736401B (zh) * 2020-06-30 2021-11-16 联想(北京)有限公司 光学面板、图像采集设备及图像采集方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002365522A (ja) * 2001-06-06 2002-12-18 Ricoh Co Ltd 合焦制御装置
JP2016015599A (ja) * 2014-07-01 2016-01-28 キヤノン株式会社 撮像装置、制御方法およびプログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07120309A (ja) 1993-10-26 1995-05-12 Nikon Corp カメラの測光装置
US5815743A (en) * 1995-10-04 1998-09-29 Minolta Co., Ltd. Flash-assisted photographing system and a device for use in the same
KR101940481B1 (ko) * 2011-05-18 2019-04-10 엘지이노텍 주식회사 카메라 모듈 및 그의 구동 방법
JP2013012997A (ja) 2011-06-30 2013-01-17 Canon Inc 調光素子制御装置、その制御方法、および制御プログラム、並びに撮像装置
CN103988489B (zh) * 2011-09-30 2017-12-01 富士胶片株式会社 成像设备和成像方法
WO2015016085A1 (ja) * 2013-08-01 2015-02-05 富士フイルム株式会社 撮影方法及び装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002365522A (ja) * 2001-06-06 2002-12-18 Ricoh Co Ltd 合焦制御装置
JP2016015599A (ja) * 2014-07-01 2016-01-28 キヤノン株式会社 撮像装置、制御方法およびプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2020235166A1 (ja) * 2019-05-21 2020-11-26
JP7371685B2 (ja) 2019-05-21 2023-10-31 ソニーグループ株式会社 撮像装置、透過率指示装置、透過率制御方法、プログラム

Also Published As

Publication number Publication date
JPWO2019181515A1 (ja) 2020-12-03
JP6785395B2 (ja) 2020-11-18
US20210006701A1 (en) 2021-01-07
US11102419B2 (en) 2021-08-24

Similar Documents

Publication Publication Date Title
WO2019181515A1 (ja) 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム
US9703070B2 (en) Imaging apparatus and focusing control method
JP6028112B2 (ja) 撮像装置及び合焦制御方法
JP6307526B2 (ja) 撮像装置及び合焦制御方法
US10778903B2 (en) Imaging apparatus, imaging method, and program
WO2015141084A1 (ja) 撮像装置及び合焦制御方法
US20160277656A1 (en) Device having camera function and method of image capture
US9942483B2 (en) Information processing device and method using display for auxiliary light
US11032483B2 (en) Imaging apparatus, imaging method, and program
US10863095B2 (en) Imaging apparatus, imaging method, and imaging program
EP4236295A1 (en) Image capturing method and electronic device
JP5768193B2 (ja) 画像処理装置、撮像装置、画像処理方法、画像処理プログラム
US11082623B2 (en) Imaging control device, imaging apparatus, imaging control method, and imaging control program with light measurement
JP7210517B2 (ja) 撮像装置、撮像制御方法、撮像制御プログラム
WO2020170945A1 (ja) 表示制御装置、撮像装置、表示制御方法、及び表示制御プログラム
WO2020209097A1 (ja) 画像表示装置、画像表示方法、及びプログラム
JP5832673B2 (ja) 撮像装置およびその動作制御方法
JP6765027B2 (ja) 撮像制御装置、撮像装置、撮像制御方法、及び撮像制御プログラム
JP7085651B2 (ja) 撮像装置の制御装置、撮像装置、撮像装置の制御方法、撮像装置の制御プログラム
WO2014073441A1 (ja) 撮像装置およびその動作制御方法
JP2023024485A (ja) 画像表示装置、画像表示方法、及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19772057

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020508173

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19772057

Country of ref document: EP

Kind code of ref document: A1