CN105493493B - 摄像装置、摄像方法及图像处理装置 - Google Patents

摄像装置、摄像方法及图像处理装置 Download PDF

Info

Publication number
CN105493493B
CN105493493B CN201480041577.5A CN201480041577A CN105493493B CN 105493493 B CN105493493 B CN 105493493B CN 201480041577 A CN201480041577 A CN 201480041577A CN 105493493 B CN105493493 B CN 105493493B
Authority
CN
China
Prior art keywords
restoration disposal
subject
image
recovery
filter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480041577.5A
Other languages
English (en)
Other versions
CN105493493A (zh
Inventor
林健吉
杉本雅彦
成濑洋介
入江公祐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN105493493A publication Critical patent/CN105493493A/zh
Application granted granted Critical
Publication of CN105493493B publication Critical patent/CN105493493B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G06T5/73—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/10—Image enhancement or restoration by non-spatial domain filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/20—Image enhancement or restoration by the use of local operators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • H04N25/615—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4" involving a transfer function modelling the optical system, e.g. optical transfer function [OTF], phase transfer function [PhTF] or modulation transfer function [MTF]
    • H04N25/6153—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4" involving a transfer function modelling the optical system, e.g. optical transfer function [OTF], phase transfer function [PhTF] or modulation transfer function [MTF] for colour signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20201—Motion blur correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/672—Focus control based on electronic image sensor signals based on the phase difference signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/673—Focus control based on electronic image sensor signals based on contrast or high frequency components of image signals, e.g. hill climbing method

Abstract

本发明提供一种摄像装置、摄像方法及图像处理装置，所述摄像装置中，即使在摄影期间对焦对象的被摄体或相机移动而摄影获取到散焦状态的图像时，也抑制通过对这种散焦状态的图像进行的复原处理而有可能带来的画质劣化。作为本发明的一方式的摄像装置(10)具备：被摄体距离获取部(115)；移动量获取部(120)，根据该被摄体距离获取被摄体的移动量；复原处理判断部(125)，根据通过移动量获取部(120)获取的移动量，判断是通过复原滤波器对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理；及复原处理执行部(105)，根据复原处理判断部(125)的判断，通过复原滤波器或调节复原强度来对图像执行复原处理。

Description

摄像装置、摄像方法及图像处理装置
技术领域
本发明涉及一种摄像装置、摄像方法及图像处理装置，尤其涉及一种进行基于点扩散函数的复原处理的摄像装置、摄像方法及图像处理装置。
背景技术
在经由光学系统而被摄影的被摄体像中，由于由光学系统引起的衍射、像差等的影响，有时会出现点被摄体具有微小的扩散的、所谓的点扩散现象。表示光学系统相对于点光源的响应的函数被称作点扩散函数(PSF：Point Spread Function)，作为影响摄影图像的分辨率劣化(模糊)的参数而被公知。
由于该点扩散现象而画质劣化的摄影图像能够通过接受基于PSF的复原处理(点像复原处理)来恢复画质。复原处理是如下处理，即，预先求出由透镜(光学系统)的像差等引起的劣化特性(点像特性)，通过利用与该点像特性相应的复原滤波器的图像处理来消除摄影图像的点扩散。
对于该复原处理，提出有各种方法，例如专利文献1中公开了用于避免使图像质量劣化而进行摄影图像的恢复处理的摄像装置。该摄像装置，判定点像扩散函数(点扩散函数)的可靠性，并根据该可靠性的判定结果进行图像恢复处理。
并且，专利文献2中公开了用于提高无法从自动调焦机构获得被摄体距离时的图像恢复精度的图像恢复装置。该图像恢复装置中，推断被摄体距离，根据该推断结果计算恢复滤波器，并使用该计算出的恢复滤波器恢复图像数据。
以往技术文献
专利文献
专利文献1：日本专利公开2009-260622号公报
专利文献2：日本专利公开2011-217274号公报
发明内容
发明要解决的技术课题
上述的复原处理为将由于作为光学特性之一的基于光学系统的点扩散现象(摄像光学特性)而模糊的图像复原为原本的清晰图像的处理，是通过对已画质劣化的原图像数据适用基于点扩散函数的复原滤波器来获取已消除画质劣化的恢复图像的技术。
因此，若准确地掌握由于光学系统的点扩散现象而带来的画质劣化，设计能够严密地消除这种画质劣化的复原滤波器，因基于光学系统的点扩散现象引起的画质劣化可靠地反映于原图像数据，则原理上能够从“已画质劣化的摄影图像”获得“如实地再现被摄体像的高画质的图像”。
因此，为了获得如实地再现被摄体像的恢复图像，需要使在复原处理中使用的“复原滤波器的特性”与“点扩散现象引起的原图像数据的画质劣化”适当地匹配。
然而，根据被摄体像或摄影设备类的特性，有时“复原滤波器的特性”与“原图像数据的画质劣化”并未适当地匹配。
例如，动态图像摄影中，在摄影期间被摄体或相机移动，由此被摄体距离等摄影条件改变而导致对焦位置中的聚焦状态发生变化，导致成为散焦状态。即使成为这种散焦状态，自动调焦功能发挥作用时，聚焦状态自动恢复，能够继续进行焦点对焦于主要被摄体的动态图像摄影。
然而，从“伴随被摄体距离等摄影条件的变动的散焦状态”至“基于自动调焦功能的聚焦状态的自动恢复”需要时间。该“从散焦状态向聚焦状态的自动恢复为止的时间(恢复处理时间)”根据每个摄影设备的自动调焦能力而发生变动，在此期间成为未聚焦的状态。另一方面，在该恢复处理时间期间也摄影动态图像，对在此期间摄影的“未对焦的动态图像”进行的复原处理中，“复原滤波器的特性”与“原图像数据的画质劣化”并未适当地匹配。若对这种散焦图像进行复原处理，则有时由于过校正等而发生画质劣化。因此，在进行从散焦状态向适当的聚焦状态的调整的期间内摄影的图像处于不适于进行复原处理的状态。
这在如下情况下也相同，即，确定对焦对象的被摄体而跟踪该被摄体的同时继续进行对焦的跟踪自动调焦功能(包含连续自动调焦功能)发挥作用。即，相对于被摄体或相机的移动，摄影设备的跟踪能力或自动调焦速度并不充分时，反而易产生“复原滤波器的特性”与“原图像数据的画质劣化”并未适当地匹配的状态，并且在从“伴随被摄体或相机的移动的散焦状态”至“基于跟踪自动调焦功能的聚焦状态的自动恢复”为止期间摄影的动态图像成为“未对焦的动态图像”。并且，在对这种“未对焦的动态图像”进行的复原处理中使用的复原滤波器的特性与动态图像的画质劣化(点扩散现象)并不适当地匹配。
如此，若对“点扩散现象引起的原图像数据的画质劣化”使用并未适当地匹配的复原滤波器进行复原处理，则无法充分消除画质劣化，有时会通过复原处理加深画质劣化。
上述的专利文献1及专利文献2中完全未提及上述课题，并未公开或暗示用于解决这种课题的有效的方法。
本发明是鉴于这种情况而完成的，其目的在于提供一种如下技术：即使由于摄影期间对焦对象的被摄体或相机移动而摄影获取到散焦状态的图像，也可抑制通过对这种散焦状态的图像进行的复原处理而有可能带来的画质劣化。
用于解决技术课题的手段
本发明的一方式涉及一种摄像装置，其具备：摄像部，生成通过光学系统捕捉的被摄体的连续的多个图像；滤波器获取部，获取与有关光学系统的点像分布的传递函数对应地生成的复原滤波器；被摄体距离获取部，获取由摄像部生成的图像的被摄体的被摄体距离；移动量获取部，根据由被摄体距离获取部获取的被摄体距离，获取在摄像部中生成的连续的多个图像之间的、光学系统的光轴方向上的被摄体的移动量；复原处理判断部，根据通过移动量获取部获取的移动量，判断是通过复原滤波器对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理；复原强度调节部，通过复原处理判断部判断为调节复原处理的复原强度来对图像进行复原处理时，调节复原处理的复原强度；及复原处理执行部，根据复原处理判断部的判断，通过复原滤波器或调节复原强度来对图像执行复原处理。
根据本方式，根据被摄体的移动量，判断是否调节复原处理的复原强度或是否执行复原处理，并进行与该判断结果相应的处理。因此，即使在图像摄影期间被摄体或相机移动而摄影获取到散焦状态的图像，也能够通过调节对这种散焦状态的图像进行的复原处理的复原强度或不进行复原处理，有效地抑制通过复原处理有可能带来的画质劣化。
另外，“通过光学系统捕捉的被摄体的连续的多个图像”是经时连续摄影获取的多个图像，包含由连续的多个帧构成并存储于存储器的记录动态图像、摄影时或在摄影前后显示于显示部的即时预览图像、通过连续的快门动作(连拍)获取的多个静态图像等。
本发明的另一方式涉及一种摄像装置，其具备：摄像部，生成通过光学系统捕捉的被摄体的连续的多个图像；自动调焦部，跟踪被摄体来进行光学系统的自动调焦控制；滤波器获取部，获取与有关光学系统的点像分布的传递函数对应地生成的复原滤波器；被摄体距离获取部，获取由摄像部生成的图像的被摄体的被摄体距离；移动量获取部，根据由被摄体距离获取部获取的被摄体距离，获取在摄像部中生成的连续的多个图像之间的、光学系统的光轴方向上的被摄体的移动量；复原处理执行部，对图像执行复原处理；及跟踪自动调焦判断部，通过复原处理执行部对连续的多个图像执行复原处理时，根据通过移动量获取部获取的移动量，判断跟踪被摄体的光学系统的自动调焦控制是被中止或持续，所述摄像装置中，当通过跟踪自动调焦判断部判断为跟踪被摄体的光学系统的自动调焦控制被中止时，自动调焦部对由摄像部生成的图像中的聚焦区内的被摄体进行光学系统的自动调焦控制。
根据本方式，根据被摄体的移动量，判断有无持续跟踪被摄体的自动调焦控制，并进行与该判断结果相应的自动调焦控制。被摄体的移动量较大时，跟踪自动调焦被中止，重新进行对聚焦区内的被摄体的自动调焦控制。通过进行如本方式的自动调焦控制，当被摄体的移动量较大时等，跟踪自动调焦被中止，能够避免持续摄影散焦状态的图像的现象。
本发明的另一方式涉及一种摄像装置，其具备：摄像部，生成通过光学系统捕捉的被摄体的连续的多个图像；帧速率设定部，设定与摄像部中的图像的生成有关的帧速率；滤波器获取部，获取与有关光学系统的点像分布的传递函数对应地生成的复原滤波器；复原处理判断部，根据在帧速率设定部中设定的帧速率，判断是通过复原滤波器对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理；复原强度调节部，通过复原处理判断部判断为调节复原处理的复原强度来对图像进行复原处理时，调节复原处理的复原强度；及复原处理执行部，根据复原处理判断部的判断，通过复原滤波器或调节复原强度来对图像执行复原处理。
本方式中，根据所设定的帧速率，判断有无调节复原处理的复原强度或有无执行复原处理，并进行与该判断结果相应的处理。因此，例如帧速率充分高时，相对于被摄体的移动，各帧中能够进行适当的摄影，因此可进行维持复原强度的复原处理。并且，帧速率不够高时，相对于被摄体的移动，各帧中无法进行适当的摄影，因此可设为进行减弱复原强度的复原处理或不进行复原处理。由此，能够有效地防止复原处理引起的画质劣化。
优选摄像装置还具备：复原处理判断部，根据通过移动量获取部获取的移动量，判断是通过复原滤波器对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理；及复原强度调节部，通过复原处理判断部判断为调节复原处理的复原强度来对图像进行复原处理时，调节复原处理的复原强度，复原处理执行部根据复原处理判断部的判断，通过复原滤波器或调节复原强度来对图像执行复原处理。
根据本方式，根据移动量，判断是进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理，并进行图像处理。由此，能够执行适于被摄体的移动量的复原处理。
优选摄像装置还具有帧速率设定部，其设定与摄像部中的图像的生成有关的帧速率，复原处理判断部根据通过帧速率设定部设定的帧速率及通过移动量获取部获取的被摄体的移动量，判断是通过复原滤波器对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理。
根据本方式，根据所设定的帧速率及被摄体的移动量，判断有无调节复原处理的复原强度或有无执行复原处理，并进行与该判断结果相应的处理。因此，例如相对于被摄体的移动量，帧速率充分高时，相对于被摄体的移动，各帧中能够进行适当的摄影，因此可进行维持复原强度的复原处理。并且，相对于被摄体的移动量，帧速率不够高时，相对于被摄体的移动，各帧中无法进行适当的摄影，因此可设为进行减弱复原强度的复原处理或不进行复原处理。由此，能够有效地防止基于复原处理的画质劣化。
优选当被摄体处于聚焦状态时，复原处理判断部判断为通过复原滤波器对图像进行复原处理，当被摄体处于散焦状态时，复原处理判断部判断为调节复原处理的复原强度来对图像进行复原处理。
根据本方式，根据被摄体是处于散焦状态还是处于聚焦状态来判断有无调节复原处理的复原强度，因此能够进行防止过校正等的画质劣化的适当的复原处理。
优选复原处理判断部根据光学系统的光轴方向的移动量及被摄体距离，判断是通过复原滤波器对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理。
根据本方式，根据被摄体向光轴方向的移动量及被摄体距离判断有无执行复原处理及有无调节复原处理的复原强度，因此能够更可靠地防止伴随被摄体距离的变动的“复原处理引起的画质劣化”。
优选复原强度调节部通过调节复原滤波器的滤波器系数或调节复原处理的增益来调节复原处理的复原强度。
根据本方式，通过调节复原滤波器的滤波器系数或调节复原处理的增益，能够适当且简单地调节复原处理的复原强度。
优选滤波器获取部根据与被摄体的拍摄有关的摄影条件，获取复原滤波器。
根据本方式，能够获取反映有摄影条件的适当的复原滤波器。
优选摄像装置还具有模糊图像校正处理部，当判断为不对图像进行复原处理时，复原处理判断部判断进行与复原处理不同的模糊图像校正处理，当通过复原处理判断部判断为进行模糊图像校正处理时，模糊图像校正处理部对图像进行模糊图像校正处理。
根据本方式，即使在不进行复原处理时也进行模糊图像校正处理，因此图像的模糊减少，能够获得高清图像。在此所说的“模糊图像校正处理”是不基于点扩散函数的图像处理，包含可减轻图像的模糊的各种处理，例如可包含轮廓强调处理等。轮廓强调处理是例如使图像的轮廓部的浓度梯度急剧来获得清晰的图像的处理，可包含强调处理对象图像的高频成分的图像处理。
优选光学系统为更换式。
如本方式，通过更换式的光学系统，即使在光学系统的特性发生变化时，也能够进行抑制画质劣化的适当的的复原处理。
优选摄像装置还具有显示部，将通过复原处理执行部通过复原滤波器或调节复原强度来对图像执行了复原处理的图像作为即时预览图像显示于显示部。
根据本方式，对即时预览图像，也能够有效地抑制通过复原处理有可能带来的画质劣化。
本发明的另一方式涉及一种摄像方法，其包含：生成步骤，生成通过光学系统捕捉的被摄体的连续的多个图像；滤波器获取步骤，获取与有关光学系统的点像分布的传递函数对应地生成的复原滤波器；被摄体距离获取步骤，获取在生成步骤中生成的图像的被摄体的被摄体距离；移动量获取步骤，根据在被摄体距离获取步骤中获取的被摄体距离，获取在生成步骤中生成的连续的多个图像之间的、光学系统的光轴方向上的被摄体的移动量；复原处理判断步骤，根据通过移动量获取步骤获取的移动量，判断是通过复原滤波器对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理；复原强度调节步骤，通过复原处理判断步骤判断为调节复原处理的复原强度来对图像进行复原处理时，调节复原处理的复原强度；及复原处理执行步骤，根据复原处理判断步骤的判断，通过复原滤波器或调节复原强度来对图像执行复原处理。
本发明的另一方式涉及一种摄像方法，其包含：生成步骤，生成通过光学系统捕捉的被摄体的连续的多个图像；自动调焦步骤，跟踪被摄体来进行光学系统的自动调焦控制；滤波器获取步骤，获取与有关光学系统的点像分布的传递函数对应地生成的复原滤波器；被摄体距离获取步骤，获取在生成步骤中生成的图像的被摄体的被摄体距离；移动量获取步骤，根据在被摄体距离获取步骤中获取的被摄体距离，获取在生成步骤中生成的连续的多个图像之间的、光学系统的光轴方向上的被摄体的移动量；复原处理执行步骤，对图像执行复原处理；及跟踪自动调焦判断步骤，通过复原处理执行步骤对连续的多个图像执行复原处理时，根据通过移动量获取步骤获取的移动量，判断跟踪被摄体的光学系统的自动调焦控制是被中止或持续，所述摄像方法中，自动调焦步骤中，当通过跟踪自动调焦判断步骤判断为跟踪被摄体的光学系统的自动调焦控制被中止时，对在生成步骤中生成的图像中的聚焦区内的被摄体进行光学系统的自动调焦控制。
本发明的另一方式涉及一种摄像方法，其包含：生成步骤，生成通过光学系统捕捉的被摄体的连续的多个图像；帧速率设定步骤，设定与生成步骤中的图像的生成有关的帧速率；波器获取步骤，获取与有关光学系统的点像分布的传递函数对应地生成的复原滤波器；复原处理判断步骤，根据通过帧速率设定步骤设定的帧速率，判断是通过复原滤波器对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理；复原强度调节步骤，当通过复原处理判断步骤判断为调节复原处理的复原强度来对图像进行复原处理时，调节复原处理的复原强度；及复原处理执行步骤，根据复原处理判断步骤的判断，通过复原滤波器或调节复原强度来对图像执行复原处理。
本发明的另一方式涉及一种图像处理装置，其具备：图像获取部，从摄像部获取通过光学系统捕捉的被摄体的连续的多个图像；滤波器获取部，获取与有关光学系统的点像分布的传递函数对应地生成的复原滤波器；被摄体距离获取部，获取从摄像部获取的图像的所述被摄体的被摄体距离；移动量获取部，根据由被摄体距离获取部获取的被摄体距离，获取从摄像部获取的连续的多个所述图像之间的、光学系统的光轴方向上的被摄体的移动量；复原处理判断部，根据通过移动量获取部获取的移动量，判断是通过复原滤波器对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理；复原强度调节部，通过复原处理判断部判断为调节复原处理的复原强度来对图像进行复原处理时，调节复原处理的复原强度；及复原处理执行部，根据复原处理判断部的判断，通过复原滤波器或调节复原强度来对图像执行复原处理。并且，优选被摄体距离获取部从图像数据获取记录于所述图像数据的被摄体距离。
发明效果
本方式中，根据被摄体的移动量或所设定的帧速率，判断有无调节复原处理的复原强度、有无执行复原处理、或有无执行跟踪自动调焦控制，并进行与该判断结果相应的处理，因此能够有效地抑制通过复原处理有可能带来的画质劣化。
附图说明
图1是表示连接于计算机的数码相机的概略的框图。
图2是表示相机主体控制器的功能结构例的框图。
图3是表示从图像摄影至复原处理为止的概略的图。
图4是表示复原处理的一例的概略的框图。
图5是有关第1实施方式的复原处理的功能框图。
图6是用于说明移动量获取部中的被摄体移动量的获取例的图。
图7是用于说明移动量获取部中的被摄体移动量的获取例的图。
图8是表示被摄体Q的移动量的变化例的曲线图，横轴表示时间T，纵轴表示被摄体距离R。
图9是表示连续摄影的图像(帧)例的图，示意地表示对以图8所示的“时间-被摄体距离”的关系沿光轴方向移动的被摄体进行摄影的图像。
图10是表示图像调整部(复原强度调节部、复原处理执行部)中的复原处理例的控制框图。
图11是表示第1实施方式所涉及的复原处理的流程的流程图。
图12是有关第2实施方式的复原处理的功能框图。
图13A及图13B是用于说明跟踪自动调焦的图，表示显示于数码相机的显示部的即时预览图像。
图14是表示第2实施方式所涉及的复原处理的流程的流程图。
图15是有关第3实施方式的复原处理的功能框图。
图16是用于说明以不同帧速率生成的移动被摄体Q的图像的图。
图17是表示第3实施方式所涉及的复原处理的流程的流程图。
图18是表示第3实施方式所涉及的复原处理的流程的一变形例的流程图。
图19是表示第4实施方式所涉及的复原处理的流程的流程图。
图20是有关第5实施方式的复原处理的功能框图。
图21是表示作为本发明的摄影装置的一实施方式的智能手机的外观的图。
图22是表示图21所示的智能手机的结构的框图。
具体实施方式
参考附图对本发明的实施方式进行说明。以下实施方式中，作为一例，对将本发明适用于能够与计算机(PC：个人计算机)连接的数码相机(摄像装置)的例子进行说明。
另外，以下的例子中，对组合独立构成的光学系统12及相机主体14的透镜更换式数码相机10进行说明，而对光学系统12及相机主体14具有一体结构的透镜固定式的数码相机10，也能够进行相同的图像复原处理。并且，数码相机10可以是以动态图像摄影作为主要功能的摄像机，也可以是能够拍摄静态图像及动态图像两者的摄像装置。
图1是表示连接于计算机的数码相机的概略的框图。
数码相机10具备可更换的光学系统12及具备成像元件26的相机主体14，光学系统12与相机主体14通过光学系统12的光学系统输入输出部22及相机主体14的相机主体输入输出部30而电连接。
光学系统12具备透镜16和光圈17等光学部件、及控制该光学部件的光学系统操作部18。光学系统操作部18包含连接于光学系统输入输出部22的光学系统控制器20、操作光学部件的驱动器(省略图示)。光学系统控制器20根据经由光学系统输入输出部22从相机主体14发送过来的控制信号，通过驱动器控制光学部件，例如进行基于透镜移动的聚焦控制或变焦控制、光圈17的光圈量控制等。
因此，数码相机10的摄像部11包含光学系统12及成像元件26，能够通过成像元件26生成通过光学系统12捕捉的被摄体的连续的多个图像(包含记录动态图像、即时预览图像、连拍模式中的连续摄影图像等。以下，还简单标记为“连续图像”。)。
若通过用户界面37选择动态图像摄影模式作为摄影模式，并“全按”用户界面37中包含的快门按钮(未图示)，则摄像装置10开始录制动态图像，若再次“全按”快门按钮，则停止录制而设为待机状态。
并且，当选择动态图像摄影模式时，通过设备控制部34中包含的自动焦点控制部(未图示)经由光学系统控制器20连续进行调焦，且通过设备控制部34中包含的自动曝光控制部(未图示)进行自动曝光控制(AE)。另外，通过自动焦点控制部进行的自动调焦(AF)能够使用相位差AF方式、对比度AF方式等公知方式。
另一方面，若选择静态图像摄影模式作为摄影模式，并“半按”快门按钮，则摄像装置10进行执行AF/AE控制的摄影准备动作，若“全按”快门按钮，则进行静态图像的拍摄及记录。
另外，根据例如如后述的智能手机那样的便携式摄像装置等摄像装置的方式，摄影准备命令部或图像的记录命令部不限于如快门按钮那样的能够进行“半按”、“全按”的二级行程开关，只要是具有接收摄影准备命令的功能、接收图像的记录命令的功能的开关即可，还可以是具有独立的按钮的方式、具有独立的触摸输入操作接收部的方式，并且也可以通过语音输入或视线输入等来接收摄影准备命令或图像的记录命令。
成像元件26具有聚光用微透镜、RGB等滤色器及图像传感器(光电二极管；CMOS(Complementary Metal Oxide Semiconductor)、CCD(Charge Coupled Device)等)。成像元件26将通过光学系统12捕捉到的被摄体像的光转换为电信号，将图像信号(原图像数据)发送至相机主体控制器28。
如此，成像元件26通过利用光学系统12进行的摄影输出原图像数据，该原图像数据发送至相机主体控制器28的图像处理装置。另外，成像元件26所生成的原图像数据中包括被摄体的连续的多个图像。
相机主体控制器28统一控制相机主体14，如图2所示，具有设备控制部34及图像处理部(图像处理装置)35。设备控制部34生成例如用于控制来自成像元件26的图像信号(图像数据)的输出或控制光学系统12的控制信号，并经由相机主体输入输出部30发送至光学系统12(光学系统控制器20)或者向经由输入输出界面32连接的外部设备类(计算机60等)发送图像处理前后的图像数据(RAW数据、JPEG数据等)。并且，设备控制部34适当控制显示部33(EVF：Electronic View Finder、背面液晶显示部)等数码相机10所具备的各种设备类。
另一方面，图像处理部35可根据需要对来自成像元件26的图像信号进行任意的图像处理。例如，在图像处理部35中适当进行传感器校正处理、去马赛克(同步)处理、像素插值处理、颜色校正处理(偏移校正处理、白平衡处理、彩色矩阵处理、伽马转换处理等)、RGB图像处理(锐度处理、色调校正处理、曝光校正处理、轮廓校正处理等)、RGB/YCrCb转换处理及图像压缩处理等各种图像处理。而且，本例的图像处理部35包含对图像信号(原图像数据)进行基于光学系统12的点扩散函数的复原处理的复原处理部36。对于复原处理的详细内容将进行后述。
另外，图1所示的数码相机10具备摄影等中需要的其他设备类(快门等)，用户能够经由设置于相机主体14的用户界面37适当确定及变更用于摄影等的各种设定。用户界面37连接于相机主体控制器28(设备控制部34及图像处理部35)，通过来自用户的命令确定及变更的各种设定反映在相机主体控制器28中的各种处理。
在相机主体控制器28中经图像处理的图像数据发送至连接于输入输出界面32的计算机60等。从数码相机10(相机主体控制器28)发送至计算机60等的图像数据的格式并无特别限定，可设为RAW、JPEG、TIFF等任意格式。因此，相机主体控制器28可以如所谓的Exif(Exchangeable Image File Format)那样，将标题信息(摄影信息(摄影日期、机种、像素数及光圈值等)等)、主图像数据及缩略图图像数据等多个相关数据相互建立对应关联来构成为1个图像文件，并将该图像文件发送至计算机60。
计算机60经由相机主体14的输入输出界面32及计算机输入输出部62与数码相机10连接，并接收从相机主体14发送而来的图像数据等数据类。计算机控制器64统一控制计算机60，对来自数码相机10的图像数据进行图像处理，或进行与经由因特网70等网络线路与计算机输入输出部62连接的服务器80等的通信控制。计算机60具有显示器66，计算机控制器64中的处理内容等根据需要显示于显示器66。用户一边确认显示器66的显示一边操作键盘等输入机构(省略图示)，从而能够向计算机控制器64输入数据和指令，由此控制计算机60，或控制与计算机60连接的设备类(数码相机10或服务器80)。
服务器80具有服务器输入输出部82及服务器控制器84。服务器输入输出部82构成与计算机60等外部设备类的收发连接部，经由因特网70等网络线路与计算机60的计算机输入输出部62连接。服务器控制器84根据来自计算机60的控制命令信号，与计算机控制器64协同动作，根据需要在与计算机控制器64之间进行数据类的收发，将数据类下载到计算机60，或进行运算处理并将其运算结果发送至计算机60。
各控制器(光学系统控制器20、相机主体控制器28、计算机控制器64、服务器控制器84)具备控制处理所需的电路类，例如具备运算处理电路(CPU等)或存储器等。并且，数码相机10、计算机60及服务器80之间的通信可以是有线的也可以是无线的。并且，可一体构成计算机60及服务器80，并且也可省略计算机60和/或服务器80。并且，也可以使数码相机10具有与服务器80的通信功能，由此在数码相机10与服务器80之间直接进行数据类的收发。
接着，对经由成像元件26获得的被摄体像的摄像数据(图像数据)的复原处理进行说明。
本例中，对在相机主体14(相机主体控制器28)中实施复原处理的例子进行说明，但也能够在其他控制器(光学系统控制器20、计算机控制器64、服务器控制器84等)中实施复原处理的全部或一部分。
复原处理是对通过利用光学系统12进行的摄影而从成像元件26获取的原图像数据，进行利用基于光学系统的点扩散函数的复原滤波器的复原处理，从而获取恢复图像数据的处理。
图3是表示从图像摄影至复原处理为止的概略的图。将点像作为被摄体来进行摄影时，被摄体像经由光学系统12被成像元件26(图像传感器)受光，并从成像元件26输出原图像数据Do。由于因光学系统的特性导致的点扩散现象，该原图像数据Do成为原来的被摄体像模糊的状态的图像数据。
为了由该模糊图像的原图像数据Do复原原来的被摄体像(点像)，对原图像数据Do进行利用复原滤波器F的复原处理P10，由此获得表示更接近原来的被摄体像(点像)的图像(恢复图像)的恢复图像数据Dr。
根据与获取原图像数据Do时的摄影条件相应的光学系统的点像信息(点扩散函数)，通过规定的复原滤波器计算算法P20获得复原处理P10中使用的复原滤波器F。图3中的符号α表示与摄影条件相应的点像信息，该光学系统的点像信息即点扩散函数不仅会根据透镜16的种类而变动，还会根据光圈量、焦距、变焦量、像高、记录像素数、像素间距等各种摄影条件而变动，因此在计算复原滤波器F时，获取这些摄影条件。
图4是表示复原处理的一例的概略的框图。
如上述，复原处理P10为通过使用复原滤波器F进行的滤波处理来从原图像数据Do创建恢复图像数据Dr的处理，例如由N×M(N及M为2以上的整数)的抽头构成的实际空间上的复原滤波器F适用于处理对象的图像数据。由此，通过将分配给各抽头的滤波器系数和所对应的像素数据(原图像数据Do的处理对象像素数据及相邻像素数据)进行加权平均运算(反卷积运算)，能够计算复原处理之后的像素数据(恢复图像数据Dr)。通过依次替换对象像素来将使用了该复原滤波器F的加权平均处理适用于构成图像数据的所有像素数据，由此能够进行复原处理。图4中的符号β表示适用于处理对象像素数据的抽头(滤波器系数)。
另外，通过N×M的抽头构成的实际空间上的复原滤波器能够通过对频率空间上的复原滤波器进行傅里叶逆变换来导出。因此，通过确定成为基础的频率空间上的复原滤波器并指定实际空间上的复原滤波器的构成抽头数，能够适当计算实际空间上的复原滤波器。
对连续摄影的多个图像(连续图像)，也能够进行上述的复原处理。对连续图像进行复原处理时，分别对构成连续图像的多个图像(各帧)进行复原处理。
另外，作为进行复原处理的原图像数据，能够适用RGB各颜色的图像数据、由RGB各颜色的图像数据通过RGB/YCrCb转换获得的亮度信号(Y数据)等。
而且，进行复原处理的时刻并无特别限定，作为原图像数据，可对从去马赛克处理之后的图像数据(RGB数据)获得的亮度信号(Y数据)进行复原处理，也可对“去马赛克处理之前的图像数据(马赛克图像数据)”或“去马赛克处理之后且亮度信号转换处理之前的图像数据(去马赛克图像数据)”进行复原处理。
＜第1实施方式＞
本实施方式中，对根据光学系统12的光轴方向上的“被摄体的移动量”来控制复原处理，从而避免通过对散焦状态的图像进行的复原处理而有可能带来的过校正等画质劣化的例子进行说明。
图5是有关第1实施方式的复原处理的功能框图，表示由图像处理部35(参考图2)构成的各种功能块。另外，图中的功能块并非一定要分开设置，可通过构成为一体的硬件和/或软件实现多个功能块。
图像处理部35具备图像调整部100、被摄体距离获取部115、移动量获取部120、复原处理判断部125、滤波器获取部130，图像调整部100包含复原强度调节部110及复原处理执行部105。
被摄体距离获取部115获取由摄像部11的成像元件26生成的图像的被摄体(主要被摄体)的被摄体距离，将被摄体距离信息发送至移动量获取部120。被摄体距离的获取方法并无特别限定，能够采用各种方法。例如，被摄体距离获取部115可获取通过未图示的测距传感器直接测定的被摄体距离，也可从聚焦透镜的位置(聚焦透镜的驱动脉冲等)等间接计算获取被摄体距离。
移动量获取部120根据从被摄体距离获取部115发送来的被摄体距离，获取连续的图像之间的被摄体(主要被摄体)的移动量，尤其是光学系统的光轴方向上的被摄体的移动量。即，移动量获取部120根据通过被摄体距离获取部115获取的被摄体距离及从摄像部11(成像元件26)获取的连续的多个图像(连续图像)的信息，获取被摄体在连续的图像之间沿光轴方向的移动程度的信息。
图6及图7是用于说明移动量获取部120中的被摄体移动量的获取例的图。图6中，示出连续获取的两张图像S(t)及图像S(t+1)且对焦状态的连续图像。另一方面，图7中，示出连续获取的两张图像S(t)及图像S(t+1)且对焦状态的图像S(t)及非对焦状态的图像S(t+1)。
图6所示的例子中，在时间(t)摄影的图像(单帧)S(t)在距被摄体Q(主要被摄体)的被摄体距离为1m的条件下获取，在时间(t+1)摄影的图像S(t+1)在距被摄体Q的被摄体距离为2m的条件下获取。因此，本例中，在连续的图像(帧)之间被摄体Q沿光学系统的光轴方向移动1m，移动量获取部120获取连续的图像S(t)、S(t+1)之间的被摄体Q的移动量为1m的信息。
另一方面，图7所示的例子中，在时间(t)摄影的图像S(t)在距被摄体Q的被摄体距离为1m的条件下获取，在时间(t+1)摄影的图像S(t+1)在距被摄体Q的被摄体距离为3m的条件下获取。因此，本例中，在连续的图像(帧)之间被摄体Q沿光学系统的光轴方向移动2m，移动量获取部120获取连续的图像S(t)、S(t+1)之间的被摄体Q的移动量为2m的信息。
图8是表示被摄体Q的移动量的变化例的曲线图，横轴表示时间T，纵轴表示被摄体距离R。本例中，在时间“0”至“S(t1)”为止期间，被摄体距离恒定(参考图8的“R(t1)”)，被摄体Q与数码相机10之间的相对距离无变化而相同。并且，在时间“S(t1)”至“S(t2)”为止期间，被摄体距离成比例地增加(参考图8的“R(t1)”及“R(t2)”)，被摄体以恒定速度向光轴方向(纵深方向)移动。并且，在时间“S(t2)”至“S(t3)”为止期间，被摄体距离恒定(参考图8的“R(t2)”)，被摄体Q与数码相机10之间的相对距离无变化而相同。
图9是表示连续摄影的图像(帧)例的图，示意地表示对以图8所示的“时间-被摄体距离”的关系沿光轴方向移动的被摄体进行摄影的图像。另外，图9中，为了便于说明，通过比实际帧数少的帧数显示了连续的多个图像。并且，图9的各帧中，以实线表示的被摄体Q表示在对焦状态下拍摄(参考图9的“A”及“C”)，以虚线表示的被摄体Q表示在未对焦状态下(散焦状态)拍摄(参考图9的“B”)。
图9的“A”表示在时间“0”至“S(t1)”为止期间摄影的帧组。如上述，在该时间“0”至“S(t1)”为止期间，被摄体距离R(t1)为恒定，被摄体Q与数码相机10之间的相对距离不发生变动，被摄体Q的移动量为“0”。
图9的“B”表示在时间“S(t1)”至“S(t2)”为止期间摄影的帧组。如上述，在该时间“S(t1)”至“S(t2)”为止期间，被摄体Q以恒定速度沿光轴方向(纵深方向)从被摄体距离“R(t1)”移动至“R(t2)”，被摄体Q的移动量通过“S(t2)-S(t1)”表示。因此，若将该时间“S(t1)”至“S(t2)”为止期间的帧数设为“E”，则以下述式表示该时间内的连续帧之间的被摄体向光轴方向的移动量L。
L＝{R(t2)-R(t1)}/E
另外，图9的“B”所示的帧组中，被摄体Q向光轴方向的移动量(移动量)较大，因此被摄体Q由成为散焦状态的图像(帧)构成。
图9的“C”表示在时间“S(t2)”至“S(t3)”为止期间摄影的帧组。如上述，在该时间“S(t2)”至“S(t3)”为止期间，被摄体距离R(t2)恒定，被摄体Q与数码相机10之间的相对距离不发生变动，被摄体Q的移动量为“0”。
另外，图9的例子中，根据被摄体距离求出被摄体的移动量，但并不限定于此。例如，也可根据图像中的被摄体Q的图像的面积变化求出移动量。具体而言，可进行脸部检测，并根据该脸部面积的变化来求出移动量。
复原处理判断部125(参考图5)根据通过移动量获取部120获取的被摄体Q向光轴方向的移动量，判断是“对图像(构成连续图像的各图像)进行通常的复原强度的复原处理”，还是“对图像进行调节了复原强度的复原处理”，或是“不对图像进行复原处理”。通过进行这种判断，能够抑制由于进行复原处理而产生的图像的画质劣化。
作为具体的判断方法，复原处理判断部125例如具有与被摄体Q的移动量有关的阈值，将该与移动量有关的阈值与从移动量获取部120获取的被摄体Q的移动量进行比较，由此能够进上述的与复原处理有关的判断。另外，与移动量有关的阈值能够设为与被摄体Q、被摄体距离、摄影条件、相机的功能等相应的值。作为与移动量有关的阈值，例如能够设定为被摄体距离的50％左右。并且，阈值可根据被摄体距离设定，设定为被摄体距离越近则阈值越小即可。例如可如下，即，在被摄体距离小于1m的范围内，将阈值设定为被摄体距离的30％，在1m以上的范围，将阈值设定为40％，在5m以上的范围，将阈值设定为50％。并且，与移动量有关的阈值可根据光圈值而设定为不同值，设定为光圈值越小则阈值越小即可。例如可如下，即，光圈值小于F4时，作为阈值设定为被摄体距离的30％，光圈值为F4以上时，作为阈值设定为被摄体距离的40％，光圈值为F11以上时，设定为被摄体距离的50％。而且，与移动量有关的阈值可设定为对根据被摄体距离设定的阈值乘以与光圈值相应的校正系数的值。例如可如下，即，光圈值小于F4时，设定为所设定的阈值的0.5倍，光圈值为F4以上时，设定为所设定的阈值的0.7倍，光圈值为F11以上时，设定为所设定的阈值的1倍。
当通过移动量获取部120获取的被摄体Q的移动量大于阈值时，复原处理判断部125判断为不进行复原处理。这是因为，若通过移动量获取部120获取的被摄体Q的移动量大于阈值，则摄影图像处于散焦状态的可能性较高(参考图7及图9)，若对散焦状态的摄影图像进行复原处理，则有可能导致过校正等画质劣化。
另一方面，当通过移动量获取部120获取的被摄体Q的移动量为阈值以下时，复原处理判断部125判断为进行复原处理。这是因为，若通过移动量获取部120获取的被摄体Q的移动量为阈值以下，则摄影图像处于聚焦状态的可能性较高，通过对聚焦状态的摄影图像进行复原处理，能够期待画质的提高。
另外，复原处理判断部125根据被摄体Q的移动量，调节复原处理的复原强度，当被摄体Q的移动量大于阈值时，可使复原强度比通常情况(被摄体Q的移动量为阈值以下的情况)弱。这是因为，若复原处理的复原强度过强，则有可能导致过校正等引起的画质劣化。
并且，复原处理判断部125可根据被摄体Q的移动量及被摄体距离这两者，判断是通过通常的复原滤波器以通常的复原强度对图像进行复原处理，还是在调节复原处理的复原强度之后对图像进行复原处理。根据被摄体Q的移动量及被摄体距离这两者，判断有无执行复原处理及有无调节复原处理的复原强度，因此能够更可靠地防止伴随被摄体距离变动的“复原处理引起的画质劣化”。
即，即使被摄体Q的移动量相同，被摄体距离较大(即，被摄体Q位于远离数码相机10的场所)的情况与被摄体距离较小(即，被摄体Q位于靠近数码相机10的场所)的情况下，复原处理引起的画质劣化程度不同。因此，复原处理判断部125除了被摄体Q的移动量之外，还考虑被摄体距离来调节复原处理的方法，由此能够实施更周密的复原处理。
滤波器获取部130根据摄影条件等而获取复原处理中使用的复原滤波器。即，滤波器获取部130根据摄影条件获取与有关光学系统12的点像分布的传递函数(点扩散函数)对应地生成的复原滤波器。滤波器获取部130能够通过各种方法获取复原滤波器。例如，滤波器获取部130可从摄影条件计算复原滤波器。并且，滤波器获取部130也可预先将多个复原滤波器保持于未图示的存储器，并从该保持的多个复原滤波器中选择适于摄影条件的复原滤波器。
图像调整部100包含复原强度调节部110及复原处理执行部105。另外，可使图像调整部100具有复原强度调节部110及复原处理执行部105以外的功能。
复原强度调节部110调节复原处理的复原强度。例如复原处理判断部125判断为根据已调节的复原强度进行复原处理时，复原强度调节部110调节复原处理的复原强度。复原强度调节部110能够通过各种方法进行复原强度调节，例如，能够通过改变复原滤波器的滤波器系数来调节复原强度。还能够根据通过移动量获取部120获取的被摄体Q的移动量变更通过滤波器获取部130获取的复原滤波器的滤波器系数。
复原处理执行部105对被输入的连续图像(动态图像等)适用来自滤波器获取部130的复原滤波器，由此进行复原处理。另外，复原处理在广义上可包含对图像数据适用复原滤波器的处理(滤波器适用处理)及调整适用复原滤波器之后的图像数据(复原图像数据)与原图像数据之差的增幅率(复原增益)的处理。
图10是表示图像调整部100(复原强度调节部110、复原处理执行部105)中的复原处理例的控制框图。
首先，复原滤波器F适用于原图像数据Do(滤波器适用处理Pf)，从而计算复原图像数据Dr1。适用于原图像数据Do的复原滤波器F只要是基于光学系统(透镜16、光圈17等)的点扩散函数(PSF、OTF、MTF、PTF等)的滤波器，则并无特别限定，可以是实际空间滤波器也可以是频率空间滤波器(参考图4)。
之后，导出复原处理前后的图像数据的差分(差分导出处理Pd)，进行对该差分的增幅率(复原增益)的调整(增益调整处理Pg)。即，差分导出处理Pd中，计算出经滤波器适用处理Pf的复原图像数据Dr1与原图像数据Do之间的差分数据ΔD(ΔD＝Dr1-Do)。并且，增益调整处理Pg中，通过调整该差分数据ΔD的增幅率(复原增益)G来计算增幅率调整后差值(G×ΔD)，并对该增幅率调整后差值(G×ΔD)与原图像数据Do进行加法运算处理Pa来计算恢复图像数据Dr2(Dr2＝Do+G×ΔD)。另外，作为复原处理，可采用与上述方法相同的其他方法，例如可设为如下处理。复原滤波器F被适用于原图像数据Do(滤波器适用处理Pf)，从而计算出复原图像数据Dr1。之后，可作为增益调整处理Pg对该复原图像数据Dr1进行增幅率(复原增益)G的调整(Dr1×G)，对该值与原图像数据Do乘以(1-G)的值进行加法运算处理Pa来计算出恢复图像数据Dr2。
如此，基于复原处理的复原强度根据滤波器适用处理Pf中的复原滤波器(滤波器系数)与增益调整处理Pg中的增幅率(复原增益)G发生变动。因此，复原处理的复原强度的调整可通过“在滤波器适用处理Pf中使用的复原滤波器(滤波器系数)的切换”和/或“增益调整处理Pg中的增幅率(复原增益)G的变更”来执行。
因此，复原强度调节部110(参考图5)能够通过调节复原滤波器F的滤波器系数或调节复原增益G来调节复原处理的复原强度。
接着，对通过具有上述功能块的图像处理部35(复原处理部36)进行的复原处理流程进行说明。
图11是表示第1实施方式所涉及的复原处理的流程的流程图。
首先，在数码相机10的摄像部11中，通过光学系统12捕捉被摄体而生成被摄体的连续的多个图像(图11的步骤S10：生成步骤)，在被摄体距离获取部115中获取被摄体距离(步骤S12：被摄体距离获取步骤)。并且，通过移动量获取部120获取被摄体Q的移动量(步骤S14：移动量获取步骤)，之后，在复原处理判断部125中，判断是否对处理对象帧(处理对象图像)进行复原处理(步骤S16：复原处理判断步骤)。
判断为不进行复原处理时(步骤S16的否)，跳过复原处理，根据需要进行其他图像处理。另一方面，判断为进行复原处理时(步骤S16的是)，通过滤波器获取部130获取复原滤波器，所获取的复原滤波器被发送至图像调整部100(步骤S18：滤波器获取步骤)。并且，复原处理判断部125判断是否进行复原强度的调整(步骤S20：复原处理判断步骤)。
判断为不进行复原强度的调整时(步骤S20的否)，复原处理执行部105使用在复原滤波器获取步骤(S18)中获取的复原滤波器进行针对处理对象帧的复原处理(步骤S24：复原处理执行步骤)。另一方面，判断为进行复原强度的调整时(步骤S20的是)，复原强度调节部110调整复原处理的复原强度(步骤S22：复原强度调节步骤)。之后，复原处理执行部105在已调节复原处理的复原强度的状态下进行复原处理(步骤S24：复原处理执行步骤)。
另外，是否进行复原处理的判断(S16)、是否进行复原强度的调整的判断(S20)及伴随这些判断的其他处理按构成连续图像的每个图像(帧)进行，以图像单位进行复原处理的最优化。
如以上说明，根据上述第1实施方式，根据被摄体Q的移动量调节复原处理的实施方法，能够实现基于复原处理的画质提高，并且有效地避免通过对散焦状态的图像进行的复原处理而有可能带来的过校正等画质劣化。
＜第2实施方式＞
本实施方式中，对根据光学系统12的光轴方向上的“被摄体的移动量”控制自动调焦(跟踪自动调焦)，避免通过对散焦状态的图像进行的复原处理而有可能带来的过校正等画质劣化的例子进行说明。
本实施方式中，对与上述第1实施方式相同的结构及作用，省略说明。
图12是有关第2实施方式的复原处理的功能框图，表示通过图像处理部35(参考图2)构成的各种功能块。本实施方式的图像处理部35除了上述第1实施方式所涉及的功能块(参考图5)之外，还具有自动调焦部140及跟踪自动调焦判断部145。
自动调焦部140以跟踪被摄体Q且对被摄体Q进行自动调焦的方式经由光学系统控制器20(参考图1)控制光学系统12。即，自动调焦部140根据被摄体Q的移动改变捕捉被摄体Q的聚焦区，并以始终聚焦于被摄体Q的方式控制光学系统12。
图13A及图13B是用于说明跟踪自动调焦的图，表示显示于数码相机10的显示部33(参考图1)的即时预览图像。
本例中，在跟踪自动调焦发挥作用期间，聚焦区N配合被摄体Q的移动而跟踪被摄体Q，在跟踪被摄体Q期间，以始终对焦于被摄体Q的方式进行自动调焦。另一方面，若跟踪自动调焦被中断，则聚焦区N配置于预先确定的位置，进行该位置中的自动调焦。在此，预先确定的位置可以是图像的中央部也可以是跟踪自动调焦被中断的位置。
图13A所示的即时预览图像表示被摄体Q向显示部33的上方向(图13A及图13B的Y方向)移动的情况，图13B所示的即时预览图像表示被摄体Q向X方向及Z方向移动的情况。如这些即时预览图像即图13A及图13B所示，聚焦区N配合被摄体Q的移动而跟踪被摄体Q。
其中，被摄体Q的移动非常快的情况等，相对于被摄体Q的移动，数码相机10的自动调焦性能并不充分时，无法持续聚焦于被摄体Q，有时摄影图像会成为散焦状态。
图12的跟踪自动调焦判断部145根据通过移动量获取部120获取的被摄体Q的移动量，判断跟踪被摄体Q的光学系统12的自动调焦控制是被中止或持续。具体而言，跟踪自动调焦判断部145具有与被摄体Q的移动量有关的阈值，通过对该阈值与被摄体Q的移动量进行比较，判断是否跟踪被摄体Q来进行自动调焦。
例如，被摄体Q的移动量大于阈值时，跟踪自动调焦判断部145判断为停止跟踪自动调焦。此时，自动调焦部140对由摄像部11生成的图像中的聚焦区内的被摄体Q重新进行光学系统12的自动调焦控制。另一方面，当被摄体Q的移动量为阈值以下时，跟踪自动调焦判断部145判断为持续跟踪自动调焦。并且，自动调焦部140持续被摄体的跟踪，进行光学系统12的自动调焦控制(跟踪自动调焦控制)。
另外，图12中，对具有复原处理判断部125及复原强度调节部110的摄像装置10进行了说明，但并不限定于此。例如还可考虑摄像装置10不具有复原处理判断部125及复原强度调节部110的方式。该方式中，通过复原处理执行部105对连续的多个图像进行复原处理时，跟踪自动调焦判断部145根据从移动量获取部120获取的移动量，判断是中止跟踪被摄体的光学系统的自动调焦控制还是持续跟踪被摄体的光学系统的自动调焦控制。如此，从移动量获取部120获取的移动量较大时，以优先执行通过复原处理执行部105进行的对连续的多个图像的复原处理并停止跟踪自动调焦的方式进行控制，由此能够防止如下现象，即，被摄体Q的移动非常快的情况等，相对于被摄体Q的移动，数码相机10的自动调焦性能并不充分时，无法持续对焦于被摄体Q，摄影图像成为散焦状态，通过复原处理加深画质劣化。并且，可通过从用户接收控制模式的指定，切换这种优先执行复原处理并停止跟踪自动调焦的控制与优先执行自动调焦并调整复原处理的复原强度的控制。
图14是表示第2实施方式所涉及的复原处理的流程的流程图。
首先，摄像部11获取跟踪对象的被摄体Q的连续的多个图像(图14的步骤S26)，被摄体距离获取部115获取跟踪对象的被摄体Q的被摄体距离(步骤S28)。并且，移动量获取部120获取被摄体的移动量(步骤S30)，跟踪自动调焦判断部145根据所获取的被摄体Q的移动量，判断是否持续跟踪自动调焦(步骤S32)。
当被跟踪的被摄体Q的移动量大于某一阈值时，跟踪自动调焦判断部145判断为不持续跟踪自动调焦(步骤S32的否)，自动调焦部140解除跟踪自动调焦并将聚焦区内的被摄体作为新的自动调焦对象，获取连续图像(步骤S44)。之后，被摄体距离获取部115获取被摄体距离(步骤S46)。之后，移动量获取部120获取被摄体Q的移动量(步骤S48)，复原处理判断部125判断是否进行复原处理(步骤S34)。
另一方面，跟踪对象的被摄体Q的移动量为阈值以下时，跟踪自动调焦判断部145判断为持续跟踪自动调焦(步骤S32的是)，复原处理判断部125判断是否进行复原处理(步骤S34)。
复原处理判断部125判断为不进行复原处理时(步骤S34的否)，跳过复原处理，根据必要进行其他图像处理。另一方面，复原处理判断部125判断为进行复原处理时(步骤S34的是)，通过滤波器获取部130获取复原滤波器(步骤S36：滤波器获取步骤)。并且，复原处理判断部125判断是否进行复原处理的复原强度的调整(步骤S38：复原处理判断步骤)。
判断为不进行复原处理的复原强度的调整时(步骤S38的否)，复原处理执行部105使用在复原滤波器获取步骤(S36)中获取的复原滤波器来对图像(帧)进行复原处理(步骤S42：复原处理执行步骤)。另一方面，判断为进行复原处理的复原强度的调整时(步骤S20的是)，复原强度调节部110调整复原处理的复原强度(步骤S40：复原强度调节步骤)，复原处理执行部105在已调节复原处理的复原强度的状态下进行复原处理(步骤S42：复原处理执行步骤)。
如以上说明，根据上述第2实施方式，即使进行跟踪自动调焦来拍摄被摄体Q时，也能够适当地进行复原处理。
＜第3实施方式＞
本实施方式中，对根据“帧速率”控制复原处理，从而避免通过复原处理而有可能带来的画质劣化的例子进行说明。
本实施方式中，对与上述第1实施方式相同的结构及作用，省略说明。
图15是有关第3实施方式的复原处理的功能框图，表示由图像处理部35(参考图2)构成的各种功能块。本实施方式的图像处理部35除了上述第1实施方式所涉及的功能块(参考图5)之外，还具有帧速率设定部150。
帧速率设定部150设定与摄像部11中的动态图像等的连续图像的生成有关的帧速率，控制基于成像元件26的连续的多个图像的生成。帧速率为每单位时间的帧数(图像数)，通常通过在一秒内生成的帧数(单位：fps(frame per second))表示。例如，帧速率为30fps时，在一秒内生成30张图像。
并且，在帧速率设定部150中设定的帧速率可以是根据用户经由用户界面37的命令确定的帧速率，也可以是预先确定的帧速率。
复原处理判断部125根据通过帧速率设定部150设定的帧速率，判断是对图像进行复原处理，还是调节复原处理的复原强度来对图像进行复原处理，或是不对图像进行复原处理。即，复原处理判断部125从帧速率设定部150获取与图像对应的帧速率，判断对以该帧速率生成的图像是否进行复原处理，或是调节复原处理的复原强度来进行复原处理。
复原处理判断部125例如具有与帧速率有关的阈值，通过对该与帧速率有关的阈值与从帧速率设定部150获取的帧速率进行比较，进行与复原处理有关的判断。另外，与帧速率有关的阈值能够根据被摄体Q、被摄体距离、摄影条件、相机的功能等而设定为各种值，例如可将与帧速率有关的阈值设定为30fps或60fps。
在帧速率设定部150中获取的帧速率大于阈值时，复原处理判断部125判断为进行复原处理。这是因为，当在帧速率设定部150中获取的帧速率大于阈值时，帧之间的被摄体Q的移动量变得比较小，被摄体Q的摄影图像成为聚焦状态的可能性较高，即使进行复原处理，导致画质劣化的可能性也较低。并且，通过进行复原处理，能够期待画质的进一步提高。
另一方面，在帧速率设定部150中获取的帧速率为阈值以下时，复原处理判断部125判断为不进行复原处理。这是因为，当在帧速率设定部150中获取的帧速率为阈值以下时，帧之间的被摄体Q的移动量变得比较大，被摄体Q的摄影图像成为散焦状态的可能性较高，若对散焦状态的图像进行复原处理，则有可能会导致画质劣化。
而且，复原处理判断部125也可根据帧速率调节复原处理的复原强度。根据帧速率，被摄体Q的摄影图像的聚焦状态有可能不完整，此时，通过调节复原处理的复原强度，能够防止因对散焦状态的图像进行复原处理而引起的画质劣化。
接着，对帧速率与被摄体Q的移动量之间的关系进行说明。
图16是用于说明以不同帧速率生成的移动被摄体Q的图像的图，表示对被摄体距离110cm至被摄体距离120cm的被摄体Q的移动，以高帧速率(例如60fps)进行摄影的情况(参考图16的符号“900”)及以低帧速率(例如30fps)进行摄影的情况(参考图16的符号“905”)。
图16所示的高帧速率图像例中，被摄体Q从被摄体距离110cm移动至被摄体距离120cm期间，生成被摄体距离110cm的帧、被摄体距离为115cm的帧及被摄体距离120cm的帧。因此，帧之间的被摄体Q的移动量为5cm。
另一方面，图16所示的低帧速率图像例中，在被摄体Q从被摄体距离110cm移动至被摄体距离120cm期间，生成被摄体距离110cm的帧及被摄体距离120cm的帧。因此，帧之间的被摄体Q的移动量为10cm。
如此，即使是对移动相同距离(从被摄体距离110cm至被摄体距离120cm的距离)的被摄体Q进行摄影时，如果帧速率不同，则帧之间的被摄体Q的移动量不同。因此，通过由复原处理判断部125参考帧速率来对复原处理的执行进行判断，能够实现基于复原处理的画质的提高且能够抑制复原处理引起的画质劣化。
图17是表示第3实施方式所涉及的复原处理的流程的流程图。
首先，帧速率设定部150设定由摄像部11的成像元件26生成的连续图像的帧速率(图17的步骤S44：帧速率设定步骤)，复原处理判断部125根据在帧速率设定部150中设定的帧速率，判断是否进行复原处理(步骤S46：复原处理判断步骤)。
复原处理判断部125判断为不进行复原处理时(步骤S46的否)，不进行复原处理，根据需要进行其他图像处理。另一方面，复原处理判断部125判断为进行复原处理时(步骤S46的是)，摄像部11通过所设定的帧速率获取连续的多个图像(步骤S48：生成步骤)。之后，通过滤波器获取部130获取复原滤波器(步骤S50：滤波器获取步骤)，复原处理判断部125判断是否进行复原强度的调整(步骤S52：复原强度调节步骤)。
判断为不进行复原强度的调整时(步骤S52的否)，复原处理执行部105使用在复原滤波器获取步骤(步骤S50)中获取的复原滤波器来进行针对处理对象帧的复原处理(步骤S56：复原处理执行步骤)。另一方面，判断为进行复原强度的调整时(步骤S52的是)，复原强度调节部110调整复原处理的复原强度(步骤S54：复原强度调节步骤)，复原处理执行部105在已调节复原处理的复原强度的状态下进行复原处理(步骤S56：复原处理执行步骤)。
图18是表示第3实施方式所涉及的复原处理的流程的一变形例的流程图。
本变形例中，复原处理判断部125根据帧速率及被摄体Q的移动量，判断复原处理的执行。即，首先，帧速率设定部150设定帧速率(步骤S62)，根据所设定的帧速率获取连续图像(步骤S64)。并且，被摄体距离获取部115获取被摄体距离(步骤S66)，移动量获取部120获取被摄体Q的移动量(步骤S68)。并且，复原处理判断部125根据在帧速率设定部150中设定的帧速率及通过移动量获取部120获取的被摄体Q的移动量，判断是否进行复原处理(步骤S70)。复原处理判断部125判断为不进行复原处理时(步骤S70的否)，跳过复原处理，根据需要进行其他图像处理。
另一方面，复原处理判断部125判断为进行复原处理时(步骤S70的是)，通过滤波器获取部130获取复原滤波器(步骤S72)，复原处理判断部125判断是否进行复原处理的复原强度的调整(步骤S74)。
判断为不进行复原强度的调整时(步骤S74的否)，复原处理执行部105使用在复原滤波器获取步骤(步骤S72)中获取的复原滤波器来对处理对象帧进行复原处理(步骤S78：复原处理执行步骤)。另一方面，判断为进行复原强度的调整时(步骤S74的是)，复原强度调节部110调整复原处理的复原强度(步骤S76：复原强度调节步骤)，复原处理执行部105在已调节复原处理的复原强度的状态下进行复原处理(步骤S78：复原处理执行步骤)。
如以上说明，根据上述第3实施方式，根据帧速率调节复原处理的实施方法，因此即使被摄体Q的移动较大时，也能够适当地执行复原处理。
＜第4实施方式＞
本实施方式中，复原处理判断部125考虑是对焦于被摄体Q的状态(聚焦状态)还是未对焦于被摄体Q的状态(散焦状态)来进行与复原处理的执行有关的判断。即，当被摄体Q处于聚焦状态时，复原处理判断部125判断为通过复原滤波器对图像进行通常的复原处理(不调节复原处理的复原强度而进行复原处理)，当被摄体Q处于散焦状态时，复原处理判断部判断为调节复原处理的复原强度来对图像进行复原处理。
本实施方式中，对与上述第1实施方式相同的结构及作用，省略说明。
图19是表示第4实施方式所涉及的复原处理的流程的流程图。
首先，摄像部11获取连续的多个图像(步骤S80)，复原处理判断部125判断被摄体Q是处于聚焦状态还是处于散焦状态。另外，复原处理判断部125能够通过各种方法获取被摄体Q是处于聚焦状态还是处于散焦状态的信息。例如，复原处理判断部125也可从光学系统控制器20或成像元件26获取被摄体Q是处于聚焦状态还是处于散焦状态的信息。并且，数码相机10(摄像装置)另外具备能够检测聚焦状态的构成要件时，可通过该构成要件获取被摄体Q是处于聚焦状态还是处于散焦状态的信息。
并且，复原处理判断部125获得被摄体Q处于散焦状态的信息时(步骤S82的否)，不进行复原处理，根据需要进行其他图像处理。这是因为，若对被摄体Q处于散焦状态的图像进行复原处理，则有时反而会导致画质劣化。
另一方面，复原处理判断部125判断为进行复原处理时(步骤S82的是)，被摄体距离获取部115获取被摄体距离(步骤S84)，移动量获取部120获取被摄体Q的移动量(步骤S86)。并且，通过滤波器获取部130获取复原滤波器(步骤S88)，复原处理判断部125判断是否进行复原处理的复原强度的调整(步骤S90)。
判断为不进行复原强度的调整时(步骤S90的否)，复原处理执行部105使用在复原滤波器获取步骤(步骤S88)中获取的复原滤波器来对对象帧进行复原处理(步骤S94)。另一方面，判断为进行复原强度的调整时(步骤S90的是)，复原强度调节部110调整复原处理的复原强度(步骤S92)，复原处理执行部105在已调节复原处理的复原强度的状态下进行复原处理(步骤S94)。
如以上说明，根据上述第4实施方式，根据被摄体Q是处于散焦状态还是处于聚焦状态来调节复原处理的实施方法，因此对被摄体Q执行适当的复原处理。
＜第5实施方式＞
本实施方式中，对不进行复原处理时，进行与复原处理不同的模糊图像校正处理的例子进行说明。
本实施方式中，对与上述第1实施方式相同的结构及作用，省略说明。
图20是有关第5实施方式的复原处理的功能框图，表示由图像处理部35(参考图2)构成的各种功能块。本实施方式的图像处理部35除了上述第1实施方式所涉及的功能块(参考图5)之外，图像调整部100具有模糊图像校正处理部155。
当通过复原处理判断部125判断为“不进行复原处理而进行与复原处理不同的模糊图像校正处理”时，模糊图像校正处理部155对处理对象图像进行与复原处理不同的模糊图像校正处理。在此所说的“模糊图像校正处理”是不利用与光学系统12的点像分布有关的传递函数的模糊图像校正处理，且并无特别限定，例如可以是轮廓校正处理。通过图像调整部100(模糊图像校正处理部155)进行轮廓校正处理时，通过滤波器获取部130获取具有轮廓校正频率特性的滤波器(轮廓校正用滤波器)，对处理对象图像进行轮廓校正。在此所说的“具有轮廓校正的频率特性的滤波器”只要是用于使图像(原图像数据)中的轮廓部分(边缘部分)的画质良好的滤波器，则并无特别限定，例如能够采用强调轮廓部分的滤波器。
如以上说明，根据上述第5实施方式，即使是不进行复原处理时，也能够适当地进行模糊图像校正。
另外，上述各实施方式中实施了复原处理的连续的多个图像(连续图像)能够以各种方式显示。例如，实施了复原处理的连续图像可作为即使预览图像显示于数码相机10(摄像装置、参考图1)所具有的显示部33，也可显示于连接有数码相机10的计算机60的显示器66。
＜其他变形例＞
并且，上述数码相机10仅仅是例示，对其他结构也能够适用本发明。各功能结构能够通过任意的硬件、软件、或者两者的组合来适当地实现。例如，对使计算机执行上述各装置及处理部(相机主体控制器28、图像处理部35、复原处理部36等)中的图像处理方法、摄像方法(处理步骤、处理顺序)的程序、能够计算机读取记录有这种程序的记录介质(非临时记录介质)、或者能够安装这种程序的各种计算机，也能够适用本发明。
另外，上述各实施方式中，对复原处理部36设置于数码相机10的相机主体14(相机主体控制器28)的方式进行了说明，但复原处理部36也可设置于计算机60或服务器80等其他装置。
例如，在计算机60中加工图像数据时，可通过设置于计算机60的复原处理部进行该图像数据的复原处理。并且，服务器80具备复原处理部时，例如可从数码相机10或计算机60向服务器80发送图像数据，在服务器80的复原处理部中对该图像数据进行复原处理，复原处理之后的图像数据(恢复图像数据)发送/供给至发送源。如此，可在计算机60或服务器80等中具备复原处理部的图像处理装置中实施复原处理，也可通过具备复原处理部的计算机60或服务器80等实施复原处理的全部或一部分。并且，假想在数码相机10以外的电子设备中进行复原处理的情况，通过预先在图像数据中记录在基于相机主体的摄影动作中按每一帧获取的被摄体距离信息，将从相机获取的图像数据发送至图像处理装置，在图像处理装置内的图像获取部中获取图像数据且实施本发明的复原处理，由此能够轻松地实施图像处理装置中的复原处理。并且，通过与图像数据一同将在基于相机主体的摄影动作中按每一帧获取的被摄体距离信息发送至图像处理装置，同样可轻松地在图像处理装置中实施本发明的复原处理。并且，优选按每一帧获取所获取或记录的被摄体距离信息，但并不限于此。可根据复原处理引起的画质劣化的容许范围，按数帧单位获取1次被摄体距离信息，或在被摄体距离变化为规定阈值以上时获取被摄体距离信息等，对被摄体距离信息的获取进行间拔处理。
并且，能够适用本发明的方式并不限定于数码相机10、计算机60及服务器80，除了以摄像为主要功能的相机类之外，对于除了摄像功能以外还具备摄像以外的其他功能(通话功能、通信功能、其他计算机功能)的移动设备类，也能够适用本发明。作为能够适用本发明的其他方式，例如，可举出具有相机功能的移动电话和智能手机、PDA(Personal DigitalAssistants)、便携式游戏机。以下，对能够适用本发明的智能手机的一例进行说明。
＜智能手机的构成＞
图21是表示作为本发明的摄影装置的一实施方式的智能手机201的外观的图。图21所示的智能手机201具有平板状框体202，在框体202的一侧的面具备作为显示部的显示面板221与作为输入部的操作面板222成为一体的显示输入部220。并且，这种框体202具备扬声器231、麦克风232、操作部240及相机部241。另外，框体202的构成并不限定于此，例如能够采用显示部与输入部独立的结构，或者采用具有折叠结构或滑动机构的构成。
图22是表示图21所示的智能手机201的结构的框图。如图22所示，作为智能手机的主要的构成要件，具备无线通信部210、显示输入部220、通话部230、操作部240、相机部241、存储部250、外部输入输出部260、GPS(Global Positioning System)接收部270、动作传感器部280、电源部290及主控制部200。另外，作为智能手机201的主要功能，具备经由基站装置BS和移动通信网NW进行移动无线通信的无线通信功能。
无线通信部210根据主控制部200的命令，对容纳于移动通信网NW的基站装置BS进行无线通信。使用该无线通信，进行语音数据、图像数据等各种文件数据、电子邮件数据等的收发及Web数据或流数据等的接收。
显示输入部220是所谓的触摸面板，其具备显示面板221及操作面板222，所述显示输入部通过主控制部200的控制，显示图像(静态图像及动态图像)和文字信息等来视觉性地向用户传递信息，并且检测用户对所显示的信息的操作。
显示面板221是将LCD(Liquid Crystal Display)、OELD(Organic Electro-Luminescence Display)等用作显示设备的装置。操作面板222是以能够视觉辨认显示于显示面板221的显示面上的图像的方式载置，并检测通过用户的手指或触控笔来操作的一个或多个坐标的设备。若通过用户的手指或触控笔操作该设备，则将因操作而产生的检测信号输出至主控制部200。接着，主控制部200根据所接收的检测信号检测显示面板221上的操作位置(坐标)。
如图21所示，作为本发明的摄像装置的一实施方式来例示的智能手机201的显示面板221与操作面板222成为一体而构成显示输入部220，配置成操作面板222完全覆盖显示面板221。采用该配置时，操作面板222可以对显示面板221以外的区域也具备检测用户操作的功能。换言之，操作面板222可具备针对与显示面板221重叠的重叠部分的检测区域(以下，称为显示区域)、及针对除此以外的不与显示面板221重叠的外缘部分的检测区域(以下，称为非显示区域)。
另外，可使显示区域的大小与显示面板221的大小完全一致，但无需一定要使两者一致。并且，操作面板222可具备外缘部分及除此以外的内侧部分这两个感应区域。而且，外缘部分的宽度根据框体202的大小等而适当设计。此外，作为在操作面板222中采用的位置检测方式，可举出矩阵开关方式、电阻膜方式、表面弹性波方式、红外线方式、电磁感应方式、静电电容方式等，还可以采用任意方式。
通话部230具备扬声器231和麦克风232，所述通话部将通过麦克风232输入的用户的语音转换成能够在主控制部200中处理的语音数据来输出至主控制部200、或者对通过无线通信部210或外部输入输出部260接收的语音数据进行解码而从扬声器231输出。并且，如图21所示，例如能够将扬声器231搭载于与设置有显示输入部220的面相同的面，并将麦克风232搭载于框体202的侧面。
操作部240为使用键开关等的硬件键，接受来自用户的命令。例如，如图21所示，操作部240搭载于智能手机201的框体202的侧面，是用手指等按下时开启，手指离开时通过弹簧等的复原力而成为关闭状态的按钮式开关。
存储部250存储主控制部200的控制程序和控制数据、应用软件、对通信对象的名称和电话号码等建立对应关联的地址数据、所收发的电子邮件的数据、通过Web浏览下载的Web数据、及已下载的内容数据，并且临时存储流数据等。并且，存储部250由内置于智能手机的内部存储部251及具有装卸自如的外部存储器插槽的外部存储部252构成。另外，构成存储部250的各个内部存储部251与外部存储部252通过使用闪存类型(flash memorytype)、硬盘类型(hard disk type)、微型多媒体卡类型(multimedia card micro type)、卡类型的存储器(例如，MicroSD(注册商标)存储器等)、RAM(Random Access Memory)、ROM(Read Only Memory)等存储介质来实现。
外部输入输出部260发挥与连结于智能手机201的所有外部设备的接口的作用，用于通过通信等(例如，通用串行总线(USB)、IEEE1394等)或网络(例如，互联网、无线LAN、蓝牙(Bluetooth)(注册商标)、RFID(Radio Frequency Identification)、红外线通信(Infrared Data Association：IrDA)(注册商标)、UWB(Ultra Wideband)(注册商标)、紫蜂(Zig Bee)(注册商标)等)直接或间接地与其他外部设备连接。
作为与智能手机201连结的外部设备，例如有：有/无线头戴式耳机、有/无线外部充电器、有/无线数据端口、经由卡插槽连接的存储卡(Memory card)或SIM(SubscriberIdentity Module Card)/UIM(User Identity Module Card)卡、经由语音/视频I/O(Input/Output)端子连接的外部语音/视频设备、无线连接的外部语音/视频设备、有/无线连接的智能手机、有/无线连接的个人计算机、有/无线连接的PDA、耳机等。外部输入输出部能够将从这种外部设备接收传送的数据传递至智能手机201内部的各构成要件、或将智能手机201内部的数据传送至外部设备。
GPS接收部270根据主控制部200的命令，接收从GPS卫星ST1～STn发送的GPS信号，根据所接收的多个GPS信号执行测位运算处理，检测包括智能手机201的纬度、经度、高度的位置。GPS接收部270在能够从无线通信部210或外部输入输出部260(例如无线LAN)获取位置信息时，还能够利用该位置信息检测位置。
动作传感器部280例如具备3轴加速度传感器等，根据主控制部200的命令，检测智能手机201的物理动作。通过检测智能手机201的物理动作，可检测智能手机201的移动方向或加速度。该检测结果输出至主控制部200。
电源部290根据主控制部200的命令，向智能手机201的各部供给蓄积在电池(未图示)中的电力。
主控制部200具备微处理器，根据存储部250所存储的控制程序或控制数据进行动作，统一控制智能手机201的各部。另外，主控制部200为了通过无线通信部210进行语音通信或数据通信，具备控制通信系统的各部的移动通信控制功能及应用处理功能。
应用处理功能通过主控制部200根据存储部250所存储的应用软件进行动作来实现。作为应用处理功能，例如有控制外部输入输出部260来与对象设备进行数据通信的红外线通信功能、进行电子邮件的收发的电子邮件功能、浏览Web页的Web浏览功能等。
并且，主控制部200具备根据所接收的数据或所下载的流数据等图像数据(静态图像或动态图像的数据)在显示输入部220显示影像等的图像处理功能。图像处理功能是指主控制部200对上述图像数据进行解码，对该解码结果实施图像处理并将图像显示于显示输入部220的功能。
而且，主控制部200执行对显示面板221的显示控制及检测通过操作部240、操作面板222进行的用户操作的操作检测控制。
通过执行显示控制，主控制部200显示用于启动应用软件的图标或滚动条等软件键，或者显示用于创建电子邮件的窗口。另外，滚动条是指用于针对无法落入显示面板221的显示区域的较大图像等，接收使图像的显示部分移动的命令的软件键。
并且，通过执行操作检测控制，主控制部200检测通过操作部240进行的用户操作，或者通过操作面板222接收对上述图标的操作或对上述窗口的输入栏的字符串的输入，或者接收通过滚动条进行的显示图像的滚动请求。
而且，通过执行操作检测控制，主控制部200具备判定对操作面板222操作的位置是与显示面板221重叠的重叠部分(显示区域)还是除此以外的不与显示面板221重叠的外缘部分(非显示区域)，并控制操作面板222的感应区域或软件键的显示位置的触摸面板控制功能。
并且，主控制部200还能够检测对操作面板222的手势操作，并根据检测出的手势操作执行预先设定的功能。手势操作表示并不是以往的简单的触摸操作，而是通过手指等描绘轨迹、或者同时指定多个位置、或者组合这些来从多个位置对至少一个描绘轨迹的操作。
相机部241是使用CMOS(Complementary Metal Oxide Semiconductor)或CCD(Charge-Coupled Device)等成像元件进行电子摄影的数码相机。并且，相机部241能够通过主控制部200的控制，将通过摄像获得的图像数据转换成例如JPEG(Joint Photographiccoding Experts Group)等的压缩的图像数据，并记录于存储部250，并且能够通过外部输入输出部260和无线通信部210输出。图21所示的智能手机201中，相机部241搭载于与显示输入部220相同的面，但相机部241的搭载位置并不限定于此，可搭载于显示输入部220的背面，或者也可以搭载有多个相机部241。另外，搭载有多个相机部241时，还能够切换用于进行摄影的相机部241来单独摄影、或者同时使用多个相机部241来进行摄影。
并且，相机部241能够利用于智能手机201的各种功能中。例如，能够在显示面板221显示通过相机部241获取的图像，或者作为操作面板222的操作输入之一利用相机部241的图像。并且，当GPS接收部270检测位置时，还能够参考来自相机部241的图像来检测位置。而且，还能够参考来自相机部241的图像，不使用3轴加速度传感器或者与3轴加速度传感器同时使用来判断智能手机201的相机部241的光轴方向，或判断当前的使用环境。当然，还能够在应用软件内利用来自相机部241的图像。
另外，能够在静态图像或动态图像的图像数据上附加通过GPS接收部270获取的位置信息、通过麦克风232获取的语音信息(也可通过主控制部等进行语音文本转换而成为文本信息)、或通过动作传感器部280获取的姿势信息等等来记录于存储部250，还能够通过外部输入输出部260或无线通信部210输出。
在上述的智能手机201中，与复原处理相关的上述各处理部例如可通过主控制部200、存储部250等适当地实现。
本发明并不限定于上述的实施方式，当然也能够在不脱离本发明宗旨的范围内进行各种变形。
符号说明
10-数码相机、11-摄像部、12-光学系统、14-相机主体、16-透镜、17-光圈、18-光学系统操作部、20-光学系统控制器、22-光学系统输入输出部、26-成像元件、28-相机主体控制器、30-相机主体输入输出部、32-输入输出界面、33-显示部、34-设备控制部、35-图像处理部、36-复原处理部、37-用户界面、60-计算机、62-计算机输入输出部、64-计算机控制器、66-显示器、70-因特网、80-服务器、82-服务器输入输出部、84-服务器控制器、100-图像调整部、105-复原处理执行部、110-复原强度调节部、115-被摄体距离获取部、120-移动量获取部、125-复原处理判断部、130-滤波器获取部、140-自动调焦部、145-跟踪自动调焦判断部、150-帧速率设定部、155-模糊图像校正处理部、200-主控制部、201-智能手机、202-框体、210-无线通信部、220-显示输入部、221-显示面板、222-操作面板、230-通话部、231-扬声器、232-麦克风、240-操作部、241-相机部、250-存储部、251-内部存储部、252-外部存储部、260-外部输入输出部、270-GPS接收部、280-动作传感器部、290-电源部。

Claims (17)

1.一种摄像装置，其具备：
摄像部，生成通过光学系统捕捉的被摄体的连续的多个图像；
滤波器获取部，获取与有关所述光学系统的点像分布的传递函数对应地生成的复原滤波器；
被摄体距离获取部，获取由所述摄像部生成的所述多个图像的所述被摄体的被摄体距离；
移动量获取部，根据由所述被摄体距离获取部获取的所述被摄体距离，获取在所述摄像部中生成的连续的多个所述图像之间的、所述光学系统的光轴方向上的所述被摄体的移动量；
复原处理判断部，根据通过所述移动量获取部获取的所述移动量，判断是通过所述复原滤波器对所述图像进行复原处理，还是调节复原处理的复原强度来对所述图像进行复原处理，或是不对所述图像进行复原处理；
复原强度调节部，通过所述复原处理判断部判断为调节复原处理的所述复原强度来对所述图像进行复原处理时，调节复原处理的所述复原强度；及
复原处理执行部，根据所述复原处理判断部的判断，通过所述复原滤波器或调节所述复原强度来对所述图像执行复原处理。
2.一种摄像装置，其具备：
摄像部，生成通过光学系统捕捉的被摄体的连续的多个图像；
自动调焦部，跟踪所述被摄体来进行所述光学系统的自动调焦控制；
滤波器获取部，获取与有关所述光学系统的点像分布的传递函数对应地生成的复原滤波器；
被摄体距离获取部，获取由所述摄像部生成的所述多个图像的所述被摄体的被摄体距离；
移动量获取部，根据由所述被摄体距离获取部获取的所述被摄体距离，获取在所述摄像部中生成的连续的多个所述图像之间的、所述光学系统的光轴方向上的所述被摄体的移动量；
复原处理执行部，对所述图像执行复原处理；及
跟踪自动调焦判断部，通过所述复原处理执行部对连续的多个所述图像执行复原处理时，根据通过所述移动量获取部获取的所述移动量，判断跟踪所述被摄体的所述光学系统的所述自动调焦控制是被中止或持续，
所述摄像装置中，
当通过所述跟踪自动调焦判断部判断为向跟踪所述被摄体的所述光学系统的所述自动调焦控制被中止时，所述自动调焦部对由所述摄像部生成的所述图像中的聚焦区内的被摄体进行所述光学系统的自动调焦控制。
3.一种摄像装置，其具备：
摄像部，生成通过光学系统捕捉的被摄体的连续的多个图像；
帧速率设定部，设定与所述摄像部中的所述多个图像的生成有关的帧速率；
滤波器获取部，获取与有关所述光学系统的点像分布的传递函数对应地生成的复原滤波器；
复原处理判断部，根据在所述帧速率设定部中设定的所述帧速率，判断是通过所述复原滤波器对所述图像进行复原处理，还是调节复原处理的复原强度来对所述图像进行复原处理，或是不对所述图像进行复原处理；
复原强度调节部，通过所述复原处理判断部判断为调节复原处理的所述复原强度来对所述图像进行复原处理时，调节复原处理的所述复原强度；及
复原处理执行部，根据所述复原处理判断部的判断，通过所述复原滤波器或调节所述复原强度来对所述图像执行复原处理。
4.根据权利要求2所述的摄像装置，其还具备：
复原处理判断部，根据通过所述移动量获取部获取的所述移动量，判断是通过所述复原滤波器对所述图像进行复原处理，还是调节复原处理的复原强度来对所述图像进行复原处理，或是不对所述图像进行复原处理；及
复原强度调节部，通过所述复原处理判断部判断为调节复原处理的所述复原强度来对所述图像进行复原处理时，调节复原处理的所述复原强度，
所述复原处理执行部根据所述复原处理判断部的判断，通过所述复原滤波器或调节所述复原强度来对所述图像执行复原处理。
5.根据权利要求1或4所述的摄像装置，
所述摄像装置还具有帧速率设定部，该帧速率设定部设定与所述摄像部中的所述图像的生成有关的帧速率，
所述复原处理判断部根据通过所述帧速率设定部设定的所述帧速率及通过所述移动量获取部获取的所述被摄体的移动量，判断是通过所述复原滤波器对所述图像进行复原处理，还是调节复原处理的所述复原强度来对所述图像进行复原处理，或是不对所述图像进行复原处理。
6.根据权利要求1、3、4中任一项所述的摄像装置，其中，
当所述被摄体处于聚焦状态时，所述复原处理判断部判断为通过所述复原滤波器对所述图像进行复原处理，当所述被摄体处于散焦状态时，所述复原处理判断部判断为调节复原处理的所述复原强度来对所述图像进行复原处理。
7.根据权利要求1或4所述的摄像装置，其中，
所述复原处理判断部根据所述光学系统的所述光轴方向的所述移动量及所述被摄体距离，判断是通过所述复原滤波器对所述图像进行复原处理，还是调节复原处理的所述复原强度来对所述图像进行复原处理。
8.根据权利要求1、3、4中任一项所述的摄像装置，其中，
所述复原强度调节部通过调节所述复原滤波器的滤波器系数或调节复原处理的增益来调节复原处理的所述复原强度。
9.根据权利要求1至4中任一项所述的摄像装置，其中，
所述滤波器获取部根据与所述被摄体的拍摄有关的摄影条件，获取所述复原滤波器。
10.根据权利要求1、3、4中任一项所述的摄像装置，
所述摄像装置还具有模糊图像校正处理部，
当判断为不对所述图像进行复原处理时，所述复原处理判断部判断为进行与所述复原处理不同的模糊图像校正处理，
当通过所述复原处理判断部判断为进行所述模糊图像校正处理时，所述模糊图像校正处理部对所述图像进行所述模糊图像校正处理。
11.根据权利要求1至4中任一项所述的摄像装置，其中，
所述光学系统为更换式。
12.根据权利要求1至4中任一项所述的摄像装置，
所述摄像装置还具有显示部，
将通过所述复原处理执行部通过所述复原滤波器或调节所述复原强度来执行了复原处理的所述图像作为即时预览图像显示于所述显示部。
13.一种摄像方法，其包含：
生成步骤，生成通过光学系统捕捉的被摄体的连续的多个图像；
滤波器获取步骤，获取与有关所述光学系统的点像分布的传递函数对应地生成的复原滤波器；
被摄体距离获取步骤，获取在所述生成步骤中生成的所述多个图像的所述被摄体的被摄体距离；
移动量获取步骤，根据在所述被摄体距离获取步骤中获取的所述被摄体距离，获取在所述生成步骤中生成的连续的多个所述图像之间的、所述光学系统的光轴方向上的所述被摄体的移动量；
复原处理判断步骤，根据通过所述移动量获取步骤获取的所述移动量，判断是通过所述复原滤波器对所述图像进行复原处理，还是调节复原处理的复原强度来对所述图像进行复原处理，或是不对所述图像进行复原处理；
复原强度调节步骤，通过所述复原处理判断步骤判断为调节复原处理的所述复原强度来对所述图像进行复原处理时，调节复原处理的所述复原强度；及
复原处理执行步骤，根据所述复原处理判断步骤的判断，通过所述复原滤波器或调节所述复原强度来对所述图像执行复原处理。
14.一种摄像方法，其包含：
生成步骤，生成通过光学系统捕捉的被摄体的连续的多个图像；
自动调焦步骤，跟踪所述被摄体来进行所述光学系统的自动调焦控制；
滤波器获取步骤，获取与有关所述光学系统的点像分布的传递函数对应地生成的复原滤波器；
被摄体距离获取步骤，获取在所述生成步骤中生成的所述多个图像的所述被摄体的被摄体距离；
移动量获取步骤，根据在所述被摄体距离获取步骤中获取的所述被摄体距离，获取在所述生成步骤中生成的连续的多个所述图像之间的、所述光学系统的光轴方向上的所述被摄体的移动量；
复原处理执行步骤，对所述图像执行复原处理；及
跟踪自动调焦判断步骤，通过所述复原处理执行步骤对连续的多个所述图像执行复原处理时，根据通过所述移动量获取步骤获取的所述移动量，判断跟踪所述被摄体的所述光学系统的所述自动调焦控制是被中止或持续，
所述摄像方法中，
所述自动调焦步骤中，当通过所述跟踪自动调焦判断步骤判断为跟踪所述被摄体的所述光学系统的所述自动调焦控制被中止时，对在所述生成步骤中生成的所述图像中的聚焦区内的被摄体进行所述光学系统的自动调焦控制。
15.一种摄像方法，其包含：
生成步骤，生成通过光学系统捕捉的被摄体的连续的多个图像；
帧速率设定步骤，设定与所述生成步骤中的所述多个图像的生成有关的帧速率；
滤波器获取步骤，获取与有关所述光学系统的点像分布的传递函数对应地生成的复原滤波器；
复原处理判断步骤，根据通过所述帧速率设定步骤设定的所述帧速率，判断是通过所述复原滤波器对所述图像进行复原处理，还是调节复原处理的复原强度来对所述图像进行复原处理，或是不对所述图像进行复原处理；
复原强度调节步骤，当通过所述复原处理判断步骤判断为调节复原处理的所述复原强度来对所述图像进行复原处理时，调节复原处理的所述复原强度；及
复原处理执行步骤，根据所述复原处理判断步骤的判断，通过所述复原滤波器或调节所述复原强度来对所述图像执行复原处理。
16.一种图像处理装置，其具备：
图像获取部，从摄像部获取通过光学系统捕捉的被摄体的连续的多个图像；
滤波器获取部，获取与有关所述光学系统的点像分布的传递函数对应地生成的复原滤波器；
被摄体距离获取部，获取从所述摄像部获取的所述多个图像的所述被摄体的被摄体距离；
移动量获取部，根据由所述被摄体距离获取部获取的所述被摄体距离，获取从所述摄像部获取的连续的多个所述图像之间的、所述光学系统的光轴方向上的所述被摄体的移动量；
复原处理判断部，根据通过所述移动量获取部获取的所述移动量，判断是通过所述复原滤波器对所述图像进行复原处理，还是调节复原处理的复原强度来对所述图像进行复原处理，或是不对所述图像进行复原处理；
复原强度调节部，通过所述复原处理判断部判断为调节复原处理的所述复原强度来对所述图像进行复原处理时，调节复原处理的所述复原强度；及
复原处理执行部，根据所述复原处理判断部的判断，通过所述复原滤波器或调节所述复原强度来对所述图像执行复原处理。
17.根据权利要求16所述的图像处理装置，其中，
所述被摄体距离获取部从图像数据获取记录于所述图像数据的所述被摄体距离。
CN201480041577.5A 2013-08-01 2014-06-27 摄像装置、摄像方法及图像处理装置 Active CN105493493B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013-160768 2013-08-01
JP2013160768 2013-08-01
PCT/JP2014/067106 WO2015015966A1 (ja) 2013-08-01 2014-06-27 撮像装置、撮像方法及び画像処理装置

Publications (2)

Publication Number Publication Date
CN105493493A CN105493493A (zh) 2016-04-13
CN105493493B true CN105493493B (zh) 2018-08-28

Family

ID=52431507

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480041577.5A Active CN105493493B (zh) 2013-08-01 2014-06-27 摄像装置、摄像方法及图像处理装置

Country Status (4)

Country Link
US (2) US9794500B2 (zh)
JP (1) JP5944055B2 (zh)
CN (1) CN105493493B (zh)
WO (1) WO2015015966A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6516544B2 (ja) * 2015-04-22 2019-05-22 キヤノン株式会社 制御装置、光学機器、撮像装置および制御方法
JP6247425B2 (ja) 2015-04-23 2017-12-13 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
JP6240813B2 (ja) 2015-04-23 2017-11-29 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
JP6648918B2 (ja) * 2015-08-17 2020-02-14 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体
JP6559011B2 (ja) * 2015-08-20 2019-08-14 キヤノン株式会社 画像処理装置、および画像処理方法
CN108605094B (zh) * 2016-02-26 2019-08-06 富士胶片株式会社 图像处理装置、摄像装置以及图像处理方法
US10685458B2 (en) * 2016-07-20 2020-06-16 Ramot At Tel Aviv University Ltd. Radiometric imaging
KR102500836B1 (ko) * 2016-09-27 2023-02-16 한화테크윈 주식회사 광각 영상 처리 방법 및 이를 위한 장치
US10101572B2 (en) * 2016-11-23 2018-10-16 Mitutoyo Corporation Variable focal length lens system with multi-level extended depth of field image processing
CN109451240B (zh) * 2018-12-04 2021-01-26 百度在线网络技术（北京）有限公司 对焦方法、装置、计算机设备和可读存储介质
US10798292B1 (en) 2019-05-31 2020-10-06 Microsoft Technology Licensing, Llc Techniques to set focus in camera in a mixed-reality environment with hand gesture interaction
CN117528246B (zh) * 2024-01-04 2024-04-16 杭州星犀科技有限公司 自动对焦触发方法、系统、终端及介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101366270A (zh) * 2005-11-29 2009-02-11 京瓷株式会社 成像设备和成像方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5790709A (en) * 1995-02-14 1998-08-04 Ben-Gurion, University Of The Negev Method and apparatus for the restoration of images degraded by mechanical vibrations
JP4281309B2 (ja) * 2002-08-23 2009-06-17 ソニー株式会社 画像処理装置、画像処理方法、および画像フレームデータ記憶媒体、並びにコンピュータ・プログラム
JP4152398B2 (ja) * 2005-05-26 2008-09-17 三洋電機株式会社 手ぶれ補正装置
JP4916853B2 (ja) * 2005-11-29 2012-04-18 京セラ株式会社 撮像装置およびその方法
JP4985062B2 (ja) * 2006-04-14 2012-07-25 株式会社ニコン カメラ
JP2009171341A (ja) * 2008-01-17 2009-07-30 Sanyo Electric Co Ltd ぶれ補正装置及び撮像装置
JP2009260622A (ja) 2008-04-16 2009-11-05 Nikon Corp 撮像装置
JP5404160B2 (ja) * 2009-04-27 2014-01-29 オリンパス株式会社 撮像システムおよび撮像方法
JP5366775B2 (ja) * 2009-12-01 2013-12-11 キヤノン株式会社 撮像装置および画像処理方法
JP2011193276A (ja) * 2010-03-15 2011-09-29 Canon Inc 撮像装置、その制御方法及びプログラム
CN102822863B (zh) * 2010-03-31 2015-11-25 佳能株式会社 图像处理设备和使用该图像处理设备的图像拾取设备
JP2011217274A (ja) 2010-04-01 2011-10-27 Canon Inc 画像回復装置、画像回復方法及びプログラム
WO2011145296A1 (ja) * 2010-05-21 2011-11-24 パナソニック株式会社 撮像装置、画像処理装置、画像処理方法、および画像処理プログラム
JP5709911B2 (ja) * 2013-02-04 2015-04-30 キヤノン株式会社 画像処理方法、画像処理装置、画像処理プログラムおよび撮像装置
CN105453540B (zh) * 2013-08-02 2018-08-21 富士胶片株式会社 图像处理装置、摄像装置、图像处理方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101366270A (zh) * 2005-11-29 2009-02-11 京瓷株式会社 成像设备和成像方法

Also Published As

Publication number Publication date
US10027909B2 (en) 2018-07-17
WO2015015966A1 (ja) 2015-02-05
JPWO2015015966A1 (ja) 2017-03-02
US9794500B2 (en) 2017-10-17
JP5944055B2 (ja) 2016-07-05
US20180007292A1 (en) 2018-01-04
CN105493493A (zh) 2016-04-13
US20160119560A1 (en) 2016-04-28

Similar Documents

Publication Publication Date Title
CN105493493B (zh) 摄像装置、摄像方法及图像处理装置
CN108419023B (zh) 一种生成高动态范围图像的方法以及相关设备
CN106134178B (zh) 图像处理装置、摄像装置以及图像处理方法
CN105580349B (zh) 图像处理装置、摄像装置及图像处理方法
WO2019183813A1 (zh) 一种拍摄方法及设备
US9357107B2 (en) Image-processing device, image-capturing device, image-processing method, and recording medium
CN105432068B (zh) 摄像装置、摄像方法及图像处理装置
US9710895B2 (en) Image processing device, image capture device, image processing method, and program
CN104704807B (zh) 图像处理装置、摄像装置及图像处理方法
US9906732B2 (en) Image processing device, image capture device, image processing method, and program
CN103108120A (zh) 变焦控制方法和设备
CN105453540B (zh) 图像处理装置、摄像装置、图像处理方法
US9965833B2 (en) Optical system characteristic data storing device, method, and program for image restoration filtering
CN105409198B (zh) 摄像装置及图像处理方法
CN106415348B (zh) 摄像装置及对焦控制方法
CN104797967A (zh) 摄像装置及对焦控制方法
CN104823094A (zh) 摄像装置及对焦控制方法
CN106464798B (zh) 图像处理装置、摄像装置、图像处理方法以及记录介质
JP2011223294A (ja) 撮像装置
CN108141530A (zh) 图像处理装置、图像处理方法及程序
JP5702891B2 (ja) 画像処理装置、撮像装置、コンピュータ、画像処理方法及びプログラム
CN109845241A (zh) 摄像装置、摄像方法及程序
WO2017071560A1 (zh) 图片处理方法及装置
CN117915203A (zh) 一种图像处理方法、装置、电子设备、芯片及介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant