CN105530426A - 摄像装置及其控制方法 - Google Patents
摄像装置及其控制方法 Download PDFInfo
- Publication number
- CN105530426A CN105530426A CN201510651507.8A CN201510651507A CN105530426A CN 105530426 A CN105530426 A CN 105530426A CN 201510651507 A CN201510651507 A CN 201510651507A CN 105530426 A CN105530426 A CN 105530426A
- Authority
- CN
- China
- Prior art keywords
- image
- display
- unit
- exposure
- camera head
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/743—Bracketing, i.e. taking a series of images with varying exposure conditions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
Abstract
本发明公开了一种摄像装置及其控制方法。摄像装置包括:摄像单元,其被配置为以不同曝光量拍摄多个图像;图像合成单元,其被配置为合成所述多个图像并生成合成图像;显示控制单元,其被配置为在显示单元上显示由所述图像合成单元生成的所述合成图像;其中,所述显示控制单元执行控制,从而根据用于放大在所述显示单元上显示的所述合成图像的一部分的指示,在所述显示单元上显示由所述摄像单元拍摄的所述多个图像中的图像的放大图像,而不显示所述合成图像。
Description
技术领域
本发明涉及一种摄像装置及其控制方法,尤其涉及一种利用高动态范围(HDR)合成的图像处理技术。
背景技术
近年来存在配设有各种摄像技术的摄像装置。已知高动态范围(HDR)合成技术,其能够通过合成以不同曝光量拍摄相同场景而获取的多个图像来获取具有比在一个拍摄操作中所获得的动态范围更广的动态范围的图像。利用HDR合成技术,能够获取抑制了拍摄图像中的高光溢出(blown-outhighlight)和暗部缺失(crushedblack)的图像。
也已知用于实时取景显示或者记录通过连续执行获取利用该HDR合成而生成的合成图像(HDR图像)而获取的运动图像(HDR运动图像)的技术。因为合成了在不同开始定时和结束定时拍摄的多个图像从而生成一个图像,所以HDR运动图像的生成可能受到视角、相机抖动等的影响,并且存在生成的合成图像模糊的情况。为了解决该问题,日本特开2014-14069号公报提出了一种用于抑制在拍摄HDR运动图像时光学变焦操作期间的合成图像的模糊的技术。
同时,在实时取景显示期间,放大并显示图像的一部分以便确认聚焦状态。然而,当放大图像的一部分时,取决于设置的拍摄条件或者在要被放大的位置处的被摄体的亮度,存在由于高光溢出状态等而很难执行聚焦确认的显示的情况。为了解决该问题,日本特开第2013-162420号公报提出了如下技术:通过提供用于放大显示的曝光控制单元并改变放大显示的图像质量而使在实时取景显示期间容易确认聚焦状态。
然而,上述传统技术是通过在改变变焦倍率的同时输出非合成图像来取代HDR图像,从而解决光学变焦操作期间的图像模糊的技术,而意不在于解决实时取景显示期间放大显示中的图像模糊。此外,上述传统技术是针对不包含合成图像的运动图像改变实时取景显示期间放大显示中的图像质量的技术,并没有考虑在拍摄HDR运动图像时的放大显示。因此,在放大显示期间会出现图像模糊,此外,因为需要专用于放大显示的曝光控制单元,所以成本会增加。
发明内容
本发明考虑到上述问题,实现了抑制HDR运动图像的放大显示期间的图像模糊并使聚焦状态容易确认的摄像装置及其控制方法。
为了解决前述问题,本发明提供一种摄像装置,包括:摄像单元,其被配置为以不同曝光量拍摄多个图像;图像合成单元,其被配置为合成所述多个图像并生成合成图像;显示控制单元,其被配置为在显示单元上显示由所述图像合成单元生成的所述合成图像;其中,所述显示控制单元执行控制,从而根据用于放大在所述显示单元上显示的所述合成图像的一部分的指示,在所述显示单元上显示由所述摄像单元拍摄的所述多个图像中的图像的放大图像,而不显示所述合成图像。
为了解决前述问题,本发明提供一种摄像装置的控制方法,该方法包括:摄像步骤,以不同曝光量拍摄多个图像;图像合成步骤,合成所述多个图像并生成合成图像;显示控制步骤,在显示装置上显示在所述图像合成步骤中生成的合成图像;其中,在所述显示控制步骤执行控制,从而根据用于放大在所述显示装置上显示的合成图像的一部分的指示,在所述显示装置上显示在所述摄像步骤中拍摄的所述多个图像中的图像的放大图像,而不显示所述合成图像。
根据本发明,能够抑制HDR运动图像的放大显示期间的图像模糊并使聚焦状态容易确认。
根据以下参照附图对示例性实施例的描述,本发明的其他特征将变得清楚。
附图说明
并入说明书并构成说明书一部分的附图例示了本发明的实施例,并与说明书共同说明本发明的原理。
图1是示出作为本发明的图像处理装置的一个示例的数字照相机400的功能配置的示例的框图。
图2是示出根据本实施例的HDR运动图像拍摄期间的时序图的视图。
图3A至图3D是示意性例示利用传统技术中的各曝光设置的显示的示例的视图。
图4A和图4B是示意性例示利用本实施例中的各曝光设置的显示的示例的视图。
图5是示出根据第一实施例在HDR运动图像拍摄期间的放大显示处理中的一系列操作的流程图。
图6是示出根据第二实施例在HDR运动图像拍摄期间的放大显示处理中的一系列操作的流程图。
图7是示出根据第三实施例在HDR运动图像拍摄期间的放大显示处理中的一系列操作的流程图。
图8是示出根据第四实施例在HDR运动图像拍摄期间的放大显示处理中的一系列操作的流程图。
图9是示出根据本实施例基于AF操作期间的曝光量确定用于选择图像的曝光量的方法的图表。
具体实施方式
第一实施例
下文将参照附图具体描述本发明的示例性实施例。应注意,下文将描述将本发明应用于作为摄像装置的示例、具有生成并实时取景显示通过连续执行获取利用高动态范围合成的合成图像(HDR图像)而获取的运动图像(HDR运动图像)的功能的数字照相机的示例。然而,本发明的摄像装置不限于数字照相机,本发明也能够适用于任何具有生成并实时取景显示HDR运动图像的电子设备。这些电子设备可以包括移动电话、游戏设备、平板终端、个人计算机、手表型或目镜型信息终端等。
数字照相机400的配置
数字照相机400具有信息处理单元100、摄像单元200和记录介质300,信息处理单元100对摄像单元200拍摄的图像执行诸如图像处理的处理,并将图像记录到记录介质300。
信息处理单元100具有图像处理单元101、控制单元102、存储单元103、编解码单元104、外部连接单元105、操作单元106、显示单元107以及记录控制单元108。
图像处理单元101对从摄像单元200输出的图像信号执行诸如像素插值处理和颜色转换处理的图像处理。图像处理单元101还通过执行A/D转换将从图像传感器201读取的模拟信号转换为数字信号,并将数据转换为YUV颜色空间数据格式。图像处理单元101还执行各种类型的图像处理,并使存储单元103存储处理的图像数据。例如,图像处理单元101还能够对多个图像数据执行图像合成处理,并且能够执行诸如HDR合成的处理并输出合成的图像。
控制单元102是包括CPU(中央处理单元)的处理器,并按照存储在存储单元103的计算机程序控制数字照相机400的整体操作。例如,控制单元102在经由操作单元106接收来自用户的拍摄指令时控制摄像单元200和图像处理单元101开始拍摄处理。在接收来自控制单元102的指令时,摄像单元200和图像处理单元101执行包括诸如曝光处理、显影处理等处理的拍摄处理。控制单元102也控制摄像单元200和图像处理单元101执行AF(自动对焦)处理和AE(自动曝光调整)处理。当控制单元102指示开始AF处理和AE处理时,图像处理单元101使用从摄像单元200输出的图像信号执行针对聚焦状态和曝光状态的计算处理。摄像单元200和图像处理单元101基于此计算结果执行TTL(通过透镜)型AF处理和AE处理。另外,在HDR运动图像实时取景显示期间经由操作单元106接收到显示放大的指示时,控制单元102执行下文描述的放大显示处理的显示控制。
存储单元103是诸如半导体存储器的主存储设备,并起到控制单元102的工作区域的作用。存储单元103也可以起到保持用于生成合成图像的多个图像数据的保持区域的作用。应注意,控制单元102的工作区域和保持区域不限于存储单元103,例如,可以是外部记录装置,诸如硬盘驱动器。
编解码单元104将写入存储单元103的YUV格式的图像数据编码成诸如JPEG格式或无损压缩格式(RAW格式)的预定格式的静止图像,并输出数据。相反,能够将JPEG格式、无损压缩格式(RAW格式)等图像数据输入编解码单元104,编解码单元104可以将图像数据编码成YUV格式的图像数据并输出数据。编码的静止图像被存储在存储单元103。信息处理单元100能够通过使编解码单元104对相同的YUV图像数据应用不同的编码而生成不同格式的多个静止图像。
外部连接单元105在数字照相机400连接到外部设备的情况下执行连接控制处理。例如,在数字照相机400通过符合USB(通用串行总线)规范的方法连接到个人计算机的情况下,可以经由外部连接单元105将记录在记录介质300中的静止图像等发送到个人计算机。此外,外部连接单元105可以使用无线通信与外部设备进行通信,或者可以将视频信号发送到诸如电视机的视频输出设备。
操作单元106提供用户界面,用户使用该用户界面操作数字照相机400,在检测到用户的操作时,该操作单元106通知控制单元102检测结果、操作内容等。操作单元106包括用于操作数字照相机400的电源按钮、模式切换拨盘、释放按钮、十字按钮、菜单按钮,并且每一个按钮都配置有开关、触摸面板等。例如,在下文将描述的放大显示处理中,操作单元106确定是否存在用于在HDR运动图像实时取景显示期间放大显示的用户操作的指示,并通知控制单元102放大显示的指示。应注意,用于放大显示的指示可以包括多个操作,诸如在用于设置放大位置的十字按钮上的操作、触摸面板上的操作以及用于开始放大显示的放大按钮的按压。
显示单元107由诸如液晶显示器的显示设备构成。在数字照相机400的操作模式为拍摄模式的情况下,显示单元107经由图像处理单元101等获取由摄像单元200作为运动图像顺次获得的图像信号,并显示运动图像,从而实现实时取景显示。当用户经由操作单元106在实时取景显示中选择作为放大对象的区域时,所选区域的放大图像被显示在显示单元107上。
在数字照相机400的操作模式为拍摄模式的情况下,记录控制单元108在记录介质300上记录由编解码单元104编码的静态图像数据。连接到记录控制单元108的记录介质300是磁性或半导体类型的辅助存储设备,并且可以是可移除的介质或在数字照相机400中内置的存储区域。
图像传感器201包括将经由透镜单元(未示出)进入的被摄体的光学图像转换成电子信号以获取图像信号的图像传感器,例如,该图像传感器可以是CCD或CMOS图像传感器。
镜202将经由透镜单元进入的被摄体的光学图像移动到向图像传感器201或取景器203引导的位置。
取景器203是光学取景器,并使得能够目视确认经由透镜单元进入的被摄体的光学图像。
HDR运动图像拍摄的功能块的操作的概述
将参考图2所示的时序图描述利用数字照相机400实现HDR运动图像时的功能块的操作定时。时序图示出从HDR合成以不同的曝光量拍摄的两个图像并利用合成的图像生成运动图像作为运动图像帧到在显示单元107上显示运动图像的一系列操作。在图2中,水平轴代表时间,并且示出功能块在各预定时间执行处理的状态。示出了HDR运动图像拍摄在时间T0开始和在时间T50显示第二合成图像的状态。
在时间T0,控制单元102为摄像装置200设置曝光量A1。
在T10,摄像单元200以设置的曝光量A1开始摄像1,然后在T11结束摄像1。然后,在T11,图像处理单元101开始对摄像1期间拍摄的图像信号进行图像处理1,然后在T12结束处理。在T12,存储单元103对图像处理中1期间生成的图像数据执行图像保持1,以便合成接下来拍摄的图像和该图像数据。从T10到T13的一系列操作导致了在存储单元103保持用于生成构成HDR运动图像的合成图像的第一图像数据的状态。
在T13,控制单元102为摄像单元200设置不同于曝光量A1的曝光量B1。接下来,在T20,设置单元200以设置的曝光量B1开始摄像2,然后在T21结束处理。在T21,图像处理单元101开始对摄像2期间拍摄的图像信号进行图像处理2,然后在T22结束处理。另外,在T22,图像处理单元101从存储单元103读出以曝光量A1拍摄的图像数据(图像保持1),并开始对以曝光量B1拍摄的摄像2的图像数据的合成处理1,然后在T23结束处理。在T23,显示单元107开始显示已合成的合成图像。
通过以这种方式合成分别以不同曝光量(A1和B1)的摄像1和摄像2的图像,能够获取具有比在一个拍摄操作中获取的动态范围更广的动态范围的HDR图像。
接下来,在T23,控制单元102为摄像单元200设置曝光量A2。这里,曝光量A2的值不一定与在T0设置的曝光量A1的值相同。从T30开始,通过重复、连续执行上述从时间T10到T23的处理,能够实现通过连续显示HDR图像而生成的HDR运动图像。
通过HDR运动图像拍摄所获取的图像的显示的问题
另外,将参照图3A到图3D描述在显示通过HDR运动图像拍摄所获取的图像时的问题。
图3A和图3B分别示出利用在HDR合成前的单曝光量生成的图像,即,用于HDR合成的图像。这里,以比用于图3A中图像的曝光量更低的曝光量拍摄图3B中的图像。
被摄体301存在于视角中相对明亮的场景中,高曝光图像中过度的曝光量引起高光溢出,在高曝光图像中,曝光量被设置的高于合适的曝光量(301A),但曝光量在低曝光图像中是合适的,在低图像中,曝光量被设置低于合适的曝光量(301B)。另一方面,被摄体302存在于视角中相对较暗的场景中,曝光量在高曝光图像(302A)中是合适的,但在低曝光图像(302B)中不充分的曝光量导致暗部缺失。
图3C是通过合成图3A和图3B中的上述图像生成的HDR图像。这里,通过合成图像在301C和302C分别减少了高光溢出和暗部缺失,从而在高曝光图像和低曝光图像中具有合适的曝光的部分会突出。
然而,当由于照相机抖动、被摄体移动时的被摄体抖动等在拍摄期间要被合成的两个图像中的视角中的被摄体位置移动时,存在合成图像中被摄体的图像模糊的问题。图3D示出图3C所示的合成图像中的被摄体302的一部分的放大图像。HDR合成后放大并显示302C使被摄体模糊显著(例如,302C轮廓部分所示的阴影部分)。也就是,即使被摄体的模糊不如图3C的全画面视图显著的情况下,在一些情况下放大也使模糊显著。然后,在一些情况下,例如,当在对被摄体聚焦的状态下试图利用放大显示确认聚焦状态时,由于这种被摄体的模糊而不能适当地执行聚焦状态的确认时会出现不便。
HDR运动图像拍摄期间的放大显示处理的概述
接下来,将参照图4A、图4B和图5描述从HDR运动图像的全画面显示切换到单曝光的图像的放大显示的处理。
图4A示出通过HDR合成以不同曝光量拍摄的多个画面而生成的图像。这里,由于诸如照相机抖动的原因而模糊显示被摄体401A。
另一方面,图4B示出通过放大并显示被摄体401A而获取的图像以便确认其聚焦状态。为了减少在图4A中的全画面显示中发生的被摄体模糊,显示以特定曝光量拍摄的单曝光量的图像(而不是HDR合成图像)作为该放大显示所示的图像。这里,示出选择高曝光图像的状态,但也可以选择低曝光图像。例如,选择并显示在执行HDR合成时放大显示的区域中最突出的图像(这里,是高曝光图像)。
HDR运动图像拍摄中的放大显示处理的一系列操作
接下来,将参照图5描述针对HDR运动图像拍摄中的放大显示处理的一系列操作。应注意,当经由操作单元106的释放按钮、模式切换拨盘等向控制单元102通知开始运动图像拍摄的指示时,该处理开始。在图5的流程图中,除非另有说明,否则通过控制单元102将控制程序扩展到存储单元103的工作区域并执行该程序来实现各步骤的处理。
在步骤S301,当控制单元102经由操作单元106接收到用于运动图像拍摄的HDR模式设置时,信息处理单元100和摄像单元200执行功能块的设置,以便执行参照图2描述的HDR运动图像拍摄。
在步骤S302,控制单元102确定是否存在用于实时取景显示的显示开始请求。当经由操作单元106接收到显示开始请求的通知时,控制单元102将处理推进到步骤S303以便执行实时取景显示。另一方面,当确定未接收到显示开始请求的通知时,处理返回步骤S302。
在步骤S303,控制单元102在显示单元107上执行HDR图像的全画面显示。控制单元102执行控制,从而将HDR图像输入到显示单元107,然后显示单元107显示整个图像。
在步骤S304,控制单元102确定是否在全画面显示期间经由操作单元106接收到显示结束的请求,在确定接收到显示结束的请求时将处理推到步骤S309。在确定未接收到该请求时,处理推进到步骤S305,以便确定在继续全画面显示时是否存在其余的显示请求。
在步骤S305,控制单元102确定是否经由操作单元106接收到实时取景显示的放大显示的请求。当接收到使用操作单元106的触摸面板、操作按钮等的通知,并确定接收到放大显示的请求时,控制单元102将处理推进到步骤S306以便切换显示。另一方面,当确定未接收到放大显示的请求时,处理返回到步骤S304,并继续HDR运动图像全画面显示。
在步骤S306,控制单元102控制显示单元107执行单曝光量图像(而不是HDR图像)的放大显示。控制单元102为图像处理单元101指定用于放大显示的图像的区域,并控制图像处理单元101输出通过放大单曝光量的图像的一部分生成的图像。图像处理单元101根据控制单元102的指示,从单曝光量的图像剪出指定区域,放大该区域,并将该区域与HDR图像一起输出到存储单元103。这里,图像处理单元101选择在执行HDR合成时在放大显示区域中最突出的单曝光量的图像,并进行裁剪处理。显示单元107根据控制单元102的指示从存储单元103读取用于放大显示的图像,并显示图像。
在步骤S307,控制单元102确定在放大显示期间是否经由操作单元106接收到用于显示结束的请求,当确定未接收到用于显示结束的请求时,处理推进到步骤S308,以便继续显示。另一方面,当确定接收到用于显示结束的请求时,处理推进到步骤S309,以便结束显示。
在步骤S308,控制单元102确定在放大显示期间是否经由操作单元106接收到用于全画面显示的请求,当确定接收到用于全画面显示的请求时,处理返回至步骤S303,以便使显示单元107再次执行HDR图像的全画面显示。另一方面,当确定未接收到用于全画面显示的请求时,处理返回至步骤S307,以便继续放大显示。
在步骤S309,控制单元102结束实时取景显示,并结束该处理的一系列操作。
应注意,在本实施例中,描述里仅利用两个图像(高曝光图像和低曝光图像)执行HDR合成,并将高曝光图像或低曝光图像显示为放大显示。然而,本发明可以通过如下方式实现:利用不同曝光量的两个或更多个图像执行HDR合成,并利用这些图像中的任意图像执行放大显示。
此外,在本实施例中,将利用作为帧的HDR合成图像的运动图像拍摄描述为示例,但本发明也适用于诸如时间经过拍摄(也称作间隔拍摄)的以大概几秒到几十分钟的间隔生成静止图像(即,HDR图像)的情况。
另外,在本实施例中,描述了数字照相机400执行HDR运动图像的拍摄并执行在显示单元107上放大显示的示例。然而,例如,本发明也适用于通过通信终端或图像处理装置操作摄像装置的情况。也就是,可以采用如下配置:通信终端或图像处理装置顺次地获取摄像装置拍摄的单曝光量的图像,从而生成HDR运动图像,并执行上述单曝光量的图像的放大显示。因此,在由诸如智能电话的通信设备等操作能够以不同曝光量拍摄的摄像装置时,能够利用放大显示确认聚焦状态。在这种情况下,上述请求包括从外部接收到的命令以及从操作单元输入的指示。
如上文所述,在本实施例中,在执行实时取景显示中放大显示的情况下,显示未经过HDR合成的单曝光量的图像。因此,即使在要被合成的两个图像中视角中的被摄体位置由于照相机抖动、被摄体移动时的被摄体抖动等而移动的情况下,也能够更精确地利用放大图像确认聚焦状态。因此,能够抑制HDR运动图像放大显示期间的图像模糊并容易地确认聚焦状态。
第二实施例
接下来,将描述第二实施例。在第二实施例,通过根据作为放大对象的区域的亮度选择单曝光量的图像来执行放大显示处理。因此,本实施例中HDR运动图像拍摄中的放大显示处理与第一实施例不同,但其他配置与第一实施例相同。因此,对相同的配置和步骤指定相同的参考标记从而省略多余描述,并将主要描述其不同之处。
下文将参照图6描述根据本实施例的HDR运动图像拍摄中的放大显示处理。
首先,执行参照图5在第一实施例中描述的步骤S301到步骤S305的处理。
在步骤S401,响应于在全画面显示期间经由操作单元106接收到的放大显示的请求,控制单元102计算在用于执行放大显示的位置处的亮度。可以利用摄像单元200形成的图像中的放大显示位置处的像素的信号水平,或者可以利用专用的亮度传感器(在图1中未示出)测量的值。此时,不论是获取高曝光图像的情况还是获取低曝光图像的情况,只要从摄像单元200输出的放大显示位置处的像素的信号是在放大显示位置处获取或测量的亮度即可。
在步骤S402,控制单元102确定在步骤S401计算的亮度值是否小于或等于预定的指定值(阈值)。在计算出的亮度值小于或等于预定的指定值的情况下,控制单元102将处理推进到步骤S403,并使用高曝光图像执行放大显示。另一方面,在计算出的亮度值大于预定的指定值的情况下,控制单元102将处理推进到步骤S404,并使用低曝光图像执行放大显示。此时,针对获取从ROM(未例示)读取并使用的高曝光图像(或低曝光图像)时所获得的信号电平从实验等预先确定预定的指定值即可。此外,可以根据构成用于全画面显示的HDR图像的多个图像的曝光量,动态确定预定的指定值,而不是将此值设置为一个固定值。
随后,执行参照图5描述的步骤S307到步骤S309的处理,然后结束一系列处理。
如上文所述,在本实施例中,在执行实时取景显示中放大显示的情况下显示未经过HDR合成的单曝光量图像,并根据放大位置处的亮度值做出单曝光量图像的选择。因此,能够利用放大图像更精确地确认聚焦状态,另外,能够从单曝光量的图像中选择具有更适合于显示的曝光量的图像,并显示。
第三实施例
接下来,将描述第三实施例。在第三实施例中,在从HDR运动图像的全画面显示切换到放大显示的情况下,根据是否存在控制焦点位置的操作(例如,AF操作),在放大期间选择单曝光量图像的显示或HDR图像的显示,并执行放大显示处理。因此,在本实施例中在HDR运动图像拍摄中的放大显示处理与第一和第二实施例不同,但其他配置与第一实施例相同。因此,对相同的配置和步骤指定相同的参考标记,以省略多余描述,并主要描述不同之处。
下文将参照图7描述根据本实施例的HDR运动图像拍摄中的放大显示处理。
首先,执行参照图5在第一实施例中描述的步骤S301到步骤S303的处理。
接下来,在步骤S501,控制单元102确定是否接收到AF请求。控制单元102基于操作单元106的通知确定是否存在表示AF请求的操作,诸如半按压释放按钮。在确定接收到AF请求的情况下,控制单元102将处理推进到步骤S502,以便执行AF操作,另一方面,在确定未接收到AF请求的情况下,处理推进到S304,不执行AF操作。
在步骤S502,图像处理单元101和摄像单元200根据控制单元102的指示执行AF操作。例如,图像处理单元101基于从摄像单元200输出的图像的模糊量执行计算,并基于计算的计算量向摄像单元200输出用于控制焦点位置的控制量。摄像单元200基于获取的控制量控制聚焦透镜。图像处理单元101和摄像单元200可以在执行该流程图的处理的同时重复获取以不同聚焦位置拍摄的图像并输出控制量,直到在预定的AF框中获取到最佳聚焦状态。
接下来,执行参照图5在第一实施例中描述的步骤S304和步骤S305的处理,并控制用于在全画面显示期间放大显示的请求。
在步骤503中,控制单元102确定是否正在执行AF操作。在确定正在执行AF操作的情况下,处理推进到步骤S504,以便利用单曝光量图像显示放大图像,另一方面,在确定没有在执行AF操作的情况下,处理推进到步骤S505,以便利用HDR图像显示放大图像。例如,通过控制单元102监控实际正在执行的AF操作的状态的方法、用于确定在从AF操作开始时的预定时间段内正在执行AF操作的方法等做出是否正在执行AF操作的确定。例如,控制单元102向摄像单元200和图像处理单元101给出AF操作的指示,并确定从这个时间点直到从图像处理单元101等接收到表示操作完成的通知(或直至经过一定的时间段)为止,正在执行AF操作。
在步骤S504,在执行AF操作的情况下,显示单元107显示单曝光量的图像并执行放大显示。在确定正在执行AF操作的情况下,控制单元102利用预定的单曝光量的图像(诸如高曝光图像)执行放大显示。此外,在步骤S505,在未执行AF操作的情况下,显示单元107显示HDR图像并执行放大显示。在高曝光图像和低曝光图像之间的模糊由于以这种方式正在执行AF操作而增加的情况下,能够通过在放大显示中显示单曝光量的图像而减少模糊。
随后,执行参照图5描述的步骤S307到步骤S309的处理,然后结束一系列处理。
应注意,在本实施例中描述的步骤S503中确定AF操作的方法是示例,可以使用其他方法执行AF操作的确定。例如,控制单元102可以监控释放按钮上的用户操作,并在通过用户操作的释放按钮半按压状态继续的情况下确定正在执行AF操作。此外,在确定从AF操作开始直到经过一定时间段,AF操作正在执行的情况下,一定时间段可以由用户经由操作单元106设置。因此,可以根据用户的使用状态设置能够使用单曝光量的图像执行放大显示的时间段。
在本实施例中,描述了AF操作期间的放大显示,但摄像装置中的操作不限于AF操作(即,控制聚焦位置的操作)。本发明可应用于在拍摄用于生成HDR图像的多个图像(高曝光图像和低曝光图像)时导致在不同的时间被摄体模糊的任何操作,诸如变焦操作。
如上文所述,在本实施例中,可以在通过在AF操作期间在放大显示中显示单曝光量的图像来减少被摄体的模糊的状态下确认聚焦状态。并且,在AF操作完成后或AF操作未被执行的情况下的放大显示中,能够通过显示HDR图像而放大并显示HDR合成结果来确认焦点状态。
第四实施例
接下来,将描述第四实施例。本发明与第三实施例类似,其中,在从HDR运动图像的全画面显示切换到放大显示的情况下,根据是否存在AF操作来选择在放大显示中是执行单曝光量图像的显示还是HDR图像的显示。然而,本实施例与第三实施例的不同之处在于根据AF操作期间的曝光量进一步控制在显示用于放大显示的单曝光量的图像的情况下的图像的选择。因此,本实施例中的HDR运动图像拍摄中的放大显示处理与第一实施例至第三实施例不同,但本实施例中的其他配置与第一实施例相同。因此,对相同的配置和步骤指定相同的参考标记,从而省略多余的描述,并将主要描述不同之处。
下文将参照图8描述根据本实施的HDR运动图像拍摄中的放大显示处理。
首先,执行上文描述的步骤S301到步骤S303和步骤S501到步骤S502的处理。此时,在步骤S501确定已接收到AF请求并且在步骤S502执行AF操作的情况下,控制单元102使存储单元103存储AF操作期间设置的曝光量。此时,作为AF操作期间设置的曝光量,可以利用与构成的HDR图像的高曝光图像或低曝光图像的曝光量相等的曝光量,或者可以计算和利用用于执行AF的其他最佳曝光量。
另外,执行在上述实施例中描述的步骤S304到步骤S305和步骤S503的处理。此时,在步骤S503中确定是否正在执行AF操作,在确定未在执行AF操作的情况下,处理推进到步骤S604,以便利用HDR图像执行放大显示。另一方面,在确定正在执行AF操作的情况下,处理推进到步骤S601,以便选择单曝光量的图像。
在步骤S601,控制单元102读取在存储单元103中保持的表示AF操作期间曝光量的信息,并确定AF操作期间的曝光量是更接近在拍摄高曝光图像时使用的曝光量还是在拍摄低曝光图像时使用的曝光量。在确定AF操作期间的曝光量更接近拍摄高曝光图像时使用的曝光量的情况下,控制单元102将处理推进到步骤S602,以便选择高曝光图像作为要显示的单曝光量的图像。另一方面,在确定AF操作期间的曝光量更接近拍摄低曝光图像时使用的曝光量的情况下,控制单元102将处理推进到步骤S603,以便选择低曝光图像作为要显示的单曝光量图像。应注意,下文将参照图9描述该步骤中确定方法的更具体的示例。
在步骤S602,控制单元102选择高曝光图像作为要显示的单曝光量的图像,并使显示单元107显示图像。此外,在步骤S603,控制单元102选择低曝光图像作为单曝光量的图像,并使显示单元107显示图像。
当执行放大显示时,控制单元102执行上述实施例中描述的步骤S307到步骤S309的处理,然后结束一系列处理。
这里,将参照图9描述本实施例中步骤S601中确定方法的具体示例。
假定拍摄高曝光图像时使用曝光量Y1,拍摄低曝光图像时使用曝光量Y2,在量Y1和Y2之间的中间值是Ym=(Y1+Y2)/2。
此时,在AF操作期间设置的曝光量Ya大于或等于中间值Ym的情况下,利用高曝光图像执行单曝光量的图像的放大显示(步骤S602),在曝光量Ya小于中间值Ym的情况下,利用低曝光图像执行单曝光量的图像的放大显示(步骤S603)。应注意,在图9中的示例中,因为AF操作期间的曝光量Ya大于或等于中间值Ym,所以选择高曝光图像并执行放大显示。
如上文所述,在本实施例中,在显示单曝光量的图像的情况下,通过基于AF操作期间设置的曝光量选择要显示的单曝光量图像,即使在AF操作期间也能显示适于聚焦确认的放大图像。
其他实施例
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置,该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然参照示例性实施例对本发明进行了描述,但是应当理解,本发明并不限于所公开的示例性实施例。应当对下列权利要求的范围给予最宽的解释,以使其涵盖所有这些变型例以及等同的结构及功能。
Claims (11)
1.一种摄像装置,包括:
摄像单元,其被配置为以不同曝光量拍摄多个图像;
图像合成单元,其被配置为合成所述多个图像并生成合成图像;以及
显示控制单元,其被配置为在显示单元上显示由所述图像合成单元生成的所述合成图像;
其中,所述显示控制单元执行控制,从而根据用于放大在所述显示单元上显示的所述合成图像的一部分的指示,在所述显示单元上显示由所述摄像单元拍摄的所述多个图像中的图像的放大图像,而不显示所述合成图像。
2.根据权利要求1所述的摄像装置,
其中,所述显示控制单元基于在所述多个图像中的图像中的作为放大对象的区域的亮度而从所述多个图像中选择图像,并放大以及显示所选择的图像。
3.根据权利要求1所述的摄像装置,
其中,在接收到放大的指示时,所述显示控制单元在所述摄像装置执行预定操作的情况下显示所述多个图像中的图像的放大图像,而在所述摄像装置未执行所述预定操作的情况下放大并显示所述合成图像的一部分。
4.根据权利要求3所述的摄像装置,
其中,在显示所述多个图像中的图像的放大图像的情况下,所述显示控制单元基于所述摄像装置执行所述预定操作时设置的曝光量从所述多个图像中选择图像,并且放大及显示所选择的图像。
5.根据权利要求4所述的摄像装置,
其中,所述显示控制单元从所述多个图像中选择图像,所选择的图像是以与所述摄像装置执行所述预定操作时设置的曝光量最接近的曝光量拍摄的图像。
6.根据权利要求3所述的摄像装置,
其中,所述摄像装置的预定操作是控制聚焦位置的操作。
7.根据权利要求1所述的摄像装置,
其中,所述摄像单元针对构成运动图像的各帧重复拍摄所述多个图像,以及
所述图像合成单元通过针对所述各帧合成所述多个图像而生成具有扩大的动态范围的图像。
8.根据权利要求6述的摄像装置,还包括:
输入单元,被配置为接收通过用户操作的用于开始控制聚焦位置的操作的指示,
其中,在接收到放大的指示时,所述显示控制单元在继续向所述输入单元的输入的情况下确定正在执行用于控制聚焦位置的操作,而在未继续向所述输入单元的输入的情况下确定没有在执行用于控制聚焦位置的操作。
9.根据权利要求6述的摄像装置,
其中,在从控制聚焦位置的操作开始的预定时间段内接收到放大的指示的情况下,所述显示控制单元显示所述多个图像中的图像的放大图像。
10.根据权利要求1述的摄像装置,还包括:
确定单元,其被配置为确定是否存在通过用户操作的放大的指示。
11.一种摄像装置的控制方法,所述方法包括:
摄像步骤,以不同曝光量拍摄多个图像;
图像合成步骤,合成所述多个图像并生成合成图像;以及
显示控制步骤,在显示装置上显示在所述图像合成步骤中生成的合成图像;
其中,在所述显示控制步骤执行控制,从而根据用于放大在所述显示装置上显示的合成图像的一部分的指示,在所述显示装置上显示在所述摄像步骤中拍摄的所述多个图像中的图像的放大图像,而不显示所述合成图像。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014211993A JP6445831B2 (ja) | 2014-10-16 | 2014-10-16 | 撮像装置及びその制御方法ならびにプログラム |
JPJP2014-211993 | 2014-10-16 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105530426A true CN105530426A (zh) | 2016-04-27 |
Family
ID=55750083
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510651507.8A Pending CN105530426A (zh) | 2014-10-16 | 2015-10-10 | 摄像装置及其控制方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9661237B2 (zh) |
JP (1) | JP6445831B2 (zh) |
CN (1) | CN105530426A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110213484A (zh) * | 2019-05-31 | 2019-09-06 | 维沃移动通信有限公司 | 一种拍照方法、终端设备及计算机可读存储介质 |
CN110557559A (zh) * | 2018-05-30 | 2019-12-10 | 佳能株式会社 | 图像处理设备、图像处理方法和存储介质 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5817858B2 (ja) * | 2014-01-30 | 2015-11-18 | カシオ計算機株式会社 | 画像処理装置、画像処理方法、及びプログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101399921A (zh) * | 2007-09-28 | 2009-04-01 | 索尼株式会社 | 图像拾取装置、图像拾取方法及其程序 |
CN102017597A (zh) * | 2008-06-11 | 2011-04-13 | 诺基亚公司 | 用于呈现突发图像的方法、装置和计算机程序产品 |
CN102761692A (zh) * | 2011-04-28 | 2012-10-31 | 佳能株式会社 | 摄像设备及其控制方法 |
JP2013162420A (ja) * | 2012-02-07 | 2013-08-19 | Olympus Imaging Corp | カメラ |
CN103491310A (zh) * | 2012-06-08 | 2014-01-01 | 佳能株式会社 | 图像捕获装置及其控制方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4443735B2 (ja) * | 2000-07-11 | 2010-03-31 | 富士フイルム株式会社 | 撮像装置およびその動作制御方法 |
JP5406619B2 (ja) * | 2009-07-27 | 2014-02-05 | キヤノン株式会社 | 動画像再生装置及び撮像装置並びにそれらの制御方法、プログラム |
CN102129148A (zh) * | 2010-01-20 | 2011-07-20 | 鸿富锦精密工业(深圳)有限公司 | 相机及照片拍摄与处理方法 |
JP5791336B2 (ja) * | 2011-04-01 | 2015-10-07 | キヤノン株式会社 | 画像処理装置及びその制御方法 |
JP5895409B2 (ja) * | 2011-09-14 | 2016-03-30 | 株式会社リコー | 撮像装置 |
JP5950678B2 (ja) * | 2012-04-27 | 2016-07-13 | キヤノン株式会社 | 撮像装置、制御方法、及びプログラム |
US9350916B2 (en) * | 2013-05-28 | 2016-05-24 | Apple Inc. | Interleaving image processing and image capture operations |
-
2014
- 2014-10-16 JP JP2014211993A patent/JP6445831B2/ja active Active
-
2015
- 2015-10-10 CN CN201510651507.8A patent/CN105530426A/zh active Pending
- 2015-10-13 US US14/881,736 patent/US9661237B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101399921A (zh) * | 2007-09-28 | 2009-04-01 | 索尼株式会社 | 图像拾取装置、图像拾取方法及其程序 |
CN102017597A (zh) * | 2008-06-11 | 2011-04-13 | 诺基亚公司 | 用于呈现突发图像的方法、装置和计算机程序产品 |
CN102761692A (zh) * | 2011-04-28 | 2012-10-31 | 佳能株式会社 | 摄像设备及其控制方法 |
JP2013162420A (ja) * | 2012-02-07 | 2013-08-19 | Olympus Imaging Corp | カメラ |
CN103491310A (zh) * | 2012-06-08 | 2014-01-01 | 佳能株式会社 | 图像捕获装置及其控制方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110557559A (zh) * | 2018-05-30 | 2019-12-10 | 佳能株式会社 | 图像处理设备、图像处理方法和存储介质 |
CN110213484A (zh) * | 2019-05-31 | 2019-09-06 | 维沃移动通信有限公司 | 一种拍照方法、终端设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US20160112653A1 (en) | 2016-04-21 |
JP2016082398A (ja) | 2016-05-16 |
JP6445831B2 (ja) | 2018-12-26 |
US9661237B2 (en) | 2017-05-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200162681A1 (en) | Imaging apparatus capable of switching display methods | |
US20030071904A1 (en) | Image capturing apparatus, image reproducing apparatus and program product | |
US7940320B2 (en) | Image sensing apparatus and control method therefor having a field based varying horizontal cycle | |
JP2017509259A (ja) | 携帯端末の撮像方法及び携帯端末 | |
US9185294B2 (en) | Image apparatus, image display apparatus and image display method | |
KR20090093817A (ko) | 패닝화상을 촬상하기 위한 패닝모드를 구비한 촬상장치 | |
US7539405B2 (en) | Image pickup apparatus with autofocus function | |
JP2010021698A (ja) | 画像処理装置およびプログラム | |
CN104702826A (zh) | 摄像设备及其控制方法 | |
JP5578442B2 (ja) | 撮像装置、画像合成方法、及びプログラム | |
US8717477B2 (en) | Imaging apparatus switching between display of image and enlarged image of focus area | |
JP2008109485A (ja) | 撮像装置及び撮像制御方法 | |
CN105530426A (zh) | 摄像装置及其控制方法 | |
JP2020017807A (ja) | 画像処理装置および画像処理方法、ならびに撮像装置 | |
CN102209199B (zh) | 图像拍摄装置 | |
JP4788172B2 (ja) | 撮像装置及びプログラム | |
JP7378999B2 (ja) | 撮像装置、撮像方法、プログラムおよび記録媒体 | |
JP4902365B2 (ja) | 画像合成装置及びプログラム | |
JP2007166539A (ja) | 撮像装置、撮像方法、プログラムおよび記憶媒体 | |
JP5289354B2 (ja) | 撮像装置 | |
JP2020061760A (ja) | 撮像装置 | |
JP2015216686A (ja) | 撮影機器 | |
JP2009152894A (ja) | 画像処理装置及びその制御方法 | |
JP5734348B2 (ja) | 撮像装置 | |
JP2015171115A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160427 |