CN103080829A - 信息处理装置、信息处理方法和程序 - Google Patents

信息处理装置、信息处理方法和程序 Download PDF

Info

Publication number
CN103080829A
CN103080829A CN2012800025239A CN201280002523A CN103080829A CN 103080829 A CN103080829 A CN 103080829A CN 2012800025239 A CN2012800025239 A CN 2012800025239A CN 201280002523 A CN201280002523 A CN 201280002523A CN 103080829 A CN103080829 A CN 103080829A
Authority
CN
China
Prior art keywords
exposure period
image
specific shot
shot body
zoom
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012800025239A
Other languages
English (en)
Inventor
王伟杰
八田薰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN103080829A publication Critical patent/CN103080829A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Lens Barrels (AREA)

Abstract

是使曝光期间变焦图像捕获简便易行。该成像装置被配置为具有控制单元。在用于生成图像的曝光期间变焦图像捕获期间,该控制单元基于作为曝光期间变焦图像捕获的成像对象且用户希望关注的特定的被摄体执行控制,以便决定在曝光期间变焦图像捕获中对变焦透镜的控制细节,其中,作为在曝光期间通过变焦捕获图像的结果,图片看起来以径向的模式流动。

Description

信息处理装置、信息处理方法和程序
技术领域
本技术涉及信息处理装置。具体地说,本技术涉及能够进行曝光期间变焦成像操作的控制的信息处理装置和信息处理方法,以及使得计算机执行该方法的程序。
背景技术
在现有技术中,作为使用图像处理装置(例如,数字静止照相机和数字单反照相机)的成像方法,曝光期间变焦成像操作(曝光期间变焦摄影)已经被广泛知道,其中,在曝光期间执行变焦操作,从而使得图像被生成为好像被捕获的被摄体的图像以径向方式流动。
由于需要在曝光期间用户通过手动操作来驱动变焦透镜,因此曝光期间变焦成像操作是需要高级技术的高级成像方法。出于这一原因,执行曝光期间变焦成像操作对初学者来说被认为比较困难。
这样,提出了一种照相机,其将通过曝光期间变焦成像操作获得的捕获图像转变为多种模式模拟,将这些模拟显示到显示单元上,然后,基于由用户选择的模拟结果执行曝光期间变焦成像操作(例如,参考专利文献1)。
引文列表
专利文献
专利文献1:JP2010-200243A
发明内容
技术问题
在上述现有技术中,在变焦中的主要被摄体和主要被摄体的改变程度由用户来设置,主要被摄体的图像的流动是基于该设置来模拟的,这样,可以生成具有反映用户意图的构图的图像。但是,在上述现有技术中,由于在用户期望在捕获图像中对主要被摄体进行适当的改变的同时需要执行曝光期间变焦成像操作,因此希望用户对曝光期间变焦成像操作有事先的了解。出于这一原因,重要的是确保曝光期间变焦成像操作的简便易行,从而使得不了解曝光期间变焦成像操作的用户也可以执行正确的操作。
本技术是鉴于上述情形作出的,并且致力于使曝光期间变焦成像操作简便易行。
解决问题的方案
为了解决上述问题,提出了本技术。根据本技术的第一实施例,提供一种包括控制单元的信息处理装置、信息处理方法和程序,该控制单元基于作为曝光期间变焦成像操作的成像对象的特定被摄体来执行控制,以决定在曝光期间变焦成像操作中对变焦透镜的控制细节。因此,在曝光期间变焦成像操作的执行中表现了这样的效果:即,根据基于作为曝光期间变焦成像操作的成像对象的特定被摄体决定的变焦透镜的控制细节,执行曝光期间变焦成像操作。
此外,根据第一实施例,控制单元可以基于由成像单元捕获的图像中的特定被摄体的位置和该图像中的特定被摄体的大小来决定控制细节。因此,表现了这样的效果:即,根据基于图像中的特定被摄体的位置和该特定被摄体的大小决定的变焦透镜的控制细节,执行曝光期间变焦成像操作。
此外,根据第一实施例,控制单元可以基于由成像单元捕获的图像中的特定位置与该图像中的特定被摄体的位置之间的关系来决定控制细节。因此,表现了这样的效果:即,根据基于图像中的特定位置与该图像中的特定被摄体的位置之间的关系决定的变焦透镜的控制细节,执行曝光期间变焦成像操作。
此外,根据第一实施例,所述特定位置可以是图像的中心位置。因此,表现了这样的效果:即,根据基于图像中的中心位置与该图像中的特定被摄体的位置之间的关系决定的变焦透镜的控制细节,执行曝光期间变焦成像操作。
此外,根据第一实施例,控制单元可以基于由成像单元捕获的图像中的特定被摄体的位置和该图像中的特定被摄体的大小中的至少一个来确定是否执行曝光期间变焦成像操作。因此,表现了这样的效果:即,基于图像中的特定被摄体的位置和该图像中的特定被摄体的大小中的至少一个来确定是否执行曝光期间变焦成像操作。
此外,根据第一实施例,当确定不执行曝光期间变焦成像操作时,控制单元可以使得引导图像被显示在显示单元上,该引导图像用于校正图像中的特定图像的位置和图像中的特定被摄体的大小中的至少一个。因此,表现了这样的效果:即,当确定不执行曝光期间变焦成像操作时,显示单元显示用于校正图像中的特定图像的位置和图像中的特定被摄体的大小中的至少一个的引导图像。
此外,根据第一实施例,控制单元可以基于特定被摄体在光轴方向上的移动速度来决定控制细节。因此,表现了这样的效果:即,根据基于特定被摄体在光轴方向上的移动速度决定的变焦透镜的控制细节,执行曝光期间变焦成像操作。
此外,根据第一实施例,信息处理装置还可以包括获取特定被摄体的类型的信息的获取单元。控制单元可以基于获取的特定被摄体的类型来决定控制细节。因此,表现了这样的效果:即,根据基于特定被摄体的类型决定的变焦透镜的控制细节,执行曝光期间变焦成像操作。
此外,根据第一实施例,控制单元可以基于决定的控制细节来确定在曝光期间变焦成像操作期间变焦透镜是否到达了变焦透镜的可操作范围的端部,并且,当确定变焦透镜到达了变焦透镜的可操作范围的端部时,控制单元使得用于校正变焦透镜的位置的引导画面被显示在显示单元上。因此,表现了这样的效果:即,当确定在曝光期间变焦成像操作期间变焦透镜到达了变焦透镜的可操作范围的端部时,在显示单元上显示用于校正变焦透镜的位置的引导画面。
此外,根据第一实施例,控制单元可以基于决定的控制细节来确定在曝光期间变焦成像操作期间变焦透镜是否到达了变焦透镜的可操作范围的端部,并且,当确定变焦透镜到达了变焦透镜的可操作范围的端部时,控制单元校正变焦透镜的位置,然后使曝光期间变焦成像操作在校正后开始。因此,表现了这样的效果:即,当确定在曝光期间变焦成像操作期间变焦透镜到达了变焦透镜的可操作范围的端部时,校正变焦透镜的位置,并且在校正后开始曝光期间变焦成像操作。
此外,根据第一实施例,控制单元可以基于在控制细节被决定时的焦距和特定被摄体来决定控制细节。因此,表现了这样的效果:即,基于在控制细节被决定时的焦距和特定被摄体来决定曝光期间变焦成像操作的控制细节。
此外,根据第一实施例,控制单元可以基于在控制细节被决定时特定被摄体与信息处理装置之间的距离的信息来决定控制细节。因此,表现了这样的效果:即,根据基于特定被摄体与信息处理装置之间的距离决定的变焦透镜的控制细节,执行曝光期间变焦成像操作。
此外,根据第一实施例,控制单元可以将在曝光期间变焦成像操作中分别具有曝光时间与变焦时间之间的不同关系的多种操作模式中的一种操作模式决定为控制细节。因此,表现了这样的效果:即,基于特定被摄体,决定在曝光期间变焦成像操作中的曝光时间与变焦时间之间的关系。
此外,根据第一实施例,控制单元可以基于特定被摄体在正交于光轴的方向上的移动来决定控制细节。因此,表现了这样的效果:即,根据基于特定被摄体在正交于光轴的方向上的移动决定的变焦透镜的控制细节,执行曝光期间变焦成像操作。
此外,根据第一实施例,控制单元可以针对特定被摄体执行移动预测,并且当移动预测的结果通过图像的中心位置或者位于离中心位置的预定距离内的位置且在曝光期间变焦成像操作的曝光时间结束之前不通过图像的中心位置或者位于离中心位置的预定距离内的位置时,确定曝光期间变焦成像操作要被执行。因此,表现了这样的效果:即,当特定被摄体在正交于光轴的方向上的移动通过图像的中心位置或者位于离中心位置的预定距离内的位置且在曝光期间变焦成像操作的曝光时间结束之前不通过图像的中心位置或者位于离中心位置的预定距离内的位置时,确定曝光期间变焦成像操作要被执行。
此外,根据第一实施例,控制单元可以决定控制细节,其中,特定被摄体移动到中心位置或者位于离中心位置的预定距离内的位置的时刻被设置为曝光期间变焦成像操作的曝光时间的结束时刻,并且从结束时刻向前提早曝光期间变焦成像操作的曝光时间的时刻被设置为曝光时间的开始时刻。因此,表现了这样的效果:即,在下述情况中执行曝光期间变焦成像操作,其中,特定被摄体移动到中心位置或者位于离中心位置的预定距离内的位置的时刻被设置为曝光时间的结束时刻,并且从结束时刻向前提早曝光时间的时刻被设置为曝光时间的开始时刻。
此外,根据第一实施例,基于特定被摄体的大小,控制单元可以将在曝光期间变焦成像操作中的变焦透镜的驱动方向决定为放大方向和缩小方向之一。因此,表现了这样的效果:即,基于特定被摄体的大小,执行在放大方向上的曝光期间变焦成像操作和在缩小方向上的曝光期间变焦成像操作的切换。
此外,根据第一实施例,控制单元可以基于决定的控制细节来确定在曝光期间变焦成像操作中的特定被摄体的大小是否达到预定大小,并且,当确定特定被摄体的大小达到预定大小时,控制单元校正变焦透镜的位置,并且使得曝光期间变焦成像操作在校正后开始。因此,表现了这样的效果:即,当确定在曝光期间变焦成像操作中特定被摄体的大小达到预定大小时,校正变焦透镜的位置,并且使得在校正后开始曝光期间变焦成像操作。
此外,根据第一实施例,当特定被摄体的预定比率以上落入在具有中心位置或以离图像的中心位置的预定距离内的位置为中心的预定范围内时,控制单元可以被配置为确定要执行曝光期间变焦成像操作。因此,表现了这样的效果:即,当特定被摄体的预定比率以上落入在具有中心位置或以离图像的中心位置的预定距离内的位置为中心的预定范围内时,确定要执行曝光期间变焦成像操作。
此外,根据第一实施例,当从中心位置或位于离图像的中心位置的预定距离内的位置到特定被摄体的位置的距离短于阈值时,控制单元可以被配置为确定要执行曝光期间变焦成像操作。因此,表现了这样的效果:即,当从中心位置或位于离图像的中心位置的预定距离内的位置到特定被摄体的位置的距离短于阈值时,确定要执行曝光期间变焦成像操作。
此外,根据第一实施例,当确定不执行曝光期间变焦成像操作时,并且,即使当接收到用于指示曝光期间变焦成像操作的开始的指示操作时,控制单元也可以被配置为通过该指示操作来停止曝光期间变焦成像操作。因此,表现了这样的效果:即,当确定不执行曝光期间变焦成像操作时,并且,即使当接收到用于指示曝光期间变焦成像操作的开始的指示操作时,通过该指示操作来停止曝光期间变焦成像操作。
此外,根据第一实施例,控制单元可以被配置为决定变焦量和变焦速度作为控制细节。因此,表现了这样的效果:即,决定变焦量和变焦速度作为控制细节。
本发明的有益效果
根据本技术,可以获得使曝光期间变焦成像操作简便易行的良好效果。
附图说明
图1是示出根据本技术的第一实施例的成像装置100的内部配置的例子的示意图。
图2是示出根据本技术的第一实施例的成像装置100的功能配置的例子的框图。
图3是根据本技术的第一实施例的用于描述由曝光期间变焦设置单元330分析的特定被摄体的位置和大小的示意图。
图4是示出根据本技术的第一实施例的当曝光期间变焦设置单元330确定特定被摄体的位置不适合或者特定被摄体的大小不适合时显示在显示单元272上的图像的例子的示意图。
图5是示出根据本技术的第一实施例的当曝光期间变焦设置单元330确定特定被摄体的移动速度不适合时显示在显示单元272上的图像的例子的示意图。
图6是示意性地示出根据本技术的第一实施例的在曝光期间变焦设置单元330中使用的被摄体信息的例子的示图。
图7是示意性地示出根据本技术的第一实施例的由曝光期间变焦设置单元330计算的变焦透镜211的移动量(变焦量)的示图。
图8是示意性地示出根据本技术的第一实施例的由曝光期间变焦设置单元330计算的变焦透镜211的移动速度(变焦速度)的示图。
图9是示意性地示出根据本技术的第一实施例的在曝光期间变焦模式中由成像装置100捕获的图像的例子的示图。
图10是示出根据本技术的第一实施例的当在曝光期间变焦模式中由成像装置100执行成像时的成像过程的例子的流程图。
图11是示出根据本技术的第一实施例的在成像过程中的构图决定处理(composition decision process)(步骤S910)的过程的例子的流程图。
图12是示出根据本技术的第一实施例的在成像过程中的成像操作处理(步骤S930)的过程的例子的流程图。
图13是示意性地示出根据本技术的第二实施例的在曝光期间变焦设置单元330中使用的被摄体信息的例子的示图。
图14是示意性地示出根据本技术的第二实施例的根据特定被摄体的类型由曝光期间变焦设置单元330计算的变焦量的例子的示图。
图15是示出根据本技术的第三实施例的当曝光期间变焦设置单元330在之前的检查中确定特定被摄体的位置或大小不适合时显示在显示单元272上的图像的例子的示意图。
图16是示出根据本技术的第三实施例的在成像过程中的构图决定处理(步骤S959)的过程的例子的流程图。
图17是示出根据本技术的第三实施例的在成像过程中的成像操作处理(步骤S950)的过程的例子的流程图。
图18是根据本技术的第四实施例的用于描述由曝光期间变焦设置单元330分析特定被摄体的位置的示意图。
图19是示出根据本技术的第五实施例的当在曝光期间变焦模式中由成像装置100执行成像时的成像过程的例子的流程图。
图20是示出根据本技术的第五实施例的在成像过程中的成像操作处理(步骤S960)的过程的例子的流程图。
图21是示出根据本技术的第五实施例的在成像过程中的成像操作处理(步骤S960)的过程的例子的流程图。
图22是示出根据本技术的第六实施例的当曝光期间变焦设置单元330确定难以实现对计算的变焦量的改变时显示在显示单元272上的图像的例子的示意图。
图23是示出根据本技术的第六实施例的在成像过程中的构图决定处理(步骤S970)的过程的例子的流程图。
图24是示出根据本技术的第六实施例的在成像过程中的成像操作处理(步骤S980)的过程的例子的流程图。
图25是示意性地示出根据本技术的第七实施例的根据变焦开始时的焦距由曝光期间变焦设置单元330设置的变焦透镜的驱动距离的例子的示图。
图26是示意性地示出根据本技术的第八实施例的根据到特定被摄体的距离和特定被摄体的类型由曝光期间变焦设置单元330计算的变焦透镜的驱动距离的例子的示图。
图27是示出根据本技术的第八实施例的在成像过程中的成像操作处理(步骤S1920)的过程的例子的流程图。
图28是示出根据本技术的第九实施例的当曝光期间变焦设置单元330确定特定被摄体的大小不适合在放大方向上的曝光期间变焦成像操作时显示的图像的例子的示意图。
图29是示意性地示出根据本技术的第九实施例的在放大方向上在曝光期间变焦成像操作中由成像装置100捕获的图像的例子的示图。
图30是示意性地示出根据本技术的第九实施例的在缩小方向上在曝光期间变焦成像操作中由成像装置100捕获的图像的例子的示图。
图31是示出根据本技术的第九实施例的在成像过程中的构图决定处理(步骤S1930)的过程的例子的流程图。
图32是示出根据本技术的第九实施例的在成像过程中的成像操作处理(步骤S1940)的过程的例子的流程图。
图33是图示根据本技术的第十实施例的由曝光期间曝光变焦单元330分析的特定被摄体的大小的示意图。
图34是示出根据本技术的第十实施例的当确定特定被摄体的大小不适合时并且当确定曝光期间变焦成像操作在缩小后执行时显示的图像的例子的示意图。
图35是示意性地示出根据本技术的第十实施例的当在放大方向上的曝光期间变焦成像操作被确定为在执行缩小后执行时成像装置的操作的转变与特定被摄体的大小的转变之间的关系的示图。
图36是示意性地示出根据本技术的第十实施例的当在放大方向上的曝光期间变焦成像操作被确定为在缩小后被执行时捕获的图像的示图。
图37是示出根据本技术的第十实施例的在成像过程中的构图决定处理(步骤S1950)的过程的例子的流程图。
图38是示出根据本技术的第十实施例的在成像过程中的成像操作处理(步骤S1960)的过程的例子的流程图。
图39是示出根据本技术的第十实施例的在成像过程中的成像操作处理(步骤S1960)的过程的例子的流程图。
图40是示意性地示出根据本技术的第十一实施例的由成像装置100执行的曝光期间变焦成像操作的四种操作模式的例子的示图。
图41是示出根据本技术的第十一实施例的当根据特定被摄体的类型切换操作模式时在成像过程中的构图决定处理(步骤S1970)的过程的例子的流程图。
图42是示出根据本技术的第十一实施例的当根据特定被摄体的类型切换操作模式时在成像过程中的构图决定处理(步骤S1970)的过程的例子的流程图。
图43是示意性地图示根据本技术的第十一实施例的根据特定被摄体的大小设置的两种操作模式的示图。
图44是示出根据本技术的第十一实施例的当根据特定被摄体的大小切换操作模式时在成像过程中的构图决定处理的过程的例子的流程图。
图45是图示根据本技术的第十二实施例的由曝光期间变焦设置单元330分析的特定被摄体在正交于光轴的方向上的移动的示意图。
图46是示出根据本技术的第十二实施例的当在正交于光轴的方向上移动的特定被摄体不适合于曝光期间变焦成像操作时显示在显示单元272上的图像的例子的示意图。
图47是示出根据本技术的第十二实施例的由曝光期间变焦设置单元330计算曝光期间变焦成像操作的曝光时间的开始时刻和结束时刻的例子的示意图。
图48是示意性地示出根据本技术的第十二实施例的当针对在正交于光轴的方向上移动的特定被摄体执行曝光期间变焦成像操作时成像装置的操作的转变与特定被摄体的大小的转变之间的关系的示图。
图49是示意性地地示出根据本技术的第十二实施例的在正交于光轴的方向上移动的特定被摄体的捕获图像的示图。
图50是示出根据本技术的第十二实施例的在成像过程中的构图决定处理(步骤S2910)的过程的例子的流程图。
图51是示出根据本技术的第十二实施例的在成像过程中的成像操作处理(步骤S2920)的过程的例子的流程图。
图52是示出根据本技术的第十二实施例的在成像过程中的移动体成像处理(步骤S2930)的过程的例子的流程图。
具体实施方式
在下文中,将描述本技术的优选实施例(在下文中称为“实施例”)。将按照下面的顺序提供其描述。
1.第一实施例(成像控制:根据特定被摄体来设置对曝光期间变焦成像操作的控制的细节的例子)
2.第二实施例(成像控制:根据识别的特定被摄体的类型来设置对曝光期间变焦成像操作的控制的细节的例子)
3.第三实施例(成像控制:当特定被摄体被分析为不适合曝光期间变焦成像操作时,曝光期间变焦成像操作通过用户的选择来开始的例子)
4.第四实施例(成像控制:基于从捕获图像的中心位置到特定被摄体的位置的距离来分析特定被摄体的位置的例子)
5.第五实施例(成像控制:通过半按下快门按钮来分析特定被摄体的位置和大小并且通过完全按下快门按钮来分析特定被摄体相对于光轴方向的移动量的例子)
6.第六实施例(成像控制:分析变焦透镜的可操作范围的例子)
7.第七实施例(成像控制:根据焦距来设置曝光期间变焦成像操作的细节的例子)
8.第八实施例(成像控制:根据成像装置与特定被摄体之间的距离(到被摄体的距离)来设置曝光期间变焦成像操作的细节的例子)
9.第九实施例(成像控制:基于特定被摄体的大小来确定在曝光期间变焦成像操作中的变焦方向的例子)
10.第十实施例(成像控制:当特定被摄体的大小过大时曝光期间变焦成像操作在缩小后被执行的例子)
11.第十一实施例(成像控制:基于特定被摄体的信息来确定曝光期间变焦成像操作的操作模式的例子)
12.第十二实施例(成像控制:根据特定被摄体在正交于光轴的方向上的移动来执行曝光期间变焦成像操作的例子)
<1.第一实施例>
[成像装置的内部配置例]
图1是示出根据本技术的第一实施例的成像装置100的内部配置的例子的示意图。
成像装置100是这样的物件(例如,小型数字照相机),其在对被摄体成像后生成图像数据(数字数据),并将生成的数据作为图像内容(静止图像内容或移动图像内容)记录。请注意,在图1中,为了方便的起见,不对在捕获图像时很少使用的内部配置进行描述。
成像装置100包括:变焦透镜111、聚焦透镜112、光圈113、快门114、图像传感器120、AFE(模拟前端)121、图像处理单元130、卡I/F(接口)141和存储器卡142。另外,成像装置100包括:图像显示单元143、图像存储器144、快门控制单元151、光圈控制单元152、聚焦控制单元153、变焦控制单元154、被摄体信息生成单元160和曝光期间变焦设置单元165。此外,成像装置100包括:主控制单元170、ROM(只读存储器)171、设置保持单元172、发光单元173、通信I/F174、电池175、电源控制单元176、照相机抖动控制单元177和操作单元178。
变焦透镜111是这样的物件,其通过随着透镜在光路的方向上移动来改变焦距,调整要被包括在捕获图像中的被摄体的放大率。
聚焦透镜112是这样的物件,其随着透镜在光轴的方向上移动来调整聚焦。
光圈113是用来调整从被摄体入射到成像装置100的光的量的遮蔽物体。
快门114是这样的物件,其使用在上下方向上移动的帘来打开和遮挡从被摄体入射到图像传感器120的光的光路。当光路是打开的时,快门114将从被摄体入射的光供应到图像传感器120。
图像传感器120是这样的物件,其通过感测来自被摄体的光,将从被摄体入射的光光电转换为电信号,以生成模拟电信号。另外,图像传感器120是通过例如CMOS(互补金属氧化物半导体)传感器和CCD(电荷耦合器件))传感器来实现的。
AFE121是这样的物件,其对从图像传感器120供应的模拟图像信号实现预定的信号处理,例如,执行诸如去除模拟图像信号中的噪声或对这样的信号进行放大的信号处理。另外,AFE121将进行了信号处理的图像信号转换为数字信号以生成数字图像信号。此外,基于从主控制单元170供应的参考时钟,AFE121生成关于图像传感器120的成像操作的定时脉冲,从而将生成的定时脉冲供应到图像传感器120。该AFE121将生成的数字图像信号(像素值)供应到图像处理单元130。
图像处理单元130是这样的物件,其针对从AFE121供应的图像信号实现预定的信号处理,从而校正图像信号。图像处理单元130针对从AFE121供应的图像信号实现信号处理,例如,黑电平校正、缺陷校正、阴影校正、混合颜色校正、白平衡校正、γ校正、去马赛克等。
卡I/F141是用于使存储器卡142与图像处理单元130之间能够进行数据发送的接口。
存储器卡142是用于保留图像信号并保留通过卡I/F141供应的数据的存储介质。
图像显示单元143是这样的物件,其显示图像,并且该图像显示单元143由例如彩色液晶面板构成。图像显示单元143显示捕获的图像、记录的图像、模式设置画面等。
图像存储器144是临时保留捕获的图像数据的物件。例如,该图像存储器144被用作用于图像处理单元130中的每个信号处理的工作区域。另外,图像存储器144临时保留从存储器卡142读取的图像信号。例如,图像存储器144由DRAM(动态随机存取存储器)来实现。此外,图像存储器144还被用作主控制单元170的工作区域。
快门控制单元151是这样的物件,其基于从主控制单元170供应的快门114的控制信号来控制快门114的驱动。例如,快门控制单元151将驱动信号供应到驱动快门的电机(未示出),从而使快门114在打开快门的定时被打开。
光圈控制单元152是这样的物件,其基于从主控制单元170供应的关于光圈的信息来生成用于控制光圈113的驱动的信号。光圈控制单元152将生成的信号供应到驱动光圈的电机(未示出),从而改变光圈打开的程度。
聚焦控制单元153是这样的物件,其控制聚焦透镜112在镜筒(未示出)中的位置,从而控制聚焦。例如,该聚焦控制单元153检测聚焦透镜112在镜筒中的当前位置。另外,聚焦控制单元153基于从主控制单元170供应的聚焦的偏差的信息和聚焦透镜112的当前位置来计算聚焦透镜112的驱动量。其后,聚焦控制单元153根据计算的驱动量来对驱动聚焦透镜112的电机(未示出)进行驱动,从而移动聚焦透镜112。
变焦控制单元154是这样的物件,其控制变焦透镜111在镜筒中的位置,从而控制焦距(变焦程度)。例如,该变焦控制单元154检测变焦透镜111在镜筒中的当前位置。另外,变焦控制单元154基于从主控制单元170供应的变焦的程度的信息和变焦透镜111的当前位置来计算变焦透镜111的驱动量。其后,变焦控制单元154根据计算的驱动量来对驱动变焦透镜111的电机进行驱动,从而移动变焦透镜111。
被摄体信息生成单元160是生成关于要被包括在捕获图像中的被摄体的信息的物件。例如,该被摄体信息生成单元160使用现有被摄体识别技术来检测要被包括在捕获图像中的被摄体的特定被摄体(例如,人脸、图形、动物等),从而生成检测到的被摄体的捕获图像的大小、位置等的信息(被摄体信息)。
曝光期间变焦设置单元165是执行用于曝光期间变焦成像操作的设置的物件。例如,该曝光期间变焦设置单元165基于使用曝光期间变焦成像操作在成像之前捕获的图像中的被摄体信息来设置在曝光期间变焦成像操作期间的变焦量、变焦速度和曝光时间。
这里,将描述曝光期间变焦成像操作。曝光期间变焦成像操作指这样的成像操作,其中,从打开快门(曝光开始)到关闭快门(曝光结束),变焦透镜被移动(变焦)。当该曝光期间变焦成像操作被执行时,在捕获图像中发生在径向形状上的流动,这使得在捕获图像中产生移动的感觉。另外,由于这种效果在捕获图像的中心周围(该范围应当是包括捕获图像的中心点的预定范围的区域,并且其对下文也适应)微小,因此可以聚焦到在捕获图像的中心周围成像的对象(被摄体)上。另外,将参考图9来描述使用曝光期间变焦成像操作的捕获图像的例子。
主控制单元170是这样的物件,其控制成像装置100的每个单元的操作并使得每个单元基于记录在ROM171上的控制程序操作。例如,主控制单元170被配置为包括CPU(中央处理单元)的微计算机。
ROM171是这样的物件,在其上记录有用于控制成像装置100的每个单元的操作的控制程序。
设置保持单元172是这样的物件,其保留由用户设置的成像装置100的设置的信息。例如,该设置保持单元172被配置为非易失性存储器(例如,闪存),在该非易失性存储器上,数据可以被删除和记录。
发光单元173是辅助光源,用于在光量不足时通过发光来补充光量的不足。
通信I/F174是用于使外部装置与主控制单元170之间能够进行数据传输的接口。
电池175是为操作成像装置100供电的物件,并且,例如,可以被配置为诸如镍氢可充电电池的二次电池。另外,电池175为电源控制单元176供电。
电源控制单元176是控制对每个单元的电力供应的物件,其对于要在成像装置100中操作的每个单元是必要的。电源控制单元176将从电池175供应的电压转换为成像装置100中的每个单元的操作电压。例如,当主控制单元170使用6V的电压进行操作时,电源控制单元176生成6V的电压,并将生成的电压供应到主控制单元170。另外,电源控制单元176将生成的电压供应到成像装置100的每个单元。请注意,在图1中,省略了从电源控制单元176到每个单元的电源供应线路的一部分。
照相机抖动控制单元177是这样的物件,其检测成像装置100的照相机抖动并控制成像装置100的每个单元,从而减少检测到的照相机抖动对捕获图像的影响。例如,照相机抖动控制单元177使用陀螺仪传感器来检查成像装置100的照相机抖动,并使图像传感器120的位置根据检测的照相机抖动来移动,从而减少照相机抖动对捕获图像的影响。
操作单元178是这样的物件,其接收用户操作,并且,例如,当快门按钮(未示出)被按下时,将通知按压的信号供应到主控制单元170。另外,操作单元178将用于用户的操作的信号供应到主控制单元170。
[成像系统的功能配置例子]
图2是示出根据本技术的第一实施例的成像装置100的功能配置的例子的框图。
在图中,将描述从由用户选择曝光期间变焦模式到记录以该模式在曝光期间变焦成像操作中捕获的图像的每一种配置。请注意,在本技术的第一实施例中,将基于下面的假定给出描述:在实时查看操作中,聚焦对象被自动聚焦,并且在曝光期间变焦成像操作中,通过对快门按钮的按压(一次性按压)来执行成像。
这里,将描述曝光期间变焦模式。曝光期间变焦模式是用于执行曝光期间变焦成像操作的模式。当用户选择该模式时,在执行曝光期间变焦成像操作中的成像之前获取的捕获图像(例如,用于实时查看显示而获取的图像)被分析,并且显示指南,从而获得用于曝光期间变焦成像操作的合适的构图。另外,当构图被决定时(例如,当快门按钮被按下时),曝光期间的变焦透镜的操作(变焦的量和速度)以及曝光时间被决定,然后,通过决定的操作来执行曝光期间变焦成像操作。
成像装置100包括:透镜单元210、快门225、图像传感器220、操作接收单元230、控制单元240、信号处理单元250、记录控制单元261、记录单元262、显示控制单元271和显示单元272。另外,成像装置100包括:被摄体检测单元310、曝光期间变焦设置单元330、驱动单元280、透镜位置检测单元285和曝光控制单元290。
透镜单元210是用于收集来自被摄体的光(被摄体光)的单元。该透镜单元210包括变焦透镜211、光圈212和聚焦透镜213。
变焦透镜211是这样的物件,其通过随着透镜通过驱动单元280的驱动而在光轴方向上移动来改变焦距,调整要被包括在捕获图像中的被摄体的放大率,并且其对应于图1中示出的变焦透镜111。该变焦透镜211在镜筒中的当前位置由透镜位置检测单元285来检测。请注意,检测的当前位置被用于例如当前变焦放大率等的计算中。
光圈212是用来调整从被摄体入射到成像装置100的光的量的遮蔽物体,并且对应于图1中示出的光圈113。
聚焦透镜213是随着透镜在光轴方向上移动而调整聚焦的物件,并且其对应于图1中示出的聚焦透镜112。该聚焦透镜213在镜筒中的当前位置由透镜位置检测单元285来检测。请注意,检测的当前位置被用于例如在聚焦控制中的透镜的移动目的地的计算中。
快门225是这样的物件,其使用在上下方向移动的帘来控制图像传感器220的曝光时间,并且其对应于图1中示出的快门114。
图像传感器220是这样的物件,其将从被摄体入射的光光电转换为电信号,并且其对应于图1中示出的图像传感器120。
操作接收单元230是接收用户的操作的物件,并且其对应于图1中示出的操作单元178。例如,当该操作接收单元230接收用于设置曝光期间变焦模式的选择操作时,操作接收单元230将通知选择操作的信号供应到控制单元240。另外,当快门按钮(未示出)被按下时,操作接收单元230将通知按下的信号供应到控制单元240。
控制单元240是控制成像装置100的每个单元的操作的物件。请注意,在图2中,只描绘了主信号线,其它的信号线没有描绘。例如,当接收到用于开始曝光期间变焦模式的操作信号时,控制单元240将用于显示实时查看的信号(其光被图像传感器感测到的被摄体的图形的实时(监视)图像)供应到图像传感器220、信号处理单元250和显示控制单元271。另外,当接收到用于开始该模式的操作信号时,控制单元240将用于基于为了实时查看而捕获的图像(实时查看图像)中包括的对象(被摄体)的信息分析捕获图像的构图的信号供应到曝光期间变焦设置单元330。另外,使用该实时查看图像,控制单元240使用对比度系统将焦点与聚焦区域(用于指定要被聚焦的对象的范围)中的对象进行匹配(执行对焦)(聚焦关系未示出)。在这种情况中,控制单元240将聚焦透镜213的驱动信息供应到驱动单元280,从而驱动聚焦透镜213。
另外,当在曝光期间变焦模式中按下快门按钮时,控制单元240将用于开始曝光期间变焦成像操作的信号(变焦成像开始信号)供应到图像传感器220、信号处理单元250和曝光期间变焦设置单元330。另外,当从曝光期间变焦设置单元330供应指示曝光期间变焦成像操作的控制的细节已经被决定的信息时,控制单元240通过控制驱动单元280、曝光控制单元290、图像传感器220和信号处理单元250来执行曝光期间变焦成像操作。请注意,控制单元240对应于图1中示出的主控制单元170。
信号处理单元250是这样的物件,其通过对从图像传感器220供应的电信号执行预定信号处理来校正图像信号。例如,在将从图像传感器220供应的电信号转换为数字电信号(像素值)后,该信号处理单元250执行信号处理,诸如:黑电平校正、缺陷校正、阴影校正、颜色混合校正、白平衡校正、γ校正或去马赛克等。信号处理单元250将用于以这种方式进行校正处理的捕获图像的信号(图像信号)中要被记录在记录单元262上的图像信号(例如,在曝光期间变焦成像操作中捕获的捕获图像的信号)供应到记录控制单元261。另外,信号处理单元250将用于以这种方式进行校正处理的捕获图像中要被显示在显示单元272上的图像信号(例如,实时查看图像的信号)供应到显示控制单元271。另外,信号处理单元250将用于以这种方式进行校正处理的捕获图像中要被用于曝光期间变焦成像操作中的决定构图和变焦设置的图像信号(例如,在曝光期间变焦模式中捕获的实时查看图像的信号)供应到被摄体检测单元310。请注意,信号处理单元250对应于图1中示出的AFE121和图像处理单元130。
记录控制单元261是控制图像内容(图像文件)在记录单元262上的记录的物件。例如,当在曝光期间变焦成像操作中捕获的图像信号从信号处理单元250被供应时,该记录控制单元261对以JPEG(联合图像专家组)的格式的图像信号实现压缩处理。然后,记录控制单元261将进行了压缩处理的数据(记录的图像数据)供应到记录单元262,从而将其记录在记录单元262上。请注意,记录控制单元261对应于图1中示出的图像处理单元130。
记录单元262是这样的物件,其将从记录控制单元261供应的记录的图像数据作为图像内容进行记录。例如,作为该记录单元262,可以使用可移动记录介质(一种或多种记录介质),诸如包括DVD(数字多功能盘)的盘或包括存储器卡的半导体存储器。另外,这样的记录介质可以被内置在成像装置100中或者可以从成像装置100拆卸。请注意,记录单元262对应于图1中示出的存储器卡142。
显示控制单元271是控制在显示单元272上的显示的输出的物件。当图像信号从信号处理单元250供应时,该显示控制单元271基于该图像信号生成要被显示的图像,并将生成的图像数据(显示图像数据)供应到显示单元272以对显示图像进行显示。
另外,例如,当已经从曝光期间变焦设置单元330供应了用于显示引导显示的命令(引导显示命令)时,显示控制单元271基于该引导显示命令生成引导显示。然后,显示控制单元271基于生成的引导显示和实时查看图像来生成显示图像数据,并且将该显示图像数据供应到显示单元272以显示具有引导的实时查看图像。
显示单元272是这样的物件,其基于从显示控制单元271供应的显示图像数据来显示各种图像。例如,该显示单元272被实现为彩色液晶面板,并显示捕获图像、各种设置画面等。请注意,显示单元272对应于图1中示出的图像显示单元143。
被摄体检测单元310是这样的物件,其通过分析捕获图像来检测包括在捕获图像中的特定被摄体(特定被摄体)。例如,当人脸被设置为特定被摄体时,被摄体检测单元310检测要被分析的捕获图像中包括的人的面部(特定被摄体)。另外,被摄体检测单元310检测在捕获图像中的检测到的特定被摄体的大小和位置。请注意,被摄体检测单元310使用例如现有被摄体识别技术(例如,参考JP2009-212980A和JP2010-67102A)来对被摄体进行识别。被摄体检测单元310通过例如将特定被摄体(例如,其面部)的亮度分布信息的模板与捕获图像进行匹配来从捕获图像检测特定被摄体。请注意,在本技术的第一实施例中,描述是在人脸是特定被摄体的假定下提供的,但是,当可以分别识别多个对象(例如,除了人脸以外的动物、车辆等)时,这些对象被识别。请注意,作为本技术的第二实施例,将参考图13和图14描述可以识别多个对象的情况。被摄体检测单元310将检测结果供应到曝光期间变焦设置单元330。
在曝光期间变焦成像操作开始前,曝光期间变焦设置单元330是这样的物件,其在曝光期间变焦成像操作开始之前基于包括在捕获图像中的特定被摄体的信息来设置(决定)在曝光期间变焦成像操作中的变焦的细节(控制的细节),该捕获图像是紧临在曝光期间变焦成像操作之前被捕获的。另外,曝光期间变焦设置单元330分析捕获图像的构图是否适合于在曝光期间变焦模式中的实时观看操作中的曝光期间变焦成像操作。
在对该构图的分析中,曝光期间变焦设置单元330基于特定被摄体的信息(被摄体信息)来分析在捕获图像中的特定被摄体的位置是否适合于曝光期间变焦成像操作,并且,当不适合时,生成用于显示引导的引导显示命令,以建议用户改变特定被摄体的位置。另外,在该分析中,曝光期间变焦设置单元330分析特定被摄体的大小(尺寸)是否适合于曝光期间变焦成像操作,并且,当不适合时,生成用于显示引导的引导显示命令,以建议用户改变特定被摄体的大小。曝光期间变焦设置单元330将生成的引导显示命令供应到显示控制单元271,以便使得具有引导显示的实时查看图像被显示。请注意,将参考图3(a)和图4(a)描述对特定被摄体的位置的分析和关于该位置的引导显示的例子。另外,将参考图3(b)和图5(b)描述当大小不适合时对特定被摄体的大小的分析和引导显示的例子。将参考图6描述被摄体信息。
请注意,在本技术的第一实施例中,当特定被摄体的位置或大小不适合时,认为很难开始曝光期间变焦成像操作。换句话说,曝光期间变焦设置单元330基于特定被摄体来确定是否要执行曝光期间变焦成像操作。
另外,当从控制单元240供应变焦成像开始信号时,曝光期间变焦设置单元330在变焦成像开始信号被供应时或在其后立即基于在捕获图像中的被摄体信息来再次检查构图。请注意,在构图的再次检查中,曝光期间变焦设置单元330分析在光轴方向上的特定被摄体的移动速度(光轴方向移动速度)是否适合于曝光期间变焦成像操作。将参考图5描述该光轴方向移动速度。
然后,在重新检查构图后,曝光期间变焦设置单元330基于被摄体信息计算(确定)曝光期间变焦成像操作中的变焦量。在变焦量的计算中,曝光期间变焦设置单元330基于特定被摄体的大小和位置来计算变焦放大率的改变程度。
另外,曝光期间变焦设置单元330基于被摄体信息、从曝光控制单元290供应的关于曝光时间的信息(曝光时间信息)和计算的变焦量来计算(确定)变焦速度和曝光时间。例如,当特定被摄体站立不动时,曝光期间变焦设置单元330计算变焦速度,从而使得变焦改变为针对在曝光时间信息中指示的曝光时间计算的曝光量的程度。另外,当特定被摄体在光轴方向上移动时,曝光期间变焦设置单元330根据移动速度新确定曝光时间,并计算变焦速度,从而使得变焦改变为针对确定的曝光时间计算的变焦量。将参考图8描述特定被摄体的移动速度、变焦速度与曝光时间之间的关系。
换句话说,当供应变焦成像开始信号时,在曝光期间变焦成像操作开始之前,曝光期间变焦设置单元330基于捕获图像的被摄体信息来最终确定构图并决定变焦的控制细节。然后,曝光期间变焦设置单元330将计算的变焦量(变焦放大率的变化程度)和变焦速度供应到驱动单元280。另外,曝光期间变焦设置单元330将新计算的曝光时间供应到曝光控制单元290。另外,曝光期间变焦设置单元330将指示变焦的控制细节已经被决定的信息发送到控制单元240,并使得控制单元240执行针对曝光期间变焦成像操作的开始成像的处理。请注意,曝光期间变焦设置单元330对应于图1中示出的曝光期间变焦设置单元165。另外,控制单元240、显示控制单元271和曝光期间变焦设置单元330是在权利要求中描述的决定单元的例子。
驱动单元280是驱动透镜单元210中的透镜的物件。例如,对于曝光期间变焦成像操作,该驱动单元280基于从曝光期间变焦设置单元330供应的变焦量(变焦放大率的改变程度)来计算变焦透镜211的驱动距离(例如,在望远端侧,5mm)。然后,驱动单元280基于从曝光期间变焦设置单元330供应的变焦速度将变焦透镜211移动到在曝光期间中针对曝光期间变焦成像操作计算的驱动距离的程度。
透镜位置检测单元285是这样的物件,其检测变焦透镜211和聚焦透镜213在镜筒中的位置。该透镜位置检测单元285将关于检测到的变焦透镜211和聚焦透镜213的位置的信息供应到驱动单元280。另外,当曝光期间变焦设置单元330需要关于变焦透镜211的位置的信息时,透镜位置检测单元285将关于变焦透镜211的位置的信息供应到曝光期间变焦设置单元330。请注意,在本技术的第一实施例中,描述了一个例子,其中,曝光期间变焦设置单元330不使用关于变焦透镜211的位置的信息。关于变焦透镜211的位置的信息被使用的例子将作为本技术的第六到第八实施例被描述。
曝光控制单元290是这样的物件,其通过控制快门225要被打开和关闭的定时来控制图像传感器220的曝光时间。该曝光控制单元290基于从图像传感器220供应的图像数据来计算适合的光量(自动曝光(AE))。然后,曝光控制单元290基于计算的光量来计算图像传感器220的曝光时间,并基于计算的曝光时间来打开或关闭快门225,从而控制曝光期间变焦成像操作的曝光时间。
另外,当从曝光期间变焦设置单元330供应关于曝光时间的信息(曝光时间信息)时,曝光控制单元290基于供应的曝光时间来打开或关闭快门225,从而控制曝光期间变焦成像操作的曝光时间。
以这种方式,通过提供曝光期间变焦设置单元330,可以基于关于包括在捕获图像中的被摄体的信息来决定关于曝光期间变焦成像操作的设置(控制的细节)。
接下来,将参考图3描述由曝光期间变焦设置单元330分析的构图(特定被摄体的位置和大小)。
[检测适合于曝光期间变焦成像操作的特定被摄体的位置和大小的例子]
图3是根据本技术的第一实施例的用于描述由曝光期间变焦设置单元330分析的特定被摄体的位置和大小的示意图。
图3(a)示出用于描述由曝光期间变焦设置单元330分析的特定被摄体的位置的图像(图像410)。在该图像410中,在图像410的中心周围示出一个人的面部(面部412)。另外,在该图像410中,示出在捕获图像中限定中心区域(中心范围)的框架(框架411)。
由框架411包围的范围(中心范围)是限定为由成像装置100生成的捕获图像中的中心区域(中心附近)的范围(区域)。例如,在该中心范围中,高度是捕获图像的高度的50%并且宽度是捕获图像的宽度的50%的范围在捕获图像的中心附近被设置(在捕获图像的中心附近的区域,其与捕获图像的面积的1/4相当)。
例如,当存在一个特定被摄体并且该特定被摄体(面部412)的50%或更多落入由框架411指示的中心范围内时,曝光期间变焦设置单元330确定该特定被摄体的位置适合于曝光期间变焦成像操作。请注意,这也适用于除面部以外的特定被摄体,从而当狗作为特定被摄体并且整个狗(特定被摄体)的50%或更多落入中心范围内时,被摄体的位置被确定为适合于曝光期间变焦成像操作。另外,当特定被摄体的数量是多个并且至少一个或多个特定被摄体落入中心范围内时,被摄体的位置被确定为适合于曝光期间变焦成像操作。换句话说,当特定被摄体的预定比例以上落入预定范围内(中心范围内)时,曝光期间变焦设置单元330确定被摄体的位置适合于(执行)曝光期间变焦成像操作,该预定范围的中心对应于捕获图像的中心位置或其外围。
这里,将描述在曝光期间变焦成像操作中的特定被摄体的位置。在曝光期间变焦成像操作中,变焦是在图像传感器的曝光期间被执行的,并且从捕获图像的中心开始以径向形状捕获的图像流动。就该图像中的改变而言,在捕获图像的中心附近的图像(在图像高度较低的位置处的图像)中较小地示出改变(以径向形状流动),在靠近捕获图像的边缘的图像(在图像高度较高的位置处的图像)中较大地示出改变。以这种方式,由于在捕获图像的中心附近的图像中较小地示出改变,因此可以生成这样的图像,其中,在捕获图像的中心附近成像的特定被摄体被设置为被注目的被摄体。换句话说,由于在图像的中心附近以外的特定被摄体流动得很激烈,因此,当特定被摄体没有位于中心附近时,用户想要的被注目的特定被摄体的图像激烈地流动并且形成不令人满意的图像(没有形成适合的图像)。
因此,曝光期间变焦设置单元330分析特定被摄体的位置是否在图像的中心附近,并且当特定被摄体位于中心附近时,确定特定被摄体的位置适合于曝光期间变焦成像操作。请注意,当特定被摄体的数量是多个,并且一个或多个特定被摄体位于中心附近时,确定这些特定被摄体的位置适合于曝光期间变焦成像操作。
图3(b)示出用于描述由曝光期间变焦设置单元330分析的特定被摄体的大小的图像(图像420)。在图像420中,一个人的面部(面部422)作为特定被摄体被示出。另外,在图像420中,示出用于限定在捕获图像中的特定被摄体的大小的上限的框架(框架421)。
由框架421包围的范围(大小范围)是用于限定在由成像装置100生成的捕获图像中的特定被摄体的大小的上限的范围。例如,对于大小范围,设置通过排除捕获图像的上边缘的5%,下边缘的5%,左边缘的5%,以及右边缘的5%获得的范围。当特定被摄体的上下限都落入该大小范围时,并且,当特定被摄体的左右边缘都落入该大小范围(包括全部的四个角)时,曝光期间变焦设置单元330确定特定被摄体的大小适合于曝光期间变焦成像操作。
这里,将描述在曝光期间变焦成像操作中的特定被摄体的大小。如图3(a)所示,在曝光期间变焦成像操作中,被摄体的图像从捕获图像的中心开始以径向形状流动。由于成像是在曝光期间变焦成像操作中变焦的同时执行的,因此在曝光开始时在捕获图像的边缘周围成像的对象会在曝光期间从捕获图像露出。换句话说,如果当希望整个特定被摄体被包括在捕获图像中时(例如,当在开始曝光时其四个角属于捕获图像时)特定被摄体的大小过大,那么特定被摄体的一部分会在曝光期间变焦成像操作当中从捕获图像上溢出,这会导致形成不令人满意的图像(形成不适合的图像)。
因此,曝光期间变焦设置单元330分析特定被摄体的大小是否过大,并且,当大小不是过大时,确定特定被摄体的大小适合于曝光期间变焦成像操作。
如图3(a)和图3(b)所示,曝光期间变焦设置单元330在曝光期间变焦成像操作中分析构图(特定被摄体的位置和大小)。然后,当分析结果不适合于曝光期间变焦成像操作时,执行引导显示,以将其通知用户,从而提示用户去校正特定被摄体的位置和大小。
接下来,将参考图4描述关于特定被摄体的位置的引导显示及关于该特定被摄体的大小的引导显示。
[引导显示的例子]
图4是示出当根据本技术第一实施例的曝光期间变焦设置单元330确定特定被摄体的位置不适合或者特定被摄体的大小不适合时显示在显示单元272上的图像的例子的示意图。
图4(a)示出在曝光期间变焦模式中的实时查看操作期间当曝光期间变焦设置单元330分析特定被摄体的位置不适合时显示在显示单元272上的具有引导显示的实时查看图像(图像430)。在图像430中,一个人的面部(面部432)作为特定被摄体在图像430的右端附近被示出。另外,图像430示出限定在捕获图像中的中心区域(中心范围)的框架(框架431)、用于显示通知用户的文本的区域(文本显示区域434)、以及示出特定被摄体的位置要被移位的方向的箭头(箭头435)。
框架431是以与图3(a)中示出的框架411相同的方式限定中心范围的框架。通过将框架431与实时查看图像一同显示,用户可以可视化地识别出哪种类型的构图对于设置特定被摄体更好。
文本显示区域434是用于显示通知用户的文本的区域,并使用文本的形式将期望的操作(在中心周围设置特定被摄体)显示给用户。
箭头435是示出特定被摄体的位置要被移位(移动)的方向的箭头,并且这样显示,使得箭头的头部面向捕获图像的中心方向并且其尾部面向特定被摄体的位置与捕获图像的中心位置之间的特定被摄体。通过例如重新安放成像装置100从而使得特定被摄体在箭头435指示的方向上移动,用户可以将特定被摄体放到中心范围中。
以这种方式,当在曝光期间变焦模式中的实时查看操作中检测到特定被摄体的位置不适合时,成像装置100使显示单元272显示如图像430中所示出的具有引导显示的实时查看图像。
图4(b)示出当在实时查看操作期间曝光期间变焦设置单元330分析特定被摄体的大小不适合时显示在显示单元272上的具有引导显示的实时查看图像(图像440)。该图像440示出主要在图像440的中心周围的一个人的面部(面部442)作为特定被摄体。另外,图像440示出用于限定大小的上限的框架(框架441)和文本显示区域(文本显示区域444)。请注意,由于文本显示区域444与图4(a)中示出的文本显示区域434相同,因此在这里省略对其的描述。
框架441是以与图3(b)中示出的框架421相同的方式来限定特定被摄体的大小的上限的范围的框架。当框架441与实时查看图像一同显示时,用户可以可视化地识别特定被摄体的大小的上限。
以这种方式,当在曝光期间变焦模式中的实时查看操作中检测到特定被摄体的大小不适合时,成像装置100使显示单元272显示如图像440中所示的具有引导显示的实时查看图像。
[关于特定被摄体的移动速度的警告显示的例子]
图5是示出当根据本技术第一实施例的曝光期间变焦设置单元330确定特定被摄体的移动速度不适合时显示在显示单元272上的图像的例子的示意图。
图5示出当紧临在开始曝光期间变焦成像操作之前分析特定被摄体的移动速度不适合时在显示单元272上显示的警告图像(图像460)。另外,图5示出紧临在捕获图像460之前捕获的图像(图像450)(例如,在实时查看操作中的捕获图像的最后的图像)。从快门按钮被按下后的时刻到曝光期间变焦成像操作开始的时刻,曝光期间变焦设置单元330分析特定被摄体的位置、大小和移动速度是否适合于曝光期间变焦成像操作。
图像450示出特定被摄体(面部452),并且图像460示出特定被摄体(面部)462和文本显示区域(文本显示区域464)。另外,图像450和图像460示出指示特定被摄体的宽度的箭头(箭头453和箭头463)。
从快门按钮被按下后的时刻到曝光期间变焦成像操作开始的时刻,曝光期间变焦设置单元330分析特定被摄体的移动速度是否适合于曝光期间变焦成像操作。在该分析中,当移动速度过高(例如,大于阈值)时,曝光期间变焦设置单元330确定特定被摄体的移动速度不适合于曝光期间变焦成像操作。然后,已经确定速度不适合的曝光期间变焦设置单元330显示如图像460中所示的警告图像,然后停止曝光期间变焦成像操作的开始。
这里,将描述对特定被摄体的移动速度的分析。对特定被摄体的移动速度的分析由曝光期间变焦设置单元330执行,例如,检测在多个捕获图像之间的特定被摄体的大小的改变。例如,曝光期间变焦设置单元330检测紧临在捕获图像460之前捕获的图像(图像450)中的特定被摄体的宽度(箭头453)与紧临在开始曝光期间变焦成像操作之前捕获的图像(图像460)中的特定被摄体的宽度(箭头463)之间的改变量。
另外,曝光期间变焦设置单元330事先保留到被摄体的距离的改变与图像的改变量之间的相关性的信息(特性)。然后,曝光期间变焦设置单元330基于该特性和特定被摄体的宽度来计算被摄体的移动距离。然后,基于在特定被摄体的宽度的改变量的计算中使用的两个捕获图像被获取的时刻的间隔(经过的时间)与计算的被摄体的移动距离,曝光期间变焦设置单元330计算特定被摄体的移动速度。其后,通过将变焦透镜211的可驱动速度与计算的特定被摄体的移动速度进行比较,曝光期间变焦设置单元330分析特定被摄体的移动速度是否是可用于曝光期间变焦成像操作的速度。换句话说,在该分析中,分析除了特定被摄体以外的对象的图像(背景)是否可以被成像,从而使得其看起来比在光轴方向上移动的特定被摄体的图像看起来流动得更多。例如,当特定被摄体的移动速度高于变焦透镜211和聚焦透镜213的驱动速度时,或者当特定被摄体的移动速度太高以至于不能确保生成背景图像的流动所需的曝光时间时,确定其移动速度不适合。
以这种方式,从快门按钮被按下后的时刻到曝光期间变焦成像操作开始的时刻,曝光期间变焦设置单元330分析特定被摄体的移动速度是否适合于曝光期间变焦成像操作(之前的检查)。然后,当确定移动速度不适合时,在如图像460所示的警告图像被显示后,停止曝光期间变焦成像操作的开始。
请注意,在之前的检查的分析中,即使当检测到特定被摄体不存在于捕获图像的中心周围或者其大小过大时,也给出如图像460所示的警告(其文本以适时的方式改变),以停止曝光期间变焦成像操作的开始。
另外,在图5中,移动速度使用特定被摄体的大小来计算,但并不限于此。假定焦点与特定被摄体匹配(聚焦)。这样,其可以被配置为:从聚焦透镜213和变焦透镜211的位置的信息来计算在两个捕获图像中的焦距和到被摄体的距离,然后,根据计算的到被摄体的距离的改变量和两个捕获图像之间经过的时间来计算特定被摄体的移动速度。
这里,将描述该移动速度的计算。当到被摄体的距离被设置为a,从透镜到在图像传感器220上形成的图像的距离被设置为b,并且透镜的焦距被设置为f时,满足下面的公式1。
(1/a)+(1/b)=1/f…公式1
换句话说,b和f是从在成像定时的聚焦透镜213和变焦透镜211的位置信息计算的。然后,使用公式1,可以获得到被摄体的距离a=1/((1/f)-(1/b))。另外,通过计算在多个图像中到被摄体的距离,可以计算到被摄体的距离的改变。基于以这种方式计算的到被摄体的距离的改变,可以计算特定被摄体在光轴方向上的移动速度。具体地说,当到被摄体的距离的改变量(被摄体的移动量)被设置为DC1,并且在获取到被摄体的距离的时刻的间隔(经过的时间)被设置为t时,可以使用下面的公式2来获得在各时刻的被摄体的速度(被摄体速度V)。
V=DC1/t…公式2
以这种方式,曝光期间变焦操作单元330计算特定被摄体的移动速度并分析特定被摄体的移动速度是否适合于曝光期间变焦成像操作。
[被摄体信息的例子]
图6是示意性地示出根据本技术的第一实施例的在曝光期间变焦设置单元330中使用的被摄体信息的例子的示图。
在图6中示出的表格示出用于识别由被摄体检测单元310检测到的特定被摄体的被摄体数量(列511),以及指示被摄体的尺寸的大小(列512)。此外,该表格示出位置(列513)和光轴方向移动速度(列514),该位置(列513)指示在捕获图像中的被摄体的位置,该光轴方向移动速度(列514)指示在光轴方向上的被摄体的移动速度。
这里,将使用图6中示出的表格来描述被摄体信息的计算。首先,当在曝光期间变焦模式中从信号处理单元250供应捕获图像的数据时,被摄体检测单元310检测包括在捕获图像中的特定被摄体,并为每个检测到的特定被摄体分配唯一的标识编号(列511)。
此外,被摄体检测单元310检测检测到的特定被摄体的大小(在捕获图像中的高度和宽度)或面积(被识别为被摄体的区域的尺寸),以及位置(当预定位置被设置为捕获图像中的原点(例如,左下角)时的XY位置)。例如,当特定被摄体被识别为是矩形时,对于大小,使用该矩形的高度和宽度,并且,对于位置,使用该矩形的中心。
然后,被摄体检测单元310将检测到的特定被摄体的信息供应到曝光期间变焦设置单元330。请注意,以时间序列方式连续的捕获图像被从信号处理单元250供应到被摄体检测单元310,而被摄体被检测,从而相同的被摄体编号被给予不同的捕获图像中的相同的特定被摄体。
接下来,曝光期间变焦设置单元330检测由被摄体检测单元310在光轴方向上检测的被摄体的移动速度。请注意,由于光轴方向移动速度的计算已经在图5中进行了描述,因此在这里省略对其的描述。
以这种方式,包括在捕获图像中的被摄体的大小、位置和光轴方向移动速度通过被摄体检测单元310和曝光期间变焦设置单元330来计算。然后,基于计算的被摄体信息,针对曝光期间变焦成像操作执行对构图的决定和变焦设置的计算。
接下来,将参考图7和图8描述通过曝光期间变焦设置单元330计算的曝光期间变焦成像操作的设置(变焦量、变焦速度和曝光时间)。
[变焦透镜的移动量的设置例子]
图7是示意性地示出根据本技术的第一实施例的由曝光期间变焦设置单元330计算的变焦透镜211的移动量(变焦量)的示图。
图7(a)示出指示包括在捕获图像中的特定被摄体的大小和数量与变焦透镜211的移动量之间的关系的表格。
在图7(a)中示出的表格(表格520)的水平轴示出特定被摄体的大小(列522),并且其垂直轴示出特定被摄体的数量(列521)。另外,表格的每个单元示意性地示出变焦量。请注意,当特定被摄体的数量是多个时,特定被摄体的大小指多个被摄体的大小的平均值。
如表格520所示,在大小较小并且其数量是多个(右上侧)时,在大小较大并且其数量是多个(左上侧)时,以及在大小较大并且其数量是单个(左下侧)时,曝光期间变焦设置单元330将变焦量(变焦放大率)设置为小于标准值。使用该设置,可以防止由于严重变焦而导致的特定被摄体的一部分从捕获图像溢出。
另外,当特定被摄体的大小较小并且其数量是单个时,曝光期间变焦设置单元330将变焦量设置为大于标准值。当存在具有较小大小的单个特定被摄体时,无论执行多么严重的变焦,特定被摄体也难以从捕获图像溢出,这样可以生成较宽地流动的捕获图像。请注意,表格520示出特定被摄体的数量是多个和单个的例子,但是该数量可以被固定为预定数量。
图7(b)示出在捕获图像中包括的特定被摄体的位置与变焦量之间的关系的表格。
在图7(b)中示出的表格(表格530)示出特定被摄体离捕获图像的中心的位置(列531)与变焦量(列532)之间的关系。请注意,当特定被摄体的数量是多个时,特定被摄体的位置被设置为离捕获图像的中心的多个特定被摄体的位置的平均值。
如表格530所示,当特定被摄体远离捕获图像的中心放置(例如,距离远于到其中心的画面宽度的1/4)时,曝光期间变焦设置单元330将变焦量设置为较小。通过这样的设置,可以防止当特定被摄体远离捕获图像的中心时由于严重变焦导致特定被摄体的图像发生较宽地流动。
另外,当特定被摄体靠近捕获图像的中心放置(例如,距离小于或等于到其中心的画面宽度的1/4)时,曝光期间变焦设置单元330将变焦量设置为较大。通过在特定被摄体靠近捕获图像的中心时执行严重的变焦,特定被摄体的图像的流动量较小,但是另一个对象的流动量可以生成许多图像(由于图像的流动程度越小,在曝光期间变焦成像操作中这些图像就越靠近捕获图像的中心)。换句话说,如表格530所示,曝光期间变焦设置单元330根据特定被摄体距离捕获图像的特定位置(中心或其附近)的位置来设置变焦量。
以这种方式,曝光期间变焦设置单元330根据捕获图像的构图在曝光期间变焦成像操作中计算变焦量,从而在曝光期间变焦成像操作中可以执行适合于成像对象的变焦。
[变焦透镜的移动速度的设置例子]
图8是根据本技术的第一实施例示意性地示出由曝光期间变焦设置单元330计算的变焦透镜211的移动速度(变焦速度)的示图。
图8示出表格(表格540),其示出包括在捕获图像中的特定被摄体的光轴方向移动速度与变焦透镜211的移动速度(变焦速度)之间的关系。
在图8中示出的表格(表格540)示出特定被摄体的光轴方向移动速度(列541)、变焦透镜211的移动速度(列542)、以及曝光时间(列543)之间的关系。请注意,当特定被摄体的数量是多个时,特定被摄体的光轴方向移动速度被设置为多个特定被摄体的光轴方向移动速度的平均值。另外,由曝光控制单元290计算的曝光时间被设置为标准曝光时间,并且在与当特定被摄体静止不动时由曝光期间变焦设置单元330计算的曝光量一样多的标准曝光时间中的变焦的变焦速度被设置为标准变焦速度。
如表格540所示,当特定被摄体静止不动时,曝光期间变焦设置单元330计算变焦速度(标准变焦速度),从而使得基于光测量结果在由曝光控制单元290计算的曝光时间(标准曝光时间)期间执行由曝光期间变焦设置单元330计算的变焦量的变焦。另外,当特定被摄体正以预定速度在光轴方向上移动时,变焦速度被设置为高于标准变焦速度的第一速度,并且曝光时间被设置为短于标准曝光时间的第一曝光时间。另外,当特定被摄体正以高于第一速度的速度在光轴方向上移动时,变焦速度被设置为高于第一速度的第二速度,并且曝光时间被设置为短于第一曝光时间的第二曝光时间。请注意,曝光时间的设置(计算)被这样执行,从而使得由曝光期间变焦设置单元330计算的变焦量的变焦(参考图7)在曝光时间期间被执行。
以这种方式,通过根据特定被摄体的移动速度来设置变焦速度和曝光时间,可以通过减少特定被摄体的移动所造成的影响来获得从曝光期间变焦成像操作得到的捕获图像。换句话说,通过根据特定被摄体的光轴方向移动速度来计算曝光期间变焦成像操作中的变焦速度和曝光时间,可以在曝光期间变焦成像操作期间执行适合于成像对象的变焦。
[曝光期间变焦成像操作的成像例子]
图9是示意性地示出根据本技术的第一实施例的在曝光期间变焦模式中由成像装置100捕获的图像的例子的示图。
图9(a)示出当特定被摄体较小时通过将变焦量设置为较大来捕获的捕获图像(图像470)。如图像470所示,当特定被摄体(在图像470的中心处示出的面部)较小时,曝光期间变焦设置单元330通过将变焦量设置为较大来执行曝光期间变焦成像操作。因此,可以获得其中图像流动得较宽的捕获图像。
图9(b)示出当特定被摄体较大时通过将变焦量设置为较小来捕获的捕获图像(图像480)。如图像480所示,当特定被摄体(在图像480的中心处示出的面部)较大时,曝光期间变焦设置单元330通过将变焦量设置为较小来执行曝光期间变焦成像操作。因此,虽然整个捕获图像中的图像的流动较缓和,但是也可以获得其中特定被摄体被清晰地捕获的捕获图像。
[成像装置的操作例子]
接下来,将参考附图描述根据本技术的第一实施例的成像装置100的操作。
图10是示意性地示出根据本技术的第一实施例的在曝光期间变焦模式中当由成像装置100执行成像时的成像过程的例子的流程图。
在该图中,由于用于成像装置100的操作的模式被设置为曝光期间变焦模式,因此将描述在曝光期间变焦模式结束之前的操作。
首先,控制单元240确定用于成像装置100的操作的模式是否被设置为曝光期间变焦模式(步骤S901)。然后,当确定该模式没有被设置为曝光期间变焦模式(步骤S901)时,处理等待,直到模式被设置为曝光期间变焦模式。
另一方面,当确定模式被设置为曝光期间变焦模式时(步骤S901),用于在曝光期间变焦成像操作中决定构图的构图决定处理被执行(步骤S910)。请注意,将参考图11描述该构图决定处理(步骤S910)。接下来,用于曝光期间变焦成像操作的设置(变焦量、变焦速度和曝光时间)在决定的构图中被决定,然后,用于执行曝光期间变焦成像操作的成像操作处理被执行(步骤S930)。请注意,将参考图12描述成像操作处理(步骤S930)。
接下来,控制单元240确定曝光期间变焦模式的结束是否被选择(步骤S902)。然后,当确定曝光期间变焦模式未被选择时,处理返回到步骤S910,并且继续曝光期间变焦模式。
另一方面,当确定曝光期间变焦模式被选择时(步骤S902),成像过程结束。
图11是示出根据本技术的第一实施例的在成像过程中的构图决定处理(步骤S910)的过程的例子的流程图。
首先,当曝光期间变焦模式被设置时,为了在显示单元272上显示实时查看(监视)图像,图像传感器220执行成像(步骤S911)。接下来,使用在该成像中生成的捕获图像来执行基于对比度系统的聚焦处理(步骤S912)。另外,使用该捕获图像,被摄体检测单元310检测包括在该捕获图像中的特定被摄体(步骤S913)。请注意,在该检测中,特定被摄体的位置和大小被检测。
然后,曝光期间变焦设置单元330决定检测到的特定被摄体的位置是否适合(其50%或更多的部分是否落入到中心范围内)(步骤S915)。然后,当确定特定被摄体的位置不适合(步骤S915)时,用于变更在捕获图像上的特定被摄体的位置的位置变更引导显示画面(例如,参考图4(a))被显示在显示单元272上(步骤S916),并且处理返回到步骤S911。
另一方面,当确定特定被摄体的位置是适合的(步骤S915)时,曝光期间变焦设置单元330确定特定被摄体的大小是否适合(步骤S917)。然后,当确定特定被摄体的大小不适合(步骤S917)时,用于变更特定被摄体的大小的大小变更引导显示画面(例如,参考图4(b))被显示在显示单元272上(步骤S918),并且处理返回到步骤S911。
请注意,当特定被摄体的大小适合(步骤S917)时,实时查看图像(没有引导显示的捕获图像)被显示在显示单元272上(步骤S919)。然后,控制单元240确定快门按钮是否被按下(步骤S920)。然后,当确定快门按钮没有被按下(步骤S920)时,处理返回到步骤S911,并且,继续构图决定处理。
另一方面,当确定快门按钮被按下(步骤S920)时,构图决定处理的过程结束。
请注意,在图11中,描述了在确定位置(步骤S915)后执行大小的确定(步骤S917)的例子,但是本技术并不限于此。通过改变顺序,在确定大小(步骤S917)后执行位置的确定(步骤S915)是可能的。另外,已经描述了这样的例子,其中,在聚焦处理(步骤S912)后执行特定被摄体的检测(步骤S913),然后,执行位置和大小的确定(步骤S915和步骤S917),但是本技术并不限于此。由于聚焦处理的结果没有在步骤S915和步骤S917中使用,因此可以同时地执行聚焦处理(步骤S912)和步骤S913以及其后的过程。
换句话说,由曝光期间变焦设置单元330进行的位置和大小的确定(步骤S915和步骤S917)可以在根据捕获图像来检测特定被摄体(步骤S193)到捕获图像被显示的时间期间被执行。
请注意,在图11中,为了便于描述,已经描述了这样的例子,其中,位置的确定和大小的确定被设置为分开的过程(步骤S915和步骤S917),并且,当它们中的任一个不适合时,其引导显示(步骤S916和步骤S918)被执行。但是,位置和大小可以被同时确定(一起确定),并且可以根据该确定来显示引导,从而使得即使在位置和大小都不适合时也执行适当的引导显示。
图12是示出根据本技术的第一实施例的在成像过程中的成像操作处理(步骤S930)的过程的例子的流程图。
首先,如果在构图决定处理(参考图11的步骤S920)中快门按钮被按下,那么在执行曝光期间变焦成像操作之前(先于其),由图像传感器220执行成像。然后,使用事先捕获的该捕获图像,执行聚焦处理(步骤S932)和特定被摄体检测(步骤S933)(与图11的步骤S912和步骤S913相同)。
接下来,曝光期间变焦设置单元330确定特定被摄体的位置是否适合(其50%或更多的部分是否落入到中心范围内)(步骤S935)。然后,当确定特定被摄体的位置不适合(步骤S935)时,用于通知特定被摄体的位置不适合的特定被摄体位置警告显示被显示(步骤S936),然后,成像操作处理的过程结束。
另一方面,当确定特定被摄体的位置是适合的(步骤S935)时,曝光期间变焦设置单元330确定特定被摄体的大小是否适合(步骤S939)。然后,当确定特定被摄体的大小不适合(步骤S939)时,用于通知特定被摄体的大小不适合的特定被摄体大小警告显示被显示(步骤S940),然后,成像操作处理的过程结束。
请注意,当确定特定被摄体的大小是适合的(步骤S940)时,曝光期间变焦设置单元330确定特定被摄体的移动速度是否适合(步骤S942)。然后,当确定特定被摄体的移动速度不适合(步骤S942)时,用于通知特定被摄体的移动速度不适合的特定被摄体移动速度警告显示被显示(步骤S943),然后,成像操作处理的过程结束。
另一方面,当确定特定被摄体的移动速度适合(步骤S942)时,曝光期间变焦设置单元330基于特定被摄体的位置、大小和数量来计算在曝光期间变焦成像操作中的变焦量(步骤S944)。然后,基于由曝光控制单元290计算的特定被摄体的移动速度、变焦量和曝光时间,曝光期间变焦设置单元330计算在曝光期间变焦成像操作中的图像传感器220的曝光时间和变焦速度(步骤S945)。接下来,基于计算的变焦量、变焦速度和曝光时间,执行用于在曝光期间变焦成像操作中生成捕获图像的曝光期间变焦图像生成处理(步骤S946)。然后,在曝光期间变焦成像操作中生成的捕获图像被记录到记录单元262上(步骤S947),并且成像操作处理的过程结束。请注意,步骤S944、S945和S946是权利要求中描述的控制过程的例子。
以这种方式,根据本技术的第一实施例,通过基于捕获图像中的特定被摄体来分析构图是否适合于曝光期间变焦成像操作,可以减少在曝光期间变焦成像操作中成像的失败。此外,基于捕获图像中的特定被摄体,通过决定在曝光期间变焦成像操作中的每一个设置,可以容易地执行曝光期间变焦成像操作。
请注意,确定位置、大小和移动速度(步骤S935、S939和S942)的关系与图11的步骤S915和S917的关系相同。换句话说,也假定了顺序改变的情况和同时执行确定(一起确定)的情况。另外,聚焦处理(步骤S932)也与图11中相同,并且在曝光期间变焦生成处理(步骤S946)开始前完成聚焦处理更好。
<2.第二实施例>
在本技术的第一实施例中,已经在假定被摄体检测单元310检测作为特定被摄体的人的面部的情况下提供了描述。但是,当可以检测更多类型的特定被摄体时,可以根据这些类型来执行曝光期间变焦成像操作。
因此,在本技术的第二实施例中,将参考图13和图14来描述被摄体检测单元310检测作为特定被摄体的多种类型的被摄体的例子。
请注意,由于根据本技术的第二实施例的成像装置100的功能配置例子和流程图与图2和图10到图12中示出的功能配置例子和流程图相同,因此在这里省略对其的描述。
[被摄体信息的例子]
图13是示意性地示出根据本技术的第二实施例的在曝光期间变焦设置单元330中使用的被摄体信息的例子的示图。
在图13中示出的表格(表格610)示出被摄体数量(列611)、指示被摄体的类型的类型(列612)、大小(列613)、位置(列614)和光轴方向移动速度位置(列615)。请注意,由于除类型(列612)以外的信息都与图6中示出的信息相同,因此在这里省略对其的描述,并且将主要针对由被摄体检测单元310检测到的类型在这里提供描述。
在第二实施例中,被摄体检测单元310检测在从信号处理单元250供应的捕获图像中包括的对象(被摄体)中的作为特定被摄体的多种类型的被摄体。在该检测中,被摄体检测单元310预先保留多种类型的特定被摄体的特征,例如,人脸的特征、狗的特征、火车的特征等,并检测具有保留的特征的特定被摄体。例如,被摄体检测单元310通过将记录有多个特定被摄体的每一个的亮度分布信息的模板与捕获图像进行匹配来从捕获图像检测该多个特定被摄体。由此,指定特定被摄体的类型。然后,被摄体检测单元310将包括指示被摄体的类型的信息(列612)的被摄体信息供应到曝光期间变焦设置单元330。另外,例如,被摄体检测单元310取出包括检测到的特定图像的矩形图像。然后,可以提取拍摄的图像的特征量,比较提取的特征量与特定被摄体的特征量,然后,基于相似性来识别检测到的特定被摄体的类型。这里,特征量是用来识别特定被摄体的识别信息,并且,例如,在面部的情况中,特征量是指示面部图像的特征和特性的数据,用于识别构成面部的包括眼、鼻、嘴、眉等的各个部位的位置关系和形状。该特征量是基于例如颜色、亮度等的值来提取的。请注意,第二实施例的被摄体检测单元310是在权利要求中描述的获取单元的例子。
请注意,在本技术的第二实施例中,已经描述了仅有多种类型的具有预先保留的特征的被摄体被检测到的例子,但是本技术并不限于此。例如,基于轮廓从捕获图像检测对象,然后,如果被摄体的特征与事先保留的那些特征一致,则将指示与其一致的类型的信息给予该被摄体。检测特定被摄体的情况也通过将设置为“其它”的信息给予不具有一致特征的被摄体来被考虑。
接下来,将参考图14描述由曝光期间变焦设置单元330根据特定被摄体的种类来决定变焦量的例子。
[变焦量的设置例子]
图14是示意性地示出根据本技术的第二实施例的根据特定被摄体的种类由曝光期间变焦设置单元330计算的变焦量的例子的示图。
在图14中示出的表格(表格620)示出特定被摄体的种类与变焦量之间的关系。
如表格620所示,例如,变焦量被设置为大于对特定被摄体(例如,车辆或动物)进行成像的标准,该特定被摄体的移动希望被强烈地表达。这样,当使用曝光期间变焦成像操作对希望表达其移动的特定被摄体进行成像时,获得其图像(尤其是背景)剧烈地流动(移动较大)的捕获图像。
另外,变焦量被设置为小于对特定被摄体(例如,植物或人)进行成像的标准,从而得到没有模糊的清晰图像。这样,当使用曝光期间变焦成像操作对希望其图像清晰而没有模糊的特定被摄体进行成像时,获得捕获图像,该捕获图像的特定被摄体的图像没有模糊,而图像(尤其是背景)柔和地流动。
以这种方式,根据本技术的第二实施例,通过根据检测到的特定被摄体的类型来设置变焦量,可以执行适合于该特定被摄体的曝光期间变焦成像操作。
<3.第三实施例>
在本技术的第一实施例和第二实施例中,已经描述了这样的例子,其中,当按下快门按钮后检查捕获图像的构图(检查特定被摄体的位置和大小)时,如果构图不适合,则停止曝光期间变焦成像操作。但是,即使当曝光期间变焦设置单元330确定其不适合时,也存在一种情况,其中,用户想要使用曝光期间变焦成像操作来执行成像。
因此,在本技术的第三实施例中,将参考图15到图17描述这样的例子,其中,即使当曝光期间变焦设置单元330确定构图不适合时,也可以通过用户的选择来开始曝光期间变焦成像操作。
请注意,由于根据本技术的第三实施例的成像装置100的功能配置例子与图2中示出的相同,因此在这里省略对其的描述。
[关于特定被摄体的位置或大小的警告显示的例子]
图15是示出当根据本技术的第三实施例的曝光期间变焦设置单元330在之前的检查中确定特定被摄体的位置或大小不适合时显示在显示单元272上的图像的例子的示意图。
图15(a)示出当曝光期间变焦设置单元330在之前的检查中分析特定被摄体的位置不适合时在显示单元272上显示的警告图像(图像630)。
图像630示出特定被摄体(面部632)、框架(框架631)和文本显示区域(文本显示区域634)。请注意,由于面部632和框架631与图4(a)中示出的面部432和框架431相同,因此这里将主要描述文本显示区域634。
在文本显示区域634中,除了文本以外,还示出停止按钮635和开始按钮636。
停止按钮635是用于停止与图像630的显示一起保留的来自曝光期间变焦成像操作的捕获图像的获取的按钮。
停止按钮636是用于开始与图像630的显示一起保留的来自曝光期间变焦成像操作的捕获图像的获取的按钮。
这里,将描述在图像630中示出的选择按钮(停止按钮635和开始按钮636)。在本技术的第三实施例的成像装置100中,即使当曝光期间变焦设置单元330确定了构图不适合时,曝光期间变焦成像操作也可以根据用户的意愿来开始。换句话说,当在曝光期间变焦成像操作的之前的检查中分析特定被摄体的位置不适合时,图像630被显示,以便即使在构图不适合时,也让用户使用停止按钮635和开始按钮636来选择是否要执行曝光期间变焦成像操作。
图15(b)示出当曝光期间变焦设置单元330在之前的检查中分析特定被摄体的大小不适合时在显示单元272上显示的警告图像(图像640)。
图像640示出特定被摄体(面部642)、框架(框架641)和文本显示区域(文本显示区域644)。另外,在文本显示区域(文本显示区域644)中,除了文本以外,还示出停止按钮645和开始按钮646。请注意,由于面部642和框架641与图4(b)中示出的面部442和框架441相同,并且停止按钮645和开始按钮646与图15(a)中示出的停止按钮635和开始按钮636相同,因此在这里省略对其的描述。
如图15(b)所示,当在之前的检查中分析特定被摄体的大小不适合时,显示图像640,以便即使在构图不适合时,也使用户使用停止按钮645和开始按钮646来选择是否执行曝光期间变焦成像操作。
[成像装置的操作例子]
接下来,将参考附图描述根据本技术第三实施例的成像装置100的操作。
图16是示出根据本技术第三实施例的在成像过程中的构图决定处理(步骤S959)的过程的例子的流程图。
请注意,图16是图11中示出的构图决定处理(步骤S910)的变型例,并且,两种情况之间的不同之处在于,在图16中,即使在特定被摄体的位置或大小不适合时,快门按钮也可以被按下。
换句话说,在构图决定处理(步骤S959)中,处理前进到确定在大小变更引导显示画面被显示(步骤S918)后以及在位置变更引导显示画面被显示(步骤S916)后快门按钮是否被按下(步骤S920)。
另一方面,在本技术的第一实施例的构图决定处理(步骤S910)中,在大小变更引导显示画面被显示(步骤S918)后以及在位置变更引导显示画面被显示(步骤S916)后,处理返回到步骤S911。在返回到步骤S911后,决定在本技术的第一实施例中显示引导显示画面的状态中将不执行曝光期间变焦成像操作(快门将不被操作)。
请注意,由于除了这一点以外的其它点都与图11所示的构图决定处理(步骤S910)相同,因此省略对其的描述。
图17是示出根据本技术第三实施例的在成像过程中的成像操作处理(步骤S950)的过程的例子的流程图。
请注意,图17是图12中示出的成像操作处理(步骤S930)的变型例,并且当特定被摄体的位置或大小不适合时进行的过程不同。因此,相同的附图标记被给予与图12中相同的过程,并且在这里省略对其的描述。
在确定特定被摄体的位置是否适合(步骤S935)时,当确定特定被摄体的位置不适合时,特定被摄体位置警告/选择显示被显示(步骤S951)。因此,用户被通知特定被摄体的位置不适合并且执行显示,以在即使位置不适合的情况下也使用户选择是否开始曝光期间变焦成像操作。
接下来,在该特定被摄体位置警告/选择显示(例如,参考图15(a))中,控制单元240确定是否选择了停止(步骤S952)。然后,当确定没有选择停止时(例如,当图15(a)的开始按钮636被按下时)(步骤S952),处理前进到确定特定被摄体的大小是否适合(步骤S939)。
另一方面,当确定选择停止时(例如,当图15(a)的停止按钮635被按下时)(步骤S952),用于通知曝光期间变焦成像操作被停止的显示(曝光期间变焦成像操作停止显示)被显示(步骤S955),然后,成像操作处理的过程结束。
另外,在确定特定被摄体的大小是否适合(步骤S939)时,当确定特定被摄体的大小不适合时,显示特定被摄体大小警告/选择显示(步骤S953)。因此,用户被通知特定被摄体的大小不适合并且执行显示,以在即使大小不适合的情况下也使用户选择是否开始曝光期间变焦成像操作。
接下来,在该特定被摄体大小警告/选择显示(例如,参考图15(b))中,控制单元240确定是否选择了停止(步骤S954)。然后,当确定没有选择停止时(例如,当图15(b)的开始按钮646被按下时)(步骤S954),处理前进到确定特定被摄体的移动速度是否适合(步骤S942)。
另一方面,当确定选择停止时(例如,当图15(b)的停止按钮645被按下时)(步骤S954),曝光期间变焦成像操作停止显示被显示(步骤S955),然后,成像操作处理的过程结束。
以这种方式,根据本技术的第三实施例,即使当曝光期间变焦设置单元330确定构图不适合时,也可以执行曝光期间变焦成像操作,该曝光期间变焦成像操作是通过用户的选择开始的,同时进一步反映了用户的意图。
<4.第四实施例>
在本技术的第一实施例中,已经描述了这样的例子,其中,曝光期间变焦设置单元330使用中心范围来分析特定被摄体的位置是否适合。但是,该分析还可以使用特定被摄体离捕获图像的中心的位置(离中心的距离)来确定。
因此,在本技术的第四实施例中,将参考图18描述这样的例子,其中,当特定被摄体离捕获图像的中心的距离比阈值短时,确定特定被摄体的位置是适合的。请注意,在本技术的第四实施例中,由于仅仅确定特定被摄体的位置的方法与本技术的第一实施例的方法不同,因此只将使用对应于图3(a)的示图来仅描述该方法。
[检测适合于曝光期间变焦成像操作的特定被摄体的位置的例子]
图18是根据本技术第四实施例的用于描述由曝光期间变焦设置单元330分析特定被摄体的位置的示意图。
图18示出根据本技术第四实施例的用于描述由曝光期间变焦设置单元330分析特定被摄体的位置的图像(图像650)。在图像650中,一个人的面部(面部652)作为特定被摄体在图像650的左下侧附近被示出。另外,在该图像650中,指示捕获图像的中心的点(655)和指示点655与面部652的中心之间的距离的线(线656)被示出。
以这种方式,根据本技术的第四实施例的曝光期间变焦设置单元330基于特定被摄体与捕获图像的中心分开多远(基于该距离)来确定特定被摄体的位置是否适合于曝光期间变焦成像操作。当从捕获图像的中心到特定被摄体的中心的距离(特定被摄体距离)与阈值相比较时,例如,如果特定被摄体距离短于阈值,那么该位置被确定为适合于曝光期间变焦成像操作。请注意,当存在多个特定被摄体时,可以使用多个特定被摄体的各个特定被摄体距离的平均值来进行确定。
<5.第五实施例>
在本技术的第一实施例中,基于以下假定提供了描述:成像装置包括被简单地按下(一次性按下)的快门按钮。但是,也可以考虑设置有能够完全按下和半按下的快门按钮的成像装置。
因此,在本技术的第五实施例中,将描述这样的例子,其中,通过在快门按钮被半按下的状态中分析特定被摄体的位置和大小并在快门按钮被按下后分析光轴方向移动速度来执行曝光期间变焦成像操作。
请注意,由于根据本技术第五实施例的成像装置100的功能配置例子与图2中示出的相同,因此在这里省略对其的描述。
[成像装置的操作例子]
将参考附图描述根据本技术第五实施例的成像装置100的操作。
图19是示出当根据本技术第五实施例的成像装置100在曝光期间变焦模式中执行成像时的成像过程的例子的流程图。
请注意,图19是图10中示出的成像过程的变型例,并且仅有的不同之处在于提供成像操作处理(步骤S960),而不是构图决定处理(步骤S910)和成像操作处理(步骤S930)。因此,将参考图20和图21描述该成像操作处理(步骤S960)。
图20和图21是示出根据本技术第五实施例的在成像过程中的成像操作处理(步骤S960)的过程的例子的流程图。
请注意,成像操作处理(步骤S960)是图11的构图决定处理(步骤S910)和图12的成像操作处理(步骤S930)的变型例。该成像操作处理(步骤S960)与图11和图12中示出的过程的不同之处在于,在该处理中,在快门按钮被半按下时分析特定被摄体的位置和大小,并且在快门按钮被完全按下时分析特定被摄体的移动速度。因此,相同的附图标记被给予相同的过程,并且其描述将被简化。
首先,当曝光期间变焦模式被设置时,图像传感器220执行成像(步骤S911),以在显示单元272上显示实时查看(监视)图像。接下来,实时查看图像被显示在显示单元272上(步骤S919)。然后,控制单元240确定快门按钮是否被半按下(步骤S961)。然后,当确定快门按钮没有被半按下(步骤S961)时,处理返回到步骤S911,并且继续实时查看操作。
另一方面,当确定快门按钮被半按下(步骤S961)时,成像处理(步骤S931)被执行,然后,聚焦处理(步骤S932)和特定被摄体检测(步骤S933)被执行。
然后,确定特定被摄体的位置是否适合(步骤S935),并且当确定位置不适合时,特定被摄体位置警告显示被显示(步骤S936),然后,处理返回到步骤S961,并确定是否维持半按下状态。
另外,当确定特定被摄体的位置适合(步骤S935)时,确定特定被摄体的大小是否适合(步骤S939),并且当大小被确定为不适合时,特定被摄体大小警告显示被显示(步骤S940)。在显示后,处理返回到步骤S961,并确定是否维持半按下状态。
另一方面,当确定特定被摄体的大小适合(步骤S939)时,控制单元240确定快门按钮是否被完全按下(步骤S962)。然后,当确定快门按钮没有被完全按下(步骤S962)时,处理返回到步骤S961,并确定是否维持半按下的状态。
请注意,当确定快门按钮被完全按下(步骤S962)时,确定特定被摄体在光轴方向上的移动速度是否适合于曝光期间变焦成像操作(步骤S942)。然后,当确定移动速度不适合(步骤S942)时,特定被摄体移动速度警告显示被显示(步骤S943),并且成像操作处理的过程结束。请注意,由于在确定移动速度适合(步骤S942)后的过程与图12的相同,因此在这里省略对其的描述。
以这种方式,根据本技术的第五实施例,通过在完全按下后仅使用移动速度来分析特定被摄体,可以快捷地开始曝光期间变焦成像操作。
<6.第六实施例>
在本技术的第一到第五实施例中,已经描述了没有考虑变焦透镜的位置的例子。但是,当变焦透镜被设置在变焦透镜可操作的范围中的端部(望远端或广角端)附近,并且变焦透镜基于计算的变焦放大率在该端部方向上被驱动时,变焦透镜到达端部,因此,存在曝光期间变焦成像操作失败的可能性。换句话说,当曝光期间变焦成像操作被执行时,希望也考虑变焦透镜在镜筒中的位置。
因此,在本技术的第六实施例中,将参考图22到图24描述这样的例子,其中,分析是否可以执行对计算的变焦放大率的改变。
[关于变焦量的引导显示例子和通知显示例子]
图22是示出当根据本技术第六实施例的曝光期间变焦设置单元330确定难以进行对计算的变焦量的改变时显示在显示单元272上的图像的例子的示意图。
图22(a)示出当分析在实时查看操作中在曝光期间变焦设置单元330中计算的变焦量的改变不能被执行时显示在显示单元272上的具有引导显示的实时查看图像(图像660)。
在该图像660中,示出特定被摄体(面部662)和文本显示区域(文本显示区域663)。
这里,将描述显示图像660的情况。当在实时查看操作中确定特定被摄体的位置和大小适合时,本技术的第六实施例的曝光期间变焦设置单元330计算变焦量(变焦放大率)。请注意,该计算与图7中示出的计算相同。
接下来,基于变焦透镜211的计算的变焦量和当前位置(来自透镜位置检测单元285的信息),曝光期间变焦设置单元330分析计算的变焦量的驱动是否是可执行的。换句话说,曝光期间变焦设置单元330基于计算的变焦量(变焦放大率)来计算变焦透镜211的驱动距离。然后,当变焦透镜211被驱动到计算的驱动距离的程度时,曝光期间变焦设置单元330分析变焦透镜211是否与可操作范围的端部(广角端或望远端)接触。
当曝光期间变焦设置单元330确定变焦透镜与可操作范围的端部接触(曝光期间变焦成像操作不能被恰当地执行)时,将这一事实通知用户,并且用于校正变焦放大率的图像(例如,图像660)被显示在显示单元272上。
图22(b)示出,用于通知当在曝光期间变焦成像操作前的之前的检查中确定计算的变焦量的驱动是不能执行的时,在自动缩小后执行成像的通知图像(图像670)。
在该图像670中,示出特定被摄体(面部672)和文本显示区域(文本显示区域673)。
这里,将描述显示图像670的情况。本技术的第六实施例的曝光期间变焦设置单元330分析在之前的检查中计算的变焦量的驱动是否是可执行的(在曝光期间变焦成像操作期间变焦透镜是否与端部接触)。然后,当被确定为不可执行时,在变焦透镜211被驱动到前侧后以与端部分开,执行曝光期间变焦成像操作,从而在曝光期间变焦成像操作期间,变焦透镜211不与端部接触。例如,当使用放大执行曝光期间变焦成像操作时,在执行曝光期间变焦成像操作之前执行缩小后开始曝光期间变焦成像操作,从而使得在曝光期间变焦成像操作期间变焦透镜211不与端部(望远端)接触。请注意,当该变焦透镜211与端部分开时的驱动量被设置为尽可能小的驱动量,从而使得在例如曝光期间变焦成像操作结束时,变焦透镜211与端部接触。因此,曝光期间变焦成像操作被执行以在任何可能的时候防止用户期望的构图被破坏。
[成像装置的操作例子]
接下来,将参考附图描述根据本技术第六实施例的成像装置100的操作。
图23是示出根据本技术第六实施例的在成像过程中的构图决定处理(步骤S970)的过程的例子的流程图。
请注意,图23是在图11中示出的构图决定处理(步骤S910)的变型例,并且不同之处在于其分析计算的变焦量的驱动是否是可执行的。因此,相同的附图标记被给予与图11中相同的过程,并且在这里省略对其的描述。
在确定特定被摄体的大小是否适合(步骤S917)时,当确定特定被摄体的大小适合时,基于被摄体的信息来计算变焦量(变焦放大率)(步骤S971)。然后,根据计算的变焦量来计算变焦透镜的移动距离,并且曝光期间变焦设置单元330确定变焦透镜是否与端部接触(是否确保变焦透镜的可操作范围)(步骤S972)。然后,当确定变焦透镜不与端部接触(确保变焦透镜的可操作范围)(步骤S972)时,显示没有引导显示的实时查看图像(步骤S919)。
另一方面,当确定变焦透镜与端部接触(没有确保变焦透镜的可操作范围)(步骤S972)时,变焦放大率校正引导显示画面(例如,参考图22(b))被显示在显示单元272上(步骤S973)。该变焦放大率校正引导显示画面是通过通知变焦透镜与其可操作范围接触来使得变焦放大率得以校正的画面。然后,在变焦放大率校正引导显示画面被显示(步骤S973)后,处理前进到步骤S920。
图24是示出根据本技术第六实施例的在成像过程中的成像操作处理(步骤S980)的过程的例子的流程图。
请注意,图24是在图12中示出的成像操作处理(步骤S930)的变型例,并且不同之处在于其分析计算的变焦量的驱动是否是可执行的,并且当其是不可执行的时,在变焦透镜的位置被调整后,曝光期间变焦成像操作被执行。因此,相同的附图标记被给予与图12中相同的过程,并且在这里省略对其的描述。
在曝光期间变焦成像操作中计算了曝光时间和变焦速度(步骤S945)后,曝光期间变焦设置单元330确定在曝光期间变焦成像操作期间变焦透镜的可操作范围是否被确保(步骤S981)。然后,当确定变焦透镜的可操作范围被确保(步骤S981)时,基于计算的变焦量、变焦速度和曝光时间来执行曝光期间图像生成处理。
另一方面,当确定变焦透镜的可操作范围没有被确保(步骤S981)时,执行变焦透镜位置调整,以确保变焦透镜的可操作范围(步骤S982)。然后,基于计算的变焦量、变焦速度和曝光时间来执行曝光期间变焦图像生成处理(步骤S983)。接着,用于通知曝光期间变焦成像操作已经通过变焦透镜位置调整被执行的变焦调整通知画面(例如,参考图22(b))被显示,并且处理前进到步骤S947。
以这种方式,根据本技术的第六实施例,通过考虑变焦透镜在镜筒中的位置,可以防止由于在曝光期间变焦成像操作的中间停止变焦透镜的驱动(到达可操作范围的端部)而导致的成像的失败。
<7.第七实施例>
在本技术的第一到第六实施例中,已经描述了这样的例子,其中,被摄体检测单元310基于特定被摄体的位置和大小来计算变焦放大率的改变的程度,并且根据变焦放大率的改变的程度来计算在曝光期间变焦成像中的变焦透镜的驱动距离。但是,本技术并不限于此,并且还可以考虑变焦透镜的焦距与驱动距离之间的关系被事先设置的情况。
因此,在本技术的第七实施例中,将参考图25描述这样的例子,其中,指示变焦透镜的焦距与驱动距离之间的关系的信息(驱动距离信息)被事先保留,并且使用该驱动距离信息来计算在曝光期间变焦成像中的变焦透镜的驱动距离。
请注意,由于本技术的第七实施例中的成像装置的每个配置与图2中示出的成像装置100的配置相同,因此将参考图2描述该配置,并且,这里将省略对其的描述。请注意,由于本技术的第八实施例和之后的实施例的每个配置与图2中示出的成像装置100的配置相同,因此将参考图2描述该配置。
另外,由于除了图12的步骤S944的细节不同以外,本技术的第七实施例中的成像装置的操作例子与本技术的第一实施例中的成像装置100的操作(参考图10到图12)相同,所以省略对其的描述。
[变焦透镜的焦距与驱动距离之间的关系的例子]
图25是示意性地示出根据本技术的第七实施例的由曝光期间变焦设置单元330根据变焦开始时的焦距设置的变焦透镜的驱动距离的例子的示图。
在图25中示出的表格(表格1110)示出当曝光期间变焦成像操作开始时(曝光开始时)的焦距(变焦开始时的焦距)与曝光期间变焦成像操作结束时(曝光结束时)的焦距(变焦目标焦距)之间的关系。请注意,通过从在表格1110中示出的变焦目标焦距减去变焦开始时的焦距得到的值等于曝光期间变焦成像的变焦量(变焦透镜的驱动距离)。换句话说,如表格1110所示,在本技术的第七实施例中,根据变焦开始时的焦距来设置变焦量。
例如,当如表格1110所示的变焦开始时的焦距为“20mm”时,设置“10mm”的变焦量(30mm–20mm)。另外,当变焦时的焦距是“60mm”时,设置“30mm”(90mm–60mm)的变焦量。
以这种方式,在本技术的第七实施例的曝光期间变焦设置单元330中,根据变焦开始时的焦距来设置变焦量。换句话说,本技术的第七实施例的曝光期间变焦设置单元330保留指示根据变焦开始时的焦距的变焦透镜的驱动距离的关系的信息(驱动距离信息)。然后,当曝光期间变焦成像的执行开始时(在图12的步骤S942中确定为适合之后),曝光期间变焦设置单元330基于从透镜位置检测单元285供应的变焦透镜211的位置的信息来检测变焦开始时的焦距。然后,曝光期间变焦设置单元330基于驱动距离信息根据变焦开始时的焦距来决定变焦量。请注意,曝光期间变焦设置单元330根据包括在捕获图像(参考图7)中的特定被摄体的大小和数量调整变焦量,然后最终计算变焦量。
然后,基于计算的变焦量、特定被摄体的移动速度和由曝光控制单元290计算的曝光时间(参考图12的步骤S945),曝光期间变焦设置单元330计算在曝光期间变焦成像操作中的图像传感器220的变焦速度和曝光时间。接着,基于计算的变焦量、变焦速度和曝光时间来执行曝光期间变焦图像生成处理(参考图12的步骤S946)。
以这种方式,通过根据变焦开始时的焦距来设置变焦量,可以设置适合的变焦量。例如,通过使在径向形状上的流动程度相等,可以执行成像。请注意,由于焦距对应于视角,因此可以根据本技术的第七实施例来设置根据视角的变焦量。
<8.第八实施例>
在本技术的第一实施例中,已经描述了被摄体检测单元310识别作为特定被摄体的人的面部的例子。虽然在本技术的第一实施例中没有给出具体的考虑,但是如果人的面部太小,将很难看到面部表情,因此,认为对于成像而言足够大的面部适合于曝光期间变焦成像。另外,如图14所示,当人的面部是特定被摄体时,通过减少变焦量可以对人的面部表情进行很好的成像。
因此,在本技术的第八实施例中,将参考图26描述基于从成像装置到特定被摄体的距离(被摄体距离)和焦距来计算变焦量的例子。请注意,由于已经在图5中描述了被摄体距离的计算的例子,因此在这里省略对其的描述。
[到特定被摄体的距离和特定被摄体的类型与变焦透镜的驱动距离之间的关系的例子]
图26是示意性地示出根据本技术第八实施例的由曝光期间变焦设置单元330根据到特定被摄体的距离和特定被摄体的类型计算的变焦透镜的驱动距离的例子的示图。
在图26中示出的表格(表格1120)示出,到特定被摄体的距离(列1121)与在变焦开始时的焦距(开始焦距)是20mm的情况中当特定被摄体中包括人时的曝光期间变焦成像操作(列1122)之间的关系。另外,表格1120还示出到特定被摄体的距离(列1121)与在相同的开始焦距(20mm)的情况中当特定被摄体中不包括人时的曝光期间变焦成像操作(列1123)之间的关系。
如表格1120的列1121所示,本技术的第八实施例的曝光期间变焦设置单元330基于从成像装置到特定被摄体的距离(被摄体距离)来计算变焦量(变焦目标焦距与变焦开始时的焦距之间的差)。另外,如表格1120的列1122和1123所示,在根据人被包括在特定被摄体中时的被摄体距离来调整变焦开始时的焦距之后,曝光期间变焦设置单元330开始曝光期间变焦成像操作。
例如,当人被包括在特定被摄体中并且在如表格1120所示开始焦距是20mm的情况中被摄体距离小于5米时,变焦目标焦距被设置为22mm(变焦量是2mm)。另一方面,当人没有被包括在特定被摄体中并且在开始焦距是20mm的情况中被摄体距离小于5米时,变焦目标焦距被设置为25mm(变焦量是5mm)。以这种方式,通过根据特定被摄体(无论其中是否包括人)的类型来调整变焦量,当存在人并且可以相应地对人的面部表情进行很好的成像时,可以减少变焦量。
另外,当人被包括在特定被摄体中并且在开始焦距是20mm的情况中被摄体距离在5米到15米的范围中时,在开始焦距被设置为30mm后(执行放大后),变焦量被设置为3mm。换句话说,曝光期间变焦成像被执行,其中,变焦透镜的焦距从30mm被驱动到33mm。另一方面,当人没有被包括在特定被摄体中并且在开始焦距是20mm的情况中被摄体距离在5米到15米的范围中时,曝光期间变焦成像被执行,其中,变焦透镜的焦距从20mm被驱动到30mm。
另外,当人被包括在特定被摄体中并且在开始焦距是20mm的情况中被摄体距离大于15米时,在开始焦距被设置为50mm后(执行放大后),变焦量被设置为5mm。换句话说,曝光期间变焦成像被执行,其中,变焦透镜的焦距从50mm被驱动到55mm。另一方面,当人没有被包括在特定被摄体中并且在开始焦距是20mm的情况中被摄体距离大于15米时,曝光期间变焦成像被执行,其中,变焦透镜的焦距从20mm被驱动到40mm。
以这种方式,当人被包括在特定被摄体中时,在事先执行了放大后(在大小被调整到面部表情被容易地看到的大小后),曝光期间变焦成像以小的变焦量来被执行,从而使得面部表情被清晰地看到。请注意,事先执行的放大是根据被摄体距离来设置的,从而减少用户决定的与构图的偏差(表格1120是三个阶段设置的例子)。另外,根据放大后的开始焦距来设置小的变焦量。
请注意,当人没有被包括在特定被摄体中时,通过将构图被决定时的焦距设置为开始焦距来执行曝光期间变焦成像。在这种情况中,根据被摄体距离来调整变焦量,并且,因此,可以获得将从成像装置到特定被摄体的距离考虑在内的良好的曝光期间变焦捕获图像。
请注意,在图26中,假定开始焦距是20mm,但是,另外,当焦距是其它距离时,以相同的方式基于被摄体距离和被摄体类型(是否是人)来设置变焦量。
请注意,在表格1120中,描述了这样的例子,其中,当人被包括在特定被摄体中时,在根据被摄体距离执行放大后执行曝光期间变焦成像,但是本技术并不限于此。由于诸如开始焦距、被摄体距离和成像装置的性能(图像传感器的大小)的因素而导致在捕获图像中作为特定被摄体的人的大小改变。换句话说,当大小被调整为面部表情被容易地看到的大小时的变焦操作可以根据作为特定被摄体的人的大小来决定。在表格1120中,已经示出了由于较小的大小而导致放大被执行的情况,但是在合适大小的情况中,可以在不执行放大的情况下执行曝光期间变焦成像,但是,在大小过大的情况中,可以在执行缩小后执行曝光期间变焦成像。
另外,已经描述了这样的例子,其中,在人没有被包括在特定被摄体中的情况中,曝光期间变焦成像是通过将构图被决定时的焦距设置为开始焦距来执行的,但是本技术不限于此。即使当除了人的其它事物是特定被摄体时,如果大小过小,也会存在在曝光期间变焦成像中无法获得适当的图像的情况(例如,很难认清聚焦在什么上的图像的情况)。出于这一原因,当人没有被包括在特定被摄体中时,如果特定被摄体的大小较小(例如,小于画面面积的1/10),那么曝光期间变焦成像可以在执行放大后被执行。
[成像装置的操作例子]
接下来,将参考附图描述根据本技术第八实施例的成像装置100的操作。
图27是示出根据本技术的第八实施例的在成像过程中的成像操作处理(步骤S1920)的过程的例子的流程图。
请注意,图27是图12中示出的成像操作处理(步骤S930)的变型例,并且不同之处在于,其中,当人是特定被摄体时,添加调整开始焦距的处理,并且被摄体距离被用于变焦量的计算中。因此,相同的附图标记被给予与图12中相同的过程,并且在这里省略对其的描述。
当在步骤S942中确定特定被摄体的移动速度适合时,曝光期间变焦设置单元330检测特定被摄体与成像装置之间的距离(被摄体距离)(步骤S1921)。然后,曝光期间变焦设置单元330确定人是否被包括在特定被摄体中(步骤S1922)。然后,当确定人没有包括在特定被摄体中(步骤S1922)时,基于被摄体距离和开始焦距来计算曝光期间变焦成像操作中的变焦量(步骤S1923),并且处理前进到步骤S945。
另一方面,当确定人被包括在特定被摄体中(步骤S1922)时,根据被摄体距离来调整开始焦距(步骤S1924)。因此,当被摄体距离大时执行放大,并且,因此设置曝光期间变焦成像操作开始时的焦距。然后,基于调整后的开始焦距和被摄体的类型(人)来计算曝光期间变焦成像操作中的变焦量(步骤S1925),并且处理前进到步骤S945。
以这种方式,根据本技术的第八实施例,可以根据被摄体距离来决定变焦量。换句话说,基于与从成像装置到特定被摄体的距离(被摄体距离)有关的信息,可以决定曝光期间变焦成像操作的控制内容。另外,根据本技术的第八实施例,当人是特定被摄体时,根据被摄体距离来调整曝光期间变焦成像操作开始时的焦距,然后,可以在调整后的变焦透镜的位置处执行曝光期间变焦成像操作。由于预先知道了人的面部的标准大小,因此通过在根据被摄体距离调整操作开始时的焦距(预先调整到面部表情可以被容易地看见到的大小)之后执行曝光期间变焦成像操作,可以捕获面部表情被容易地看见的图像。
<9.第九实施例>
在本技术的第一到第八实施例中,在假定曝光期间变焦成像操作的变焦方向的数目是1(放大方向)的情况下提供了描述。但是,甚至可以通过在变焦透镜在缩小方向上被驱动的同时执行成像来执行曝光期间变焦成像操作。本技术的第一到第八实施例也可以以相同的方式被应用到缩小方向上的曝光期间变焦成像操作中。另外,也可以考虑曝光期间变焦设置单元330基于被摄体信息决定变焦透镜要在放大方向与缩小方向之间的哪个方向上被驱动,从而执行曝光期间变焦成像。
因此,在本技术的第九实施例中,将描述这样的曝光期间变焦成像操作的例子,其中,在(默认的)初始状态中曝光期间变焦成像操作的变焦方向被设置为放大方向,并且根据被摄体信息,变焦方向被改变为缩小方向。
[显示变焦方向反转的警告和未成像的警告的例子]
图28是示出根据本技术第九实施例的当曝光期间变焦设置单元330确定特定被摄体的大小不适合在放大方向上的曝光期间变焦成像操作时显示的图像的例子的示意图。
图28(a)示出在曝光期间变焦模式中的实时查看操作期间当分析曝光期间变焦成像操作可以在缩小方向上被执行但不会在放大方向上被执行时被显示的具有引导显示的实时查看图像(图像1210)。该图像1210示出用于限定大小的上限的框架(框架1211)和文本显示区域(文本显示区域1214)。另外,作为特定被摄体,在该图像1210的中心周围,图像1210示出大到足够延伸超出框架1211但又没有大到足够延伸超出图像1210的人的面部(面部1212)。
这里,将描述显示图像1210的情况。由于在成像装置100中(默认的)初始状态中的曝光期间变焦成像操作的变焦方向被设置为放大方向,因此,当特定被摄体的大小落入框架1211内,那么执行放大方向上的曝光期间变焦成像操作。另一方面,当特定被摄体的大小延伸超出框架1211但又没有延伸超出图像1210时,确定在缩小方向上的曝光期间变焦成像操作是否可能。在缩小方向上的曝光期间变焦成像操作是可能的情况指这样的情况,其中,在缩小方向上在其驱动期间变焦透镜不与端部接触(确保变焦透镜的可操作范围)。请注意,当大小也延伸超出图像1210时,特定被摄体的大小被确定为不适合于曝光期间变焦成像操作。
以这种方式,当在曝光期间变焦模式的实时查看操作期间特定被摄体的大小延伸超出框架1211但没有超出图像1210时,确定在缩小方向上的曝光期间变焦成像操作是否可能。然后,当曝光期间变焦设置单元330确定该操作可能时,在显示单元272上显示如图1210所示的具有引导显示的实时查看图像,并且通知用户在缩小方向上使用曝光期间变焦成像操作执行了成像。请注意,当确定操作并不可能(不可能)的时,如在下一个图28(b)中示出的图像(图像1220)被显示。
图28(b)示出在曝光期间变焦模式中的实时查看操作期间当分析曝光期间变焦成像操作不能在放大方向和缩小方向两者上被执行时被显示的具有引导显示的实时查看图像(图像1220)。请注意,在图像1220中,框架1221、面部1222和文本显示区域1224分别对应于图28(a)的图像1210中的框架1211、面部1212和文本显示区域1214。
如图像1220所示,当曝光期间变焦设置单元330分析在缩小方向上的曝光期间变焦成像操作是否可能,然后分析该操作不可能时,通知用户曝光期间变焦成像操作不可能。
接下来,将参考图29和图30描述使用在放大方向上的曝光期间变焦成像操作的成像与使用在缩小方向上的曝光期间变焦成像操作的成像之间的差别。
[在放大方向和缩小方向上的曝光期间变焦成像操作的例子]
图29是示意性地示出在放大方向上的曝光期间变焦成像操作中由根据本技术的第九实施例的成像装置100捕获的图像的例子的示图。
图29示意性地示出显示在曝光期间变焦成像操作开始时的被摄体的图像(图像1230)以及使用曝光期间变焦成像操作捕获的图像(图像1240)。
请注意,由于图像1230的框架1231和面部1232对应于图28中示出的框架和面部,因此在这里省略对其的描述。图像1240以实线示出具有与图像1230的面部1232相同的大小并显示在曝光期间变焦成像操作开始时(在曝光开始时)的特定被摄体的大小的面部1242。此外,图像1240以虚线示出显示在曝光期间变焦成像操作结束时(在曝光结束时)的特定被摄体的大小的脸部1243。
如图像1230所示,当面部1232落入框架1231内时,曝光期间变焦设置单元330确定默认的曝光期间变焦成像操作(在放大方向上)是可能的。然后,当快门按钮被按下时,在放大方向上的曝光期间变焦成像操作被执行,然后,生成使用在放大方向上的曝光期间变焦成像操作捕获的图像(图像1240)。
图30是示意性地示出在缩小方向上的曝光期间变焦成像操作中由根据本技术的第九实施例的成像装置100捕获的图像的例子的示图。
图30示意性地示出显示在曝光期间变焦成像操作开始时的被摄体的图像(图像1250)以及使用曝光期间变焦成像操作捕获的图像(图像1260)。
请注意,由于图像1250的框架1251和面部1252对应于图28中示出的框架和面部,因此在这里省略对其的描述。在图像1260中,指示曝光期间变焦成像操作开始时的特定被摄体的大小的面部1262以实线示出,并且,指示曝光期间变焦成像操作结束时的特定被摄体的大小的面部1263以虚线示出。
如图像1250所示,当面部1252没有延伸超出图像1250但是延伸超出框架1251时(当大小超出上限时),确定在缩小方向上的曝光期间变焦成像操作是否可能。然后,当确定可能时,在快门按钮被按下时执行在缩小方向上的曝光期间变焦成像操作,然后,生成使用在缩小方向上的曝光期间变焦成像操作捕获的图像(图像1260)。
[成像装置的操作例子]
接下来,将参考附图描述根据本技术第九实施例的成像装置100的操作。
图31是示出根据本技术的第九实施例的在成像过程中的构图决定处理(步骤S1930)的过程的例子的流程图。
请注意,图31是图11中示出的构图决定处理(步骤S910)的变型例,并且不同之处在于,在被摄体的大小不适合于在放大方向上的曝光期间变焦成像操作(曝光期间变焦摄影)时,确定在缩小方向上的曝光期间变焦成像操作是否是可执行的。因此,相同的附图标记被给予与图11中相同的过程,并且在这里省略对其的描述。
在确定特定被摄体的大小是否适合(步骤S917)时,当确定特定被摄体的大小不适合时,曝光期间变焦设置单元330确定在相反方向(缩小方向)上的曝光期间变焦成像操作(曝光期间变焦摄影)是否是可能的(步骤S1931)。当在步骤S1931的确定中特定被摄体的大小超出图像的大小时,确定在放大方向和缩小方向两者上都不可能进行曝光期间变焦成像操作。另外,当在步骤S1931的确定中特定被摄体的大小没有超出图像的大小时,基于从透镜位置检测单元285供应的变焦透镜的位置信息来分析在缩小方向上的驱动期间变焦透镜是否与端部接触。换句话说,当其大小没有超出图像的大小时,分析是否确保在缩小方向上的变焦透镜的可操作距离。
然后,当确定在缩小方向上的曝光期间变焦成像操作不可能(步骤S1931)时,通知曝光期间变焦成像操作不可能的通知画面(例如,参考图28(b))被显示在显示单元272上(步骤S1933)。然后,在步骤S1933之后,处理返回到步骤S911。
另一方面,当确定在缩小方向上的曝光期间变焦成像操作可能(步骤S1931)时,通知在缩小方向上的曝光期间变焦成像操作的通知画面(例如,参考图28(a))被显示在显示单元272上(步骤S1932)。然后,在步骤S1932之后,处理返回到步骤S920。
图32是示出根据本技术第九实施例的在成像过程中的成像操作处理(步骤S1940)的过程的例子的流程图。
请注意,图32是图12中示出的成像操作处理(步骤S930)的变型例,并且不同之处在于,在被摄体的大小不适合于在放大方向上的曝光期间变焦成像操作时,确定在缩小方向上的曝光期间变焦成像操作是否是可执行的。因此,相同的附图标记被给予与图12中相同的过程,并且在这里省略对其的描述。
在步骤S939中确定特定被摄体的大小是否适合时,当确定特定被摄体的大小不适合(步骤S939)时,曝光期间变焦设置单元330确定在相反方向(缩小方向)上的曝光期间变焦成像操作是否是可能的(步骤S1941)。请注意,由于步骤S1941与图31中示出的步骤S1931相同,因此在这里省略对其的描述。
然后,当确定在缩小方向上的曝光期间变焦成像操作不可能(步骤S1941)时,通知曝光期间变焦成像操作不可能的通知画面(例如,参考图28(b))被显示在显示单元272上(步骤S1943)。然后,在步骤S1943后,成像操作处理的过程结束。
另一方面,当确定在缩小方向上的曝光期间变焦成像操作是可能的(步骤1941)时,在曝光期间变焦成像操作中的变焦方向从默认方向(放大方向)改变到缩小方向(步骤S1942)。然后,在步骤S1942之后,处理返回到步骤S942。请注意,由于步骤S942和后续步骤与图12中的步骤相同,因此在这里省略对其的描述。
如上所述,根据本技术的第九实施例,可以基于特定被摄体的大小来决定曝光期间变焦成像操作的变焦方向。换句话说,根据本技术的第九实施例,通过基于被摄体信息来决定变焦方向,可以容易地执行曝光期间变焦成像操作。
请注意,在本技术的第九实施例中,已经描述了这样的例子,其中,基于曝光期间变焦成像操作开始时的大小来切换变焦方向,但是本技术并不限于此。还可以考虑基于曝光期间变焦成像操作的变焦量来预测在曝光期间变焦成像操作结束时的大小,然后,当确定预测的大小在捕获图像中不适合时切换方向。
<10.第十实施例>
在本技术的第九实施例中,已经描述了这样的例子,其中,当特定被摄体的大小不适合于在默认方向(放大方向)上的曝光期间变焦成像操作时,变焦方向被反转,然后,执行在缩小方向上的曝光期间变焦成像操作。使用该配置,当在曝光期间变焦成像操作开始时的特定被摄体的大小过大时,也可以执行曝光期间变焦成像操作。请注意,为了针对具有过大的大小的特定被摄体执行曝光期间变焦成像操作,除了在缩小方向上的曝光期间变焦成像操作以外,还可以考虑通过执行自动地缩小以减小大小来执行在放大方向上的曝光期间变焦成像操作的情况。
因此,在本技术的第十实施例中,将参考图33到36描述这样的例子,其中,当特定被摄体的大小过大时,在执行了自动地缩小以减小大小后,执行在放大方向上的曝光期间变焦成像操作。
[确定大小的例子]
图33是示出根据本技术第十实施例的由曝光期间曝光变焦单元330分析的特定被摄体的大小的示意图。
请注意,在本技术的第十实施例中,将示出这样的例子,其中,在曝光期间变焦成像操作结束时(在曝光结束时)的特定被摄体的大小被预测,并且使用预测的大小(预测大小)来执行分析。
图33(a)示出根据本技术的第十实施例的当在放大方向上的曝光期间变焦成像操作中的特定被摄体的大小被确定为适合时的确定方法的例子。另外,图33(b)示出根据本技术的第十实施例的由于特定被摄体的过大的大小而导致确定在执行缩小后执行在放大方向上的曝光期间变焦成像操作的例子。
图33(a)示出用于描述这样的情况的图像(图像1310),其中,大小被确定为适合于在放大方向上的曝光期间变焦成像操作。该图像1310示出指示当确定在放大方向上的曝光期间变焦成像操作适合时的特定被摄体的大小的例子的面部(面部1312)。另外,该图像1310示出当使用虚线的面部(面部1313)针对面部1312执行在放大方向上的曝光期间变焦成像操作时在成像结束时的面部1312的大小(预测大小)。
这里,将参考图33(a)描述这样的情况,其中,确定在放大方向上的曝光期间变焦成像操作中的特定被摄体的大小是适合的。本技术的第十实施例的曝光期间变焦设置单元330基于曝光期间变焦成像操作的变焦量来预测特定被摄体的当前大小(在曝光期间变焦成像操作开始时)及其在曝光期间变焦成像操作结束时的大小。换句话说,如图33(a)的图像1310所示,基于(面部1312的)当前大小来预测在操作结束时(面部1313的)大小。然后,基于(面部1313的)预测大小,曝光期间变焦设置单元330确定在曝光期间变焦成像操作中成像的特定被摄体是否落入捕获图像内。当大小落入(没有超出)图像内时,曝光期间变焦设置单元330确定特定被摄体的大小适合,并且将特定被摄体的当前大小设置为曝光期间变焦成像操作开始时的大小。
图33(b)示出用于描述这样的情况的图像(图像1320),其中,由于特定被摄体的大小过大,因此确定在执行缩小后执行在放大方向上的曝光期间变焦成像操作。该图像1320示出指示当执行缩小后执行在放大方向上的曝光期间变焦成像操作时的特定被摄体的大小的例子的面部(面部1322)。另外,该图像1320示出当使用虚线的面部(面部1323)针对面部1322执行在放大方向上的曝光期间变焦成像操作时在成像结束时的面部1322的大小(预测大小)。
如图33(b)所示,当特定被摄体的(面部1323的)预测大小未落入到捕获图像内时,确定特定被摄体的大小不适合。然后,使用曝光期间变焦成像操作来执行成像,执行缩小,然后,执行在放大方向上的曝光期间变焦成像操作。换句话说,在调整了曝光期间变焦成像操作开始时的特定被摄体的大小后,执行在放大方向上的曝光期间变焦成像操作。请注意,当操作开始时的特定被摄体的大小尚未落入到捕获图像内时,确定特定被摄体的大小不适合于曝光期间变焦成像操作,并且,因此,不执行曝光期间变焦成像操作。
换句话说,当特定被摄体的当前大小落入捕获图像内并且操作结束时的预测大小未落入捕获图像内时,在执行缩小后执行在放大方向上的曝光期间变焦成像操作。请注意,由于将在图35中描述大小的调整,因此在这里省略对其的描述。
接下来,将描述在曝光期间变焦模式中的实时查看操作期间在显示单元272上显示的引导显示。
[引导显示的例子]
图34是示出根据本技术第十实施例的当确定特定被摄体的大小不适合时并且当确定曝光期间变焦成像操作在缩小后执行时显示的图像的例子的示意图。
图34(a)示出在曝光期间变焦模式的实时查看操作期间当特定被摄体的大小未落入捕获图像内时显示的具有引导显示的实时查看图像(图像1330)。该图像1330示出其大小未落入捕获图像内的面部(面部1332)和文本显示区域(文本显示区域1334)。该文本显示区域1334示出提示缩小以执行曝光期间变焦成像操作的文本。
如图像1330所示,在当前大小(在曝光期间变焦成像操作开始时的大小)尚未落入捕获图像内时,如图像1330所示的具有引导显示的实时查看图像被显示在显示单元272上。因此,通知用户需要开始曝光期间变焦成像操作的动作。
图34(b)示出在曝光期间变焦模式的实时查看操作期间当曝光期间变焦设置单元330分析预测大小未落入捕获图像内时显示的具有引导显示的实时查看图像(图像1340)。该图像1340示出大小勉强落入捕获图像内的面部(面部1342)和文本显示区域(文本显示区域1344)。该文本显示区域1344示出通知在执行缩小后执行在放大方向上的曝光期间变焦成像操作的文本。
如图像1340所示,当在放大方向(预测方向)上的曝光期间变焦成像操作结束时的大小延伸超出捕获图像而当前大小落入捕获图像内时,如图像1340所示的具有引导显示的实时查看图像被显示在显示单元272上。然后,当在图像1340被显示的状态中按下快门按钮时,根据针对曝光期间变焦成像操作计算的变焦量执行缩小,然后执行在放大方向上的曝光期间变焦成像操作。
[特定被摄体的转变的例子]
图35是示意性地示出根据本技术第十实施例的当在放大方向上的曝光期间变焦成像操作被确定为在执行缩小后执行时成像装置的操作的转变与特定被摄体的大小的转变之间的关系的示图。
图35示出在时间轴上的实时查看操作的时期(实时查看时期)、在执行曝光期间变焦成像操作之前执行缩小的时期(缩小时期)、以及执行曝光期间变焦成像操作的时期(曝光期间变焦成像操作时期(曝光时期))。请注意,指示每个时期(时间)的长度是示意性的,并不指示每个时期的时间长度的比例。请注意,在图35和以下的图中示出的时间轴上,指示每个时期(时间)的长度也是示意性的。
另外,图35示出用于指示当快门按钮被按下然后实时查看时期结束时的特定被摄体的大小的图像(图像1320)。另外,图35示出用于指示在曝光期间变焦成像操作之前的缩小结束时的特定被摄体的大小的图像(图像1330)和用于指示在放大方向上的曝光期间变焦成像操作结束时的大小的图像(图像1340)。请注意,在图像1320中的特定被摄体(面部1322)的大小与图像1340中的特定被摄体(面部1342)的大小相同。在图像1330中的特定被摄体(面部1332)的大小小于面部1322和面部1342的大小。
这里,将描述由成像装置100进行的缩小后的曝光期间变焦成像操作。如图像1320所示,如果当其预测大小未落入捕获图像内(也参考图33(b))的特定被摄体被成像时快门按钮被按下,那么确定在执行缩小后执行在放大方向上的曝光期间变焦成像操作。当作出该确定时,曝光期间变焦设置单元330根据计算的曝光期间变焦成像操作的变焦量来执行缩小。换句话说,如图像1330所示,在缩小后(在缩小时期结束时),特定被摄体的(面部1332的)大小被减小到小于缩小之前的特定被摄体的(面部1322的)大小。然后,曝光期间变焦成像操作被执行,其中,在缩小结束时的特定被摄体的(面部1332的)大小被设置为其开始时的大小,并且在缩小开始时的特定被摄体的(面部1322的)大小被设置为其结束时的大小。
[缩小后的曝光期间变焦成像操作中的成像例子]
图36是示意性地示出根据本技术第十实施例的当确定在缩小后执行在放大方向上的曝光期间变焦成像操作时的捕获图像的示图。
请注意,图36示出使用曝光期间变焦成像操作生成的捕获图像(图像1350),其开始于在图35中示出的图像1330中的特定被摄体的大小并结束于在图像1340中的特定被摄体的大小。另外,在图像1350中,由实线指示的面部(面部1352)指示在曝光期间变焦成像操作开始时的特定被摄体,并且,由虚线指示的面部(面部1353)指示在曝光期间变焦成像操作结束时的特定被摄体。
如图像1350所示,即使当快门按钮被按下时特定被摄体的大小是由于曝光期间变焦成像操作中的变焦导致被摄体延伸超出图像的大小时,也可以执行成像,从而通过在缩小后执行成像使得被摄体不延伸超出图像。
[成像装置的操作例子]
接下来,将参考附图描述根据第十实施例的成像装置100的操作。
图37是示出根据本技术的第十实施例的在成像过程中的构图决定处理(步骤S1950)的过程的例子的流程图。
请注意,在图31中示出的构图决定处理(步骤S1950)是图11中示出的构图决定处理(步骤S910)的变型例,并且不同之处在于确定特定被摄体的大小的方法。因此,相同的附图标记被给予与图11中相同的过程,并且省略对其的描述。
在确定特定被摄体的位置是否适合(步骤S915)时,当确定特定被摄体的位置适合时,曝光期间变焦设置单元330确定特定被摄体的大小是否落入捕获图像内(步骤S1951)。然后,当确定特定被摄体的大小未落入(确定为延伸超出)捕获图像内(步骤S1951)时,如图34(a)所示的具有引导显示的实时查看图像被显示在显示单元272上(步骤S1952),并且处理返回到步骤S911。
另一方面,当确定特定被摄体的大小落入捕获图像内(步骤S1951)时,由曝光期间变焦设置单元330来执行变焦量的计算(步骤S1953)。然后,基于计算的变焦量和特定被摄体的大小,曝光期间变焦设置单元330计算在曝光期间变焦成像操作结束时(曝光结束时)的特定被摄体的大小(变焦后的特定被摄体的大小)(步骤S1954)。
然后,曝光期间变焦设置单元330确定变焦后的特定被摄体的大小(预测大小)是否落入捕获图像内(步骤S1955)。然后,当确定其大小落入捕获图像内(步骤S1955)时,处理前进到步骤S919,并且显示实时查看图像(没有引导显示的捕获图像)。
另一方面,当确定预测大小未落入捕获图像内(步骤S1955)时,如图34(b)所示的具有引导显示的实时查看图像被显示在显示单元272上(步骤S1956),然后处理前进到步骤S920。换句话说,如果在实时查看操作期间确定变焦后的特定被摄体的大小未落入捕获图像内,那么通知用户通过在执行缩小后执行在放大方向上的曝光期间变焦成像操作来执行成像。
图38和图39是示出根据本技术第十实施例的在成像过程中的成像操作处理(步骤S1960)的过程的例子的流程图。
请注意,在图38和图39中示出的成像操作处理(步骤S1960)是图12的成像操作处理(步骤S930)的变型例,并且不同之处在于确定特定被摄体的大小的方法。因此,相同的附图标记被给予与图12中相同的过程,并且在这里省略对其的描述。
在步骤S935中确定特定被摄体的位置是否适合时,当确定特定被摄体的位置适合时,曝光期间变焦设置单元330确定特定被摄体的大小是否落入捕获图像内(步骤S1961)。然后,当确定特定被摄体的大小未落入(延伸超出)捕获图像(步骤S1961)时,通知特定被摄体的大小延伸超出捕获图像的事实的显示图像被显示(步骤S1962),并且成像操作处理的过程结束。在该显示(特定被摄体大小警告显示)中,例如,显示如图34(a)所示的图像1330的图像。
另一方面,当确定特定被摄体的大小落入捕获图像内(步骤S1961)时,处理前进到步骤S942,并确定特定被摄体的移动速度是否适合。请注意,到步骤S945的处理与图12中的处理相同,因此在这里省略对其的描述。
然后,在步骤S945中计算了在曝光期间变焦成像操作中的曝光时间和变焦速度后,计算在曝光期间变焦成像操作结束时的特定被摄体的大小(变焦后的特定被摄体的大小)(步骤S1963)。然后,曝光期间变焦设置单元330确定变焦后的特定被摄体的大小是否落入捕获图像内(步骤S1964)。然后,当确定预测大小落入捕获图像内(步骤S1964)时,处理前进到步骤S946,并执行曝光期间变焦图像生成处理。换句话说,当确定大小落入其内时,使用变焦透镜的当前位置作为开始点来执行曝光期间变焦图像生成处理。
另一方面,当确定预测大小未落入捕获图像内(步骤S1964)时,曝光期间变焦设置单元330确定变焦透镜是否在相反方向(缩小方向)上以计算的变焦量被驱动(步骤S1965)。由于该步骤S1965与图31的步骤S1931相同,因此在这里省略对其的描述。然后,当确定变焦透镜将不被驱动(步骤S1965)时,通知曝光期间变焦成像操作不可能的通知画面被显示在显示单元272上(步骤S1966),并且成像操作处理的过程结束。
另一方面,当确定变焦透镜将在缩小方向上以计算的变焦量被驱动(步骤S1965)时,基于计算的变焦量来执行缩小(步骤S1967),然后,处理前进到步骤S946。换句话说,在执行缩小后,执行在放大方向上的曝光期间变焦成像操作。
如上所述,根据本技术的第十实施例,当特定被摄体的大小过大时,在特定被摄体在曝光期间变焦成像操作开始时的大小被调整为不延伸超出图像后,可以开始曝光期间变焦成像操作。换句话说,根据本技术的第十实施例,通过基于被摄体信息调整(校正)在曝光期间变焦成像操作开始时的变焦透镜的位置,可以容易地执行曝光期间变焦成像操作。
<11.第十一实施例>
在本技术的第一到第十实施例中,已经描述了这样的例子,其中,通过以计算的变焦量驱动变焦透镜并然后执行作为曝光期间变焦成像操作(曝光期间变焦摄影)的曝光,来执行成像。换句话说,在本技术的第一到第十实施例中,已经描述了这样的例子,其中,曝光时间与变焦时间一致。但是,为了展示特殊的摄影效果,不仅使用通过使曝光时间与变焦时间一致来进行成像的方法,而且使用以曝光时间的一部分执行变焦的方法等,执行曝光期间变焦成像操作。换句话说,摄影效果根据曝光期间变焦成像操作的曝光时间期间变焦透镜何时被驱动而改变。如上所述,由于摄影效果根据曝光期间与变焦时间之间的关系会不同,因此如果基于特定被摄体的信息来决定适合的成像方法,那么这是有利的。
因此,在本技术的第十一实施例中,将参考图40到图44描述这样的例子,其中,曝光期间变焦成像操作中的曝光时间与变焦时间之间的关系(操作模式)是基于特定被摄体的信息决定的。
首先,将在图40中描述指示曝光时间与变焦时间之间的关系的例子的四种操作模式。
[操作模式的例子,其中,曝光时间与变焦时间之间的关系不同]
图40是示意性地示出根据本技术第十一实施例的由成像装置100执行的曝光期间变焦成像操作的四种操作模式的例子的示图。
图40(a)示出其中通过使曝光时间与变焦时间一致来执行成像的操作模式的例子。请注意,在本技术的第十一实施例中,该操作模式被称为正常变焦摄影。图40(a)示出在正常变焦摄影中的曝光时间(曝光时间1411)和在正常变焦摄影中的变焦时间(变焦时间1412)以及时间轴,在该时间轴上给出快门按钮的按下时间。
如图40(a)所示,在正常变焦摄影中,通过使曝光时间与变焦时间一致来执行成像。
图40(b)示出通过对曝光时间的前半段执行曝光来执行成像的操作模式的例子。请注意,在本技术的第十一实施例中,该操作模式被称为前半段变焦摄影。图40(b)示出在前半段变焦摄影中的曝光时间(曝光时间1421)和在前半段变焦摄影中的变焦时间(变焦时间1422)以及时间轴,在该时间轴上给出快门按钮的按下时间。
如图40(b)中的变焦时间1422所示,在前半段变焦摄影中,变焦开始于曝光时间开始时并结束于曝光时间的中间。换句话说,在从曝光时间的开始到中间的时期(变焦时间1422)中,执行到由曝光期间变焦设置单元330计算的变焦量的变焦。请注意,曝光期间变焦设置单元330设置变焦速度,从而使得在该变焦时间1422中完成到计算的变焦量的变焦。
如图40(b)所示,通过使变焦透镜在曝光时间的后半段保持静止,在曝光时间的后半段可以使图像突出。例如,在放大方向上的曝光期间变焦成像操作的情况中,使用前半段变焦摄影获得的捕获图像成为这样的捕获图像,其中,具有操作结束时的大小的特定被摄体(被放大的特定被摄体)被突出。
图40(c)示出通过对曝光时间的后半段执行曝光来执行成像的操作模式的例子。请注意,在本技术的第十一实施例中,该操作模式被称为后半段变焦摄影。图40(c)示出在后半段变焦摄影中的曝光时间(曝光时间1431)和在后半段变焦摄影中的变焦时间(变焦时间1432)以及时间轴,在该时间轴上给出快门按钮的按下时间。
如图40(c)中的变焦时间1432所示,在后半段变焦摄影中,变焦开始于曝光时间的中间并结束于曝光时间结束时。换句话说,在从曝光时间的中间到结束的时期(变焦时间1432)中,执行到由曝光期间变焦设置单元330计算的变焦量的变焦。
如图40(c)所示,通过使变焦透镜在曝光时间的前半段保持静止,在曝光时间的前半段可以使图像突出。例如,在放大方向上的曝光期间变焦成像操作的情况中,使用后半段变焦摄影获得的捕获图像成为这样的捕获图像,其中,具有操作开始时的大小的特定被摄体(被放大前的特定被摄体)被突出。
图40(d)示出通过在曝光时间的中间执行曝光来执行成像的操作模式的例子。请注意,在本技术的第十一实施例中,该操作模式被称为中间变焦摄影。图40(d)示出在中间变焦摄影中的曝光时间(曝光时间1441)和在中间变焦摄影中的变焦时间(变焦时间1442)以及时间轴,在该时间轴上给出快门按钮的按下时间。
如图40(d)中的变焦时间1442所示,在中间变焦摄影中,变焦开始于曝光时间的中间并结束于曝光时间的中间。换句话说,在从曝光时间的中间到结束的时期(变焦时间1442)中,执行到由曝光期间变焦设置单元330计算的变焦量的变焦。
如图40(d)所示,通过使变焦透镜在曝光时间的开始和结束时保持静止,可以在曝光时间的开始和结束时使图像突出。例如,在放大方向上的曝光期间变焦成像操作的情况中,使用中间变焦摄影获得的捕获图像成为这样的捕获图像,其中,具有操作开始和结束时的大小的特定被摄体被突出。
如图40(a)到图40(d)所示,在曝光期间变焦成像操作中,在曝光时间与变焦时间之间的关系(操作模式)中,考虑多种模式。通过基于特定被摄体的信息(被摄体信息)来决定操作模式,曝光期间变焦设置单元330可以以适合于特定被摄体的操作模式执行曝光期间变焦成像操作。
考虑了用于基于被摄体信息切换适合于特定被摄体的操作模式的方法的各种例子,但是,作为例子,将参考图41和图42描述这样的例子,其中,根据特定被摄体的类型来切换操作模式。另外,将参考图43和图44描述根据特定被摄体的大小来切换操作模式的例子。
[成像装置的操作例子]
图41和图42是示出根据本技术第十一实施例的当根据特定被摄体的类型切换操作模式时在成像过程中的构图决定处理(步骤S1970)的过程的例子的流程图。
图41和图42示出这样的情况的流程图,其中,当在慢同步中使用闪光灯(flash)的同时执行曝光期间变焦成像操作时,基于特定被摄体是否是人来切换操作模式。这里,慢同步是一种闪光灯模式,其用于通过即使在闪光灯关闭后也将快门设置在打开状态来使背景明亮地成像。
在图41和图42的成像过程中,当在慢同步中使用闪光灯的同时执行曝光期间变焦成像操作时,如果特定被摄体是人,那么曝光期间变焦成像操作的操作模式被设置为后半段变焦摄影。因此,当闪光灯被应用于特定被摄体时,聚焦透镜不被驱动。另外,聚焦透镜在曝光期间的后半段中被驱动,其中,闪光灯对特定被摄体的影响会变弱。因此,特定被摄体被清晰地成像,并且可以捕获背景在径向形状上流动的图像。
请注意,在图41和图42中示出的成像操作处理(步骤S1970)是图12的成像操作处理(步骤S930)的变型例。因此,相同的附图标记被给予与图12中相同的过程,并且在这里省略对其的描述。
当在步骤S944中计算曝光期间变焦成像操作中的变焦量时,曝光期间变焦成像设置单元330确定是否使用闪光灯执行曝光期间变焦成像操作(步骤S1971)。然后,当确定没有使用闪光灯(例如,没有从控制单元240供应用于执行闪光的信息)(步骤S1971)时,曝光期间变焦成像操作的操作模式被设置为正常变焦摄影(步骤S1972)。然后,在步骤S1972之后,处理前进到步骤S1976。
另一方面,当确定使用闪光灯时(例如,在从控制单元240供应用于执行闪光的信息时)(步骤S1971),曝光期间变焦设置单元330确定是否在慢同步中执行成像(步骤S1973)。然后,当确定未在慢同步中执行成像(步骤S1973)时,处理前进到步骤S1972。
请注意,当确定在慢同步中执行成像(步骤S1973)时,曝光期间变焦设置单元330确定特定被摄体是否是人(人的面部)(步骤S1974)。然后,当确定特定被摄体不是人(步骤S1974)时,处理前进到步骤S1972。
另一方面,当确定特定被摄体是人(步骤S1974)时,曝光期间变焦成像操作的操作模式被设置为后半段变焦摄影(步骤S1975)。然后,曝光期间变焦设置单元330计算在曝光期间变焦成像操作中的变焦量、变焦时间和曝光时间(步骤S1976)。然后,在步骤S1976之后,处理前进到步骤S946,以执行曝光期间变焦成像操作。
如图41和图42所示,根据特定被摄体的类型来设置曝光期间变焦成像操作的操作模式,并且可以根据该设置来执行曝光期间变焦成像操作。
接下来,将参考图43和图44描述根据特定被摄体的大小来切换操作模式的例子。
[根据特定被摄体的大小来设置操作模式的例子]
图43是示意性地示出根据本技术第十一实施例的根据特定被摄体的大小设置的两种操作模式的示图。
图43(a)示出表格(表格1510),其示出特定被摄体的大小与曝光期间变焦成像操作的操作模式之间的关系。该表格1510示出特定被摄体的大小(列1511)与曝光期间变焦成像操作的操作模式(列1512)之间的关系。
这里,将参考表格1510描述根据特定被摄体的大小设置的曝光期间变焦成像操作中的操作模式。如表格1510所示,前半段变焦摄影和后半段变焦摄影中的任意一个都是根据特定被摄体的大小来设置的。如图40所示,具有在曝光期间变焦成像操作结束时的大小的特定被摄体在前半段变焦摄影中被突出,并且具有在操作开始时的大小的特定被摄体在后半段变焦摄影中被突出。换句话说,通过决定操作模式从而使得具有在操作的开始和结束时的大小中的适合大小的特定被摄体被突出,从而可以获得这样的图像,其中,捕获被容易看到的具有容易看到的大小的特定被摄体的图像。
因此,曝光期间变焦设置单元330事先保留指示适合的大小(参考大小)的信息,并分析在操作的开始和结束时的大小(基于变焦量计算的预测大小)中的哪个大小更接近适合的大小。然后,当操作开始时的大小接近适合的大小时,曝光期间变焦成像操作的操作模式被设置为后半段变焦摄影。当操作结束时的大小接近适合的大小时,曝光期间变焦成像操作的操作模式被设置为前半段变焦摄影。
请注意,对于参考大小,存在各种情况,其中,通过根据特定被摄体的类型设置来保留大小,通过根据捕获的场景设置来保留大小,以及通过根据焦距设置来保留大小。以这种方式,通过将参考大小保留在曝光期间变焦设置单元330中,可以根据特定被摄体的大小来设置操作模式。
图43(b)示出在决定前半段变焦摄影后执行成像时的例子,图43(c)示出在决定后半段变焦摄影后执行成像时的例子。图43(b)的图像1530示出在图43(b)中示出的前半段变焦摄影开始时的特定被摄体的大小。另外,图43(c)的图像1550示出在图43(c)中示出的后半段变焦摄影开始时的特定被摄体的大小。
请注意,图43(b)的图像1540示出使用前半段变焦摄影捕获的图像,图43(c)的图像1560示出使用后半段变焦摄影捕获的图像。
在图像1540中由实线指示的面部(面部1542)指示在曝光期间变焦成像操作开始时的特定被摄体。在图像1540中由虚线指示的面部(面部1543)指示在曝光期间变焦成像操作结束时的特定被摄体。另外,以相同的方式,在图像1560中,由实线指示的面部(面部1562)指示在曝光期间变焦成像操作开始时的特定被摄体,由虚线指示的面部(面部1563)指示在曝光期间变焦成像操作结束时的特定被摄体。请注意,在图像1540和1560中,要使用前半段变焦摄影和后半段变焦摄影突出的特定被摄体由粗线指示。
这里,将参考图43(b)描述确定使用前半段变焦摄影的情况。请注意,出于便于描述的原因,将基于下面的假设提供描述:参考大小基本上与图像1550中的特定被摄体的大小相同。
在按下快门按钮时计算变焦量后,曝光期间变焦设置单元330使用计算的变焦量预测在曝光期间变焦成像操作结束时特定被摄体的大小(预测大小)。然后,曝光期间变焦设置单元330分析预测大小(结束时的大小)和当前大小(开始时的大小)中的哪一个更接近参考大小。在图43(b)的图像1530的情况中,分析结束时的大小接近参考大小,因此,曝光期间变焦成像操作的操作模式被决定为前半段变焦摄影。然后,使用前半段变焦摄影来执行曝光期间变焦成像操作,并且生成其中结束时的大小被突出的图像,如图像1540所示。
请注意,在预测大小(结束时的大小)和当前大小(开始时的大小)中哪一个更接近参考大小的分析中,如果开始时的大小被分析为接近参考大小,那么使用在图43(c)中示出的后半段变焦摄影来执行曝光期间变焦成像操作。然后,生成其中开始时的大小被突出的图像,如图像1560所示。
接下来,将描述当根据特定被摄体的大小来切换操作模式时在成像过程中的构图决定处理的过程的例子。
[成像装置的操作例子]
图44是示出根据本技术第十一实施例的当根据特定被摄体的大小切换操作模式时在成像过程中的构图决定处理的过程的例子的流程图。
这里,将基于下面的假设提供描述:在前半段变焦摄影与后半段变焦摄影中的任何一种操作模式中执行曝光期间变焦成像操作。在这种情况中,假定用户设置用于通过例如突出特定被摄体的图像来执行曝光期间变焦成像操作的成像模式。
请注意,在图44中示出的构图决定处理是在图41和图42中示出的构图决定处理(步骤S1970)的变型例,并且与图42中示出的流程图有部分不同。因此,相同的附图标记被给予与图42中相同的过程,并且在这里省略对其的描述。
当在步骤S944中计算变焦量时,曝光期间变焦设置单元330计算在曝光期间变焦成像操作结束时的特定被摄体的大小(变焦后的特定被摄体的大小)(步骤S1981)。然后,曝光期间变焦设置单元330决定开始时的特定被摄体的大小和结束时的特定被摄体的大小中的开始时的特定被摄体的大小是否更接近参考大小(步骤S1982)。换句话说,在步骤S1982中,确定开始时的特定被摄体的大小和结束时的特定被摄体的大小中的哪一个大小更接近参考大小。
然后,当确定接近参考大小的大小不是开始时的特定被摄体的大小(是结束时的特定被摄体的大小)(步骤S1982)时,曝光期间变焦成像操作的操作模式被设置为前半段变焦摄影(步骤S1983)。然后,在步骤S1983之后,处理前进到步骤S1976,从而使用曝光期间变焦设置单元330计算曝光期间变焦成像操作中的变焦量、变焦时间和曝光时间。
另一方面,当确定接近参考大小的大小是开始时的特定被摄体的大小(步骤S1982)时,曝光期间变焦成像操作的操作模式被设置为后半段变焦摄影(步骤S1984)。然后,在步骤S1984之后,处理前进到步骤S1976。
如图43和图44所示,根据特定被摄体的大小来设置曝光期间变焦成像操作的操作模式,并且可以根据该设置来执行曝光期间变焦成像操作。
以这种方式,根据本技术的第十一实施例,可以根据被摄体信息来决定曝光期间变焦成像操作的操作模式。换句话说,根据本技术的第十一实施例,可以根据被摄体信息来决定曝光期间变焦成像操作中的曝光时间与变焦时间之间的关系。以这种方式,通过根据被摄体信息来决定摄影效果,可以容易地执行曝光期间变焦成像操作。
<12.第十二实施例>
在本技术的第一到第十一实施例中,已经描述了这样的例子,其中,在考虑在光轴方向上的特定被摄体的移动的同时,在正交于光轴方向的方向(正交方向)上的特定被摄体的移动没有被特别地考虑。由于针对在光轴的正交方向上进行移动的特定被摄体执行曝光期间变焦成像操作要求特别高水平的技术,因此基于特定被摄体的信息来控制曝光期间变焦成像操作是有利的。
因此,在本技术的第十二实施例中,将参考图45到图52描述这样的例子,其中,分析在正交方向上的特定被摄体(其在正交于光轴的方向上移动)的移动,并且根据在正交方向上的特定被摄体的移动来执行曝光期间变焦成像操作。
[在正交于光轴的方向上移动的特定被摄体的分析例子]
图45是示出根据本技术的第十二实施例的由曝光期间变焦设置单元330分析的特定被摄体在正交于光轴的方向上的移动的示意图。
图45(a)示出在本技术的第十二实施例中假定的在正交于光轴的方向上移动的特定被摄体。图45(a)示出从图的左边向右边(向着箭头1612的尖端)奔跑的人(人1611)。在本技术的第十二实施例中,将基于下面的假设提供描述:使用如图45(a)所示的曝光期间变焦成像操作对奔跑的人(人1611)进行成像。
图45(b)示出图像(图像1620),其示出由曝光期间变焦设置单元330分析的在正交于光轴的方向上的特定被摄体的移动。该图像1620示出从图的左边向右边奔跑的人(人1622)作为特定被摄体,。另外,该图像1620示出限定捕获图像中的中心区域(中心范围)的框架(1621)和指示在曝光期间变焦成像操作结束时的人1622的预测位置的人(人1623)。请注意,指示由曝光期间变焦设置单元330计算的预测位置的人1623使用虚线来指示,并且指示当前位置的人1622使用实线来指示。
由框架1621包围的范围(中心范围)是定义为关于在正交于光轴的方向上进行移动的特定被摄体的中心区(中心附近)的范围(区域)。请注意,由框架1621限定的范围还可以被假定为由在图3(a)中示出的框架411限定的相同范围,但是,出于便于描述的原因,将在假定该范围比图3(a)的框架411的范围更窄的情况下提供描述。
这里,将描述由曝光期间变焦设置单元330执行的对在正交于光轴的方向上进行移动的特定被摄体的分析。当特定被摄体在正交于光轴的方向上移动时,被摄体检测单元310分析在正交于光轴的方向上进行移动的特定被摄体的移动速度和移动方向。对特定被摄体的移动速度和移动方向的分析是通过检测在不同时间捕获的两个图像中的特定被摄体的位置的转变(偏差)来执行的,并且,例如,根据特定被摄体的位置信息的转变(参考图6)来检测被摄体检测单元310。请注意,该分析还可以使用移动向量来执行,该移动向量使用块匹配方法等来检测。另外,本技术的第十二实施例的被摄体信息是通过将特定被摄体的移动速度和移动方向的信息(例如,将帧间的时间设置为单位时间的移动向量)添加到图6中示出的被摄体信息获得的信息。
然后,基于曝光时间、特定被摄体的移动速度和特定被摄体的移动方向,由曝光期间变焦设置单元330预测当曝光期间变焦成像操作的曝光被立即开始时在曝光结束时的特定被摄体的位置。在图1620中使用虚线指示的人(人1623)对应于特定被摄体的该预测位置(预测位置)。请注意,当使用曝光期间变焦成像操作实际地执行成像时,曝光时间的开始时刻和结束时刻由曝光期间变焦设置单元330来计算。换句话说,该预测位置是用于分析在正交于光轴的方向上的特定被摄体的移动的预测位置。请注意,将参考图47描述曝光时间的开始时刻和结束时刻的计算。
接下来,基于特定被摄体的预测位置(预测位置)和当前位置,曝光期间变焦设置单元330分析特定被摄体是否适合于曝光期间变焦成像操作。在该分析中,分析在正交于光轴的方向上的特定被摄体的移动速度是否过高,或者在正交方向上的特定被摄体的移动方向是否适合。在该分析中,当图像的中心附近不在特定被摄体的移动方向上时,该移动方向被确定为不适合。另外,即使移动方向适合,当移动速度过高时(当预测位置位于比中心附近更远的位置处时),移动速度被确定为不适合。
换句话说,当特定被摄体的前进方向是向着图像的中心附近,并且预测位置位于当前位置和图像的中心附近之间时,确定在正交于光轴的方向上移动的特定被摄体适合于曝光期间变焦成像操作。
在图45(b)的图像1620中,在从人1622的位置查看时,人1623的位置经过框架1621。出于这一原因,在该图像1620中示出的情况中,曝光期间变焦设置单元330确定该特定被摄体不适合于曝光期间变焦成像操作。
请注意,将使用图45(b)的图像1620描述确定其中特定被摄体适合于曝光期间变焦成像操作的情况。在从人1622的位置查看时,当人1623的位置不经过框架1621时,曝光期间变焦设置单元330确定该特定被摄体适合于曝光期间变焦成像操作。请注意,考虑用于确定位置是否经过框架1621的各种方法,但是在本发明的第十二实施例中,假定被识别为预测位置(人1623)的中心的位置(点1624)经过框架1621。
换句话说,当点1624在框架1621中时,由于预测位置在中心附近中,因此曝光期间变焦设置单元330确定该特定被摄体适合。另外,即使当该点不在框架1621中时,并且如果经过了比曝光时间更长的时间,当点1624在被预测为在框架1621中的位置处时,曝光期间变焦设置单元330确定该特定被摄体适合。
接下来,将参考图46描述当在正交于光轴的方向上移动的特定被摄体被确定不适合于曝光期间变焦成像操作时显示在显示单元272上的图像。
[引导显示的例子]
图46是示出根据本技术第十二实施例的当在正交于光轴的方向上移动的特定被摄体不适合于曝光期间变焦成像操作时显示在显示单元272上的图像的例子的示意图。
图46示出当在曝光期间变焦模式中的实时查看操作期间曝光期间变焦设置单元330分析特定被摄体在正交于光轴的方向上的移动不适合时显示的具有引导显示的实时查看图像(图像1630)。该图像1630示出特定被摄体(人1632)、文本显示区域(文本显示区域1634)和指示限定为中心区的范围的框架(框架1631)。请注意,该文本显示区域1634示出用于通知由于特定被摄体的移动速度过高因而不能执行曝光期间变焦成像操作的文本。
如图像1630所示,当曝光期间变焦设置单元330分析特定被摄体在正交于光轴的方向上的移动不适合时,通知曝光期间变焦成像操作不可执行的具有引导显示的实时查看图像被显示在显示单元272上。
接下来,将参考图47描述当在按下快门按钮后在正交于光轴的方向上的特定被摄体的移动被确定为适合时由曝光期间变焦设置单元330计算的曝光时间的开始时刻和结束时刻。
[曝光时间的开始时刻和结束时刻的计算的例子]
图47是示出根据本技术第十二实施例的由曝光期间变焦设置单元330执行的对曝光期间变焦成像操作的曝光时间的开始时刻和结束时刻的计算的例子的示意图。
图47(a)示出图像(图像1640),其示意性地示出时间轴和对曝光期间变焦成像操作的曝光时间的结束时刻(曝光结束时刻)的计算。图像1640示出当快门按钮被按下时的指示限定为中心区的范围的框架(框架1641)以及指示特定被摄体的位置(当前位置)的人(人1642)。另外,在图像1640中,指示在特定被摄体的移动速度和移动方向被分析时被预测的位置的人使用以虚线指示的人(人1643)来示出。另外,在图像1640中,指示在曝光结束时刻的特定被摄体的位置的人使用由虚线包围并填充有小点的人(人1644)来示出。
这里,将描述由曝光期间变焦设置单元330执行的对曝光结束时刻的计算。曝光期间变焦设置单元330计算当快门按钮被按下时的曝光结束时刻,并且在正交于光轴的方向上的特定被摄体的移动被分析为是适合的。在曝光结束时刻的该计算中,曝光期间变焦设置单元330将特定被摄体移动到图像中心时的时刻设置为曝光结束时刻。换句话说,基于特定被摄体(人1642)的当前位置以及特定被摄体的移动速度和移动方向,曝光期间变焦设置单元330预测由人1644示出的特定被摄体移动到该图像的中心附近的时刻,并将该预测时间设置为曝光结束时刻。
图47(b)示出图像(图像1650),其示意性地示出时间轴和曝光期间变焦成像操作的曝光时间的开始时刻的计算。图像1650示出指示限定为中心区的范围的框架(框架1651)、以及指示特定被摄体的当前位置的人(人1652)。另外,在图像1650中,指示在计算的曝光结束时刻的特定被摄体的位置的人使用由虚线包围并填充有小点的人(人1654)来示出。此外,在图像1650中,指示在计算的曝光开始时刻的特定被摄体的位置的人使用由虚线包围并填充有斜线的人(人1655)来示出。
这里,将描述由曝光期间变焦设置单元330执行的对曝光开始时刻的计算。曝光期间变焦设置单元330在计算曝光结束时刻后计算曝光开始时刻。在曝光开始时刻的计算中,曝光期间变焦设置单元330计算从曝光结束时刻向前提早曝光时间的时刻,并将计算的时刻设置为曝光开始时刻。换句话说,曝光期间变焦设置单元330在特定被摄体移动到由人1655指示的位置的时刻开始曝光,并在特定被摄体移动到由人1654指示的位置的时刻结束曝光。
[特定被摄体的转变的例子]
图48是示意性地示出根据本技术第十二实施例的当针对在正交于光轴的方向上移动的特定被摄体执行曝光期间变焦成像操作时成像装置的操作的转变与特定被摄体的大小的转变之间的关系的示图。
在图48中,在时间轴上示出实时查看操作的时期(实时查看时期)和曝光期间变焦成像操作的曝光时间(曝光期间变焦成像操作时期(曝光时间))。
另外,在图48中,示出图像(图像1661),其用于示出在快门按钮被按下后实时查看时期结束时的特定被摄体的大小。另外,在图48中,示出图像(图像1662)和图像(图像1663),图像(图像1662)用于示出在曝光期间变焦成像操作开始时(曝光开始时刻)的特定被摄体的大小,图像(图像1663)用于示出在曝光期间变焦成像操作结束时(曝光结束时刻)的特定被摄体的大小。
如图48所示,当快门按钮被按下后在正交于光轴方向上的特定被摄体的移动经过该图像的中心附近(框架内),但在曝光期间变焦成像操作中仍不经过中心附近时,开始成像。首先,在曝光开始前,曝光结束时刻被设置,从而使得曝光结束于特定被摄体移动到图像的中心附近的定时(时刻)。然后,根据由曝光期间变焦设置单元330计算的变焦时间设置曝光开始时刻,并且当该曝光开始时刻到来时,开始曝光期间变焦成像操作。换句话说,执行曝光期间变焦成像操作,其中,曝光开始于如图像1662所示的特定被摄体的图像,并且曝光结束于如图像1663所示的特定被摄体的图像。
[使用曝光期间变焦成像操作对在正交于光轴的方向上移动的特定被摄体进行成像的例子]
图49是示意性地地示出根据本技术第十二实施例的在正交于光轴的方向上移动的特定被摄体的捕获图像的示图。
请注意,图49示出在开始于图48中示出的图像1662并结束于图像1663的曝光期间变焦成像操作中生成的捕获图像(图像1670)。另外,在图像1670中,使用实线指示的人(人1671)指示在曝光期间变焦成像操作开始时的特定被摄体,使用虚线指示的人(人1672)指示在曝光期间变焦成像操作结束时的特定被摄体。
如图像1670所示,使用根据本技术的第十二实施例的曝光期间变焦成像操作,即使当特定被摄体在正交于光轴的方向上移动时,也可以成像出其中特定被摄体在图像的中心附近中被成像的清晰的图像。
[成像装置的操作例子]
接下来,将参考附图描述根据本技术第十二实施例的成像装置100的操作。
图50是示出根据本技术第十二实施例的在成像过程中的构图决定处理(步骤S2910)的过程的例子的流程图。
请注意,图50是图11中示出的成像操作处理(步骤S910)的变型例,不同之处在于添加了分析特定被摄体在正交于光轴的方向上的移动的处理。因此,相同的附图标记被给予与图11中相同的过程,并且在这里省略对其的描述。
请注意,由于在图50中添加了分析特定被摄体在正交于光轴的方向上的移动的处理,因此将在这样的情况下提供描述:在分析特定被摄体在正交于光轴的方向上的移动是否存在的处理后,执行对特定被摄体的位置的分析的过程(图11的步骤S915)。
在步骤S913中执行了特定被摄体的检测后,分析特定被摄体的大小是否适合(步骤S917)。然后,当确定特定被摄体的大小适合(步骤S917)时,由曝光期间变焦设置单元330确定特定被摄体在正交于光轴的方向上的移动是否存在(步骤S2911)。请注意,在步骤S2911中,在预定时间内具有小到可能不会改变步骤S195的确定的移动的特定被摄体被确定为没有移动的特定被摄体。请注意,预定时间被设置为例如曝光时间,或者被认为是用户等待成像开始的时间的上限的时间。
然后,当确定特定被摄体在正交于光轴的方向上不存在移动(步骤S2911)时,处理前进到步骤S915,以决定特定被摄体的位置。然后,当确定该位置适合(S915)时,处理前进到步骤S919,以显示实时查看图像。
另一方面,当确定特定被摄体在正交于光轴的方向上存在移动(步骤S2911)时,曝光期间变焦设置单元330确定特定被摄体在正交于光轴的方向上的移动(移动速度和移动方向)是否适合于曝光期间变焦成像操作(步骤S2912)。换句话说,在步骤S2912中,分析该方向是否是在曝光期间变焦成像操作期间特定被摄体经过图像的中心附近的移动方向或者该速度是否是特定被摄体不经过图像的中心附近的移动速度。
然后,当确定特定被摄体在正交于光轴的方向上的移动不适合(步骤S2912)时,通知特定被摄体在正交于光轴的方向上的移动不适合的显示被显示(步骤S2913),然后处理返回到步骤S911。请注意,对于在步骤S2913中的显示(特定被摄体在正交于光轴的方向上的移动的警告显示),例如,在图46的图像1630中示出的图像被显示。
另一方面,当确定特定被摄体在正交于光轴的方向上的移动适合(步骤S2912)时,处理前进到步骤S919,以显示实时查看图像。
图51是示出根据本技术第十二实施例的在成像过程中的成像操作处理(步骤S2920)的过程的例子的流程图。
请注意,图51是图12中示出的成像操作处理(步骤S930)的变型例,不同之处在于添加了分析特定被摄体在正交于光轴的方向上的移动的处理。因此,相同的附图标记被给予与图12中相同的过程,并且在这里省略对其的描述。
请注意,在图51中,由于添加了分析特定被摄体在正交于光轴的方向上的移动的处理,因此将在这样的情况下提供描述:在分析特定被摄体在正交于光轴的方向上的移动是否存在的处理后,执行对特定被摄体的位置的分析的过程(图11的步骤S935)。另外,在图51中,对应于图11的步骤S942的过程被示出为用于确定特定被摄体在正交于光轴的方向上的移动速度是否适合的过程(步骤S2922)。
在步骤S933中执行了特定被摄体的检测后,执行对特定被摄体的大小是否适合的分析(步骤S939)。然后,当确定特定被摄体的大小适合(步骤S939)时,由曝光期间变焦设置单元330确定特定被摄体在正交于光轴的方向上的移动是否存在(步骤S2921)。请注意,由于步骤S2921与图50的步骤S2911相同,因此在这里省略对其的描述。
然后,当确定特定被摄体在正交于光轴的方向上不存在移动(步骤S2921)时,处理前进到步骤S935,以确定特定被摄体的位置。然后,当确定该位置适合(步骤S935)时,处理前进到步骤S2922,以确定特定被摄体在光轴方向上的移动速度是否适合。然后,当确定特定被摄体在光轴方向上的移动速度适合(步骤S2922)时,处理前进到步骤S944。另外,当确定特定被摄体在光轴方向上的移动速度不适合(步骤S2922)时,处理前进到步骤S943。
另一方面,当确定特定被摄体在正交于光轴的方向上的移动存在(步骤S2921)时,执行对在正交于光轴的方向上移动的特定被摄体进行成像(步骤S2930)的移动对象成像处理,然后,成像操作处理的过程结束。请注意,将参考图52描述该移动对象成像处理(步骤S2930)。
图52是示出根据本技术第十二实施例的在成像过程中的移动对象成像处理(步骤S2930)的过程的例子的流程图。
首先,基于特定被摄体的信息(被摄体信息),由曝光期间变焦设置单元330计算变焦量(步骤S2931)。然后,由曝光期间变焦设置单元330计算曝光期间变焦成像操作中的曝光时间和变焦速度(步骤S2932)。然后,曝光期间变焦设置单元330确定特定被摄体在正交于光轴的方向上的移动(移动速度和移动方向)是否适合于曝光期间变焦成像操作(步骤S2933)。在步骤S2933中,分析该方向是否是在曝光期间变焦成像操作期间特定被摄体经过图像的中心附近的移动方向或者该速度是否是特定被摄体不经过图像的中心附近的移动速度。
然后,当确定特定被摄体在正交于光轴的方向上的移动不适合(步骤S2933)时,用于通知特定被摄体在正交于光轴的方向上的移动不适合的显示被显示(步骤S2934),然后移动对象成像操作的过程结束。
另一方面,当确定特定被摄体在正交于光轴的方向上的移动适合(步骤S2933)时,由曝光期间变焦设置单元330计算特定被摄体移动到图像的中心附近时的期待的时刻(曝光结束时刻)(步骤S2935)。接着,基于计算的曝光结束时刻和曝光时间,曝光期间变焦设置单元330计算曝光开始时刻(步骤S2936)。然后,确定是否已经到达了曝光开始时刻(步骤S2937),并且当确定曝光开始时刻没有到达时,处理暂停,直到到达曝光开始时刻。
请注意,当确定曝光开始时刻到达时(步骤S2937),执行在曝光期间变焦成像操作期间的用于生成捕获图像的曝光期间变焦图像生成处理(步骤S2938)。然后,生成的捕获图像被记录在记录单元262上(步骤S2939),并且移动对象成像操作的过程结束。
以这种方式,根据本技术的第十二实施例,可以容易地针对在正交于光轴的方向上移动的特定被摄体执行曝光期间变焦成像操作。
以这种方式,根据本技术的实施例,通过基于包括在捕获图像中的特定被摄体来设置用于曝光期间变焦成像操作的详细控制,可以容易地执行曝光期间变焦成像操作。换句话说,由于用于曝光期间变焦成像操作的详细控制是基于特定被摄体设置的,因此可以降低曝光期间变焦成像操作的失败。另外,由于变焦量和变焦速度是根据特定被摄体来决定的,因此可以增强曝光期间变焦成像操作的效果(背景图像的流动)。
请注意,在本技术的第一实施例中,已经描述了在对曝光期间变焦成像操作进行检查前执行特定被摄体的移动速度的分析的例子,但是本技术并不限于此。例如,还可以配置为使得在实时查看操作的阶段中分析特定被摄体的移动速度,并且使用实时查看图像向用户显示移动速度是否适合于曝光期间变焦成像操作。
另外,在本技术的实施例中,已经描述了对由被摄体检测单元310检测的被摄体的位置、大小和移动速度进行分析的例子,但是本技术并不限于此。例如,其还可以被配置为使得由用户指定为聚焦目标的被摄体被设置为特定被摄体,并且对该特定被摄体的位置、大小和移动速度进行分析。
另外,在本技术的实施例中,已经描述了特定被摄体被识别为矩形形状并然后检测其大小和位置的例子,但是本技术并不限于此,并且其还可以被配置为使得在使用其轮廓计算各要素时其轮廓被使用。
另外,在本技术的实施例中,在基于计算的设置执行曝光期间变焦成像操作的中间的显示还没有被特别地描述。但是,由于根据本技术的实施例自动地设置变焦操作和曝光时间,因此可以更好地显示例如到成像结束的剩余时间(希望抑制发生抖动的时间)等。
请注意,上述的实施例示出了用于实现本技术的例子,并且,这些实施例中的主题与权利要求中的本发明的具体主题有对应关系。以相同的方式,权利要求中的本发明的具体主题与本技术的实施例中的主题有对应关系,这些主题被给予了与本发明的具体主题相同的名称。但是,本技术并不限于这些实施例,并且可以通过在不脱离本技术的精神的范围内对各实施例实施各种修改来实现。
另外,在上述实施例中描述的过程可以被理解为具有一系列过程的方法,并且可以被理解为用于使计算机执行这一系列过程的程序以及存储该程序的记录介质。作为该记录介质,可以使用例如硬盘、CD(压缩盘)、MD(迷你盘)、DVD(数字多功能盘)、存储器卡、Blu-ray Disc(商标)等。
另外,本技术也可以被配置为如下。
(1)一种信息处理装置,包括:
控制单元,基于作为曝光期间变焦成像操作的成像对象的特定被摄体来执行控制,以决定在曝光期间变焦成像操作中对变焦透镜的控制细节。
(2)根据(1)所述的信息处理装置,其中,控制单元基于由成像单元捕获的图像中的特定被摄体的位置和该图像中的特定被摄体的大小来决定控制细节。
(3)根据(1)所述的信息处理装置,其中,控制单元基于由成像单元捕获的图像中的特定位置与该图像中的特定被摄体的位置来决定控制细节。
(4)根据(3)所述的信息处理装置,其中,所述特定位置是图像的中心位置。
(5)根据(1)到(4)中的任何一个所述的信息处理装置,其中,控制单元基于由成像单元捕获的图像中的特定被摄体的位置和该图像中的特定被摄体的大小中的至少一个来确定是否执行曝光期间变焦成像操作。
(6)根据(5)所述的信息处理装置,其中,当确定不执行曝光期间变焦成像操作时,控制单元使得引导图像被显示在显示单元上,该引导图像用于校正图像中的特定图像的位置和图像中的特定被摄体的大小中的至少一个。
(7)根据(1)所述的信息处理装置,其中,控制单元基于特定被摄体在光轴方向上的移动速度来决定控制细节。
(8)根据(1)的信息处理设备,还包括:
获取特定被摄体的类型的信息的获取单元,
其中,控制单元基于获取的特定被摄体的类型来决定控制细节。
(9)根据(1)到(8)中的任何一个所述的信息处理装置,其中,控制单元基于决定的控制细节来确定在曝光期间变焦成像操作期间变焦透镜是否到达了变焦透镜的可操作范围的端部,并且,当确定变焦透镜到达了变焦透镜的可操作范围的端部时,控制单元使得用于校正变焦透镜的位置的引导画面被显示在显示单元上。
(10)根据(1)到(9)中的任何一个所述的信息处理装置,其中,控制单元基于决定的控制细节来确定在曝光期间变焦成像操作期间变焦透镜是否到达了变焦透镜的可操作范围的端部,并且,当确定变焦透镜到达了变焦透镜的可操作范围的端部时,控制单元校正变焦透镜的位置,然后使曝光期间变焦成像操作在校正后开始。
(11)根据(1)到(10)中的任何一个所述的信息处理装置,其中,控制单元基于控制细节被决定时的焦距和特定被摄体来决定控制细节。
(12)根据(1)到(9)中的任何一个所述的信息处理装置,其中,控制单元基于控制细节被决定时特定被摄体与信息处理装置之间的距离的信息来决定控制细节。
(13)根据(1)到(12)中的任何一个所述的信息处理装置,其中,控制单元将在曝光期间变焦成像操作中分别具有曝光时间与变焦时间之间的不同关系的多种操作模式中的一种操作模式决定为控制细节。
(14)根据(1)到(13)中的任何一个所述的信息处理装置,其中,控制单元基于特定被摄体在正交于光轴的方向上的移动来决定控制细节。
(15)根据(14)所述的信息处理装置,其中,控制单元针对特定被摄体执行移动预测,并且当移动预测的结果通过图像的中心位置或者位于离中心位置的预定距离内的位置且在曝光期间变焦成像操作的曝光时间结束之前不通过图像的中心位置或者位于离中心位置的预定距离内的位置时,确定曝光期间变焦成像操作要被执行。
(16)根据(14)或(15)中的任何一个所述的信息处理装置,其中,控制单元决定控制细节,其中,特定被摄体移动到中心位置或者位于离中心位置的预定距离内的位置的时刻被设置为曝光期间变焦成像操作的曝光时间的结束时刻,并且从结束时刻向前提早曝光期间变焦成像操作的曝光时间的时刻被设置为曝光时间的开始时刻。
(17)根据(1)到(16)中的任何一个所述的信息处理装置,其中,基于特定被摄体的大小,控制单元将在曝光期间变焦成像操作中的变焦透镜的驱动方向决定为放大方向和缩小方向之一。
(18)根据(1)到(16)中的任何一个所述的信息处理装置,其中,控制单元基于决定的控制细节来确定在曝光期间变焦成像操作中的特定被摄体的大小是否达到预定大小,并且,当确定特定被摄体的大小达到预定大小时,控制单元校正变焦透镜的位置,并且使得曝光期间变焦成像操作在校正后开始。
(19)一种信息处理方法,包括:
基于作为曝光期间变焦成像操作的成像对象的特定被摄体来执行控制,以决定在曝光期间变焦成像操作中对变焦透镜的控制细节。
(20)一种程序,其使得计算机基于作为曝光期间变焦成像操作的成像对象的特定被摄体来执行控制,以决定在曝光期间变焦成像操作中对变焦透镜的控制细节。
此外,本技术也可以被配置为如下。
(21)根据(5)所述的信息处理装置,其中,当特定被摄体的预定比例以上落入预定范围内(该预定范围以图像的中心位置或位于离中心位置的预定距离内的位置为中心)时,控制单元确定执行曝光期间变焦成像操作。
(22)根据(5)所述的信息处理装置,其中,当从图像的中心位置或位于离中心位置的预定距离内的位置到特定被摄体的位置的距离小于作为参考的阈值时,控制单元确定执行曝光期间变焦成像操作。
(23)根据(5)所述的信息处理装置,其中,当确定不执行曝光期间变焦成像操作时,即使接收到指示曝光期间变焦成像操作开始的指示操作,控制单元也停止由该指示操作指示的曝光期间变焦成像操作。
(24)根据(1)所述的图像处理装置,其中,控制单元决定作为控制细节的变焦量和变焦速度。
附图标记列表
100 成像装置
111 变焦透镜
112 聚焦透镜
113 光圈
114 快门
120 图像传感器
130 图像处理单元
142 存储器卡
143 图像显示单元
144 图像存储器
151 快门控制单元
152 光圈控制单元
153 聚焦控制单元
154 变焦控制单元
160 被摄体信息提取单元
165 曝光期间变焦设置单元
170 主控制单元
172 设置保持单元
173 发光单元
175 电池
176 电源控制单元
177 照相机抖动控制单元
178 操作单元
210 透镜单元
211 变焦透镜
213 聚焦透镜
220 图像传感器
225 快门
230 操作接收单元
240 控制单元
250 信号处理单元
261 记录控制单元
262 记录单元
271 显示控制单元
272 显示单元
280 驱动单元
285 透镜位置检测单元
290 曝光控制单元
310 被摄体检测单元
330 曝光期间变焦设置单元

Claims (20)

1.一种信息处理装置,包括:
控制单元,该控制单元基于作为曝光期间变焦成像操作的成像对象的特定被摄体来执行控制,以决定在曝光期间变焦成像操作中对变焦透镜的控制细节。
2.根据权利要求1所述的信息处理装置,其中,控制单元基于由成像单元捕获的图像中的特定被摄体的位置和该图像中的特定被摄体的大小来决定控制细节。
3.根据权利要求1所述的信息处理装置,其中,控制单元基于由成像单元捕获的图像中的特定位置与该图像中的特定被摄体的位置之间的关系来决定控制细节。
4.根据权利要求3所述的信息处理装置,其中,所述特定位置是图像的中心位置。
5.根据权利要求1所述的信息处理装置,其中,控制单元基于由成像单元捕获的图像中的特定被摄体的位置和该图像中的特定被摄体的大小中的至少一个来确定是否执行曝光期间变焦成像操作。
6.根据权利要求5所述的信息处理装置,其中,当确定不执行曝光期间变焦成像操作时,控制单元使得引导图像被显示在显示单元上,该引导图像用于校正图像中的特定图像的位置和图像中的特定被摄体的大小中的至少一个。
7.根据权利要求1所述的信息处理装置,其中,控制单元基于特定被摄体在光轴方向上的移动速度来决定控制细节。
8.根据权利要求1所述的信息处理装置,还包括:
获取特定被摄体的类型的信息的获取单元,
其中,控制单元基于获取的特定被摄体的类型来决定控制细节。
9.根据权利要求1所述的信息处理装置,其中,控制单元基于决定的控制细节来确定在曝光期间变焦成像操作期间变焦透镜是否到达了变焦透镜的可操作范围的端部,并且,当确定变焦透镜到达了变焦透镜的可操作范围的端部时,控制单元使得用于校正变焦透镜的位置的引导画面被显示在显示单元上。
10.根据权利要求1所述的信息处理装置,其中,控制单元基于决定的控制细节来确定在曝光期间变焦成像操作期间变焦透镜是否到达了变焦透镜的可操作范围的端部,并且,当确定变焦透镜到达了变焦透镜的可操作范围的端部时,控制单元校正变焦透镜的位置,然后使曝光期间变焦成像操作在校正后开始。
11.根据权利要求1所述的信息处理装置,其中,控制单元基于在控制细节被决定时的焦距和特定被摄体来决定控制细节。
12.根据权利要求1所述的信息处理装置,其中,控制单元基于在控制细节被决定时特定被摄体与信息处理装置之间的距离的信息来决定控制细节。
13.根据权利要求1所述的信息处理装置,其中,控制单元将在曝光期间变焦成像操作中分别具有曝光时间与变焦时间之间的不同关系的多种操作模式中的一种操作模式决定为控制细节。
14.根据权利要求1所述的信息处理装置,其中,控制单元基于特定被摄体在正交于光轴的方向上的移动来决定控制细节。
15.根据权利要求14所述的信息处理装置,其中,控制单元针对特定被摄体执行移动预测,并且当移动预测的结果通过图像的中心位置或者位于离中心位置的预定距离内的位置且在曝光期间变焦成像操作的曝光时间结束之前不通过图像的中心位置或者位于离中心位置的预定距离内的位置时,确定曝光期间变焦成像操作要被执行。
16.根据权利要求14所述的信息处理装置,其中,控制单元决定控制细节,其中,特定被摄体移动到中心位置或者位于离中心位置的预定距离内的位置的时刻被设置为曝光期间变焦成像操作的曝光时间的结束时刻,并且从结束时刻向前提早曝光期间变焦成像操作的曝光时间的时刻被设置为曝光时间的开始时刻。
17.根据权利要求1所述的信息处理装置,其中,基于特定被摄体的大小,控制单元将在曝光期间变焦成像操作中的变焦透镜的驱动方向决定为放大方向和缩小方向之一。
18.根据权利要求1所述的信息处理装置,其中,控制单元基于决定的控制细节来确定在曝光期间变焦成像操作中的特定被摄体的大小是否达到预定大小,并且,当确定特定被摄体的大小达到预定大小时,控制单元校正变焦透镜的位置,并且使得曝光期间变焦成像操作在校正后开始。
19.一种信息处理方法,包括:
基于作为曝光期间变焦成像操作的成像对象的特定被摄体来执行控制,以决定在曝光期间变焦成像操作中对变焦透镜的控制细节。
20.一种程序,其使得计算机基于作为曝光期间变焦成像操作的成像对象的特定被摄体来执行控制,以决定在曝光期间变焦成像操作中对变焦透镜的控制细节。
CN2012800025239A 2011-06-28 2012-05-16 信息处理装置、信息处理方法和程序 Pending CN103080829A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2011-143208 2011-06-28
JP2011143208 2011-06-28
JP2011252913A JP2013034167A (ja) 2011-06-28 2011-11-18 情報処理装置、情報処理方法およびプログラム
JP2011-252913 2011-11-18
PCT/JP2012/062463 WO2013001928A1 (ja) 2011-06-28 2012-05-16 情報処理装置、情報処理方法およびプログラム

Publications (1)

Publication Number Publication Date
CN103080829A true CN103080829A (zh) 2013-05-01

Family

ID=47423831

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012800025239A Pending CN103080829A (zh) 2011-06-28 2012-05-16 信息处理装置、信息处理方法和程序

Country Status (8)

Country Link
US (3) US9363442B2 (zh)
EP (1) EP2597514A1 (zh)
JP (1) JP2013034167A (zh)
KR (1) KR20140037784A (zh)
CN (1) CN103080829A (zh)
IN (1) IN2013MN00250A (zh)
TW (1) TW201300931A (zh)
WO (1) WO2013001928A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108156380A (zh) * 2017-12-28 2018-06-12 广东欧珀移动通信有限公司 图像获取方法、装置、存储介质及电子设备
CN110800286A (zh) * 2019-01-16 2020-02-14 深圳市大疆创新科技有限公司 一种拍摄方法及相关设备
CN111107263A (zh) * 2018-10-26 2020-05-05 佳能株式会社 摄像设备和监视系统
CN111567032A (zh) * 2018-06-12 2020-08-21 深圳市大疆创新科技有限公司 确定装置、移动体、确定方法以及程序
CN111771373A (zh) * 2018-03-19 2020-10-13 富士胶片株式会社 摄像装置、曝光期间变焦摄影方法、程序及记录介质

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5791448B2 (ja) * 2011-09-28 2015-10-07 京セラ株式会社 カメラ装置および携帯端末
JP6107354B2 (ja) * 2013-04-15 2017-04-05 オムロン株式会社 画像表示装置、画像表示装置の制御方法、画像表示プログラム、および、これを記録したコンピュータ読み取り可能な記録媒体
JP6312460B2 (ja) * 2014-02-18 2018-04-18 キヤノン株式会社 撮像装置、撮像装置の制御方法、プログラム、および、記憶媒体
US10291915B2 (en) * 2014-03-06 2019-05-14 Samsung Electronics Co., Ltd. Video decoding method and apparatus and video encoding method and apparatus
JP6436761B2 (ja) * 2014-12-24 2018-12-12 キヤノン株式会社 ズーム制御装置、撮像装置、ズーム制御装置の制御方法、及びズーム制御装置の制御プログラム
TWI533240B (zh) * 2014-12-31 2016-05-11 拓邁科技股份有限公司 資料顯示方法及系統,及相關電腦程式產品
JP6516544B2 (ja) * 2015-04-22 2019-05-22 キヤノン株式会社 制御装置、光学機器、撮像装置および制御方法
US9628720B2 (en) 2015-08-12 2017-04-18 Qualcomm Incorporated System and method to control an imaging process
JP6574645B2 (ja) * 2015-08-28 2019-09-11 キヤノン株式会社 撮像装置を制御する制御装置、撮像装置の制御方法、及びプログラム
JP6613740B2 (ja) * 2015-09-09 2019-12-04 富士通コネクテッドテクノロジーズ株式会社 表示制御装置、表示制御方法および表示制御プログラム
JP7040043B2 (ja) * 2018-01-25 2022-03-23 セイコーエプソン株式会社 写真処理装置、写真データの生産方法および写真処理プログラム
JP2019168886A (ja) * 2018-03-23 2019-10-03 カシオ計算機株式会社 検出体領域検出装置、撮像装置、飛行装置、検出体領域検出方法、撮像方法及びプログラム
US10999522B2 (en) * 2018-05-14 2021-05-04 Canon Kabushiki Kaisha Control apparatus, control method, and computer-readable storage medium
CN111586283B (zh) * 2019-02-19 2022-09-27 北京小米移动软件有限公司 变焦方法及装置
JP2021180379A (ja) * 2020-05-12 2021-11-18 キヤノン株式会社 撮像装置および撮像装置の制御方法
WO2023189366A1 (ja) * 2022-03-30 2023-10-05 ソニーグループ株式会社 撮像装置、撮像制御方法、プログラム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06201971A (ja) * 1992-10-19 1994-07-22 Asahi Optical Co Ltd 電動ズーム機能を有するカメラ
US6606117B1 (en) * 1997-09-15 2003-08-12 Canon Kabushiki Kaisha Content information gathering apparatus system and method
JP2006091252A (ja) * 2004-09-22 2006-04-06 Canon Software Inc 撮像装置及び撮像方法およびプログラム
CN1812492A (zh) * 2004-03-31 2006-08-02 富士胶片株式会社 数字相机、图像回放装置、面部图像显示装置及其控制方法
CN101166240A (zh) * 2006-10-19 2008-04-23 索尼株式会社 图像处理装置、成像装置、图像处理方法
JP2011095501A (ja) * 2009-10-29 2011-05-12 Canon Inc 撮像装置

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5134432A (en) * 1990-02-14 1992-07-28 Asahi Kogaku Kogyo Kabushiki Kaisha Camera with mid-exposure zooming function
US5305049A (en) * 1990-08-17 1994-04-19 Olympus Optical Co., Ltd. Camera having in-exposure zooming mechanism
JPH06130445A (ja) 1992-10-19 1994-05-13 Asahi Optical Co Ltd 電動ズーム機能を有するカメラ
GB2271646B (en) 1992-10-19 1996-12-04 Asahi Optical Co Ltd An optical camera and a method of conducting a focusing operation therein
US20050041111A1 (en) 2003-07-31 2005-02-24 Miki Matsuoka Frame adjustment device and image-taking device and printing device
US20060098729A1 (en) * 2004-11-09 2006-05-11 Lien-Chieh Shen Smart image processing CCTV camera device and method for operating same
JP4572815B2 (ja) * 2005-11-18 2010-11-04 富士フイルム株式会社 撮像装置及び撮像方法
JP4655054B2 (ja) * 2007-02-26 2011-03-23 富士フイルム株式会社 撮像装置
JP5028574B2 (ja) * 2007-08-10 2012-09-19 株式会社メガチップス デジタルカメラシステム
JP5040734B2 (ja) 2008-03-05 2012-10-03 ソニー株式会社 画像処理装置、画像記録方法およびプログラム
JP4626692B2 (ja) 2008-09-12 2011-02-09 ソニー株式会社 物体検出装置、撮像装置、物体検出方法およびプログラム
JP5322665B2 (ja) * 2009-01-14 2013-10-23 キヤノン株式会社 撮像装置及び撮像装置の制御方法
JP5254822B2 (ja) * 2009-01-26 2013-08-07 キヤノン株式会社 撮像装置及びその制御方法
JP5316083B2 (ja) 2009-02-27 2013-10-16 株式会社ニコン カメラ
JP5538865B2 (ja) * 2009-12-21 2014-07-02 キヤノン株式会社 撮像装置およびその制御方法
JP4873762B2 (ja) * 2010-04-06 2012-02-08 キヤノン株式会社 撮像装置及び撮像装置の制御方法
JP5620142B2 (ja) * 2010-04-28 2014-11-05 オリンパスイメージング株式会社 撮像装置および撮像方法
AU2010201740B2 (en) * 2010-04-30 2013-03-07 Canon Kabushiki Kaisha Method, apparatus and system for performing a zoom operation
JP4806470B2 (ja) * 2011-01-12 2011-11-02 三洋電機株式会社 撮像装置
TW201251445A (en) * 2011-06-10 2012-12-16 Altek Corp System and method of driving shutter by an object moving tendency
KR101811717B1 (ko) * 2011-11-14 2018-01-25 삼성전자주식회사 줌 제어 방법 및 장치와, 디지털 촬영 장치

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06201971A (ja) * 1992-10-19 1994-07-22 Asahi Optical Co Ltd 電動ズーム機能を有するカメラ
US6606117B1 (en) * 1997-09-15 2003-08-12 Canon Kabushiki Kaisha Content information gathering apparatus system and method
CN1812492A (zh) * 2004-03-31 2006-08-02 富士胶片株式会社 数字相机、图像回放装置、面部图像显示装置及其控制方法
JP2006091252A (ja) * 2004-09-22 2006-04-06 Canon Software Inc 撮像装置及び撮像方法およびプログラム
CN101166240A (zh) * 2006-10-19 2008-04-23 索尼株式会社 图像处理装置、成像装置、图像处理方法
JP2011095501A (ja) * 2009-10-29 2011-05-12 Canon Inc 撮像装置

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108156380A (zh) * 2017-12-28 2018-06-12 广东欧珀移动通信有限公司 图像获取方法、装置、存储介质及电子设备
CN111771373A (zh) * 2018-03-19 2020-10-13 富士胶片株式会社 摄像装置、曝光期间变焦摄影方法、程序及记录介质
CN111771373B (zh) * 2018-03-19 2021-10-15 富士胶片株式会社 摄像装置、曝光期间变焦摄影方法及记录介质
US11483488B2 (en) 2018-03-19 2022-10-25 Fujifilm Corporation Imaging apparatus, inter-exposure zoom imaging method, program, and recording medium
CN111567032A (zh) * 2018-06-12 2020-08-21 深圳市大疆创新科技有限公司 确定装置、移动体、确定方法以及程序
CN111567032B (zh) * 2018-06-12 2021-08-24 深圳市大疆创新科技有限公司 确定装置、移动体、确定方法以及计算机可读记录介质
CN111107263A (zh) * 2018-10-26 2020-05-05 佳能株式会社 摄像设备和监视系统
CN111107263B (zh) * 2018-10-26 2022-04-19 佳能株式会社 摄像设备和监视系统
US11399126B2 (en) 2018-10-26 2022-07-26 Canon Kabushiki Kaisha Imaging apparatus and monitoring system for performing a focus control and an angle control
CN110800286A (zh) * 2019-01-16 2020-02-14 深圳市大疆创新科技有限公司 一种拍摄方法及相关设备
CN110800286B (zh) * 2019-01-16 2022-05-31 深圳市大疆创新科技有限公司 一种拍摄方法及相关设备

Also Published As

Publication number Publication date
EP2597514A1 (en) 2013-05-29
US20190007624A1 (en) 2019-01-03
JP2013034167A (ja) 2013-02-14
KR20140037784A (ko) 2014-03-27
WO2013001928A1 (ja) 2013-01-03
TW201300931A (zh) 2013-01-01
US9363442B2 (en) 2016-06-07
US20160261805A1 (en) 2016-09-08
US20130120618A1 (en) 2013-05-16
IN2013MN00250A (zh) 2015-05-29
US10567664B2 (en) 2020-02-18

Similar Documents

Publication Publication Date Title
CN103080829A (zh) 信息处理装置、信息处理方法和程序
EP2791899B1 (en) Method and apparatus for image capture targeting
US8379103B2 (en) Digital camera that uses object detection information at the time of shooting for processing image data after acquisition of an image
US8446517B2 (en) Imaging apparatus and method
US9191569B2 (en) Imaging apparatus having object detection function and method for controlling imaging apparatus
US10382672B2 (en) Image capturing apparatus and method
US20130114938A1 (en) Image-capturing apparatus
CN101924880B (zh) 具有自动对焦功能的拍摄装置
CN103179345A (zh) 数字拍摄设备及其控制方法
KR20150078275A (ko) 움직이는 피사체 촬영 장치 및 방법
KR20110004083A (ko) 디지털 영상 처리 장치 및 방법
US20150381889A1 (en) Image pickup apparatus having plurality of image pickup units, control method therefor, and storage medium
JP2009075168A (ja) 撮影装置、その制御方法およびプログラム
US9723213B2 (en) Image processing apparatus, control method, and recording medium
US20180146142A1 (en) Imaging apparatus and control method
US9661204B2 (en) Image capturing apparatus and control method thereof
JP2008301161A (ja) 画像処理装置、デジタルカメラ、及び画像処理方法
JP5293769B2 (ja) 撮像装置及びそのプログラム
JP2006039254A (ja) カメラ
WO2013084780A1 (ja) 撮像装置
JP5573311B2 (ja) カメラ
JP2009145622A (ja) 電子カメラ
JP2014158221A (ja) 撮像装置
JP2012022334A (ja) 撮像装置、その制御方法およびプログラム
JP2015171121A (ja) 撮像装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130501