CN105745915A - 图像拍摄装置、方法和程序 - Google Patents

图像拍摄装置、方法和程序 Download PDF

Info

Publication number
CN105745915A
CN105745915A CN201480046802.4A CN201480046802A CN105745915A CN 105745915 A CN105745915 A CN 105745915A CN 201480046802 A CN201480046802 A CN 201480046802A CN 105745915 A CN105745915 A CN 105745915A
Authority
CN
China
Prior art keywords
zoom
image
capturing device
angular velocity
image capturing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480046802.4A
Other languages
English (en)
Other versions
CN105745915B (zh
Inventor
B·巴里托马帕
渡边宽之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105745915A publication Critical patent/CN105745915A/zh
Application granted granted Critical
Publication of CN105745915B publication Critical patent/CN105745915B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection
    • H04N23/6812Motion detection based on additional sensors, e.g. acceleration sensors
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/02Mountings, adjusting means, or light-tight connections, for optical elements for lenses
    • G02B7/04Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification
    • G02B7/08Mountings, adjusting means, or light-tight connections, for optical elements for lenses with mechanism for focusing or varying magnification adapted to co-operate with a remote control mechanism
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B5/00Adjustment of optical system relative to image or object surface other than for focusing
    • G03B5/06Swinging lens about normal to the optical axis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2205/00Adjustment of optical system relative to image or object surface other than for focusing
    • G03B2205/0046Movement of one or more optical elements for zooming
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2217/00Details of cameras or camera bodies; Accessories therefor
    • G03B2217/005Blur detection

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Adjustment Of Camera Lenses (AREA)

Abstract

本技术涉及图像拍摄装置、方法和程序,用于执行适当的变焦控制。角速度检测单元检测图像拍摄装置的移动的角速度。操作确定单元基于多个不同时刻的角速度确定用户的操作状态。变焦控制单元基于所述操作状态执行变焦控制。如上所述,通过使用多个不同时刻的角速度,能够更详细地识别操作状态并且根据用户的操作状态执行适当的变焦控制。本技术可以应用到数码相机、数字静态相机、多功能移动电话等。

Description

图像拍摄装置、方法和程序
技术领域
本技术涉及图像拍摄装置、方法和程序。特别地,本技术涉及用于执行适当的变焦控制的图像拍摄装置、方法和程序。
背景技术
相关技术提出了用于在图像拍摄装置中检测用户的摇摄操作并且按照检测结果执行变焦控制的技术(例如,参见专利文件1)。
在图像拍摄装置中,基于来自角速度传感器的输出,检测摇摄操作。如果检测到摇摄操作,则停止图像稳定化处理,并且从角速度位移确定摇摄速度。基于所得的摇摄速度和变焦位置信息,在缩小方向上执行变焦控制。
通过该处理,如果用户在图像拍摄装置中执行摇摄操作,则目标被摄体因缩小而容易落入屏幕内,从而改进了图像拍摄装置的可用性(usability)。
专利文件1:日本专利申请特许公开No.2006-33513
发明内容
本发明要解决的问题
然而,在上述技术中,变焦倍数只是变成由确定的摇摄速度的特定值(veryvalue)(即,角速度的特定值)确定的倍数。因此,不能够进行适当的变焦控制。
换句话讲,当执行针对瞬时角速度确定的变焦控制时,并不考虑进行的是哪种摇摄操作。
本技术是鉴于寻求适当的变焦控制的情形而提出的。
解决问题的手段
根据本技术的实施例的一种图像拍摄装置包括:角速度检测单元,其被构造成检测其自身的移动的角速度;操作确定单元,其被构造成基于多个不同时刻的角速度确定用户的操作状态;以及变焦控制单元,其被构造成基于所述操作状态执行变焦控制。
变焦控制单元可以执行变焦控制,使得在角速度随时间而增大的操作状态的情况下,变焦倍数减小。
变焦控制单元可以执行变焦控制,使得在角速度随时间而减小的操作状态的情况下,变焦倍数增大。
变焦控制单元可以执行变焦控制,使得如果操作状态从角速度随时间而减小的状态变成角速度随时间而增大的状态,则变焦倍数保持恒定。
变焦控制单元可以使得在执行特定变焦控制的情况下,操作确定单元难以确定操作状态为预定操作状态。
操作确定单元可以基于多个不同时刻的角速度得到时间和角速度的关系式并且将得到的关系式的系数与针对多个操作状态中的每个预先确定的关系式的系数可以具有的值的范围进行比较,从而确定操作状态。
操作确定单元可以通过得到多个不同时刻的角速度和针对多个操作状态中的每个预先确定的多个不同时刻的角速度之间的距离来确定操作状态。
操作确定单元可以基于多个不同时刻的角速度估计未来时刻的角速度,并且基于通过估计得到的角速度和多个不同时刻的角速度来确定操作状态。
图像拍摄装置还可以包括:变焦处理单元,其被构造成在变焦控制单元的控制下切割拍摄图像的部分区域,以生成变焦图像。
图像拍摄装置还可以包括:显示控制单元,其被构造成排列拍摄图像和变焦图像以进行显示。
显示控制单元可以在图像中切割了变焦图像的区域上显示框。
图像拍摄装置还可以包括:显示控制单元,其被构造成排列通过组合在多个不同时刻拍摄的图像而得到的图像和变焦图像以进行显示。
显示控制单元可以在通过组合而得到的图像中切割了变焦图像的区域上显示框。
图像拍摄装置还可以包括:物体检测单元,其被构造成从拍摄图像中检测物体,并且变焦控制单元可以被构造成执行变焦控制,使得在图像中心附近检测到物体的情况下,保持物体被放大显示的状态。
图像拍摄装置还可以包括:物体检测单元,其被构造成从拍摄图像中检测物体,并且变焦控制单元可被构造成基于物体的检测结果,确定变焦图像被从图像中切割的位置。
图像拍摄装置还可以包括:物体检测单元,其被构造成从拍摄图像中检测物体;以及校正单元,其被构造成根据物体的检测结果,使收集从被摄体入射的光的透镜倾斜。
根据本技术的实施例的一种图像拍摄方法或程序包括以下步骤:检测图像拍摄装置的移动的角速度;基于多个不同时刻的角速度,确定操作所述图像拍摄装置的用户的操作状态;以及基于操作状态执行变焦控制。
根据本技术的实施例,检测图像拍摄装置的移动的角速度;基于多个不同时刻的角速度,确定操作所述图像拍摄装置的用户的操作状态;以及基于操作状态执行变焦控制。
本发明的效果
根据本技术的实施例,可以执行适当的变焦控制。
本文中描述的效果不必受限制,并且可以是本文中描述的效果中的任一种。
附图说明
[图1]示出图像拍摄装置的构造示例的图。
[图2]示出变焦控制的图。
[图3]示出变焦控制的图。
[图4]示出变焦控制的图。
[图5]示出用户的操作状态的图。
[图6]示出变焦状态的图。
[图7]示出图像拍摄处理的流程图。
[图8]示出操作状态的确定的图。
[图9]示出操作状态的确定的图。
[图10]示出操作状态的确定的图。
[图11]示出变焦状态确定处理的流程图。
[图12]示出图像拍摄处理的流程图。
[图13]示出图像拍摄装置的构造示例的图。
[图14]示出图像拍摄处理的流程图。
[图15]示出图像拍摄处理的流程图。
[图16]示出图像拍摄装置的构造示例的图。
[图17]示出图像拍摄处理的流程图。
[图18]示出图像的显示示例的图。
[图19]示出图像拍摄处理的流程图。
[图20]示出图像的显示示例的图。
[图21]示出图像拍摄装置的构造示例的图。
[图22]示出图像拍摄处理的流程图。
[图23]示出调节处理的流程图。
[图24]示出图像拍摄处理的流程图。
[图25]示出变焦位置确定处理的流程图。
[图26]示出图像拍摄装置的构造示例的图。
[图27]示出图像拍摄处理的流程图。
[图28]示出倾斜的角确定处理的流程图。
[图29]示出计算机的构造示例的图。
具体实施方式
下文中,将参照附图描述应用本技术的实施例。
<第一实施例>
<图像拍摄装置的构造示例>
图1是示出应用本技术的图像拍摄装置的构造示例的图。
图像拍摄装置11是例如数码相机、数字静态相机、多功能移动电话等。
图像拍摄装置11包括图像拍摄透镜21、图像拍摄传感器22、模拟信号处理单元23、A/D(模拟/数字)转换器24、控制单元25、快门控制单元26、调焦单元27、光圈单元28、变焦单元29、显示单元30、记录单元31、操作单元32、存储器33和角速度传感器34。
图像拍摄透镜21包括多个透镜、机械开关等,并且收集从被摄体入射的光,以在图像拍摄传感器22的接收表面上形成光的图像。图像拍摄传感器22包括例如CCD(电荷耦合器件)。图像拍摄传感器22接收从图像拍摄透镜21进入的光,对光执行光电转换,并且将所得的电信号供应到模拟信号处理单元23。
模拟信号处理单元23对图像拍摄传感器22供应的电信号执行各种类型的处理(诸如,降噪),并且将它供应到A/D转换器24。A/D转换器24对模拟信号处理单元23供应的电信号执行A/D转换,以将电信号从模拟信号转换成数字信号,并且将它供应到控制单元25。从A/D转换器24输出的电信号被用作图像数据。应该注意,更详细地,数字信号处理单元(未示出)对从A/D转换器24输出的图像数据执行伽玛校正和白平衡校正,并且所得的图像数据被供应到控制单元25。
控制单元25是全面控制图像拍摄装置的整体操作的控制电路。例如,控制单元25将A/D转换器24供应的图像数据供应到显示单元30以致使显示单元30显示图像,并且将图像数据供应到记录单元31以致使记录单元31记录它。
控制单元25包括操作确定单元41、变焦控制单元42和显示控制单元43。例如,可以通过执行程序的控制单元25来实现操作确定单元41、变焦控制单元42和显示控制单元43。
操作确定单元41基于角速度传感器34供应的多个不同时刻的角速度来确定用户关于图像拍摄装置11的操作(诸如,恒定速度的摇摄操作)。变焦控制单元42根据从操作确定单元41得到的确定结果确定当拍摄图像时的变焦倍数。此外,变焦控制单元42通过控制变焦单元29执行图像拍摄透镜21的变焦控制,使得图像拍摄透镜21中的变焦倍数是确定的变焦倍数或者通过用户关于操作单元32的操作而确定的变焦倍数。显示控制单元43控制显示单元30中的图像显示。
快门控制单元26在控制单元25的控制下对图像拍摄透镜21执行快门控制。调焦单元27在控制单元25的控制下驱动图像拍摄透镜21的透镜,以执行调焦控制。
例如,图像拍摄透镜21上执行的调焦控制是基于图像拍摄传感器22中设置的调焦传感器或者图像拍摄装置11中设置的调焦传感器(未示出)的输出。具体地讲,控制单元25基于调焦传感器供应的信号确定调焦位置,以控制调焦单元27。
光圈单元28在控制单元25的控制下驱动图像拍摄透镜21的光圈。变焦单元29在变焦控制单元42的控制下将形成图像拍摄透镜21的透镜在光轴方向上移动,使得以指定的变焦倍数拍摄图像。
显示单元30包括例如液晶显示元件,并且基于显示控制单元43供应的图像数据来显示图像。记录单元31是例如包括IC存储卡、内部存储器等的数据记录介质,并且记录各种数据(诸如,控制单元25供应的静止图像或移动图像的图像数据以及图像的元数据)。
操作单元32包括触摸板、按钮、开关、拨盘、变焦按钮等,并且根据用户的操作向控制单元25供应信号。
存储器33是例如包括RAM(随机存取存储器)的存储器,并且暂时存储控制单元25供应的数据。具体地讲,存储器33被用作在控制单元中被处理的数据的暂时存储区域。
角速度传感器34检测图像拍摄装置11的角速度,并且将它供应到控制单元25。角速度传感器34检测到的角速度用于图像稳定化、图像拍摄透镜21的变焦控制等。应该注意,角速度传感器34不仅检测代表图像拍摄装置11在水平方向上的移动的角速度,而且检测代表图像拍摄装置11在垂直方向上的移动的角速度。
<关于变焦控制>
接下来,将描述图像拍摄装置11的变焦控制。
例如,如图2中所示,在用户将图像拍摄装置11在水平方向上移动(即,相对于图像拍摄装置11执行摇摄操作)的同时拍摄图像的情况下,图像拍摄装置11根据摇摄速度的变化来改变变焦倍数。
应该注意,在图2中,曲线L11代表角速度传感器34检测到的各时刻t处的水平方向上的角速度ω,并且曲线L12代表各时刻t处的图像拍摄透镜21的变焦倍数Z。另外,在图2中,垂直线代表角速度或变焦倍数而水平线代表时间。
在这个示例中,可以看出用户以高速开始摇摄操作,因为角速度ω在间隔A11中随时间而快速增大,如曲线L11所示。在用户以这种方式以高速执行摇摄操作的情况下,图像拍摄装置11如线L12所示地减小变焦倍数Z,以使得容易掌握整个场景。具体地讲,图像拍摄装置11将变焦倍数变成广角侧,以缩小被摄体。
另外,图像拍摄装置11在间隔A11之后的间隔中保持变焦倍数Z的值是恒定的,其中,角速度ω是恒定的(即,在用户以恒定速度执行摇摄操作的情况下)。
此外,可以看出用户正尝试以高速停止摇摄操作,因为角速度ω在间隔B11中随时间而快速减小,如曲线L11所示。通常,当发现新被摄体时,用户停止摇摄操作。依据上文,图像拍摄装置11随时间而增大变焦倍数Z,以使得在如线L12所示地用户以高速停止摇摄操作的情况下容易观看待观察的新被摄体。具体地讲,图像拍摄装置11将变焦倍数变成远焦侧,以放大被摄体。
如上所述,根据图像拍摄装置11,能够使用户切实感觉到好像图像速度缓慢,以使在用户以高速执行摇摄操作的同时通过缩小用户容易观看被摄体。另外,当发现新被摄体时,能够通过增大变焦倍数放大感兴趣的被摄体,使用户容易观看它,而不致使用户执行变焦操作。
另外,例如,在用户在执行摇摄操作的同时拍摄图像以及用户缓慢停止摇摄操作的情况下,如图3中所示,图像拍摄装置11根据摇摄速度的改变,缓慢改变变焦倍数。
应该注意,在图3中,曲线L21代表角速度传感器34检测到的各时刻t处的水平方向上的角速度ω,并且线L22代表各时刻t处的图像拍摄透镜21的变焦倍数Z。另外,在图3中,垂直线代表角速度或变焦倍数而水平线代表时间。
在这个示例中,可以看出用户正尝试以缓慢速度停止摇摄操作,因为角速度ω在间隔C11中随时间而减小,如线L21所示。依据上文,图像拍摄装置11增大变焦倍数Z,以便匹配用户停止摇摄操作所用的速度,如线L22所示。
在用户以这种方式缓慢停止摇摄操作的情况下,图像拍摄装置11可以通过增大变焦倍数以便匹配速度,使用户容易观看感兴趣的被摄体。
此外,例如,在如图4中所示地因为用户在执行摇摄操作的同时过远地移动图像拍摄装置11而造成用户将图像拍摄装置11在与图像拍摄装置11已经被移动的方向相反的方向上移动一点的情况下,通过防止变焦倍数被改变,能够使用户容易地观看感兴趣的被摄体。
应该注意,在图4中,曲线L31代表角速度传感器34检测到的各时刻t处的水平方向上的角速度ω,并且线L32代表各时刻t处的图像拍摄透镜21的变焦倍数Z。另外,在图4中,垂直线代表角速度或变焦倍数而水平线代表时间。
在这个示例中,可以看出用户正尝试以高速停止摇摄操作,因为角速度ω在间隔D11中随时间而快速减小,如线L31所示。因此,图像拍摄装置11如线L32所示地在间隔D11中随时间而增大变焦倍数Z,以使用户容易观看待观察的新被摄体。
另外,在间隔D11之后的间隔D12中,角速度ω的值是负数。角速度ω随时间而减小。然后,角速度ω随时间而增大并且停止摇摄操作。在间隔D12中,图像拍摄装置11固定变焦倍数Z,以使其具有恒定值,而不改变。
在图像拍摄装置11的移动方向被颠倒的情况下,即,在角速度ω的符号由正变为负并且随后在用户以这种方式进行摇摄操作期间角速度ω的绝对值开始减小的情况下,被视为是过调(overshooting),并且停止对新被摄体的放大操作。
具体地讲,高度可能地是,在间隔D11和间隔D12中,用户发现新被摄体并且已经尝试停止摇摄操作,但是用户已经在因为将图像拍摄装置11移动过远而将图像拍摄装置11在与其已经被移动的方向相反的方向上移动之后停止图像拍摄装置11。依据上文,图像拍摄装置11停止用于放大新被摄体的放大操作,以使得容易发现因超限(overrun)而偏离屏幕中心的被摄体。
如上所述,根据图像拍摄装置11,能够通过基于角速度ω的改变确定变焦倍数来执行适当的变焦控制。应该注意,下面,将描述执行将图像拍摄装置11在水平方向上移动的摇摄操作并且根据摇摄操作改变变焦倍数的示例。然而,不用说,变焦倍数可以根据图像拍摄装置11在垂直方向或其它方向上的移动而被改变。
接下来,将描述实现上述变焦控制的方法的具体示例。
例如,假设用户如图5中所示地执行摇摄操作。应该注意,在图5中,曲线L41代表角速度传感器34检测到的各时刻t处的角速度ω。另外,在图5中,垂直线代表角速度而水平线代表时间。
在这个示例中,用户在图像拍摄装置11不移动而停止的状态下开始摇摄操作,并且然后停止摇摄操作,如曲线L41所示的。
图像拍摄装置11基于角速度ω的改变,将用户的摇摄操作的当前状态归类为由角速度ω随时间的改变所指定的操作状态a至操作状态d中的任一种。
例如,在像间隔T11和间隔T15中的状态一样不执行摇摄操作并且图像拍摄装置11是静态的情况下,即,在角速度ω小并且保持几乎不变的情况下,摇摄操作的状态是操作状态a。
另外,在像间隔T12中的状态一样开始摇摄操作并且开始图像拍摄装置11的加速的情况下,即,在角速度ω随时间而增大的情况下,摇摄操作的状态是操作状态b。在像间隔T13中的状态一样执行摇摄操作的情况下,即,在角速度ω具有稍大的值并且保持几乎不变的情况下,摇摄操作的状态是操作状态c。
此外,在像间隔T14中的状态一样开始图像拍摄装置11的减速以停止摇摄操作的情况下,即,在角速度ω随时间而减小的情况下,摇摄操作的状态是操作状态d。
图像拍摄装置11基于由角速度传感器34检测到的多个顺序时刻的角速度ω确定当前操作状态,并且基于确定的操作状态从一些之前确定的变焦状态中选择一种变焦状态。然后,图像拍摄装置11基于所选择的变焦状态来改变图像拍摄透镜21的变焦倍数。
例如,作为变焦状态,预先确定变焦状态Z(1)至变焦状态Z(4)。在每种变焦状态下,如图6中所示地控制变焦倍数。应该注意,在图6中,曲线L51代表各时刻t处的变焦倍数Z。另外,在图6中,垂直线代表变焦倍数Z而水平线代表时间。
在这个示例中,在变焦状态Z(1)中的变焦控制下,变焦倍数Z被设置成Zmin。这里,变焦倍数Zmin是当执行自动变焦控制时图像拍摄装置11可以具有的变焦倍数Z的最小值。应该注意,变焦倍数Zmin不一定是图像拍摄装置11可具有的变焦倍数Z的最小值,即,广角端的变焦倍数。
在变焦状态是变焦状态Z(1)的情况下,即,在以恒定速度执行摇摄操作并且操作状态是操作状态c的情况下,例如,变焦倍数保持为恒定的变焦倍数Zmin
另外,在变焦状态Z(2)中的控制下,变焦倍数Z以恒定速度随时间从Zmin增大至Zmax。这里,变焦倍数Zmax是当执行自动变焦控制时图像拍摄装置11可以具有的变焦倍数Z的最大值。应该注意,变焦倍数Zmax不一定是图像拍摄透镜21可以具有的变焦倍数Z的最大值,即,远焦端的变焦倍数。
在变焦状态是变焦状态Z(2)的情况下,即,在用户正尝试停止摇摄操作并且操作状态是操作状态d的情况下,例如,执行变焦控制,使得变焦倍数Z随时间而增大。
在变焦状态Z(3)中的变焦控制下,变焦倍数Z被设置成Zmax。在变焦状态是变焦状态Z(3)的情况下,即,在图像拍摄装置11是静态并且操作状态是操作状态a的情况下,例如,变焦倍数Z保持为恒定的变焦倍数Zmax
另外,在变焦状态Z(4)中的变焦控制下,变焦倍数Z以恒定速度随时间从Zmax减小至Zmin。在变焦状态是变焦状态Z(4)的情况下,即,在用户开始摇摄操作并且操作状态是操作状态b的情况下,例如,执行变焦控制,使得变焦倍数Z随时间而减小。
<图像拍摄处理的例证>
接下来,将描述图像拍摄装置11的操作。
当用户打开用作操作单元32的图像拍摄装置11的电源开关时,图像拍摄装置11开始图像拍摄处理并且拍摄诸如移动图像的图像以显示或记录所得到的图像。下面,将参照图7的流程图描述由图像拍摄装置11执行的图像拍摄处理。应该注意,重复地执行图像拍摄处理,直到例如用户断开图像拍摄装置11的电源或者指示完成图像拍摄为止。
在步骤S11中,控制单元25打开图像拍摄装置11的电源,以从电源(未示出)向图像拍摄装置11的各个单元供电。
在步骤S12中,图像拍摄装置11开始图像拍摄。
具体地讲,图像拍摄透镜21在图像拍摄传感器22的接收表面上形成从被摄体入射的光的图像,并且图像拍摄传感器22接收从图像拍摄透镜21进入的光,对该光执行光电转换,并且将所得的电信号供应到模拟信号处理单元23。
模拟信号处理单元23对图像拍摄传感器22供应的电信号执行各种类型的处理(诸如,降噪),并且将它供应到A/D转换器24。A/D转换器24对模拟信号处理单元23供应的电信号执行A/D转换,并且将它供应到控制单元25。从A/D转换器24输出的电信号是所拍摄图像的图像数据。
图像拍摄透镜21至A/D转换器24连续地执行其中拍摄被摄体的处理,以生成图像数据并且将图像数据供应到控制单元25。
另外,角速度传感器34开始检测图像拍摄装置11在水平方向上的移动的角速度ω,并且将各时刻检测到的角速度ω顺序供应到控制单元25。
在步骤S13中,控制单元25从角速度传感器34得到角速度ω,并且将它供应到存储器33。
在步骤S14中,存储器33存储控制单元25供应的角速度ω。然后,在步骤S15中,控制单元25控制存储器33从存储在存储器33中的各时刻的角速度ω之中删除前进n个速度的角速度。因此,最近时刻的N个角速度ω被存储在存储器33中。
在步骤S16中,操作确定单元41参考存储在存储器33中的最近N个时刻的角速度ω,并且将这N个角速度ω与存储在记录单元31中的数据库进行比较以确定用户的操作。
例如,假设图8中示出的值是作为最近N个时刻的N个角速度ω得到的。
假设N等于5,并且由点P11至P15示出的角速度是作为角速度ω得到的,如由图8中的箭头Q11所示的。应该注意,在由箭头Q11所示的图中,垂直轴代表角速度而水平轴代表时间。
操作确定单元41基于由5个点P11至P15示出的时刻t处的角速度ω的值,得到由下面的公式(1)示出的角速度ω和时刻t的线性方程。
[数学公式1]
ω=x+yt…(1)
具体地讲,在估计由公式(1)示出的关系式时,得到公式(1)中的系数x和系数y。
在这个示例中,直线L61代表从点P11至P15得到的各时刻的角速度ω的估计方程,即,由公式(1)示出的线性方程。
另外,相对于操作状态a至操作状态d中的每个,记录单元31记录操作状态下的系数x和系数y的理想值(更详细地,系数x和系数y可以具有的范围)作为数据库。
操作确定单元41通过将从N个角速度ω得到的系数x和系数y与用作数据库并且记录在记录单元31中的针对各操作状态的系数x和系数y进行比较,确定当前时刻的用户操作是在操作状态a至操作状态d中的哪一种。
例如,假设被记录为数据库的系数x和系数y可以具有的值的范围所限定的区域是由箭头Q12所示的区域。应该注意,在由箭头Q12所示的图中,垂直轴代表系数x并且水平轴代表系数y。
在这个示例中,xy空间上的区域R11至T14分别代表由操作状态a至操作状态d的数据库所限定的区域。
例如,R11是代表该操作状态下的系数x和系数y可以具有的值的范围的区域。因为在操作状态a下图像拍摄装置11是静态的,所以角速度ω小并且假定时间方向上的角速度ω的变化小。因此,与操作状态a对应的区域R11是系数x和系数y(即,估计方程中的斜率和截距)具有小值的区域。
操作确定单元41基于由从N个角速度ω得到的系数x和系数y所限定的xy空间上的坐标(位置)处于区域R11至R14中的哪个区域来确定用户的操作状态。例如,在由得到的系数x和系数y所限定的xy空间上的位置处于区域R11中的情况下,假设当前时刻的用户操作处于操作状态a。
应该注意,在由得到的系数x和系数y所限定的xy空间上的位置不在区域R11至R14中的任一个中的情况下,用户的操作状态是未知的。另外,通过根据需要调节区域R11至R14的位置或大小,能够为各操作状态赋予权重,以使得容易选择特定操作状态或者使得难以选择特定操作状态。
此外,在图8中,描述了使用线性方程得到用户的操作状态的示例。然而,例如,可以使用多项式方程来得到用户的操作状态,如图9中所示。应该注意,在图9中,垂直轴代表角速度并且水平轴代表时间。
在这个示例中,N等于5并且得到由点P21至P25示出的角速度作为角速度ω。操作确定单元41基于由点P21至P25示出的时刻t处的角速度ω的值,得到由下面的公式(2)示出的角速度ω和时刻t的关系式。
[数学公式2]
ω=x+yt+zt2+……(2)
具体地讲,在估计由公式(2)示出的关系式时,得到公式(2)中的系数x、y、z…
在这个示例中,曲线L71代表从点P21至P25得到的各时刻的角速度ω的估计方程,即,由公式(2)示出的多项式方程。
另外,相对于操作状态a至操作状态d中的每个,记录单元31记录操作状态下的系数x、系数y、系数z…的理想值(更详细地,多项式方程中的各系数可以具有的值的范围)作为数据库。
操作确定单元41基于由从N个角速度ω得到的多项式方程中的系数x、系数y、系数z等的值所限定的空间上的坐标(位置)处于用作数据库的针对各操作状态下的多项式方程中的系数可以具有的值的范围所限定的区域中的哪个区域,确定用户的操作状态。
具体地讲,在这个示例中,通过与图8中的处理相同的处理,得到用户的操作状态。例如,如果由公式(2)示出的多项式方程是二次方程,由从实际检测到的角速度ω得到的系数x、y和z所限定的xyz空间上的坐标处于用作数据库的系数x至z可以具有的值的范围所限定的区域中的哪个区域被指定。
应该注意,另外,在这种情况下,通过根据需要调节多项式方程中的各系数可以具有的值的范围所限定的区域的位置或大小,能够为各操作状态赋予权重,以使得容易选择特定操作状态或者使得难以选择特定操作状态。
此外,能够使记录单元31记录用作数据库的N个角速度ω,以基于针对各操作状态下的N个角速度ω与实际检测到的N个角速度ω之间的差异来确定用户的操作状态。
在这种情况下,例如,针对操作状态a至操作状态d存储N个时刻的角速度ω作为数据库,如图10中所示。应该注意,在图10中,垂直轴代表角速度并且水平轴代表时间。
在这个示例中,N等于5,由5个点P31至P35示出的5个角速度ω被记录为一种操作状态的数据库,并且线L81代表从点P31至P35得到的各时刻的角速度ω与时刻t之间的关系。另外,假设由点P41至P45示出的角速度被作为各时刻的实际角速度ω得到。
在这种情况下,操作确定单元41执行由下面的公式(3)示出的计算,以得到操作状态的数据库与针对各操作状态实际检测到的角速度ω之间的距离dx
[数学公式3]
d x = &Sigma; 1 n ( &omega; n - &omega; n , x ) 2 n . . . ( 3 )
应该注意,在公式(3)中,ωn和ωn,x分别代表实际检测到的角速度ω和被作为数据库记录的角速度。另外,ωn,x中的n代表时间的索引,x代表用于识别数据库的索引。因此,在公式(3)中,在对应的时刻实际检测到的角速度ω和被作为数据库记录的角速度之差的平方和被用于计算检测到的角速度和数据库之间的距离dx
当针对各数据库(即,针对各操作状态)得到距离dx时,操作确定单元41确定所得到的距离dx是否不大于预定的阈值th。然后,操作确定单元41将得到的比阈值th小的距离dx之中的最小距离dx所针对的数据库的操作状态视为当前时刻的用户操作状态。另一方面,在距离dx不小于阈值th的情况下,将当前时刻的操作状态视为未知的。
另外,在这个示例中,通过确定针对各数据库的阈值th并且根据需要调节各阈值th,能够为各操作状态赋予权重,以使得容易选择特定操作状态或者使得难以选择特定操作状态。
应该注意,在针对各操作状态得到距离dx的情况下,可以将得到的所得到的距离dx之中的最小距离dx所针对的数据库的操作状态视为当前时刻的用户操作状态。
返回到图7的流程图,如果在步骤S16中确定了当前时刻的用户操作状态,则处理前进至步骤S17。
在步骤S17中,控制单元25基于来自操作单元32的信号,确定是否执行针对图像拍摄透镜21的手动变焦操作(即,用户的手动操作)。
例如,在用户操作用作操作单元32的变焦按钮以执行变焦控制并且从操作单元32向控制单元25供应取决于用户操作的信号的情况下,确定手动操作被执行。
在步骤S17中,在确定手动操作未被执行的情况下,处理前进至步骤S18。
在步骤S18中,变焦控制单元42根据当前时刻的用户操作状态执行变焦控制。
具体地讲,变焦控制单元42基于在步骤S16的过程中确定的操作状态确定适当的变焦状态,并且基于当前时刻的变焦状态和变焦倍数确定适当的变焦倍数。此外,变焦控制单元42基于所确定的变焦倍数控制变焦单元29,以改变图像拍摄透镜21的变焦倍数Z。具体地讲,变焦控制单元42在光轴方向上移动形成图像拍摄透镜21的透镜,使得图像拍摄透镜21的变焦倍数被设置成所确定的变焦倍数。
因此,基于用户的操作状态,执行适当的变焦控制。在步骤S18中,如果变焦控制被执行,则处理前进至步骤S20。
另一方面,在步骤S17中确定手动操作被执行的情况下,在步骤S19中变焦控制单元42根据手动操作控制变焦。具体地讲,变焦控制单元42按照操作单元32供应的信号来控制变焦单元29,以改变图像拍摄透镜21的变焦倍数。
在步骤S19中,如果根据用户的操作变焦控制被执行,则处理前进至步骤S20。
在步骤S18或步骤S19中,如果变焦控制被执行,则在步骤S20中控制单元25基于A/D转换器24供应的图像数据显示并且记录图像。
具体地讲,控制单元25的显示控制单元43将图像数据供应到显示单元30以显示图像,并且将图像数据供应到记录单元31以记录它。应该注意,只有显示图像和记录图像中的一个可以被执行。
如果在步骤S20中显示和记录图像被执行,则处理返回到步骤S13,并且重复地执行上述处理,直到指示图像拍摄处理终止为止。
以这种方式,图像拍摄装置11基于多个不同时刻的角速度确定用户的操作状态,并且根据操作状态执行变焦控制。
如上所述,通过使用多个不同时刻的角速度,能够更详细地识别操作状态,例如,摇摄操作的速度被减速。因此,能够根据用户的操作状态执行适当的变焦控制,并且改进图像拍摄装置11的可用性。
<变焦状态确定处理的例证>
另外,在图像拍摄处理期间,其中基于用户的操作状态确定适当的变焦状态的变焦状态确定处理也被执行。例如,通过调用各时刻执行步骤S18的处理时的程序,变焦状态确定处理被执行。
下面,将参照图11的流程图描述图7中的步骤S18中各时刻的变焦状态被确定的变焦状态确定处理。变焦状态确定处理由图像拍摄装置11执行,并且当完成图像拍摄处理时同时完成。
在步骤S51中,变焦控制单元42初始化用户的操作状态和变焦状态。具体地讲,用户的操作状态被设置成操作状态a,并且变焦状态被设置成变焦状态Z。具体地讲,在初始状态下,例如,不执行摇摄操作,图像拍摄装置11是静态的,并且变焦倍数Z是Zmax
在步骤S52中,变焦控制单元42确定通过图7中的步骤S16的确定过程得到的用户的操作状态是否是操作状态b。
在步骤S52中,在确定操作状态不是操作状态b的情况下,即,在不开始摇摄操作的情况下,处理返回到步骤S52并且重复地执行确定处理,直到确定操作状态是操作状态b为止。
相比之下,在步骤S52中确定操作状态是操作状态b的情况下,即,在开始摇摄操作的情况下,在步骤S53中,变焦控制单元42将变焦状态设置成变焦状态Z(4)。具体地讲,变焦倍数被确定,使得变焦倍数随时间而减小,直到变焦倍数Z变成Zmin为止。
另外,在变焦状态是变焦状态Z(4)的情况下,比目前的变焦倍数Z小预定量的变焦倍数被设置为新的变焦倍数,并且在图7中的步骤S18中执行变焦控制。
在步骤S54中,变焦控制单元42确定通过图7中的步骤S16的确定处理得到的用户的操作状态是否是操作状态d。
在步骤S54中确定操作状态是操作状态d的情况下,处理前进至步骤S58。
另一方面,在步骤S54中确定操作状态不是操作状态d,变焦控制单元42为操作状态d赋予权重,以防止变焦状态从变焦状态Z(4)转变成变焦状态Z(2),并且处理前进至步骤S55。
例如,在通过参照图8或图9描述的方法确定操作状态的情况下,变焦控制单元42使得难以通过调节与操作状态d对应的区域(诸如,图8中的区域R14)的位置和大小使操作状态成为操作状态d。另外,在通过参照图10描述的方法确定操作状态的情况下,例如,变焦控制单元42使得难以通过减小操作状态d的阈值th使操作状态成为操作状态d。
在步骤S55中,变焦控制单元42确定变焦倍数Z是否是变焦倍数Zmin
在步骤S55中确定变焦倍数Z不是变焦倍数Zmin的情况下,处理返回到步骤S54并且重复执行上述处理。
具体地讲,在变焦状态是变焦状态Z(4)的情况下,执行变焦控制,使得变焦倍数Z随时间减小预定量,直到变焦倍数Z变成变焦倍数Zmin
另一方面,在步骤S55中确定变焦倍数Z是变焦倍数Zmin的情况下,在步骤S56中,变焦控制单元42将变焦状态设置成变焦状态Z(1)。因此,例如,在用户以恒定速度执行摇摄操作的同时,图像拍摄透镜21的变焦倍数保持为变焦倍数Zmin,即,在广角侧上。
在步骤S57中,变焦控制单元42确定通过图7中的步骤S16的确定得到的用户的操作是否是操作状态d。
在步骤S57中确定操作状态不是操作状态d的情况下,即,在以恒定速度连续执行摇摄操作的情况下,处理返回到步骤S57并且重复执行确定处理,直到确定操作状态是操作状态d为止。
相比之下,在步骤S57中确定操作状态是操作状态d或者在步骤S54中确定操作状态是操作状态d的情况下,执行步骤S58的处理。
在步骤S58中,变焦控制单元42将变焦状态设置成变焦状态Z(2)。因此,例如,执行变焦控制,使得根据摇摄速度的减速来变焦被摄体。
在步骤S59中,变焦控制单元42确定通过图7中的步骤S16的确定得到的用户的操作是否是操作状态b。
在步骤S59中,在确定操作状态是操作状态b的情况下,处理返回到步骤S53并且重复执行上述处理。
应该注意,在步骤S59中确定操作状态是操作状态b的情况下,操作状态随时间从操作状态d变成操作状态b。在这种情况下,变焦控制单元42可以确定变焦倍数,使得变焦倍数保持为当前时刻的变焦倍数,即,保持具有恒定值,例如,如参照图4描述的。另外,在当角速度ω的值变成负时,变焦倍数可以保持为当前时刻的变焦倍数。
相比之下,在步骤S59中确定操作状态不是操作状态b的情况下,变焦控制单元42为操作状态b赋予权重,以防止变焦状态从变焦状态Z(2)转变成变焦状态Z(4),并且处理前进至步骤S60。
在通过参照图8或图9描述的方法确定操作状态的情况下,例如,变焦控制单元42使得难以通过调节与操作状态b对应的区域(诸如,图8中的区域R12)的位置和大小使操作状态成为操作状态b。另外,在通过参照图10描述的方法确定操作状态的情况下,例如,变焦控制单元42使得难以通过减小操作状态b的阈值th使操作状态成为操作状态b。
在步骤S60中,变焦控制单元42确定变焦倍数Z是否是变焦倍数Zmax
在步骤S60中确定变焦倍数Z不是变焦倍数Zmax的情况下,处理返回到步骤S59并且重复执行上述处理。具体地讲,在变焦状态是变焦状态Z(2)的情况下,执行变焦控制,使得变焦倍数Z随时间增大预定量,直到变焦倍数Z变成变焦倍数Zmax
另一方面,在步骤S60中变焦倍数Z是变焦倍数Zmax的情况下,在步骤S61中,变焦控制单元42将变焦状态设置成变焦状态Z(3)。因此,例如,在用户停止摇摄操作的同时,图像拍摄透镜21的变焦倍数保持为变焦倍数Zmax,即,在远焦侧上。
如果执行步骤S61的处理,则处理返回到步骤S52并且重复执行上述处理直到变焦状态确定处理被完成。
图像拍摄装置11以这种方式根据用户的操作状态转变变焦状态。通过如上所述根据操作状态确定变焦状态,能够执行适当的变焦控制。
<第二实施例>
<图像拍摄处理的例证>
应该注意,尽管已经描述了使用实际检测到的(测得的)最近N个角速度来确定用户的操作状态的示例,但可以使用一些最近角速度来估计下一个时刻的角速度,以利用通过估计而得到的角速度确定操作状态。在这种情况下,例如,图像拍摄装置11执行图12中示出的图像拍摄处理。
下面,将参照图12的流程图描述图像拍摄装置11进行的图像拍摄处理。应该注意,因为步骤S91至步骤S94的处理与图7中的步骤S11至步骤S14的处理相同,所以将省略对其的描述。
在步骤S95中,控制单元25控制存储器33,以从存储在存储器33中的各时刻的角速度ω之中删除前进2个速度的角速度。因此,在最近2个时刻的角速度ω被存储在存储器33中。
在步骤S96中,操作确定单元41基于存储在存储器33中的最近2个角速度ω计算角加速度,并且估计所得到的角加速度的下一时刻(即,未来时刻)的角速度。例如,通过得到两个角速度之间的差,得到角加速度。因为角加速度是角速度的随时间的变化,如果角加速度是已知的,则可以预测未来时刻的角速度。
在步骤S97中,通过将存储在存储器33中的最近2个角速度ω和在步骤S96的处理中估计的下一时刻的角速度ω与预先记录在记录单元31中的数据库进行比较,操作确定单元41确定用户的操作。
应该注意,尽管在使用通过估计得到的角速度以及实际检测到的角速度来确定操作状态方面步骤S97的处理与图7中的步骤S16不同,但是用户的操作状态是通过与步骤S16的处理相同的处理来确定的。
如果确定了用户的操作状态,则执行步骤S98至步骤S101的处理并且完成图像拍摄处理。因为处理与图7中的步骤S17至步骤S20的处理相同,所以将省略对其的描述。
如上所述,图像拍摄装置11使用检测到的2个角速度来估计下一时刻的角速度,使用通过估计而估计的角速度和实际检测到的角速度来确定用户的操作状态,并且根据操作状态执行变焦控制。
如上所述,通过使用2个角速度来估计下一时刻的角速度,能够例如更快速地检测摇摄操作的开始或终止,或者能够减小用户的操作和针对用户的操作的适当的变焦控制之间的时间偏差。另外,能够减少存储在存储器33中的角速度的数目,以减小存储器33的存储器容量。
应该注意,尽管这里已经描述了最近2个角速度被存储在存储器33中的示例,但可以存储任何数目的角速度,只要数目不小于2。
<第三实施例>
<图像拍摄装置的构造示例>
此外,尽管已经描述了图像拍摄装置11是单目镜的示例,但图像拍摄装置可以是复眼目镜。在这种情况下,例如,如图13中所示地构造图像拍摄装置。应该注意,在图13中,将用相同参考符号指代与图1中的组件相同的组件并且将适当地省略对其的描述。
图13中示出的图像拍摄装置71例如由双目镜组成,并且图像拍摄装置71包括图像拍摄透镜21至角速度传感器34、图像拍摄透镜81、图像拍摄传感器82、模拟信号处理单元83、A/D转换单元84、快门控制单元85、调焦单元86、光圈单元87和变焦单元88。
具体地讲,图像拍摄装置71具有通过将图像拍摄透镜81至变焦单元88添加到图像拍摄装置11的构造中而得到的构造。
图像拍摄透镜81至A/D转换单元84与图像拍摄透镜21至A/D转换单元24对应,拍摄具有与从图像拍摄透镜21至A/D转换单元24得到的图像的视差的图像,并且将得到的图像供应到控制单元25。
另外,快门控制单元85至变焦单元88与快门控制单元26至变焦单元29对应,并且执行对图像拍摄透镜81的快门控制、调焦控制、光圈驱动和变焦。
另外,例如,显示单元30具有用于向用户的右眼呈现图像的显示区和用于向用户的左眼显示图像的显示区。
<图像拍摄处理的例证>
接下来,将描述图像拍摄装置71的操作。下面,将参照图14的流程图描述由图像拍摄装置71执行的图像拍摄处理。
应该注意,因为步骤S131的处理与图7中的步骤S11的处理相同,所以将省略对其的描述。
在步骤S132中,图像拍摄装置71开始图像拍摄。
具体地讲,图像拍摄透镜21至A/D转换器24连续地执行处理以拍摄被摄体的图像,生成图像数据并且将它供应到控制单元25,以及另外,图像拍摄透镜81至A/D转换单元84连续地执行处理以拍摄被摄体的图像,生成图像数据并且将它供应到控制单元25。因此,得到具有视差的两个图像的图像数据。
如果开始图像拍摄,则执行步骤S133至步骤S140的处理并且完成图像拍摄处理。因为处理与图7中的步骤S13至步骤S20的处理相同,所以将省略对其的描述。应该注意,在步骤S140中,具有视差的两个图像被显示在显示单元30上并且被记录在记录单元31中。
如上所述,图像拍摄装置71基于多个不同时刻的角速度确定用户的操作状态,并且根据操作状态执行变焦控制。因此,能够更详细地识别操作状态,并且根据用户的操作状态执行适当的变焦控制。
<第四实施例>
<图像拍摄处理的例证>
另外,在图像拍摄装置71中,可以估计下一时刻的角速度,以确定用户的操作。在这种情况下,图像拍摄装置71执行图15中示出的图像拍摄处理。下面,将参照图15的流程图描述由图像拍摄装置71执行的图像拍摄处理。
应该注意,因为步骤S171的处理与图12中的步骤S91的处理相同,所以将省略对其的描述。
在步骤S172中,图像拍摄装置71开始图像拍摄。
具体地讲,图像拍摄透镜21至A/D转换器24连续地执行处理以拍摄被摄体的图像,生成图像数据并且将它供应到控制单元25,以及另外,图像拍摄透镜81至A/D转换单元84连续地执行处理以拍摄被摄体的图像,生成图像数据并且将它供应到控制单元25。因此,得到具有视差的两个图像的图像数据。
如果开始图像拍摄,则执行步骤S173至步骤S181的处理并且完成图像拍摄处理。因为处理与图12中的步骤S93至步骤S101的处理相同,所以将省略对其的描述。应该注意,在步骤S181中,具有视差的两个图像被显示在显示单元30上并且被记录在记录单元31中。
如上所述,图像拍摄装置71使用2个角速度来估计下一时刻的角速度,使用通过估计而得到的角速度和实际检测到的角速度来确定用户的操作状态,并且根据操作状态执行变焦控制。因此,能够更快速地检测用户的操作,并且能够减小用户操作与针对用户的操作的适当的变焦控制之间的时间偏差。另外,能够减少存储在存储器33中的角速度的数目,以减小存储器33的存储器容量。
<第五实施例>
<图像拍摄装置的构造示例>
另外,尽管已经描述了通过改变图像拍摄透镜21的变焦倍数来改变图像的视角的光学变焦的示例,但可以通过数字变焦来改变图像的视角。在这种情况下,例如,如图16中所示地构造图像拍摄装置11。应该注意,在图16中,将用相同的参考符号指代与图1中的组件相同的组件并且将适当地省略对其的描述。
图16中示出的图像拍摄装置11包括图像拍摄透镜21至光圈单元28,以及显示单元30至角速度传感器34。具体地讲,图16中示出的图像拍摄装置11具有与图1中示出的图像拍摄装置11的构造相同的构造,不同的是没有提供有变焦单元29。另外,在图16中示出的图像拍摄装置11中,在控制单元25上还提供有变焦处理单元111。
变焦处理单元111通过在变焦控制单元42的控制下基于A/D转换器24供应的图像数据切割图像的部分区域来变焦图像。
<图像拍摄处理的例证>
接下来,将描述图16中示出的图像拍摄装置11的操作。下面,将参照图17的流程图描述由具有图16中示出的构造的图像拍摄装置11执行的图像拍摄处理。
应该注意,步骤S211至步骤S217的处理与图7中的步骤S11至步骤S17的处理相同,所以将省略对其的描述。
在步骤S217中确定手动操作未被执行的情况下,在步骤S218中,变焦控制单元42根据当前时刻的用户的操作状态执行变焦控制。
具体地讲,当变焦控制单元42基于通过步骤S216的处理确定的操作状态通过图11中示出的变焦状态确定处理来确定适当的变焦状态时,基于当前时刻的变焦状态和变焦倍数,确定下一时刻的新变焦倍数。
然后,变焦处理单元111基于A/D转换器24供应的图像数据在图像中切割由新变焦倍数所限定的区域以产生最终拍摄的图像,即,经变焦处理的图像。例如,所拍摄图像的中心位置是中心,切割具有由新变焦倍数所限定的大小的区域,并且产生经变焦处理的图像,即,以预定变焦倍数拍摄的图像。
应该注意,下面,通过由变焦处理单元111切割而生成的图像(即,经变焦处理的图像)也被称为变焦图像。
如上所述,能够通过根据用户的操作状态确定变焦状态来执行适当的变焦控制。如果在步骤S218中执行变焦控制,则处理前进至步骤S220。
另外,在步骤S217中确定手动操作被执行的情况下,在步骤S219中,变焦控制单元42根据用户的手动操作(即,按照操作单元32供应的信号)控制变焦。变焦处理单元111在变焦控制单元42的控制下基于A/D转换器24供应的图像数据,从图像中切割由用户指定的变焦倍数所限定的区域,以产生以指定变焦倍数拍摄的变焦图像。
如果根据用户的操作在步骤S219中执行变焦控制,则处理前进至步骤S220。
当在步骤S218或步骤S219中执行变焦控制时,在步骤S220中,显示控制单元43生成图像以进行显示。
例如,如图18中所示,显示控制单元43生成由变焦图像EP11和用于得到变焦图像EP11的原始图像LP11组成的一个图像作为供显示图像DP11,变焦图像EP11是通过步骤S218或步骤S219中的变焦处理得到的。换句话讲,通过同时排列变焦图像EP11和图像LP11这两个图像而得到的屏幕的图像是供显示图像DP11。
供显示图像DP11是其中变焦图像EP11被排列在图中的上侧而图像LP11被排列在图中的下侧的图像。这里,图像LP11是从A/D转换器24输出的、变焦处理之前的图像,即,其中变焦图像EP11被切割的原始图像。
另外,在这个示例中,通过在图像LP11中成为变焦图像EP11的区域上显示框W11,能够看到具有较宽视角的图像LP11的哪个区域被切割以产生变焦图像EP11。因此,用户可以容易地掌握用户观看的是整个拍摄物体中的哪个部分。
返回到图17,如果在步骤S220中生成供显示图像,则处理前进至步骤S221。
在步骤S221中,控制单元25基于供显示图像的图像数据和变焦图像的图像数据,显示并且记录图像。
具体地讲,控制单元25的显示控制单元43将供显示图像的图像数据供应到显示单元30以显示图像,并且控制单元25将变焦图像的图像数据供应到记录单元31以记录它。应该注意,可以记录变焦处理之前的图像以及变焦图像。
如果在步骤S221中显示并且记录图像,则处理返回到步骤S213并且重复执行上述处理,直到指示图像拍摄终止为止。
如上所述,图像拍摄装置11基于多个不同时刻的角速度确定用户的操作状态,并且根据操作状态执行变焦控制。因此,能够更详细地识别操作状态,并且执行适当的变焦控制。
另外,图像拍摄装置11排列变焦处理之前的图像和变焦处理之后的图像以进行显示。因此,能够使图像更具可视性并且更有效地显示图像。
<第六实施例>
<图像拍摄处理的例证>
另外,在第五实施例中,已经描述了显示变焦处理之前的图像以及变焦图像的示例。然而,可以显示图像拍摄范围比变焦处理之前的原始图像的图像拍摄范围宽的图像。因此,用户可以容易地掌握用户观看的是较宽范围的整个被摄体的哪个部分,尤其是在用户握住图像拍摄装置11并且执行摇摄操作的情况下。
在如上所述在较宽范围中显示图像的情况下,图16中示出的图像拍摄装置11执行图19中示出的图像拍摄过程。下面,将参照图19的流程图描述由具有图16中示出的构造的图像拍摄装置11执行的图像拍摄处理。
应该注意,因为步骤S251至步骤S259的处理与图17中示出的步骤S211至步骤S219的处理是相同的,所以将省略对其的描述。
在步骤S260中,显示控制单元43生成供显示图像。
例如,如图20中所示,显示控制单元43生成由变焦图像EP21和图像WP11组成的一个图像作为供显示图像DP21,变焦图像EP21是通过步骤S258或步骤S259中的变焦处理得到的,图像WP11是通过组合过去图像拍摄中的变焦处理之前的多个图像而得到的。
供显示图像DP21是其中变焦图像EP21被排列在图中的上侧,并且图像WP11被排列在图中的下侧的图像。这里,图像WP11是通过排列和组合在过去图像拍摄中的变焦处理之前的多个不同时刻的图像,使得相同的被摄体被重叠而得到的图像,所述多个不同时刻的图像包括用于获得变焦图像EP21的原始图像,(即,从A/D转换器24输出的多个图像)。在图20中示出的示例中,图像WP11上的虚线框LP21-1至LP21-4呈现用于生成图像WP11的图像。应该注意,不在图像WP11中呈现这些框LP21-1至LP21-4。
另外,在这个示例中,通过在图像WP11中成为变焦图像EP21的区域上显示框W21,可以看到较宽的图像拍摄范围中的哪个区域是变焦图像EP21的图像拍摄区域。因此,用户可以容易地掌握用户观看的是整个拍摄物体中的哪个部分。
返回到图19,如果在步骤S260中生成供显示图像,则执行步骤S261的处理并且完成图像拍摄处理。因为步骤S261的处理与图17中的步骤S221的处理是相同的,所以将省略对其的描述。应该注意,在步骤S261中,可以记录通过组合变焦处理之前的多个图像而得到的图像以及变焦图像。
如上所述,图像拍摄装置11基于多个不同时刻的角速度确定操作状态,并且根据操作状态执行变焦控制。因此,能够更详细地识别操作状态,并且执行适当的变焦控制。
另外,图像拍摄装置11排列图像拍摄范围比变焦处理之前的图像的图像拍摄范围宽的图像和变焦图像以进行显示。因此,能够使图像更具可视性并且更有效地显示图像。
<第七实施例>
<图像拍摄装置的构造示例>
另外,在图像拍摄装置11中执行数字变焦处理的情况下,例如,如果在图像中心附近检测到物体,则可以组合图像拍摄处理和物体识别处理,以放大物体。
例如,在如上所述执行图像拍摄处理和物体识别处理组合而成的处理的情况下,如图21中所示地构造图像拍摄装置11。应该注意,在图21中,将用相同的参考符号指代与图16中的组件相同的组件并且将适当地省略对其的描述。
图21中示出的图像拍摄装置11具有通过将物体检测单元141进一步提供到图16中示出的图像拍摄装置11的控制单元25而得到的构造。
物体检测单元141对A/D转换器24供应的图像执行物体识别处理,以从图像中检测物体。
<图像拍摄处理的例证>
接下来,将描述图21中示出的图像拍摄装置11的操作。下面,将参照图22的流程图描述由具有图21中示出的构造的图像拍摄装置11执行的图像拍摄处理。
应该注意,因为步骤S291至S297的处理与图17中的步骤S211至步骤S217的处理相同,所以将省略对其的描述。
在步骤S297中确定手动操作未被执行的情况下,在步骤S298中,变焦控制单元42根据当前时刻的用户的操作状态执行变焦控制。
具体地讲,当变焦控制单元42基于由步骤S296的处理确定的操作状态通过图11中示出的变焦状态确定处理来确定适当的变焦状态时,基于当前时刻的变焦状态和变焦倍数确定适当的变焦倍数。应该注意,在如随后将描述的图22中示出的图像拍摄处理被执行的情况下,物体识别以及参照图11描述的变焦状态确定处理被执行。如果在图像中心附近检测到物体,则执行优选地保持变焦状态的处理。
当确定了新变焦倍数时,变焦处理单元111基于A/D转换器供应的图像数据在图像中切割由新变焦放大所限定的区域以产生以新变焦倍数拍摄的图像,即,变焦图像。
如果在步骤S298中变焦控制被执行,则处理前进至步骤S300。
另一方面,在步骤S297中确定手动操作被执行的情况下,在步骤S299中,变焦控制单元42根据用户的手动操作(即,按照操作单元32供应的信号)控制变焦。变焦处理单元111在变焦控制单元42的控制下基于A/D转换器24供应的图像数据,从图像中切割由用户指定的变焦倍数所限定的区域,以产生以由用户指定的变焦倍数拍摄的变焦图像。
如果在步骤S299中变焦控制被执行,则处理前进至步骤S300。
当在步骤S298或步骤S299中变焦控制被执行时,在步骤S300中,控制单元25基于经变焦处理单元111变焦处理的变焦图像的图像数据来显示和记录图像。
具体地讲,控制单元25的显示控制单元43将图像数据供应到显示单元30以显示变焦图像,并且控制单元25将图像数据供应到记录单元31以记录它。
如果在步骤S300中显示并且记录图像,则处理返回到步骤S293并且重复执行上述处理直到指示图像拍摄处理终止为止。
如上所述,图像拍摄装置11基于多个不同时刻的角速度确定用户的操作状态,并且根据操作状态执行变焦控制。因此,能够更详细地识别操作状态,并且执行适当的变焦控制。
<调节处理的例证>
另外,图21中示出的图像拍摄装置11执行参照图11描述的物体识别以及变焦状态确定处理,并且在图像中心附近检测到物体的情况下执行调节处理,即,优选地保持变焦状态的处理。下面,将参照图23的流程图描述由图像拍摄装置11执行的调节处理。
在步骤S331中,物体检测单元141对A/D转换器24供应的图像执行物体识别处理,以从图像中检测物体。
例如,物体检测单元141通过将预先准备的任意物体的特征量与从图像中提取的特征量进行比较,从图像中检测预先确定的物体。此外,例如,物体检测单元141可以执行面部识别,以在图像中检测预先被注册为待检测物体的人的面部或任意人员的面部。
在步骤S332中,变焦控制单元42确定从步骤S331的处理中由图像拍摄传感器22拍摄的图像的中心附近是否检测到物体。例如,在包括图像中心并且具有预先确定的预定大小的区域中检测到物体的情况下,确定在图像中心附近检测到物体。
在步骤S332中确定没有检测到物体的情况下,处理返回步骤S331并且重复执行上述处理。
相比之下,在步骤S332中确定检测到物体的情况下,变焦控制单元42使得难以通过图22中的步骤S296的处理在步骤S333中选择操作状态b作为用户的操作状态。换句话讲,变焦控制单元42使得难以在图11中的步骤S52和步骤S59中确定操作状态为操作状态b。变焦控制单元42使得容易通过图22中的步骤S296的处理选择操作状态d作为用户的操作状态。换句话讲,变焦控制单元42使得容易在图11中的步骤S54和步骤S57中确定操作状态为操作状态d。
具体地讲,在通过参照图8或图9描述的方法确定操作状态的情况下,例如,变焦控制单元42使得难以通过调节对应于操作状态b的区域(诸如,图8中的区域R12)的位置和大小来选择操作状态b。另外,在通过参照图10描述的方法确定操作状态的情况下,例如,变焦控制单元42使得难以通过减小操作状态b的阈值th来选择操作状态b。类似地,在通过参照图8或图9描述的方法确定操作状态的情况下,变焦控制单元42使得容易通过调节对应于操作状态d的区域(诸如,图8中的区域R14)的位置和大小来选择操作状态d。另外,在通过参照图10描述的方法确定操作状态的情况下,例如,变焦控制单元42使得容易通过增大操作状态d的阈值th来选择操作状态d。
因此,在物体被放大(增大)使得位于图像中心的物体(被摄体)被放大显示的情况下,例如,防止操作状态转变成操作状态b并且使得难以放大被摄体。具体地讲,在图像中心检测到物体的情况下,变焦控制单元42执行变焦控制,使得优选地保持物体被放大(增大)的状态。另外,操作状态变得容易转变成操作状态d,并且物体容易被放大。在图像中心附近检测到被摄体并且摇摄速度被减速的情况下,例如,物体被放大。
在步骤S334中,变焦控制单元42根据从图像中检测到的物体的大小,确定变焦倍数Zmax
具体地讲,变焦控制单元42将变焦倍数Zmax的值设置成由从图像中检测到的物体的大小所限定的值。例如,确定变焦倍数Zmax的值,使得检测到的物体没有从图像自身或图像上显示的框中伸出。
如果确定了变焦倍数Zmax,则处理返回到步骤S331并且重复上述处理。然后,当完成了图11中的变焦状态确定处理时,也完成了调节处理。
如上所述,图像拍摄装置11从图像中检测物体,并且根据检测结果,调节操作状态或变焦倍数Zmax的可选择性。因此,当用户发现待观察的被摄体时,即,当物体定位于图像中心附近时,能够优选地保持物体被放大的状态。
<第八实施例>
<图像拍摄处理的例证>
另外,在图21中示出的图像拍摄装置11中在图像中检测到物体的情况下,可以切割包括该物体的区域作为经变焦处理的图像。在这种情况下,例如,图像拍摄装置11执行如图24中示出的图像拍摄处理。下面,将参照图24的流程图描述由具有图21中示出的构造的图像拍摄装置11执行的图像拍摄处理。
应该注意,因为步骤S361至步骤S367的处理与图22中的步骤S291至步骤S297的处理是相同的,所以将省略对其的描述。
在步骤S367中确定手动操作未被执行的情况下,在步骤S368中,变焦控制单元42根据当前时刻的用户操作状态执行变焦控制。
具体地讲,当变焦控制单元42基于在步骤S366的处理中确定的操作状态通过图11的变焦状态确定处理来确定适当的变焦状态时,基于当前时刻的变焦状态和变焦倍数确定变焦倍数。应该注意,在如随后将描述的图24的图像拍摄处理被执行的情况下,用以执行物体识别以基于识别结果限定由变焦处理切割的区域的位置的处理以及参照图11描述的变焦状态确定处理被执行。
当确定了新变焦倍数时,变焦处理单元111基于A/D转换器24供应的图像数据,在图像中切割在根据物体的检测(识别)结果而预先确定的位置中的具有由新变焦倍数所限定的大小的区域。然后,变焦处理单元111使用切割区域的图像作为以新变焦倍数拍摄的变焦图像。
如果在步骤S368中变焦控制被执行,则处理前进至步骤S370。
另一方面,在步骤S367中确定手动操作被执行的情况下,在步骤S369中,变焦控制单元42根据用户的手动操作(即,按照操作单元32供应的信号)控制变焦。
如果在步骤S369中根据用户操作变焦控制被执行,则处理前进至S370。
当在步骤S368或步骤S369中变焦控制被执行时,执行步骤S370的处理以完成图像拍摄处理。因为步骤S370的处理与图22中的步骤S300的处理是相同的,所以将省略对其的描述。
如上所述,图像拍摄装置11基于多个不同时刻的角速度确定用户的操作状态,并且基于操作状态执行变焦控制。因此,能够更详细地识别操作状态并且执行适当的变焦控制。另外,能够通过根据物体识别的结果切割区域以产生经变焦处理的图像,得到包括预期吸引用户注意的被摄体的好看图像。
<变焦位置确定处理的例证>
另外,图21中示出的图像拍摄装置11执行其中物体识别被执行以限定根据识别结果由变焦处理切割的区域的位置的变焦位置确定处理以及参照图11描述的变焦状态确定处理。下面,将参照图25的流程图描述由图像拍摄装置11执行的变焦位置确定处理。
在步骤S401中,物体检测单元141对A/D转换器24供应的图像执行物体识别处理,以从图像中检测物体。应该注意,在步骤S401中,执行与图23中的步骤S331的处理相同的处理。
在步骤S402中,变焦控制单元42确定从图像中是否检测到物体。
在步骤S402中检测到物体的情况下,在步骤S403中,变焦控制单元42基于物体的检测结果确定变焦中心位置。例如,变焦控制单元42将图像上检测到的物体的位置设置成通过变焦处理切割的区域的中心位置。因此,切割使检测到的物体处于中心的区域作为变焦图像。在图24中的步骤S368的处理中,使用以这种方式确定的图像的切割位置的中心位置。
如果步骤S403的处理被执行,则处理返回到步骤S401并且重复执行上述处理。
相比之下,在步骤S402中确定没有检测到物体的情况下,在步骤S404中,变焦控制单元42使用预先确定的位置作为变焦中心位置。例如,变焦控制单元42使用图像的中心位置作为通过变焦处理切割的区域的中心位置。因此,切割在拍摄图像的中心附近的区域作为变焦图像。
如果步骤S404的处理被执行,则处理返回到步骤S401并且重复执行上述处理。然后,当完成图11中的变焦状态确定处理时,也完成变焦位置确定处理。
如上所述,图像拍摄装置11从图像中检测物体,并且如果检测到物体,则根据物体的位置调节通过变焦处理切割的图像上的区域的位置。因此,能够得到使物体处于中心的好看图像。
<第九实施例>
<图像拍摄装置的构造示例>
另外,在第八实施例中,已经描述了在执行数字变焦处理的情况下执行变焦处理使得被摄体被定位于图像中心的示例。然而,另外,在执行光学变焦处理的情况下,被摄体可以被定位于图像中心。在这种情况下,例如,如图26中所示地构造图像拍摄装置11。应该注意,在图26中,将用相同的参考符号指代与图1或图21中的组件相同的组件并且将适当地省略对其的描述。
图26中示出的图像拍摄装置11具有通过将校正单元171添加图1中示出的图像拍摄装置11并且将物体检测单元141和校正控制单元172添加到控制单元25而得到的构造。
校正单元171通过在校正控制单元172的控制下使形成图像拍摄透镜21的透镜的部分或整体倾斜,调节由图像拍摄装置11拍摄的方向。例如,被校正单元171倾斜的透镜例如是图像稳定化透镜。应该注意,在下面的描述中,图像拍摄透镜21自身相对于图像拍摄传感器22倾斜。
物体检测单元141对A/D转换器24供应的图像执行物体识别处理,以从图像中检测物体。校正控制单元172根据经由物体检测单元141的物体的识别结果,得到图像拍摄透镜21的倾斜角,并且基于倾斜角控制校正单元171。
<图像拍摄处理的例证>
接下来,将描述图26中示出的图像拍摄装置11的操作。
下面,将参照图27的流程图描述图26中示出的由图像拍摄装置11执行的图像拍摄处理。应该注意,步骤S431至步骤S438的处理与图7中的步骤S11至步骤S18的处理相同,将省略对其的描述。
应该注意,在如随后将描述的执行图27的图像拍摄处理的情况下,用以执行物体识别以根据识别结果得到图像拍摄透镜21的倾斜角使得物体落入图像内的处理以及参照图11描述的变焦状态确定处理被执行。
在步骤S439中,校正单元171在校正控制单元172的控制下使图像拍摄透镜21倾斜。
在从图像中检测到物体的情况下,校正控制单元172得到图像拍摄透镜21的倾斜角,使得检测到的物体被定位于图像中心,如将描述的。然后,校正控制单元172控制校正单元171的驱动,使得图像拍摄透镜21的光学透镜和图像拍摄传感器22的接收表面的法线之间的角度是得到的倾斜角,以使图像拍摄透镜21倾斜。校正单元171在校正控制单元172的控制下使图像拍摄透镜21倾斜。
因此,从图像中检测到的物体被定位于图像中心,并且能够得到好看图像。应该注意,在从图像中没有检测到物体的情况下,不执行使图像拍摄透镜21倾斜的处理。
如果执行步骤S439的处理,则处理前进至步骤S441。
另一方面,在步骤S437中确定手动操作被执行的情况下,在步骤S440中,变焦控制单元42根据用户的手动操作控制变焦单元29,以改变图像拍摄透镜21的变焦倍数。
如果在步骤S440中根据用户的操作变焦控制被执行,则处理前进至步骤S441。
如果执行步骤S439或步骤S440的处理,则执行步骤S441的处理以完成图像拍摄处理。因为步骤S441的处理与图7中的步骤S20的处理相同,所以将省略对其的描述。
如上所述,图像拍摄装置11基于多个不同时刻的角速度识别用户的操作状态,并且根据识别的操作状态执行变焦控制。因此,能够更详细地识别操作状态并且执行适当的变焦控制。另外,通过根据物体识别的结果倾斜图像拍摄透镜21,能够得到包括预期吸引用户注意的被摄体的好看图像。
<倾斜角确定处理的例证>
另外,图26中示出的图像拍摄装置11执行用以执行物体识别以根据识别结果得到图像拍摄透镜21的倾斜角使得物体落入图像内的倾斜角确定处理以及参照图11描述的变焦状态确定处理。下面,将参照图28的流程图描述由图像拍摄装置11执行的倾斜角确定处理。
在步骤S471中,物体检测单元141对A/D转换器24供应的图像执行物体识别处理,以从图像中检测物体。应该注意,在步骤S471中,执行与图23中的步骤S331的处理相同的处理。
在步骤S472中,校正控制单元172确定从图像中是否检测到物体。
在步骤S472中确定没有检测到物体的情况下,处理返回到步骤S471并且重复执行上述处理。具体地讲,在没有检测到物体的情况下,图像拍摄透镜21的倾斜角是0,并且因此图像拍摄透镜21没有倾斜。
相比之下,在步骤S472中确定检测到物体的情况下,在步骤S473中,校正控制单元172基于物体在图像上的位置得到图像拍摄透镜21的倾斜角,使得检测到的物体被定位于图像中心。然后,校正控制单元172基于得到的倾斜角控制校正单元171的驱动。因此,从图像中检测到的物体被定位于图像中心,并且能够得到好看图像。
如果执行步骤S473的处理,则处理返回到步骤S471并且重复执行上述处理。然后,当完成图11中的变焦状态确定处理时,也完成倾斜角度确定处理。
如上所述,图像拍摄装置11从图像中检测物体并且如果检测到物体,则根据物体的位置,得到图像拍摄透镜21的倾斜角。因此,能够得到使被摄体处于中心的好看图像。
应该注意,在这个实施例中,已经描述了通过倾斜图像拍摄透镜21来调节物体在图像上的位置的示例。然而,可以能够通过倾斜图像拍摄透镜21并且调节图像上包括物体的区域被切割的位置来调节物体在图像上的位置。
顺便提及,可以通过硬件或软件执行上述一系列处理。对于执行一系列处理的软件,软件中的程序被安装在计算机上。这里,例如,计算机包括专门为其设计的硬件中的计算机,或可以通过安装各种程序来执行各种功能的通用个人计算机。
图29是示出通过程序执行上述一系列处理的计算机的硬件的构造示例的框图。
在计算机中,CPU501、ROM502和RAM503通过总线504彼此连接。
输入/输出接口505连接到总线504。输入单元506、输出单元507、记录单元508、通信单元509和驱动器510连接到输入/输出接口505。
输入单元506由键盘、鼠标、麦克风、图像拍摄传感器等组成。输出单元507由显示器、扬声器等组成。记录单元508由硬盘、非易失性存储器等组成。通信单元509由网络接口等组成。驱动器510驱动诸如磁盘、光盘、磁-光盘和半导体存储器的可移除介质511。
在如上所述构造的计算机中,例如,CPU501经由输入/输出接口505和总线504将存储在记录单元508中的程序加载在RAM503中,并且执行它以执行上述一系列处理。
例如,由计算机(CPU501)执行的程序可以被记录到作为封装介质的可移除介质511上并且被提供。此外,可以经由诸如局域网、互联网和数字卫星广播的有线或无线传输介质提供程序。
在计算机中,通过将可移除介质511加载在驱动器510中,可以经由输入/输出接口505将程序安装在记录单元508中。还可以经由有线或无线传输介质由通信单元509接收程序并且将其安装在记录单元508中。选择性地,可以预先将程序安装在ROM502或记录单元508中。
应该注意,例如,将由计算机执行的程序可以是以说明书中描述的次序顺序执行处理的程序或者并行地或当被调用时以必要时序执行处理的程序。
应该注意,本技术的实施例不限于上述实施例并且在不脱离本技术的要点的情况下可以进行各种修改。
例如,本技术可采取云计算构造,其中多个装置经由网络共享并且协作处理一个功能。
此外,流程图中描述的步骤可以被分派给多个装置或者由所述多个装置执行,而不是由单个装置来执行这些步骤。
此外,当单个步骤包括多个处理时,包括在该单个步骤中的多个处理可以被分派给多个装置或者由所述多个装置执行,而不是由单个装置来执行这些步骤。
说明书中描述的效果只是出于例证目的提供的,并且不一定受限制,而可以是任何其它效果。
应该注意,本技术还可以采取下面的构造。
(1)一种图像拍摄装置,所述图像拍摄装置包括:
角速度检测单元,其被构造成检测其自身的移动的角速度;
操作确定单元,其被构造成基于多个不同时刻的角速度确定用户的操作状态;以及
变焦控制单元,其被构造成基于所述操作状态执行变焦控制。
(2)根据(1)所述的图像拍摄装置,其中,
所述变焦控制单元执行变焦控制,使得在所述角速度随时间而增大的操作状态的情况下,变焦倍数减小。
(3)根据(1)或(2)所述的图像拍摄装置,其中,
所述变焦控制单元执行变焦控制,使得在所述角速度随时间而减小的操作状态的情况下,变焦倍数增大。
(4)根据(1)至(3)中任一项所述的图像拍摄装置,其中,
所述变焦控制单元执行变焦控制,使得如果所述操作状态从所述角速度随时间而减小的状态变成所述角速度随时间而增大的状态,则变焦倍数保持恒定。
(5)根据(1)至(4)中任一项所述的图像拍摄装置,其中,所述变焦控制单元使得在执行特定变焦控制的情况下,所述操作确定单元难以确定所述操作状态为预定操作状态。
(6)根据(1)至(5)中任一项所述的图像拍摄装置,其中,所述操作确定单元基于多个不同时刻的角速度得到时间和角速度的关系式并且将得到的关系式的系数与针对多个操作状态中的每个预先确定的关系式的系数可以具有的值的范围进行比较,从而确定操作状态。
(7)根据(1)至(5)中任一项所述的图像拍摄装置,其中,所述操作确定单元通过得到多个不同时刻的角速度和针对多个操作状态中的每个预先确定的多个不同时刻的角速度之间的距离来确定操作状态。
(8)根据(1)至(5)中任一项所述的图像拍摄装置,其中,所述操作确定单元基于多个不同时刻的角速度估计未来时刻的角速度,并且基于通过估计得到的角速度和多个不同时刻的角速度来确定操作状态。
(9)根据(1)至(8)中任一项所述的图像拍摄装置,还包括:
变焦处理单元,其被构造成在所述变焦控制单元的控制下切割拍摄图像的部分区域,以生成变焦图像。
(10)根据(9)所述的图像拍摄装置,还包括:
显示控制单元,其被构造成排列所述拍摄图像和所述变焦图像以进行显示。
(11)根据(10)所述的图像拍摄装置,其中,所述显示控制单元在图像中被切割了所述变焦图像的区域上显示框。
(12)根据(9)所述的图像拍摄装置,还包括:
显示控制单元,其被构造成排列通过组合在多个不同时刻拍摄的图像而得到的图像和变焦图像以进行显示。
(13)根据(12)所述的图像拍摄装置,其中,所述显示控制单元在通过组合而得到的图像中被切割了变焦图像的区域上显示框。
(14)根据(1)至(9)中任一项所述的图像拍摄装置,还包括:
物体检测单元,其被构造成从拍摄图像中检测物体,所述变焦控制单元被构造成执行变焦控制,使得在图像中心附近检测到所述物体的情况下,保持所述物体被放大显示的状态。
(15)根据(9)所述的图像拍摄装置,还包括
物体检测单元,其被构造成从所述拍摄图像中检测物体,所述变焦控制单元被构造成基于所述物体的检测结果,确定变焦图像被从图像中切割的位置。
(16)根据(1)至(8)中任一项所述的图像拍摄装置,还包括:
物体检测单元,其被构造成从拍摄图像中检测物体,以及
校正单元,其被构造成根据所述物体的检测结果,使收集从被摄体入射的光的透镜倾斜。
(17)一种图像拍摄方法,所述图像拍摄方法包括以下步骤:
检测图像拍摄装置的移动的角速度;
基于多个不同时刻的角速度,确定操作所述图像拍摄装置的用户的操作状态;以及
基于操作状态执行变焦控制。
(18)一种程序,致使计算机执行包括以下步骤的处理:
检测图像拍摄装置的移动的角速度;
基于多个不同时刻的角速度,确定操作所述图像拍摄装置的用户的操作状态;以及
基于操作状态执行变焦控制。
参考标号的描述
11图像拍摄装置
21图像拍摄透镜
22图像拍摄传感器
25控制单元
29变焦单元
33存储器
34角速度传感器
41操作确定单元
42变焦控制单元
43显示控制单元
111变焦处理单元
141物体检测单元
172校正控制单元

Claims (18)

1.一种图像拍摄装置,所述图像拍摄装置包括:
角速度检测单元,被构造成检测其自身的移动的角速度;
操作确定单元,被构造成基于多个时刻的角速度确定用户的操作状态;以及
变焦控制单元,被构造成基于所述操作状态执行变焦控制。
2.根据权利要求1所述的图像拍摄装置,其中,
所述变焦控制单元执行变焦控制,使得在所述角速度随时间而增大的操作状态的情况下,变焦倍数减小。
3.根据权利要求1所述的图像拍摄装置,其中,
所述变焦控制单元执行变焦控制,使得在所述角速度随时间而减小的操作状态的情况下,变焦倍数增大。
4.根据权利要求1所述的图像拍摄装置,其中,
所述变焦控制单元执行变焦控制,使得如果操作状态从所述角速度随时间而减小的状态变成所述角速度随时间而增大的状态,则变焦倍数保持恒定。
5.根据权利要求1所述的图像拍摄装置,其中,所述变焦控制单元使得在执行特定变焦控制的情况下,所述操作确定单元难以确定所述操作状态为预定操作状态。
6.根据权利要求1所述的图像拍摄装置,其中,所述操作确定单元基于多个不同时刻的角速度得到时间和角速度的关系式并且将得到的关系式的系数与针对多个操作状态中的每个预先确定的关系式的系数能够具有的值的范围进行比较,从而确定操作状态。
7.根据权利要求1所述的图像拍摄装置,其中,所述操作确定单元通过得到多个不同时刻的角速度和针对多个操作状态中的每个预先确定的多个不同时刻的角速度之间的距离来确定操作状态。
8.根据权利要求1所述的图像拍摄装置,其中,所述操作确定单元基于多个不同时刻的角速度估计未来时刻的角速度,并且基于通过估计得到的角速度和多个不同时刻的角速度来确定操作状态。
9.根据权利要求1所述的图像拍摄装置,还包括:
变焦处理单元,被构造成在所述变焦控制单元的控制下切割拍摄图像的部分区域,以生成变焦图像。
10.根据权利要求9所述的图像拍摄装置,还包括:
显示控制单元,被构造成排列所述拍摄图像和所述变焦图像以进行显示。
11.根据权利要求10所述的图像拍摄装置,其中,所述显示控制单元在图像中被切割了所述变焦图像的区域上显示框。
12.根据权利要求9所述的图像拍摄装置,还包括:
显示控制单元,被构造成排列通过组合在多个不同时刻拍摄的图像而得到的图像和变焦图像以进行显示。
13.根据权利要求12所述的图像拍摄装置,其中,所述显示控制单元在通过组合而得到的图像中被切割了变焦图像的区域上显示框。
14.根据权利要求1所述的图像拍摄装置,还包括:
物体检测单元,被构造成从拍摄图像中检测物体,所述变焦控制单元被构造成执行变焦控制,使得在图像中心附近检测到所述物体的情况下,保持所述物体被放大显示的状态。
15.根据权利要求9所述的图像拍摄装置,还包括
物体检测单元,被构造成从所述拍摄图像中检测物体,所述变焦控制单元被构造成基于所述物体的检测结果,确定变焦图像被从图像中切割的位置。
16.根据权利要求1所述的图像拍摄装置,还包括:
物体检测单元,被构造成从拍摄图像中检测物体,以及
校正单元,被构造成根据所述物体的检测结果,使收集从被摄体入射的光的透镜倾斜。
17.一种图像拍摄方法,所述图像拍摄方法包括以下步骤:
检测图像拍摄装置的移动的角速度;
基于多个不同时刻的角速度,确定操作所述图像拍摄装置的用户的操作状态;以及
基于所述操作状态执行变焦控制。
18.一种程序,致使计算机执行包括以下步骤的处理:
检测图像拍摄装置的移动的角速度;
基于多个不同时刻的角速度,确定操作所述图像拍摄装置的用户的操作状态;以及
基于所述操作状态执行变焦控制。
CN201480046802.4A 2013-09-06 2014-08-25 图像拍摄装置、方法和程序 Active CN105745915B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013-185179 2013-09-06
JP2013185179 2013-09-06
PCT/JP2014/072105 WO2015033810A1 (ja) 2013-09-06 2014-08-25 撮像装置および方法、並びにプログラム

Publications (2)

Publication Number Publication Date
CN105745915A true CN105745915A (zh) 2016-07-06
CN105745915B CN105745915B (zh) 2019-02-15

Family

ID=52628288

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480046802.4A Active CN105745915B (zh) 2013-09-06 2014-08-25 图像拍摄装置、方法和程序

Country Status (5)

Country Link
US (1) US10171742B2 (zh)
EP (1) EP3041217B1 (zh)
JP (1) JP6589635B2 (zh)
CN (1) CN105745915B (zh)
WO (1) WO2015033810A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113691728A (zh) * 2016-07-25 2021-11-23 佳能株式会社 配件设备、控制设备及其控制方法
CN115278079A (zh) * 2022-07-27 2022-11-01 维沃移动通信有限公司 拍摄方法及其装置

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6824710B2 (ja) * 2015-12-15 2021-02-03 キヤノン株式会社 ズーム制御装置およびズーム制御方法、撮像装置
US10869026B2 (en) * 2016-11-18 2020-12-15 Amitabha Gupta Apparatus for augmenting vision
US10498964B2 (en) * 2017-12-28 2019-12-03 Gopro, Inc. Adaptive modes of operation based on user intention or activity

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020054214A1 (en) * 2000-09-22 2002-05-09 Nikon Corporation Signal prediction device and camera equipped with a signal prediction device
JP2006033513A (ja) * 2004-07-16 2006-02-02 Canon Inc 撮像装置
CN101459773A (zh) * 2007-12-13 2009-06-17 株式会社日立制作所 摄像装置
CN100539645C (zh) * 2005-02-07 2009-09-09 松下电器产业株式会社 成像装置
JP2009206920A (ja) * 2008-02-28 2009-09-10 Nikon Corp カメラ
CN102346346A (zh) * 2010-07-21 2012-02-08 佳能株式会社 模糊校正设备和摄像设备
CN102547230A (zh) * 2010-10-14 2012-07-04 索尼公司 捕捉设备、捕捉系统和捕捉方法
JP2013046149A (ja) * 2011-08-23 2013-03-04 Canon Inc 撮像装置およびその制御方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7110024B1 (en) * 1997-07-15 2006-09-19 Silverbrook Research Pty Ltd Digital camera system having motion deblurring means
US6630950B1 (en) * 1998-03-19 2003-10-07 Canon Kabushiki Kaisha Apparatus for improving image vibration suppression
JP4273184B2 (ja) 2003-09-03 2009-06-03 独立行政法人産業技術総合研究所 リン酸測定方法とその装置
JP2005202018A (ja) 2004-01-14 2005-07-28 Fujinon Corp 像振れ補正装置
JP2005252732A (ja) * 2004-03-04 2005-09-15 Olympus Corp 撮像装置
JP4314176B2 (ja) 2004-09-21 2009-08-12 キヤノン株式会社 撮像装置
US20070291104A1 (en) * 2006-06-07 2007-12-20 Wavetronex, Inc. Systems and methods of capturing high-resolution images of objects
JP5268433B2 (ja) * 2008-06-02 2013-08-21 キヤノン株式会社 撮像装置、及び撮像装置の制御方法
JP5366454B2 (ja) * 2008-06-30 2013-12-11 キヤノン株式会社 光学機器
JP4715913B2 (ja) * 2008-12-17 2011-07-06 ソニー株式会社 撮像装置、画像処理装置、ズーム制御方法およびズーム制御プログラム
JP2011193329A (ja) 2010-03-16 2011-09-29 Panasonic Corp 撮像装置
JP5612916B2 (ja) * 2010-06-18 2014-10-22 キヤノン株式会社 位置姿勢計測装置、その処理方法、プログラム、ロボットシステム
JP2012151796A (ja) * 2011-01-21 2012-08-09 Sony Corp 画像処理装置と画像処理方法およびプログラム
US9313394B2 (en) * 2012-03-02 2016-04-12 H4 Engineering, Inc. Waterproof electronic device
JP2013225104A (ja) * 2012-03-23 2013-10-31 Panasonic Corp 撮像装置
GB201208088D0 (en) * 2012-05-09 2012-06-20 Ncam Sollutions Ltd Ncam
JP2014053794A (ja) * 2012-09-07 2014-03-20 Nintendo Co Ltd 情報処理プログラム、情報処理装置、情報処理システム及び情報処理方法
US9064385B2 (en) * 2013-03-15 2015-06-23 Immersion Corporation Method and apparatus to generate haptic feedback from video content analysis

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020054214A1 (en) * 2000-09-22 2002-05-09 Nikon Corporation Signal prediction device and camera equipped with a signal prediction device
JP2006033513A (ja) * 2004-07-16 2006-02-02 Canon Inc 撮像装置
CN100539645C (zh) * 2005-02-07 2009-09-09 松下电器产业株式会社 成像装置
CN101459773A (zh) * 2007-12-13 2009-06-17 株式会社日立制作所 摄像装置
JP2009206920A (ja) * 2008-02-28 2009-09-10 Nikon Corp カメラ
CN102346346A (zh) * 2010-07-21 2012-02-08 佳能株式会社 模糊校正设备和摄像设备
CN102547230A (zh) * 2010-10-14 2012-07-04 索尼公司 捕捉设备、捕捉系统和捕捉方法
JP2013046149A (ja) * 2011-08-23 2013-03-04 Canon Inc 撮像装置およびその制御方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113691728A (zh) * 2016-07-25 2021-11-23 佳能株式会社 配件设备、控制设备及其控制方法
CN113691728B (zh) * 2016-07-25 2023-11-17 佳能株式会社 配件设备、控制设备及其控制方法
CN115278079A (zh) * 2022-07-27 2022-11-01 维沃移动通信有限公司 拍摄方法及其装置

Also Published As

Publication number Publication date
JP6589635B2 (ja) 2019-10-16
CN105745915B (zh) 2019-02-15
US10171742B2 (en) 2019-01-01
US20160156849A1 (en) 2016-06-02
EP3041217A1 (en) 2016-07-06
EP3041217A4 (en) 2017-04-12
WO2015033810A1 (ja) 2015-03-12
JPWO2015033810A1 (ja) 2017-03-02
EP3041217B1 (en) 2021-03-31

Similar Documents

Publication Publication Date Title
EP3342153B1 (en) Apparatus and method for generating time lapse image
CN109005366A (zh) 摄像模组夜景摄像处理方法、装置、电子设备及存储介质
RU2628494C1 (ru) Способ и устройство для генерирования фильтра изображения
US20090231364A1 (en) Display system capable of auto-regulating brightness and brightness auto-regulating method thereof
CN105745915A (zh) 图像拍摄装置、方法和程序
US8913150B2 (en) Dynamic image capture utilizing prior capture settings and user behaviors
US20140092272A1 (en) Apparatus and method for capturing multi-focus image using continuous auto focus
US8520096B2 (en) Apparatus and method for learning photographing profiles of digital imaging device for recording personal life history
US20070132874A1 (en) Selecting quality images from multiple captured images
US20220132023A1 (en) Imaging device, control method therefor, and recording medium
US8507835B2 (en) Auto-focusing method which uses a different focus determining method according to a type of corresponding focus graph, recording medium recording the method, and auto-focusing apparatus performing the method
CN104349056A (zh) 图像处理设备、图像处理方法和程序
CN108933911B (zh) 音量调节方法、装置、设备及存储介质
US11438501B2 (en) Image processing apparatus, and control method, and storage medium thereof
US20200092442A1 (en) Method and device for synchronizing audio and video when recording using a zoom function
EP4037306A1 (en) Image processing method, apparatus, electronic device and storage medium
CN111182199B (zh) 电子装置及拍照方法
CN113507549B (zh) 一种摄像头、拍照方法、终端及存储介质
KR101960508B1 (ko) 디스플레이 장치 및 방법
CN106331463A (zh) 摄像头焦距放大方法及装置
CN113079312A (zh) 调整摄像头焦距的方法及装置、电子设备、存储介质
JP2020145556A (ja) 撮像装置及びその制御方法、プログラム、記憶媒体
US20230421885A1 (en) Control apparatus, image capturing apparatus, control method, recording medium, and image capturing system
JPH11112844A (ja) 画像処理装置、画像処理方法及びコンピュータ読み取り可能な記憶媒体
US11816864B2 (en) Tracking device and tracking method for tracking an object displayed on a display

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant