CN109218606B - 摄像控制设备、其控制方法及计算机可读介质 - Google Patents

摄像控制设备、其控制方法及计算机可读介质 Download PDF

Info

Publication number
CN109218606B
CN109218606B CN201810722355.XA CN201810722355A CN109218606B CN 109218606 B CN109218606 B CN 109218606B CN 201810722355 A CN201810722355 A CN 201810722355A CN 109218606 B CN109218606 B CN 109218606B
Authority
CN
China
Prior art keywords
image
fisheye
unit
user operation
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810722355.XA
Other languages
English (en)
Other versions
CN109218606A (zh
Inventor
矶部真吾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN109218606A publication Critical patent/CN109218606A/zh
Application granted granted Critical
Publication of CN109218606B publication Critical patent/CN109218606B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/72—Combination of two or more compensation controls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Studio Devices (AREA)
  • Cameras In General (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)

Abstract

本发明提供一种摄像控制设备、其控制方法及计算机可读介质。该摄像控制设备包括：控制单元，其被配置为接收第一用户操作并且被配置为：在没有接收到第一用户操作的情况下，执行控制以输出要在显示单元上显示的图像信号，该图像信号是以下图像之一：第一图像，其与实时VR图像的第一范围相对应，以及第二图像，其与实时VR图像的第二范围相对应；以及在接收到第一用户操作的情况下：执行控制以输出图像信号，该图像信号用于将显示单元上显示的图像从第一图像和第二图像中的一个改变为第一图像和第二图像中的另一个、或者改变为第一图像和第二图像这两者，以及发出用于执行摄像准备处理的准备指示。

Description

摄像控制设备、其控制方法及计算机可读介质
技术领域
本发明涉及摄像控制设备、电子装置的控制方法、程序和存储介质，并且更特别地涉及用于显示具有宽视频范围的图像的控制方法。
背景技术
近年来，具有诸如鱼眼镜头等的前后一对的一体式广角镜头以使得能够进行全方位摄像的照相机以及基于这些照相机所拍摄的图像所创建的虚拟现实(VR)内容已经变得普遍。具有广角镜头并可连接到智能电话的扩展连接器的照相机模块也是可用的，并且通过将照相机模块与智能电话上运行的应用程序结合使用，可以拍摄到全方位图像。
为了在利用上述摄像设备进行摄像期间或之后确认图像，通常使用设置在照相机或智能电话上的二维显示器。关于在显示器上显示图像的格式，可以使用在显示器上显示全方位图像整体的全方位图像格式或从全方位图像中提取部分区域并且在显示器上显示该部分区域的格式。
作为全方位图像格式，可以使用360度图像被映射到球形区域的圆顶主格式、使用等矩投影(equirectangular projection)的全方位图像格式以及所谓的全景格式等。还可以使用如下格式(以下还被称为鱼眼图像格式)：原样显示如上所述通过设置在能够进行全方位摄像的照相机中的前后一对光学系统分别拍摄的两个鱼眼图像。
另一方面，在从全方位图像中提取部分区域并将该部分区域显示在显示器上的格式中，通常显示基于保持显示的方向所提取的部分区域。
日本特开2014-222825公开了如下技术，其中该技术用于拍摄广角视频，优选从拍摄的视频中提取存在移动体的区域，并且将优选图像的宽高比转换为显示器宽高比。利用日本特开2014-222825，在用作监视对象的被摄体是移动体的情况下，能够自动选择并拍摄监视对象。
发明内容
然而，对于显示从全方位图像中提取的部分区域的格式，难以在拍摄者的盲区方向上确认整个图像和图像的一部分。为了在拍摄者的盲区方向上确认整个图像和图像的一部分，拍摄者必须通过将照相机定向到多个方向中的各个方向或操作触摸面板来修改显示范围，这使得确认过程费力。另一方面，对于显示整个全方位图像的格式，难以详细地确认图像，结果可能会错过照相机会。此外，日本特开2014-222825没有描述在被摄体是静止的情况下的区域提取，并且被摄体不一定始终运动。
因此，本发明提供了一种使拍摄者能够更好地确认图像的技术，使得拍摄者可以在不会错过照相机会的情况下在适当定时执行摄像。
根据本发明的摄像控制设备包括：存储器和至少一个处理器，所述处理器用作：控制单元，其被配置为接收第一用户操作，并且被配置为：在没有接收到所述第一用户操作的情况下，执行控制以输出要在显示单元上显示的图像信号，所述图像信号是以下图像之一：第一图像，其与作为从摄像单元接收到的实时取景图像的实时虚拟现实图像、即实时VR图像的第一范围相对应，以及第二图像，其与相对于所述实时VR图像被放大了的实时VR图像的第二范围相对应，所述第二范围是比所述第一范围小的范围；以及在接收到所述第一用户操作的情况下：执行控制以输出图像信号，该图像信号用于将所述显示单元上显示的图像从所述第一图像和所述第二图像中的一个改变为所述第一图像和所述第二图像中的另一个、或者改变为所述第一图像和所述第二图像这两者，以及发出用于执行摄像准备处理的准备指示。
根据本发明的摄像控制设备的控制方法，包括：接收第一用户操作；在没有接收到所述第一用户操作的情况下，执行控制以输出要在显示单元上显示的图像信号，所述图像信号是以下图像之一：第一图像，其与作为由摄像单元拍摄到的实时取景图像的实时虚拟现实图像、即实时VR图像的第一范围相对应，以及第二图像，其与相对于所述实时VR图像被放大了的实时VR图像的第二范围相对应，所述第二范围是比所述第一范围小的范围；以及在接收到所述第一用户操作的情况下：执行控制以输出图像信号，该图像信号用于将所述显示单元上显示的图像从所述第一图像和所述第二图像中的一个改变为所述第一图像和所述第二图像中的另一个、或者改变为所述第一图像和所述第二图像这两者，以及发出用于执行摄像准备处理的准备指示。
根据本发明的计算机可读介质，其存储程序，其中所述程序使计算机执行：接收第一用户操作；在没有接收到所述第一用户操作的情况下，执行控制以输出要在显示单元上显示的图像信号，所述图像信号是以下图像之一：第一图像，其与作为由摄像单元拍摄到的实时取景图像的实时虚拟现实图像、即实时VR图像的第一范围相对应，以及第二图像，其与相对于所述实时VR图像被放大了的实时VR图像的第二范围相对应，所述第二范围是比所述第一范围小的范围；以及在接收到所述第一用户操作的情况下：执行控制以输出图像信号，该图像信号用于将所述显示单元上显示的图像从所述第一图像和所述第二图像中的一个改变为所述第一图像和所述第二图像中的另一个、或者改变为所述第一图像和所述第二图像这两者，以及发出用于执行摄像准备处理的准备指示。
根据本发明，拍摄者可以更好地确认图像，并且作为结果，拍摄者可以在不会错过照相机会的情况下在适当定时执行摄像。
通过以下参考附图对典型实施例的说明，本发明的其它特征将变得明显。
附图说明
图1A至1D是示出照相机100的外观的图。
图2是示出照相机100的内部结构的图。
图3是照相机控制单元120所执行的流程图。
图4是照相机控制单元120所执行的显示/记录处理的流程图。
图5A至5D示出显示单元141上的显示的示例。
图6A至6C示出显示单元141上的显示的其它示例。
图7示出显示单元141上的显示的又一示例。
具体实施方式
图1A至1D示出作为可以应用本发明的摄像控制设备的示例的照相机100的外观。照相机100是具有一体式镜头的数字照相机。注意，照相机100可以是单镜头反光照相机或无反光镜SLR照相机等。本发明适用于安装广角镜头的各种类型的摄像设备。
图1A示出照相机100的正面的外观。显示单元141显示拍摄图像和各种类型的信息。显示单元141上显示的图像响应于摄像准备指示而被切换。设置在显示单元141的显示面上的触摸面板13接收由拍摄者执行的触摸操作。释放按钮11是可以半按下和完全按下的开关。通过半按下释放按钮11，向照相机100发出摄像准备指示，以及通过完全按下释放按钮11，向照相机100发出摄像指示。镜头111是广角镜头，并且通过摄像器件112(图1A中未示出)来将入射至镜头111的光束形成为图像。
图1B示出照相机100的背面的外观。通过按下按钮12，向照相机100发出摄像准备指示，以及通过进行从按钮12移除按下按钮12的手指等的操作，向照相机100发出摄像指示。镜头101是与镜头111同样的广角镜头，并且通过摄像器件102(图1B中未示出)将入射至镜头101的光束形成为图像。
VR图像由摄像器件102、112形成。VR图像是可用于VR显示的图像。VR图像包括由全方位照相机拍摄的全方位图像、以及具有比可由显示单元一次显示的显示范围宽的视频范围(有效视频范围)的全景图像等。VR图像不仅包括静态图像，而且还包括运动图像和实时取景图像(基本上实时从照相机获得的图像)。VR图像具有与上下方向(垂直角度、相对于天顶的角度、仰角、俯角、高度角)360度和左右方向(水平角度、方位角度)360度的视野相对应的最大视频范围(有效视频范围)。此外，VR图像包括虽然在上下方向上小于360度或在左右方向上小于360度、但具有比可由普通照相机拍摄的视角宽的视角(视野范围)或比由显示单元一次可显示的显示范围宽的视频范围(有效视频范围)的图像。例如，由能够拍摄左右方向(水平角度、方位角度)360度和以天顶为中心的垂直角度为210度的视野范围(视角范围)中的被摄体的全方位照相机拍摄的图像是一种VR图像。此外，例如，由能够拍摄左右方向(水平角度，方位角度)180度和以天顶为中心的垂直角度为180度的视野范围(视角范围)中的被摄体的照相机拍摄的图像是一种VR图像。换句话说，具有与在上下方向和左右方向两者上是至少160度(±80度)的视野相对应的视频范围以及比人能够一次看到的范围宽的视频范围的图像是VR图像的类型。当在VR显示中使用VR图像时，通过改变显示单元在左右转动方向上的姿势，可以在左右方向(水平转动方向)上观看无缝的全方位视频。在上下方向(垂直转动方向)上，可以在从正上方(天顶)观看的±105度的范围内观看无缝的全方位视频，但从正上方超过105度的范围是没有视频存在的空白区域。VR图像还可以被称为“具有形成虚拟空间(VR空间)的至少一部分的视频范围的图像”。
VR显示是可以修改VR图像的显示范围以使得显示具有与显示单元的姿势相对应的视野范围的视频的显示方法。在用户在佩戴作为显示单元的头戴式显示器(HMD)的同时观看视频的情况下，显示具有与用户的面部的朝向相对应的视野范围的视频。例如，在某一时点，显示VR图像的具有以左右方向的0度(特定的方位，例如北)和上下方向的90度(相对于天顶90度，即水平)为中心的视野角(视角)的部分的视频。当显示单元的姿势从这种状态反转时(例如，当显示面从南向修改为北向时)，显示范围被修改为具有同一VR图像的以左右方向的180度(相反方位，例如南)和上下方向的90度(水平方向)为中心的视角的部分的视频。因此，当用户在观看HMD的同时将其面部从北向移动到南向(换句话说，回头看)时，HMD上显示的视频同样从北部的视频改变为南部的视频。利用VR显示，可以向用户提供处于VR图像(VR空间)的位置中的视觉感受。安装在VR护目镜(头戴式适配器)上的智能电话可被认为是一种类型的HMD。显示范围不仅可以通过姿势变化来移动(滚动)，而且还可以响应于在触摸面板或方向按钮等上执行的用户操作来移动(滚动)。
图1C示出照相机100的侧面的外观。镜头101和镜头111在照相机100的前后成对配置，镜头101和镜头111各自的视角为180度。换句话说，镜头101和镜头111满足360度的视角。因此，分别由摄像器件102和摄像器件112拍摄与180度视角相对应的图像。通过由两个摄像器件102、112拍摄的两个图像形成与360度视角相对应的VR图像。
图1D示出显示单元141上显示的画面的示例。这里，显示由摄像器件102或摄像器件112拍摄的鱼眼图像。还显示触摸面板按钮14。触摸面板按钮14是用于发出摄像准备指示和摄像指示的项。更具体地，触摸面板按钮14被配置为使得通过执行用以触摸与触摸面板按钮14相对应的触摸面板13上的位置的触摸操作来向照相机100发出摄像准备指示。然后，通过执行从触摸面板按钮14(触摸面板13)释放触摸触摸面板按钮14的手指或笔的操作来向照相机100发出摄像指示。此外，通过执行用以触摸显示的鱼眼图像内的位置或者更具体地触摸与该位置对应的触摸面板上的位置的触摸操作，在发出摄像准备指示的同时发出显示范围选择指示。
注意，显示单元141可以是与照相机100分开的设备。例如，显示单元141可以设置在与照相机100分开设置的智能电话等上。此外，用于发出摄像准备指示和摄像指示的用户操作可以在与照相机100分开的设备上执行。例如，可以在与照相机100分开设置的智能电话上执行用户操作，并且该智能电话可以向照相机100发出与用户操作相对应的指示。
图2示出照相机100的内部结构。注意，虽然图2示出各个功能作为独立构成元件，但各个功能可以通过诸如ASIC或可编程逻辑阵列(PLA)等的一个或多个硬件来实现。各个功能也可以通过使诸如CPU或MPU等的可编程处理器执行软件来实现。
镜头101是具有光圈机构的单焦点镜头，并且深焦点用作镜头101的焦点位置。
摄像器件102由包括光电转换元件的多个像素的二维阵列构成。摄像器件102在各像素中通过对由包括镜头101的摄像光学系统形成的被摄体图像(光学图像)进行光电转换(或者换句话说摄像)来生成模拟信号，使用A/D转换电路将该模拟信号转换为数字信号，并输出像素单位的RAW图像数据。
存储器I/F单元106将从摄像器件102输出的所有像素的RAW图像数据写入存储器107。此外，存储器I/F单元106读取保持在存储器107中的RAW图像数据，并将读取的数据输出到图像处理单元108。存储器107是用于存储与多个帧相对应的全像素RAW图像数据的易失性存储介质。
图像处理单元108对来自存储器I/F单元106的全像素RAW图像数据实施诸如伽玛校正、颜色分离和色差矩阵化等的处理，向其添加同步信号，并且输出用于记录或显示的视频数据。此外，图像处理单元108从向图像处理单元108输入的RAW图像数据中的各像素的亮度值获得测光值，并且经由总线121将测光值提供给照相机控制单元120。
镜头111、摄像器件112、存储器I/F单元116、存储器117和图像处理单元118具有与镜头101、摄像器件102、存储器I/F单元106、存储器107和图像处理单元108同样的功能。镜头111、摄像器件112、存储器I/F单元116、存储器117和图像处理单元118分别执行与镜头101、摄像器件102、存储器I/F单元106、存储器107和图像处理单元108同样的处理。
照相机控制单元120由CPU等构成，并且控制照相机100的整体操作。RAM 160用作照相机控制单元120的工作区域(工作存储器)。用于操作照相机控制单元120的常量和变量被记录在RAM 160中，并且程序等在RAM 160上被展开。ROM 180存储用于操作照相机控制单元120的计算机程序等。例如，照相机控制单元120通过将ROM 180中存储的计算机程序在RAM 160上展开并执行来控制照相机100的整体操作。
在曝光控制中，使用增益控制单元103、快门控制单元104和光圈控制单元105。照相机控制单元120基于由图像处理单元108和图像处理单元118提供的测光值或由用户手动设置的操作参数来控制这些控制单元103至105。增益控制单元103控制摄像器件102和摄像器件112各自的增益。快门控制单元104控制摄像器件102和摄像器件112各自的快门速度。光圈控制单元105控制镜头101的光圈机构和镜头111的光圈机构。
存储介质I/F单元130是用于将存储介质131连接到照相机100的接口。存储介质I/F单元130将从图像处理单元108、图像处理单元118和GPU 142输入的视频数据记录在存储介质131中，并且从存储介质131读取所记录的视频数据。存储介质131由半导体存储器等构成。
显示I/F单元140将来自图像处理单元108和图像处理单元118的视频数据以及由GPU 142在视频RAM(VRAM)143中绘制的图像数据输出到显示单元141。显示单元141上显示的图像主要用于确认拍摄者拍摄的图像。
GPU 142是用于基于来自照相机控制单元120的指示来对从图像处理单元108和图像处理单元118输出的视频数据执行图像转换处理、图像提取处理，放大处理和失真校正等以在VRAM 143中绘制视频数据的绘制引擎。GPU 142还执行用于在VRAM 143中以叠加样式绘制与照相机100有关的各种类型的显示信息和菜单画面的处理。上述触摸面板按钮14由GPU 142绘制为图形用户界面(GUI)并且经由显示I/F单元140显示在显示单元141上。
通信I/F单元150经由通信单元151而连接到在照相机100的外部的图中未示出的智能电话或PC等，以将由显示单元141显示的图像数据传送至智能电话或PC等。此外，通信I/F单元150通过智能电话或PC等接收针对照相机100发出的控制命令等，并向照相机控制单元120通知。通信单元151是执行无线通信的无线LAN接口，并执行与由通信I/F单元150进行的通信相关的硬件处理。
释放按钮11、按钮12和触摸面板13具有上述功能，并且向I/O控制器170输出与操作相对应的操作信息(摄像准备指示、摄像指示和显示范围选择指示等)。I/O控制器170将来自各个操作单元的操作信息输出到照相机控制单元120，并且照相机控制单元120执行与来自I/O控制器170的操作信息相对应的处理。例如，触摸面板13被层压到显示单元141上以输出包括表示触摸操作的位置或区域的坐标信息等的操作信息。
图3是示出照相机100所执行的整体处理的流程图。该流程图的处理由照相机控制单元120通过在RAM 160上展开并执行记录在ROM 180中的程序来实现。图3中所示的流程图例如当电源被引入到照相机100中时开始，并且以预定帧频(在预定时间段内)重复执行从S302到S307的处理。
在S301中，照相机控制单元120对显示单元141和触摸面板13执行坐标校准(触摸面板初始化)。为此，触摸面板13上的坐标和显示单元141上显示的图像上的坐标可以被相互转换，结果，可以检测到对触摸面板按钮14进行的触摸操作以及对拍摄图像进行的触摸操作等。
在S302中，照相机控制单元120对光圈控制单元105设置光圈值(光圈设置)。在第一光圈设置操作中，照相机控制单元120对光圈控制单元105设置开放光圈值作为光圈值的初始值。从第二光圈设置操作起，照相机控制单元120对光圈控制单元105设置在S306的曝光设置处理期间确定的光圈值。
在S303中，照相机控制单元120对增益控制单元103设置增益(增益设置)。在第一增益设置操作中，照相机控制单元120对增益控制单元103设置0dB作为增益的初始值。从第二增益设置操作起，照相机控制单元120对增益控制单元103设置在S306的曝光设置处理期间确定的增益。
在S304中，照相机控制单元120对快门控制单元104设置快门速度(快门设置)。在第一快门设置操作中，照相机控制单元120对快门控制单元104设置1/60秒作为快门速度的初始值。从第二快门设置操作起，照相机控制单元120对快门控制单元104设置在S306的曝光设置处理期间确定的快门速度。
在S305中，照相机控制单元120执行用于实时取景摄像的摄像/读取处理。更具体地，光圈控制单元105响应于来自照相机控制单元120的指示，基于在S302中设置的光圈值来执行用于控制镜头101、111各自的光圈机构的处理。增益控制单元103响应于来自照相机控制单元120的指示，基于在S303中设置的增益来执行用于控制摄像器件102、112各自的增益的处理。快门控制单元104响应于来自照相机控制单元120的指示，基于在S304中设置的快门速度来执行用于控制摄像器件102、112各自的快门速度的处理。然后，摄像器件102、112响应于来自照相机控制单元120的指示，基于在S302至S304中设置的值来执行摄像。接着，存储器I/F单元106响应于来自照相机控制单元120的指示，来执行用于将由摄像器件102拍摄的图像(RAW图像)记录在存储器107中并将该图像输出到图像处理单元108的处理。同样地，存储器I/F单元116响应于来自照相机控制单元120的指示，来执行用于将由摄像器件112拍摄的图像(RAW图像)记录在存储器117中并将该图像输出到图像处理单元118的处理。
在S306中，照相机控制单元120判断S305中拍摄的图像的曝光是否适当，并且确定用于下一摄像操作的曝光值(光圈值、增益和快门速度)(曝光设置处理)。更具体地，照相机控制单元120从图像处理单元108、118获得基于在S305中拍摄的图像所获取到的测光值，并且基于获得的测光值来计算曝光评价值。然后，照相机控制单元120将计算出的曝光评价值与预先确定的曝光目标值进行比较，并且判断拍摄图像的曝光是否适当。在曝光不适当的情况下，照相机控制单元120确定下一摄像操作的曝光值，使得拍摄出更接近最佳曝光的图像。
在S307中，照相机控制单元120执行显示/记录处理。图4是示出显示/记录处理的流程图。
在S401中，照相机控制单元120获得释放按钮11的操作状态并将获得的操作状态记录在RAM 160中。RAM 160以阵列数据的形式存储与至少两个周期相对应的释放按钮11的操作状态。由此，可以检测释放按钮11的操作状态的变化。释放按钮11的操作状态包括三个状态，即释放按钮11未被按下的未按下状态、释放按钮11被半按下的半按下状态以及释放按钮11被完全按下的完全按下状态。每次执行S401时，照相机控制单元120都更新与释放按钮11相关的阵列数据。
在S402中，照相机控制单元120获得触摸面板按钮14的操作状态并将获得的操作状态记录在RAM 160中。RAM 160以阵列数据形式存储与至少两个周期相对应的触摸面板按钮14的操作状态。由此，可以检测触摸面板按钮14的操作状态的变化。触摸面板按钮14的操作状态包括两个状态、即触摸面板按钮14被触摸的触摸状态和触摸面板按钮14未被触摸的未触摸状态。每次执行S402时，照相机控制单元120都更新与触摸面板按钮14相关的阵列数据。
在S403中，照相机控制单元120获得按钮12的操作状态并将获得的操作状态记录在RAM 160中。RAM 160以阵列数据的形式存储与至少两个周期相对应的按钮12的操作状态。由此，可以检测按钮12的操作状态的变化。按钮12的操作状态包括两个状态，即按钮12被按下的按下状态和按钮12未被按下的未按下状态。每次执行S403时，照相机控制单元120都更新与按钮12相关的阵列数据。
在S404中，照相机控制单元120基于在S401至S403中获得的操作状态来判断是否已经发出了摄像准备指示。更具体地，在释放按钮11的操作状态是半按下状态的情况下，照相机控制单元120判断为已经发出了摄像准备指示，并且使处理进入S406。同样地，在触摸面板按钮14的操作状态是触摸状态或者按钮12的操作状态是按下状态的情况下，照相机控制单元120判断为已经发出了摄像准备指示，并且使处理进入S406。摄像准备指示所用的上述方法仅是一个示例，并且摄像准备指示可以通过仅使用一个操作构件来发出，或者摄像准备指示可以通过使用其它操作构件来发出。在所有其它情况下，照相机控制单元120判断为尚未发出摄像准备指示，并且使处理进入S405。
在S405中，照相机控制单元120基于在S401至S403中获得的操作状态来判断是否已经发出了摄像指示。更具体地，在释放按钮11的操作状态已从半按下状态转变为完全按下状态的情况下，照相机控制单元120判断为已经发出了摄像指示，并且使处理进入S407。同样地，在触摸面板按钮14的操作状态已从触摸状态转变为未触摸状态或者按钮12的操作状态已从按下状态转变为未按下状态的情况下，照相机控制单元120判断为已经发出了摄像指示，并且使处理进入S407。摄像指示所用的上述方法仅是一个示例，并且摄像指示可以仅通过使用一个操作构件来发出，或者摄像指示可以通过使用其它操作构件来发出。在所有其它情况下，照相机控制单元120判断为尚未发出摄像指示和摄像准备指示，并且使处理进入S408。
在S406中，照相机控制单元120执行缩放视图处理并且发出摄像准备指示(用于执行摄像准备处理的指示)。响应于摄像准备指示，执行以下处理中的至少一个：自动调焦(AF)处理；与曝光设置(自动曝光设置)相对应的利用光圈控制部105进行的光圈调整；在S407中的摄像期间、由快门控制单元执行的曝光时间(快门速度)设置；白平衡调整；以及由增益控制单元103所进行的增益调整。换句话说，摄像准备指示是用以执行以上处理中的至少一个的指示。然后，照相机控制单元120终止显示/记录处理。在缩放视图处理期间，照相机控制单元120控制GPU 142等的处理，使得通过对由摄像器件102、112拍摄的VR图像的范围的一部分进行变换而使相应部分被放大所获得的缩放视图图像绘制在VRAM 143中并且显示在显示单元141上。缩放视图图像是一种顺次更新的实时取景图像。下面将使用图5D来描述缩放视图显示的示例。
在S407中，照相机控制单元120执行记录处理。然后，照相机控制单元120终止图4所示的处理。在记录处理中，照相机控制单元120执行用以将拍摄的VR图像记录在存储介质131中的控制。记录处理还可以被称为摄像。在设置了运动图像记录模式的情况下，照相机控制单元120执行用以开始记录运动图像(VR运动图像等)的记录处理。在拍摄实时取景图像的情况下，单次摄像操作所花费的时间是有限的，因此曝光值可能小于曝光设置处理期间所设置的曝光值。此外，在拍摄实时取景图像时，可以以相对低的分辨率(像素数)来执行拍摄。在记录处理期间，以在曝光设置处理期间所设置的曝光值执行拍摄，并且以比用于拍摄实时取景图像的分辨率高的分辨率执行拍摄。更具体地，在确认了S406中显示的缩放视图图像之后，发出摄像指示，随后执行S407的记录处理。
在S408中，照相机控制单元120执行广角视图处理。在广角视图处理期间，照相机控制单元120控制GPU 142等的处理，使得由拍摄的VR图像的范围的至少一部分构成的广角视图图像绘制在VRAM 143中并显示在显示单元141上。广角视图图像是一种实时取景图像。下面将使用图5A和5B来描述广角视图显示的示例。缩放视图图像的范围比广角视图图像的范围窄或小。换句话说，缩放视图图像显示已经被放大并经历了失真校正或变换(变形)的广角视图图像的一部分。在S409中，照相机控制单元120响应于可由触摸面板13指示的显示范围选择指示来设置缩放视图图像的范围。然后，照相机控制单元120终止显示/记录处理。
图5A至5D示出根据本实施例的显示的示例。在没有执行用于发出摄像准备指示或摄像指示的用户操作的情况下，优选显示广角图像，使得拍摄者可以确认其周围的宽范围。根据本实施例，在这种情况下，响应于S408的广角视图处理，将图5A所示的由摄像器件102拍摄的鱼眼图像501、或者图5B所示的由摄像器件112拍摄的鱼眼图像503显示为广角图像。
在图5A的鱼眼图像501中拍摄被摄体502。当拍摄者触摸被摄体502的附近时，触摸面板13将与触摸位置对应的坐标信息输出到照相机控制单元120。基于来自触摸面板13的坐标信息，照相机控制单元120识别包括触摸位置的范围504(图5C)作为缩放视图图像的范围。如图5C所示，范围504是从VR图像内的与镜头101的光轴相对应的位置、或者换句话说鱼眼图像501的中心位置起径向延伸的范围。
当从图5C所示的状态起执行用于发出摄像准备指示的用户操作时，通过S406的缩放处理，显示单元141上的显示从鱼眼图像501的显示切换为通过对范围504进行变换(变形)和放大而获得的缩放视图图像505的显示。更具体地，GPU 142响应于来自照相机控制单元120的指示，通过从鱼眼图像501中提取范围504并且对范围504的图像实施放大处理和失真校正来生成缩放视图图像505，并将生成的缩放视图图像505绘制在VRAM 143中。结果，VRAM 143中绘制的图像从鱼眼图像501更新为缩放视图图像505，并且显示单元141上的显示从鱼眼图像501的显示切换为缩放视图图像505的显示。
照相机控制单元120基于鱼眼图像501的中心位置与范围504的位置之间的距离来确定用于获得缩放视图图像505的放大处理和失真校正的强度。然后，GPU 142以由照相机控制单元120确定的强度执行放大处理和失真校正。例如，照相机控制单元120确定失真校正的强度为随着距离减小而降低并且随着距离增大而提高。在距离不超过阈值的情况下，照相机控制单元120执行控制，使得失真校正被省略或者以确保VR图像的失真不变的强度来实施。当以VR图像的失真发生改变的强度实施失真校正时，获得其中心部分基本上没有失真的缩放视图图像505。这里，失真是指相对于被摄体的真实图像的失真。
在进行用于发出摄像准备指示的用户操作期间，连续地显示缩放视图图像505。当用于发出摄像准备指示的用户操作终止时，照相机控制单元120执行控制以使显示单元141上的显示从缩放视图图像505的显示恢复为鱼眼图像501或鱼眼图像503的显示。
根据本实施例，如上所述，通过在进行用于发出摄像准备指示的用户操作之前显示诸如鱼眼图像等的广角图像，可以确认照相机100周围的宽范围。然后，通过响应于用于发出摄像准备指示的用户操作而切换为缩放视图显示，可以详细地确认鱼眼图像的一部分。更具体地，在显示广角图像时，拍摄者可以通过进行触摸操作来指定目标被摄体，并且响应于用于发出摄像准备指示的用户操作，将显示切换为目标被摄体的缩放视图显示。结果，可以详细地确认目标被摄体。因此，例如，可以在发出摄像准备指示之前从广角视图显示中粗略地确认照相机100周围的状态，并且通过发出摄像准备指示，可以从缩放视图显示中确认放大的目标被摄体上的面部表情。然后，在目标被摄体微笑的瞬间，可以拍摄目标被摄体的图像。因此，根据本实施例，拍摄者可以更好地确认图像，结果，拍摄者可以在适当的定时执行拍摄，而不会错过照相机会。
注意，尽管以上描述了本发明的优选实施例，但是本发明当然不限于本实施例，并且可以在其精神的范围内进行各种修改和改变。可以适当地将以下描述的各种修改示例与上述实施例进行组合。
例如，在上述示例中，照相机100被配置为包括两个摄像系统，但是本发明也可以应用于包括一个摄像系统或三个以上的摄像系统的照相机。
此外，在上述示例中，在广角视图显示期间无修改地显示VR图像的一部分(即，鱼眼图像之一)，但是本发明不限于此，并且作为替代，在照相机控制单元120的控制下，可以将变换后的图像或VR图像的整个范围显示为广角视图显示。如图6A所示，例如，可以将由两个摄像器件102、112分别拍摄的两个鱼眼图像601、602都显示为广角视图显示。如图6B所示，还可以将与VR图像的整个范围相对应的全景图像603显示为广角视图显示。如图6C所示，还可以将与VR图像的整个范围相对应的圆顶主图像604显示为广角视图显示。还可以将其它格式的图像显示为广角视图显示。
全景图像603是通过将鱼眼图像601、602的各部分几何变换成周围部分和中心部分以将这些鱼眼图像601、602展开和组合而获得的。从图6B中可以明显看出，全景图像603是通过对鱼眼图像601、602进行几何变换、由此将鱼眼图像601、602组合而获得的矩形图像。圆顶主图像604同样是通过几何变换、由此将鱼眼图像601、602组合而获得的。圆顶主图像604示出如同从被摄体上空看到的被摄体。圆顶主图像604的上半部分对应于鱼眼图像601，并且圆顶主图像604的下半部分对应于鱼眼图像602。这些几何变换可以使用表示变换之前的图像坐标与变换之后的图像坐标之间的对应关系的预定信息(表或函数)来实现。
此外，通过记录处理(摄像)所记录的VR图像可以是鱼眼图像、全景图像、圆顶主图像或其它格式的图像。
此外，在上述示例中，根据触摸操作来确定缩放视图图像的范围，但是可以通过其它方法来确定缩放视图图像的范围。例如，照相机控制单元120可以从VR图像(全方位图像)中自动检测预定被摄体(人、面部，车辆、建筑物或植物等)，并自动设置存在预定被摄体的部分作为缩放视图图像的范围。可以使用公知的图像识别功能来检测预定被摄体。此外，在检测到多个被摄体的情况下，可以自动选择要用作主被摄体的被摄体，并且可以以包括所选择的主被摄体的方式确定该缩放视图图像的范围。主被摄体可以通过施加权重的方法来确定，例如，使得具有高对比度的部分、面部、拍摄图像的具有大尺寸的部分、靠近照相机100的部分或登记在照相机100中的人物的面部(通过个人认证检测到的面部)等优先。在通过组合多个图像而获得的VR图像(全景图像或圆顶主图像)上，在多个图像之间存在边界。图6C中的虚线605表示鱼眼图像601和鱼眼图像602之间的边界。照相机控制单元120可自动从VR图像中检测边界并自动确定包括至少一部分边界的部分(例如，图6C中的范围606)作为缩放视图图像的范围。照相机100可以设置具有用于确定缩放视图图像的范围的不同方法(用于获得缩放视图图像的方法)的多个操作模式。
这里，在VR图像上可以存在多个预定被摄体。在对存在预定被摄体的部分进行缩放视图显示的结构中，照相机控制单元120可以执行控制以将与多个预定被摄体其中之一相对应的单个缩放视图图像显示为缩放视图显示，但是不是必须执行该控制。照相机控制单元120可以执行用于在显示单元141上依次显示与多个预定被摄体分别相对应的多个缩放视图图像的控制作为缩放视图显示控制。在该控制期间，照相机控制单元120可自动地或响应于用户操作而在多个缩放视图图像之间切换所显示的缩放视图图像。
此外，在上述示例中，响应于用于发出摄像准备指示的用户操作，将广角视图显示切换为缩放视图显示，但是本发明不限于此。作为替代，在照相机控制单元120的控制下，可以执行缩放视图显示，直到执行用于发出摄像准备指示的用户操作为止，并且响应于用于发出摄像准备指示的用户操作，可以将缩放视图显示切换为广角视图显示。因此，例如，可以在发出摄像准备指示之前确认从照相机100沿特定方向看到的视频，其中该视频已经通过进行缩放视图显示而放大但没有失真并且不会显得不自然。然后，在发出摄像准备指示的情况下，将显示切换为广角视图显示，结果，可以在照相机100的周围发生适合拍摄的事件的瞬间(例如，大量燃放的烟花爆裂的瞬间)执行摄像操作。
此外，不必切换缩放视图显示和广角视图显示。如图7所示，在发出摄像准备指示之前(在摄像待机状态下)，显示缩放视图图像和广角视图图像之一。然后，响应于用于发出摄像准备指示的用户操作，在照相机控制单元120的控制下，将缩放视图图像和广角视图图像之一的显示切换为两个图像的显示。在显示缩放视图图像和广角视图图像两者的情况下，拍摄者可以通过观看广角视图图像来执行摄像而不会错过在照相机100的周围发生适合于拍摄的事件的瞬间。此外，拍摄者可以通过观看缩放视图图像来执行摄像而不会错过在诸如面部表情的变化等的窄范围内发生的照相机会。注意，在摄像待机状态下(在发出摄像准备指示时)，显示缩放视图图像和广角视图图像之一，而不是两者。原因在于，当在摄像待机状态下显示两个图像时，图像处理负荷增加，这导致功耗增加(换言之，为了节能)。
此外，在摄像待机状态下以及在发出摄像准备指示的时间段期间，可以根据操作模式来自动切换缩放视图图像和广角视图图像的显示。例如，在设置了多个摄像模式之一的人物摄像模式(第一操作模式)的情况下，在摄像待机状态下显示广角视图图像，并且响应于摄像准备指示将显示切换为缩放视图图像或这两个图像。这样，如上所述，拍摄者可以在不会错过在诸如面部表情的变化等的窄范围内发生的小的照相机会的情况下执行摄像。同时，在作为多个摄像模式之一的烟花摄像模式、运动摄像模式或风景摄像模式(第二操作模式)下，在摄像待机状态下显示缩放视图图像，并且响应于摄像准备指示而将显示切换为广角视图图像或两个图像。这样，如上所述，拍摄者可以在不会错过在照相机周围的宽范围内发生的事件或在不可预测位置发生的事件的情况下执行摄像。
此外，以上描述为由照相机控制单元120执行的各种类型的控制可以使用单件硬件来实现，或者可以通过将处理分配给多件硬件来实现设备的整体控制。
此外，在上述实施例中，将本发明应用于照相机100的情况作为示例进行描述，但是本发明不限于该示例，并且可以应用于任何能够执行用以显示VR图像的至少一部分的控制的任何电子装置。更具体地，本发明可以应用于个人计算机、PDA、移动电话终端、便携式图像浏览器、具有显示器的打印机装置和数字相框等。本发明还可以应用于音乐播放器、游戏装置、电子书阅读器、平板终端、智能电话、投影装置、家用电器或具有显示器的车载装置等。
此外，本发明不限于摄像设备主体，并且还可以应用于通过利用有线或无线通信与摄像设备(包括网络照相机)进行通信来远程控制摄像设备的控制设备。用于远程控制摄像设备的装置的示例包括智能电话、平板PC和台式PC等。基于在控制设备侧执行的操作和在控制设备侧执行的处理，可以通过从控制设备侧向摄像设备发送实施各种操作和设置的命令来远程控制摄像设备。此外，可以通过有线或无线通信来接收由摄像设备拍摄的实时取景图像并将实时取景图像显示在控制设备侧。
其它实施例
本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (11)

1.一种摄像控制设备，包括：
第一指示单元，其被配置为响应于接收到第一用户操作，发出用以使用摄像单元执行摄像准备处理的指示；
第二指示单元，其被配置为响应于接收到不同于所述第一用户操作的第二用户操作，发出用以使用所述摄像单元执行摄像处理的指示；
获取单元，其被配置为经由所述摄像单元获取鱼眼取景图像；以及
控制单元，其被配置为：
在没有接收到所述第一用户操作时，执行控制以输出用于在显示单元上显示第一图像作为从所述摄像单元接收到并且被顺序地更新的实时取景图像的图像信号，所述第一图像与具有失真并且未经过用于校正所述失真的特定校正处理的鱼眼取景图像相对应；
在接收到所述第一用户操作的情况下，执行控制以输出用于在所述显示单元上显示第二图像作为从所述摄像单元接收到并且被顺序地更新的实时取景图像的图像信号并且执行所述摄像准备处理，所述第二图像与通过对所述鱼眼取景图像的一部分进行所述特定校正处理而生成并且被放大和显示的图像相对应，以及
在接收到所述第二用户操作的情况下，执行控制以输出用于在存储介质中记录第三图像的图像信号，所述第三图像与所述鱼眼取景图像相对应，
其中，所述鱼眼取景图像中的所述第一图像和所述第三图像各自的范围比所述鱼眼取景图像中的所述第二图像的范围宽。
2.根据权利要求1所述的摄像控制设备，其中，所述第一图像与所述鱼眼取景图像的整个范围相对应。
3.根据权利要求1所述的摄像控制设备，其中，所述第三图像与所述鱼眼取景图像的整个范围相对应。
4.根据权利要求1所述的摄像控制设备，还包括作为操作单元的快门按钮和被配置为能够检测所述快门按钮上的按压操作的检测单元，
其中，所述第一用户操作是半按下所述快门按钮的操作，以及所述第二用户操作是完全按下所述快门按钮的操作。
5.根据权利要求1所述的摄像控制设备，其中，还包括作为操作单元的触摸面板和被配置为能够检测所述触摸面板上的操作状态的触摸检测单元，
其中，在所述第一用户操作中，所述触摸面板的显示面上显示的特定显示项上的操作状态是触摸状态，并且在所述第二用户操作中，所述特定显示项上的操作状态是非触摸状态。
6.根据权利要求1所述的摄像控制设备，其中，还包括所述摄像单元，该摄像单元包括用于分别拍摄多个鱼眼取景图像的多个摄像器件。
7.根据权利要求6所述的摄像控制设备，其中，所述多个鱼眼取景图像被合成。
8.根据权利要求1所述的摄像控制设备，其中，所述第二图像与所述第一图像中的存在预定被摄体的一部分相对应。
9.根据权利要求1所述的摄像控制设备，其中，所述摄像准备处理包括自动调焦、曝光设置、光圈调整、快门速度设置、白平衡调整和增益调整中的至少一个。
10.一种摄像控制设备的控制方法，包括：
响应于接收到第一用户操作，发出用以使用摄像单元执行摄像准备处理的指示；
响应于接收到不同于所述第一用户操作的第二用户操作，发出用以使用所述摄像单元执行摄像处理的指示；
经由所述摄像单元获取鱼眼取景图像；
在没有接收到所述第一用户操作时，执行控制以输出用于在显示单元上显示第一图像作为从所述摄像单元接收到并且被顺序地更新的实时取景图像的图像信号，所述第一图像与具有失真并且未经过用于校正所述失真的特定校正处理的鱼眼取景图像相对应；
在接收到所述第一用户操作的情况下，执行控制以输出用于在所述显示单元上显示第二图像作为从所述摄像单元接收到并且被顺序地更新的实时取景图像的图像信号并且执行所述摄像准备处理，所述第二图像与通过对所述鱼眼取景图像的一部分进行所述特定校正处理而生成并且被放大和显示的图像相对应，以及
在接收到所述第二用户操作的情况下，执行控制以输出用于在存储介质中记录第三图像的图像信号，所述第三图像与所述鱼眼取景图像相对应，
其中，所述鱼眼取景图像中的所述第一图像和所述第三图像各自的范围比所述鱼眼取景图像中的所述第二图像的范围宽。
11.一种计算机可读介质，其存储程序，其中所述程序使计算机执行：
响应于接收到第一用户操作，发出用以使用摄像单元执行摄像准备处理的指示；
响应于接收到不同于所述第一用户操作的第二用户操作，发出用以使用所述摄像单元执行摄像处理的指示；
经由所述摄像单元获取鱼眼取景图像；
在没有接收到所述第一用户操作时，执行控制以输出用于在显示单元上显示第一图像作为从所述摄像单元接收到并且被顺序地更新的实时取景图像的图像信号，所述第一图像与具有失真并且未经过用于校正所述失真的特定校正处理的鱼眼取景图像相对应；
在接收到所述第一用户操作的情况下，执行控制以输出用于在所述显示单元上显示第二图像作为从所述摄像单元接收到并且被顺序地更新的实时取景图像的图像信号并且执行所述摄像准备处理，所述第二图像与通过对所述鱼眼取景图像的一部分进行所述特定校正处理而生成并且被放大和显示的图像相对应，以及
在接收到所述第二用户操作的情况下，执行控制以输出用于在存储介质中记录第三图像的图像信号，所述第三图像与所述鱼眼取景图像相对应，
其中，所述鱼眼取景图像中的所述第一图像和所述第三图像各自的范围比所述鱼眼取景图像中的所述第二图像的范围宽。
CN201810722355.XA 2017-06-29 2018-06-29 摄像控制设备、其控制方法及计算机可读介质 Active CN109218606B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-127166 2017-06-29
JP2017127166A JP7000050B2 (ja) 2017-06-29 2017-06-29 撮像制御装置及びその制御方法

Publications (2)

Publication Number Publication Date
CN109218606A CN109218606A (zh) 2019-01-15
CN109218606B true CN109218606B (zh) 2021-11-19

Family

ID=63042829

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810722355.XA Active CN109218606B (zh) 2017-06-29 2018-06-29 摄像控制设备、其控制方法及计算机可读介质

Country Status (6)

Country Link
US (1) US10645278B2 (zh)
JP (1) JP7000050B2 (zh)
KR (1) KR102235231B1 (zh)
CN (1) CN109218606B (zh)
DE (1) DE102018115437A1 (zh)
GB (1) GB2565634B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10593014B2 (en) * 2018-03-26 2020-03-17 Ricoh Company, Ltd. Image processing apparatus, image processing system, image capturing system, image processing method
US11128764B2 (en) * 2018-05-17 2021-09-21 Canon Kabushiki Kaisha Imaging apparatus, control method, and non-transitory computer readable medium
JP7267764B2 (ja) * 2019-02-08 2023-05-02 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体
JP7204511B2 (ja) 2019-02-12 2023-01-16 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム
JP7350511B2 (ja) 2019-05-14 2023-09-26 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体
CN110602401A (zh) * 2019-09-17 2019-12-20 维沃移动通信有限公司 一种拍照方法及终端
CN113038117B (zh) * 2021-03-08 2022-09-09 烽火通信科技股份有限公司 一种基于多视角的全景播放方法与装置
JP2022183843A (ja) 2021-05-31 2022-12-13 キヤノン株式会社 電子機器及びその制御方法及びプログラム及び記録媒体

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009175202A (ja) * 2008-01-22 2009-08-06 Nikon Corp 撮影レンズ、これを搭載する光学装置および像ブレ補正方法
CN104331860A (zh) * 2014-11-24 2015-02-04 小米科技有限责任公司 图片查看方法和装置
CN104537616A (zh) * 2014-12-20 2015-04-22 中国科学院西安光学精密机械研究所 鱼眼图像畸变的校正方法
CN106101687A (zh) * 2016-07-25 2016-11-09 深圳市同盛绿色科技有限公司 Vr图像拍摄装置及其基于移动终端的vr图像拍摄系统
CN106796344A (zh) * 2014-10-07 2017-05-31 艾尔比特系统有限公司 锁定在感兴趣对象上的放大图像的头戴式显示

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6084598A (en) * 1998-04-23 2000-07-04 Chekerylla; James Apparatus for modifying graphic images
US7353086B2 (en) * 2002-11-19 2008-04-01 Timothy James Ennis Methods and systems for providing a rearward field of view for use with motorcycles
US7229226B2 (en) * 2003-03-20 2007-06-12 Silverbrook Research Pty Ltd Display device having pagewidth printhead adjacent lower edge of housing
US7599255B2 (en) * 2003-09-05 2009-10-06 Kent Dennis C Device for displaying time in selectable display patterns and method of using the same
US7774712B2 (en) * 2004-12-31 2010-08-10 A Far Site Better, Llc Methods and systems for displaying an enlarged image
US7230523B2 (en) * 2005-01-07 2007-06-12 Delphi Technologies, Inc. Vehicular rear view mirror/video display
JP2007116610A (ja) * 2005-10-24 2007-05-10 Olympus Imaging Corp 撮影装置及び撮影方法
US8237807B2 (en) * 2008-07-24 2012-08-07 Apple Inc. Image capturing device with touch screen for adjusting camera settings
WO2010071053A1 (ja) * 2008-12-18 2010-06-24 アイシン精機株式会社 表示装置
JP5306266B2 (ja) * 2010-03-15 2013-10-02 キヤノン株式会社 撮像装置及びその制御方法
WO2011132364A1 (ja) * 2010-04-19 2011-10-27 パナソニック株式会社 立体画像撮影装置および立体画像撮影方法
WO2012071466A2 (en) * 2010-11-24 2012-05-31 Aria Glassworks, Inc. System and method for acquiring virtual and augmented reality scenes by a user
JP5742210B2 (ja) * 2010-12-22 2015-07-01 ソニー株式会社 撮像装置、画像処理装置、画像処理方法およびプログラム
JP5625887B2 (ja) * 2010-12-22 2014-11-19 ソニー株式会社 撮像装置、その制御方法およびプログラム
US20180032997A1 (en) * 2012-10-09 2018-02-01 George A. Gordon System, method, and computer program product for determining whether to prompt an action by a platform in connection with a mobile device
GB201208088D0 (en) * 2012-05-09 2012-06-20 Ncam Sollutions Ltd Ncam
JP6039328B2 (ja) * 2012-09-14 2016-12-07 キヤノン株式会社 撮影制御装置および撮像装置の制御方法
JP2014222825A (ja) 2013-05-13 2014-11-27 キヤノン株式会社 映像処理装置および映像処理方法
JP6291748B2 (ja) * 2013-08-29 2018-03-14 株式会社リコー 撮像装置、撮像方法、及びプログラム
FR3028767B1 (fr) * 2014-11-26 2017-02-10 Parrot Systeme video pour le pilotage d'un drone en mode immersif
JP2016115965A (ja) * 2014-12-11 2016-06-23 ソニー株式会社 医療用眼鏡型表示装、情報処理装置及び情報処理方法
CN105872349A (zh) * 2015-01-23 2016-08-17 中兴通讯股份有限公司 拍摄方法、拍摄装置及移动终端
JP6476041B2 (ja) * 2015-03-31 2019-02-27 株式会社Ａｚｅ 医用画像診断装置、その制御方法、及びプログラム
US10300362B2 (en) * 2015-04-23 2019-05-28 Win Reality, Llc Virtual reality sports training systems and methods
US10222619B2 (en) * 2015-07-12 2019-03-05 Steven Sounyoung Yu Head-worn image display apparatus for stereoscopic microsurgery
JP6627352B2 (ja) * 2015-09-15 2020-01-08 カシオ計算機株式会社 画像表示装置、画像表示方法及びプログラム
JP2017085466A (ja) * 2015-10-30 2017-05-18 キヤノン株式会社 撮像装置、及びその制御方法
CN105455285B (zh) * 2015-12-31 2019-02-12 北京小鸟看看科技有限公司 一种虚拟现实头盔适配方法
US10176726B2 (en) * 2016-02-25 2019-01-08 Freedom Scientific, Inc. Handheld, portable vision aid device and vision aid system
JP6278575B1 (ja) * 2016-11-21 2018-02-14 株式会社コナミデジタルエンタテインメント ゲーム制御装置、ゲームシステム、及びプログラム
WO2018097831A1 (en) * 2016-11-24 2018-05-31 Smith Joshua R Light field capture and rendering for head-mounted displays
CN106791377B (zh) * 2016-11-29 2019-09-27 Oppo广东移动通信有限公司 控制方法、控制装置及电子装置
KR20180073327A (ko) * 2016-12-22 2018-07-02 삼성전자주식회사 영상 표시 방법, 저장 매체 및 전자 장치
KR102623391B1 (ko) * 2017-01-10 2024-01-11 삼성전자주식회사 영상 출력 방법 및 이를 지원하는 전자 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009175202A (ja) * 2008-01-22 2009-08-06 Nikon Corp 撮影レンズ、これを搭載する光学装置および像ブレ補正方法
CN106796344A (zh) * 2014-10-07 2017-05-31 艾尔比特系统有限公司 锁定在感兴趣对象上的放大图像的头戴式显示
CN104331860A (zh) * 2014-11-24 2015-02-04 小米科技有限责任公司 图片查看方法和装置
CN104537616A (zh) * 2014-12-20 2015-04-22 中国科学院西安光学精密机械研究所 鱼眼图像畸变的校正方法
CN106101687A (zh) * 2016-07-25 2016-11-09 深圳市同盛绿色科技有限公司 Vr图像拍摄装置及其基于移动终端的vr图像拍摄系统

Also Published As

Publication number Publication date
GB2565634B (en) 2020-12-02
JP7000050B2 (ja) 2022-01-19
KR102235231B1 (ko) 2021-04-02
DE102018115437A1 (de) 2019-01-03
US20190007609A1 (en) 2019-01-03
CN109218606A (zh) 2019-01-15
GB201810400D0 (en) 2018-08-08
KR20190002346A (ko) 2019-01-08
JP2019012881A (ja) 2019-01-24
US10645278B2 (en) 2020-05-05
GB2565634A (en) 2019-02-20

Similar Documents

Publication Publication Date Title
CN109218606B (zh) 摄像控制设备、其控制方法及计算机可读介质
US9578260B2 (en) Digital photographing apparatus and method of controlling the digital photographing apparatus
EP3346329B1 (en) Image processing method and apparatus
US8212895B2 (en) Digital camera system with portrait effect
US11050925B2 (en) Electronic device, control method for electronic device, and non-transitory computer readable medium
WO2015194084A1 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
CN108932701B (zh) 信息处理装置、信息处理方法和非暂时性存储介质
US20220400243A1 (en) Image processing apparatus and image processing method
CN110881097B (zh) 显示控制设备、控制方法和计算机可读介质
WO2021185374A1 (zh) 一种拍摄图像的方法及电子设备
US11917295B2 (en) Method for correcting shaking at high magnification and electronic device therefor
CN108476290B (zh) 用于提供全景图像的电子装置及其控制方法
CN107580157B (zh) 图像处理装置、图像处理方法
JP6673459B2 (ja) 画像処理装置、画像処理システム及びプログラム
CN111953870B (zh) 电子设备、电子设备的控制方法和计算机可读介质
WO2017159014A1 (ja) 画像処理装置、画像処理方法及び画像処理システム
JP7176277B2 (ja) 配信装置、カメラ装置、配信システム、配信方法及び配信プログラム
US11558599B2 (en) Electronic apparatus, control method for electronic apparatus, and non-transitory computer-readable storage medium
US11843894B2 (en) Electronic apparatus, method of controlling the same, and storage medium
US20230269483A1 (en) Electronic device and electronic device control method
US11750916B2 (en) Image processing apparatus, image processing method, and non-transitory computer readable medium
JP2024084281A (ja) 撮像装置の制御装置、方法及びプログラム
CN117043827A (zh) 图像处理方法、记录介质、图像处理装置以及摄像装置
CN116782014A (zh) 摄像设备及其控制方法和计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant