CN108476290B - 用于提供全景图像的电子装置及其控制方法 - Google Patents

用于提供全景图像的电子装置及其控制方法 Download PDF

Info

Publication number
CN108476290B
CN108476290B CN201780006204.8A CN201780006204A CN108476290B CN 108476290 B CN108476290 B CN 108476290B CN 201780006204 A CN201780006204 A CN 201780006204A CN 108476290 B CN108476290 B CN 108476290B
Authority
CN
China
Prior art keywords
cameras
image
camera
photographing
photographing setting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780006204.8A
Other languages
English (en)
Other versions
CN108476290A (zh
Inventor
安晋衡
丁载镒
金玟澈
金勇局
金勇振
赵成来
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority claimed from PCT/KR2017/002677 external-priority patent/WO2017155365A1/en
Publication of CN108476290A publication Critical patent/CN108476290A/zh
Application granted granted Critical
Publication of CN108476290B publication Critical patent/CN108476290B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/218—Image signal generators using stereoscopic image cameras using a single 2D image sensor using spatial multiplexing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Abstract

提供了一种用于提供全景图像的电子装置及其控制方法。该方法包括：获取分别通过多个相机拍摄的第一图像的拍摄设置值；基于获取到的拍摄设置值重置要应用于所述多个相机中的至少一个的拍摄设置值；以及生成全景图像，所述全景图像包括使用重置的拍摄设置值通过所述多个相机拍摄的第二图像。

Description

用于提供全景图像的电子装置及其控制方法
技术领域
符合示例实施例的装置和方法涉及电子装置及其控制方法，并且更具体地，涉及与被配置为在电子装置处用通过多个相机拍摄的图像提供全景图像的电子装置及其控制方法一致的技术。
背景技术
拍摄装置可以将通过多个相机拍摄的图像合成为全景图像，但是在合成来自多个相机的图像时，拍摄装置可以不执行通过相应相机拍摄的图像的颜色和曝光补偿。这导致全景图像的多个构成图像当中的接口平面处的亮度、颜色等的差异，从而导致不自然的全景图像。
为了改善全景图像的构成图像的接口平面处的亮度和颜色差异的问题，相关技术基于预设的拍摄(photograph)设置值来补偿通过多个相机拍摄的图像。在上述情况下，可以解决在全景图像的多个构成图像当中的接口平面处生成的亮度和颜色差异的问题，但是以全景图像的整体图像质量为代价。
发明内容
技术问题
本发明性构思的示例实施例可以克服上述缺点以及以上未描述的其它缺点。而且，不需要本发明性构思来克服上述缺点，并且本发明性构思的示例实施例可以不克服上述任何问题。
示例实施例在电子装置处从通过多个照相机拍摄的图像提供具有改善的整体图像质量的全景图像或虚拟现实(VR)图像(诸如360度环绕全景)。
问题的解决方案
根据示例实施例的一方面，提供了一种用于提供全景图像的电子装置的方法，所述方法包括：获取分别通过多个相机拍摄的第一图像的拍摄设置值；基于获取到的拍摄设置值重置要应用于所述多个相机中的至少一个的拍摄设置值；以及生成全景图像，所述全景图像包括使用重置的拍摄设置值通过所述多个相机拍摄的第二图像。
重置可以包括通过所述多个相机的拍摄设置值的平均值来重置要由所述多个相机分别使用的拍摄设置值。
该方法还可以包括，基于对用于参考相机设置的图标的选择，显示包括分别与所述多个相机相对应的对象的列表；并且其中，所述重置包括：基于从所述对象中选择对象，通过与所选择的对象相对应的相机的拍摄设置值重置其它相机的拍摄设置值中的每一个。
重置可以包括：将从所述多个相机当中的第一相机获取到的拍摄设置值重置为第一拍摄设置值，并且将从第二相机获取到的拍摄设置值重置为第二拍摄设置值。
获取可以包括以预设的时间间隔分别从通过所述多个相机拍摄的视频的图像帧中获取拍摄设置值。
该方法还可以包括：感测所述电子装置的运动；以及基于感测到的电子装置的运动分别从拍摄到的视频的图像帧中重新获取拍摄设置值。
该方法还可以包括：确定从所述多个相机获取到的拍摄设置值之间的差是否在预设的阈值范围之外，其中，所述重置包括：响应于确定获取到的拍摄设置值之间的差在预设的阈值范围之外，基于从所述多个相机获取到的拍摄设置值来重置要应用于所述多个相机中的至少一个的拍摄设置值。
所述拍摄设置值包括拍摄曝光值和拍摄颜色值中的任一个或两个。
获取可以包括：由图像信号处理器(ISP)获取所述多个相机的拍摄设置值，其中，所述重置包括由数字信号处理器(DSP)基于获取到的拍摄设置值来重置要应用于所述多个相机中的至少一个的拍摄设置值，以及其中，所述方法还包括：基于从ISP接收到的控制命令，由所述相机使用重置的拍摄设置值来拍摄所述第二图像。
根据另一个示例性实施例的一方面，提供了一种用于提供全景图像的电子装置，所述电子装置包括：多个相机，被配置为拍摄第一图像；以及处理器，被配置为：获取分别通过所述多个相机拍摄的图像的拍摄设置值；基于获取到的拍摄设置值重置要应用于所述多个相机中的至少一个的拍摄设置值，所述拍摄设置值包括拍摄曝光值和拍摄颜色值中的任一个或两个；基于重置的拍摄设置值控制所述多个相机拍摄第二图像；以及生成包括所拍摄的第二图像的全景图像，其中拍摄设置值包括拍摄曝光值和拍摄颜色值中的至少一个。
处理器可以被配置为通过所述多个相机的拍摄设置值的平均值来重置要由所述多个相机分别使用的拍摄设置值。
该电子装置还可以包括显示器，被配置为基于对用于参考相机设置的图标的选择来显示包括分别与所述多个相机相对应的对象的列表，其中，所述处理器还被配置为基于从所述对象中选择对象，通过与所选择的对象相对应的相机的拍摄设置值重置其它相机的拍摄设置值中的每一个。
处理器还可以被配置为将从所述多个相机中的第一相机获取到的拍摄设置值重置为第一拍摄设置值，并且将从第二相机获取到的拍摄设置值重置为第二拍摄设置值。
处理器还可以被配置为以预设的时间间隔分别从通过所述多个相机拍摄的视频的图像帧中获取拍摄设置值。
电子装置还可以包括：传感器，被配置为感测所述电子装置的运动，其中，所述处理器还被配置为基于感测到的电子装置的运动分别从拍摄到的视频的图像帧中重新获取拍摄设置值。
处理器还可以被配置为确定从所述多个相机获取到的拍摄设置值之间的差是否在预设的阈值范围之外，并且，响应于确定获取到的拍摄设置值之间的差在预设的阈值范围之外，基于从所述多个相机获取到的拍摄设置值来重置要应用于所述多个相机中的至少一个的拍摄设置值。
处理器可以包括：图像信号处理器(ISP)，被配置获取所述多个相机的拍摄设置值和用于拍摄到的图像的信号处理图像数据，并且，数字信号处理器(DSP)被配置为基于获取到的拍摄设置值来重置要应用于所述多个相机中的至少一个的拍摄设置值，其中，所述ISP还被配置为基于重置的拍摄设置值控制所述多个相机拍摄所述第二图像。
根据另一个示例实施例的一方面，提供了一种用于在虚拟现实环境中提供全景图像的电子装置，该电子装置用于在虚拟现实环境中提供全景图像，该电子装置包括：显示器，被配置为显示包括图像的第一全景图像；传感器，被配置为感测用户的注视；以及处理器，被配置为基于感测到的注视来确定用户正在注视的第一全景图像的区域，并且通过用图像当中与所确定的区域相对应的图像的图像设置值来处理其它图像生成第二全景图像。
处理器还可以被配置为，当确定用户正在注视的显示的第一全景图像的区域是第一区域时，通过使用与第一区域相对应的第一图像的图像设置值处理第一全景图像的第二图像来生成第二全景图像。
处理器还可以被配置为，当确定用户正在注视的显示的第一全景图像的区域已经从第一区域移动到第二区域时，通过使用与所确定的区域移动到的第一区域相对应的第一图像的图像设置值处理与确定的第二区域相对应的第二图像来生成第二全景图像。
发明的有益效果
如上所述，根据本公开的示例性实施例，电子装置可以从在多个相机处拍摄的图像生成自然整体的全景图像。此外，根据示例性实施例，多个相机可以基于补偿后的拍摄设置值分别拍摄图像。因此，与相关的图像处理过程相比，电子装置可以通过补偿多个图像来提供生成全景图像的更简单的过程。
附图说明
通过参考附图描述本发明性构思的示例实施例，本发明构思的上述和/或其它方面将变得更加明显，其中：
图1A是根据示例实施例的电子装置的视图；
图1B是根据示例实施例的电子装置的示意性框图；
图2是根据示例实施例的处理器的详细框图；
图3是根据示例实施例的包括多个ISP的处理器的第一详细框图；
图4是根据另一个示例实施例的包括多个ISP的处理器的第二详细框图；
图5是图示根据示例实施例的在电子装置处生成根据通过多个相机拍摄的图像生成的VR图像的视图；
图6A和6B是图示根据示例实施例的基于与用户命令相对应的相机的拍摄设置值在电子装置处重置其它相机的拍摄设置值的视图；
图7是根据示例实施例的用于提供虚拟现实(VR)环境的电子装置的框图；
图8是图示根据示例实施例的用于提供VR环境的电子装置的图，其显示根据用户的第一注视重建的全景图像；
图9是图示根据示例实施例的用于提供VR环境的电子装置的图，其显示根据用户的第二注视重建的全景图像；
图10是根据示例实施例的电子装置的详细框图；
图11是根据示例实施例的为解释使用多个相机在电子装置处拍摄全景图像的方法而提供的流程图；以及
图12是根据示例实施例的为解释用于在电子装置处提供全景图像以提供VR环境的方法而提供的流程图。
具体实施方式
在详细描述示例实施例之前，将首先解释描述说明书和附图的方式。首先，说明书和权利要求书中使用的术语是在考虑本公开的功能的同时从当前和广泛使用的一般术语中选择的，但是这些可以根据本领域技术人员的意图、先例以及新技术的出现而有所不同。另外，在一些情况下，术语可以由申请人任意定义。这种术语可以如本文所定义的那样来解释，或者除非另外定义，否则本文使用的术语可以基于相关技术中的总体描述和一般技术知识来解释。
另外，在本文随附的相应附图中使用的相同标号或符号是指被配置为执行基本上相同功能的部件或元件。为了便于解释和理解，在不同示例实施例的描述中使用相同的标号或符号。即，即使在不同附图中用相同的标号图示元件时，这也不一定意味着多个附图是指单个实施例。
另外，为了区分元件，说明书和权利要求可以使用包括诸如“第一”、“第二”等的序数的术语。序数被用于彼此区分完全相同或相似的元件，并且使用这样的序数不会被解释为限制该术语的含义。在一个示例中，与序数组合的元件可以不限于该元件被使用或由那个数字排列的次序。各个序数可以彼此替换。
除非本文另有说明，否则单数表达涵盖复数表达。诸如“包括”或“由......组成”的术语在本文中仅用于指定特性、数字、步骤、操作、元件、部分或这些的组合的存在，但不排除添加一个或多个其它特性、数字、步骤、操作、元件、部分或这些的组合的存在或可能性。
诸如“模块”、“单元”、“部分”等之类的术语在本文中仅用于指执行至少一个功能或操作的元件，并且这种元件可以被实现为硬件或软件、或者硬件和软件的组合。另外，除非每一个都要被实现为单独的硬件，否则多个“模块”、“单元”或者“部分”可以被集成到至少一个模块或芯片中，以被实现为至少一个处理器。
另外，在本公开的示例实施例中，当声明一部分连接到另一部分时，其不仅涵盖直接连接，而且还涵盖可以经由其它介质进行的间接连接。另外，当声明一部分包括元件时，除非有相反说明，否则这意味着该部分可以附加地包括其它元件，而不排除其它元件。
在下文中，将参考附图描述示例实施例。
图1A是根据示例实施例的电子装置的视图，并且图1B是根据示例实施例的电子装置的示意性框图。
电子装置100能够提供诸如全景图像或360度环绕全景的虚拟现实(VR)图像10，并且可以是VR设备100-1、智能电话100-2和VR可穿戴设备100-3，如图1A所示。参考图1B，电子装置100包括两个或更多个相机110，以及配置为控制电子装置100的部件的整体操作的处理器120。
为了便于解释，本文假设电子装置100包括第一相机110-1和第二相机110-2。
处理器120可以控制在第一相机110-1和第二相机110-2处的图像拍摄，或者执行分别从第一相机110-1和第二相机110-2拍摄的图像的图像处理。
当从第一相机110-1和第二相机110-2拍摄图像时，处理器120获取第一相机110-1和第二相机110-2的拍摄设置值。
本文所使用的“拍摄设置值”可以指用于在第一相机110-1和第二相机110-2处拍摄图像的拍摄曝光值和拍摄颜色值中的任一个或两个。当获取到第一相机110-1和第二相机110-2的拍摄设置值时，处理器120基于所获取的用于第一相机110-1和第二相机110-2的拍摄设置值来重置要应用于第一相机110-1和第二相机110-2中的任一个或两个的拍摄设置值。然后，处理器120基于重置拍摄设置值来控制第一相机110-1和第二相机110-2拍摄图像。响应于这种控制命令，第一相机110-1和第二相机110-2基于由处理器120重置的拍摄设置值来拍摄图像。
因此，处理器120可以使用基于重置的拍摄设置值从第一相机110-1和第二相机110-2拍摄的多个图像来生成全景图像。
在重置第一相机110-1和第二相机110-2的拍摄设置值之前，第一相机110-1和第二相机110-2可以基于第一相机110-1与第二相机110-2的拍摄设置值之间的相似性来确定是否重置第一相机110-1和第二相机110-2的拍摄设置值。
处理器120确定从第一相机110-1和第二相机110-2获取到的拍摄设置值的差是否在预设的阈值范围内。当确定结果指示从第一相机110-1和第二相机110-2获取到的拍摄设置值的差在预设的阈值范围内时，处理器120确定第一相机110-1和第二相机110-2的拍摄设置值相似(similar)，并且控制第一相机110-1和第二相机110-2基于先前应用于第一相机110-1和第二相机110-2的拍摄设置值拍摄图像。
当从第一相机110-1和第二相机110-2获取到的拍摄设置值的差不在预设的阈值范围内时，处理器120可以确定第一相机110-1与第二相机110-2的拍摄设置值是不同的，并且基于下面描述的示例实施例来重置要应用于第一相机110-1和第二相机110-2的拍摄设置值。
根据示例实施例，处理器120可以用第一相机110-1和第二相机110-2的拍摄设置值的平均值来重置第一相机110-1和第二相机110-2的拍摄设置值。本文使用的拍摄设置值可以指第一相机110-1和第二相机110-2中的每一个的拍摄曝光值或拍摄颜色值。
当通过第一相机110-1和第二相机110-2拍摄图像时，处理器120在拍摄图像时获取为第一相机110-1和第二相机110-2设置的拍摄设置值。然后，处理器120可以根据为第一相机110-1和第二相机110-2设置的拍摄设置值来计算平均值，并且通过所计算的值来重置用于第一相机110-1和第二相机110-2的拍摄设置值。
例如，当获取到用于从第一相机110-1和第二相机110-2拍摄的图像的拍摄设置值时，处理器120可以根据从第一相机110-1和第二相机110-2获取到的拍摄曝光值来计算平均值，并且通过所计算的平均值来重置用于第一相机110-1和第二相机110-2的拍摄曝光值。
当用于第一相机110-1和第二相机110-2的拍摄设置值被重置时，响应于来自处理器120的控制命令，第一相机110-1和第二相机110-2基于重置的拍摄设置值来拍摄图像。即，第一相机110-1和第二相机110-2可以基于重置的拍摄设置值来拍摄具有相同拍摄曝光值或拍摄颜色值的图像。因此，处理器120可以使用基于重置的拍摄设置值在第一相机110-1和第二相机110-2处拍摄的各自的图像来生成全景图像或VR图像。
根据另一个示例实施例，处理器120可以用第一相机110-1和第二相机110-2的拍摄设置值中的最高拍摄设置值的平均值以及第一相机110-1和第二相机110-2的拍摄设置值的平均值的平均值来重置用于第一相机110-1和第二相机110-2的拍摄设置值。
当通过第一相机110-1和第二相机110-2拍摄图像时，处理器120在拍摄图像时获取为第一相机110-1和第二相机110-2设置的拍摄设置值当中的最高拍摄设置值。然后，处理器120根据为第一相机110-1和第二相机110-2设置的拍摄设置值来计算平均值。之后，处理器120计算第一相机110-1和第二相机110-2的拍摄设置值的最高拍摄设置值以及先前根据第一相机110-1和第二相机110-2的拍摄设置值计算的平均值的平均值，并且通过所计算的平均值来重置用于第一相机110-1和第二相机110-2的拍摄设置值。
例如，可以获取从第一相机110-1和第二相机110-2拍摄的图像的拍摄曝光值，并且第一相机110-1的拍摄曝光值可以大于第二相机110-2的拍摄曝光值。
在上面的示例中，处理器120可以基于用第一相机110-1的拍摄曝光值和根据第一相机110-1和第二相机110-2的拍摄曝光值计算的拍摄曝光值计算的平均值来重置要应用于第一相机110-1和第二相机110-2的拍摄曝光值。
当第一相机110-1和第二相机110-2的拍摄曝光值被重置时，响应于来自处理器120的控制命令，第一相机110-1和第二相机110-2基于重置的拍摄曝光值来拍摄图像。即，第一相机110-1和第二相机110-2可以基于重置的拍摄曝光值来拍摄具有相同曝光值或颜色值的图像。因此，处理器120可以使用基于重置的拍摄曝光值从第一相机110-1和第二相机110-2拍摄的各自的图像来生成全景图像或VR图像。
在另一个示例实施例中，处理器120可以基于第一相机110-1和第二相机110-2的拍摄设置值的最低拍摄设置值的平均值以及第一相机110-1和第二相机110-2的平均值的平均值来重置第一相机110-1和第二相机110-2的拍摄设置值。
当通过第一相机110-1和第二相机110-2拍摄图像时，处理器120在拍摄图像时获取为第一相机110-1和第二相机110-2设置的拍摄设置值当中的最低拍摄设置值。然后，处理器120计算为第一相机110-1和第二相机110-2设置的拍摄设置值的平均值。然后，处理器120计算第一相机110-1和第二相机110-2的拍摄设置值的最低拍摄设置值和先前根据第一相机110-1和第二相机110-2的拍摄设置值计算的平均值的平均值，并且通过所计算的平均值来重置第一相机110-1和第二相机110-2的拍摄设置信息。
例如，可以获取从第一相机110-1和第二相机110-2拍摄的图像的拍摄曝光值，并且第二相机110-2的拍摄曝光值可以小于第一相机110-1的拍摄曝光值。
在上述示例中，处理器120可以基于根据第二相机110-2的拍摄曝光值和第一相机110-1和第二相机110-2的拍摄曝光值所计算的平均值来重置要应用于第一相机110-1和第二相机110-2的拍摄曝光值。
当第一相机110-1和第二相机110-2的拍摄设置值被重置时，响应于来自处理器120的控制命令，第一相机110-1和第二相机110-2基于重置的拍摄设置值来拍摄图像。即，第一相机110-1和第二相机110-2可以基于重置的拍摄设置值来拍摄具有相同曝光值或颜色值的图像。因此，处理器120可以使用基于重置的拍摄设置值从第一相机110-1和第二相机110-2拍摄的各自的图像来生成全景图像或VR图像。
在又一个示例实施例中，处理器120可以使用第一相机110-1和第二相机110-2的拍摄设置值当中与用户命令相对应的相机的拍摄设置值来重置其余相机的拍摄设置值。
响应于用户命令，处理器120控制图7的显示器140以显示包括用于参考相机设置的图标的拍摄设置UI。因此，显示器140显示包括用于参考相机设置的图标的拍摄设置UI。下面将详细描述用于显示拍摄设置UI的显示器140。
在拍摄设置UI正在被显示的情况下，当选择包括在拍摄设置UI中的用于参考相机设置的图标时，第一相机110-1和第二相机110-2每一个均控制显示器140显示包括与第一相机110-1和第二相机110-2中的每一个相对应的对象的列表UI。响应于控制命令，显示器140在屏幕上显示包括与第一相机110-1和第二相机110-2中的每一个相对应的对象的列表UI。响应于选择显示在屏幕上的列表UI中包括的多个对象之一的命令，处理器120可以使用第一相机110-1和第二相机110-2当中与所选择的对象相对应的相机的拍摄设置值来重置其它相机的拍摄设置值。
例如，当用户选择与第一相机110-1和第二相机110-2当中的第一相机110-1相对应的对象时，处理器120可以通过用于第一相机110-1的拍摄设置值来重置用于第二相机110-2的拍摄设置值。当用于第二相机110-2的拍摄设置值被第一相机110-1的拍摄设置值重置时，第一相机110-1和第二相机110-2可以拍摄具有相同曝光或颜色值的图像。因此，处理器120可以使用基于重置的拍摄设置值分别从第一相机110-1和第二相机110-2拍摄的图像来生成全景图像或VR图像。
在又一个示例实施例中，处理器120可以通过第一拍摄设置值重置从第一相机110-1和第二相机110-2当中的第一相机110-1获取到的拍摄设置值，并且用第二拍摄设置值重置从第二相机110-2获取到的拍摄设置值。
当从第一相机110-1和第二相机110-2获取拍摄设置值时，处理器120根据获取到的拍摄设置值计算平均值。然后，处理器120可以参考所计算的平均值在预设的阈值范围内不同地重置要应用于第一相机110-1和第二相机110-2的拍摄设置值。
例如，第一相机110-1的拍摄曝光值可以是5，并且第二相机110-2的拍摄曝光值可以是10，在这种情况下，能够根据第一相机110-1和第二相机110-2的拍摄曝光值来计算平均值7.5。
在上面的示例中，处理器120可以基于根据第一相机110-1和第二相机110-2的拍摄曝光值计算出的平均值来设置用于要应用于第一相机110-1和第二相机110-2的拍摄曝光值的阈值范围。当如上所述根据第一相机110-1和第二相机110-2的拍摄曝光值计算出平均值7.5时，处理器120可以将用于要应用于第一相机110-1和第二相机110-2的拍摄曝光值的阈值范围设置为7-8。在设置了这种阈值范围的情况下，处理器120可以将要应用于第一相机110-1的拍摄曝光值设置为7，并且将要应用于第二相机110-2的拍摄曝光值重置为8。
在其中处理器120基于从第一相机110-1和第二相机110-2获取到的拍摄设置值来重置要应用于第一相机110-1和第二相机110-2中任一个或两个的拍摄曝光值的示例实施例中，当通过第一相机110-1和第二相机110-2拍摄视频时，处理器120可以基于下面将要描述的示例实施例获取为第一相机110-1和第二相机110-2设置的拍摄设置值。
在示例实施例中，当通过第一相机110-1和第二相机110-2拍摄视频时，当经过预设的时间段时，处理器120可以从通过第一相机110-1和第二相机110-2拍摄的视频的图像帧中获取拍摄设置值。
例如，当时间段被设置为10秒间隔时，处理器120可以以10秒间隔从通过第一相机110-1和第二相机110-2拍摄的视频的图像帧中获取第一相机110-1和第二相机110-2的拍摄设置值。
因此，当在每个时间段获取第一相机110-1和第二相机110-2的拍摄设置值时，处理器120可以基于从第一相机110-1和第二相机110-2获取到的拍摄设置值来重置要应用于第一相机110-1和第二相机110-2中任一个或两个的拍摄设置值，如以上示例实施例中所描述的。
在又一个示例实施例中，当通过第一相机110-1和第二相机110-2拍摄视频时，处理器120可以基于通过将在下面描述的图7的传感器130感测到的感测信息来确定是否发生感测到电子装置100的运动的事件，并且基于确定的结果再次获取用于第一相机110-1和第二相机110-2的拍摄设置值。
当通过第一相机110-1和第二相机110-2开始拍摄视频时，处理器120从通过第一相机110-1和第二相机110-2拍摄的视频的图像帧中获取用于第一相机110-1和第二相机110-2的拍摄设置值。
因此，当从第一相机110-1和第二相机110-2获取拍摄设置值时，处理器120可以基于从第一相机110-1和第二相机110-2获取到的拍摄设置值来重置应用于第一相机110-1和第二相机110-2中任一个或两个的拍摄设置值，如上所述。
在从第一相机110-1和第二相机110-2获取拍摄设置值之后，处理器120基于通过传感器感测到的感测信息来确定是否发生感测到电子装置100的运动的事件130。
当确定的结果指示发生感测到运动的事件时，处理器120可以在确定发生感测到运动的事件的时间点处基于通过第一相机110-1和第二相机110-2拍摄的视频的图像帧来获取应用于第一相机110-1和第二相机110-2的拍摄设置值。
因此，当根据感测到运动的事件附加地获取应用于第一相机110-1和第二相机110-2的拍摄设置值时，处理器120可以基于从第一相机110-1和第二相机110-2附加地获取到的拍摄设置值来重置应用于第一相机110-1和第二相机110-2中任一个或两个的拍摄设置值，如上所述。
在又一个示例实施例中，处理器120可以通过组合上述示例实施例来获取应用于第一相机110-1和第二相机110-2的拍摄设置值。
当如上所述通过第一相机110-1和第二相机110-2拍摄视频时，处理器120可以以预设的时间间隔从通过第一相机110-1和第二相机110-2拍摄的视频的图像帧中获取拍摄设置值。在从第一相机110-1和第二相机110-2获取到拍摄设置值之后，处理器120基于通过传感器130感测到的感测信息来确定是否发生感测到电子装置100的运动的事件。
当确定的结果指示发生感测到电子装置100的运动的事件时，处理器120缩短预设的时间间隔。因此，处理器120可以以被设置为比先前间隔短的时间间隔从通过第一相机110-1和第二相机110-2拍摄的视频的图像帧中获取拍摄设置值。
当确定的结果指示在预设的阈值时间段没有发生感测到电子装置100的运动的事件时，处理器120增加预设的时间间隔。因此，处理器120可以以被设置为比先前时间间隔长的时间间隔从通过第一相机110-1和第二相机110-2拍摄的视频的图像帧中附加地获取拍摄设置值。
当根据响应于感测到运动事件的发生而改变的时间间隔附加地获取应用于第一相机110-1和第二相机110-2的拍摄设置值时，处理器120可以基于从第一相机110-1和第二相机110-2附加地获取到的拍摄设置值来重置应用于第一相机110-1和第二相机110-2中任一个或两个的拍摄设置值，如上所述。
当如上所述重置第一相机110-1和第二相机110-2中任一个或两个的拍摄设置值时，可以基于重置的拍摄设置值来拍摄具有相同曝光值或颜色值的图像。因此，处理器120可以使用基于重置的拍摄设置值分别从第一相机110-1和第二相机110-2拍摄的图像来生成全景图像或VR图像。
如上所述，通过基于包括上述那些示例实施例的示例实施例来重置用于第一相机110-1和第二相机110-2的拍摄设置值，处理器120可以最小化从第一相机110-1和第二相机110-2拍摄的图像当中的曝光值或颜色值的误差(error)。而且，处理器120可以通过使用基于重置的拍摄设置值从第一相机110-1和第二相机110-2拍摄的图像生成全景图像或VR图像来生成自然整体的全景图像或VR图像。
在上述示例实施例中，其中处理器120重置用于第一相机110-1和第二相机110-2的拍摄设置值并且通过使用基于重置的拍摄设置值通过第一相机110-1和第二相机110-2拍摄的图像来生成全景图像或VR图像，处理器120可以包括图像信号处理器(ISP)121和数字信号处理器(DSP)123，如图2所示。
图2是根据示例实施例的处理器的详细框图。
如图2所示，处理器120包括ISP 121和DSP 123。
ISP 121基于分别为第一相机110-1和第二相机110-2先前设置的拍摄设置值来控制第一相机110-1和第二相机110-2的拍摄操作。如图所示，当ISP 121仅由单个ISP构成时，ISP 121可以在第一相机110-1和第二相机110-2之间交替的同时控制第一相机110-1和第二相机110-2的拍摄操作。
然后，ISP 121对从第一相机110-1和第二相机110-2拍摄的图像的图像数据进行信号处理。另外，ISP 121可以获取从第一相机110-1和第二相机110-2拍摄的图像的拍摄设置值。
当通过第一相机110-1和第二相机110-2拍摄视频时，ISP 121可以基于下面描述的示例实施例获取从第一相机110-1和第二相机110-2拍摄的图像的拍摄设置值。
本文使用的“拍摄设置值”可以指从第一相机110-1和第二相机110-2拍摄的图像的拍摄曝光值或拍摄颜色值。
第一相机110-1和第二相机110-2可以包括透镜、快门、光圈(iris)、固态成像设备、模拟前端(AFE)和图像传感器。快门调节来自物体的反射光进入图像传感器的时间，并且光圈通过机械地增加或减小光进入的孔径的尺寸来调节进入透镜的光量。当来自物体的反射光被累积到光电荷中时，固态成像设备将光电荷图像输出为电信号。AFE对从固态成像设备输出的电信号进行采样和数字化。
因此，ISP 121将用于通过第一相机110-1和第二相机110-2输出的所拍摄图像的电信号信号处理成数字信号。使用各自的上述部件，第一相机110-1和第二相机110-2可以生成用于所拍摄图像的拍摄参数，包括曝光时间信息、ISP信息、亮度信息、颜色信息、白平衡信息等，并且将所生成的拍摄参数输出到ISP 121。
因此，通过参考从第一相机110-1和第二相机110-2生成的拍摄参数，ISP 121可以获取从第一相机110-1和第二相机110-2拍摄的图像的拍摄设置值，包括拍摄曝光值、拍摄颜色值等。
在示例实施例中，当通过第一相机110-1和第二相机110-2拍摄视频时，ISP 121可以以预设的时间间隔从通过第一相机110-1和第二相机110-2拍摄的视频的图像帧中获取拍摄设置值。
在另一个示例实施例中，当通过第一相机110-1和第二相机110-2拍摄视频时，响应于基于通过传感器130感测到的感测信息感测到电子装置100的运动的事件，ISP 121可以在事件发生的时间点处从通过第一相机110-1和第二相机110-2拍摄的视频的图像帧中获取拍摄设置值。
DSP 123根据通过ISP 121数字化的图像数据为第一相机110-1和第二相机110-2中的每一个生成拍摄的图像。
如上所述，ISP 121根据给定的增益放大来自第一相机110-1和第二相机110-2中的每一个的转换后的电信号，将每一个电模拟信号转换成数字信号，并且向DSP 123输出结果信号。
因此，DSP 123可以基于各自的数字化图像数据生成来自第一相机110-1和第二相机110-2的拍摄的图像，并且使用所生成的各自的图像生成全景图像或VR图像。
DSP 123不仅可以接收与第一相机110-1和第二相机110-2中的每一个相对应的数字化图像数据，而且还可以接收为第一相机110-1和第二相机110-2中的每一个预设的拍摄设置值。
因此，DSP 123可以基于为第一相机110-1和第二相机110-2中的每一个预设的拍摄设置值来重置用于第一相机110-1和第二相机110-2中的任一个或两个的拍摄设置值。
如上面参考示例实施例所描述的，DSP 1233可以通过第一相机110-1和第二相机110-2的拍摄设置值的平均值来重置第一相机110-1和第二相机110-2的拍摄设置值。
在另一个示例实施例中，DSP 123可以通过使用根据第一相机110-1和第二相机110-2的拍摄设置值中的最高拍摄设置值以及第一相机110-1和第二相机110-2的拍摄设置值的平均值计算的平均值来重置第一相机110-1和第二相机110-2的拍摄设置值。
在又一个示例实施例中，DSP 123可以通过使用根据第一相机110-1和第二相机110-2的拍摄设置值中的最低拍摄设置值以及第一相机110-1和第二相机110-2的拍摄设置值的平均值计算的平均值来重置第一相机110-1和第二相机110-2的拍摄设置值。
在又一个示例实施例中，DSP 123可以通过使用第一相机110-1和第二相机110-2当中由用户选择的相机的拍摄设置值来重置其它相机的拍摄设置值。
在又一个示例实施例中，DSP 123可以将从第一相机110-1获取到的拍摄设置值重置为第一拍摄设置值，并且将第二相机110-2的拍摄设置值重置为第二拍摄设置值。
因此，当要应用于第一相机110-1和第二相机110-2中的任一个或两个的拍摄设置值被重置时，ISP 121控制第一相机110-1和第二相机110-2基于重置的拍摄设置值来拍摄多个图像。
因此，响应于来自ISP 121的控制命令，第一相机110-1和第二相机110-2基于重置的拍摄设置值来拍摄图像，并且ISP 121执行上述一系列操作以处理从第一相机110-1和第二相机110-2拍摄的图像的图像数据的信号。然后，ISP 121将第一相机110-1和第二相机110-2中的每一个的处理后的图像数据发送到DSP 123。因此，DSP 123可以通过对于第一相机110-1和第二相机110-2中的每一个的经过信号处理的图像数据进行图像处理来生成图像，并且通过合成多个所生成的图像来生成全景图像或VR图像。
如上所述，用于控制第一相机110-1和第二相机110-2的拍摄操作的ISP 121可以由多个ISP组成，如图3和图4所示。
图3是根据示例实施例的包括多个ISP的处理器的第一详细框图，以及图4是根据另一示例实施例的包括多个ISP的处理器的第二详细框图。
如图3和图4所示，处理器120包括第一ISP 121-1和第二ISP 121-2以及DSP 123。本文所提供的第一ISP 121-1和第二ISP 121-2的数量可以与第一相机110-1和第二相机110-2的数量相对应。即，处理器120可以包括分别与第一相机110-1和第二相机110-2相对应的第一ISP和第二ISP以及DSP 123。
第一ISP和第二ISP中的每一个控制对应的第一相机110-1和第二相机110-2的拍摄操作，对于从第一相机110-1和第二相机110-2拍摄的图像的图像数据进行信号处理。并且将结果数据输出到DSP 123。因此，DSP可以通过对来自第一ISP和第二ISP的经信号处理的图像数据执行图像处理来生成图像，并且根据多个生成的图像生成全景图像。
除了经信号处理的图像数据之外，第一ISP和第二ISP中的每一个还可以获取与第一ISP和第二ISP中的每一个相对应的第一相机110-1和第二相机110-2的拍摄设置值，并将它们输出到DSP 123。因此，DSP通过使用从第一ISP和第二ISP获取到的第一相机110-1和第二相机110-2的拍摄设置值来重置要应用于第一相机110-1和第二相机110-2中的一个或两个的拍摄设置值。
以下将不再重复描述DSP 123基于第一相机110-1和第二相机110-2的拍摄设置值重置要应用于第一相机110-1和第二相机110-2中的一个或两个的拍摄设置值的示例实施例，这是因为这已在上面详细地描述过了。
当要应用于第一相机110-1和第二相机110-2中的一个或两个的拍摄设置值被重置时，DSP 123将重置的拍摄设置值输出到第一ISP和第二ISP中的一个或两个。因此，第一ISP和第二ISP基于重置的拍摄设置值控制第一相机110-1和第二相机110-2来拍摄图像。
在示例实施例中，如图3所示，DSP 123可以将重置的拍摄设置值发送到第一ISP和第二ISP中的每一个。
在上述示例中，第一ISP和第二ISP可以基于由DSP 123重置的拍摄设置值来控制第一相机110-1和第二相机110-2拍摄图像。
在另一个示例实施例中，如图4所示，DSP 123可以将重置的拍摄设置值发送到第一ISP和第二ISP中一个预设的ISP。本文使用的“一个预设的ISP”可以指主ISP，并且另一个ISP可以是从ISP。
例如，第一ISP和第二ISP中的第一ISP 121-1可以被设置为主ISP。在此示例中，DSP 123可以将重置的拍摄设置值发送到被设置为主ISP的第一ISP 121-1，并且被设置为主ISP的第一ISP 121-1可以将从DSP 123发送的拍摄设置值发送到被设置为从ISP的第二ISP 121-1。然后，被设置为主ISP的第一ISP 121-1和被设置为从ISP的第二ISP 121-2基于从DSP 123重置的拍摄设置值来控制第一相机110-1和第二相机110-2拍摄图像。
因此，第一相机110-1和第二相机110-2基于重置的拍摄设置值来拍摄图像，并且第一ISP和第二ISP执行上述一系列操作以对从第一相机110-1和第二相机110-2拍摄的图像的图像数据进行信号处理。然后，第一ISP和第二ISP将分别来自第一相机110-1和第二相机110-2的经信号处理的图像数据发送到DSP 123。因此，DSP 123可以通过对从第一ISP和第二ISP经过信号处理的第一相机110-1和第二相机110-2中的每一个的图像数据执行图像处理来生成图像，并且通过合成多个所生成的图像来生成全景图像或VR图像。
已经详细描述了根据示例实施例的在电子装置100处用于重置第一相机110-1和第二相机110-2的拍摄设置值，并且通过使用基于重置的拍摄设置值从第一相机110-1和第二相机110-2拍摄的图像来生成全景图像或VR图像的操作。
现在将在下面详细描述根据示例实施例的在电子装置100处的用于通过使用通过第一相机110-1和第二相机110-2拍摄的图像来生成全景图像或VR图像的操作。
图5是图示根据示例实施例的用通过多个相机拍摄的图像在电子装置处生成VR图像的视图。
如图5所示，电子装置100能够生成是360度环绕全景的VR图像。即，电子装置100能够通过使用通过第一相机110-1和第二相机110-2拍摄的图像来生成VR图像。
当通过第一相机110-1和第二相机110-2拍摄第一图像510和第二图像520时，电子装置100获取通过第一相机110-1和第二相机110-2拍摄的第一图像510和第二图像520的拍摄设置值。
如图所示，当第一相机110-1具有比第二相机110-2更大的曝光值时，通过第一相机110-1拍摄的第一图像510和通过第二相机110-2拍摄的第二图像520可以用彼此不同的亮度色调被拍摄。
因而，电子装置100通过使用从通过第一相机110-1和第二相机110-2拍摄的第一图像510和第二图像520获取到的拍摄设置值来重置要应用于第一相机110-1和第二相机110-2中任一个或两个的拍摄设置值。
如上面参考示例实施例所描述的，电子装置100可以计算第一相机110-1和第二相机110-2的拍摄设置值的平均值，并且通过所计算的平均值重置要应用于第一相机110-1和第二相机110-2的拍摄设置值。因此，第一相机110-1和第二相机110-2可以基于重置的拍摄设置值来拍摄具有相同曝光值或颜色值的图像。因此，电子装置100可以通过使用基于重置的拍摄设置值从第一相机110-1和第二相机110-2拍摄的各自的图像来生成VR图像530。
即，第一相机110-1和第二相机110-2可以基于重置的拍摄设置值来拍摄具有相同曝光值或颜色值的图像，并且电子装置100可以通过使用通过第一相机110-1和第二相机110-2拍摄的具有相同曝光值或颜色值的图像来生成VR图像530。
图6A和6B是图示出根据示例实施例的基于用于与用户命令相对应的相机的拍摄设置值在电子装置处重置其它相机的拍摄设置值的视图。
如图6A所示，电子装置100显示包括用于控制第一相机110-1和第二相机110-2的拍摄设置的多个图标的拍摄设置UI 610。响应于在拍摄设置UI 610中包括的多个图标当中选择用于设置参考相机设置的图标611的用户命令，电子装置100在与其上显示用于参考相机设置的图标611的区域相邻的区域中显示包括分别与第一相机110-1和第二相机110-2相对应的对象的列表UI 611-1。
当包括在列表UI 611-1中的多个对象之一从所显示的列表UI 611-1中被选择时，电子装置100可以通过与所选择的对象相对应的相机的拍摄设置值来重置用于其它相机的拍摄设置值。
例如，当从包括在列表UI 611-1中的多个对象中选择与第一相机110-1相对应的对象时，电子装置100可以通过第一相机110-1的拍摄设置值来重置用于第二相机110-2的拍摄设置值。
因此，第二相机110-2可以基于重置的拍摄设置值拍摄具有与第一相机110-1相同曝光值或颜色值的图像，并且电子装置100可以通过使用通过第一相机110-1和第二相机110-2拍摄的具有相同曝光值或颜色值的图像来生成全景图像或VR图像。
如图6B所示，电子装置100可以在屏幕的第一区域和第二区域中显示通过第一相机110-1和第二相机110-2拍摄的第一图像620-1和第二图像620-2，并且基于拍摄与用户命令相对应的图像的相机的拍摄设置值来重置其余相机的拍摄设置值。
在示例实施例中，当通过第一相机110-1和第二相机110-2拍摄的第一图像620-1和第二图像620-2被显示在屏幕的第一区域和第二区域中时，电子装置100可以通过拍摄了选自显示在第一区域和第二区域上的第一图像620-1和第二图像620-2的图像的相机的拍摄设置值重置其它相机的拍摄设置值。
例如，用户可以在屏幕的第一区域和第二区域上显示的第一图像620-1和第二图像620-2当中选择在屏幕的第一区域上显示的第一图像620-1。响应于这种用户命令，电子装置100可以通过拍摄了第一图像620-1的第一相机110-1的拍摄设置值来重置第二相机110-2的拍摄设置值。
在另一个示例实施例中，当通过第一相机110-1和第二相机110-2拍摄的第一图像620-1和第二图像620-2被显示在屏幕的第一和第二区域上时，电子装置100可以根据用户命令重置第一相机110-1和第二相机110-2的拍摄设置值。
例如，用户可以选择在屏幕的第一区域和第二区域上显示的第一图像620-1和第二图像620-2当中在屏幕的第一区域上显示的第一图像620-1，然后在预设的阈值时间内选择显示在第二区域上的第二图像620-2。
因此，当在预设的阈值时间内选择第一图像620-1和第二图像620-2时，电子装置100根据拍摄第一图像620-1和第二图像620-2的第一相机110-1和第二相机110-2的拍摄设置值来计算平均值。然后，电子装置100可以通过所计算的平均值来重置第一相机110-1和第二相机110-2的拍摄设置值。
在下文中，将详细描述用于提供VR环境以提供全景图像的电子装置100处的操作。
图7是根据示例实施例的用于提供VR环境的电子装置的框图。
如图7所示，用于提供VR环境的电子装置100包括显示器140、传感器130和处理器120。
显示器140显示可以由多个图像组成的全景图像或VR图像。传感器130感测用户的注视(gaze)。传感器130可以感测用户的注视指向的位置并且从感测到的位置到用户的注视移动的方向追踪用户的注视。在示例实施例中，传感器130可以通过能够进行眼睛追踪的传感器拍摄用户的虹膜并且追踪虹膜从拍摄的虹膜位置到移动的方向来感测用户的注视。感测用户的注视的技术是众所周知的，在此不再赘述。
处理器120基于通过传感器130感测到的注视信息来确定用户正在注视的所显示的全景图像的哪个区域。然后，处理器120可以通过使用与所显示的全景图像的多个构成图像当中用户正在注视的区域相对应的图像的图像设置值执行其余图像的图像处理来生成经图像处理的全景图像。本文使用的“图像设置值”可以指与用户正在注视的图像相对应的图像的多个构成像素的像素值，并且可以是与用户正在注视的区域相对应的图像的亮度(brightness)、辉度(luminance)等。
图像设置值可以被包括在与所显示的全景图像的多个构成图像中的每一个对应的元数据中。
因此，处理器120可以通过使用包括在与用户正在注视的全景图像的区域相对应的图像所对应的元数据中的图像设置值对全景图像的其余图像执行图像处理来生成全景图像。
在示例实施例中，当基于通过传感器130感测到的注视信息确定用户正在注视的区域是第一区域时，处理器120可以通过使用包括在全景图像的多个构成图像当中与第一区域相对应的第一图像的元数据中的图像设置值来对构成全景图像的第二图像执行图像处理。
在另一个示例实施例中，当基于通过传感器130感测到的注视信息确定用户正在注视的区域从第一区域移动到第二区域时，处理器120获取包括在全景图像的多个构成图像当中与第一区域相对应的第一图像的元数据中的图像设置值。然后，处理器120可以通过使用获取到的第一图像的图像设置值对全景图像的多个构成图像当中与第二区域相对应的第二图像来执行图像处理。
在又一个示例实施例中，处理器120可以基于通过传感器130感测到的注视信息来确定用户正注视的区域在第一区域和第二区域之间。例如，用户可以正在注视全景图像的多个构成图像当中的第一图像和第二图像。当感测该用户的注视的注视信息时，处理器120可以根据感测到的注视信息确定用户正在注视的区域是与第一图像相对应的第一区域和与第二图像相对应的第二区域。当确定用户正在注视的区域是分别与第一图像620-1和第二图像620-2相对应的第一区域和第二区域时，处理器120获取包括在第一图像620-1和第二图像620-2中的每一个的元数据中的图像设置值。然后，处理器120可以根据分别与第一图像620-1和第二图像620-2相对应的图像设置值来计算中值(median value)，并且通过使用所计算的中值来对第一图像620-1和第二图像620-2执行图像处理。
然后，处理器120通过使用根据全景图像的多个构成图像中的用户注视区域的图像以及基于对应的图像的图像设置值进行图像处理的其余图像来重建全景图像。因此，显示器140可以显示由处理器120重建的全景图像。
如上所述，处理器120可以通过用与用户的注视相关联的图像的图像设置值补偿相邻图像来补偿与用户的注视相关联的图像和相邻图像当中的图像处理。因此，可以最小化全景图像的多个构成图像之间的差异感。即，根据示例实施例，处理器120根据用户注视的方向基于图像来补偿相邻图像，使得可以确保全景图像的多个构成图像之间的连续性。
以下，将详细描述根据示例实施例的在电子装置100处显示根据用户的注视重建的全景图像的操作。
图8是图示根据示例实施例的用于提供VR环境的电子装置的图，其显示根据用户的第一注视重建的全景图像。
如图8所示，用于提供VR环境的电子装置100响应于用户命令而显示包括第一图像811和第二图像813的全景图像810。当显示全景图像810时，电子装置100感测用户的注视。当感测到的结果指示用户正在注视区域A时，电子装置100获取全景图像810的第一构成图像811和第二构成图像813当中与用户正在注视的区域A相对应的第一图像811的图像设置值。然后，电子装置100通过使用第一图像811的图像设置值对全景图像810的第二构成图像813执行图像处理来生成全景图像。
因此，电子装置100显示用基于第一图像811的图像设置值进行图像处理的第一图像811和第二图像813重建的全景图像810'。
图9是图示根据示例实施例的用于提供VR环境的电子装置的图，其显示根据用户的第二注视重建的全景图像。
如图9所示，用于提供VR环境的电子装置100响应于用户命令而显示包括第一图像911和第二图像913的全景图像910。在显示全景图像910的同时，电子装置100感测用户的注视。当感测到的结果指示用户正在注视区域B时，电子装置100获取全景图像910的第一构成图像911和第二构成图像913当中与用户正在注视的区域B相对应的第二图像913的图像设置值。然后，电子装置100通过使用第二图像913的图像设置值对全景图像910的第一构成图像911执行图像处理来生成全景图像。
因此，电子装置100显示利用基于与用户正在注视的区域B相对应的第二图像913的图像设置值进行图像处理的第一图像911和与区域B相对应的第二图像913重建的全景图像910'。
上述电子装置100可以被实现为包括第一相机110-1和第二相机110-2的智能电话、多媒体设备等，并且除了上述配置之外，还可以包括如图10所示的配置。
图10是根据示例实施例的电子装置的详细框图。
如图10所示，除了上述包括第一相机110-1和第二相机110-2的拍摄器110、处理器120、传感器130和显示器140之外，电子装置100还包括输入接口150、通信器160、音频输出接口180和存储装置190。
输入接口150可以接收各种用户命令并将它们传递给处理器120，并且可以包括麦克风151、操作器152、触摸输入接口153和用户输入接口154。
麦克风151可以接收用户的语音命令，并且操作器152可以被实现为设有各种功能键、数字键、特殊键、文本键等的小键盘。触摸输入接口153可以被实现为与上述显示器140构建层间结构的触摸板。在该示例中，触摸输入接口153可以接收选择与所显示的各种应用相关联的图标的命令。
用户输入接口154可以从至少一个外围设备(诸如远程控制装置)接收红外(IR)信号或射频(RF)信号以控制电子装置100的操作。
通信器160执行与至少一个用户终端设备的数据通信。当电子装置100与被配置为通过多个相机拍摄图像的拍摄装置通信时，通信器160可以接收通过多个相机拍摄的图像以及通过多个相机拍摄的图像的拍摄设置值。在上述示例中，处理器120可以基于通过通信器160接收到的拍摄设置值来重置要应用于包括在拍摄装置中的多个相机的拍摄设置值，并且通过通信器160将重置的拍摄设置值发送到拍摄装置。此外，通信器160可以将控制拍摄装置的拍摄操作的控制信息发送到拍摄装置。
上述通信器160可以包括连接器163、无线通信接口162(诸如短距离通信接口161、无线LAN接口等)、或有线通信接口(诸如高清晰度多媒体接口(HDMI)、通用串行总线(USB)、电气和电子工程师协会(IEEE)1394等)的任何一个或任意组合。
短距离通信接口161被配置为无线地执行电子装置100与相邻用户终端设备或拍摄装置之间的短距离通信。如上所述的短距离通信接口161可以包括蓝牙接口、红外数据协会(IrDA)接口、近场通信(NFC)接口、Wi-Fi接口和Zigbee接口中的任何一个或任意组合。
另外，无线通信接口162连接到外部网络并且根据无线通信协议(诸如IEEE等)来执行通信。无线通信接口还可以包括移动通信接口，其可以连接到移动通信网络，并且在多种移动通信标准(诸如第三代(3G)、第三代合作伙伴计划(3GPP)、长期演进(LTE)等)下执行通信。
如上所述，通信器160可以由上述各种短距离通信方法实现，或者可以采用本文未提及的其它通信技术。
连接器163被配置为提供与多种源设备的接口，诸如USB 2.0、USB 3.0、HDMI、IEEE1394等。响应于来自处理器120的控制命令，连接器163可以经由连接到连接器163的有线电缆接收从外部服务器发送的内容数据，或者将先前存储的内容数据发送到外部记录介质。另外，连接器163可以通过物理连接到连接器163的有线电缆从电源接收电力。
音频输出接口180通过扬声器输出在信号处理器160处被信号处理的音频数据。
存储装置190可以存储诸如从第一相机110-1和第二相机110-2拍摄的图像以及从各自的图像生成的全景图像的图像内容，或者存储从外部服务器接收到的内容的图像和音频数据。此外，存储装置190可以附加地存储操作程序以控制电子装置100的操作。本文使用的“操作程序”可以包括在电子装置100开启时从存储装置190读取并被编译以操作电子装置100的各个部件的程序。
上述传感器130可以包括能够进行用户眼睛追踪的传感器，以及感测电子装置100的运动的传感器。取决于示例实施例，传感器130可以包括能够追踪用户的虹膜的眼睛追踪传感器130-1、能够感测电子装置100的运动的运动传感器130-2、磁传感器130-3、重力传感器130-4以及陀螺仪传感器130-5中的任何一个或任意组合。
眼睛追踪传感器130-1是指位于用户眼球附近的传感器，以在拍摄用户的虹膜的同时感测用户的注视的改变。
因此，处理器120基于通过眼睛追踪传感器130-1感测到的感测信息来确定所显示的全景图像中用户正在注视的区域。然后，处理器可以通过使用所显示的全景图像的多个构成图像当中用户正在注视的图像的图像设置值来对其余图像执行图像处理而生成经图像处理的全景图像。
运动传感器130-2可以是加速度计传感器，其测量对运动中的电子装置100的冲击(impact)的加速度或幅度。
磁传感器130-3可以指使用在诸如智能电话、收音机、GPS、PDA、导航仪器等应用中使用的地面磁场来检测方位角的传感器(诸如电子罗盘)。
重力传感器130-4是指检测根据显示器100的运动方向自动旋转的重力方向以感测方向的传感器。
陀螺仪传感器130-5是指通过将旋转添加到运动传感器130-2从而实现六轴方向识别来帮助更精确和准确地识别运动的传感器。
因此，当通过第一相机110-1和第二相机110-2拍摄视频时，处理器120可以在通过上述运动传感器130-2、磁传感器130-3、重力传感器130-4和陀螺仪传感器130-5中的任何一个或任意组合感测到电子装置100的运动的事件发生的时候获取第一相机110-1和第二相机110-2的拍摄设置值。
在示例实施例中，传感器130可以附加地包括接近传感器，用于在两个物体接触之前确定物体是否与另一个物体接近；光学传感器，被配置为感测接收到的光并将其转换成电信号等。
上述处理器120包括RAM 124、ROM 125、CPU 126和GPU 127，并且RAM 124、ROM 125以及CPU 126经由总线128彼此连接。
CPU 126访问存储装置190并通过使用存储在存储装置190中的OS来执行引导。另外，CPU 126通过使用存储在存储装置190中的各种程序、内容、数据等来执行各种操作。
GPU 127生成包括各种对象(包括图标、图像、文本等)的显示屏幕。基于接收到的控制命令，GPU 127计算诸如坐标、形状、尺寸、颜色等的属性值，将利用这些属性值根据屏幕的布局显示相应的对象，并且基于所计算的属性值在包括对象的各种布局中生成显示屏幕。
ROM 125存储用于系统引导的指令集。当响应于接通命令而供电时，根据存储在ROM 125中的指令，CPU 126将存储在存储装置190中的OS复制到RAM 124上并执行OS，以引导系统。当引导完成时，CPU 126将存储在存储装置190中的程序复制到RAM 124上并执行复制的程序，以执行对应的操作。
如上所述的处理器120可以与上述各个部件组合，以便被实现为单片系统(SOC)或片上系统(SoC)。
上述处理器120的操作可以由存储在存储装置190中的程序来实现。存储装置190可以被实现为可附连到ROM 125、RAM 124或电子装置100/可从ROM 1255、RAM 124或电子装置100移除的存储卡(例如，SD卡、记忆棒)、非易失性存储器、易失性存储器、硬盘驱动器(HDD)或固态驱动器(SSD)中的任何一个或任何组合。
上面已经描述了根据示例实施例的电子装置100的配置。
以下，将详细描述根据示例实施例的用于控制电子装置100的操作的方法。
图11是被提供用于解释根据示例实施例的使用多个相机在电子装置处拍摄全景图像的方法的流程图。
如图11所示，电子装置100包括多个相机(在下文中，“第一相机和第二相机”)。
在S1110处，当通过第一相机和第二相机拍摄图像时，电子装置100从第一相机和第二相机获取所拍摄的图像的拍摄设置值。拍摄设置值可以包括第一相机和第二相机的拍摄曝光值和拍摄颜色值中的任一个或两个。
电子装置100可以通过ISP控制第一相机和第二相机的拍摄操作，并且可以在同时对从第一相机和第二相机拍摄的图像执行信号处理时获取用于第一相机和第二相机的预设拍摄设置值。
第一相机和第二相机可以包括透镜、快门、光圈、固态成像设备、模拟前端(AFE)和图像传感器。快门调节来自物体的反射光进入图像传感器的时间，并且光圈通过机械地增加或减小光进入的孔径的尺寸来调节进入透镜的光量。当来自物体的反射光被累积到光电荷中时，固态成像设备将光电荷图像输出为电信号。AFE对从固态成像设备输出的电信号进行采样和数字化。
因此，ISP将用于通过第一相机和第二相机输出的所拍摄图像的电信号信号处理成数字信号。使用各自的上述部件，第一相机和第二相机可以生成用于所拍摄图像的拍摄参数，包括曝光时间信息、ISP信息、亮度信息、颜色信息、白平衡信息等，并且将所生成的拍摄参数输出到ISP。
因此，通过参考从第一相机和第二相机生成的拍摄参数，ISP可以获取从第一相机和第二相机拍摄的图像的拍摄设置值，包括拍摄曝光值、拍摄颜色值等。
ISP可以由单个ISP构成，或者可以由数量上与第一相机和第二相机的数量相对应的ISP组成。当ISP由单个ISP组成时，ISP可以交替地控制第一相机和第二相机的拍摄操作，并且当ISP由数量上与第一相机和第二相机的数量相对应的ISP组成时，每个ISP可以控制与ISP对应的各自的相机的拍摄操作。
当通过上述ISP获取第一相机和第二相机的拍摄设置值时，在S1120处，电子装置100确定获取到的第一相机和第二相机的拍摄设置值是否彼此相似。
电子装置100确定从第一相机和第二相机获取到的拍摄设置值之间的差是否在预设的阈值范围内。当确定的结果指示从第一相机和第二相机获取到的拍摄设置值之间的差在预设的阈值范围内时，电子装置100确定第一相机和第二相机的拍摄设置值是相似的。当确定指示第一相机和第二相机的拍摄设置值相似时，在S1150处，电子装置100从基于先前应用于第一相机和第二相机的拍摄设置值所拍摄的图像中生成全景图像或VR图像，这将在下面描述。
当从第一相机和第二相机获取的拍摄设置值的差在预设的阈值范围之外时，在S1130处，电子装置100确定第一相机和第二相机的拍摄设置值不同，并且基于下面描述的示例实施例重置将应用于第一相机和第二相机中的任一个或两个的拍摄设置值。
电子装置100可以通过DSP基于第一相机和第二相机的拍摄设置值来重置第一相机和第二相机中的任一个或两个的拍摄设置值。
在示例实施例中，电子装置100可以通过第一相机和第二相机的拍摄设置值的平均值来重置第一相机和第二相机的拍摄设置值。
在另一个示例实施例中，电子装置100可以通过根据第一相机和第二相机的拍摄设置值的最高拍摄设置值以及第一相机和第二相机的拍摄设置值的平均值所计算的平均值来重置第一相机和第二相机的拍摄设置值。
在又一个示例实施例中，电子装置100可以通过根据第一相机和第二相机的拍摄设置值的最低拍摄设置值以及第一相机和第二相机的拍摄设置值的平均值所计算的平均值重置第一相机和第二相机的拍摄设置值。
在又一个示例实施例中，电子装置100可以通过第一相机和第二相机当中用户选择的相机的拍摄设置值来重置其它相机的拍摄设置值。
在又一个示例实施例中，电子装置100可以将从第一相机获取到的拍摄设置值重置为第一拍摄设置值，并且将从第二相机获取到的拍摄设置值重置为第二拍摄设置值。
根据上述示例实施例，当第一相机和第二相机中的任一个或两个的拍摄设置值被重置时，在S1140处，电子装置100基于重置的拍摄设置值使用第一相机和第二相机来拍摄图像。即，电子装置100通过至少一个ISP来控制第一相机和第二相机，并且第一相机和第二相机可以响应于来自ISP的控制命令并基于重置的拍摄设置值来拍摄图像。
在S1150处，当通过第一相机和第二相机拍摄图像时，基于重置的拍摄设置值，电子装置100通过使用通过第一相机和第二相机拍摄的多个图像来生成全景图像或VR图像。
在电子装置100基于从第一相机和第二相机获取到的拍摄设置值来重置要应用于第一相机和第二相机中的任一个或两个的拍摄设置值的示例实施例中，当电子装置100通过第一相机和第二相机拍摄视频时，电子装置100可以基于上述示例实施例来获取为第一相机和第二相机设置的拍摄设置值。
在示例实施例中，当电子装置100通过第一相机和第二相机拍摄视频时，电子装置100可以以预设的时间间隔从通过第一相机和第二相机拍摄的视频的图像帧中获取拍摄设置值。
在另一个示例实施例中，当电子装置100通过第一相机和第二相机拍摄视频时，电子装置100可以基于通过传感器感测到的感测信息来确定感测到电子装置100的运动的事件是否发生并且基于这种确定的结果再次获取第一相机和第二相机的拍摄设置值。
当第一相机和第二相机中的任一个或两个的拍摄设置值被重置时，基于重置的拍摄设置值，可以拍摄具有相同曝光值或颜色值的图像。因此，电子装置100可以通过使用基于重置的拍摄设置值从第一相机和第二相机拍摄的各自的图像来生成全景图像或VR图像。
如上所述，基于上述示例实施例，电子装置100可以通过重置第一相机和第二相机的拍摄设置值来最小化从第一相机和第二相机拍摄的图像当中的曝光值或颜色值的误差。此外，电子装置100可以通过使用基于重置的拍摄设置值在第一相机和第二相机处拍摄的图像生成全景图像或VR图像来生成自然整体的全景图像或VR图像。
在下文中，将在下面详细描述根据示例实施例的用于提供VR环境以提供全景图像的电子装置100的方法。
图12是根据示例实施例的被提供以解释在用于提供VR环境的电子装置处提供全景图像的方法的流程图。
如图12所示，在S1210处，电子装置100在VR环境中显示用户所请求的全景图像。全景图像可以由多个图像组成。但是，示例实施例不限于上面提供的示例，并且相应地，电子装置100可以利用多个图像来生成VR图像，该VR图像可以是360度环绕全景图像，并且显示所生成的VR图像。
当显示由多个图像组成的全景图像时，在S1220处，电子装置100感测用户的注视。在示例中，电子装置100可以使用诸如眼睛追踪传感器之的传感器来感测用户正在注视方向上的位置，并且基于感测到的位置跟踪用户正在注视方向上的位置。
在S1230处，当用户的注视通过上述传感器被感测时，电子装置100基于感测到的注视信息来确定用户正在注视的全景图像的区域。然后，在S1240处，电子装置100通过使用全景图像的构成图像当中与用户正在注视的区域相对应的图像的图像设置值来执行(一个或多个)其余图像的图像处理，并且生成经过图像处理的全景图像。
在示例实施例中，当确定用户正在注视的区域是第一区域时，电子装置100获取与第一区域相对应的全景图像的第一图像的图像设置值。然后，电子装置100可以通过使用所获取的第一图像的图像设置值来对全景图像的第二构成图像执行图像处理。
然后，电子装置100可以通过合成与第一区域相对应的第一图像以及基于第一图像的图像设置值进行图像处理的第二图像来生成全景图像。
在另一个示例实施例中，当确定用户正在注视的区域从第一区域移动到第二区域时，电子装置100获取全景图像的多个构成图像当中与用户正在注视的第一区域相对应的第一图像的图像设置值。然后，电子装置100可以通过使用所获取的用于第一图像的图像设置值执行全景图像中与第二区域相对应的第二图像的图像处理。
在又一个示例实施例中，电子装置100可以确定用户正在注视第一区域和第二区域之间。例如，用户可以注视全景图像的多个构成图像当中的第一图像和第二图像。当根据这种用户的注视感测注视信息时，电子装置100可以根据感测到的注视信息确定用户正在注视与第一图像相对应的第一区域和与第二图像相对应的第二区域。因此，当确定用户正在注视分别与第一图像和第二图像相对应的第一区域和第二区域时，电子装置100获取分别包括在第一图像和第二图像的元数据中的图像设置值。然后，电子装置100根据分别与第一图像和第二图像相对应的图像设置值计算中值，并且通过使用所计算的中值来对第一图像和第二图像执行图像处理。
然后，电子装置100可以通过合成与第一区域相对应的第一图像以及基于第一图像的图像设置值进行图像处理的第二图像来生成全景图像。
因此，电子装置100可以通过用与用户的注视相关联的图像的图像设置值补偿相邻图像来补偿与用户的注视相关联的图像和相邻图像当中的图像处理。因此，可以最小化全景图像的多个构成图像之间的差异感。即，根据示例实施例，电子装置100基于根据用户注视的方向的图像来补偿相邻图像，使得可以确保全景图像的多个构成图像之间的连续性。
上述用于提供全景图像的电子装置的控制方法可以被实现为可以存储在非瞬态计算机可读记录介质中的一个或多个程序。
非瞬态计算机可读记录介质是半永久地存储数据的介质，并且可以由设备读取，而不是暂时存储数据的介质(诸如寄存器、高速缓存或存储器)。上述各种程序可以被存储在终端可读的各种类型的记录介质中，诸如随机存取存储器(RAM)、闪存、只读存储器(ROM)、可擦除可编程ROM(EPROM)、可擦除可编程只读存储器、电子可擦除可编程ROM(EEPROM)、寄存器、硬盘、可移动盘、存储卡、USB存储器、CD-ROM等。
前述示例实施例和优点是示例，并且不应当被解释为限制示例实施例。本教导可以容易地应用于其它类型的装置。而且，本发明性构思的示例实施例的描述旨在是说明性的，而不是限制权利要求的范围。

Claims (9)

1.一种用于提供全景图像的电子装置的方法，所述方法包括：
获取分别通过多个相机拍摄的第一图像的拍摄曝光值；
确定分别从所述多个相机获取到的拍摄曝光值之间的差是否在预设的阈值范围之外；
基于确定获取的拍摄曝光值之间的差被确定为在预设的阈值范围之内，保持获取的拍摄曝光值；
基于获取的拍摄曝光值之间的差被确定为在预设的阈值范围之外：
显示参考相机设置的图标；
基于对显示的参考相机设置的图标的选择，在显示参考相机设置的图标的同时，显示包括分别与所述多个相机对应的对象的列表；以及
基于对显示的列表中包括的对象之一的选择，通过所述多个相机当中与被选择的一个对象对应的参考相机的拍摄曝光值来重置要应用于所述多个相机中的至少一个的拍摄曝光值中的至少一个；以及
使用重置的所述拍摄曝光值中的至少一个，生成包括分别通过所述多个照相机拍摄的第二图像的全景图像。
2.如权利要求1所述的方法，其中，所述重置包括：基于对显示的列表中包括的对象之一的所述选择，通过与所选择的对象相对应的相机的拍摄曝光值重置其它相机的拍摄曝光值中的每一个。
3.如权利要求1所述的方法，其中所述获取包括：
以预设的时间间隔分别从通过所述多个相机拍摄的视频的图像帧中获取拍摄曝光值。
4.如权利要求3所述的方法，还包括：
感测所述电子装置的运动；以及
基于感测到的电子装置的运动分别从拍摄到的视频的图像帧中重新获取拍摄曝光值。
5.如权利要求1所述的方法，其中所述获取包括：
由图像信号处理器ISP获取所述多个相机的拍摄曝光值，
其中，所述重置包括由数字信号处理器DSP基于获取到的拍摄曝光值来重置要应用于所述多个相机中的至少一个的拍摄曝光值中的所述至少一个，以及
其中，所述方法还包括：
基于从ISP接收到的控制命令，由所述多个相机使用重置的拍摄曝光值来拍摄所述第二图像。
6.一种用于提供全景图像的电子装置，所述电子装置包括：
多个相机，被配置为拍摄第一图像；以及
处理器，被配置为：
确定分别从所述多个相机获取到的拍摄曝光值之间的差是否在预设的阈值范围之外；
基于确定获取的拍摄曝光值之间的差被确定为在预设的阈值范围之内，保持获取的拍摄曝光值；
基于获取的拍摄曝光值之间的差被确定为在预设的阈值范围之外：
显示参考相机设置的图标；
基于对显示的参考相机设置的图标的选择，在显示参考相机设置的图标的同时，显示包括分别与所述多个相机对应的对象的列表；以及
基于对显示的列表中包括的对象之一的选择，通过所述多个相机当中与被选择的一个对象对应的参考相机的拍摄曝光值来重置要应用于所述多个相机中的至少一个的拍摄曝光值中的至少一个；以及
使用重置的所述拍摄曝光值中的至少一个，生成包括分别通过所述多个照相机拍摄的第二图像的全景图像。
7.如权利要求6所述的电子装置，
其中，所述处理器还被配置为基于对显示的参考相机设置的图标的所述选择，通过与所选择的对象相对应的相机的拍摄曝光值重置其它相机的拍摄曝光值中的每一个。
8.如权利要求6所述的电子装置，其中，所述处理器还被配置为以预设的时间间隔分别从通过所述多个相机拍摄的视频的图像帧中获取拍摄曝光值。
9.如权利要求8所述的电子装置，还包括：
传感器，被配置为感测所述电子装置的运动，
其中，所述处理器还被配置为基于感测到的电子装置的运动分别从拍摄到的视频的图像帧中重新获取拍摄曝光值。
CN201780006204.8A 2016-03-11 2017-03-13 用于提供全景图像的电子装置及其控制方法 Active CN108476290B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201662306871P 2016-03-11 2016-03-11
US62/306,871 2016-03-11
KR10-2016-0063926 2016-05-25
KR20160063926 2016-05-25
KR10-2016-0163626 2016-12-02
KR1020160163626A KR101822169B1 (ko) 2016-03-11 2016-12-02 파노라마 영상을 제공하는 전자 장치 및 그 제어 방법
PCT/KR2017/002677 WO2017155365A1 (en) 2016-03-11 2017-03-13 Electronic apparatus for providing panorama image and control method thereof

Publications (2)

Publication Number Publication Date
CN108476290A CN108476290A (zh) 2018-08-31
CN108476290B true CN108476290B (zh) 2020-11-27

Family

ID=60034171

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780006204.8A Active CN108476290B (zh) 2016-03-11 2017-03-13 用于提供全景图像的电子装置及其控制方法

Country Status (3)

Country Link
EP (1) EP3366037B1 (zh)
KR (1) KR101822169B1 (zh)
CN (1) CN108476290B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022061908A1 (zh) * 2020-09-28 2022-03-31 深圳市大疆创新科技有限公司 全景图像拍摄方法、拍摄设备与可移动平台
KR20230023498A (ko) 2021-08-10 2023-02-17 삼성전자주식회사 언더 디스플레이 카메라를 포함하는 전자 장치 및 그 동작 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101253764A (zh) * 2005-08-26 2008-08-27 皇家飞利浦电子股份有限公司 成像照相机处理单元和方法
CN102843513A (zh) * 2011-06-21 2012-12-26 三星电子株式会社 通过使用照相机识别目标的照相机装置以及方法
CN103108133A (zh) * 2011-11-11 2013-05-15 株式会社日立制作所 摄像装置
CN103905731A (zh) * 2014-03-26 2014-07-02 武汉烽火众智数字技术有限责任公司 一种宽动态图像采集方法及系统
CN104335569A (zh) * 2012-06-11 2015-02-04 索尼电脑娱乐公司 图像生成设备以及图像生成方法
CN105049727A (zh) * 2015-08-13 2015-11-11 小米科技有限责任公司 全景图像拍摄的方法、装置及系统

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001148865A (ja) * 1999-11-19 2001-05-29 Minolta Co Ltd 画像入力装置
JP2002251608A (ja) * 2001-02-23 2002-09-06 Mixed Reality Systems Laboratory Inc 撮像装置の制御装置及びその制御方法、画像処理装置及びその方法、並びにプログラムコード、記憶媒体
US7259784B2 (en) * 2002-06-21 2007-08-21 Microsoft Corporation System and method for camera color calibration and image stitching
JP2004193947A (ja) * 2002-12-11 2004-07-08 Fuji Xerox Co Ltd 三次元撮像装置および方法
US7576767B2 (en) * 2004-07-26 2009-08-18 Geo Semiconductors Inc. Panoramic vision system and method
KR101354899B1 (ko) * 2007-08-29 2014-01-27 삼성전자주식회사 파노라마 사진 촬영 방법
JP5180570B2 (ja) * 2007-12-11 2013-04-10 キヤノン株式会社 カメラ制御装置、カメラ制御方法、カメラシステム、及びプログラム
US8659670B2 (en) * 2009-04-20 2014-02-25 Qualcomm Incorporated Motion information assisted 3A techniques
US9007432B2 (en) * 2010-12-16 2015-04-14 The Massachusetts Institute Of Technology Imaging systems and methods for immersive surveillance
US10681304B2 (en) * 2012-06-08 2020-06-09 Apple, Inc. Capturing a panoramic image using a graphical user interface having a scan guidance indicator
JP5828039B2 (ja) * 2012-06-11 2015-12-02 株式会社ソニー・コンピュータエンタテインメント 画像生成装置および画像生成方法
KR20150125246A (ko) * 2014-04-30 2015-11-09 주식회사 이에스엠연구소 다시점 카메라에 대한 촬영 설정값을 조절하는 방법 및 다시점 카메라에 대한 촬영 설정값을 조절하는 장치

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101253764A (zh) * 2005-08-26 2008-08-27 皇家飞利浦电子股份有限公司 成像照相机处理单元和方法
CN102843513A (zh) * 2011-06-21 2012-12-26 三星电子株式会社 通过使用照相机识别目标的照相机装置以及方法
CN103108133A (zh) * 2011-11-11 2013-05-15 株式会社日立制作所 摄像装置
CN104335569A (zh) * 2012-06-11 2015-02-04 索尼电脑娱乐公司 图像生成设备以及图像生成方法
CN103905731A (zh) * 2014-03-26 2014-07-02 武汉烽火众智数字技术有限责任公司 一种宽动态图像采集方法及系统
CN105049727A (zh) * 2015-08-13 2015-11-11 小米科技有限责任公司 全景图像拍摄的方法、装置及系统

Also Published As

Publication number Publication date
CN108476290A (zh) 2018-08-31
EP3366037A1 (en) 2018-08-29
KR101822169B1 (ko) 2018-01-25
EP3366037B1 (en) 2023-05-03
EP3366037A4 (en) 2018-11-07
KR20170106177A (ko) 2017-09-20

Similar Documents

Publication Publication Date Title
JP7185434B2 (ja) 複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法
JP6679577B2 (ja) ３ｄパノラマイメージ生成のための映像生成装置及び方法
CN109218606B (zh) 摄像控制设备、其控制方法及计算机可读介质
KR102383134B1 (ko) 우선 순위에 기반하여 이미지를 처리하는 전자 장치 및 그 동작 방법
KR102622123B1 (ko) 전자 장치의 움직임에 따라 관심 영역에 움직이는 피사체에 대한 움직임과 관련된 임계값을 조정하여 동영상을 촬영하는 전자 장치 및 그 작동 방법
EP3621292B1 (en) Electronic device for obtaining images by controlling frame rate for external moving object through point of interest, and operating method thereof
US10270977B2 (en) Imaging apparatus and a method of tracking a subject in the imaging apparatus
EP3661189A1 (en) Electronic device capable of controlling image display effect, and method for displaying image
KR20180129667A (ko) 표시 제어 장치, 표시 제어 방법 및 저장 매체
US10009545B2 (en) Image processing apparatus and method of operating the same
CN108476290B (zh) 用于提供全景图像的电子装置及其控制方法
US11706378B2 (en) Electronic device and method of controlling electronic device
EP3739864A1 (en) Electronic apparatus, control method of electronic apparatus, program, and computer readable medium
US10645282B2 (en) Electronic apparatus for providing panorama image and control method thereof
JP2018067851A (ja) 撮像制御プログラム、撮像制御方法および情報処理装置
CN114096984A (zh) 从通过拼接部分图像而创建的全向图像中去除图像捕获装置
KR20180111991A (ko) 화상 처리 장치, 화상 처리 방법 및 화상 처리 시스템
KR20190065736A (ko) 3d 이미지를 생성하기 위한 전자 장치 및 방법
JP2018112991A (ja) 画像処理装置、画像処理システム、画像処理方法、及びプログラム
US10425594B2 (en) Video processing apparatus and method and computer program for executing the video processing method
KR102494696B1 (ko) 영상을 생성하는 방법 및 디바이스.
JP2022140421A (ja) 撮影システム、撮像装置、表示装置、制御方法、及びプログラム
JP2022140424A (ja) 撮像装置及びその制御方法並びにプログラム
JP2023055074A (ja) 撮像装置及びその制御方法並びにプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant