CN112655194B - 用于捕获视图的电子装置和方法 - Google Patents

用于捕获视图的电子装置和方法 Download PDF

Info

Publication number
CN112655194B
CN112655194B CN201980057980.XA CN201980057980A CN112655194B CN 112655194 B CN112655194 B CN 112655194B CN 201980057980 A CN201980057980 A CN 201980057980A CN 112655194 B CN112655194 B CN 112655194B
Authority
CN
China
Prior art keywords
view
electronic device
image sensor
mode
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980057980.XA
Other languages
English (en)
Other versions
CN112655194A (zh
Inventor
普尔基特·阿格拉瓦尔
库沙尔·库玛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN112655194A publication Critical patent/CN112655194A/zh
Application granted granted Critical
Publication of CN112655194B publication Critical patent/CN112655194B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1641Details related to the display arrangement, including those related to the mounting of the display in the housing the display being formed by a plurality of foldable display components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1675Miscellaneous details related to the relative movement between the different enclosures or enclosure parts
    • G06F1/1677Miscellaneous details related to the relative movement between the different enclosures or enclosure parts for detecting open or closed state or particular intermediate positions assumed by movable parts of the enclosure, e.g. detection of display lid position with respect to main body in a laptop, detection of opening of the cover of battery compartment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/58Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/41Extracting pixel data from a plurality of image sensors simultaneously picking up an image, e.g. for increasing the field of view by combining the outputs of a plurality of sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Studio Devices (AREA)

Abstract

本文的实施例提供了一种用于在包括至少两个图像传感器的电子装置中捕获视图的方法。所述方法包括:确定包括第一图像传感器的电子装置的第一侧与包括第二图像传感器的电子装置的第二侧之间的折叠角度。此外,所述方法还包括:使用第一图像传感器捕获场景的第一视图并且使用第二图像传感器捕获场景的第二视图。此外,所述方法包括:基于折叠角度确定第一视图与第二视图是彼此部分重叠、彼此完全重叠还是彼此不重叠。

Description

用于捕获视图的电子装置和方法
技术领域
本文的实施例涉及使用电子装置的成像。更具体地,涉及用于捕获视图的电子装置和方法。
背景技术
一般来说,电子装置主导现代生活的所有方面。电子装置包括用于捕获具有各种照片效果的图像的图像传感器,其中,各种照片效果增强了图像的质量。然而,因为单个图像传感器具有有限的视场(FOV),所以具有单个图像传感器的电子装置可能不能够在没有专用广角镜头的情况下捕获广角图像/视频。此外,具有双图像传感器的电子装置也具有固定的FOV,因此电子装置不能捕获在双图像传感器的FOV之外的场景的部分。
由于单个图像传感器和双图像传感器的限制,电子装置不能为图像提供各种照片效果。例如,当用户想要捕获具有全景效果的场景时,则用户将必须执行各种动作(如将电子装置保持在特定位置和水平移动电子装置等),这是耗时且复杂的并且降低了用户体验。
以上信息仅作为背景信息呈现,以帮助读者理解本公开。关于上述内容中的任何一个是否可以作为关于本申请的现有技术适用,申请人没有做出确定并且没有做出断言。
发明内容
问题解决方案
根据本公开的一方面,提供了一种电子装置和用于在电子装置中捕获视图的方法,其中,电子装置包括至少两个图像传感器。
根据本公开的一方面,可以至少使用电磁体来确定电子装置的至少两个图像传感器的弯曲角度。
根据本公开的一方面,可以基于弯曲角度来确定第一视图和第二视图是彼此部分重叠、彼此完全重叠还是彼此不重叠。
根据本公开的一方面,可以基于场景的第一视图和第二视图来确定第一操作模式、第二操作模式和第三操作模式中的至少一个。
根据本公开的一方面,第二视图可以是响应于检测到为弯曲电子装置而执行的手势由第二图像传感器捕获的。
根据本公开的一方面,可以在场景的合成视图上显示第一图像传感器和第二图像传感器的成像选项的叠加组。
根据本公开的一方面,一种用于在包括至少两个图像传感器的电子装置中捕获视图的方法包括:由所述至少两个图像传感器中的第一图像传感器捕获场景的第一视图。此外,所述方法还包括:由电子装置确定所述电子装置的所述至少两个图像传感器中的第二图像传感器的弯曲角度,以及由第二图像传感器从弯曲角度捕获场景的第二视图。此外,所述方法包括基于第一视图、第二视图和弯曲角度在电子装置中执行至少一个动作。
根据本公开的一方面,一种电子装置包括:至少两个图像传感器,用于基于弯曲角度的成像;存储器;处理器;和基于弯曲角度的成像管理引擎。基于弯曲角度的成像管理引擎被配置为:使用第一图像传感器捕获场景的第一视图并确定电子装置的弯曲角度。此外,基于弯曲角度的成像管理引擎还被配置为:使用第二图像传感器从弯曲角度捕获场景的第二视图,并且基于第一视图、第二视图和弯曲角度在电子装置中执行至少一个动作。
根据本公开的一方面,一种可穿戴电子装置包括:至少两个图像传感器,用于基于弯曲角度的成像;显示部,被配置为显示数字内容;和第一连接部,连接到显示部的一侧的,其中,第一连接部包括第一图像传感器。此外,可穿戴电子装置还包括:第二连接部,连接到显示部的另一侧,其中,第二连接部包括第二图像传感器;和舒适部,被配置为连接第一连接部和第二连接部,其中,舒适部包括用于弯曲第一图像传感器和第二图像传感器中的至少一个以执行基于弯曲角度的成像的凹槽。
根据本公开的一方面,一种用于在包括至少两个图像传感器的电子装置中捕获视图的方法包括:确定包括第一图像传感器的电子装置的第一侧与包括第二图像传感器的电子装置的第二侧之间的折叠角度;使用第一图像传感器捕获场景的第一视图;使用第二图像传感器捕获场景的第二视图;以及基于折叠角度确定第一视图和第二视图是彼此部分重叠、彼此完全重叠还是彼此不重叠。
确定折叠角度可以包括:当第一电磁体和第二电磁体关闭时测量磁力计的读数;检测到第一电磁体开启;在不折叠的情况下,当第一电磁体开启并且第二电磁体关闭时,确定磁力计的读数;在不折叠的情况下,确定当第一电磁体和第二电磁体关闭时磁力计的读数与当第一电磁体开启时磁力计的读数之间的差;在折叠的情况下,当第一电磁体开启并且第二电磁体关闭时,确定磁力计的读数;以及基于差和在折叠的情况下当第一电磁体开启并且第二电磁体关闭时磁力计的读数来确定电子装置的折叠角度。
所述方法还可以包括:当第一视图与第二视图部分重叠时确定至少一个第一操作模式,当第一视图与第二视图完全重叠时确定至少一个第二操作模式,并且当第一视图不与第二视图重叠时确定至少一个第三操作模式;将电子装置自动配置在确定的所述至少一个第一操作模式、所述至少一个第二操作模式或所述至少一个第三操作模式中;以及以确定的所述至少一个第一操作模式、所述至少一个第二操作模式或所述至少一个第三操作模式自动显示场景的第一视图和第二视图。
所述至少一个第一操作模式可以是全景模式、对象去除模式和立体效果模式中的一种,所述至少一个第二操作模式可以是散焦效果模式、倾斜移位/点聚焦模式、双曝光模式和立体效果模式中的一种,并且所述至少一个第三操作模式可以是双曝光模式和背景替换模式中的一种。
在对象去除模式中,电子装置可以被配置为当从第一视图和第二视图中的至少一个去除对象时,在场景的合成视图中自动保留背景信息。
在双曝光模式中,电子装置可以被配置为将第一视图的至少一部分与第二视图的至少一部分自动混合,以产生示出双曝光的艺术效果的合成视图。
在全景模式中,电子装置可以被配置为对第一视图和第二视图的至少一个重叠部分进行自动拼接以产生合成视图。
可以通过以下步骤来产生全景模式中的合成视图:确定第二图像传感器是处于独立操作模式还是辅助操作模式;当第二图像传感器处于独立操作模式时,通过将场景的第一视图与场景的第二视图拼接来产生合成视图;并且当第二图像传感器处于辅助操作模式时,通过将场景的第二视图与场景的第一视图叠加来产生合成视图。
在立体效果模式中,电子装置可以被配置为使用不同颜色的滤光器对第一视图和第二视图进行自动编码,并且通过对第一视图和第二视图的视角进行移位并重叠第一视图和第二视图来产生合成视图。
在散焦效果模式中,电子装置可以被配置为以较短焦距自动操作第一图像传感器以捕获第一图像,并且以平移焦距自动操作第二图像传感器以捕获与第一图像的形状相同的形状的第二图像,并且产生合成视图,其中,通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图。
在倾斜移位/点聚焦模式中,电子装置可以被配置为以较短的焦距自动操作第一图像传感器以捕获第一图像,以线性焦距或径向焦距自动操作第二图像传感器以捕获与第一图像的形状相同的形状的第二图像,并且产生合成视图,其中,通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图。
在背景替换模式中,电子装置可以被配置为自动识别第一视图中的主要对象和第二视图中的次要对象,并且通过利用次要对象替换第一视图中的剩余区域来产生合成视图。
所述方法还可以包括:确定第一图像传感器的第一组成像选项;确定第二图像传感器的第二组成像选项;基于用户偏好对第一组成像选项和第二组成像选项进行排序;基于折叠角度,将表示第一图像传感器的第一组成像选项的第一组显示元素叠加在表示第二图像传感器的第二组成像选项的第二组显示元素上;以及在场景的合成视图上显示叠加的第一组显示元素和第二组显示元素。
通过基于折叠角度修改第一组显示元素和第二组显示元素中表示至少一个成像选项的至少一个显示元素,第一组显示元素可以与第二组显示元素重叠。
所述方法还可以包括:检测从第一组成像选项和第二组成像选项中选择的成像选项;确定选择的成像选项所需的新的折叠角度;通过基于新的折叠角度应用选择的成像选项来操纵第一视图和第二视图;以及在电子装置上显示操纵的第一视图和操纵的第二视图。
所述方法还可以包括:检测由用户执行的捕获事件;以及将合成视图捕获为单个图像。
基于第一视图、第二视图和折叠角度在电子装置中执行所述至少一个动作可包括:在电子装置上显示第一视图、第二视图和折叠角度;在电子装置上显示表示与折叠角度相应的多个成像选项的多个显示元素;检测从多个成像选项中选择的成像选项;确定选择的成像选项所需的新的折叠角度;通过基于新的折叠角度应用选择的成像选项来操纵第一视图和第二视图;以及在电子装置上显示操纵的第一视图和操纵的第二视图。
电子装置可以包括与第一图像传感器相关联的第一麦克风和与第二图像传感器相关联的第二麦克风,并且第一视图可以包括使用第一图像传感器捕获的图像内容和使用第一麦克风捕获的音频内容中的至少一个,并且第二视图包括使用第二图像传感器捕获的图像内容和使用第二麦克风捕获的音频内容中的至少一个,其中,音频内容的强度基于电子装置的折叠角度而动态地改变。
第二视图可以是响应于检测到为折叠电子装置而执行的手势由第二图像传感器捕获的。
场景的第一视图可以不同于场景的第二视图。
根据本公开的一方面,一种电子装置包括:至少两个图像传感器,包括第一图像传感器和第二图像传感器;存储器;至少一个处理器,耦合到存储器,其中,所述至少一个处理器被配置为:确定包括第一图像传感器的电子装置的第一侧与包括第二图像传感器的电子装置的第二侧之间的折叠角度;使用第一图像传感器捕获场景的第一视图;使用第二图像传感器捕获场景的第二视图;以及基于折叠角度确定第一视图和第二视图是彼此部分重叠、彼此完全重叠还是彼此不重叠。
所述至少一个处理器还可以被配置为:当第一电磁体和第二电磁体关闭时测量磁力计的读数;检测到第一电磁体开启;在不折叠的情况下,当第一电磁体开启并且第二电磁体关闭时,确定磁力计的读数;在不折叠的情况下,确定当第一电磁体和第二电磁体关闭时磁力计的读数与当第一电磁体开启时磁力计的读数之间的差;在折叠的情况下,当第一电磁体开启并且第二电磁体关闭时,确定磁力计的读数;以及基于所述差和在折叠的情况下当第一电磁体开启并且第二电磁体关闭时磁力计的读数来确定电子装置的折叠角度。
所述至少一个处理器还可以被配置为:基于折叠角度确定第一视图和第二视图是彼此部分重叠、彼此完全重叠还是彼此不重叠;当第一视图与第二视图部分重叠时确定至少一个第一操作模式,当第一视图与第二视图完全重叠时确定至少一个第二操作模式,并且当第一视图不与第二视图重叠时确定至少一个第三操作模式;将电子装置自动配置在确定的所述至少一个第一操作模式、所述至少一个第二操作模式或所述至少一个第三操作模式中;以及以确定的所述至少一个第一操作模式、所述至少一个第二操作模式或所述至少一个第三操作模式自动显示场景的第一视图和第二视图。
所述至少一个第一操作模式可以是全景模式、对象去除模式和立体效果模式中的一种,所述至少一个第二操作模式可以是散焦效果模式、倾斜移位/点聚焦模式、双曝光模式和立体效果模式中的一种,并且所述至少一个第三操作模式可以是双曝光模式和背景替换模式中的一种。
在对象去除模式中,电子装置可以被配置为当从第一视图和第二视图中的至少一个去除对象时,在场景的合成视图中自动保留背景信息。
在双曝光模式中,电子装置可以被配置为将第一视图的至少一部分与第二视图的至少一部分自动混合,以产生示出双曝光的艺术效果的合成视图。
在全景模式中,电子装置可以被配置为对第一视图和第二视图的至少一个重叠部分进行自动拼接以产生合成视图。
所述至少一个处理器还可以被配置为:确定第二图像传感器是处于独立操作模式还是辅助操作模式;当第二图像传感器处于独立操作模式时,通过将场景的第一视图与场景的第二视图拼接来产生合成视图;并且当第二图像传感器处于辅助操作模式时,通过将场景的第二视图与场景的第一视图叠加来产生合成视图。
在立体效果模式中,电子装置可以被配置为使用不同颜色的滤光器对第一视图和第二视图进行自动编码,并且通过对第一视图和第二视图的视角进行移位并重叠第一视图和第二视图来产生合成视图。
在散焦效果模式中,电子装置可以被配置为以较短焦距自动操作第一图像传感器以捕获第一图像,以平移焦距自动操作第二图像传感器以捕获与第一图像的形状相同的形状的第二图像,并且产生合成视图,其中,通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图。
在倾斜移位/点聚焦模式中,电子装置可以被配置为以较短的焦距自动操作第一图像传感器以捕获第一图像,以线性焦距或径向焦距自动操作第二图像传感器以捕获与第一图像的形状相同的形状的第二图像,并且产生合成视图,其中,通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图。
在背景替换模式中,电子装置可以被配置为自动识别第一视图中的主要对象和第二视图中的次要对象,并且通过利用次要对象替换第一视图中的剩余区域来产生合成视图。
所述至少一个处理器还可以被配置为:确定第一图像传感器的第一组成像选项;确定第二图像传感器的第二组成像选项;基于用户偏好对第一组成像选项和第二组成像选项进行排序;基于折叠角度,将表示第一图像传感器的第一组成像选项的第一组显示元素叠加在表示第二图像传感器的第二组成像选项的第二组显示元素上;以及在场景的合成视图上显示第一图像传感器和第二图像传感器的第一组显示元素和第二组显示元素的叠加。
通过基于折叠角度修改第一组显示元素和第二组显示元素中表示至少一个成像选项的至少一个显示元素,使得第一组显示元素可以与第二组显示元素叠加在一起。
所述至少一个处理器还可以被配置为:检测从第一组成像选项和第二组成像选项中选择的成像选项;确定选择的成像选项所需的新的折叠角度;通过基于新的折叠角度应用选择的成像选项来操纵第一视图和第二视图;以及在电子装置上显示操纵的第一视图和操纵的第二视图。
所述至少一个处理器还可以被配置为:检测由用户执行的捕获事件;以及将合成视图捕获为单个图像。
所述至少一个处理器还可以被配置为:在电子装置上显示第一视图、第二视图和折叠角度;在电子装置上显示表示与折叠角度相应的多个成像选项的多个显示元素;检测从多个成像选项中选择的成像选项;确定选择的成像选项所需的新的折叠角度;通过基于新的折叠角度应用选择的成像选项来操纵第一视图和第二视图;以及在电子装置上显示操纵的第一视图和操纵的第二视图。
所述电子装置还可以包括与第一图像传感器相关联的第一麦克风和与第二图像传感器相关联的第二麦克风,并且第一视图可以包括使用第一图像传感器捕获的图像内容和使用第一麦克风捕获的音频内容中的至少一个,并且第二视图可以包括使用第二图像传感器捕获的图像内容和使用第二麦克风捕获的音频内容中的至少一个,其中,音频内容的强度基于电子装置的折叠角度而动态地改变。
第二视图可以是响应于检测到为折叠电子装置而执行的手势由第二图像传感器捕获的。
场景的第一视图可以不同于场景的第二视图。
根据本公开的一方面,一种可穿戴电子装置包括:至少两个图像传感器,包括第一图像传感器和第二图像传感器;显示部,被配置为显示数字内容;第一连接部,连接到显示部的一侧,其中,第一连接部包括第一图像传感器;第二连接部,与显示部的另一侧连接,其中,第二连接部包括第二图像传感器;以及舒适部,被配置为连接第一连接部和第二连接部,其中,舒适部包括用于改变第一连接部和第二连接部之间的折叠角度的凹槽。
显示部可以包括:至少一个处理器,被配置为:检测在凹槽上被执行以改变折叠角度的手势;基于在凹槽上执行的手势来确定折叠角度;使用第一图像传感器捕获场景的第一视图;使用第二图像传感器捕获场景的第二视图;以及基于折叠角度确定第一视图和第二视图是彼此部分重叠、彼此完全重叠还是彼此不重叠。
可穿戴电子装置还可以包括与第一图像传感器相关联的第一麦克风和与第二图像传感器相关联的第二麦克风,其中,第一视图包括使用第一图像传感器捕获的图像内容和使用第一麦克风捕获的音频内容中的至少一个,并且第二视图包括使用第二图像传感器捕获的图像内容和使用第二麦克风捕获的音频内容中的至少一个,其中,音频内容的强度基于可穿戴电子装置的折叠角度而动态地改变。
根据本公开的一个方面,一种可折叠电子装置包括:固定折叠轴;第一图像传感器,设置在固定折叠轴的第一侧上;第二图像传感器,设置在固定折叠轴的第二侧上;传感器,被配置为确定第一侧和第二侧之间的折叠角度;以及处理器,被配置为基于折叠角度从多个图像捕获模式中选择图像捕获模式。
多个图像捕获模式包括完全重叠模式、部分重叠模式以及非重叠模式,其中,在完全重叠模式中,由第一图像传感器和第二图像传感器捕获的图像完全重叠,在部分重叠模式中,由第一图像传感器和第二图像传感器捕获的图像部分重叠,在非重叠模式中,由第一图像传感器和第二图像传感器捕获的图像不重叠。
可折叠电子装置还可以包括:显示器,被配置为显示由第一图像传感器捕获的第一图像和由第二图像传感器捕获的第二图像,其中,处理器还可以被配置为基于选择的图像捕获模式来确定可用的照片效果,所确定的照片效果是从多个照片效果中被确定的,并且其中,显示器可以被配置为显示表示确定的照片效果的多个显示元素。
响应于与除选择的图像捕获模式之外的图像捕获模式相应的照片效果被选择,显示器可以被配置为显示表示选择的照片效果可用的另一图像捕获模式所需的新的折叠角度的显示元素。
当结合以下描述和附图考虑时,将更好地领会和理解本文实施例的这些和其他方面。然而,应当理解,以下描述虽然指示实施例及其参数集特定细节,但是通过说明而非限制的方式给出。在不脱离本发明的精神的情况下,可以在本文的实施例的范围内进行许多改变和修改,并且本文的实施例包括所有这些修改。
附图说明
在附图中示出了本公开,贯穿附图,相同的附图标号指示各个附图中的相应部分。根据以下结合附图进行的描述,本公开的特定实施例的以上和其他方面、特征和优点将更加明显,其中:
图1A是示出根据现有技术的具有单个图像传感器的电子装置的视场(FOV)的示例;
图1B是示出根据实施例的具有至少两个图像传感器的电子装置的视场(FOV)的示例;
图2A是根据实施例的用于提供基于弯曲角度的成像的电子装置的框图;
图2B是根据实施例的电子装置的基于弯曲角度的成像管理引擎的框图;
图3A示出根据实施例的用于提供基于弯曲角度的成像的示例电子装置;
图3B示出根据实施例的用于提供基于弯曲角度的成像的示例电子装置;
图3C示出根据实施例的用于提供基于弯曲角度的成像的示例电子装置;
图4A是根据实施例的用于包括至少两个图像传感器的电子装置中的基于弯曲角度的成像的流程图;
图4B是根据实施例的用于包括至少两个图像传感器的电子装置中的基于弯曲角度的成像的流程图;
图5是根据实施例的用于确定电子装置的弯曲角度的流程图;
图6A示出根据实施例的基于手势确定电子装置的弯曲角度;
图6B示出根据实施例的基于手势确定电子装置的弯曲角度;
图6C示出根据实施例的基于手势确定电子装置的弯曲角度;
图6D示出根据实施例的基于手势确定电子装置的弯曲角度;
图6E示出根据实施例的基于手势确定电子装置的弯曲角度;
图7A是示出根据实施例的具有用于捕获场景的合成视图的至少两个图像传感器的电子装置的示例;
图7B是根据实施例的用于通过具有至少两个图像传感器的电子装置捕获场景的合成视图的示例说明;
图8A是示出根据实施例的将第一操作模式中的对象去除效果应用于场景的合成视图的示例;
图8B是示出根据实施例的将第一操作模式中的对象去除效果应用于场景的合成视图的示例;
图8C是示出根据实施例的将第一操作模式中的对象去除效果应用于场景的合成视图的示例;
图8D是示出根据实施例的将第一操作模式中的对象去除效果应用于场景的合成视图的示例;
图9是根据实施例的用于使用可穿戴电子装置捕获场景的第一视图和第二视图的示例说明;
图10是示出根据实施例的将第一操作模式中的全景效果应用于场景的合成视图的示例;
图11是示出根据实施例的将第三操作模式中的背景替换效果应用于场景的合成视图的示例;
图12是示出根据实施例的将第二操作模式中的散焦效果应用于场景的合成视图的示例;以及
图13是示出根据实施例的包含音频内容以及图像的第一视图和第二视图的捕获的示例。
具体实施方式
现在将参照附图详细描述本公开的各种实施例。在以下描述中,仅提供具体细节(诸如详细配置和组件)以帮助全面理解本公开的这些实施例。因此,对于本领域技术人员显而易见的是,在不脱离本公开的范围和精神的情况下,可以对本文描述的实施例进行各种改变和修改。此外,为了清楚和简明,省略了公知的功能和结构的描述。
此外,因为一些实施例可以与一个或更多个其他实施例组合以形成新的实施例,所以本文描述的各种实施例不一定是互斥的。
除非另有说明,否则如本文使用的术语“或”是指非排他性的。本文使用的示例仅旨在便于理解可以实践本文的实施例的方式,并且本领域技术人员可以进一步实践本文的实施例。因此,示例不应被解释为限制本文的实施例的范围。
如本领域中的传统,可以根据执行描述的功能或多个功能的框来描述和示出实施例。这些块(在本文中可以被称为单元、引擎、管理器、模块等)由模拟和/或数字电路(诸如逻辑门、集成电路、微处理器、微控制器、存储器电路、无源电子组件、有源电子组件、光学组件、硬连线电路等)物理地实现,并且可以可选地由固件和/或软件驱动。例如,电路可以被体现在一个或更多个半导体芯片中,或者被体现在基底支撑件(诸如印刷电路板等)上。构成块的电路可以由专用硬件实现,或者由处理器(例如,一个或更多个编程的微处理器和相关联的电路)实现,或者由执行块的一些功能的专用硬件和执行块的其他功能的处理器的组合实现。在不脱离本公开的范围的情况下,实施例的每个块可以被物理地划分成两个或更多个相互作用和离散的块。同样地,在不脱离本公开的范围的情况下,实施例的框可以被物理地组合成更复杂的框。
因此,本文的实施例提供了一种用于在包括至少两个图像传感器的电子装置中进行基于弯曲角度的成像的方法。所述方法包括由至少两个图像传感器中的第一图像传感器捕获场景的第一视图。此外,所述方法还包括由电子装置基于手势确定电子装置的至少两个图像传感器中的第二图像传感器的弯曲角度,以及由第二图像传感器从弯曲角度捕获场景的第二视图。此外,所述方法包括基于第一视图、第二视图和弯曲角度在电子装置中执行至少一个动作。
在实施例中,确定电子装置的弯曲角度包括:测量当第一电磁体和第二电磁体关闭时磁力计的读数以及检测到第一电磁体开启。所述方法还包括在没有弯曲的情况下确定当第一电磁体开启并且第二电磁体关闭时磁力计的读数以及在没有弯曲的情况下确定当第一电磁体和第二电磁体关闭时磁力计的读数与当第一电磁体开启时磁力计的读数之间的差。此外,所述方法包括在弯曲的情况下确定当第一电磁体开启并且第二电磁体关闭时磁力计的读数,以及基于所述差和当在弯曲的情况下第一电磁体开启并且第二电磁体关闭时磁力计的读数来确定电子装置的弯曲角度。
在实施例中,基于第一视图、第二视图和弯曲角度在电子装置中执行至少一个动作包括:基于弯曲角度确定第一视图和第二视图是否是彼此部分重叠、彼此完全重叠以及彼此不重叠中的一种。所述方法还包括:当第一视图与第二视图部分重叠时确定至少一个第一操作模式,或者当第一视图与第二视图完全重叠时确定至少一个第二操作模式,并且当第一视图不与第二视图重叠时确定第三操作模式。此外,所述方法还包括以确定的第一操作模式或第二操作模式或第三操作模式自动配置电子装置,以及以确定的第一操作模式或第二操作模式或第三操作模式自动显示场景的第一视图和第二视图。
在实施例中,至少一个第一操作模式是全景模式、对象去除模式和立体效果模式中的一个,其中,至少一个第二操作模式是散焦效果模式、倾斜移位/点聚焦模式、双曝光模式、立体效果模式中的一个,并且其中,至少一个第三操作模式是双曝光模式和背景替换模式中的一个。
在实施例中,对象去除模式将电子装置配置为当从第一视图和第二视图中的至少一个去除对象时,自动地将背景信息保留在场景的合成视图中。
在实施例中,双曝光模式将电子装置配置为自动混合第一视图的至少一部分与第二视图的至少一部分,以产生示出双曝光的艺术效果的合成视图。
在实施例中,全景模式将电子装置配置为自动拼接第一视图和第二视图的至少一个重叠部分以产生合成视图。
在实施例中,通过确定第二图像传感器是处于独立操作模式还是辅助操作模式来产生全景模式中的合成视图。所述方法还包括:当第二图像传感器处于独立操作模式时,通过将场景的第一视图与场景的第二视图拼接来产生合成视图,或者当第二图像传感器处于辅助操作模式时,通过将场景的第二视图与场景的第一视图叠加来产生合成视图。
在实施例中,立体效果模式将电子装置配置为使用不同颜色的滤光器对第一视图和第二视图进行自动编码,并且通过对第一视图和第二视图的视角进行移位并重叠第一视图和第二视图来产生合成视图。
在实施例中,散焦效果模式将电子装置配置为以较短焦距自动操作第一图像传感器以捕获第一图像,并且以平移焦距自动操作第二图像传感器以捕获如第一图像的精确形状的第二图像,并产生合成视图,其中,通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图。
在实施例中,倾斜移位/点聚焦模式将电子装置配置为以较短的焦距自动操作第一图像传感器以捕获第一图像,并且以线性或径向焦距自动操作第二图像传感器以捕获精确形状的第二图像并产生合成视图,其中,通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图。
在实施例中,背景替换模式将电子装置配置为自动识别第一视图和第二视图中的主要对象和次要对象,并且通过利用次要对象替换具有主要对象的第一视图和第二视图中的至少一个中的剩余区域来产生合成视图。
在实施例中,所述方法还包括确定第一图像传感器的成像选项组以及确定第二图像传感器的成像选项组。此外,所述方法还包括基于用户偏好对第一图像传感器的成像选项组和第二图像传感器的成像选项组进行排序。此外,所述方法包括基于弯曲角度将第一图像传感器的成像选项组叠加在第二图像传感器的成像选项组上,并且在场景的合成视图上显示第一图像传感器和第二图像传感器的成像选项的叠加组。
在实施例中,通过基于弯曲角度修改来自第一图像传感器和第二图像传感器中的至少一个的成像选项组的至少一个成像选项,使得第一图像传感器的成像选项组与第二图像传感器的成像选项组被叠加在一起。
在实施例中,所述方法还包括检测从第一图像传感器和第二图像传感器中的至少一个的成像选项组中选择的成像选项,并且确定与选择的成像选项相应的新的弯曲角度。此外,所述方法还包括通过基于新的弯曲角度应用选择的成像选项来操纵第一视图和第二视图,并且在电子装置上显示操纵的第一视图和操纵的第二视图。
在实施例中,所述方法还包括检测由用户执行的捕获事件并且将组合视图捕获为单个图像。
在实施例中,基于第一视图、第二视图和弯曲角度在电子装置中执行至少一个动作包括:在电子装置上显示第一视图、第二视图和弯曲角度,并且在电子装置上显示与弯曲角度相应的多个成像选项。所述方法包括检测从多个成像选项中选择的成像选项,并且确定与选择的成像选项相应的新的弯曲角度。此外,所述方法还包括通过基于新的弯曲角度应用选择的成像选项来操纵第一视图和第二视图,并且在电子装置上显示操纵的第一视图和操纵的第二视图。
在实施例中,第一视图包括使用第一图像传感器捕获的图像内容和音频内容中的至少一个,并且第二视图包括使用第二图像传感器捕获的图像内容和音频内容中的至少一个,其中,音频内容的强度基于电子装置的弯曲角度动态地改变。
在实施例中,响应于检测到为弯曲电子装置而执行的手势,由第二图像传感器捕获第二视图。
在实施例中,场景的第一视图和第二视图相同或不同。
在常规方法和系统中,使用没有固定弯曲轴(即,折叠轴)的柔性电子装置的形状变形特性来控制柔性电子装置。与常规方法和系统不同,提出的电子装置包括弯曲轴,其中,电子装置沿着该弯曲轴弯曲(即,折叠)。此外,弯曲角度(即,折叠角度)用于控制电子装置的图像传感器的功能。
与常规方法和系统不同,提出的方法允许用户捕获大于120度的广角图像/视图,进行动态控制以通过弯曲电子装置来调整视场而不需要专用的广角相机模块。
现在参照附图,并且更具体地,参照图1B至图13示出本公开的实施例,其中,类似的附图标号在整个附图中一致地表示相应的特征。
图1B是示出根据本文公开的实施例的具有至少两个图像传感器110的电子装置100的视场(FOV)的示例。
与常规方法和系统不同,提出的方法包括为电子装置提供至少两个图像传感器。使用至少两个图像传感器使得电子装置能够捕获更宽的视场(FOV),从而捕获场景的更大部分。
参照图1B,结合图1A,由具有至少两个图像传感器的电子装置100覆盖的距离Z比由具有单个图像传感器的常规电子装置覆盖的距离Y宽。此外,用户可以在电子装置上执行弯曲手势以改变由至少两个图像传感器覆盖的距离。因此,由至少两个图像传感器覆盖的距离Z与弯曲角度A成正比。
此外,使用至少两个图像传感器使得电子装置能够向由电子装置捕获的视图/图像提供各种拍摄效果,这对于具有单个图像传感器的传统电子装置可能是不可能的。
图2A是根据本文公开的实施例的用于提供基于弯曲角度的成像的电子装置100的框图。
参照图2A,电子装置100包括至少两个图像传感器110、基于弯曲角度的成像管理引擎120、处理器130、存储器140和显示器150。
在实施例中,至少两个图像传感器110包括第一图像传感器110a和第二图像传感器110b。此外,第一图像传感器110a包括第一麦克风或与第一麦克风相关联,并且第二图像传感器110b包括第二麦克风或与第二麦克风相关联。第一图像传感器110a被配置为捕获场景的第一视图以及与第一视图相关联的音频内容。第二图像传感器110b被配置为根据电子装置100的弯曲角度捕获场景的第二视图以及与第二视图相关联的音频内容。第一视图和第二视图可以是相同场景或不同场景的部分。此外,第一视图和第二视图可以是相同场景的重叠部分,其中,第一视图将与第二视图相同。此外,第一视图和第二视图是分别在第一图像传感器110a和第二图像传感器110b的视场内捕获的场景的部分。在实施例中,可以由第二图像传感器110b响应于检测到对弯曲电子装置100执行的手势来捕获场景的第二视图。
在实施例中,第一视图包括使用第一图像传感器110a捕获的图像内容和音频内容中的至少一个,并且第二视图包括使用第二图像传感器110b捕获的图像内容和音频内容中的至少一个。
在实施例中,基于弯曲角度的成像管理引擎120被配置为确定电子装置100的弯曲角度。如图5和图6A至图6E所述确定电子装置100的弯曲角度。基于弯曲角度的成像管理引擎120还被配置为基于第一视图、第二视图和弯曲角度在电子装置100中执行至少一个动作。此外,基于弯曲角度的成像管理引擎120被配置为基于电子装置100的弯曲角度动态地改变使用至少一个图像传感器110捕获的音频内容的强度。此外,针对图2B描述了由基于弯曲角度的成像管理引擎120执行的详细功能。
在实施例中,当电子装置100是可穿戴电子装置时,则可以使用舒适部上的凹槽来改变弯曲角度,其中,凹槽与可穿戴电子装置的第一连接部和第二连接部接合。
在实施例中,处理器130被配置为与电子装置100中的单元(诸如至少两个图像传感器110、基于弯曲角度的成像管理引擎120、存储器140和显示器150)交互,以执行相应单元的功能。
存储器单元140可以包括一个或更多个计算机可读存储介质。存储器单元140可以包括非易失性存储元件。这种非易失性存储元件的示例可以包括磁性硬盘、光盘、软盘、闪存或电可编程存储器(EPROM)或电可擦除可编程(EEPROM)存储器的形式。另外,在一些示例中,存储器单元140可以被认为是非暂时性存储介质。术语“非暂时性”可以指示存储介质不被体现在载波或传播信号中。然而,术语“非暂时性”不应被解释为表示存储器单元140是不可移动的。在一些示例中,存储器单元140可以被配置为存储比存储器更大量的信息。在特定示例中,非暂时性存储介质(例如,在随机存取存储器(RAM)或高速缓存中)可以存储可随时间改变的数据。
在实施例中,如稍后描述的,显示器150被配置为在场景的合成视图上显示第一图像传感器110a和第二图像传感器110b的成像选项的叠加组。此外,如稍后描述的,显示器150还被配置为显示用于电子装置100的操纵的第一视图和操纵的第二视图。显示器150还被配置为在电子装置100上显示第一视图、第二视图和弯曲角度。显示器150被配置为在电子装置100上显示与弯曲角度相应的多个成像选项,并且在电子装置100上显示操纵的第一视图和操纵的第二视图。
图2A示出示例性系统,但是应当理解,其他实施例不限于此。在其他实施例中,系统可在电子装置100中包括更少或更多的单元。此外,电子装置100中的单元的标签或名称仅用于说明目的,并不限制本公开的范围。一个或更多个单元可以组合在一起以在系统中执行相同或基本相似的功能。
图2B是根据本文公开的实施例的电子装置100的基于弯曲角度的成像管理引擎120的框图。
参照图2B,基于弯曲角度的成像管理引擎120包括弯曲角度处理器121、原图处理引擎122、相机配置处理器123、拍摄模式评估器124、实时智能图像引擎125和弯曲渲染引擎126。
在实施例中,弯曲角度处理器121被配置为确定电子装置100的弯曲角度,其中,弯曲角度处理器121用于基于弯曲角度确定电子装置100可以提供的潜在摄影效果。关于由弯曲角度处理器121提供的弯曲角度的信息包括精确的弯曲角度以及第一视图和第二视图需要被改变的角度。此外,弯曲角度处理器121与第一电磁体(EM-1)、第二电磁体(EM-2)和单轴磁力计结合使用。此外,弯曲角度处理器121还被配置为检测从第一图像传感器110a和第二图像传感器110b中的至少一个的成像选项的组中选择的成像选项,并且确定与选择的成像选项相应的新的弯曲角度。
在实施例中,原图处理引擎122被配置为根据应用于该实例的相机配置对来自第一图像传感器110a和第二图像传感器110b的原始相机馈送进行缓冲。由于视图/图像捕获过程和视图/图像处理过程是具有不同处理速度的两个单独的并行过程,因此由原图处理引擎122提供中间级缓冲机制(mid-level buffering mechanism)。原图处理引擎122还被配置为检测由用户执行的捕获事件,并且将组合视图捕获为单个图像。
在实施例中,相机配置处理器123被配置为对第一视图和第二视图的相机配置进行应用和提供。此外,当捕获第一视图和第二视图时,相机配置处理器123还被配置为将相机配置数据提供给其他模块以用于数字处理阶段的决策。此外,相机配置处理器123还被配置为将电子装置100自动配置为第一操作模式、第二操作模式和第三操作模式中的一个。
相机配置处理器123还被配置为确定第一图像传感器110a的一组成像选项并确定第二图像传感器110b的一组成像选项。此外,相机配置处理器123被配置为基于用户偏好对第一图像传感器110a的成像选项组和第二图像传感器110b的成像选项组进行分类。
在实施例中,拍摄模式评估器124被配置为从弯曲角度处理器121和原图处理引擎122接收输入。此外,拍摄模式评估器124被配置为基于由弯曲角度处理器121确定的弯曲角度来确定第一视图和第二视图是否彼此部分重叠、彼此完全重叠以及彼此不重叠。此外,拍摄模式评估器124被配置为当第一视图与第二视图部分重叠时确定至少一个第一操作模式,当第一视图与第二视图完全重叠时确定至少一个第二操作模式,并且当第一视图与第二视图不重叠时确定第三操作模式。第一操作模式是全景模式、对象去除模式和立体效果模式中的一个。第二操作模式是散焦效果模式、倾斜移位/点聚焦模式、双曝光模式和立体效果模式中的一个。第三操作模式是双曝光模式和背景替换模式中的一个。此外,拍摄模式评估器124还被配置为通过应用由用户基于由弯曲角度处理器121确定的新的弯曲角度选择的成像选项来操纵场景的第一视图和第二视图。
在实施例中,实时智能图像引擎125包括图像拼接引擎125a、双曝光混合引擎125b、倾斜/移位引擎125c、散焦效果引擎125d、背景替换引擎125e和立体效果引擎125f。实时智能图像引擎125被配置为基于确定的拍摄模式来确定可用于应用于在电子装置100中捕获的视图的拍摄效果。在实施例中,图像拼接引擎125a被配置为自动拼接第一视图和第二视图的至少一个重叠部分以产生合成视图。此外,图像拼接引擎125a通过确定第二图像传感器110b是处于独立操作模式还是辅助操作模式来自动拼接第一视图和第二视图。此外,响应于确定第二图像传感器110b处于独立操作模式,图像拼接引擎125a通过将场景的第一视图与场景的第二视图进行拼接来产生合成视图。响应于确定第二图像传感器110b处于辅助操作模式,图像拼接引擎125a通过将场景的第二视图与场景的第一视图叠加来产生合成视图。
在实施例中,双曝光混合引擎125b被配置为对第一视图的至少一部分与第二视图的至少一部分进行自动混合,以产生示出双曝光的艺术效果的合成视图。
在实施例中,倾斜/移位引擎125c被配置为以较短焦距自动操作第一图像传感器110a以捕获第一图像并且以线性或径向焦距自动操作第二图像传感器110b以捕获第二图像。第二图像具有与第一图像相同的形状。此外,倾斜/移位引擎125c还被配置为通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图。
在实施例中,散焦效果引擎125d被配置为以较短焦距自动操作第一图像传感器110a以捕获第一图像,并且以平移焦距自动操作第二图像传感器110b以捕获与第一图像相同形状的第二图像。此外,散焦效果引擎125d还被配置为通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图。
在实施例中,背景替换引擎125e被配置为自动识别第一视图和第二视图中的主要对象和次要对象。此外,背景替换引擎125e还被配置为通过利用次要对象替换具有主要对象的第一视图和第二视图中的至少一个视图中的剩余区域来产生合成视图。
在实施例中,立体效果引擎125f被配置为使用不同颜色的滤光器对第一视图和第二视图进行自动编码,并且通过对第一视图和第二视图的视角进行移位并重叠第一视图和第二视图来产生合成视图。
在实施例中,弯曲渲染引擎126被配置为自动产生具有应用于第一视图和第二视图的摄影效果的合成视图。此外,弯曲渲染引擎126还被配置为基于弯曲角度将第一图像传感器110a的成像选项组叠加在第二图像传感器110b的成像选项组上。通过基于弯曲角度对来自第一图像传感器110a和第二图像传感器110b中的至少一个的成像选项组的至少一个成像选项进行修改,第一图像传感器110a的成像选项组与第二图像传感器110b的成像选项组叠加。
图3A示出根据本文公开的实施例的用于提供基于弯曲角度的成像的示例电子装置100。图3B示出根据本文公开的实施例的用于提供基于弯曲角度的成像的示例电子装置100。图3C示出根据本文公开的实施例的用于提供基于弯曲角度的成像的示例电子装置100。
在实施例中,如图3A所示,电子装置100可以是可折叠和柔性的。电子装置100具有固定轴,其中,电子装置100可以围绕固定轴弯曲。可折叠柔性电子装置100包括外部显示面板和后面板。至少两个成像传感器中的第一图像传感器110a和第二图像传感器110b分别嵌入在后面板和外部显示面板上。此外,电子装置还包括内部显示器。在可折叠柔性电子装置100的情况下的弯曲角度是第一图像传感器110a和第二图像传感器110b之间的角度,其中,所述角度可以通过将电子装置100的两个面板折叠成各种角度被改变。
在实施例中,如图3B所示,电子装置100可以是可穿戴装置(诸如手表)。可穿戴电子装置设置有第一图像传感器110a和第二图像传感器110b。
可穿戴电子装置设置有被配置为显示数字内容的显示部。可穿戴电子装置还设置有连接到显示部的一侧的第一连接部和连接到显示部的另一侧的第二连接部。第一连接部包括第一图像传感器110a,第二连接部包括第二图像传感器110b。可穿戴电子装置还包括被构造为连接第一连接部和第二连接部的舒适部。舒适部包括凹槽,以弯曲第一图像传感器110a和第二图像传感器110b中的至少一个来执行基于弯曲角度的成像。
在实施例中,如图3C所示,电子装置100可以是移动电话、智能电话、个人数字助理(PDA)、平板电脑、显示装置、物联网(IoT)装置等。电子装置100设置有第一图像传感器110a和第二图像传感器110b。第一图像传感器110a捕获场景的第一视图,并且第二图像传感器110b捕获场景的第二视图。第二图像传感器110b的弯曲角度是电子装置100在捕获第一视图之后而在捕获第二视图之前倾斜以捕获场景的第二视图的角度。
图4A是根据本文公开的实施例的包括至少两个图像传感器的电子装置100中的基于弯曲角度的成像的流程图400。图4B是根据本文公开的实施例的包括至少两个图像传感器的电子装置100中的基于弯曲角度的成像的流程图400。
参照图4A,在步骤410,电子装置100通过至少两个图像传感器110中的第一图像传感器110a(如图2A中所示)捕获场景的第一视图。
在步骤420,电子装置100监测电子装置100的弯曲角度。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为监测电子装置100的弯曲角度。
在步骤430,电子装置100通过至少两个图像传感器110中的第二图像传感器110b从弯曲角度捕获场景的第二视图。
在步骤440,电子装置100基于第一视图、第二视图和弯曲角度执行至少一个动作。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为基于第一视图、第二视图和弯曲角度执行至少一个动作。
如图4B所示,在步骤441a,电子装置100基于弯曲角度确定第一视图和第二视图是彼此部分重叠、彼此完全重叠还是彼此不重叠。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为基于弯曲角度确定第一视图和第二视图是彼此部分重叠、彼此完全重叠还是彼此不重叠。
在步骤442a,电子装置100在第一视图与第二视图部分重叠时确定至少一个第一操作模式,在第一视图与第二视图完全重叠时确定至少一个第二操作模式,并且在第一视图不与第二视图重叠时确定至少一个第三操作模式。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为当第一视图与第二视图部分重叠时确定至少一个第一操作模式,当第一视图与第二视图完全重叠时确定至少一个第二操作模式,并且当第一视图不与第二视图重叠时确定至少一个第三操作模式。
在步骤443a,电子装置100自动将其自身配置为确定的第一操作模式、第二操作模式或第三操作模式。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为将电子装置100自动配置为确定的第一操作模式、第二操作模式或第三操作模式。此外,电子装置100同时循环到步骤420并继续监测电子装置100的弯曲角度。在确定弯曲角度的改变时,重复420之后的步骤。
在步骤444a,电子装置100以确定的第一操作模式、第二操作模式或第三操作模式自动显示场景的第一视图和第二视图。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为以确定的第一操作模式、第二操作模式或第三操作模式自动显示场景的第一视图和第二视图。
在步骤441b,电子装置100显示第一视图、第二视图和弯曲角度。例如,在如图2A所示的电子装置100中,显示器150可以被配置为显示第一视图、第二视图和弯曲角度。
在步骤442b,电子装置100显示与弯曲角度相应的多个成像选项。例如,在如图2A所示的电子装置100中,显示器150可以被配置为显示与弯曲角度相应的多个成像选项。
在步骤443b,电子装置100检测从多个成像选项中(例如,由用户)选择的成像选项。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为检测从多个成像选项中选择的成像选项。
在步骤444b,电子装置100确定与选择的成像选项相应的新的弯曲角度。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为确定与选择的成像选项相应的新的弯曲角度。
在步骤445b,电子装置100通过基于新的弯曲角度应用选择的成像选项来操纵第一视图和第二视图。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为通过基于新的弯曲角度应用选择的成像选项来操纵第一视图和第二视图。
在步骤446b,电子装置100显示操纵的第一视图和操纵的第二视图。例如,在如图2A所示的电子装置100中,显示器150可以被配置为显示操纵的第一视图和操纵的第二视图。
可以以呈现的顺序、以不同的顺序或同时执行方法中的各种动作、行动、块、步骤等。此外,在一些实施例中,在不脱离本公开的范围的情况下,可以省略、添加、修改、跳过等一些动作、行动、块、步骤等。
图5是根据本文公开的实施例的用于确定电子装置100的弯曲角度的流程图500。
参照图5,在步骤502,当第一电磁体和第二电磁体关闭时,电子装置100测量磁力计的读数。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为测量当第一电磁体和第二电磁体关闭时磁力计的读数。
在步骤504,电子装置100检测到第一电磁体被开启。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为检测第一电磁体被开启。
在步骤506,在没有弯曲的情况下(即,当电子装置100未折叠时),当第一电磁体开启并且第二电磁体关闭时,电子装置100确定磁力计的读数。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为确定在没有弯曲的情况下当第一电磁体关闭并且第二电磁体关闭时磁力计的读数。
在步骤508,在没有弯曲的情况下,电子装置100确定当第一电磁体和第二电磁体关闭时磁力计的读数与当第一电磁体开启时磁力计的读数之间的差。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为确定在没有弯曲的情况下当第一电磁体和第二电磁体关闭时磁力计的读数与当第一电磁体开启时磁力计的读数之间的差。
在步骤510,在弯曲的情况下,当第一电磁体开启并且第二电磁体关闭时,电子装置100确定磁力计的读数。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为确定在弯曲的情况下当第一电磁体开启并且第二电磁体关闭时磁力计的读数。
在步骤512,电子装置100基于确定的差和在弯曲的情况下当第一电磁体开启并且第二电磁体关闭时磁力计的读数来确定电子装置100的弯曲角度。例如,在如图2A所示的电子装置100中,基于弯曲角度的成像管理引擎120可以被配置为基于确定的差和在弯曲的情况下当第一电磁体开启并且第二电磁体关闭时磁力计的读数来确定电子装置100的弯曲角度。此外,通过交替开启第二电磁体和交替关闭第一电磁体来重复步骤504至步骤512。
因此,为了确定电子装置100的弯曲角度,通过交替开启和交替关闭第一电磁体和第二电磁体来执行步骤504至步骤512。
可以以呈现的顺序、以不同的顺序或同时执行该方法中的各种动作、行动、块、步骤等。此外,在一些实施例中,在不脱离本公开的范围的情况下,可以省略、添加、修改、跳过等一些动作、行动、块、步骤等。
图6A示出根据本文公开的实施例的基于手势确定电子装置100的弯曲角度。图6B示出根据本文公开的实施例的基于手势确定电子装置100的弯曲角度。图6C示出根据本文公开的实施例的基于手势确定电子装置100的弯曲角度。图6D示出根据本文公开的实施例的基于手势确定电子装置100的弯曲角度。图6E示出根据本文公开的实施例的基于手势确定电子装置100的弯曲角度。
根据提出的方法,电子装置100设置有两个电磁体和一个单轴磁力计的布置,以确定电子装置100的弯曲角度。两个电磁体(即第一电磁体(EM-1)和第二电磁体(EM-2)),放置在电子装置100的弯曲轴的任一侧。第一电磁体和第二电磁体的极性沿着电子装置100的显示器的平面。电子装置100的弯曲轴设置有单轴磁力计,并且当不执行弯曲方向时校准单轴磁力计的轴。
参照图6A,通过关闭第一电磁体和第二电磁体来确定在沿着电子装置100的弯曲轴的朝向的时刻的环境磁场(B环境)。此外,在确定环境磁场时,电子装置100不弯曲。
因此,
单轴磁力计的读数=B环境Cos A (1)
参照图6B,电子装置100检测到第一电磁体(EM-1)被开启了特定的持续时间。当EM-1开启时,EM-1的极性在位于电子装置100的轴处的单轴磁力计中引发电磁场。然后,在电子装置100中没有弯曲的情况下,当EM-1开启并且EM-2关闭时,电子装置100记录单轴磁力计的读数。
在没有弯曲的情况下,当EM-1开启并且EM-2关闭时磁力计的读数=B环境Cos A+BEM1
因此,
BEM1=磁力计的读数(在没有弯曲的情况下当EM-1开启并且EM-2关闭时)-B环境CosA (2)
此外,在没有弯曲位置和弯曲位置的两种情况下,当EM-1和EM-2关闭时产生的环境磁场被消除。
参照图6C,在用户执行弯曲手势之后,当EM-1开启并且EM-2关闭时,电子装置100确定单轴磁力计的读数。
然后,在弯曲的情况下,当EM-1开启并且EM-2关闭时,磁力计的读数=B环境Cos A+BEM1Cos X
这里,X表示如图6C所示的左侧弯曲角度。因此,左侧弯曲角度X可以如下被获得:
Cos X=(磁力计的读数(在弯曲的情况下当EM-1开启并且EM-2关闭时)-B环境CosA)/BEM1 (3)
参照图6D,在电子装置100中没有弯曲的情况下,当EM-1关闭并且EM-2开启时,电子装置100检测到EM-2开启并且记录单轴磁力计的读数。
在没有弯曲的情况下,当EM-2开启并且EM-1关闭时磁力计的读数=B环境Cos A-BEM2
因此,
BEM2=磁力计的读数(在没有弯曲的情况下当EM-2开启并且EM-1关闭时)-B环境CosA (4)
参照图6E,在用户执行弯曲手势之后,当EM-2开启并且EM-1关闭时,电子装置100确定单轴磁力计的读数。
然后,在弯曲的情况下,当EM-2开启并且EM-1关闭时,磁力计的读数=B环境Cos A-BEM1Cos Y
这里,Y表示如图6D所示的右侧弯曲角度。因此,右侧弯曲角度Y可以如下获得:
Cos Y=(磁力计的读数(在弯曲的情况下当EM-2开启并且EM-1关闭时)-B环境CosA)/BEM2 (5)
等式(3)和等式(5)用于通过交替地接通弯曲轴的两侧上的电磁体来一次一个地确定电子装置100的弯曲轴的每一侧的弯曲角度差。此外,可以在电子装置100中设置切换电磁体的间隔。此外,第一电磁体和第二电磁体可以一次一个地同步极化,以计算电子装置100的显示侧的相对弯曲。
当第一电磁体被极化时,可以从该配置下的有效磁场值推导相对弯曲。类似地,在计算电子装置100的一侧的弯曲度之后,第二电磁体被开启,并且通过磁力计位置处的磁场的变化来计算弯曲度。由于通过电磁体的电流的量是已知的,因此可以使用产生的极性的大小来计算由电磁体产生的磁场。使用两个电磁体代替永磁体,使得两个电磁体可以开启/关闭,并且两个电磁体的极性比永磁体更有用。
图7A是示出根据本文公开的实施例的具有用于捕获场景的合成视图的至少两个图像传感器110的电子装置100的示例。
考虑用户想要使用具有至少两个图像传感器110的电子装置100来捕获场景。
参照图7A,第一视图由至少两个图像传感器110中的第一图像传感器110a捕获。此外,电子装置100确定弯曲角度(即,电子装置100被弯曲以通过电子装置100的至少两个图像传感器110中的第二图像传感器110b捕获第二视图的角度)。此外,电子装置100基于第一视图、第二视图和弯曲角度来执行至少一个动作。此外,可以通过改变电子装置100的弯曲角度来捕获场景的各个部分。
在实施例中,电子装置100确定由用户执行的弯曲手势,并且响应于由用户执行的弯曲手势,捕获场景的第二视图。
当电子装置100被激活时,电子装置100基于弯曲角度确定第一视图和第二视图是彼此部分重叠、彼此完全重叠还是彼此不重叠。此外,电子装置100在第一视图与第二视图部分重叠时将操作模式确定为第一操作模式,在第一视图与第二视图完全重叠时将操作模式确定为第二操作模式,并且在第一视图与第二视图不重叠时将操作模式确定为第三操作模式。此外,电子装置100被自动配置在确定的第一操作模式、第二操作模式或第三操作模式中。
图7B是根据本文公开的实施例的用于通过具有至少两个图像传感器110的电子装置100捕获场景的合成视图的示例说明。
结合图7A,考虑第一视图和第二视图彼此部分重叠。电子装置100确定操作模式是包括可以应用于第一视图和第二视图的拍摄模式(诸如全景模式、对象去除模式和立体效果模式中的一个)的第一操作模式。如图7B所示,电子装置100在屏幕上提供拍摄模式列表。此外,电子装置100确定用户已经从屏幕上提供的拍摄模式列表中选择了全景模式。响应于用户选择全景模式,电子装置100被自动配置为围绕电子装置100的轴拼接第一视图和第二视图以产生合成视图。
此外,电子装置100确定与第一图像传感器110a和第二图像传感器110b相关联的成像选项组。此外,电子装置100基于用户偏好对第一图像传感器110a和第二图像传感器的成像选项组进行排序。此外,如图7B所示,电子装置100在场景的合成视图上叠加并显示第一图像传感器110a和第二图像传感器110b的成像选项的叠加组。
在另一示例中,考虑用户已经手动选择了全景成像选项,而不考虑第一视图和第二视图是否部分重叠。在这种场景中,电子装置100确定用户已经从第一图像传感器110a和第二图像传感器110b中的至少一个的成像选项组中选择了全景成像选项。此外,电子装置100确定与全景成像选项相应的必要的新的弯曲角度,并在屏幕上提供新的弯曲角度信息。屏幕上提供的新的弯曲角度信息使得用户能够知道电子装置100必须被弯曲以便能够应用选择成像选项(即,全景成像选项)的角度。
此外,电子装置100确定用户已经实现了所需的新的弯曲角度,并且通过应用全景成像选项来操纵第一视图和第二视图,并且在电子装置100上以全景模式显示场景的操纵的合成视图。
图8A是示出根据本文公开的实施例的将第一操作模式中的对象去除效果应用于场景的合成视图的示例。图8B是示出根据本文公开的实施例的将第一操作模式中的对象去除效果应用于场景的合成视图的示例。图8C是示出根据本文公开的实施例的将第一操作模式中的对象去除效果应用于场景的合成视图的示例。图8D是示出根据本文公开的实施例的将第一操作模式中的对象去除效果应用于场景的合成视图的示例。
参照图8A,考虑在墙上显示数字序列的场景。如图8A所示,存在于墙壁前面的对象阻碍用户捕获对象后面的墙壁上的数字。
参照图8B,第一图像传感器的视场捕获包括对象的图像的第一视图。对象的存在导致背景信息(即,被对象遮挡的信息)丢失。此外,第二图像传感器的视场与第一图像传感器的视场重叠。然而,第二图像传感器不能捕获对象后面的数字序列。电子装置100确定第一视图和第二视图在实时预览中部分重叠。此外,当第一视图和第二视图彼此部分重叠时,电子装置100确定第一图像传感器和第二图像传感器必须以第一操作模式操作。此外,电子装置100显示与第一操作模式相关联的成像选项,并检测到用户选择的成像选项是对象去除效果。
在确定用户选择的成像选项是对象去除效果时,电子装置100显示捕获对象后面的信息所需的新的弯曲角度。此外,基于由电子装置100提供的新的弯曲角度信息,用户执行适当的弯曲手势以实现新的弯曲角度。如图8C和8D所示,在新的弯曲角度下,第二图像传感器能够恢复对象后面的信息。
图9是根据本文公开的实施例的用于使用可穿戴电子装置捕获场景的第一视图和第二视图的示例说明。
参照图9,在步骤902,可穿戴电子装置被放置成使得第一图像传感器110a和第二图像传感器110b面向要捕获的场景。在步骤904,在可穿戴电子装置的舒适部处提供的凹槽可用于改变捕获场景的第一视图和第二视图所需的弯曲角度。
此外,如图9所示,在步骤906,由于使用使用户能够改变可穿戴电子装置的弯曲角度的凹槽,以更宽的和动态的广角覆盖范围来捕获场景的第一视图和第二视图。此外,远距离取景器选项使得与可穿戴电子装置配对的其他电子装置能够控制和确定可以应用于由可穿戴电子装置捕获的第一视图和第二视图的照片效果。
图10是示出根据本文公开的实施例的将第一操作模式中的全景效果应用于场景的合成视图的示例。
在常规方法和系统中,通过激活图像传感器并水平移动图像传感器以捕获全景图像来提供全景效果。与传统方法和系统不同,在提出的方法中,通过捕获场景的第一视图和第二视图以及第一视图和第二视图中的重叠部分并且拼接第一视图和第二视图以获得场景的合成视图来提供全景效果。
参照图10,在步骤1002,电子装置100确定弯曲角度使得第一视图和第二视图在实时预览中部分重叠。此外,当第一视图和第二视图彼此部分重叠时,电子装置100确定第一图像传感器和第二图像传感器必须以第一操作模式操作。
此外,电子装置100显示与第一操作模式相关联的成像选项,并检测到用户选择的成像选项是全景效果。
在步骤1004,在电子装置100中自动识别场景的第一视图和第二视图中的重叠部分。在步骤1006,电子装置100拼接第一视图和第二视图的重叠部分以产生场景的合成视图。
在实施例中,当用户在电子装置100不处于第一操作模式时手动选择全景效果时,则电子装置100显示所需的弯曲角度信息,使得用户可以将电子装置弯曲到全景效果所需的角度。
与通过水平移动图像传感器来捕获场景而产生全景效果的常规方法和系统不同,提出的方法不需要用户水平移动图像传感器来捕获场景。提出的方法确定第一视图和第二视图中的重叠区域,并将两者拼接以获得完整的场景。
图11是示出根据本文公开的实施例的将第三操作模式中的背景替换效果应用于场景的合成视图的示例。
参照图11,在步骤1102,电子装置100确定弯曲角度使得第一视图和第二视图在实时预览中不重叠。此外,当第一视图和第二视图彼此不重叠时,电子装置100确定第一图像传感器和第二图像传感器必须以第三操作模式操作。
此外,电子装置100显示与第三操作模式相关联的成像选项,并检测到用户选择的成像选项是背景替换效果。
在步骤1104,电子装置100在第一视图中将主要对象自动识别为人类。在步骤1106,电子装置100在第二视图中将次要对象识别为山。此外,如步骤1108所示,电子装置100通过利用第二视图中的次要对象替换第一视图中具有主要对象的背景区域来产生合成视图,并在屏幕上显示合成视图。
图12是示出根据本文公开的实施例的将第二操作模式中的散焦效果应用于场景的合成视图的示例。
参照图12,在步骤1202,电子装置100确定弯曲角度使得第一视图和第二视图在实时预览中完全重叠。此外,当第一视图和第二视图完全重叠时,电子装置100确定第一图像传感器和第二图像传感器必须以第二操作模式操作。
此外,电子装置100显示与第二操作模式相关联的成像选项,并将用户选择的成像选项检测为散焦效果。
在步骤1204,在散焦效果模式中,电子装置100被配置为以较短的焦距自动操作第一图像传感器以捕获第一图像。
在步骤1206,电子装置100被配置为以平移焦距自动操作第二图像传感器以捕获第二图像,其中,第二图像是第一图像的完全模糊版本。第二图像也以与第一图像相同的形状被捕获。
在步骤1208,通过混合第一图像和第二图像以提供散焦效果来产生合成视图。
图13是示出根据本文公开的实施例的包含音频内容以及图像的第一视图和第二视图的捕获的示例。
参照图13,在示例中,考虑电子装置100在屏幕上显示第一视图、第二视图和弯曲角度信息。
此外,电子装置100在屏幕上显示与弯曲角度相应的多个成像选项,并允许用户选择成像选项中的一个。电子装置100确定用户在捕获第一场景和第二场景时选择需要记录音频内容的成像选项。
响应于确定用户选择的成像选项,电子装置100确定在捕获第一场景和第二场景时记录音频内容所需的新的弯曲角度。然后,电子装置100通过应用由用户基于新的弯曲角度选择的成像选项来操纵第一视图和第二视图。此外,第一图像传感器捕获场景的第一视图中的音频内容以及图像内容。第二图像传感器捕获场景的第二视图中的音频内容以及图像内容。此外,电子装置100在屏幕上显示场景的操纵的第一视图和操纵的第二视图。
在实施例中,第一图像传感器和第二图像传感器可以分别仅捕获与第一场景和第二场景相关联的音频内容。
具体实施例的前述描述阐述了本文中的实施例的一般性质,使得其他人可以通过应用当前知识在不脱离一般概念的情况下容易地修改和/或调整这种具体实施例的各种应用,因此,这种调整和修改应该并且旨在被理解为在所公开的实施例的等同物的含义和范围内。应当理解,本文采用的措辞或术语是为了描述而不是限制的目的。因此,虽然已经根据优选实施例描述了本文的实施例,但是本领域技术人员将认识到,可以在如本文描述的实施例的精神和范围内通过修改来实践本文的实施例。

Claims (15)

1.一种用于在包括至少两个图像传感器的电子装置中捕获视图的方法,所述方法包括:
确定包括第一图像传感器的电子装置的第一侧与包括第二图像传感器的电子装置的第二侧之间的折叠角度;
使用第一图像传感器捕获场景的第一视图;
使用第二图像传感器捕获场景的第二视图;
基于折叠角度从多个操作模式中确定操作模式;
从与所述多个操作模式相应的多个成像选项中确定与确定的所述操作模式相应的成像选项;以及
显示表示确定的所述成像选项的多个显示元素。
2.如权利要求1所述的方法,其中,确定折叠角度的步骤包括:
当第一电磁体和第二电磁体关闭时测量磁力计的读数;
检测到第一电磁体开启;
在不折叠的情况下,当第一电磁体开启并且第二电磁体关闭时,确定磁力计的读数;
在不折叠的情况下,确定当第一电磁体和第二电磁体关闭时磁力计的读数与当第一电磁体开启时磁力计的读数之间的差;
在折叠的情况下,当第一电磁体开启并且第二电磁体关闭时,确定磁力计的读数;以及
基于所述差和在折叠的情况下当第一电磁体开启并且第二电磁体关闭时磁力计的读数来确定电子装置的折叠角度。
3.如权利要求1所述的方法,还包括:
当第一视图与第二视图部分重叠时确定至少一个第一操作模式,当第一视图与第二视图完全重叠时确定至少一个第二操作模式,并且当第一视图不与第二视图重叠时确定至少一个第三操作模式;
将电子装置自动配置在确定的所述至少一个第一操作模式、所述至少一个第二操作模式或所述至少一个第三操作模式中;
以确定的所述至少一个第一操作模式、所述至少一个第二操作模式或所述至少一个第三操作模式自动显示场景的第一视图和第二视图;
在电子装置上显示第一视图、第二视图和折叠角度;
检测从所述多个成像选项中选择的成像选项;
确定选择的成像选项所需的新的折叠角度;
通过基于新的折叠角度应用选择的成像选项来操纵第一视图和第二视图;以及
在电子装置上显示操纵的第一视图和操纵的第二视图。
4.如权利要求3所述的方法,其中,所述至少一个第一操作模式是全景模式、对象去除模式和立体效果模式中的一种,其中,所述至少一个第二操作模式是散焦效果模式、倾斜移位/点聚焦模式、双曝光模式和立体效果模式中的一种,并且其中,所述至少一个第三操作模式是双曝光模式和背景替换模式中的一种。
5.如权利要求4所述的方法,其中,在对象去除模式中,电子装置被配置为当从第一视图和第二视图中的至少一个去除对象时,在场景的合成视图中自动保留背景信息,
其中,在双曝光模式中,电子装置被配置为将第一视图的至少一部分与第二视图的至少一部分自动混合,以产生示出双曝光的艺术效果的合成视图,
其中,在全景模式中,电子装置被配置为对第一视图和第二视图的至少一个重叠部分进行自动拼接以产生合成视图,
其中,在立体效果模式中,电子装置被配置为使用不同颜色的滤光器对第一视图和第二视图进行自动编码,并且通过对第一视图和第二视图的视角进行移位并重叠第一视图和第二视图来产生合成视图,
其中,在散焦效果模式中,电子装置被配置为以较短焦距自动操作第一图像传感器以捕获第一图像,以平移焦距自动操作第二图像传感器以捕获与第一图像的形状相同的形状的第二图像,并且产生合成视图,其中,通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图,
其中,在倾斜移位/点聚焦模式中,电子装置被配置为以较短的焦距自动操作第一图像传感器以捕获第一图像,以线性焦距或径向焦距自动操作第二图像传感器以捕获与第一图像的形状相同的形状的第二图像,并且产生合成视图,其中,通过模糊第一视图并将模糊的第一视图与第二视图混合来产生合成视图,并且
其中,在背景替换模式中,电子装置被配置为自动识别第一视图中的主要对象和第二视图中的次要对象,并且通过利用次要对象替换第一视图中的剩余区域来产生合成视图。
6.如权利要求5所述的方法,其中,全景模式中的合成视图是通过以下方式产生的:
确定第二图像传感器是处于独立操作模式还是辅助操作模式;
当第二图像传感器处于独立操作模式时,通过将场景的第一视图与场景的第二视图拼接来产生合成视图,以及
当第二图像传感器处于辅助操作模式时,通过将场景的第二视图与场景的第一视图叠加来产生合成视图。
7.如权利要求6所述的方法,还包括:
确定第一图像传感器的第一组成像选项;
确定第二图像传感器的第二组成像选项;
基于用户偏好对第一组成像选项和第二组成像选项进行排序;
基于折叠角度,将表示第一图像传感器的第一组成像选项的第一组显示元素叠加在表示第二图像传感器的第二组成像选项的第二组显示元素上;以及
在场景的合成视图上显示叠加的第一组显示元素和第二组显示元素。
8.如权利要求7所述的方法,还包括:
检测从第一组成像选项和第二组成像选项中选择的成像选项;
确定选择的成像选项所需的新的折叠角度;
通过基于新的折叠角度应用选择的成像选项来操纵第一视图和第二视图;
在电子装置上显示操纵的第一视图和操纵的第二视图;
检测由用户执行的捕获事件;以及
将合成视图捕获为单个图像,
其中,通过基于折叠角度修改第一组显示元素和第二组显示元素中表示至少一个成像选项的至少一个显示元素,使得第一组显示元素与第二组显示元素叠加在一起。
9.如权利要求1所述的方法,
其中,电子装置包括与第一图像传感器相关联的第一麦克风和与第二图像传感器相关联的第二麦克风,
其中,第一视图包括使用第一图像传感器捕获的图像内容和使用第一麦克风捕获的音频内容中的至少一个,并且第二视图包括使用第二图像传感器捕获的图像内容和使用第二麦克风捕获的音频内容中的至少一个,
其中,音频内容的强度基于电子装置的折叠角度而动态地改变,
其中,第二视图是响应于检测到为折叠电子装置而执行的手势由第二图像传感器捕获的,并且
其中,场景的第一视图不同于场景的第二视图。
10.一种电子装置,包括:
至少两个图像传感器,包括第一图像传感器和第二图像传感器;
显示器;
存储器;以及
至少一个处理器,耦合到存储器,其中,所述至少一个处理器被配置为:
确定包括第一图像传感器的电子装置的第一侧与包括第二图像传感器的电子装置的第二侧之间的折叠角度;
使用第一图像传感器捕获场景的第一视图;
使用第二图像传感器捕获场景的第二视图;
基于折叠角度从多个操作模式中确定操作模式;
从与所述多个操作模式相应的多个成像选项中确定与确定的所述操作模式相应的成像选项;以及
控制显示器显示表示确定的所述成像选项的多个显示元素。
11.如权利要求10所述的电子装置,其中,电子装置还被配置为根据权利要求2至9中任一项的方法被操作。
12.一种可穿戴电子装置,包括:
至少两个图像传感器,包括第一图像传感器和第二图像传感器;
显示部;
第一连接部,连接到显示部的一侧;
第二连接部,与显示部的另一侧连接;舒适部,被配置为连接第一连接部和第二连接部,其中,舒适部包括用于改变第一连接部和第二连接部之间的折叠角度的凹槽;以及
至少一个处理器,被配置为:
确定包括第一图像传感器的可穿戴电子装置的第一连接部与包括第二图像传感器的可穿戴电子装置的第二连接部之间的折叠角度;
使用第一图像传感器捕获场景的第一视图;
使用第二图像传感器捕获场景的第二视图;
基于折叠角度从多个操作模式中确定操作模式;
从与所述多个操作模式相应的多个成像选项中确定与确定的所述操作模式相应的成像选项;以及
控制显示部显示表示确定的所述成像选项的多个显示元素。
13.如权利要求12所述的可穿戴电子装置,其中,所述至少一个处理器还被配置为:
检测在凹槽上被执行以改变折叠角度的手势;
基于在凹槽上执行的手势来确定改变的折叠角度;
使用第一图像传感器捕获场景的第三视图;
使用第二图像传感器捕获场景的第四视图;以及
基于改变的折叠角度确定第三视图和第四视图是彼此部分重叠、彼此完全重叠还是彼此不重叠。
14.如权利要求13所述的可穿戴电子装置,还包括与第一图像传感器相关联的第一麦克风和与第二图像传感器相关联的第二麦克风,
其中,第一视图包括使用第一图像传感器捕获的图像内容和使用第一麦克风捕获的音频内容中的至少一个,并且第二视图包括使用第二图像传感器捕获的图像内容和使用第二麦克风捕获的音频内容中的至少一个,其中,音频内容的强度基于可穿戴电子装置的折叠角度而动态地改变。
15.一种可折叠电子装置,包括:
固定折叠轴;
第一图像传感器,设置在固定折叠轴的第一侧上;
第二图像传感器,设置在固定折叠轴的第二侧上;
传感器,被配置为确定第一侧和第二侧之间的折叠角度;
显示器;以及
处理器,被配置为:
基于折叠角度从多个图像捕获模式中选择图像捕获模式,
从与所述多个图像捕获模式相应的多个成像选项中确定与确定的所述图像捕获模式相应的成像选项;以及
控制显示器显示表示确定的所述成像选项的多个显示元素,
其中,多个图像捕获模式包括完全重叠模式、部分重叠模式以及非重叠模式,其中,在完全重叠模式中,由第一图像传感器和第二图像传感器捕获的图像完全重叠,在部分重叠模式中,由第一图像传感器和第二图像传感器捕获的图像部分重叠,在非重叠模式中,由第一图像传感器和第二图像传感器捕获的图像不重叠。
CN201980057980.XA 2018-09-11 2019-06-19 用于捕获视图的电子装置和方法 Active CN112655194B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
IN201841034249 2018-09-11
IN201841034249 2018-09-11
PCT/KR2019/007404 WO2020054949A1 (en) 2018-09-11 2019-06-19 Electronic device and method for capturing view

Publications (2)

Publication Number Publication Date
CN112655194A CN112655194A (zh) 2021-04-13
CN112655194B true CN112655194B (zh) 2022-07-19

Family

ID=69719820

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980057980.XA Active CN112655194B (zh) 2018-09-11 2019-06-19 用于捕获视图的电子装置和方法

Country Status (4)

Country Link
US (1) US10904418B2 (zh)
EP (1) EP3808063A4 (zh)
CN (1) CN112655194B (zh)
WO (1) WO2020054949A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3839423A4 (en) * 2018-08-17 2021-08-04 Shenzhen Royole Technologies Co., Ltd ELECTRONIC DEVICE AND METHOD FOR CALCULATING THE TILT ANGLE
KR20210010148A (ko) 2019-07-19 2021-01-27 삼성전자주식회사 폴더블 전자 장치 및 상기 폴더블 전자 장치에서 복수의 카메라들을 이용한 사진 촬영 방법
US11636796B2 (en) * 2020-12-03 2023-04-25 Black Sesame Technologies Inc. Subject segmentation for motion control and textured display
US20220239832A1 (en) * 2021-01-28 2022-07-28 Motorola Mobility Llc Image Processing as a Function of Deformable Electronic Device Geometry and Corresponding Devices and Methods
US11893668B2 (en) 2021-03-31 2024-02-06 Leica Camera Ag Imaging system and method for generating a final digital image via applying a profile to image information

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1585598A (zh) * 2003-08-21 2005-02-23 Lg电子株式会社 当关闭折叠型终端时用于确定冲击强度的仪器和方法
CN101637071A (zh) * 2007-03-27 2010-01-27 富士通株式会社 电子设备和支撑结构体
CN106293103A (zh) * 2016-10-21 2017-01-04 北京工商大学 基于惯性传感器的四轴飞行器手势控制装置和控制方法
CN107807760A (zh) * 2017-10-24 2018-03-16 广东欧珀移动通信有限公司 屏幕显示方法及装置
CN108139833A (zh) * 2015-10-12 2018-06-08 三星电子株式会社 电子设备及其用于处理手势的方法

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5933668A (en) 1997-11-12 1999-08-03 Hyers; Jon W. Camera mounting apparatus
JP4090896B2 (ja) * 2003-01-16 2008-05-28 シャープ株式会社 情報端末装置
KR100836618B1 (ko) * 2007-02-14 2008-06-10 (주)케이티에프테크놀로지스 회전식 카메라를 가지는 휴대용 단말기 및 휴대용 단말기의파노라마 영상 촬영 방법
US20100011291A1 (en) * 2008-07-10 2010-01-14 Nokia Corporation User interface, device and method for a physically flexible device
US9204026B2 (en) 2010-11-01 2015-12-01 Lg Electronics Inc. Mobile terminal and method of controlling an image photographing therein
WO2012164148A1 (en) 2011-05-31 2012-12-06 Nokia Corporation Methods, apparatuses and computer program products for generating panoramic images using depth map data
US8754961B2 (en) * 2011-08-17 2014-06-17 Nokia Corporation Apparatus and method for generating image data from overlapping regions of images
WO2013112295A1 (en) 2012-01-25 2013-08-01 Audience, Inc. Image enhancement based on combining images from multiple cameras
KR102070776B1 (ko) * 2013-03-21 2020-01-29 엘지전자 주식회사 디스플레이 장치 및 그 제어 방법
KR20140123861A (ko) 2013-04-15 2014-10-23 삼성디스플레이 주식회사 표시 장치
KR20150006191A (ko) 2013-07-08 2015-01-16 삼성전자주식회사 파노라마 이미지 운용 방법 및 그 전자 장치
KR101528246B1 (ko) * 2013-08-28 2015-06-11 플라텔코퍼레이션(주) 와치폰
KR102247667B1 (ko) 2014-03-21 2021-05-03 삼성전자주식회사 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 제어 방법.
KR101632008B1 (ko) * 2014-04-30 2016-07-01 엘지전자 주식회사 이동단말기 및 그 제어방법
KR102171450B1 (ko) * 2014-08-18 2020-10-29 엘지전자 주식회사 포터블 디바이스 및 그 제어 방법
US9350924B2 (en) 2014-08-25 2016-05-24 John G. Posa Portable electronic devices with integrated image/video compositing
GB2535706A (en) * 2015-02-24 2016-08-31 Nokia Technologies Oy Device with an adaptive camera array
US20160295108A1 (en) * 2015-04-01 2016-10-06 Cheng Cao System and method for panoramic imaging
GB2537886B (en) 2015-04-30 2022-01-05 Wsou Invest Llc An image acquisition technique
US20160381345A1 (en) * 2015-06-29 2016-12-29 Mediatek Inc. Stereoscopic camera device and associated control method
KR102537922B1 (ko) * 2015-09-11 2023-05-30 삼성전자 주식회사 디스플레이 사이의 각도를 측정하는 방법 및 이를 사용하는 전자 장치
KR102391497B1 (ko) * 2015-09-30 2022-04-28 삼성전자주식회사 전자장치의 이미지 처리장치 및 방법
US10104292B2 (en) 2016-08-04 2018-10-16 Microsoft Technology Licensing, Llc Multishot tilt optical image stabilization for shallow depth of field
CN107566579B (zh) * 2017-10-19 2020-01-24 Oppo广东移动通信有限公司 拍摄方法、装置、终端及存储介质
CN107888769B (zh) * 2017-11-07 2020-11-27 Oppo广东移动通信有限公司 场景模式启动方法、装置及终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1585598A (zh) * 2003-08-21 2005-02-23 Lg电子株式会社 当关闭折叠型终端时用于确定冲击强度的仪器和方法
CN101637071A (zh) * 2007-03-27 2010-01-27 富士通株式会社 电子设备和支撑结构体
CN108139833A (zh) * 2015-10-12 2018-06-08 三星电子株式会社 电子设备及其用于处理手势的方法
CN106293103A (zh) * 2016-10-21 2017-01-04 北京工商大学 基于惯性传感器的四轴飞行器手势控制装置和控制方法
CN107807760A (zh) * 2017-10-24 2018-03-16 广东欧珀移动通信有限公司 屏幕显示方法及装置

Also Published As

Publication number Publication date
US10904418B2 (en) 2021-01-26
EP3808063A4 (en) 2021-11-17
EP3808063A1 (en) 2021-04-21
CN112655194A (zh) 2021-04-13
WO2020054949A1 (en) 2020-03-19
US20200084354A1 (en) 2020-03-12

Similar Documents

Publication Publication Date Title
CN112655194B (zh) 用于捕获视图的电子装置和方法
JP5865941B2 (ja) 撮影装置、携帯型情報処理端末、撮影装置のモニタ表示方法およびプログラム
CN105594191B (zh) 摄像装置、图像处理装置以及图像处理方法
JP6833746B2 (ja) 撮像装置、撮像方法、プログラムおよび記録媒体
CN104995905B (zh) 图像处理设备、拍摄控制方法和程序
JP4957759B2 (ja) 撮像装置及び撮像方法
JP5866493B2 (ja) 撮像装置
KR20170135855A (ko) 패닝 샷들의 자동 생성
JP4356621B2 (ja) 撮像装置及び撮像方法
KR20100060140A (ko) 영상 처리 장치에서의 광역 역광 보정 영상 획득 장치 및 방법
JP7043219B2 (ja) 撮像装置、撮像装置の制御方法、及びプログラム
KR20120002834A (ko) 참조 영상을 제공하는 촬상장치 및 그의 참조 영상 제공방법
JP4565909B2 (ja) カメラ
JP6357646B2 (ja) 撮像装置
KR20050109190A (ko) 듀얼 카메라를 이용한 와이드 이미지 생성 장치 및 방법
TWI693828B (zh) 顯示擷取裝置與其操作方法
JP2007104198A (ja) 撮像装置およびプログラム
JP2001057652A (ja) 画像入力装置および画像入力方法
JP5866537B2 (ja) 撮像装置
JP2000078467A (ja) 画像合成方法
JP2020160773A (ja) 画像処理装置、撮像装置、画像処理方法およびプログラム
JP5980535B2 (ja) 撮影機器及び画像データ記録方法
JP2008122981A (ja) カメラの焦点検出装置
JP2006295329A (ja) 画像処理装置、撮像装置、画像処理方法
JP2021097350A (ja) 画像処理装置、撮像装置、画像処理方法、プログラムおよび記録媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant