CN113329160A - 用于以不同缩放水平定向相机的辅助 - Google Patents

用于以不同缩放水平定向相机的辅助 Download PDF

Info

Publication number
CN113329160A
CN113329160A CN202110696076.2A CN202110696076A CN113329160A CN 113329160 A CN113329160 A CN 113329160A CN 202110696076 A CN202110696076 A CN 202110696076A CN 113329160 A CN113329160 A CN 113329160A
Authority
CN
China
Prior art keywords
image stream
scene
camera
preview
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110696076.2A
Other languages
English (en)
Other versions
CN113329160B (zh
Inventor
卡勒姆.鲍德温
帕西.帕尔基拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Priority to CN202110696076.2A priority Critical patent/CN113329160B/zh
Publication of CN113329160A publication Critical patent/CN113329160A/zh
Application granted granted Critical
Publication of CN113329160B publication Critical patent/CN113329160B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Liquid Crystal (AREA)
  • Pens And Brushes (AREA)

Abstract

本公开的方面涉及用于辅助以不同缩放水平定位相机的系统及方法。一种实例装置可包含经配置以存储图像数据的存储器。所述实例装置可进一步包含与所述存储器通信的处理器，所述处理器经配置以：处理与场景相关联的第一图像流；独立地处理与所述场景的空间部分相关联的第二图像流，其中所述第二图像流不同于所述第一图像流；输出所述经处理第一图像流；以及在所述经处理第一图像流的输出期间输出指示与所述第二图像流相关联的所述空间部分的视觉指示。

Description

用于以不同缩放水平定向相机的辅助
本申请是申请日为2018年9月10日、申请号为201880058482.2、发明名称为“用于以不同缩放水平定向相机的辅助”的发明专利申请的分案申请。
以引用的方式并入的先前申请案
本专利申请案主张2017年9月11日申请的标题为“(用于以不同缩放水平定向相机的辅助)ASSIST FOR ORIENTING A CAMERA AT DIFFERENT ZOOM LEVELS”且让与给本受让人并特此明确地以引用的方式并入本文中的第15/701,293号非临时申请案的优先权。
技术领域
本公开大体上涉及用于图像俘获装置的系统，且明确地说，涉及定位用于记录图像或视频的相机。
背景技术
许多装置及系统(例如智能电话、平板计算机、数码相机、安全系统、计算机等)包含用于各种应用的相机。对于许多相机系统，当拍摄图像或记录视频时，用于相机的显示器(例如智能电话或平板计算机显示器)预览正由相机俘获的图像或视频。举例来说，如果相机在拍摄图像或记录视频时放大，则显示器展示经放大视图(其为正使用相机记录的内容)。
发明内容
提供此发明内容以按简化形式引入下文在实施方式中进一步描述的概念选择。本概述并不意欲识别所述所主张标的物的基本关键特征，也不意欲用于限制所述所主张标的物的范围。
本公开的方面涉及辅助以不同缩放水平定位相机。在一些实施方案中，实例装置可包含经配置以存储图像数据的存储器。所述实例装置可进一步包含与存储器通信的处理器，所述处理器经配置以：处理与场景相关联的第一图像流；独立地处理与所述场景的空间部分相关联的第二图像流，其中所述第二图像流不同于所述第一图像流；输出所述经处理第一图像流；以及在所述经处理第一图像流的输出期间输出指示与所述第二图像流相关联的所述空间部分的视觉指示。
在另一实例中，公开一种方法。所述实例方法包含：通过处理器处理与场景相关联的第一图像流；通过所述处理器独立地处理与所述场景的空间部分相关联的第二图像流，其中所述第二图像流不同于所述第一图像流；输出所述经处理第一图像流；以及在所述经处理第一图像流的输出期间输出指示与所述第二图像流相关联的所述空间部分的视觉指示。
在另一实例中，公开一种非暂时性计算机可读媒体。所述非暂时性计算机可读媒体可存储当由处理器执行时致使装置执行包含以下各者的操作的指令：通过处理器处理与场景相关联的第一图像流；通过所述处理器独立地处理与所述场景的空间部分相关联的第二图像流，其中所述第二图像流不同于所述第一图像流；输出所述经处理第一图像流；以及在所述经处理第一图像流的输出期间输出指示与所述第二图像流相关联的所述空间部分的视觉指示。
在另一实例中，公开一种装置。所述装置方法包含：用于处理与场景相关联的第一图像流的装置；用于独立地处理与所述场景的空间部分相关联的第二图像流的装置，其中所述第二图像流不同于所述第一图像流；用于输出所述经处理第一图像流的装置；以及用于在所述经处理第一图像流的所述输出期间输出指示与所述第二图像流相关联的所述空间部分的视觉指示的装置
在另一实例中，公开一种具有多相机系统的设备，所述设备被配置为处理和显示图像数据，包括：存储器，被配置为存储图像流的图像数据；第一相机，具有第一视场(FOV)，被配置为俘获与场景的预览相关联的第一图像流；第二相机，具有不同于第一FOV的第二FOV，被配置为俘获与所述场景的第一部分的预览相关联的第二图像流，其中所述第二图像流不同于所述第一图像流，以及与所述存储器通信的至少一个处理器，所述处理器被配置为：输出所述第一图像流和所述第二图像流以同时预览，所述第二图像流与第一缩放水平和所述场景的第一部分相关联；以及触敏式显示器配置为：同时预览所述第一图像流和所述第二图像流；经由所述触敏式显示器接收用以将与第二图像流相关联的第一缩放水平修改为第二缩放水平的用户输入，其中所述第二缩放水平不同于所述第一缩放水平，并且响应于接收到用以调整所述第一缩放水平的用户输入，同时预览所述场景的第一图像流和所述第二图像流的修改版本，所述第二图像流的修改版本是基于所述第二缩放水平的所述场景的第二部分的预览，基于所述第二缩放水平预览的场景的第二部分不同于基于所述第一缩放水平预览的场景的第一部分。
在另一实例中，公开一种被配置为处理和显示图像数据的多相机系统，包括：存储器，被配置为存储图像流的图像数据；第一相机，具有第一视场(FOV)，被配置为俘获与场景的预览相关联的第一图像流；第二相机，具有不同于第一FOV的第二FOV，被配置为俘获与所述场景的第一部分的预览相关联的第二图像流，其中所述第二图像流不同于所述第一图像流，以及与所述存储器通信的至少一个处理器，所述第一相机、所述第二相机、所述至少一个处理器被配置为：输出所述第一图像流和所述第二图像流以同时预览，所述第二图像流与第一缩放水平和所述场景的第一部分相关联；以及触敏式显示器配置为：同时预览所述第一图像流和所述第二图像流；经由所述触敏式显示器接收用以将与第二图像流相关联的第一缩放水平修改为第二缩放水平的用户输入，其中所述第二缩放水平不同于所述第一缩放水平，以及响应于接收到用以调整所述第一缩放水平的用户输入，同时预览所述场景的第一图像流和所述第二图像流的修改版本，所述第二图像流的修改版本是基于所述第二缩放水平的所述场景的第二部分的预览，基于所述第二缩放水平预览的场景的第二部分不同于基于所述第一缩放水平预览的场景的第一部分。
附图说明
作为实例而非限制，在随附图式的诸图中说明本公开的方面，且在诸图中相似参考数字指代类似元件。
图1A描绘包含多个相机的实例装置。
图1B描绘包含多个相机的另一实例装置。
图2A为用于图像处理的实例装置的框图。
图2B为用于图像处理的实例装置的另一框图。
图3为实例图像信号处理器的框图。
图4A说明由相机俘获的实例场景。
图4B说明图4A的实例场景、待记录的图4A的场景的预期部分，及正被记录的图4A的场景的实际部分。
图5A说明预览正被俘获的图4A的场景及正被记录或待记录的图4A的场景的部分的视觉指示的实例显示器。
图5B说明俘获图4A的场景的第一相机及俘获正被或待记录的图4A的场景的部分的第二相机的实例。
图6为描绘用于输出视觉指示的实例操作的说明性流程图。
图7说明在正被俘获的图4A的场景的预览与正被或待记录的图4A的场景的部分之间切换的显示器的实例。
图8为描绘用于在正被俘获的场景与正被或待记录的场景的一部分之间切换的实例操作的说明性流程图。
图9A说明同时预览正被俘获的图4A的场景及正被或待记录的图4A的场景的部分的实例显示器。
图9B说明在正被记录或待记录的图4A的场景的部分的预览与正被俘获的图4A的场景及正被或待记录的图4A的场景的部分的同时预览之间切换的显示器的实例。
图9C说明在图4A的场景的缩放辅助预览、正被或待记录的图4A的场景的部分的预览及图4A的场景的同时预览之间切换的显示器的实例。
图10为描绘用于在场景的同时预览与正被或待记录的场景的预览之间切换的实例操作的说明性流程图。
图11A说明预览正被俘获的图4A的场景及对正被或待记录的图4A的场景的视觉指示调整大小的实例显示器。
图11B说明预览正被俘获的图4A的场景及移动正被或待记录的图4A的场景的视觉指示的实例显示器。
图12为描绘用于基于用户调整正被或待记录的图4A的场景的部分的视觉指示而调整正被或待记录的图4A的场景的部分的实例操作的说明性流程图。
图13A说明由第一相机俘获的实例场景及由第二相机俘获或能够由第二相机俘获的场景的实例部分。
图13B说明图13A中的实例场景及正被或待记录的图13A的场景的部分。
图14为描绘用于在第一图像流与第二图像流之间切换的实例操作的说明性流程图。
图15为描绘用于从经处理第二图像流切换到经处理第一图像流的实例操作的说明性流程图。
图16为描绘用于从经处理第二图像流切换到经处理第一图像流的另一实例操作的说明性流程图。
具体实施方式
本公开的方面可辅助用户定位用于记录图像或视频的相机且可适用于具有多种相机配置的装置。
每一相机包含用于俘获场景的视场。许多人使用缩放(“放大”)以俘获视场中的场景的仅仅一部分。缩放可为光学的，且相机镜头经移动以改变相机的焦距(允许场景中的对象在不损失分辨率的情况下被放大)。缩放替代地可为数字的，且所俘获场景的部分被裁剪。如果所俘获场景的部分被裁剪，则剩余部分可在显示器上拉伸(造成分辨率的某一损失)。
在放大视图中，相机移动(例如平移或倾斜相机，或在记录期间用户移动智能电话或平板计算机)被放大(这是由于视图中的对象可被放大或拉伸)，从而导致经预览图像或视频(及因此所记录图像或视频)不包含意欲由用户记录的对象或场景或以意欲由用户记录的对象或场景为中心。举例来说，如果装置正记录来自英式足球比赛的图像或视频，且用户命令相机对特定球员或球进行放大，则球员或球可在放大的同时并不保持在相机视场中的中心(或甚至呈现在相机视场中)。用户可例如通过试图在相机显示器的放大预览中发现球员或球努力定位相机。需要辅助用户定位相机以例如减小用户在缩放视图期间定位相机时的困难。
在一些实施方案中，装置的至少一部分(例如一或多个处理器)可处理与场景相关联的第一图像流(来自第一相机)，独立地处理与场景的空间部分相关联的不同于第一图像流的第二图像流(来自第二相机)，输出经处理第一图像流(以便经由显示器预览)，并在经处理第一图像流的输出期间输出与第二图像流相关联的场景的空间部分的视觉指示(例如在经处理第一图像流的预览上)。以此方式，本公开的方面可防止用户在俘获及/或记录图像或视频的同时努力以不同缩放水平定位相机，且还可允许装置更有效地俘获及/或记录场景的预期部分。举例来说，如上文所提及，记录英式足球比赛的用户可使用预览中的视觉指示以识别场景的什么部分正被记录及因此按需要定位相机而不在预览的经放大视图中搜索。
术语“俘获”及“记录”用来区别在被处理或未完全被处理之前来自相机传感器的图像(例如用于预览)与被完全处理的图像(例如用于放置于存储器中以供稍后检视或用于流式发射到其他人)。当相机传感器在作用中时，相机可连续地(例如以每秒预定数目个帧)“俘获”图像。这些图像中的许多被丢弃且并不被使用或完全地被处理(例如通过图像信号处理器应用去杂、边缘增强、色彩平衡，及其它滤波器)。“经记录”图像或视频为用户意图或请求由图像信号处理器完全处理(例如通过按压用于图像的相机按钮、按压用于视频的记录按钮，等等)的俘获图像。相机预览展示在未被完全处理情况下的俘获图像。如果相机预览展示也正被记录的俘获图像，则预览展示在图像信号处理器完全处理俘获图像时的经部分处理的俘获图像。如果相机预览展示在图像或视频将被记录之前的俘获图像，则预览展示在预览之后丢弃的经部分处理俘获图像。在俘获图像被完全处理以用于记录后，所得图像或视频可例如经存储于存储器中以供稍后检视、流式发射到其他人以用于实况检视，等等。
在以下描述中，阐述大量特定细节(例如，特定组件、电路及过程的实例)，以提供对本公开的充分理解。如本文中所使用的术语“耦合”意谓直接连接到或经由一或多个介入组件或电路连接。而且，在以下描述中且出于解释的目的，阐述特定命名法以提供对本公开的透彻理解。然而，可能不需要这些特定细节以实践本文所公开的教示内容对所属领域的技术人员将为显而易见的。在其它情况下，熟知电路及装置以框图形式展示以便避免混淆本公开的教示内容。在对计算机存储器内的数据位的操作的程序、逻辑块、处理及其它符号表示方面呈现以下详细描述的一些部分。这些描述及表示为通过熟悉数据处理的技术人员用以将其工作的主旨最有效地传达到所属领域的技术人员的方式。在本公开中，将程序、逻辑块、处理或其类似者构想为引起所要结果的步骤或指令的自兼容序列。所述步骤为需要物理量的物理操纵的步骤。通常(尽管未必)，这些量是呈能够被存储、转移、组合、比较及以其它方式操纵于计算机系统中的电子或磁性信号的形式。
然而，应牢记，所有这些及类似术语欲与适当物理量相关联，且仅仅为应用于这些量的方便标注。除非如从以下论述显而易见的以其它方式予以特定地陈述，应了解，在本申请案中，利用例如“存取”、“接收”、“发送”、“使用”、“选择”、“确定”、“归一化”、“乘以”、“平均”、“监视”、“比较”、“施加”、“更新”、“测量”、“导出”或其类似者的术语的论述是指计算机系统或相似电子计算装置的动作及过程，计算机系统或相似电子计算装置操纵表示为计算机系统的寄存器及存储器内的物理(电子)量的数据及将所述数据变换成以相似方式表示为计算机系统存储器或寄存器或其它此类信息存储、发射或显示装置内的物理量的其它数据。
在诸图中，可将单一块描述为执行功能；然而，在实际实践中，可在单一组件中或遍及多个组件执行由所述块执行的功能，及/或可使用硬件、软件或硬件及软件的组合来执行所述(等)功能。为了清楚地说明硬件与软件的此互换性，在下文大体上在其功能性方面描述了各种说明性组件、块、模块、电路及步骤。将此功能性实施为硬件或软件视特定应用及强加于整个系统上的设计约束而定。所属领域的技术人员可针对每一特定应用以不同方式实施所描述的功能性，但这些实施决策不应被解译为致使偏离本公开的范围。而且，实例装置可包含除所展示的那些组件以外的组件，包含例如处理器、存储器及类似者的熟知组件。
本公开的方面适用于任何合适的处理器(例如图像信号处理器)或包含一或多个相机的装置(例如智能电话、平板计算机、膝上型计算机、数码相机、网络相机等)，且可经实施用于多种相机配置。虽然以下描述及实例的部分使用两个相机用于装置以便描述本公开的方面，但本公开适用于具有至少一个相机的任何装置。对于具有多个相机的装置，所述相机可具有相似或不同能力(例如分辨率、彩色或黑白、广角镜头对摄远镜头、缩放能力等)。
图1A描绘包含双相机的实例装置100，其中第一相机102及第二相机104布置于第一配置中。图1B描绘包含双相机的另一实例装置110，其中第一相机112及第二相机114布置于第二配置中。在一些方面中，所述相机中的一者(例如第一相机102及112)可为主相机，且另一相机(例如第二相机104及114)可为辅助相机。另外或替代地，第二相机104及114可具有与第一相机102及112不同的焦距、俘获率、分辨率、调色板(例如彩色对黑白)，及/或视场或俘获视野。在一些方面中，第一相机102及112各自可包含宽视场且第二相机104及114各自可包含较窄视场(例如摄远相机)。在其它方面中，第一相机102及112可具有与第二相机104及114相同的能力又不具有待俘获或记录的场景的相同优势。
虽然描绘可为包含双相机的智能电话或平板计算机的实例装置，但本公开实施例可实施于具有图像信号处理器的任何装置中。另一实例装置为可连接到智能电话或平板计算机的穿戴式装置(例如智能手表)。另一实例装置为耦合到(例如与相机通信或物理地连接到)相机的扩增或虚拟实境耳机。另一实例装置为耦合到相机或包含相机的无人机或汽车。另一实例装置为耦合到安全相机的视频安全系统。实例仅仅出于说明的目的，且本公开不应限制于任何特定实例或装置。
术语“装置”不限于一个或特定数目个物理对象(例如一个智能电话)。如本文所使用，装置可为具有可实施本公开的至少一些部分的多个部件的任何电子件。虽然以下描述及实例使用术语“装置”来描述本公开的各种方面，但术语“装置”不限于对象的特定配置、类型或数目。
图2A为包含多个相机的实例装置200的框图。实例装置200(其可为图1A及1B的装置100及110的一个实施方案)可为能够俘获图像或视频的任何合适的装置，包含例如有线及无线通信装置(例如摄影机电话、智能电话、平板计算机、安全系统、行车记录仪、膝上型计算机、桌上型计算机、可穿戴相机、无人机等)、数码相机(包含静态相机、视频摄影机等)，或任何其它合适的装置。实例装置200在图2A中展示为包含第一相机202、第二相机204、处理器206、存储指令210的存储器208、相机控制器212、显示器216及数个输入/输出(I/O)组件218。装置200可包含未展示的额外特征或组件。举例来说，无线接口(其可包含数个收发器及一基带处理器)可经包含用于无线通信装置。装置200可包含除第一相机202及第二相机204以外的额外相机。本公开不应限制于任何特定实例或说明，包含实例装置200。
第一相机202及第二相机204可能能够俘获个别图像帧(例如静态图像)及/或俘获视频(例如一连串所俘获图像帧)。来自相机的一连串静态图像或视频可称为图像流。第一相机202及第二相机204可包含一或多个图像传感器(为简单起见而未展示)及快门以用于俘获图像流并提供所俘获图像流到相机控制器212。
存储器208可为存储用以执行本公开中描述的一或多个操作的全部或一部分的计算机可执行指令210的非瞬态或非暂时性计算机可读媒体。装置200还可包含电力供应器220，其可耦合到装置200或集成到装置200中。
处理器206可为一或多个合适的能够执行存储于存储器208内的一或多个软件程序的指令码或指令(例如指令210)的处理器。在一些方面中，处理器206可为执行指令210以致使装置200执行任何数目个不同功能或操作的一或多个一般用途处理器。在额外或替代方面中，处理器206可包含集成电路或其它硬件以在不使用软件的情况下执行功能或操作。虽然在图2的实例中展示为经由处理器206彼此耦合，但处理器206、存储器208、相机控制器212、显示器216及I/O组件218可在各种布置中彼此耦合。举例来说，处理器206、存储器208、相机控制器212、显示器216及/或I/O组件218可经由一或多个局部总线(为简单起见而未展示)彼此耦合。
显示器216可为允许用户互动及/或呈现项目(例如所俘获图像及视频)以供用户检视的任何合适的显示器或屏幕。在一些方面中，显示器216可为触敏式显示器。I/O组件218可为或包含任何合适的机构、接口或装置以接收来自用户的输入(例如命令)并提供输出到用户。举例来说，I/O组件218可包含(但不限于)图形用户接口、键盘、鼠标、麦克风及扬声器等。
相机控制器212可包含用以处理通过第一相机202及/或第二相机204提供的所俘获图像帧或视频的图像信号处理器214，其可为一或多个图像信号处理器。在一些实例实施方案中，相机控制器212(例如通过使用图像信号处理器214)可控制第一相机202及第二相机204的操作。在一些方面中，图像信号处理器214可执行来自存储器的指令(例如来自存储器208的指令210或存储在耦合到图像信号处理器214的独立存储器中的指令)以控制相机202及204的操作及/或处理及提供一或多个图像流以用于记录或预览。在其它方面中，图像信号处理器214可包含特定硬件以控制相机202及204的操作及/或处理及提供一或多个图像流以用于记录或预览。图像信号处理器214可替代地或另外包含特定硬件与执行软件指令的能力的组合。
虽然图2A说明装置200的实例实施方案，但并不需要装置200包含图2A中展示的全部组件。图2B说明装置200的另一实例实施方案，展示装置200不必包含图2A中所说明的全部组件。举例来说，装置200可包含图像信号处理器214(其可为相机控制器的部分)及包含指令210的存储器208，且可耦合到电力供应器220或包含电力供应器220。第一相机202及第二相机204可与装置200分离并耦合到装置200(例如用于安全系统、桌上型计算机，或其它装置，其中相机远离装置)。在一些实例实施方案中，装置200从相机接收俘获流以用于处理且提供命令到相机以用于定位相机。
替代地或另外，显示器216可与装置200分离并耦合到装置200。在一个实例中，显示器216可为耦合到执行图像处理的装置的无线显示器。举例来说，无人机可提供俘获图像到用户的平板计算机或智能电话以用于预览，且无人机可包含图像信号处理器以完全处理意欲用于记录的任何俘获图像。I/O组件218还可与装置200分离。举例来说，如果输入为图形用户接口，则I/O组件的一些或全部可为显示器216的部件。
如所示，各种装置配置及类型可用于实施本公开的方面。因此，本公开不应限制于特定装置配置或类型。
图3为实例图像信号处理器300的框图。图像信号处理器300可为图2中所说明的相机控制器212的图像信号处理器214的一个实施方案。图像信号处理器300可为具有处理第一图像流的一序列滤波器302A到302N的单一线程(或单核心)处理器。在一个实例实施方案中，滤波器1(302A)可为噪声缩减滤波器，滤波器2(302B)可为边缘增强滤波器，且滤波器N(302N)可为完成处理图像流的最终滤波器。或者，图像信号处理器300可为具有处理其它图像流的一或多个额外序列滤波器304A到304N的一多线程(或多核心)处理器。
当用户利用常规装置记录或俘获场景(例如使用智能电话的父亲记录他的孩子的英式足球比赛或钢琴演奏会)时，场景通常在装置的显示器上预览。当用户缩放到场景的一部分中(例如父亲放大他的孩子)时，装置通常预览场景的放大部分。如果缩放为数字缩放，则装置可预览由装置的相机俘获的场景的仅仅一部分。以此方式，常规相机控制器可输出正被俘获的图像流的仅仅一部分以用于预览。如果用户丢失待记录于放大视图中的对象的踪迹且预览不展示对象，则用户可遭遇定位(例如移动(例如向左、向右、向上、向下及对角地)或定向(例如平移、倾斜及旋转)相机以发现预览中的对象)的困难。举例来说，如果前述父亲未在放大的预览中看到他的孩子，则父亲可具有确定改变相机位置以定位他孩子所藉以的方向及距离的困难。
图4A说明由相机俘获的实例场景402。出于本文中论述的目的，实例场景402是由图2的装置200的第一相机202或第二相机204(或第一相机202及第二相机204两者)俘获或记录。实例场景402具有在练习期间射门的球员。用户可希望在记录场景402时放大球，且正被记录的放大场景的预览可不同于用户意欲记录的物。图4B描绘图4A的实例场景402，描绘正被或待记录的放大场景的实际部分404，且描绘待记录的场景的预期部分406。如果装置预览正被或待记录的场景的部分404，则用户可具有确定待记录的场景的预期部分406的位置在此实例中为在正被或待记录的场景的部分404的位置右下方的困难。结果，用户可并不知晓移动或定向相机所藉以的方向。举例来说，用户可耗费时间移动装置以试图在放大视图中发现球，或可花费装置资源缩小及再次放大以在预览中重定位球。结果，用户可能太晚记录想要的图像或视频或因其它原因失去在预期时间记录预期对象(例如当射门时记录他的孩子)的机会。
根据本公开的各个方面，显示器(例如实例显示器216，其可耦合到装置或包含于装置中)可经配置以辅助用户定位一或多个相机。在一些实施方案中，显示器可预览由相机俘获的场景(其包含正被或待记录的场景的部分)。在场景的预览中，显示器(与图像处理装置通信)可显示正被或待记录的场景的部分的视觉指示。以此方式，用户能够容易确定正被或待记录的场景的部分相对于正被俘获的场景的位置。
图5A说明预览正被俘获的图4A的场景402及正被或待记录的场景的部分的视觉指示504的实例显示器502。为简单及简洁起见，如由本公开的视觉指示所指示与正被或待记录的场景的一部分相关的论述可被称作正被记录的场景的一部分。显示器502可为图2A及2B的装置200的显示器216，其中装置200记录通过视觉指示504指示的场景的部分，但可使用任何合适的装置配置。虽然视觉指示504经说明为指示正被记录的场景的部分的虚线矩形，但视觉指示504可采取任何形式来指示正被记录的场景的部分。在一些其它实例中，视觉指示504可指示场景的部分为预览的灰色区域或其它对照区域，可指示正被记录的场景的部分的拐角，包含识别正被记录的场景的部分的中心的标记、指示正被记录的场景的部分的实线框等。另外，记录场景的一部分包含记录视频以及一或多个静态图像。以此方式，用户可准备视觉指示504居于场景的一部分中心以用于待记录的即将来临图像或视频。
一个相机的俘获流可包含整个场景，且所述流的空间部分(例如通过视觉指示504界定/定界的场景的空间部分)经输出(例如通过图2的相机控制器212)以用于记录。或者，第一相机的流可包含整个场景而第二相机的流包含正被或待记录的场景的部分。图5B说明俘获场景506的装置200的第一相机202及俘获场景506的正被或待记录的部分508的装置200的第二相机204的实例。以此方式，显示器216可预览正由第一相机202俘获的场景506且呈现(例如显示)包含正由第二相机204俘获以用于记录的(场景506的)部分508的视觉指示。
在额外或替代实施方案中，装置可经配置以记录俘获流中的任一者或两者。在一个实例中，装置可请求用户选择待记录的流中的一者或自动地选择待记录的流。在另一实例中，一个俘获流可经独占地使用以用于预览。装置可请求用户选择使用哪一俘获流用于预览，或装置可自动地选择俘获流以用于预览。在另一实例中，装置自动地记录两个俘获流。如果记录两个俘获流，则用户可经请求以选择记录中的一者或两者用于存储(丢弃未经选择记录)。
在一些实例实施方案中，第一相机202及第二相机204为装置200的双相机的部件。在一些双相机中，两个相机202及204具有相似能力，例如分辨率、调色板、缩放、焦距、快门速度等。或者，两个相机202及204可具有不同能力。在一些实例中，第一相机202可为彩色相机且第二相机204可为可在低光设定中具有优选保真度的黑白相机。在一些其它实例中，第一相机202可为高分辨率相机(例如8百万像素、13百万像素等)且第二相机204与第一相机202相比可为较低分辨率相机，例如以运用自动聚焦辅助第一相机。在一些其它实例中，第一相机202可为广角视野相机且第二相机204与第一相机202相比可为具有较长焦距的较窄视场相机，例如以俘获远离装置的对象。一些装置可包含双相机的不同配置，且其它装置可包含多于两个相机。本公开的实施方案适用于装置的任何相机配置及类型。使用两个相机配置的所提供实例仅仅出于说明的目的而提供，且本公开不应限制于所提供实例中的任一者或由所提供实例中的任一者所限制。
图6为描绘用于输出视觉指示的实例操作600的说明性流程图。所输出视觉指示可呈现于显示器上以辅助用户定位相机，以使得装置可接收包含正被记录的预期场景的俘获流。举例来说，用户可使用视觉指示识别定位相机的方式以便使其视场包含预期场景。下文关于两个图像流(例如来自第一相机202的第一图像流及来自装置200的第二相机204的第二图像流)描述实例操作600。然而，方面适用于任何数目个图像流(包含一个图像流或三个或更多个图像流)。
虽然关于装置200、相机控制器212或图像信号处理器214描述实例操作(包含实例操作600)，但任何有能力的组件或模块可执行操作。举例来说，即使装置200或相机控制器212可经描述为执行操作，图像信号处理器214(例如图2A或图2B中)、处理器206(图2A)、相机控制器212(图2A)或其它模块或组件仍可执行操作。另外，术语“输出”可包含提供到独立装置、提供到远程显示器、显示于装置的所包含显示器上、从装置的一个组件提供到装置的另一组件，或从装置的一个组件提供到在装置外部的模块。本公开不应限制于执行如实例操作中所描述的操作的特定组件或模块。
在602处开始，装置200可处理与场景的全部相关联的第一图像流。在一个实例中，第一相机202可俘获场景506(图5B)并提供第一图像流到装置200的相机控制器212，其处理传入的第一图像流。在另一实例中，装置200的相机控制器212处理从另一装置接收或存储于存储器(例如存储器208)中的图像流。在一些实例实施方案中，图像信号处理器214可处理第一图像流。举例来说，图像信号处理器300(图3)可将滤波器302A到302N应用于第一图像流。另外或替代地，图像信号处理器300可对第一图像流执行其它功能，例如裁剪、缩放、去交错等。
装置200的相机控制器212还可独立地处理与第一图像流中的场景的空间部分(例如小于或等于全部的部分)相关联的第二图像流(604)。在一个实例中，第二相机204可俘获场景506的空间部分508(图5B)且提供所得第二图像流到相机控制器212，其处理传入的第二图像流。在其它实例中，第二图像流可通过另一装置或从存储器(例如存储器208)提供。参考将滤波器302A到302N应用于第一图像流的图像信号处理器300的先前实例，图像信号处理器300可将滤波器304A到304N应用于第二图像流，且还或替代地可执行其它功能，例如裁剪、缩放、去交错等。
在用于处理第二图像流的一些实例实施方案中，装置200(例如相机控制器212或图像信号处理器214)可确定第一图像流的场景506中的视觉指示的大小及位置(606)。举例来说，装置200可将视觉指示嵌入到经处理第一图像流中，在经处理第一图像流上建立一层，扩增经处理第一图像流等，以使得俘获的场景506及视觉指示可同时被显示(例如于显示器216上)。
应注意，本公开不应限制于具有比第一相机202更小视场的第二相机204。举例来说，相机可在不同缩放水平处以使得具有比另一相机更大视场的相机俘获比另一相机更小的场景部分。另外，如前提及，图像信号处理器214可为任何数目个处理器、线程及/或核心。在一些实例实施方案中，图像信号处理器214及处理器206可为系统芯片(SoC)的部件。因而，应注意，本公开的各种方面不限于任何特定硬件。
前进到608，装置200可输出经处理第一图像流以用于预览。在一些实例实施方案中，相机控制器212可产生经处理第一图像流。在产生经处理第一图像流后，装置200可在显示器216上预览场景506(610)。举例来说，装置200可输出经处理第一图像流到显示器216，且显示器216通过显示经处理第一图像流而预览场景506。在产生及输出经处理第一图像流(例如通过相机控制器212)期间或之后，还可输出与第二图像流相关联的场景的空间部分的视觉指示(612)。显示器216可任选地在正被预览的场景506上显示视觉指示(614)。举例来说，经处理第一图像流可包含视觉指示或以其它方式链接到视觉指示以使得相机控制器212可将视觉指示与待记录于经处理第一图像流中的场景的部分相关联。
虽然实例操作600展示以序列形式处理图像流及以序列形式产生经处理第一图像流及视觉指示，但处理不同图像流可经同时执行且输出或产生经处理图像流及视觉指示还可经同时执行。可在输出经处理第一图像流时输出经处理第二图像流。举例来说，相机控制器212可产生与正被记录的场景的部分相关联的经处理第二图像流的至少一部分。经处理图像流可存储在装置的存储器(例如存储器208)中或输出到另一装置或存储器。如果显示器216预览经处理第一图像流及视觉指示，则视觉指示指示在经处理第一图像流中俘获的场景的部分正被记录在第二图像流的至少一部分中。
虽然实例操作600(及在本公开中的其它实例操作)描述使用经处理第二图像流以用于记录，但经处理第二图像流的仅仅一部分可用于记录。举例来说，数字缩放可用于第二相机204以使得由第二相机204俘获的整个场景将不被记录。应注意，图像流可指图像流的一或多个时间或空间部分或全部流，且本公开不应限制于图像流的特定实施方案。
运用展示于场景的预览上的视觉指示，用户可优选理解移动装置或相机的方式以便定位正被或待记录的流(流的部分)中的所关注对象。具有视觉指示的场景的预览可称为“缩放辅助”预览。在一些实例实施方案中，用户可希望在以下各者的两者或大于两者之间切换：(1)缩放辅助预览，其中所述预览可描绘正被记录的场景的部分的指示以及正被俘获的整个场景的预览两者；(2)常规预览，其中所述预览可描绘仅仅正被记录的物；(3)同时视图，其中描绘缩放辅助预览及常规预览的组合(例如缩放辅助预览及常规预览的并排(SBS)视图、图像中图像(PiP)视图、加窗视图等)；(4)替代预览，其中所述预览可描绘与常规预览相比不同的场景部分；(5)不同缩放水平预览，其中所述预览可描绘在与常规预览相比不同的缩放水平(例如不同数字缩放水平)下的场景的一部分；或(6)同时视图，其中描绘上述预览中的两者或更多者的组合。
图7说明在缩放辅助预览702与正被或待记录的场景的部分的预览704之间的显示器216的实例切换操作706。在一些实例实施方案中，装置200可允许按钮、选单、手势或其它基于用户的命令确定何时在预览702与预览704之间切换。在一些实施方案中，命令在缩放辅助预览功能性的启动与去启动之间双态触发。在一些其它实施方案中，在一个或多个其它预览仍被产生但并未显示或输出以供显示的同时，命令改变预览。
在一个实例中，显示器216可呈现缩放辅助按钮708以允许用户在预览702与预览704之间切换，其中预览702包含指示场景的部分正被或待记录的视觉指示710。在其它实例中，用户可使用滑移手势，摇动装置200，或提供听觉、视觉或其它触碰命令以在预览702与预览704之间切换。
另外或替代地，可通过装置200基于一或多个准则自动地(例如“运作中”)确定在预览702与预览704之间切换的决策。举例来说，用于致使装置200从预览704切换到预览702的一或多个准则可包含相机移动、对象移动到正被俘获的场景的部分中、所关注对象的运动(例如所关注对象可通过装置200自动地跟踪以用于记录)等，其可致使装置200呈现缩放辅助预览702以辅助用户定位第一相机202及/或第二相机204。同样，用于致使装置200从预览702切换到预览704的一或多个准则可包含例如正被跟踪(例如基于用户选择或预定准则跟踪)的所关注对象的经确定运动量、经确定深度及/或经确定大小相对于各种相关联阈值水平的评定(或分析)。
图8为描绘用于在正被俘获的场景(例如正由第一相机202俘获的第一图像流中的场景)与正被或待记录的场景的一部分(例如由第二相机204俘获的第二图像流的至少一部分)之间切换的实例操作800的说明性流程图。举例来说，相机控制器212(单独或与其它组件(例如处理器206)合作操作)可确定是否在输出(例如用于预览)经处理第一图像流(及视觉指示)与经处理第二图像流之间切换。输出图像流可为通过显示器216预览的图像流。
在一些实例实施方案中，相机控制器212可产生多于一个图像流(例如第一图像流及第二图像流两者)以用于记录。在一个实例中，相机控制器212可产生并输出当前并未预览的经处理图像流以用于记录。例如通过能够检查每一图像流及选择待保持或删除的正被检查的图像流，可向用户呈现选择保持哪一经记录图像流的选项。虽然实例操作800展示在正被俘获的图像流与正被记录的图像流之间的切换，但两个图像流可皆被记录，且本公开不应限制于记录一个图像流或如所提供特定实例中所展示的记录。
在802处开始，经处理第一图像流可经产生以用于预览。举例来说，相机控制器212(例如通过使用图像信号处理器214)可产生经处理第一图像流。显示器216可任选地例如通过呈现经处理第一图像流及视觉指示而显示缩放辅助预览(804)。返回参看图7，显示器216可显示具有视觉指示710的缩放辅助预览702。装置200接着可从一或多个准则(例如用户触按缩放辅助按钮、滑动屏幕、在场景中的移动、相机移动等)确定装置200是否将从输出经处理第一图像流切换到输出经处理第二图像流(806)。举例来说，装置200确定显示器216是否应从缩放辅助预览702切换到正被记录的场景部分的预览704，如图7的实例中所描绘。如果装置200不将切换，则装置200继续输出经处理第一图像流(802)。举例来说，显示器216继续呈现具有视觉指示710的缩放辅助预览702(804)。
如果装置200将从输出经处理第一图像流切换，则装置200切换到输出经处理第二图像流以用于预览(808)。在一个实例中，相机控制器212可切换以产生经处理第二图像流。在另一实例中，相机控制器212产生两个经处理图像流，且装置200确定从缩放辅助预览702切换到经处理第二图像流的预览704输出到显示器216。以此方式，显示器216可任选地例如通过向用户预览正被或待记录的物而呈现经处理第二图像流(810)。
装置200(例如相机控制器212)接着可从一或多个准则(例如一或多个准则的变化或额外用户请求或输入)确定装置200是否将从输出经处理第二图像流切换到经处理第一图像流(812)。举例来说，装置200确定显示器216是否应从呈现正被记录的场景部分704切换到图7中的缩放辅助预览702。如果无切换将发生，则装置200继续输出经处理第二图像流(808)。举例来说，显示器216继续呈现正被记录的场景部分704(808)。如果切换将发生(812)，则装置200切换到输出经处理第一图像流，例如以使得缩放辅助预览可呈现于显示器216上。在一个实例中，如果两个经处理图像流由相机控制器212或图像信号处理器214产生，则装置200可在输出所产生图像流之间切换。在另一实例中，相机控制器212可输出一个经处理图像流并切换待输出的经处理图像流。
在一些实例实施方案中，显示器216可同时显示缩放辅助预览及正被或待记录的场景的部分。图9A说明呈现同时预览902的实例显示器，同时预览包含缩放辅助预览904(具有视觉指示908)及正被记录的场景906的部分。显示器902(其可为显示器216的一个实施方案)另外可包含用以在预览之间(例如在预览904及906的同时显示与正被或待记录的物的预览906之间)切换的按钮910。虽然同时预览902(包含预览904及906)经展示为并排，但预览904及906可以任何方式(例如图像中图像、独立窗等)同时呈现。另外，虽然预览906是以信箱方式展示，仅仅展示缩放辅助预览904的一部分，且预览中的每一者显示于一半显示器上，但每一预览904及906的全部或任何部分可展示于任何数量显示器上。举例来说，显示器216可以信箱方式显示预览904及906两者，可仅仅显示预览904及906中的每一者的一部分，允许用户确定如何同时显示预览904及906，或允许用户改变将用于预览904及906中的每一者的显示器902的多少。因此应注意，本公开不应限制于实例显示器或所提供预览中的任一者。
用户可能希望在预览的同时显示(“同时预览”)与缩放辅助预览之间切换(或装置200可通过切换处理图像流的输出而自动地切换)。图9B说明在同时预览902与缩放辅助预览904之间切换的显示器的实例操作912。在一个实例中，用户可按压缩放辅助(ZA)按钮以在预览902与预览904之间切换。装置200可另外或替代地基于一个或多个其它准则(例如相机移动、对象移动等)而切换到显示器216的输出以使得显示器在呈现预览902与904之间切换。
另外或替代地，显示器可在同时预览902、缩放辅助预览904及正被或待记录的物的预览906之间切换。举例来说，装置200可在输出经处理图像流之间切换以用于预览中的每一者。图9C说明如由切换操作914A到914C指示的在缩放辅助预览904、正被或待记录的场景的部分的预览906及/或同时预览902之间切换的显示器的实例。在一个实例中，用户可按压ZA按钮以在所述预览中循环。在另一实例中，显示器可包含多个按钮(例如软按钮及/或物理按钮)以使得用户可直接切换到预期预览。在另一实例中，用户可对于一个预览向左滑移并对于另一个预览向右滑移(或在任何其它方向上滑移，例如向上、向下或对角地)。其它准则(例如相机移动、对象移动等)可另外或替代地用于装置以确定切换预览。
图10为描绘用于在同时预览与正被记录的场景的预览之间切换的实例操作1000的说明性流程图。举例来说，相机控制器212(或装置200)可从同时输出经处理第一图像流(及视觉指示)及经处理第二图像流(例如用于在显示器216上显示同时预览)以用于预览切换到输出仅仅经处理第二图像流(例如用于在显示器216上显示正被记录的物)以用于预览。在一些替代实施方案中，当在同时预览与正被或待记录的物的预览之间切换时，相机控制器212(或装置200)可同时输出经处理第一图像流及经处理第二图像流以用于预览。关于图9B论述图10的实例操作1000，但图10的实例操作1000中的相似过程或步骤可用于在图9C或其它实例实施方案中所说明的预览之间切换。
在1002处开始，装置200可同时输出经处理第一图像流及经处理第二图像流以用于在显示器216上的同时预览。举例来说，相机控制器212(例如通过使用图像信号处理器214)可同时输出经处理第一图像流及经处理第二图像流。显示器216可显示同时预览902，包含缩放辅助预览及正被或待记录的物的预览(1004)。装置200接着可从一或多个准则(例如通过用户触按缩放辅助按钮或滑移屏幕从显示器216接收用户命令，确定场景中的移动或相机移动，等)确定装置200(或相机控制器212)是否将从同时输出经处理第一及第二图像流切换到仅仅输出经处理第二图像流以用于预览(1006)。举例来说，装置200确定显示器216是否应从同时预览902切换(913)到正被记录的物的预览904。如果无切换将发生，则装置200继续同时输出经处理第一及第二图像流(1002)。举例来说，显示器216继续呈现同时预览902(1004)。
如果切换将发生(1006)，则装置200切换到输出经处理第二图像流(1008)。在一个实例中，相机控制器212(例如通过使用图像信号处理器214)可切换到输出经处理第二图像流。在另一实例中，相机控制器212输出两个经处理图像流以用于预览，且装置200确定从输出经处理第一图像流以供显示器216呈现同时预览切换到输出经处理第二图像流以供显示器216呈现。以此方式，显示器216可任选地显示经处理第二图像流(1010)，并预览正被或待记录的物。
装置200接着可从所述一或多个准则(例如一或多个准则的变化或额外用户请求或输入)确定是否从输出经处理第二图像流以用于预览切换到同时输出经处理第一及第二图像流以用于预览(1012)。举例来说，装置200确定显示器216是否应从呈现来自指示正被记录的场景部分的预览904的预览切换(913)到图9A中的同时预览902。如果无切换将发生，则装置200继续输出经处理第二图像流(1008)。举例来说，显示器216继续呈现指示正被或待记录的场景部分的预览904(1010)。如果切换将发生(1012)，则装置200切换到同时输出经处理第一及第二图像流(1002)。以此方式，同时预览902可通过显示器216呈现。在一些替代实施方案中，装置200(例如通过使用相机控制器212)可同时输出经处理第一图像流及经处理第二图像流两者，且显示器216从呈现正被记录的物的预览切换到呈现同时预览。
在一些实例实施方案中，显示器216可允许用户与所呈现预览交互(例如用户调整展示于显示器216上的视觉指示的大小及/或移动所述视觉指示)。在一些实例中，如果显示器216为触敏式显示器，则装置200可从显示器216接收用户提供捏缩手势以减小视觉指示的大小及/或扩展手势以增加视觉指示的大小的指示。另外或替代地，用户可提供拖曳手势以移动视觉指示的位置。在一些其它实例中，用户可经由显示器216或装置200或接收听觉命令的麦克风的物理按钮(例如方向按钮、缩放或卷动轮等)提供命令。在一些其它实例中，装置200可包含或耦合到接收力命令的陀螺仪及/或加速度计。
图11A说明提供缩放辅助预览的实例显示器1102，其中第一视觉指示1104经调整大小到第二视觉指示1106以指示正被或待记录的场景的更多部分。实例显示器1102可为装置200(或耦合到装置200)的显示器216的一个实施方案。场景部分1108对应于第一视觉指示1104，且场景部分1110对应于第二视觉指示1106。在一些实例中，用户经由显示器216提供用于第一视觉指示1104的扩展手势以从第一视觉指示1104切换到第二视觉指示1106及因此从场景部分1108切换到正被或待记录的场景部分1110。
图11B说明提供辅助预览的实例显示器1112，其中第一视觉指示1114经移动到第二视觉指示1116以指示正被或待记录的场景的不同部分。实例显示器1112可为装置200(或耦合到装置200)的显示器216的一个实施方案。场景部分1118对应于第一视觉指示1114，且场景部分1120对应于第二视觉指示1116。在一些实例中，用户经由显示器216提供用于第一视觉指示1114的拖曳手势以从第一视觉指示1114切换到第二视觉指示1116(例如移动视觉指示)及因此从场景部分切换到正被或待记录的场景部分1110。
图12为描绘用于基于用以调整视觉指示的用户输入调整被或待记录的场景的一部分的实例操作1200的说明性流程图。关于图11A及11B论述图12的实例操作1200，但图12的实例操作1200中的相似过程或步骤可用于对待或正被记录用于其它实例实施方案的物调整大小。举例来说，虽然描述缩放辅助预览，但调整视觉指示可在同时预览或其它预览中发生。
在1202处开始，显示器216可显示包含正被或待记录的场景的部分的视觉指示的缩放辅助预览(或替代地，同时预览)。当显示器216呈现缩放辅助预览时，装置200可例如从显示器216接收用户输入或请求以调整视觉指示调整(1204)，显示器216从与显示器的用户互动提供用户命令。举例来说，装置200可任选地接收用以调整图11A中的视觉指示1104的大小的用户命令(1206)。另外或替代地，装置200可任选地接收用以移动视觉指示的位置的用户命令(1208)。通过请求调整(例如经由与显示器216的互动)视觉指示，用户指示装置200将记录与由缩放辅助预览中的视觉指示当前指示的相比不同的场景部分。
响应于用户命令，装置200可调整处理第二图像流(1210)。在调整第二图像流的处理(1210)中，装置200可任选地调整在第二图像流中正被记录或待记录的场景的部分的大小(1212)。举例来说，当场景部分1108(图11A)经输出用于记录时，如果用户改变第一视觉指示1104到第二视觉指示1106，则装置200调整处理第二图像流以使得场景部分1110经输出用于记录。另外或替代地，装置200可任选地改变正被或待记录的场景的部分的空间位置(1214)。举例来说，当场景部分1118(图11B)经输出用于记录时，如果用户移动视觉指示1114到预览1112中的视觉指示1116的位置，则装置200调整处理第二图像流以使得场景部分1120经输出用于记录。
在一些实例实施方案中，在将一或多个滤波器应用于所俘获第二图像流之前，装置200可调整第二相机204俘获用于记录的场景的什么部分，或发送用以调整正被俘获的物的命令到第二相机204。在一个实例中，相机控制器212可发送用以改变第二相机204的光学缩放水平的命令到第二相机204。在另一实例中，相机控制器212可发送用以调整第二相机204的平移及/或倾斜(例如用于安全相机)的命令到第二相机204。
在一些其它实例实施方案中，装置200可裁剪来自第二相机204的所俘获第二图像流(或在应用一或多个滤波器之后的经处理第二图像流)。以此方式，装置200可调整裁剪第二图像流以使得与经调整视觉指示相关联的场景的仅仅部分经输出用于记录。举例来说，第二相机204俘获比记录的物更多的场景(例如数字缩放可用于第二图像流以展示将或正被记录的物)。如果装置200将记录当前正在第二图像流中记录的场景的不同部分，则第二相机204可俘获相同场景，且装置200(例如相机控制器212)可在不调整第二相机204情况下调整正被记录的第二图像流的部分。
返回参看图12，装置200可响应于调整处理第二图像流及/或响应于调整视觉指示的用户输入而调整产生所显示视觉指示(1216)。在一些实例实施方案中，装置200可任选地调整待在预览中显示的视觉指示的大小(1218)。另外或替代地，装置200可任选地移动视觉指示到待在预览中显示的新位置(1220)。
除用户请求改变视觉指示的大小及/或位置(例如通过在触敏式显示器216上的用户手势或其它用户输入)之外或替代用户请求改变视觉指示的大小及/或位置，装置200还可响应于一或多个准则而自动地调整产生视觉指示的大小及/或位置(及因此正被或待记录场景的部分)。在一个实例中，如果装置200跟踪用于记录的对象(例如脸、个人、英式足球等)，且相机不能聚焦于所述对象(例如所述对象在记录中模糊)，则装置200可记录包含对象的更多场景(增加视觉指示的大小及因此自对象“缩小”)以便调整焦点以使对象在记录中清晰。举例来说，装置200可发送用以光学地缩小以使得更多场景被俘获的命令到相机。在另一实例中，如果减小场景的亮度，则装置200可命令相机俘获更多场景以用于记录(其增加视觉指示的大小)以试图俘获更多环境光。在另一实例中，如果装置200正跟踪移动对象，则装置调整正被或待记录的场景的部分(因此调整在预览中视觉指示的位置)以试图跟踪对象。
在一些实例实施方案中，第二相机204不俘获与第一相机202一样多的场景，或与第一相机202相比，第二相机204俘获不同场景部分。举例来说，一些双相机带有具有宽视场的第一相机及具有较窄视场的第二相机(例如摄远相机)。以此方式，第二相机可能不能俘获第一图像流中的全部场景。如果装置200的用户试图调整缩放辅助预览中的视觉指示(例如经由显示器216移动视觉指示或调整视觉指示大小)到并未由第二相机204俘获的场景的区域，则装置200可自动地切换到使用第一图像流(从第一相机202所提供)以记录场景的新的部分。从使用第二图像流到用于记录的第一图像流的切换对于用户可为顺畅且不可见的。举例来说，相机控制器212可从输出用于记录的经处理第二图像流的至少一部分顺畅地切换到输出用于记录的经处理第一图像流的至少一部分。或者，装置200可将用于记录的流已改变通知用户(例如听觉或视觉通知)。在一些其它实例实施方案中，两个图像流可被记录，且装置200可将两个图像流的部分拼接在一起以产生对应于通过视觉指示所指示的场景的部分的经处理图像流。
图13A说明由第一相机202俘获的实例场景1302及由第二相机204俘获或能够俘获的场景的实例部分1304。如所示，由第二相机204俘获的场景部分1304小于由第一相机202俘获的场景1302。在所说明的实例中，场景部分1306可最初被记录或待记录。如果待记录的场景部分经调整为场景部分1308，则第二相机204可能不能俘获用于记录的场景部分。举例来说，用户可在显示器216上做手势以在缩放辅助预览中调整视觉指示以从记录场景部分1306改变到记录场景部分1308，场景部分1308并未由第二相机204全部俘获。装置200可从使用用于记录的第二图像流切换到使用用于记录的第一图像流以使得场景的全部预期部分被记录。
图13B说明由第一相机202俘获的图13A中的实例场景1302及正被或待记录的场景部分1308，其中第一图像流(从第一相机202提供)包含被记录或待记录的场景部分1308(对应于图像1310)。以此方式，第二图像流(从第二相机204提供)可并不用于记录场景部分1308。
图14为描绘用于在经处理第一图像流与经处理第二图像流之间切换以用于记录场景的一部分的实例操作1400的说明性流程图。在1402处开始，显示器216可呈现包含视觉指示的预览(例如缩放辅助预览或同时预览)。运用指示正被或待记录的场景部分显示于显示器216上的视觉指示，装置200(例如通过使用相机控制器212)可输出经处理第二图像流以用于记录(1404)。装置200接着可接收用以调整视觉指示的用户命令(1406)。举例来说，装置200可从显示器216接收通过用户经由与显示器216的互动提供的用户命令。在一些实例实施方案中，装置200可接收用以调整视觉指示的大小的用户命令(1408)。另外或替代地，装置200可接收用以移动视觉指示的位置以用于预览的用户命令(1410)。
在装置200调整正被记录的场景的部分情况下，装置200可调整视觉指示以使得视觉指示对应于正被记录的场景的经调整部分(1412)。响应于用户命令，装置200可确定用于记录的场景的至少一部分是否在第二图像流中的视场外部(1414)。举例来说，装置200确定由第二相机204俘获的场景部分1304(图13A)是否不包含用于记录的全部场景1308。如果第二图像流包含用于记录的全部场景1308，则装置200继续输出经处理第二图像流以用于记录(1404)。举例来说，相机控制器212调整用于记录的第二图像流的部分并继续产生及输出经处理第二图像流以用于记录。
如果第二图像流不包含用于记录的全部场景(例如第二相机204不俘获图13A中的全部场景部分1308)，则装置200可从输出用于记录的经处理第二图像流切换到输出用于记录的经处理第一图像流(1416)。举例来说，相机控制器212可从输出经处理第二图像流的一部分切换到输出对应于图13B中的场景部分1308的经处理第一图像流的一部分。在一些替代实施方案中，相机控制器212可同时输出经处理第一图像流及经处理第二图像流两者。以此方式，装置200可确定从使用经处理第二图像流以用于记录切换到使用经处理第一图像流以用于记录场景的部分。
除用户请求改变视觉指示的大小及/或位置(例如通过在显示器216上的用户手势或其它用户输入)之外或替代用户请求改变视觉指示的大小及/或位置，装置200还可响应于场景、装置200及/或其它组件的一或多个准则而从使用经处理第二图像流自动地切换到使用经处理第一图像流以用于记录。在一些实例实施方案中，亮度变化可致使装置200切换图像流以用于记录。举例来说，双相机可包含彩色相机及黑白相机，其中黑白相机与彩色相机相比在低光情形下具有优选保真度。以此方式，如果场景的亮度降到低于阈值，则装置200可确定从使用彩色相机的图像流切换到使用黑白相机的图像流以用于记录。
在一些其它实例实施方案中，相机中的一或多者(例如第一相机202及第二相机204)可能移动以使得正被跟踪的对象可能超出正由相机中的一者俘获的场景的部分。举例来说，如果第一相机202包含宽视野且第二相机204为摄远相机，则第一图像流及/或第二图像流中的全局运动可能致使对象离开或将离开第二相机204的视场。结果，装置200可将图像流从第二相机204切换到第一相机202以用于记录以便保持跟踪对象。类似地，正被跟踪的对象可能移动(局部运动)，以使得第二图像流可能不包含所述对象。装置200可从使用第二图像流(其可由摄远相机俘获)切换到使用第一图像流(其可由较宽视场相机俘获)。
图15为描绘用于基于一或多个准则从经处理第二图像流切换到经处理第一图像流以用于记录的实例操作1500的说明性流程图。在1502处开始，装置200可输出经处理第二图像流以用于记录。装置200接着可确定场景的一或多个特性的变化(1504)。在一个实例中，装置200可任选地确定图像流中的至少一者中的亮度或明度的变化(1506)。举例来说，环境光强度可经确定为降到低于用于正被用于记录的当前经处理图像流的阈值。在另一实例中，装置200可任选地确定图像流中的至少一者中的全局运动(1508)。举例来说，第二相机204可经移动以使得第一相机202将用以俘获场景的部分以用于记录。在另一实例中，装置200可任选地确定对象的局部运动(1510)。举例来说，正由装置200跟踪的对象可移出第二相机204的视场以使得经处理第一图像流待用于记录。
基于场景的一或多个特性的改变，装置200从输出经处理第二图像流以用于记录切换到输出经处理第一图像流以用于记录(1512)。在一个实例中，相机控制器212可从输出经处理第二图像流以用于记录切换到输出经处理第一图像流以用于记录，其中经处理第一及/或第二图像流的一部分可经存储以便后续使用。在另一实例中，相机控制器212可输出两个经处理图像流，且装置200可确定从使用经输出处理第二图像流切换到使用经输出处理第一图像流以用于记录。
在自动地在用于记录的经处理图像流之间切换的装置200的另一实例实施方案中，外来对象可侵占正被或待记录的场景的部分。举例来说，在记录孩子的英式足球比赛中，坐在父亲前方的人可突然进入正被或待记录的场景的部分(例如站立、移动他或她的头等)以使得装置200并不记录(或输出用于记录)场景的预期部分。如果对象妨碍或阻挡正被记录的场景的一小部分，则使用相同图像流的记录可继续有限中断。然而，如果对象妨碍或阻挡场景的大部分，则装置200可确定尝试使用不同图像流以用于记录。在一些实例实施方案中，装置200可切换到另一经处理图像流以试图俘获场景的预期部分(例如如果另一相机具有并不由外来对象阻挡的场景的部分的不同优势或另一相机具有较宽视场以便“缩小”以俘获场景)。举例来说，装置200可确定场景的部分的百分比被阻挡，可确定外来对象在距正被记录的场景的中心的距离内，等等。
图16为描绘用于基于阻挡正被或待记录的场景的一部分的对象从经处理第二图像流切换到经处理第一图像流以用于记录的实例操作1600的说明性流程图。在1602处开始，装置200可输出经处理第二图像流以用于记录。在一个实例中，相机控制器212可输出经处理第二图像流以用于记录。在另一实例中，相机控制器212可输出多个经处理图像流，且装置200可使用经处理第二图像流以用于记录场景的部分。
运用正用于记录场景的部分的经处理第二图像流，装置200可确定对象移动以阻挡正被或待记录的场景的一部分(1604)。装置200接着可基于对象确定是否从经处理第二图像流切换到经处理第一图像流(1606)。在一个实例中，装置200可确定对象是否阻挡大于正被或待记录的场景的部分的某百分比。在另一实例中，装置200可确定对象是否在距阻挡正被或待记录的场景的部分的中心的所界定距离内。在另一实例中，装置200可从对象的移动预测对象是否将阻挡用于记录的场景的部分的百分比或用于记录的场景的部分的中心。如果装置200确定不切换经处理图像流以用于记录场景的部分，则装置200继续输出经处理第二图像流以用于记录场景的部分(1602)。如果装置200确定切换经处理图像流以用于记录场景的部分，则装置200切换到输出经处理第一图像流以用于记录场景的部分(1608)。
或者，如果相机控制器212输出经处理第一图像流及经处理第二图像流两者，则装置200可从使用经处理第二图像流切换到使用经处理第一图像流以用于记录场景的部分。在一些实例实施方案中，装置200可继续跟踪阻挡对象。如果阻挡对象空出正被或待记录的场景的部分，则装置200可确定切换经处理图像流以用于记录。或者，装置200可继续使用当前经处理图像流以用于记录直到另一准则致使装置确定切换使用经处理图像流以用于记录为止。
除非特别描述为以特定方式来实施，否则本文中所描述的技术可以硬件、软件、固件或其任何组合而实施。还可将描述为模块或组件的任何特征一起实施于集成式逻辑装置中或分开来实施为离散但可互操作的逻辑装置。如果以软件予以实施，则所述技术可至少部分通过包括指令210的非暂时性处理器可读存储媒体(例如图2的实例装置200中的存储器208)来实现，指令210在由处理器206(或图像信号处理器214)执行时致使装置200执行上文所描述的方法中的一或多者。非暂时性处理器可读数据存储媒体可形成计算机程序产品的一部分，其可包含封装材料。
非暂时性处理器可读存储媒体可包括随机存取存储器(RAM)(例如，同步动态随机存取存储器(SDRAM))、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、电可抹除可编程只读存储器(EEPROM)、快闪存储器、其它已知存储媒体及其类似者。另外地或替代地，所述技术可至少部分地通过携载或传达呈指令或数据结构的形式且可由计算机或其它处理器存取、读取及/或执行的代码的处理器可读通信媒体来实现。
结合本文所公开的实施例描述的各种说明性逻辑块、模块、电路及指令可通过例如图2A及2B的实例装置200中的处理器206或图像信号处理器214的一或多个处理器执行。此(等)处理器可包含(但不限于)一或多个数字信号处理器(DSP)、一般用途微处理器、专用集成电路(ASIC)、专用指令集处理器(ASIP)、现场可编程门阵列(FPGA)或其它等效集成式或离散逻辑电路。如本文中所使用的术语“处理器”可指上述结构或适用于实施本文中所描述的技术的任何其它结构中的任一者。另外，在一些方面中，本文所描述的功能性可提供于专用软件模块或如本文中所述而配置的硬件模块内。此外，所述技术可完全实施于一或多个电路或逻辑元件中。一般用途处理器可为微处理器，但在替代例中，处理器可为任何常规的处理器、控制器、微控制器或状态机。处理器还可实施为计算装置的组合(例如，DSP与微处理器的组合、多个微处理器、结合DSP核心的一或多个微处理器，或任何其它此类配置)。
虽然本公开展示说明性方面，但应注意，可在不偏离所附权利要求书的范围的情况下在本文中进行各种变化及修改。与本文所描述的方面一致的方法权利要求书的所述功能、步骤或作用，除非另外明确陈述，否则不必按任何特定的次序执行。举例来说，图6、8、10、12及14到16中所说明的实例操作的步骤(如果通过装置、相机控制器、处理器或图像信号处理器执行)可按任何次序并以任何频率(例如对于每一图像俘获，经处理图像流中的图像俘获的周期性间隔、预定义时段、接收用户手势的时等等)执行。此外，虽然可能以单数形式描述或主张元件，但除非明确地陈述对单数形式的限制，否则涵盖复数形式。举例来说，虽然描述两个经处理图像流，但一个经处理图像流或三个或更多个经处理图像流可用于执行本公开的方面。相应地，本公开不限于所说明的实例，且用于执行本文中所描述的功能性的任何手段包括于本公开的方面中。

Claims (24)

1.一种具有多相机系统的设备，所述设备被配置为处理和显示图像数据，包括：
存储器，被配置为存储图像流的图像数据；
第一相机，具有第一视场(FOV)，被配置为俘获与场景的预览相关联的第一图像流；
第二相机，具有不同于第一FOV的第二FOV，被配置为俘获与所述场景的第一部分的预览相关联的第二图像流，其中所述第二图像流不同于所述第一图像流，以及
与所述存储器通信的至少一个处理器，所述处理器被配置为：
输出所述第一图像流和所述第二图像流以同时预览，所述第二图像流与第一缩放水平和所述场景的第一部分相关联；以及
触敏式显示器配置为：
同时预览所述第一图像流和所述第二图像流；
经由所述触敏式显示器接收用以将与第二图像流相关联的第一缩放水平修改为第二缩放水平的用户输入，其中所述第二缩放水平不同于所述第一缩放水平，以及
响应于接收到用以调整所述第一缩放水平的用户输入，同时预览所述场景的第一图像流和所述第二图像流的修改版本，所述第二图像流的修改版本是基于所述第二缩放水平的所述场景的第二部分的预览，基于所述第二缩放水平预览的场景的第二部分不同于基于所述第一缩放水平预览的场景的第一部分。
2.根据权利要求1所述的设备，其中，所述触敏式显示器还被配置为：
在所述触控显示器的相应的非重叠区域内同时预览所述第一图像流和所述第二图像流。
3.根据权利要求2所述的设备，其中，所述触敏式显示器还被配置为：
在所述触敏式显示器的非重叠区域的第一区域内接收用以将所述第一缩放水平修改为所述第二缩放水平的用户输入；以及
在所述触敏式显示器的非重叠区域内同时预览所述第一图像流和所述第二图像流的修改版本。
4.根据权利要求1所述的设备，其中，所述至少一个处理器还被配置为：
从输出所述第一图像流和所述第二图像流或所述第二图像流的修改版本以同时预览切换到输出所述第一图像流、所述第二图像流或所述第二图像流的修改版本中的一个以预览。
5.根据权利要求4所述的设备，其中，所述至少一个处理器还被配置为响应于第二用户输入的接收来执行所述切换。
6.根据权利要求4所述的设备，其中，所述至少一个处理器还被配置为基于一个或多个准则来执行所述切换。
7.根据权利要求6所述的设备，其中，所述至少一个处理器还被配置为基于所述设备的移动来执行所述切换。
8.根据权利要求6所述的设备，其中，所述至少一个处理器还被配置为基于所述场景内的感兴趣对象来执行所述切换。
9.根据权利要求8所述的设备，其中，所述至少一个处理器还被配置为基于与所述场景内的感兴趣对象相关联的深度、大小或运动中的至少一项的评估来执行所述切换。
10.根据权利要求8所述的设备，其中，所述至少一个处理器还被配置为基于用户选择来确定所述感兴趣对象。
11.根据权利要求1所述的设备，其中，所述至少一个处理器还被配置为输出所述第二图像流或所述第二图像流的修改版本之一以用于记录。
12.根据权利要求1所述的设备，其中，所述至少一个处理器还被配置为输出以下之一以用于记录：
所述第一图像流和所述述第二图像流；或者
所述第一图像流和所述第二图像流的修改版本。
13.一种被配置为处理和显示图像数据的多相机系统，包括：
存储器，被配置为存储图像流的图像数据；
第一相机，具有第一视场(FOV)，被配置为俘获与场景的预览相关联的第一图像流；
第二相机，具有不同于第一FOV的第二FOV，被配置为俘获与所述场景的第一部分的预览相关联的第二图像流，其中所述第二图像流不同于所述第一图像流，以及
与所述存储器通信的至少一个处理器，所述第一相机、所述第二相机、所述至少一个处理器被配置为：
输出所述第一图像流和所述第二图像流以同时预览，所述第二图像流与第一缩放水平和所述场景的第一部分相关联；以及
触敏式显示器配置为：
同时预览所述第一图像流和所述第二图像流；
经由所述触敏式显示器接收用以将与第二图像流相关联的第一缩放水平修改为第二缩放水平的用户输入，其中所述第二缩放水平不同于所述第一缩放水平，以及
响应于接收到用以调整所述第一缩放水平的用户输入，同时预览所述场景的第一图像流和所述第二图像流的修改版本，所述第二图像流的修改版本是基于所述第二缩放水平的所述场景的第二部分的预览，基于所述第二缩放水平预览的场景的第二部分不同于基于所述第一缩放水平预览的场景的第一部分。
14.根据权利要求13所述的多相机系统，其中，所述触敏式显示器还被配置为：
在所述触控显示器的相应的非重叠区域内同时预览所述第一图像流和所述第二图像流。
15.根据权利要求14所述的多相机系统，其中，所述触敏式显示器还被配置为：
在所述触敏式显示器的非重叠区域的第一区域内接收用以将所述第一缩放水平修改为所述第二缩放水平的用户输入；以及
在所述触敏式显示器的非重叠区域内同时预览所述第一图像流和所述第二图像流的修改版本。
16.根据权利要求13所述的多相机系统，其中，所述至少一个处理器还被配置为：
从输出所述第一图像流和所述第二图像流或所述第二图像流的修改版本以同时预览切换到输出所述第一图像流、所述第二图像流或所述第二图像流的修改版本中的一个以预览。
17.根据权利要求16所述的多相机系统，其中，所述至少一个处理器还被配置为响应于第二用户输入的接收来执行所述切换。
18.根据权利要求16所述的多相机系统，其中，所述至少一个处理器还被配置为基于一个或多个准则来执行所述切换。
19.根据权利要求18所述的多相机系统，其中，所述至少一个处理器还被配置为基于所述设备的移动来执行所述切换。
20.根据权利要求18所述的多相机系统，其中，所述至少一个处理器还被配置为基于所述场景内的感兴趣对象来执行切换。
21.根据权利要求20所述的多相机系统，其中，所述至少一个处理器还被配置为基于与所述场景内的感兴趣对象相关联的深度、大小或运动中的至少一项的评估来执行所述切换。
22.根据权利要求20所述的多相机系统，其中，所述至少一个处理器还被配置为基于用户选择来确定所述感兴趣对象。
23.根据权利要求13所述的多相机系统，其中，所述至少一个处理器还被配置为输出所述第二图像流或所述第二图像流的修改版本之一以用于记录。
24.根据权利要求13所述的多相机系统，其中，所述至少一个处理器还被配置为输出以下之一以用于记录：
所述第一图像流和所述第二图像流；或者
所述第一图像流和所述第二图像流的修改版本。
CN202110696076.2A 2017-09-11 2018-09-10 被配置为处理和显示图像数据的多相机系统及具有多相机系统的设备 Active CN113329160B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110696076.2A CN113329160B (zh) 2017-09-11 2018-09-10 被配置为处理和显示图像数据的多相机系统及具有多相机系统的设备

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US15/701,293 US10630895B2 (en) 2017-09-11 2017-09-11 Assist for orienting a camera at different zoom levels
US15/701,293 2017-09-11
CN201880058482.2A CN111066315B (zh) 2017-09-11 2018-09-10 一种被配置为处理和显示图像数据的装置、方法及可读媒体
CN202110696076.2A CN113329160B (zh) 2017-09-11 2018-09-10 被配置为处理和显示图像数据的多相机系统及具有多相机系统的设备
PCT/US2018/050205 WO2019051376A2 (en) 2017-09-11 2018-09-10 HELPS ORIENTATE A CAMERA IN DIFFERENT LEVELS OF ZOOM

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201880058482.2A Division CN111066315B (zh) 2017-09-11 2018-09-10 一种被配置为处理和显示图像数据的装置、方法及可读媒体

Publications (2)

Publication Number Publication Date
CN113329160A true CN113329160A (zh) 2021-08-31
CN113329160B CN113329160B (zh) 2023-08-18

Family

ID=63834630

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201880058482.2A Active CN111066315B (zh) 2017-09-11 2018-09-10 一种被配置为处理和显示图像数据的装置、方法及可读媒体
CN202110696076.2A Active CN113329160B (zh) 2017-09-11 2018-09-10 被配置为处理和显示图像数据的多相机系统及具有多相机系统的设备

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201880058482.2A Active CN111066315B (zh) 2017-09-11 2018-09-10 一种被配置为处理和显示图像数据的装置、方法及可读媒体

Country Status (9)

Country Link
US (4) US10630895B2 (zh)
EP (1) EP3682627A2 (zh)
KR (1) KR20200087746A (zh)
CN (2) CN111066315B (zh)
AU (1) AU2018330318A1 (zh)
BR (1) BR112020004680A2 (zh)
SG (1) SG11202000954XA (zh)
TW (1) TWI803517B (zh)
WO (1) WO2019051376A2 (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160131720A (ko) * 2015-05-08 2016-11-16 엘지전자 주식회사 이동단말기 및 그 제어방법
US10630895B2 (en) 2017-09-11 2020-04-21 Qualcomm Incorporated Assist for orienting a camera at different zoom levels
JP7027844B2 (ja) * 2017-11-29 2022-03-02 株式会社デンソー カメラモジュール
CN111885294B (zh) * 2018-03-26 2022-04-22 华为技术有限公司 一种拍摄方法、装置与设备
EP3962063A1 (en) * 2018-05-23 2022-03-02 Huawei Technologies Co., Ltd. Photographing method and terminal device
KR102446264B1 (ko) * 2018-09-21 2022-09-22 엘지전자 주식회사 이동 단말기
US11617024B2 (en) * 2018-11-12 2023-03-28 Hewlett-Packard Development Company, L.P. Dual camera regions of interest display
US11227155B2 (en) 2019-01-23 2022-01-18 Alclear, Llc Remote biometric identification and lighting
JP7158307B2 (ja) * 2019-02-07 2022-10-21 シャープ株式会社 電子機器、制御プログラム、制御装置、および制御方法
KR102664705B1 (ko) 2019-02-19 2024-05-09 삼성전자주식회사 복수의 카메라들을 이용하여 이미지의 배율을 변경하기 위한 전자 장치 및 방법
US10956694B2 (en) * 2019-04-05 2021-03-23 Zebra Technologies Corporation Device and method for data capture aiming assistance
US11196943B2 (en) * 2019-05-31 2021-12-07 Apple Inc. Video analysis and management techniques for media capture and retention
EP4024843A4 (en) * 2019-08-29 2022-08-31 SZ DJI Technology Co., Ltd. DISPLAY METHOD, PHOTOGRAPHING METHOD AND RELATED DEVICE
US11606504B2 (en) 2019-09-10 2023-03-14 Samsung Electronics Co., Ltd. Method and electronic device for capturing ROI
CN111010506A (zh) * 2019-11-15 2020-04-14 华为技术有限公司 一种拍摄方法及电子设备
CN115004675A (zh) * 2020-02-03 2022-09-02 索尼半导体解决方案公司 电子设备
US11265474B2 (en) * 2020-03-16 2022-03-01 Qualcomm Incorporated Zoom setting adjustment for digital cameras
CN113572945A (zh) * 2020-04-29 2021-10-29 摩托罗拉移动有限责任公司 远摄相机取景器
CN114205515B (zh) * 2020-09-18 2023-04-07 荣耀终端有限公司 一种视频的防抖处理方法及电子设备
KR20220075028A (ko) * 2020-11-26 2022-06-07 삼성전자주식회사 다중 크롭 기능을 갖는 이미지 센서를 포함하는 전자 장치
WO2024048961A1 (ko) * 2022-08-31 2024-03-07 삼성전자주식회사 디스플레이의 변형에 기반하여 하나 이상의 카메라들을 제어하기 위한 전자 장치 및 그 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110050963A1 (en) * 2008-05-19 2011-03-03 Panasonic Corporation Image capturing apparatus and image encoding apparatus
US20120268641A1 (en) * 2011-04-21 2012-10-25 Yasuhiro Kazama Image apparatus
CN105245771A (zh) * 2014-07-01 2016-01-13 苹果公司 移动相机系统
US20160381289A1 (en) * 2015-06-23 2016-12-29 Samsung Electronics Co., Ltd. Digital photographing apparatus and method of operating the same
CN106375637A (zh) * 2015-07-21 2017-02-01 Lg电子株式会社 移动终端及其控制方法
CN106713772A (zh) * 2017-03-31 2017-05-24 维沃移动通信有限公司 一种拍照方法及移动终端

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6803931B1 (en) 1999-11-04 2004-10-12 Kendyl A. Roman Graphical user interface including zoom control box representing image and magnification of displayed image
IL159537A0 (en) 2001-06-28 2004-06-01 Omnivee Inc Method and apparatus for control and processing of video images
US7221398B2 (en) * 2003-05-01 2007-05-22 Hewlett-Packard Development Company, L.P. Accurate preview for digital cameras
US7424218B2 (en) 2005-07-28 2008-09-09 Microsoft Corporation Real-time preview for panoramic images
JP5347717B2 (ja) * 2008-08-06 2013-11-20 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
US8488001B2 (en) * 2008-12-10 2013-07-16 Honeywell International Inc. Semi-automatic relative calibration method for master slave camera control
KR101024705B1 (ko) 2009-04-21 2011-03-25 주식회사 코아로직 영상 처리 장치 및 방법
KR101527037B1 (ko) 2009-06-23 2015-06-16 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9582166B2 (en) * 2010-05-16 2017-02-28 Nokia Technologies Oy Method and apparatus for rendering user interface for location-based service having main view portion and preview portion
JP5884421B2 (ja) 2011-11-14 2016-03-15 ソニー株式会社 画像処理装置、画像処理装置の制御方法およびプログラム
US10681304B2 (en) * 2012-06-08 2020-06-09 Apple, Inc. Capturing a panoramic image using a graphical user interface having a scan guidance indicator
US9002339B2 (en) * 2012-08-15 2015-04-07 Intel Corporation Consumption and capture of media content sensed from remote perspectives
CN104112267B (zh) * 2013-04-19 2018-01-23 朱建国 一种简易、精确采集平面作品尺度信息的方法
US9672627B1 (en) * 2013-05-09 2017-06-06 Amazon Technologies, Inc. Multiple camera based motion tracking
US9518822B2 (en) * 2013-09-24 2016-12-13 Trimble Navigation Limited Surveying and target tracking by a network of survey devices
US9736381B2 (en) 2014-05-30 2017-08-15 Intel Corporation Picture in picture recording of multiple regions of interest
KR102216246B1 (ko) * 2014-08-07 2021-02-17 엘지전자 주식회사 이동단말기 및 그 제어방법
KR20160029536A (ko) 2014-09-05 2016-03-15 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US10475185B1 (en) * 2014-12-23 2019-11-12 Amazon Technologies, Inc. Associating a user with an event
CN108353126B (zh) 2015-04-23 2019-08-23 苹果公司 处理相机的内容的方法、电子设备和计算机可读存储介质
KR20170029978A (ko) * 2015-09-08 2017-03-16 엘지전자 주식회사 이동단말기 및 그 제어방법
US20180288310A1 (en) 2015-10-19 2018-10-04 Corephotonics Ltd. Dual-aperture zoom digital camera user interface
US9854156B1 (en) 2016-06-12 2017-12-26 Apple Inc. User interface for camera effects
DK179471B1 (en) 2016-09-23 2018-11-26 Apple Inc. IMAGE DATA FOR ENHANCED USER INTERACTIONS
US10630895B2 (en) 2017-09-11 2020-04-21 Qualcomm Incorporated Assist for orienting a camera at different zoom levels

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110050963A1 (en) * 2008-05-19 2011-03-03 Panasonic Corporation Image capturing apparatus and image encoding apparatus
US20120268641A1 (en) * 2011-04-21 2012-10-25 Yasuhiro Kazama Image apparatus
CN105245771A (zh) * 2014-07-01 2016-01-13 苹果公司 移动相机系统
US20160381289A1 (en) * 2015-06-23 2016-12-29 Samsung Electronics Co., Ltd. Digital photographing apparatus and method of operating the same
CN106375637A (zh) * 2015-07-21 2017-02-01 Lg电子株式会社 移动终端及其控制方法
CN106713772A (zh) * 2017-03-31 2017-05-24 维沃移动通信有限公司 一种拍照方法及移动终端

Also Published As

Publication number Publication date
WO2019051376A2 (en) 2019-03-14
US20190082101A1 (en) 2019-03-14
AU2018330318A1 (en) 2020-02-27
US20220321776A1 (en) 2022-10-06
US20200244874A1 (en) 2020-07-30
US10630895B2 (en) 2020-04-21
TWI803517B (zh) 2023-06-01
EP3682627A2 (en) 2020-07-22
TW201921909A (zh) 2019-06-01
KR20200087746A (ko) 2020-07-21
WO2019051376A3 (en) 2019-04-25
BR112020004680A2 (pt) 2020-09-15
SG11202000954XA (en) 2020-03-30
CN111066315A (zh) 2020-04-24
CN111066315B (zh) 2021-07-06
US20230362482A1 (en) 2023-11-09
US11750918B2 (en) 2023-09-05
CN113329160B (zh) 2023-08-18
US11394876B2 (en) 2022-07-19
TW202333486A (zh) 2023-08-16

Similar Documents

Publication Publication Date Title
CN111066315B (zh) 一种被配置为处理和显示图像数据的装置、方法及可读媒体
US8531557B2 (en) Method, apparatus and system for performing a zoom operation
KR102618495B1 (ko) 영상 처리 장치 및 방법
JP6198958B2 (ja) 写真を取得するための方法、装置、コンピュータプログラム、及び、コンピュータ可読記憶媒体
RU2649773C2 (ru) Управление камерой посредством функции распознавания лица
KR101918760B1 (ko) 촬상 장치 및 제어 방법
US9813607B2 (en) Method and apparatus for image capture targeting
JP4852652B2 (ja) 電子ズーム装置、電子ズーム方法、及びプログラム
EP3291549B1 (en) Display control apparatus, display control method, and program
WO2018058934A1 (zh) 拍摄方法、拍摄装置和存储介质
JP6892524B2 (ja) 対象追跡に基づくスローモーションビデオキャプチャ
US9906710B2 (en) Camera pan-tilt-zoom (PTZ) control apparatus
CN112740651B (zh) 用于操作包括显示器的系统的方法、设备、装置及计算机可读介质
CN115280756A (zh) 数码相机的缩放设置调整
KR101645427B1 (ko) 유저 인터페이스를 통한 카메라 장치의 동작 방법
JP2019022026A (ja) 撮像装置
TWI843532B (zh) 用於以不同縮放位準定向一相機之輔助
US20140002708A1 (en) Display control apparatus and camera system
JP2011211757A (ja) 電子ズーム装置、電子ズーム方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant