CN115552886A - 用于更改视觉媒体的用户界面 - Google Patents

用于更改视觉媒体的用户界面 Download PDF

Info

Publication number
CN115552886A
CN115552886A CN202280002476.1A CN202280002476A CN115552886A CN 115552886 A CN115552886 A CN 115552886A CN 202280002476 A CN202280002476 A CN 202280002476A CN 115552886 A CN115552886 A CN 115552886A
Authority
CN
China
Prior art keywords
video
individual
cameras
user interface
representation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280002476.1A
Other languages
English (en)
Inventor
B·J·曼扎里
J·A·布拉斯克特
G·R·克拉克
S·达斯古普塔
W·J·伊格尔斯顿
M·B·艾蒂安
T·詹森
W·卢弗布鲁
J·A·玛丽亚
S·穆萨维
A·尼美斯
J·J·帕利斯高
P·T·施耐德
J·B·沙加姆
W·A·索伦帝诺三世
A·苏扎多斯桑托斯
P·J·斯坦奇克
H·W·维尔霍伊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US17/483,684 external-priority patent/US11539876B2/en
Application filed by Apple Inc filed Critical Apple Inc
Priority to CN202211073034.4A priority Critical patent/CN115474003A/zh
Priority to CN202211072261.5A priority patent/CN115529415A/zh
Priority to CN202211072958.2A priority patent/CN115474002A/zh
Publication of CN115552886A publication Critical patent/CN115552886A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/958Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging
    • H04N23/959Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging by adjusting depth of field during image capture, e.g. maximising or setting range based on scene characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay

Abstract

本公开总体上涉及用于更改视觉媒体的用户界面。在一些实施方案中,用户界面捕获视觉媒体(例如,经由合成景深效果)、回放视觉媒体(例如,经由合成景深效果)、编辑视觉媒体(例如,具有所应用的合成景深效果)和/或管理媒体捕获。

Description

用于更改视觉媒体的用户界面
相关申请的交叉引用
本申请要求于2021年9月24日提交的名称为“USER INTERFACES FOR ALTERINGVISUAL MEDIA”的美国临时专利申请序列号17/484,321、于2021年9月24日提交的名称为“USER INTERFACES FOR ALTERING VISUAL MEDIA”的美国临时专利申请序列号17/484,307、于2021年9月24日提交的名称为“USER INTERFACES FOR ALTERING VISUAL MEDIA”的美国临时专利申请序列号17/484,279、于2021年9月23日提交的名称为“USER INTERFACESFOR ALTERING VISUAL MEDIA”的美国临时专利申请序列号17/483,684、于2021年9月14日提交的名称为“USER INTERFACES FOR ALTERING VISUAL MEDIA”的美国临时专利申请序列号63/244,213、于2021年9月13日提交的名称为“USER INTERFACES FOR ALTERING VISUALMEDIA”的美国临时专利申请序列号63/243,724、于2021年6月6日提交的名称为“USERINTERFACES FOR ALTERING VISUAL MEDIA”的美国临时专利申请序列号63/197,460,以及于2021年4月30日提交的名称为“USER INTERFACES FOR ALTERING VISUAL MEDIA”的美国临时专利申请序列号63/182,751的优先权。这些专利申请中的每个专利申请的内容据此全文以引用方式并入。
技术领域
本公开整体涉及计算机用户界面和相关技术,更具体地涉及用于更改视觉媒体的用户界面和技术。
背景技术
智能手机和其他个人电子设备的用户频繁地捕获、存储和编辑用于保存记忆并与朋友共享的媒体。一些现有技术允许用户捕获媒体,诸如图像、音频和/或视频。用户可通过例如捕获、存储和编辑媒体来管理此类媒体。
发明内容
然而,用于使用计算机系统和其他电子设备来更改视觉信息的一些技术通常很麻烦且效率低下。例如,一些现有技术使用复杂且耗时的用户界面,该用户界面可包括多次按键或击键。现有技术需要比所需更多的时间,这导致浪费用户的时间和设备能量。这后一考虑在电池驱动的设备中是特别重要的。
因此,本技术为电子设备提供了用于更改视觉内容的更快、更有效的方法和界面,包括将合成景深效果应用于视觉内容以强调媒体的部分。此类方法和界面任选地补充或替换用于更改视觉内容的其他方法。此类方法和界面减少对用户所造成的认知负担,并且产生更有效的人机界面。对于电池驱动的计算设备,此类方法和界面节省功率,并且增大电池充电之间的时间间隔。
根据一些实施方案,描述了一种在与一个或多个相机和一个或多个输入设备通信的计算机系统处执行的方法。该方法包括:经由该一个或多个输入设备检测捕获表示该一个或多个相机的视场的视频的请求;响应于检测到捕获视频的该请求:在第一捕获持续时间内捕获该视频,其中该视频包括在第一捕获持续时间内捕获的多个帧,其中该多个帧表示该一个或多个相机的视场内的第一个体和该一个或多个相机的视场内的第二个体,并且其中,在该多个帧中,第一个体在第一捕获持续时间内相对于该一个或多个相机的视场移动;向该视频的该多个帧应用合成景深效果,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于该视频的该多个帧中的第二个体强调该视频的该多个帧中的第一个体,其中该合成景深效果随着第一个体在该一个或多个相机的视场内移动而随时间改变。
根据一些实施方案,描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由与一个或多个相机和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由该一个或多个输入设备检测捕获表示该一个或多个相机的视场的视频的请求;响应于检测到捕获视频的该请求:在第一捕获持续时间内捕获该视频,其中该视频包括在第一捕获持续时间内捕获的多个帧,其中该多个帧表示该一个或多个相机的视场内的第一个体和该一个或多个相机的视场内的第二个体,并且其中,在该多个帧中,第一个体在第一捕获持续时间内相对于该一个或多个相机的视场移动;向该视频的该多个帧应用合成景深效果,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于该视频的该多个帧中的第二个体强调该视频的该多个帧中的第一个体,其中该合成景深效果随着第一个体在该一个或多个相机的视场内移动而随时间改变。
根据一些实施方案,描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储一个或多个程序,该一个或多个程序被配置为由与一个或多个相机和一个或多个输入设备通信的一个或多个处理器执行,该一个或多个程序包括用于以下操作的指令:经由该一个或多个输入设备检测捕获表示该一个或多个相机的视场的视频的请求;响应于检测到捕获视频的该请求:在第一捕获持续时间内捕获该视频,其中该视频包括在第一捕获持续时间内捕获的多个帧,其中该多个帧表示该一个或多个相机的视场内的第一个体和该一个或多个相机的视场内的第二个体,并且其中,在该多个帧中,第一个体在第一捕获持续时间内相对于该一个或多个相机的视场移动;向该视频的该多个帧应用合成景深效果,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于该视频的该多个帧中的第二个体强调该视频的该多个帧中的第一个体,其中该合成景深效果随着第一个体在该一个或多个相机的视场内移动而随时间改变。
根据一些实施方案,描述了一种计算机系统。该计算机系统被配置为与一个或多个相机和一个或多个输入设备通信。该计算机系统包括:一个或多个处理器;和存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由该一个或多个输入设备检测捕获表示该一个或多个相机的视场的视频的请求;响应于检测到捕获视频的该请求:在第一捕获持续时间内捕获该视频,其中该视频包括在第一捕获持续时间内捕获的多个帧,其中该多个帧表示该一个或多个相机的视场内的第一个体和该一个或多个相机的视场内的第二个体,并且其中,在该多个帧中,第一个体在第一捕获持续时间内相对于该一个或多个相机的视场移动;向该视频的该多个帧应用合成景深效果,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于该视频的该多个帧中的第二个体强调该视频的该多个帧中的第一个体,其中该合成景深效果随着第一个体在该一个或多个相机的视场内移动而随时间改变。
根据一些实施方案,描述了一种计算机系统。该计算机系统被配置为与一个或多个相机和一个或多个输入设备通信。该计算机系统包括:用于经由该一个或多个输入设备检测捕获表示该一个或多个相机的视场的视频的请求的装置;响应于检测到捕获视频的该请求而用于以下操作的装置:在第一捕获持续时间内捕获该视频,其中该视频包括在第一捕获持续时间内捕获的多个帧,其中该多个帧表示该一个或多个相机的视场内的第一个体和该一个或多个相机的视场内的第二个体,并且其中,在该多个帧中,第一个体在第一捕获持续时间内相对于该一个或多个相机的视场移动;和用于向该视频的该多个帧应用合成景深效果的装置,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于该视频的该多个帧中的第二个体强调该视频的该多个帧中的第一个体,其中该合成景深效果随着第一个体在该一个或多个相机的视场内移动而随时间改变。
根据一些实施方案,描述了一种计算机程序产品。该计算机程序产品包括:被配置为由与一个或多个相机和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由该一个或多个输入设备检测捕获表示该一个或多个相机的视场的视频的请求;响应于检测到捕获视频的该请求:在第一捕获持续时间内捕获该视频,其中该视频包括在第一捕获持续时间内捕获的多个帧,其中该多个帧表示该一个或多个相机的视场内的第一个体和该一个或多个相机的视场内的第二个体,并且其中,在该多个帧中,第一个体在第一捕获持续时间内相对于该一个或多个相机的视场移动;向该视频的该多个帧应用合成景深效果,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于该视频的该多个帧中的第二个体强调该视频的该多个帧中的第一个体,其中该合成景深效果随着第一个体在该一个或多个相机的视场内移动而随时间改变。
根据一些实施方案,描述了一种在与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统处执行的方法。该方法包括:经由显示生成部件显示用户界面,该用户界面包括:视频的表示,该视频包括多个帧,该表示包括第一个体和第二个体;和第一用户界面对象,该第一用户界面对象指示第一个体正在被合成景深效果强调,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体;在显示包括该视频的表示和第一用户界面对象的用户界面时,经由该一个或多个输入设备检测与对该视频的表示中第二个体的选择相对应的手势;以及响应于检测到与对该视频的表示中第二个体的选择相对应的手势:改变合成景深效果以更改由该一个或多个相机捕获的视觉信息,以相对于第一个体强调该多个帧中的第二个体,并且显示第二用户界面对象,该第二用户界面对象指示第二个体正在被改变的合成景深效果强调,该改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体。
根据一些实施方案,描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由与一个或多个相机、显示生成部件以及一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示用户界面,该用户界面包括:视频的表示,该视频包括多个帧,该表示包括第一个体和第二个体;和第一用户界面对象,该第一用户界面对象指示第一个体正在被合成景深效果强调,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体;在显示包括该视频的表示和第一用户界面对象的用户界面时,经由该一个或多个输入设备检测与对该视频的表示中第二个体的选择相对应的手势;以及响应于检测到与对该视频的表示中第二个体的选择相对应的手势:改变合成景深效果以更改由该一个或多个相机捕获的视觉信息,以相对于第一个体强调该多个帧中的第二个体,并且显示第二用户界面对象,该第二用户界面对象指示第二个体正在被改变的合成景深效果强调,该改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体。
根据一些实施方案,描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由与一个或多个相机、显示生成部件以及一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示用户界面,该用户界面包括:视频的表示,该视频包括多个帧,该表示包括第一个体和第二个体;和第一用户界面对象,该第一用户界面对象指示第一个体正在被合成景深效果强调,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体;在显示包括该视频的表示和第一用户界面对象的用户界面时,经由该一个或多个输入设备检测与对该视频的表示中第二个体的选择相对应的手势;以及响应于检测到与对该视频的表示中第二个体的选择相对应的手势:改变合成景深效果以更改由该一个或多个相机捕获的视觉信息,以相对于第一个体强调该多个帧中的第二个体,并且显示第二用户界面对象,该第二用户界面对象指示第二个体正在被改变的合成景深效果强调,该改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体。
根据一些实施方案,描述了一种计算机系统。该计算机系统被配置为与一个或多个相机、显示生成部件;以及一个或多个输入设备通信。该计算机系统包括:一个或多个处理器;和存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示用户界面,该用户界面包括:视频的表示,该视频包括多个帧,该表示包括第一个体和第二个体;和第一用户界面对象,该第一用户界面对象指示第一个体正在被合成景深效果强调,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体;在显示包括该视频的表示和第一用户界面对象的用户界面时,经由该一个或多个输入设备检测与对该视频的表示中第二个体的选择相对应的手势;以及响应于检测到与对该视频的表示中第二个体的选择相对应的手势:改变合成景深效果以更改由该一个或多个相机捕获的视觉信息,以相对于第一个体强调该多个帧中的第二个体,并且显示第二用户界面对象,该第二用户界面对象指示第二个体正在被改变的合成景深效果强调,该改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体。
根据一些实施方案,描述了一种计算机系统。该计算机系统被配置为与一个或多个相机、显示生成部件;以及一个或多个输入设备通信。该计算机系统包括:用于以下操作的装置:经由显示生成部件显示用户界面,该用户界面包括:视频的表示,该视频包括多个帧,该表示包括第一个体和第二个体;和第一用户界面对象,该第一用户界面对象指示第一个体正在被合成景深效果强调,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体;在显示包括该视频的表示和第一用户界面对象的用户界面时,经由该一个或多个输入设备检测与对该视频的表示中第二个体的选择相对应的手势;以及响应于检测到与对该视频的表示中第二个体的选择相对应的手势而用于以下操作的装置:改变合成景深效果以更改由该一个或多个相机捕获的视觉信息,以相对于第一个体强调该多个帧中的第二个体;以及显示第二用户界面对象,该第二用户界面对象指示第二个体正在被改变的合成景深效果强调,该改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体。
根据一些实施方案,描述了一种计算机程序产品。该计算机程序产品包括:一个或多个相机;显示生成部件;一个或多个输入设备;一个或多个处理器;和存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示用户界面,该用户界面包括:视频的表示,该视频包括多个帧,该表示包括第一个体和第二个体;和第一用户界面对象,该第一用户界面对象指示第一个体正在被合成景深效果强调,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体;在显示包括该视频的表示和第一用户界面对象的用户界面时,经由该一个或多个输入设备检测与对该视频的表示中第二个体的选择相对应的手势;以及响应于检测到与对该视频的表示中第二个体的选择相对应的手势:改变合成景深效果以更改由该一个或多个相机捕获的视觉信息,以相对于第一个体强调该多个帧中的第二个体,并且显示第二用户界面对象,该第二用户界面对象指示第二个体正在被改变的合成景深效果强调,该改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体。
根据一些实施方案,描述了一种在与显示生成部件通信的计算机系统处执行的方法。该方法包括:经由显示生成部件显示用户界面,包括同时显示:具有第一持续时间的视频的表示,其中该视频包括该视频中个体强调的多个改变,其中该视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于该视频中的一个或多个元素强调一个个体,其中该多个改变包括在第一持续时间期间的第一时间的个体强调的自动改变,以及在第一持续时间期间不同于第一时间的第二时间的个体强调的用户指定的改变;以及用于在视频中导航的视频导航用户界面元素,该视频包括第一时间的表示和第二时间的表示,其中:第二时间的表示在视觉上与该视频的第一持续时间中不对应于个体强调的改变的其他时间区分开来;并且第一时间的表示在视觉上与第二时间的表示区分开来。
根据一些实施方案,描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示用户界面,包括同时显示:具有第一持续时间的视频的表示,其中该视频包括该视频中个体强调的多个改变,其中该视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于该视频中的一个或多个元素强调一个个体,其中该多个改变包括在第一持续时间期间的第一时间的个体强调的自动改变,以及在第一持续时间期间不同于第一时间的第二时间的个体强调的用户指定的改变;以及用于在视频中导航的视频导航用户界面元素,该视频包括第一时间的表示和第二时间的表示,其中:第二时间的表示在视觉上与该视频的第一持续时间中不对应于个体强调的改变的其他时间区分开来;并且第一时间的表示在视觉上与第二时间的表示区分开来。
根据一些实施方案,描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示用户界面,包括同时显示:具有第一持续时间的视频的表示,其中该视频包括该视频中个体强调的多个改变,其中该视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于该视频中的一个或多个元素强调一个个体,其中该多个改变包括在第一持续时间期间的第一时间的个体强调的自动改变,以及在第一持续时间期间不同于第一时间的第二时间的个体强调的用户指定的改变;以及用于在视频中导航的视频导航用户界面元素,该视频包括第一时间的表示和第二时间的表示,其中:第二时间的表示在视觉上与该视频的第一持续时间中不对应于个体强调的改变的其他时间区分开来;并且第一时间的表示在视觉上与第二时间的表示区分开来。
根据一些实施方案,描述了一种计算机系统。该计算机系统被配置为与一个或多个相机、显示生成部件通信。该计算机系统包括:一个或多个处理器;和存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示用户界面,包括同时显示:具有第一持续时间的视频的表示,其中该视频包括该视频中个体强调的多个改变,其中该视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于该视频中的一个或多个元素强调一个个体,其中该多个改变包括在第一持续时间期间的第一时间的个体强调的自动改变,以及在第一持续时间期间不同于第一时间的第二时间的个体强调的用户指定的改变;以及用于在视频中导航的视频导航用户界面元素,该视频包括第一时间的表示和第二时间的表示,其中:第二时间的表示在视觉上与该视频的第一持续时间中不对应于个体强调的改变的其他时间区分开来;并且第一时间的表示在视觉上与第二时间的表示区分开来。
根据一些实施方案,描述了一种计算机系统。该计算机系统被配置为与一个或多个相机、显示生成部件通信。该计算机系统包括:用于经由显示生成部件显示用户界面的装置,包括同时显示:具有第一持续时间的视频的表示,其中该视频包括该视频中个体强调的多个改变,其中该视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于该视频中的一个或多个元素强调一个个体,其中该多个改变包括在第一持续时间期间的第一时间的个体强调的自动改变,以及在第一持续时间期间不同于第一时间的第二时间的个体强调的用户指定的改变;以及用于在视频中导航的视频导航用户界面元素,该视频包括第一时间的表示和第二时间的表示,其中:第二时间的表示在视觉上与该视频的第一持续时间中不对应于个体强调的改变的其他时间区分开来;并且第一时间的表示在视觉上与第二时间的表示区分开来。
根据一些实施方案,描述了一种计算机程序产品。该计算机程序产品包括:显示生成部件;一个或多个处理器;存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示用户界面,包括同时显示:具有第一持续时间的视频的表示,其中该视频包括该视频中个体强调的多个改变,其中该视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于该视频中的一个或多个元素强调一个个体,其中该多个改变包括在第一持续时间期间的第一时间的个体强调的自动改变,以及在第一持续时间期间不同于第一时间的第二时间的个体强调的用户指定的改变;以及用于在视频中导航的视频导航用户界面元素,该视频包括第一时间的表示和第二时间的表示,其中:第二时间的表示在视觉上与该视频的第一持续时间中不对应于个体强调的改变的其他时间区分开来;并且第一时间的表示在视觉上与第二时间的表示区分开来。
根据一些实施方案,描述了一种在与显示生成部件和多个相机通信的计算机系统处执行的方法,该多个相机包括第一相机和第二相机,第一相机具有由第一相机的硬件确定的第一图像捕获参数,第二相机具有由第二相机的硬件确定的第二图像捕获参数,其中第二图像捕获参数不同于第一图像捕获参数。该方法包括:经由显示生成部件显示包括该多个相机中的一个或多个相机的视场的表示的相机用户界面,其中使用由具有第一图像捕获参数的第一相机收集的视觉信息来显示该视场的该表示;在使用由第一相机收集的视觉信息来显示该视场的该表示时,检测对应于该多个相机中的至少一个相机的相机位置与对应于焦点的焦点位置之间的距离减小;并且响应于检测到相机位置与焦点位置之间的该距离减小:根据确定相机位置与焦点位置之间该减小的距离比预先确定的阈值距离更近,从使用由第一相机收集的视觉信息来显示该视场的表示过渡到使用由第二相机收集的视觉信息来显示该视场的该表示。
根据一些实施方案,描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由与显示生成部件和多个相机通信的计算机系统的一个或多个处理器执行的一个或多个程序,该多个相机包括第一相机和第二相机,第一相机具有由第一相机的硬件确定的第一图像捕获参数,第二相机具有由第二相机的硬件确定的第二图像捕获参数,其中第二图像捕获参数不同于第一图像捕获参数,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示包括该多个相机中的一个或多个相机的视场的表示的相机用户界面,其中使用由具有第一图像捕获参数的第一相机收集的视觉信息来显示该视场的该表示;在使用由第一相机收集的视觉信息来显示该视场的该表示时,检测对应于该多个相机中的至少一个相机的相机位置与对应于焦点的焦点位置之间的距离减小;并且响应于检测到相机位置与焦点位置之间的该距离减小:根据确定相机位置与焦点位置之间该减小的距离比预先确定的阈值距离更近,从使用由第一相机收集的视觉信息来显示该视场的表示过渡到使用由第二相机收集的视觉信息来显示该视场的该表示。
根据一些实施方案,描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由与显示生成部件和多个相机通信的计算机系统的一个或多个处理器执行的一个或多个程序,该多个相机包括第一相机和第二相机,第一相机具有由第一相机的硬件确定的第一图像捕获参数,第二相机具有由第二相机的硬件确定的第二图像捕获参数,其中第二图像捕获参数不同于第一图像捕获参数,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示包括该多个相机中的一个或多个相机的视场的表示的相机用户界面,其中使用由具有第一图像捕获参数的第一相机收集的视觉信息来显示该视场的该表示;在使用由第一相机收集的视觉信息来显示该视场的该表示时,检测对应于该多个相机中的至少一个相机的相机位置与对应于焦点的焦点位置之间的距离减小;并且响应于检测到相机位置与焦点位置之间的该距离减小:根据确定相机位置与焦点位置之间该减小的距离比预先确定的阈值距离更近,从使用由第一相机收集的视觉信息来显示该视场的表示过渡到使用由第二相机收集的视觉信息来显示该视场的该表示。
根据一些实施方案,描述了一种计算机系统。该计算机系统被配置为与显示生成部件和多个相机通信,该多个相机包括第一相机和第二相机,第一相机具有由第一相机的硬件确定的第一图像捕获参数,第二相机具有由第二相机的硬件确定的第二图像捕获参数,其中第二图像捕获参数不同于第一图像捕获参数。该计算机系统包括:一个或多个处理器;和存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示包括该多个相机中的一个或多个相机的视场的表示的相机用户界面,其中使用由具有第一图像捕获参数的第一相机收集的视觉信息来显示该视场的该表示;在使用由第一相机收集的视觉信息来显示该视场的该表示时,检测对应于该多个相机中的至少一个相机的相机位置与对应于焦点的焦点位置之间的距离减小;并且响应于检测到相机位置与焦点位置之间的该距离减小:根据确定相机位置与焦点位置之间该减小的距离比预先确定的阈值距离更近,从使用由第一相机收集的视觉信息来显示该视场的表示过渡到使用由第二相机收集的视觉信息来显示该视场的该表示。
根据一些实施方案,描述了一种计算机系统。描述了该计算机系统,该计算机系统被配置为与显示生成部件和多个相机通信,该多个相机包括第一相机和第二相机,第一相机具有由第一相机的硬件确定的第一图像捕获参数,第二相机具有由第二相机的硬件确定的第二图像捕获参数,其中第二图像捕获参数不同于第一图像捕获参数。该计算机系统包括:用于经由显示生成部件显示相机用户界面的装置,该相机用户界面包括该多个相机中的一个或多个相机的视场的表示,其中使用由具有第一图像捕获参数的第一相机收集的视觉信息来显示该视场的该表示;在使用由第一相机收集的视觉信息来显示该视场的该表示时,用于检测对应于该多个相机中的至少一个相机的相机位置与对应于焦点的焦点位置之间的距离减小的装置;以及响应于检测到相机位置与焦点位置之间的该距离减小而用于以下操作的装置:根据确定相机位置与焦点位置之间该减小的距离比预先确定的阈值距离更近,从使用由第一相机收集的视觉信息来显示该视场的表示过渡到使用由第二相机收集的视觉信息来显示该视场的该表示。
根据一些实施方案,描述了一种计算机程序产品。该计算机程序产品包括被配置为由与显示生成部件和多个相机通信的计算机系统的一个或多个处理器执行的一个或多个程序,该多个相机包括第一相机和第二相机,第一相机具有由第一相机的硬件确定的第一图像捕获参数,第二相机具有由第二相机的硬件确定的第二图像捕获参数,其中第二图像捕获参数不同于第一图像捕获参数。该一个或多个程序包括用于以下操作的指令:经由显示生成部件显示包括该多个相机中的一个或多个相机的视场的表示的相机用户界面,其中使用由具有第一图像捕获参数的第一相机收集的视觉信息来显示该视场的该表示;在使用由第一相机收集的视觉信息来显示该视场的该表示时,检测对应于该多个相机中的至少一个相机的相机位置与对应于焦点的焦点位置之间的距离减小;并且响应于检测到相机位置与焦点位置之间的该距离减小:根据确定相机位置与焦点位置之间该减小的距离比预先确定的阈值距离更近,从使用由第一相机收集的视觉信息来显示该视场的表示过渡到使用由第二相机收集的视觉信息来显示该视场的该表示。
根据一些实施方案,描述了一种在与显示生成部件通信的计算机系统处执行的方法。该方法包括:经由显示生成部件播放视频的包括在第一时间发生的第一个体强调改变的部分,其中该第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在视频中的第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;在播放视频的包括在第一时间发生的第一个体强调改变的部分之后,检测改变在该视频中不同于第一时间的第二时间的个体强调的请求;并且响应于检测到改变在该视频中的第二时间的个体强调的请求:改变在该视频中第二时间之后的第二时间段期间的该个体强调;以及改变在第一时间发生的第一个体强调改变,该第一个体强调改变包括改变在该视频中的第一时间之后的第一时间段期间的相应个体相对于该一个或多个元素的强调。
根据一些实施方案,描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由与显示生成部件和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件播放视频的包括在第一时间发生的第一个体强调改变的部分,其中该第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在视频中的第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;在播放视频的包括在第一时间发生的第一个体强调改变的部分之后,检测改变在该视频中不同于第一时间的第二时间的个体强调的请求;并且响应于检测到改变在该视频中的第二时间的个体强调的请求:改变在该视频中第二时间之后的第二时间段期间的该个体强调;以及改变在第一时间发生的第一个体强调改变,该第一个体强调改变包括改变在该视频中的第一时间之后的第一时间段期间的相应个体相对于该一个或多个元素的强调。
根据一些实施方案,描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由与显示生成部件和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件播放视频的包括在第一时间发生的第一个体强调改变的部分,其中该第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在视频中的第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;在播放视频的包括在第一时间发生的第一个体强调改变的部分之后,检测改变在该视频中不同于第一时间的第二时间的个体强调的请求;并且响应于检测到改变在该视频中的第二时间的个体强调的请求:改变在该视频中第二时间之后的第二时间段期间的该个体强调;以及改变在第一时间发生的第一个体强调改变,该第一个体强调改变包括改变在该视频中的第一时间之后的第一时间段期间的相应个体相对于该一个或多个元素的强调。
根据一些实施方案,描述了一种被配置为与显示生成部件通信的计算机系统。该计算机系统包括:一个或多个处理器;和存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:经由显示生成部件播放视频的包括在第一时间发生的第一个体强调改变的部分,其中该第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在视频中的第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;在播放视频的包括在第一时间发生的第一个体强调改变的部分之后,检测改变在该视频中不同于第一时间的第二时间的个体强调的请求;并且响应于检测到改变在该视频中的第二时间的个体强调的请求:改变在该视频中第二时间之后的第二时间段期间的该个体强调;以及改变在第一时间发生的第一个体强调改变,该第一个体强调改变包括改变在该视频中的第一时间之后的第一时间段期间的相应个体相对于该一个或多个元素的强调。
根据一些实施方案,描述了一种被配置为与显示生成部件和一个或多个输入设备通信的计算机系统。该计算机系统包括:用于经由显示生成部件播放视频的一部分的装置,该部分包括在第一时间发生的第一个体强调改变,其中该第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在视频中的第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;在播放视频的包括在第一时间发生的第一个体强调改变的部分之后,用于检测改变在该视频中不同于第一时间的第二时间的个体强调的请求的装置;和响应于检测到改变在该视频中的第二时间的个体强调的请求而用于以下操作的装置:改变在视频中第二时间之后的第二时间段期间的该个体强调;以及改变在第一时间发生的第一个体强调改变,该第一个体强调改变包括改变在该视频中的第一时间之后的第一时间段期间的相应个体相对于该一个或多个元素的强调。
根据一些实施方案,描述了一种计算机程序产品。该计算机程序产品包括被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序。该一个或多个程序包括用于以下操作的指令:经由显示生成部件播放视频的包括在第一时间发生的第一个体强调改变的部分,其中该第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在视频中的第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;在播放视频的包括在第一时间发生的第一个体强调改变的部分之后,检测改变在该视频中不同于第一时间的第二时间的个体强调的请求;并且响应于检测到改变在该视频中的第二时间的个体强调的请求:改变在该视频中第二时间之后的第二时间段期间的该个体强调;以及改变在第一时间发生的第一个体强调改变,该第一个体强调改变包括改变在该视频中的第一时间之后的第一时间段期间的相应个体相对于该一个或多个元素的强调。
用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的暂态计算机可读存储介质或其他计算机程序产品中。
因此,为设备提供了用于更改视觉内容的更快、更高效的方法和界面,从而提高了此类设备的有效性、效率和用户满意度。此类方法和界面可以补充或替换用于更改视觉内容的其他方法。
附图说明
为了更好地理解各种所述实施方案,应结合以下附图参考下面的具体实施方式,其中类似的附图标号在所有附图中指示对应的部分。
图1A是示出了根据一些实施方案的具有触敏显示器的便携式多功能设备的框图。
图1B是示出了根据一些实施方案的用于事件处理的示例性部件的框图。
图2示出了根据一些实施方案的具有触摸屏的便携式多功能设备。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施方案的针对便携式多功能设备上应用程序的菜单的示例性用户界面。
图4B示出了根据一些实施方案的针对具有与显示器分开的触敏表面的多功能设备的示例性用户界面。
图5A示出了根据一些实施方案的个人电子设备。
图5B是示出了根据一些实施方案的个人电子设备的框图。
图6A至图6BJ示出了根据一些实施方案的用于使用计算机系统更改视觉媒体的示例性用户界面。
图7是示出根据一些实施方案的用于使用计算机系统更改视觉媒体的示例性方法的流程图。
图8是示出根据一些实施方案的用于使用计算机系统更改视觉媒体的示例性方法的流程图。
图9是示出根据一些实施方案的用于使用计算机系统更改视觉媒体的示例性方法的流程图。
图10A至图10I示出了根据一些实施方案的用于使用计算机系统管理媒体捕获的示例性用户界面。
图11是示出根据一些实施方案的用于使用计算机系统管理媒体捕获的示例性方法的流程图。
图12是示出神经网络系统的框图。
图13是示出根据一些实施方案的用于使用计算机系统更改视觉媒体的示例性方法的流程图。
具体实施方式
以下描述阐述了示例性方法、参数等。然而,应当认识到,此类描述并非意在限制本公开的范围,而是作为对示例性实施方案的描述来提供。
需要提供更改视觉内容的有效方法和界面的电子设备。例如,需要允许用户通过向多个媒体帧应用合成景深效果来更改视觉内容而无需手动改变和/或使媒体帧模糊以模拟景深效果的电子设备。此类技术可以减轻期望更改媒体中的视觉内容的用户的认知负担,由此提高生产率。此外,此类技术还可以减少原本浪费在冗余用户输入上的处理器使用功率和电池功率。
下面图1A至图1B、图2、图3、图4A至图4B、图5A至图5B和图12提供了对用于执行用于管理和更改视觉媒体的技术的示例性设备和系统的描述。
图6A至图6BJ是根据一些实施方案的用于使用计算机系统更改视觉媒体的示例性用户界面。图7是示出根据一些实施方案的更改视觉媒体的方法的流程图。图8是示出根据一些实施方案的更改视觉媒体的方法的流程图。图9是示出根据一些实施方案的更改视觉媒体的方法的流程图。图13是示出根据一些实施方案的更改视觉媒体的方法的流程图。图6A至图6BJ中的用户界面用于示出包括图7、图8、图9和图13中的过程的下文描述的过程。
图10A至图10I示出了根据一些实施方案的用于使用计算机系统管理媒体捕获的示例性用户界面。图11是示出根据一些实施方案的用于使用计算机系统管理媒体捕获的示例性方法的流程图。图10A至图10I中的用户界面用于示出下文所述的包括图11中的过程的过程。
下文所述的过程通过各种技术增强了设备的可操作性并且使用户-设备界面更有效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误),包括通过向用户提供改进的视觉反馈、减少执行操作所需的输入数量、提供附加的控制选项而不会因附加的显示控件而使用户界面杂乱、在一组条件已经被满足时执行操作而无需进一步的用户输入和/或附加的技术。这些技术还通过使用户能够更快且更有效地使用设备而减少了电力使用并延长了设备的电池寿命。
此外,在本文所述的其中一个或多个步骤取决于已满足一个或多个条件的方法中,应当理解,所述方法可在多次重复中重复,使得在重复的过程中,在方法的不同重复中已满足决定方法中的步骤的所有条件。例如,如果方法需要执行第一步骤(如果满足条件),以及执行第二步骤(如果不满足条件),则普通技术人员将会知道,重复所声明的步骤,直到满足条件和不满足条件两者(不分先后)。因此,可将被描述为具有取决于已满足一个或多个条件的一个或多个步骤的方法重写为重复直到已满足该方法中所述的每个条件的方法。然而,这不需要系统或计算机可读介质声明该系统或计算机可读介质包含用于基于对应的一个或多个条件的满足来执行视情况而定的操作的指令,并且因此能够确定是否已满足可能的情况,而无需明确地重复方法的步骤直到已满足决定方法中的步骤的所有条件。本领域的普通技术人员还将理解,类似于具有视情况而定的步骤的方法,系统或计算机可读存储介质可根据需要多次重复方法的步骤,以确保已执行所有视情况而定的步骤。
尽管以下描述使用术语“第一”、“第二”等来描述各种元件,但这些元件不应受术语的限制。这些术语只是用于将一个元件与另一元件区分开。例如,第一触摸可被命名为第二触摸并且类似地第二触摸可被命名为第一触摸,而不脱离各种所述实施方案的范围。在一些实施方案中,第一触摸和第二触摸两者均为触摸,但是它们不是同一触摸。
在本文中对各种所述实施方案的描述中所使用的术语只是为了描述特定实施方案的目的,而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样,单数形式“一个”和“该”旨在也包括复数形式,除非上下文另外明确地指示。还将理解的是,本文中所使用的术语“和/或”是指并且涵盖相关联的所列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”和/或“包含”在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
根据上下文,术语“如果”任选地被解释为意指“当......时”、“在......时”或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为是指“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关过程的实施方案。在一些实施方案中,该设备为还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自AppleInc.(Cupertino,California)的
Figure BDA0003774213240000181
设备、iPod
Figure BDA0003774213240000182
设备、和
Figure BDA0003774213240000183
设备。任选地使用其他便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触控板)的膝上型电脑或平板电脑。还应当理解的是,在一些实施方案中,该设备并非便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触控板)的台式计算机。在一些实施方案中,电子设备是(例如,经由无线通信、经由有线通信)与显示生成部件进行通信的计算机系统。显示生成部件被配置为提供视觉输出,诸如经由CRT显示器的显示、经由LED显示器的显示或者经由图像投影的显示。在一些实施方案中,显示生成部件与该计算机系统集成。在一些实施方案中,显示生成部件与该计算机系统分开。如本文所用,“显示”内容包括通过经由有线或无线连接向集成或外部显示生成部件传输数据(例如,图像数据或视频数据)以在视觉上产生内容来显示内容(例如,由显示控制器156渲染或解码的视频数据)。
在下面的讨论中,描述了一种包括显示器和触敏表面的电子设备。然而,应当理解,该电子设备任选地包括一个或多个其他物理用户界面设备,诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用程序,诸如以下中的一者或多者:绘图应用程序、呈现应用程序、文字处理应用程序、网站创建应用程序、盘编辑应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、健身支持应用程序、照片管理应用程序、数字相机应用程序、数字视频摄像机应用程序、网页浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。
在设备上执行的各种应用程序任选地使用至少一个通用的物理用户界面设备,诸如触敏表面。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地对于不同应用程序被调整和/或变化,和/或在相应应用程序内被调整和/或变化。这样,设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在将注意力转到具有触敏显示器的便携式设备的实施方案。图1A是示出了根据一些实施方案的具有触敏显示器系统112的便携式多功能设备100的框图。触敏显示器112有时为了方便被叫做“触摸屏”,并且有时被称为或被叫做“触敏显示器系统”。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入控制设备116和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100(例如,触敏表面,诸如设备100的触敏显示器系统112)上的接触的强度的一个或多个接触强度传感器165。设备100任选地包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如,在触敏表面(诸如设备100的触敏显示器系统112或设备300的触控板355)上生成触觉输出)。这些部件任选地通过一个或多个通信总线或信号线103进行通信。
如在本说明书和权利要求书中所使用的,术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如,手指接触)的力或压力(每单位面积的力),或是指触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围,该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如,至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中,来自多个力传感器的力测量值被组合(例如,加权平均)以确定所估计的接触力。类似地,触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地,在触敏表面上检测到的接触区域的大小和/或其变化、接触附近的触敏表面的电容和/或其变化以及/或者接触附近的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中,接触力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如,强度阈值以对应于替代物测量的单位来描述)。在一些具体实施中,接触力或压力的替代物测量被转换成估计的力或压力,并且估计的力或压力用于确定是否已超过强度阈值(例如,强度阈值是以压力的单位进行测量的压力阈值)。使用接触的强度作为用户输入的属性,从而允许用户访问用户在实地面积有限的尺寸更小的设备上本来不可访问的附加设备功能,该尺寸更小的设备用于(例如,在触敏显示器上)显示示能表示和/或接收用户输入(例如,经由触敏显示器、触敏表面或物理控件/机械控件,诸如旋钮或按钮)。
如本说明书和权利要求书中所使用的,术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户手部的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解释为触感,该触感对应于设备或设备的部件的物理特征的所感知的变化。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如,即使在触敏表面的光滑度无变化时,触敏表面的移动也会任选地由用户解释或感测为触敏表面的“粗糙度”。虽然用户对触摸的此类解释将受到用户的个体化感官知觉的限制,但是对触摸的许多感官知觉是大多数用户共有的。因此,当触觉输出被描述为对应于用户的特定感官知觉(例如,“按下点击”、“松开点击”、“粗糙度”)时,除非另外陈述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移将会生成典型(或普通)用户的所述感官知觉。
应当理解,设备100仅仅是便携式多功能设备的一个示例,并且设备100任选地具有比所示出的部件更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件以硬件、软件、或硬件与软件两者的组合来实现,包括一个或多个信号处理和/或专用集成电路。
存储器102任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。存储器控制器122任选地控制设备100的其他部件访问存储器102。
外围设备接口118可用于将设备的输入外围设备和输出外围设备耦接到CPU 120和存储器102。一个或多个处理器120运行或执行存储器102中所存储的各种软件程序(诸如计算机程序(例如,包括指令))和/或指令集以执行设备100的各种功能并处理数据。在一些实施方案中,外围设备接口118、CPU 120和存储器控制器122任选地被实现在单个芯片诸如芯片104上。在一些其他实施方案中,它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被称作电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信来与网络和其他设备进行通信,这些网络为诸如互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如,蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。RF电路108任选地包括用于诸如通过近程通信无线电部件来检测近场通信(NFC)场的熟知的电路。无线通信任选地使用多种通信标准、协议和技术中的任一者,包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、蓝牙低功耗(BTLE)、无线保真(Wi-Fi)(例如,IEEE 802.11a、IEEE 802.11b、IEEE 802.11g、IEEE 802.11n和/或IEEE802.11ac)、互联网协议语音(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS))、和/或短消息服务(SMS),或者包括在本文档提交日期时还未开发出的通信协议的任何其他适当的通信协议。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人类可听到的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据,并且将音频数据传输到外围设备接口118以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中,音频电路110还包括耳麦插孔(例如,图2中的212)。耳麦插孔提供音频电路110与可移除音频输入/输出外围设备之间的接口,该外围设备为诸如仅输出的耳机或者具有输出(例如,单耳耳机或双耳耳机)和输入(例如,麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触摸屏112和其他输入控制设备116耦接到外围设备接口118。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、深度相机控制器169、强度传感器控制器159、触觉反馈控制器161,以及用于其他输入或控制设备的一个或多个输入控制器160。该一个或多个输入控制器160从其他输入控制设备116接收电信号/将电信号发送到该其他输入控制设备。该其他输入控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击式转盘等。在一些实施方案中,输入控制器160任选地耦接到以下各项中的任一者(或不耦接到以下各项中的任一者):键盘、红外线端口、USB端口,以及指向设备诸如鼠标。一个或多个按钮(例如,图2中的208)任选地包括用于扬声器111和/或麦克风113音量控制的增大/减小按钮。该一个或多个按钮任选地包括下压按钮(例如,图2中的206)。在一些实施方案中,电子设备是(例如,经由无线通信、经由有线通信)与一个或多个输入设备进行通信的计算机系统。在一些实施方案中,该一个或多个输入设备包括触敏表面(例如,触控板,作为触敏显示器的一部分)。在一些实施方案中,该一个或多个输入设备包括一个或多个相机传感器(例如,一个或多个光学传感器164和/或一个或多个深度相机传感器175),诸如用于跟踪用户的手势(例如,手部手势和/或空中手势)作为输入。在一些实施方案中,一个或多个输入设备与该计算机系统集成。在一些实施方案中,一个或多个输入设备与该计算机系统分开。在一些实施方案中,空中手势是在用户没有触摸作为设备的一部分(或独立于作为设备的一部分的输入元件)的输入元件的情况下并基于通过空气检测到的用户身体的一部分的运动的手势,该运动包括:用户身体相对于绝对参考的运动(例如,用户的手臂相对于地面的角度或用户的手相对于地面的距离),相对于用户身体的另一部分的运动(例如,用户的手相对于用户的肩膀的运动、用户的一只手相对于用户的另一只手的运动、和/或用户的手指相对于用户的手的另一根手指或一部分的运动),和/或用户身体的一部分的绝对运动(例如,包括手在预定姿势中以预定量和/或速度运动的轻敲手势,或包括用户身体的一部分的旋转的预定速度或数量的摇晃手势)。
快速按下下压按钮任选地脱离触摸屏112的锁定或者任选地开始使用触摸屏上的手势来对设备进行解锁的过程,如在2005年12月23日提交的名称为“Unlocking a Deviceby Performing Gestures on an Unlock Image”的美国专利申请11/322,549(即,美国专利No.7,657,849)中所述的,该美国专利申请据此全文以引用方式并入本文。长按下压按钮(例如206)任选地使设备100开机或关机。一个或多个按钮的功能任选地为用户可定制的。触摸屏112用于实现虚拟按钮或软按钮以及一个或多个软键盘。
触敏显示器112提供设备和用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或将电信号发送到触摸屏112。触摸屏112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频以及它们的任何组合(统称为“图形”)。在一些实施方案中,一些视觉输出或全部的视觉输出任选地与用户界面对象对应。
触摸屏112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器、或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断),并且将所检测到的接触转换为与被显示在触摸屏112上的用户界面对象(例如,一个或多个软键、图标、网页或图像)的交互。在示例性实施方案中,触摸屏112与用户之间的接触点对应于用户的手指。
触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术或LED(发光二极管)技术,但是在其他实施方案中使用其他显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触摸屏112接触的一个或多个点的其他元件来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在示例性实施方案中,使用投射式互电容感测技术,诸如在来自Apple Inc.(Cupertino,California)的
Figure BDA0003774213240000241
和iPod
Figure BDA0003774213240000242
中使用的技术。
触摸屏112的一些实施方案中的触敏显示器任选地类似于以下美国专利中描述的多点触敏触控板:6,323,846(Westerman等人)、6,570,557(Westerman等人)和/或6,677,932(Westerman等人)和/或美国专利公开2002/0015024A1,该每个专利据此全文以引用方式并入。然而,触摸屏112显示来自设备100的视觉输出,而触敏触控板不提供视觉输出。
在一些实施方案中,触摸屏112的触敏显示器如以下专利申请所述:(1)提交于2006年5月2日的名称为“Multipoint Touch Surface Controller”的美国专利申请No.11/381,313;(2)2004年5月6日提交的名称为“Multipoint Touchscreen”的美国专利申请No.10/840,862;(3)2004年7月30日提交的名称为“Gestures For Touch Sensitive InputDevices”的美国专利申请No.10/903,964;(4)2005年1月31日提交的名称为“Gestures ForTouch Sensitive Input Devices”的美国专利申请No.11/048,264;(5)2005年1月18日提交的名称为“Mode-Based Graphical User Interfaces For Touch Sensitive InputDevices”的美国专利申请No.11/038,590;(6)2005年9月16日提交的名称为“VirtualInput Device Placement On A Touch Screen User Interface”的美国专利申请No.11/228,758;(7)2005年9月16日提交的名称为“Operation Of A Computer With A TouchScreen Interface”的美国专利申请No.11/228,700;(8)2005年9月16日提交的名称为“Activating Virtual Keys Of A Touch-Screen Virtual Keyboard”的美国专利申请No.11/228,737;以及(9)2006年3月3日提交的名称为“Multi-Functional Hand-HeldDevice”的美国专利申请No.11/367,749。所有这些申请全文以引用方式并入本文。
触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施方案中,触摸屏具有约160dpi的视频分辨率。用户任选地使用任何合适的物体或附加物诸如触笔、手指等等来与触摸屏112接触。在一些实施方案中,将用户界面设计为主要通过基于手指的接触和手势来工作,由于手指在触摸屏上的接触区域较大,因此这可能不如基于触笔的输入精确。在一些实施方案中,设备将基于手指的粗略输入转化为精确的指针/光标位置或命令以用于执行用户所期望的动作。
在一些实施方案中,除了触摸屏之外,设备100任选地包括用于激活或去激活特定功能的触控板。在一些实施方案中,触控板是设备的触敏区域,与触摸屏不同,该触敏区域不显示视觉输出。触控板任选地是与触摸屏112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电源状态指示符(例如,发光二极管(LED))以及与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出了耦接到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜而投射的光,并且将光转换为表示图像的数据。结合成像模块143(也叫做相机模块),光学传感器164任选地捕获静态图像或视频。在一些实施方案中,光学传感器位于设备100的后部上,与设备前部上的触摸屏显示器112相背对,使得触摸屏显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中,光学传感器位于设备的前部上,使得在用户在触摸屏显示器上查看其他视频会议参与者的同时任选地获取该用户的图像以用于视频会议。在一些实施方案中,光学传感器164的位置可由用户改变(例如,通过旋转设备外壳中的透镜和传感器),使得单个光学传感器164与触摸屏显示器一起使用,以用于视频会议和静态图像和/或视频图像采集两者。
设备100任选地还包括一个或多个深度相机传感器175。图1A示出了耦接到I/O子系统106中的深度相机控制器169的深度相机传感器。深度相机传感器175从环境接收数据以从视点(例如,深度相机传感器)创建场景内的对象(例如,面部)的三维模型。在一些实施方案中,结合成像模块143(也称为相机模块),深度相机传感器175可选地用于确定由成像模块143捕获的图像的不同部分的深度图。在一些实施方案中,深度相机传感器位于设备100的前部,使得在用户在触摸屏显示器上查看其他视频会议参与者的同时任选地获取具有深度信息的用户图像以用于视频会议,并且捕捉具有深度图数据的自拍。在一些实施方案中,深度相机传感器175位于设备的后部,或者设备100的后部和前部。在一些实施方案中,深度相机传感器175的位置可由用户改变(例如,通过旋转设备外壳中的透镜和传感器),使得深度相机传感器175与触摸屏显示器一起使用以用于视频会议和静态图像和/或视频图像采集两者。
在一些实施方案中,深度图(例如,深度图图像)包含与场景中的对象距视点(例如,相机、光学传感器、深度相机传感器)的距离相关的信息(例如,值)。在深度图的一个实施方案中,每个深度像素定义视点的Z轴中其对应的二维像素所在的位置。在一些实施方案中,深度图由像素组成,其中每个像素由值(例如,0到255)定义。例如,“0”值表示位于“三维”场景中距离视点(例如,相机、光学传感器、深度相机传感器)最远处的像素,“255”值表示位于“三维”场景中距离视点最近处的像素。在其他实施方案中,深度图表示场景中的对象与视点的平面之间的距离。在一些实施方案中,深度图包括关于深度相机的视野中感兴趣对象的各种特征的相对深度的信息(例如,用户面部的眼睛、鼻部、嘴部、耳朵的相对深度)。在一些实施方案中,深度图包括使设备能够确定感兴趣对象在z方向上的轮廓的信息。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了耦接到I/O子系统106中的强度传感器控制器159的接触强度传感器。接触强度传感器165任选地包括一个或多个压阻应变仪、电容式力传感器、电气力传感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施方案中,至少一个接触强度传感器与触敏表面(例如,触敏显示器系统112)并置排列或邻近。在一些实施方案中,至少一个接触强度传感器位于设备100的后部上,与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个接近传感器166。图1A示出了耦接到外围设备接口118的接近传感器166。另选地,接近传感器166任选地耦接到I/O子系统106中的输入控制器160。接近传感器166任选地如以下美国专利申请中所述的那样执行:No.11/241,839,名称为“Proximity Detector In Handheld Device”;No.11/240,788,名称为“ProximityDetector In Handheld Device”;No.11/620,702,名称为“Using Ambient Light SensorTo Augment Proximity Sensor Output”;No.11/586,862,名称为“Automated ResponseTo And Sensing Of User Activity In Portable Devices”;以及No.11/638,251,名称为“Methods And Systems For Automatic Configuration Of Peripherals”,这些美国专利申请据此全文以引用方式并入本文。在一些实施方案中,当多功能设备被置于用户的耳朵附近时(例如,当用户正在进行电话呼叫时),接近传感器关闭并且禁用触摸屏112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了耦接到I/O子系统106中的触觉反馈控制器161的触觉输出发生器。触觉输出发生器167任选地包括一个或多个电声设备诸如扬声器或其他音频部件;和/或用于将能量转换成线性运动的机电设备诸如电机、螺线管、电活性聚合物、压电致动器、静电致动器或其他触觉输出生成部件(例如,用于将电信号转换成设备上的触觉输出的部件)。接触强度传感器165从触觉反馈模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,触敏显示器系统112)并置排列或邻近,并且任选地通过竖直地(例如,向设备100的表面内/外)或侧向地(例如,在与设备100的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。在一些实施方案中,至少一个触觉输出发生器传感器位于设备100的后部上,与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个加速度计168。图1A示出了耦接到外围设备接口118的加速度计168。另选地,加速度计168任选地耦接到I/O子系统106中的输入控制器160。加速度计168任选地如以下美国专利公开中所述的那样执行:美国专利公开No.20050190059,名称为“Acceleration-based Theft Detection System for PortableElectronic Devices”和美国专利公开No.20060017692,名称为“Methods AndApparatuses For Operating A Portable Device Based On An Accelerometer”,这两个美国专利公开均全文以引用方式并入本文。在一些实施方案中,基于对从一个或多个加速度计接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图显示信息。设备100任选地除了加速度计168之外还包括磁力仪和GPS(或GLONASS或其他全球导航系统)接收器,以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息。
在一些实施方案中,存储于存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135以及应用程序(或指令集)136。此外,在一些实施方案中,存储器102(图1A)或370(图3)存储设备/全局内部状态157,如图1A和图3中所示。设备/全局内部状态157包括以下中的一者或多者:活动应用程序状态,其指示哪些应用程序(如果有的话)当前是活动的;显示状态,其指示什么应用程序、视图或其他信息占据触摸屏显示器112的各个区域;传感器状态,包括从设备的各个传感器和输入控制设备116获得的信息;以及关于设备的位置和/或姿态的位置信息。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OS X、iOS、WINDOWS或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、功率管理等)的各种软件部件和/或驱动器,并且促进各种硬件部件和软件部件之间的通信。
通信模块128有利于通过一个或多个外部端口124来与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件组件。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备,或间接地通过网络(例如,互联网、无线LAN等)进行耦接。在一些实施方案中,外部端口是与
Figure BDA0003774213240000291
(Apple Inc.的商标)设备上所使用的30针连接器相同的或类似的和/或与其兼容的多针(例如,30针)连接器。
接触/运动模块130任选地检测与触摸屏112(结合显示控制器156)和其他触敏设备(例如,触控板或物理点击式转盘)的接触。接触/运动模块130包括各种软件部件以用于执行与接触检测相关的各种操作,诸如确定是否已经发生了接触(例如,检测手指按下事件)、确定接触强度(例如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪在触敏表面上的移动(例如,检测一个或多个手指拖动事件),以及确定接触是否已经停止(例如,检测手指抬起事件或者接触断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变),所述接触点的移动由一系列接触数据表示。这些操作任选地被应用于单点接触(例如,单指接触)或者多点同时接触(例如,“多点触摸”/多个手指接触)。在一些实施方案中,接触/运动模块130和显示控制器156检测触控板上的接触。
在一些实施方案中,接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如,确定用户是否已“点击”图标)。在一些实施方案中,根据软件参数来确定强度阈值的至少一个子集(例如,强度阈值不是由特定物理致动器的激活阈值来确定的,并且可在不改变设备100的物理硬件的情况下被调节)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏的鼠标“点击”阈值可被设定成预定义的阈值的大范围中的任一个阈值。另外,在一些具体实施中,向设备的用户提供用于调节一组强度阈值中的一个或多个强度阈值(例如,通过调节各个强度阈值和/或通过利用对“强度”参数的系统级点击来一次调节多个强度阈值)的软件设置。
接触/运动模块130任选地检测由用户进行的手势输入。触敏表面上的不同手势具有不同的接触模式(例如,所检测到的接触的不同运动、计时和/或强度)。因此,任选地通过检测特定接触模式来检测手势。例如,检测手指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标的位置处)检测手指抬起(抬离)事件。作为另一个示例,在触敏表面上检测手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且随后检测手指抬起(抬离)事件。
图形模块132包括用于在触摸屏112或其他显示器上呈现和显示图形的各种已知的软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,其非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等。
在一些实施方案中,图形模块132存储表示待使用的图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收用于指定待显示的图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其他图形属性数据,并且然后生成屏幕图像数据,以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件部件,该指令由触觉输出发生器167用于响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置,并提供该信息以供在各种应用程序中使用(例如提供给电话138以供在基于位置的拨号中使用;提供给相机143作为图片/视频元数据;以及提供给提供基于位置的服务的应用,诸如天气桌面小程序、本地黄页桌面小程序和地图/导航桌面小程序)。
应用程序136任选地包括以下模块(或指令集)或者其子集或超集:
·联系人模块137(有时称为通讯录或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健身支持模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·视频播放器模块;
·音乐播放器模块;
·浏览器模块147;
·日历模块148;
·桌面小程序模块149,其任选地包括以下各项中的一者或多者:天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5、和由用户获取的其他桌面小程序、以及用户创建的桌面小程序149-6;
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150;
·搜索模块151;
·视频和音乐播放器模块152,其合并视频播放器模块和音乐播放器模块;
·记事本模块153;
·地图模块154;以及/或者
·在线视频模块155。
任选地存储在存储器102中的其他应用程序136的示例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密、数字权益管理、语音识别和语音复制。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、和文本输入模块134,联系人模块137任选地用于管理通讯录或联系人列表(例如,存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192中),包括:向通讯录添加一个或多个姓名;从通讯录删除姓名;将电话号码、电子邮件地址、物理地址或其他信息与姓名关联;将图像与姓名关联;对姓名进行归类和分类;提供电话号码或电子邮件地址来发起和/或促进通过电话138、视频会议模块139、电子邮件140或IM 141进行的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,电话模块138任选地用于输入与电话号码对应的字符序列、访问联系人模块137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话,以及当会话完成时断开或挂断。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132、文本输入模块134、联系人模块137和电话模块138,视频会议模块139包括根据用户指令来发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,即时消息模块141包括用于以下操作的可执行指令:输入与即时消息对应的字符序列、修改先前输入的字符、传输相应即时消息(例如,使用短消息服务(SMS)或多媒体消息服务(MMS)协议以用于基于电话的即时消息或者使用XMPP、SIMPLE、或IMPS以用于基于互联网的即时消息)、接收即时消息以及查看所接收的即时消息。在一些实施方案中,所传输和/或接收的即时消息任选地包括图形、照片、音频文件、视频文件和/或MMS和/或增强消息服务(EMS)中所支持的其他附件。如本文所用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS发送的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块,健身支持模块142包括用于创建健身(例如,具有时间、距离和/或卡路里燃烧目标)的可执行指令;与健身传感器(运动设备)进行通信;接收健身传感器数据;校准用于监视健身的传感器;为健身选择和播放音乐;以及显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132和图像管理模块144,相机模块143包括用于以下操作的可执行指令:捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特征,或从存储器102删除静态图像或视频。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、和相机模块143,图像管理模块144包括用于排列、修改(例如,编辑)、或以其他方式操控、加标签、删除、呈现(例如,在数字幻灯片或相册中)、以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,浏览器模块147包括用于根据用户指令来浏览互联网,包括搜索、链接至、接收和显示网页或其部分,以及链接至网页的附件和其他文件的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序模块149是任选地由用户下载和使用的微型应用程序(例如,天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和词典桌面小程序149-5)或由用户创建的微型应用程序(例如,用户创建的桌面小程序149-6)。在一些实施方案中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中,桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序创建器模块150任选地被用户用于创建桌面小程序(例如,将网页的用户指定部分转变为桌面小程序)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,搜索模块151包括用于根据用户指令来搜索存储器102中与一个或多个搜索条件(例如,一个或多个用户指定的搜索词)匹配的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路110、扬声器111、RF电路108、和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式诸如MP3或AAC文件存储的所记录的音乐和其他声音文件的可执行指令,以及用于显示、呈现或以其他方式回放视频(例如,在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施方案中,设备100任选地包括MP3播放器诸如iPod(Apple Inc.的商标)的功能。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,记事本模块153包括用于根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154任选地用于根据用户指令接收、显示、修改和存储地图以及与地图相关联的数据(例如,驾驶方向、与特定位置处或附近的商店及其他兴趣点有关的数据,以及其他基于位置的数据)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括用于执行以下操作的指令:允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、回放(例如在触摸屏上或在经由外部端口124所连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件,以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施方案中,使用即时消息模块141而不是电子邮件客户端模块140来发送特定在线视频的链接。在线视频应用程序的其他描述可见于2007年6月20日提交的名称为“Portable Multifunction Device,Method,and Graphical User Interfacefor Playing Online Videos”的美国临时专利申请No.60/936,562和2007年12月31日提交的名称为“Portable Multifunction Device,Method,and Graphical User Interfacefor Playing Online Videos”的美国专利申请No.11/968,067,这两个专利申请的内容据此全文以引用方式并入本文。
上述每个模块和应用程序对应于用于执行上述一种或多种功能以及在本专利申请中所述的方法(例如,本文所述的计算机实现的方法和其他信息处理方法)的可执行指令集。这些模块(例如,指令集)不必以独立的软件程序(诸如计算机程序(例如,指令))、过程或模块实现,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。例如,视频播放器模块任选地与音乐播放器模块组合成单个模块(例如,图1A中的视频和音乐播放器模块152)。在一些实施方案中,存储器102任选地存储上述模块和数据结构的子组。此外,存储器102任选地存储上文未描述的另外的模块和数据结构。
在一些实施方案中,设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触控板来执行的设备。通过使用触摸屏和/或触控板作为用于操作设备100的主要输入控制设备,任选地减少设备100上的物理输入控制设备(例如,下压按钮、拨盘等等)的数量。
唯一地通过触摸屏和/或触控板来执行的预定义的一组功能任选地包括在用户界面之间的导航。在一些实施方案中,触控板在被用户触摸时将设备100从设备100上显示的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施方案中,使用触控板来实现“菜单按钮”。在一些其他实施方案中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触控板。
图1B是示出了根据一些实施方案的用于事件处理的示例性部件的框图。在一些实施方案中,存储器102(图1A)或存储器370(图3)包括事件分类器170(例如,在操作系统126中)以及相应的应用程序136-1(例如,前述应用程序137至151、155、380至390中的任一个应用程序)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中,应用程序136-1包括应用程序内部状态192,该应用程序内部状态指示当应用程序是活动的或正在执行时被显示在触敏显示器112上的一个或多个当前应用程序视图。在一些实施方案中,设备/全局内部状态157被事件分类器170用来确定哪个(哪些)应用程序当前是活动的,并且应用程序内部状态192被事件分类器170用来确定要将事件信息递送到的应用程序视图191。
在一些实施方案中,应用程序内部状态192包括附加信息,诸如以下各项中的一者或多者:当应用程序136-1恢复执行时将被使用的恢复信息、指示信息正被显示或准备好用于被应用程序136-1显示的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列,以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如,触敏显示器112上的用户触摸,作为多点触摸手势的一部分)的信息。外围设备接口118传输其从I/O子系统106或传感器诸如接近传感器166、一个或多个加速度计168和/或麦克风113(通过音频电路110)接收的信息。外围设备接口118从I/O子系统106接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施方案中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在其他实施方案中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中,事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户能够在显示器上看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图,本文中有时也称为应用程序视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如,在其中检测到触摸的最低水平视图任选地被称为命中视图,并且被识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,所述初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时,命中视图确定模块172将命中视图识别为应当对子事件进行处理的分级结构中的最低视图。在大多数情况下,命中视图是发起子事件(例如,形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块172识别,命中视图便通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块173确定仅命中视图应接收特定子事件序列。在其他实施方案中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图,并因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施方案中,即使触摸子事件完全被局限到与一个特定视图相关联的区域,分级结构中的较高视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施方案中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施方案中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器182进行检索。
在一些实施方案中,操作系统126包括事件分类器170。另选地,应用程序136-1包括事件分类器170。在又一个实施方案中,事件分类器170是独立模块,或者是存储在存储器102中的另一个模块(诸如,接触/运动模块130)的一部分。
在一些实施方案中,应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191,其中的每一个都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常,相应应用程序视图191包括多个事件识别器180。在其他实施方案中,事件识别器180中的一个或多个事件识别器是独立模块的一部分,该独立模块为诸如用户界面工具包或应用程序136-1从中继承方法和其他属性的更高级别的对象。在一些实施方案中,相应事件处理程序190包括以下各项中的一者或多者:数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用程序内部状态192。另选地,应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序190。另外,在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178中的一者或多者被包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且根据事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施方案中,事件识别器180还包括元数据183和事件传递指令188(其任选地包括子事件递送指令)的至少一个子集。
事件接收器182从事件分类器170接收事件信息。事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速率和方向。在一些实施方案中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向取向,或反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,并且基于该比较来确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施方案中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其他。在一些实施方案中,事件(例如,187-1和/或187-2)中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个示例中,事件1(187-1)的定义是被显示对象上的双击。例如,双击包括被显示对象上的预先确定时长的第一触摸(触摸开始)、预先确定时长的第一抬离(触摸结束)、被显示对象上的预先确定时长的第二触摸(触摸开始)以及预先确定时长的第二抬离(触摸结束)。在另一个示例中,事件2(187-2)的定义是被显示对象上的拖动。例如,拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器112上的移动、以及触摸的抬离(触摸结束)。在一些实施方案中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中,事件定义186包括对用于相应用户界面对象的事件的定义。在一些实施方案中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在触敏显示器112上显示三个用户界面对象的应用程序视图中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示对象与相应事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中,相应事件(187)的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件序列不与事件定义186中的任何事件匹配时,该相应事件识别器180进入事件不可能、事件失败或事件结束状态,在此之后忽略基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪并处理持续进行的基于触摸的手势的子事件。
在一些实施方案中,相应事件识别器180包括具有指示事件递送系统应当如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表的元数据183。在一些实施方案中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标志和/或列表。在一些实施方案中,元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施方案中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中,相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中,事件识别器180抛出与所识别的事件相关联的标记,并且与该标记相关联的事件处理程序190获取该标记并执行预定义过程。
在一些实施方案中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件序列相关联的事件处理程序或者递送到活跃参与的视图。与子事件序列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中,数据更新器176创建并更新在应用程序136-1中使用的数据。例如,数据更新器176对联系人模块137中所使用的电话号码进行更新,或者对视频播放器模块中所使用的视频文件进行存储。在一些实施方案中,对象更新器177创建并更新在应用程序136-1中使用的对象。例如,对象更新器177创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息,并且将显示信息发送到图形模块132用以显示在触敏显示器上。
在一些实施方案中,事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178,或具有对该数据更新器、该对象更新器和该GUI更新器的访问权限。在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序136-1或应用程序视图191的单个模块中。在其他实施方案中,它们被包括在两个或更多个软件模块中。
应当理解,关于触敏显示器上的用户触摸的事件处理的上述论述还适用于利用输入设备来操作多功能设备100的其他形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,任选地与单次或多次键盘按下或按住协作的鼠标移动和鼠标按钮按下;触控板上的接触移动,诸如轻击、拖动、滚动等;触笔输入;设备的移动;口头指令;检测到的眼睛移动;生物特征输入;和/或它们的任何组合任选地被用作对应于限定要识别的事件的子事件的输入。
图2示出了根据一些实施方案的具有触摸屏112的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在本实施方案以及下文所述的其他实施方案中,用户能够通过例如利用一根或多根手指202(在图中未按比例绘制)或一支或多支触笔203(在图中未按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中,当用户中断与一个或多个图形的接触时,将发生对一个或多个图形的选择。在一些实施方案中,手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,不经意地与图形接触不会选择图形。例如,当与选择对应的手势是轻击时,在应用程序图标上方扫动的轻扫手势任选地不会选择对应的应用程序。
设备100任选地还包括一个或多个物理按钮,诸如“home”或菜单按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。另选地,在一些实施方案中,菜单按钮被实现为被显示在触摸屏112上的GUI中的软键。
在一些实施方案中,设备100包括触摸屏112、菜单按钮204、用于使设备开机/关机和用于锁定设备的下压按钮206、一个或多个音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压下状态持续预定义的时间间隔来对设备进行开/关机;通过压下该按钮并在该预定义的时间间隔过去之前释放该按钮来锁定设备;和/或对设备进行解锁或发起解锁过程。在另选的实施方案中,设备100还通过麦克风113接受用于激活或去激活某些功能的语音输入。设备100还任选地包括用于检测触摸屏112上的接触的强度的一个或多个接触强度传感器165,和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施方案中,设备300是膝上型电脑、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如,家用控制器或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于使这些部件互连的一条或多条通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时称作芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330,该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触控板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如,类似于上文参考图1A所述的触觉输出发生器167)、传感器359(例如,光学传感器、加速度传感器、接近传感器、触敏传感器和/或接触强度传感器(类似于上文参考图1A所述的接触强度传感器165))。存储器370包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM,或其他随机存取固态存储器设备;并且任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离CPU 310定位的一个或多个存储设备。在一些实施方案中,存储器370存储与便携式多功能设备100(图1A)的存储器102中存储的程序、模块和数据结构类似的程序、模块和数据结构或其子集。此外,存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加程序、模块和数据结构。例如,设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中的上述元素中的每个元素任选地存储于先前提到的存储器设备的一个或多个存储器设备中。上述模块中的每个模块对应于用于执行上述功能的指令集。上述模块或计算机程序(例如,指令集或包括指令集)不必被实现为单独的软件程序(诸如,计算机程序(例如,包括指令集))、过程或模块,并且因此这些模块的各种子集任选地在各种实施方案中被组合或以其他方式重新布置。在一些实施方案中,存储器370任选地存储上述模块和数据结构的子组。此外,存储器370任选地存储上文未描述的附加模块和数据结构。
现在将注意力转到任选地在例如便携式多功能设备100上实现的用户界面的实施方案。
图4A示出了根据一些实施方案的便携式多功能设备100上的应用程序菜单的示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施方案中,用户界面400包括以下元件或者其子集或超集:
·无线通信诸如蜂窝信号和Wi-Fi信号的信号强度指示符402;
·时间404;
·蓝牙指示符405;
·电池状态指示符406;
·具有针对常用应用程序的图标的托盘408,该图标诸如:
ο电话模块138的被标记为“电话”的图标416,该图标416任选地包括未接来电或语音信箱的数量的指示符414;
ο电子邮件客户端模块140的被标记为“邮件”的图标418,该图标418任选地包括未读电子邮件的数量的指示符410;
ο浏览器模块147的标记为“浏览器”的图标420;以及
ο视频和音乐播放器模块152(也称为iPod(苹果公司(Apple Inc.)的商标)模块152)的被标记为“iPod”的图标422;以及
·其他应用的图标,诸如:
οIM模块141的被标记为“消息”的图标424;
ο日历模块148的被标记为“日历”的图标426;
ο图像管理模块144的被标记为“照片”的图标428;
ο相机模块143的被标记为“相机”的图标430;
ο在线视频模块155的被标记为“在线视频”的图标432;
ο股市桌面小程序149-2的被标记为“股市”的图标434;
ο地图模块154的被标记为“地图”的图标436;
ο天气桌面小程序149-1的被标记为“天气”的图标438;
ο闹钟桌面小程序149-4的被标记为“时钟”的图标440;
ο健身支持模块142的被标记为“健身支持”的图标442;
ο记事本模块153的标记为“记事本”的图标444;以及
ο设置应用程序或模块的被标记为“设置”的图标446,该图标提供对设备100及其各种应用程序136的设置的访问。
应当指出的是,图4A中示出的图标标签仅是示例性的。例如,视频和音乐播放器模块152的图标422被标记“音乐”或“音乐播放器”。对于各种应用程序图标任选地使用其他标签。在一些实施方案中,相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施方案中,特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。
图4B示出了具有与显示器450(例如,触摸屏显示器112)分开的触敏表面451(例如,图3的平板电脑或触控板355)的设备(例如,图3的设备300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如,传感器359中的一个或多个传感器)和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器357。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出以下示例中的一些示例,但是在一些实施方案中,设备检测与显示器分开的触敏表面上的输入,如图4B中所示。在一些实施方案中,触敏表面(例如,图4B中的451)具有与显示器(例如,450)上的主轴(例如,图4B中的453)对应的主轴(例如,图4B中的452)。根据这些实施方案,设备检测在与显示器上的相应位置对应的位置(例如,在图4B中,460对应于468并且462对应于470)处与触敏表面451的接触(例如,图4B中的460和462)。这样,当触敏表面(例如,图4B中的451)与多功能设备的显示器(例如,图4B中的450)分开时,由设备在该触敏表面上检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操纵该显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界面。
另外,虽然主要是参考手指输入(例如,手指接触、单指轻击手势、手指轻扫手势)来给出下面的示例,但是应当理解的是,在一些实施方案中,这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如,基于鼠标的输入或触笔输入)替代。例如,轻扫手势任选地由鼠标点击(例如,而不是接触),之后是光标沿着轻扫的路径的移动(例如,而不是接触的移动)替代。又如,轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如,代替对接触的检测,之后是停止检测接触)替代。类似地,当同时检测到多个用户输入时,应当理解的是,多个计算机鼠标任选地被同时使用,或鼠标和手指接触任选地被同时使用。
图5A示出了示例性个人电子设备500。设备500包括主体502。在一些实施方案中,设备500可包括相对于设备100和300(例如,图1A至图4B)所述的特征中的一些或全部特征。在一些实施方案中,设备500具有在下文中称为触摸屏504的触敏显示屏504。作为触摸屏504的替代或补充,设备500具有显示器和触敏表面。与设备100和300的情况一样,在一些实施方案中,触摸屏504(或触敏表面)任选地包括用于检测所施加的接触(例如,触摸)强度的一个或多个强度传感器。触摸屏504(或触敏表面)的一个或多个强度传感器可提供表示触摸的强度的输出数据。设备500的用户界面可基于触摸的强度来对触摸作出响应,这意味着不同强度的触摸可调用设备500上的不同用户界面操作。
用于检测和处理触摸强度的示例性技术见于例如以下相关专利申请中:2013年5月8日提交的名称为“Device,Method,and Graphical User Interface for DisplayingUser Interface Objects Corresponding to an Application”的国际专利申请序列No.PCT/US2013/040061,发布为WIPO专利公开No.WO/2013/169849;以及2013年11月11日提交的名称为“Device,Method,and Graphical User Interface for TransitioningBetween Touch Input to Display Output Relationships”的国际专利申请序列No.PCT/US2013/069483,发布为WIPO专利公开No.WO/2014/105276,该每个专利申请据此全文以引用方式并入。
在一些实施方案中,设备500具有一个或多个输入机构506和508。输入机构506和508(如果包括的话)可以是物理形式的。物理输入机构的示例包括下压按钮和可旋转机构。在一些实施方案中,设备500具有一个或多个附接机构。此类附接机构(如果包括的话)可允许将设备500与例如帽子、眼镜、耳环、项链、衬衣、夹克、手镯、表带、手链、裤子、皮带、鞋子、钱包、背包等附接。这些附接机构允许用户穿戴设备500。
图5B示出了示例性个人电子设备500。在一些实施方案中,设备500可包括参考图1A、图1B和图3所述的部件中的一些或全部部件。设备500具有总线512,该总线将I/O部分514与一个或多个计算机处理器516和存储器518操作性地耦接。I/O部分514可连接到显示器504,该显示器可具有触敏部件522并且任选地具有强度传感器524(例如,接触强度传感器)。此外,I/O部分514可与通信单元530连接,用于使用Wi-Fi、蓝牙、近场通信(NFC)、蜂窝和/或其他无线通信技术来接收应用程序和操作系统数据。设备500可包括输入机构506和/或508。例如,输入机构506任选地是可旋转输入设备或者可按压输入设备以及可旋转输入设备。在一些示例中,输入机构508任选地是按钮。
在一些示例中,输入机构508任选地是麦克风。个人电子设备500任选地包括各种传感器,诸如GPS传感器532、加速度计534、定向传感器540(例如,罗盘)、陀螺仪536、运动传感器538和/或其组合,所有这些设备均可操作地连接到I/O部分514。
个人电子设备500的存储器518可包括用于存储计算机可执行指令的一个或多个非暂态计算机可读存储介质,这些可执行指令在由一个或多个计算机处理器516执行时例如可使得计算机处理器执行下文所述的技术,包括过程700、800、900、1100和1300(图7至图9、图11和图13)。计算机可读存储介质可以是可有形地包含或存储计算机可执行指令以供指令执行系统、装置和设备使用或与其结合的任何介质。在一些示例中,存储介质是暂态计算机可读存储介质。在一些示例中,存储介质是非暂态计算机可读存储介质。非暂态计算机可读存储介质可包括但不限于磁存储装置、光学存储装置、和/或半导体存储装置。此类存储装置的示例包括磁盘、基于CD、DVD或蓝光技术的光盘,以及持久性固态存储器诸如闪存、固态驱动器等。个人电子设备500不限于图5B的部件和配置,而是可包括多种配置中的其他部件或附加部件。
如本文所用,术语“示能表示”是指任选地在设备100、300和/或500(图1A、图3和图5A至图5B)的显示屏上显示的用户交互式图形用户界面对象。例如,图像(例如,图标)、按钮和文本(例如,超链接)任选地各自构成示能表示。
如本文所用,术语“焦点选择器”是指用于指示用户正与之进行交互的用户界面的当前部分的输入元件。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如,图3中的触控板355或图4B中的触敏表面451)上检测到输入(例如,按压输入)的情况下,该特定用户界面元素根据所检测到的输入而被调节。在包括能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如,图1A中的触敏显示器系统112或图4A中的触摸屏112)的一些具体实施中,在触摸屏上所检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如,由接触进行的按压输入)时,该特定用户界面元素根据所检测到的输入而被调节。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据焦点在用户界面的不同区域之间的移动而移动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制的以便递送与用户界面的用户预期的交互(例如,通过向设备指示用户界面的用户期望与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触控板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
如说明书和权利要求中所使用的,接触的“特征强度”这一术语是指基于接触的一个或多个强度的接触的特征。在一些实施方案中,特征强度基于多个强度样本。特征强度任选地基于相对于预定义事件(例如,在检测到接触之后,在检测到接触抬离之前,在检测到接触开始移动之前或之后,在检测到接触结束之前,在检测到接触的强度增大之前或之后和/或在检测到接触的强度减小之前或之后)而言在预先确定的时间段(例如,0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间采集的预定义数量的强度样本或一组强度样本。接触的特征强度任选地基于以下各项中的一者或多者:接触的强度的最大值、接触的强度的均值、接触的强度的平均值、接触的强度的前10%处的值、接触的强度的半最大值、接触的强度的90%最大值等。在一些实施方案中,在确定特征强度时使用接触的持续时间(例如,在特征强度是接触的强度在时间上的平均值时)。在一些实施方案中,将特征强度与一组一个或多个强度阈值进行比较,以确定用户是否已执行操作。例如,该组一个或多个强度阈值任选地包括第一强度阈值和第二强度阈值。在该示例中,特征强度未超过第一阈值的接触导致第一操作,特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作,而特征强度超过第二阈值的接触导致第三操作。在一些实施方案中,使用特征强度与一个或多个阈值之间的比较来确定是否要执行一个或多个操作(例如,是执行相应操作还是放弃执行相应操作)而不是用于确定执行第一操作还是第二操作。
在一些实施方案中,识别手势的一部分以用于确定特征强度。例如,触敏表面任选地接收连续的轻扫接触,该连续的轻扫接触从起始位置过渡并到达结束位置,在该结束位置处,接触强度增加。在该示例中,接触在结束位置处的特征强度任选地仅基于连续轻扫接触的一部分,而不是整个轻扫接触(例如,仅结束位置处的轻扫接触的部分)。在一些实施方案中,在确定接触的特征强度之前任选地向轻扫接触的强度应用平滑算法。例如,平滑化算法任选地包括以下各项中的一种或多种:不加权滑动平均平滑化算法、三角平滑化算法、中值滤波器平滑化算法和/或指数平滑化算法。在一些情况下,这些平滑化算法消除了轻扫接触的强度中的窄的尖峰或凹陷,以实现确定特征强度的目的。
任选地相对于一个或多个强度阈值诸如接触检测强度阈值、轻按压强度阈值、深按压强度阈值和/或一个或多个其他强度阈值来表征触敏表面上的接触强度。在一些实施方案中,轻按压强度阈值对应于这样的强度:在该强度下设备将执行通常与点击物理鼠标或触控板的按钮相关联的操作。在一些实施方案中,深按压强度阈值对应于这样的强度:在该强度下设备将执行与通常与点击物理鼠标或触控板的按钮相关联的操作不同的操作。在一些实施方案中,当检测到特征强度低于轻按压强度阈值(例如,并且高于标称接触检测强度阈值,比标称接触检测强度阈值低的接触不再被检测到)的接触时,设备将根据接触在触敏表面上的移动来移动焦点选择器,而不执行与轻按压强度阈值或深按压强度阈值相关联的操作。一般来讲,除非另有陈述,否则这些强度阈值在不同组的用户界面附图之间是一致的。
接触特征强度从低于轻按压强度阈值的强度增大到介于轻按压强度阈值与深按压强度阈值之间的强度有时被称为“轻按压”输入。接触特征强度从低于深按压强度阈值的强度增大到高于深按压强度阈值的强度有时被称为“深按压”输入。接触特征强度从低于接触检测强度阈值的强度增大到介于接触检测强度阈值与轻按压强度阈值之间的强度有时被称为检测到触摸表面上的接触。接触特征强度从高于接触检测强度阈值的强度减小到低于接触检测强度阈值的强度有时被称为检测到接触从触摸表面抬离。在一些实施方案中,接触检测强度阈值为零。在一些实施方案中,接触检测强度阈值大于零。
在本文中所述的一些实施方案中,响应于检测到包括相应按压输入的手势或响应于检测到利用相应接触(或多个接触)执行的相应按压输入来执行一个或多个操作,其中至少部分地基于检测到该接触(或多个接触)的强度增大到高于按压输入强度阈值而检测到相应按压输入。在一些实施方案中,响应于检测到相应接触的强度增大到高于按压输入强度阈值(例如,相应按压输入的“向下冲程”)来执行相应操作。在一些实施方案中,按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于按压输入强度阈值,并且响应于检测到相应接触的强度随后减小到低于按压输入阈值(例如,相应按压输入的“向上冲程”)来执行相应操作。
在一些实施方案中,设备采用强度滞后以避免有时被称为“抖动”的意外输入,其中设备限定或选择与按压输入强度阈值具有预定义关系的滞后强度阈值(例如,滞后强度阈值比按压输入强度阈值低X个强度单位,或滞后强度阈值是按压输入强度阈值的75%、90%或某个合理比例)。因此,在一些实施方案中,按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于对应于按压输入强度阈值的滞后强度阈值,并且响应于检测到相应接触的强度随后减小到低于滞后强度阈值(例如,相应按压输入的“向上冲程”)来执行相应操作。类似地,在一些实施方案中,仅在设备检测到接触强度从等于或低于滞后强度阈值的强度增大到等于或高于按压输入强度阈值的强度并且任选地接触强度随后减小到等于或低于滞后强度的强度时才检测到按压输入,并且响应于检测到按压输入(例如,根据环境,接触强度增大或接触强度减小)来执行相应操作。
为了容易解释,任选地,响应于检测到以下各种情况中的任一种情况而触发对响应于与按压输入强度阈值相关联的按压输入或响应于包括按压输入的手势而执行的操作的描述:接触强度增大到高于按压输入强度阈值、接触强度从低于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接触强度减小到低于按压输入强度阈值、和/或接触强度减小到低于与按压输入强度阈值对应的滞后强度阈值。另外,在将操作描述为响应于检测到接触的强度减小到低于按压输入强度阈值而执行的示例中,任选地响应于检测到接触的强度减小到低于对应于并且小于按压输入强度阈值的滞后强度阈值来执行操作。
现在将注意力转到在电子设备(诸如便携式多功能设备100、设备300或设备500)上实现的用户界面(“UI”)以及相关联的过程的实施方案。
图6A至图6BJ示出了根据一些实施方案的用于更改媒体中的视觉内容的示例性用户界面。这些附图中的用户界面用于示出包括图7、图8和图9中的过程的下文描述的过程。虽然相对于触敏表面上的触摸输入描述了图6A至图6BJ中的示例,但是应当理解,可以用指向相关用户界面元素的其他输入来替换轻击、长按压、按压并保持、轻扫和其他触摸手势。例如,可以由鼠标点击替换轻击,可以用点击并拖动替换轻扫,可以用双击替换双轻击,并且/或者可以用右击或在按住修改键的同时单击替换长按压(和/或按压并保持)。类似地,空中手势诸如将两个手指捏在一起或将手指触摸到手可以替换轻击,而将两个手指捏在一起并随后移动可以替换触摸并拖动,双捏可以替换双轻击,并且长捏可以替换长轻击或轻击并保持。在一些实施方案中,基于直接触摸来确定用户界面中输入指向的位置(例如,轻击、双轻击、长按压、按压并保持或用户界面元素上的轻扫),但也可以基于用户意图的其他指示来确定输入指向的位置,诸如显示光标的位置或用户注视指向的位置。
图6A示出了显示相机用户界面的计算机系统600(例如,一种电子设备),该相机用户界面包括任选地从计算机系统600的显示器顶部延伸到计算机系统600的显示器底部的实况预览630。在一些实施方案中,计算机系统600任选地包括设备100、设备300或设备500的一个或多个特征。在一些实施方案中,计算机系统600是平板电脑、电话、膝上型计算机、台式计算机和/或相机。
实况预览630是计算机系统600的一个或多个相机的视场(“FOV”)的表示。在一些实施方案中,实况预览630是部分FOV的表示。在一些实施方案中,实况预览630基于由一个或多个相机传感器检测到的图像。在一些实施方案中,计算机系统600使用多个相机传感器捕获图像并将它们组合以显示实况预览630。在一些实施方案中,计算机系统600使用单个相机传感器捕获图像以显示实况预览630。
图6A的相机用户界面包括指示符区域602和控件区域606,这些区域相对于实况预览630定位,使得指示符和控件可与实况预览630同时显示。相机显示区域604基本上不覆盖有指示符和/或控件。如图6A所示,相机用户界面包括指示指示符区域602与相机显示区域604之间的边界以及相机显示区域604与控件区域606之间的边界的视觉边界608。
如图6A所示,指示符区域602包括指示符,诸如闪光灯指示符602a、模式-设置指示符602b和动画图像指示符602c。闪光灯指示符602a指示闪光灯模式是打开(例如,活动)、关闭(例如,非活动)还是处于另一模式(例如,自动模式)。在图6A中,闪光灯指示符602a指示闪光灯模式关闭,因此当计算机系统600正在捕获媒体时将不使用闪光灯操作。此外,模式-设置指示符602b在被选择时使得计算机系统600替换相机模式控件620,其中相机设置控件用于设置当前选择的相机模式的多个设置(例如,图6A中的照相机模式)。动画图像指示符602c指示相机被配置为捕获单个图像还是/或者多个图像(例如,响应于检测到捕获媒体的请求)。在一些实施方案中,指示符区域602覆盖在实况预览630上,并且任选地包括着色(例如,灰色;半透明)覆盖物。
如图6A所示,相机显示区域604包括实况预览630和缩放控件(例如,示能表示)622。缩放控件622包括0.5x缩放控件622a、1x缩放控件622b和2x缩放控件622c。如图6A所示,与其他缩放控件相比,1x缩放控件622b被放大,这指示选择了1x缩放控件622b并且计算机系统600以“1x”缩放级别显示实况预览630。在一些实施方案中,计算机系统600通过以与其他缩放控件622不同的颜色显示1x缩放控件622b来显示1x缩放控件622b被选择。
如图6A所示,控件区域606包括相机模式控件620、快门控件610、相机切换器控件614和媒体集合612的表示。在图6A中,显示了相机模式控件620a-620e,其包括全景模式控件620a、人像模式控件620b、照片模式控件620c、视频模式控件620d和电影视频模式控件620e。如图6A所示,选择了照片模式控件620c,这由照片模式控件620c被加粗来指示。当选择了照片模式控件620c时,计算机系统600响应于计算机系统600检测到指向快门控件610的输入而发起(例如,和/或捕获)对照片媒体(例如,静态照片)的捕获。由计算机系统600捕获的照片媒体表示当输入指向快门控件610时显示的实况预览630。在一些实施方案中,响应于检测到指向全景模式控件620a的输入,计算机系统600发起对全景媒体(例如,全景照片)的捕获。在一些实施方案中,响应于检测到指向人像模式控件620b的输入,计算机系统600发起对人像媒体(例如,静态照片、应用了散景的静态照片)的捕获。在一些实施方案中,响应于检测到指向视频模式控件620d的输入,计算机系统600发起对视频媒体(例如,视频)的捕获。在一些实施方案中,在相机用户界面上显示的指示符和/或控件基于被选择的模式(例如,和/或计算机系统600被配置为基于选定相机模式操作的模式)。
在图6A中,快门控件610在被激活时使得计算机系统600基于实况预览630的当前状态和相机应用程序的当前状态(例如,例如,选择了哪个相机模式),使用一个或多个相机传感器捕获媒体(例如,当在图6A中激活快门控件610时)。所捕获的媒体被本地存储在计算机系统600处并且/或者被发送到远程服务器以进行存储。相机切换器控件614在被激活时,使得计算机系统600切换到在实况预览630中显示不同相机的视场,诸如通过在后向相机传感器和前向相机传感器之间切换。图6A中所示的媒体集合612的表示是计算机系统600最近捕获的媒体(例如,图像、视频)的表示。在一些实施方案中,响应于检测到指向媒体集合612的输入,计算机系统600显示与图7中所示的用户界面(下文讨论)类似的用户界面。在一些实施方案中,指示符区域602覆盖在实况预览630上,并且任选地包括着色(例如,灰色;半透明)覆盖物。
如上文所讨论的,图6A至图6BJ示出了根据一些实施方案的用于更改视觉内容的示例性用户界面。具体地说,图6A至图6AC示出了示例性实施方案,其中向当前正在捕获的媒体的视觉内容应用了合成(例如,模拟、计算机生成的)景深效果。该合成景深效果是自动应用的(例如,不响应于一个或多个输入)和/或响应于用户输入而应用。当自动应用了合成景深效果时,计算机系统600基于一组标准进行一个或多个确定,以确定如何应用合成景深效果并应用合成景深效果(例如,而无需检测应用合成景深效果的输入)。当响应于用户输入而应用合成景深效果时,计算机系统600检测输入并且基于检测到的输入类型来应用合成景深效果。
如图6A所示,计算机系统600显示包括John 632和Jane 634的实况预览630。如实况预览630所示,John 632定位成比Jane 634更靠近计算机系统600的一个或多个后向相机。在不应用合成景深效果的情况下显示了图6A的实况预览630。然而,应当理解,图6A的实况预览630显示有自然景深效果。
如本文所用,自然景深效果不同于合成景深效果。基于捕获场景的一个或多个相机的孔径大小和焦距以及该场景中的个体(例如,人、动物、物体)与该一个或多个相机之间的距离来创建自然景深效果。因此,自然景深效果由用于捕获场景的该一个或多个相机的物理规格(例如,焦距、孔径大小)直接限制。然而,合成景深效果是计算机生成的景深效果(例如,经由软件)并且不严格受到该一个或多个相机的物理规格和/或场景中的个体与该一个或多个相机之间的距离的限制。
因此,与仅向媒体应用自然景深效果相比,应用合成景深效果具有明显的优势。例如,与仅应用自然景深效果相比,应用合成景深效果具有优势,因为可以在对媒体的捕获期间以更多方式应用和调整合成景深效果(例如,在调整自然景深效果受到该一个或多个相机的物理规格的限制时)。此外,合成景深效果提供了优势,因为计算机系统600的硬件(例如,一个或多个相机)不必被切换以便应用特定的景深效果(例如,和/或用具有一种跟踪类型的景深效果替换在视频的一部分期间具有另一种类型跟踪的景深效果)。在一些实施方案中,关于景深效果的跟踪类型包括相对于媒体中的一个或多个其他个体强调特定个体(例如,在媒体的持续时间内,在媒体的持续时间的特定部分内)、相对于媒体中的其他个体强调媒体中的特定位置处的个体等。
如图6A至图6BJ所示,由计算机系统600显示的场景(例如,630、640和/或660)的合成景深效果经由阴影(例如,白色、灰色、黑色)示出。场景的被示出有较深阴影的一部分具有比场景的具有较浅阴影的一部分更大量的合成模糊(例如,合成景深效果)。应当理解,图6A至图6BJ中所示的阴影不表示将应用于这些图中描绘的场景的合成景深效果的精确/准确表示。然而,提供图6A至图6BJ中所示的阴影以解释合成景深效果如何相对于场景中的个体自动和/或响应于用户输入而被应用和/或更改。如图6A所示,实况预览630未加阴影(例如,为白色),这指示实况预览630仅具有由自然景深效果引起的模糊。在图6A中,计算机系统600检测在实况预览630上的向右轻扫输入650a1和/或在电影视频模式控件620e上的轻击输入650a2。
在图6B中,响应于检测到向右轻扫输入650a1和/或轻击输入650a2,计算机系统600向右移动相机模式控件620,使得在相机用户界面的中间显示电影视频模式控件620e。在图6B中,计算机系统600将电影视频模式控制620e显示为被选择(例如,粗体)并且停止将照片模式控制620a显示为被选择。此外,响应于检测到向右轻扫输入650a,计算机系统600从被配置为在照相机模式下操作转变为电影摄像机模式。在一些实施方案中,计算机系统600在将电影视频模式控件620e显示为被选择时检测向左轻扫输入,并且响应于检测到向左轻扫输入(例如,在向右轻扫输入650a1的相反方向上),计算机系统600向左移动相机模式控件,使得照片模式控件620c被显示为被选择。
在计算机系统600在电影摄像机模式下操作时,计算机系统600应用合成景深效果。在一些实施方案中,某些相机模式采用合成景深效果(例如,电影摄像机模式),而其他相机模式不采用合成景深效果(例如,照片模式、人像模式、视频模式)。在一些实施方案中,可以对任何给定相机模式手动启用或禁用合成景深效果。在图6B中,所应用的合成景深效果相对于Jane 634强调了John 632(例如,由于模糊程度较低,使得John看起来比Jane更突出),这可以经由示出John 632和John 632周围的区域被阴影化得比Jane 634和Jane 634周围的区域更浅的实况预览630来看到。具体地说,John 632在实况预览630中未加阴影,这指示John 632仅显示有由计算机系统600的该一个或多个相机的自然景深效果创建的自然模糊(如果有的话)。此外,在实况预览630中未加阴影的John 632指示合成景深效果没有引起对John 632应用合成模糊。另一方面,Jane 634被显示有阴影(例如,比John 632更深),因为计算机系统600经由正被应用在图6B中的合成景深效果来向Jane 634应用合成模糊。在一些实施方案中,与当应用合成景深效果时显示的某些模糊相比,自然模糊在视觉上不太突出(或模糊较少)。
如图6B所示,计算机系统600在John 632的头部周围显示主要个体指示符672a,在Jane 634头部周围显示次要个体指示符674b。主要个体指示符672a显示在John 632的头部周围,因为John 632正经由所应用的合成景深效果被强调。次要个体指示符674b显示在Jane 634的头部周围,因为Jane 634没有经由所应用的合成景深效果被强调。因此,在图6B中,计算机系统600显示不同的指示符,以区分被合成景深效果强调的个体与没有被合成景深效果强调的个体。在一些实施方案中,在Jane 634的头部周围显示次要个体指示符674b,因为计算机系统600具有足够的视觉内容以跟踪和/或聚焦于(和/或应用合成景深效果以强调)Jane 632。在一些实施方案中,如果计算机系统600不具有足够的视觉内容以跟踪和/或聚焦于Jane 632,则在Jane 634的头部周围不显示次要个体指示符(和/或与Jane 634相对应的次要个体指示符)。
如图6B所示,实况预览630中示出的场景的不同部分具有所应用的不同级别的模糊。例如,图6B的实况预览630中的树和草被示出具有比图6A的实况预览630中的树和草更少的细节,这指示场景的背景、前景和/或不同部分也被模糊(例如,不仅是场景中的个体)。此外,在应用合成景深效果之后,与实况预览630中的个体(例如,John 632和Jane 634)相比,实况预览630中场景的背景的部分被显示具有更多的模糊(例如,较深的阴影)。
除了应用合成景深效果之外,响应于检测到向右轻扫输入650a1和/或轻击输入650a2,计算机系统600扩展实况预览630,使得与图6A的实况预览630相比,图6B的实况预览630占据计算机系统600的更多区域。响应于检测到向右轻扫输入650a1和/或轻击输入650a2,计算机系统600继续显示闪光灯指示符602a并且停止在图6B的指示符区域602中显示图6A的模式-设置指示符602b和动画图像指示符602c。如图6B所示,计算机系统600在图6A中先前显示模式-设置指示符602b的位置处显示经过时间指示符602d。此外,计算机系统600在动画图像指示符602c的位置显示深度指示符602e。在一些实施方案中,响应于接收到指向深度指示符602e的输入,计算机系统600显示用于调整应用于捕获的媒体的散景效果的控件(例如,如下文在图6AD至图6AH中所描述)。在一些实施方案中,随着用于调整散景效果的控件改变,计算机系统600更新实况预览630(例如,使用如下文关于图6AD至图6AF所讨论的一种或多种技术)。
如图6B所示,响应于检测到向右轻扫输入650a1和/或轻击输入650a2,计算机系统600还停止显示0.5x缩放控件622a和2x缩放控件622c并且维持1x缩放控件622b的显示。在一些实施方案中,计算机系统600继续显示1x缩放控件622b,因为确定仅当计算机系统600正在显示特定缩放级别(例如,1x)和/或缩放级别范围(例如,0.8x缩放至1.7x缩放)时,才应用合成景深效果。在一些实施方案中,计算机系统600继续显示1x缩放控件622b,因为一组相机(例如,广角相机(例如,具有f/1.6孔径(例如,和/或f/1.4-f/8.0孔径)和60°至120°视场的相机))用于以1x缩放级别(和/或包括1x缩放级别的缩放值范围)捕获电影视频媒体。在一些实施方案中,计算机系统600停止显示缩放控件622a和2x缩放控件622c,因为计算机系统600没有特定组相机(例如,超广角相机(例如,具有f/2.4孔径(例如,和/或f/1.4-f/8.0孔径)和大于120°视场的相机)、长焦相机(例如,具有f/2.0孔径(例如,和/或f/1.4-f/8.0孔径)和30°至60°视场和/或小于60°视场的相机))来捕获0.5x和/或2x缩放级别的电影媒体。在一些实施方案中,当应用合成景深效果时,计算机系统600使用特定组相机不是优选的和/或不是最佳的(例如,由于特定组相机的物理规格)。在图6B中,计算机系统600检测旋转650b1和指向快门控件610的轻击输入650b2。
如图6C所示,响应于检测到旋转650b1,计算机系统600将相机用户界面从纵向取向转变为横向取向。值得注意的是,图6C示出了两个计算机系统。位于图6C右侧的是计算机系统600,位于图6C左侧的是计算机系统690。计算机系统600和计算机系统690两者都被示出为使得它们的相应用户界面处于横向取向。图6C的计算机系统600正在捕获视频并且响应于轻击输入650b2而显示停止控件616。具体地说,图6C的计算机系统600被示出为显示正被捕获的视频的帧(例如,实况预览630)处于一秒捕获持续时间(例如,如经过时间指示符602d所指示的)和/或自接收到轻击输入650b2以来已经过去一秒。提供计算机系统690以示出计算机系统将如何在视频回放期间(例如,在计算机系统600已经捕获完整视频之后)显示由计算机系统600在图6C处捕获的视频的帧。提供计算机系统690的一个原因是为了示出在视频正被捕获时如何示出视频的帧与在视频已经被捕获并正被回放之后如何示出视频的帧之间的差异和/或相似之处。在一些实施方案中,计算机系统600和计算机系统690是相同的系统(例如,处于不同的时间点)。在一些实施方案中,计算机系统600和计算机系统690是不同的系统(例如,表示由计算机系统600捕获的视频的文件在该视频被捕获之后被发送到计算机系统690的情况下)。
如图6C所示,计算机系统690示出了包括先前捕获的媒体表示640和经过时间指示符646的媒体回放用户界面。如上所述,先前捕获的媒体表示640是在由计算机系统600捕获的视频的回放期间显示的帧(例如,被捕获且经由实况预览630被示出的帧)。因此,如图6C所示,实况预览630和先前捕获的媒体表示640表示由计算机系统600捕获的视频的相同帧,但是在不同的时间实例中示出(例如,在对视频的捕获期间与该视频的回放期间)。因此,先前捕获的媒体表示640在视频的一秒捕获持续时间(和/或一秒标记)期间被示出(例如,如经过时间指示符646所指示的)。因此,经过时间指示符602d和经过时间指示符646被显示具有相同的视频经过时间(例如,一秒)。
图6C还包括图表680,该图表包括活动跟踪器680a、活动跟踪器680b和活动跟踪器680c。在活动跟踪器680a内显示的为John的活动水平680a1(例如,John 632的活动水平);并且在活动跟踪器680b内显示的为Jane的活动水平680b1(例如,Jane 634的活动水平)。John的活动水平680a1和Jane的活动水平680b2是计算机系统600已经检测到并注册为实时对应于John 632和Jane 634的活动水平的活动水平。此外,John的活动水平680a1不表示John 632的绝对活动水平,并且Jane的活动水平680b2不表示Jane 634的绝对活动水平。相反,John的活动水平680a1表示John 632相对于Jane 634的活动水平的相对活动,Jane的活动水平680a1标识Jane 634相对于John 632的活动水平的相对活动。此外,图6E中所示的活动水平表示由计算机系统600实时检测到/处理的活动水平,其可能落后于用于确定场景中个体的活动水平的实际特性(例如,用于确定个体是否正在讲话、移动、注视特定方向、被场景中的一个或多个其他对象遮挡等的个体的物理/视觉特性)。如图6C所示,活动跟踪器680c不包括活动水平,因为在经过时间指示符602d指示的一秒经过时间之前,狗638还没有被计算机系统600捕获(例如,不显示在实况预览630中)。向前看图6W,当狗638被计算机系统600捕获时(例如,在图6W的实况预览630中显示的狗638),活动跟踪器680c(例如,在图6C中)包括狗的活动水平680c1(例如,狗638的活动水平)。在图表680中显示的活动水平表示在计算机系统600正在捕获的视频中的某个时间(例如,0:00-0:45)处的个体的活动水平。如图6C所示,John的活动水平680a1高于Jane的活动水平680b1(例如,如John的活动水平680a1与Jane的活动水平680b1相比占据更多的面积所指示的)。在图6C中,John的活动水平680a1较高,因为John 632更靠近计算机系统600的一个或多个相机(例如,正在捕获实况预览630中示出的场景),并且因为John 632当前正在讲话(例如,如John 632的嘴巴更高所指示的)。此外,Jane的活动水平680b1较低,因为Jane 634远离计算机系统600的一个或多个相机,并且因为Jane 634没有在讲话(例如,如Jane 634的嘴巴闭合所指示的)。
在图6C中,响应于检测到轻击输入650b2,计算机系统600发起对视频的捕获并且确定John 632(例如,基于John 632的活动水平)满足一组自动选择标准。具体地说,John632满足该组自动选择标准,因为在视频已经被捕获的持续时间内,John 632具有比Jane634更高的活动水平(例如,如John的活动水平680a1在0秒到1秒之间高于Jane的活动水平680b1所指示的)。如图6C所示,因为确定John 632满足该组自动选择标准,所以计算机系统600向在一秒捕获持续时间捕获的视频的帧应用合成景深效果。如图6C的实况预览630所示,所应用的合成景深效果相对于Jane 634强调了John 632,使得John 632被显示具有比Jane 634更少的模糊(例如,如John 632具有比Jane 634更浅的阴影所指示的)。此外,计算机系统600在John 632的头部周围显示主要个体指示符672a,因为John 632正在被合成景深效果强调,并且在Jane 634的头部周围显示次要个体指示符674b,因为Jane 634没有被合成景深效果强调。
如图6C所示,提供图表680以指示在特定时间实例处合成景深效果正在强调哪个个体。如图6C所示,图表680包括媒体捕获线680d1和媒体回放线680d2。媒体捕获线680d1指示在对视频的捕获(例如,由计算机系统600)期间的特定时间合成景深效果正在强调的个体。此外,媒体回放线680d2指示在视频的回放期间(例如,由计算机系统690)的特定时间合成景深效果正在强调的个体。当媒体捕获线680d1处于(或接近)相应活动跟踪器的中心线(例如,媒体捕获线680d1位于图6C中John的活动跟踪器680a的中心线上)时,计算机系统600正在应用合成景深效果以在特定时间相对于FOV中的其他个体强调相应个体。同样,当媒体回放线680d2处于(或接近)相应活动跟踪器的中心线(例如,媒体回放线680d2位于图6C中John的活动跟踪器680a的中心线上)时,计算机系统600正在应用合成景深效果以在特定时间相对于FOV中的其他个体强调相应个体。因此,由位于John的活动跟踪器680a中心的媒体捕获线680d1来指示计算机系统600以相对于Jane 634强调John 632的合成景深效果显示实况预览630。并且由处于John的活动跟踪器680a中心的媒体回放线680d2来指示计算机系统690以相对于Jane 634强调John 632的合成景深效果显示先前捕获的媒体表示640。在图表680上的特定时间(例如,图6F的图表680,在媒体中从两秒到三秒),其中媒体捕获线680d1或媒体回放线680d2不在相应媒体跟踪器的中心,计算机系统正在转变合成景深效果,使得将在媒体中相对于相应个体强调新的个体。
图6D至图6G示出了示例性实施方案,其中计算机系统600自动改变合成景深效果以相对于John 632强调Jane 634。如图6D所示,计算机系统600在对视频的捕获期间的两秒处(例如,如经过时间指示符602d所指示的)显示实况预览630中所示的场景(例如,表示视频的帧)。实况预览630示出了John 632的眼睛向远离图6D中的一个或多个相机的方向看,这是从图6C的实况预览630中John 632的眼睛的改变。因此,John 632的注视从指向图6C中的计算机系统600的一个或多个相机改变为指向远离图6D中的计算机系统600的一个或多个相机。个体指向计算机系统600的一个或多个相机的注视可以增加该个体的活动水平,这增加了该个体满足自动选择标准的概率。然而,个体远离计算机系统600的一个或多个相机的注视可以减少该个体的活动,这减少了该个体满足自动选择标准的机会。因此,在图6D中,John 632的活动水平已经开始降低,同时John 632将继续满足该组自动选择标准的概率也降低。除了注视改变之外,John 632在图6D中已经停止了讲话,而Jane 634在图6D中已经开始讲话。然而,计算机系统600尚未确定Jane 634已经满足该组自动选择标准,因为计算机系统600正在实时检测个体的活动水平(例如,正在捕获视频时),并且需要更多信息(例如,数据、视觉内容)来进行此确定。如图6D所示,计算机系统600继续应用合成景深效果以相对于Jane 634强调John 632,因为在视频的时间帧期间,尚未确定Jane 634满足该组自动选择标准(例如,计算机系统600仍然依赖于关于John满足以上在图6C中讨论的该组自动选择标准所作出的确定)。值得注意的是,为了指示计算机系统600尚未检测到John 632和Jane 634的活动水平的相对改变,John的活动水平680a1继续大于图6D的图表680中的Jane的活动水平680b2。
与图6D的计算机系统600相反,图6D的计算机系统690正在回放先前由计算机系统600捕获的视频。因此,计算机系统690具有足够的信息来确定Jane 634满足该组自动选择标准。这至少是因为计算机系统690具有与所捕获的视频相对应的更多(或全部)信息。因此,计算机系统690可以确定在视频的特定时间帧期间个体是否满足该组自动标准,因为计算机系统690可以访问先前捕获的视频中的信息。在图6D中,计算机系统690确定Jane 634在视频的时间帧期间满足自动选择标准,并且基于此确定自动应用合成景深效果以相对于John 632强调Jane 634。然而,如图6D至图6G所示,计算机系统690显示先前捕获的媒体表示640从相对于Jane 634强调John 632平滑地过渡到相对于John 632强调Jane 634的动画(例如,而不是更突然的过渡)。作为该动画的一部分,计算机系统690逐渐以更多的模糊显示John 632,并逐渐以更少的模糊显示Jane 634,使得在图6G中Jane 634相对于John 632被强调(例如,与在图6B中John 632相对于Jane 634被强调时具有大约相同差异量的模糊)。
如图6E所示,计算机系统600在对视频的捕获期间的三秒处(例如,如经过时间指示符602d所指示的)显示实况预览630中所示的场景。实况预览630继续示出John 632的眼睛向远离图6E中的一个或多个相机的方向看(例如,其相对于图6D的实况预览630未改变)。在图6E中,计算机系统600尚未进行确定Jane 634满足该组自动选择标准,因为计算机系统600需要更多信息(例如,数据、内容)来进行此确定。如图6D所示,计算机系统600继续应用合成景深效果以相对于Jane 634强调John 632,因为尚未确定Jane 634满足该组自动选择标准。
如图6F所示,计算机系统600在捕获视频期间显示实况预览630中所示的场景。虽然经过时间指示符602d在图6F中示出了三秒,但是图6F的实况预览630在显示图6E的实况预览630之后显示。在图6F中,计算机系统600确定Jane 634满足该组自动选择标准(例如,因为计算机系统600在图6F中具有足够的信息)。基于此确定,计算机系统600自动改变合成景深效果以相对于John 632强调Jane 634,并且在图6F至图6G中显示John 632具有更多的模糊和Jane 634具有更少的模糊的动画。
值得注意的是,与图6E至图6G中由计算机系统690显示的动画所包括的过渡相比,在图6F至图6G中由计算机系统600显示的动画包括更突然且不太平滑的过渡。这至少因为计算机系统690能够确定满足该组自动选择标准,并且在计算机系统600能够作出此确定之前,相对于John 632强调Jane 634的合成景深效果的改变将需要在回放/捕获视频四秒后发生(例如,因为计算机系统600的实况预览630被更新以在图6G中显示合成景深效果的完全改变)。在图6G中,图表680的媒体捕获线680d1和媒体回放线680d2为计算机系统600和690显示的动画的比较提供了上下文。媒体捕获线680d1从John的活动跟踪器680a移动到女性活动跟踪器680b的时间晚于媒体回放线680d2。此外,媒体捕获线680d1的下降速度(例如,由计算机系统600显示的图6F至图6G的更短且更突然的动画)快于媒体回放线680d2(例如,由计算机系统600显示的图6E至图6G的更长且更平滑的动画)。
如图6G所示,计算机系统600和计算机系统690已经应用合成景深效果,以相对于John 632强调Jane 634(例如,在实况预览630的阴影与先前捕获的媒体表示640的阴影匹配的情况下)。如图6G所示,与应用合成景深效果以相对于John 632强调Jane 634一起,计算机系统600停止在John 632的头部周围显示主要个体指示符672a以及在Jane 634的头部周围显示次要个体指示符674b,并且在Jane 634的头部周围显示主要个体指示符672b,在John 632的头部周围显示次要个体指示符674a。主要个体指示符672b指示Jane 634当前正在被合成景深效果强调,并且次要个体指示符674b指示John 632没有被合成景深效果强调。如图6F至图6G所示,图6F的主要个体指示符672a和图6G的主要个体指示符672b具有相同视觉外观(例如,聚焦框、相同形状和/或相同对象)。同样,图6G的次要个体指示符674a和图6F的次要个体指示符674b具有相同视觉外观(例如,矩形、相同形状和/或相同对象)。然而,主要个体指示符和次要个体指示符不具有相同视觉外观(例如,672a-672b与图6F至图6G中的674a-674b相比)。在一些实施方案中,计算机系统600停止在John 632的头部周围显示主要个体指示符672a以及在Jane 634的头部周围显示次要个体指示符674b,并且/或者在应用合成景深效果的改变的过渡动画期间,在Jane 634的头部周围显示主要个体指示符672b,在John 632的头部周围显示次要个体指示符674a。
在一些实施方案中,计算机系统600和计算机系统690与以上关于图6AD至图6AG所示和讨论的动画不同地显示它们的相应动画。在一些实施方案中,计算机系统600确定应发生合成景深效果的自动改变(例如,计算机系统600在对视频的捕获期间的四秒处进行此确定)。在一些实施方案中,当确定应发生合成景深效果的自动改变时,计算机系统600自动显示合成景深效果改变的动画(例如,在对视频的捕获期间的四秒与五秒之间回放的动画)。在一些实施方案中,显示的动画完全完成,使得实况预览630被更新以示出在进行确定之后的某个时间(例如,在对视频的捕获期间的五秒处)合成景深效果的改变的完成。在一些实施方案中,计算机系统690确定合成景深效果的自动改变应该发生在计算机系统600在捕获实况视频时作出该确定(例如,计算机系统690在视频的回放期间的三秒处作出此确定)的时间(例如,四秒)。在一些实施方案中,当计算机系统690确定应发生合成景深效果的自动改变时,计算机系统690显示合成景深效果改变的动画(例如,在视频的回放期间的三秒与四秒之间显示的动画)。在一些实施方案中,由计算机系统690显示的合成景深效果改变的动画完全完成,使得先前捕获的媒体表示640被更新以在计算机系统600在捕获实况视频时作出确定的时间(例如,四秒)时示出合成景深效果改变的完成。在一些实施方案中,计算机系统690显示的动画与计算机系统600显示的动画一样长(例如,两个动画都是1秒至5秒)。在一些实施方案中,计算机系统690显示的动画在对应于视频的比计算机系统600显示的动画完全完成的时间更早的时间完全完成。
图6H至图6K示出了示例性实施方案,其中计算机系统600自动改变合成景深效果以相对于Jane 634强调John 632。如图6H所示,计算机系统600在对视频的捕获期间的六秒处(例如,如经过时间指示符602d所指示的)显示实况预览630中所示的场景(例如,表示视频的帧)。图6H的实况预览630示出了John 632的头部已经移动(例如,侧向),这指示John632在一个或多个相机的视场内移动。个体在该一个或多个相机的视场中的运动增加可以增加该个体的活动水平,这增加了个体满足自动选择标准的概率。相反,个体在该一个或多个相机的视场中的运动减少可以降低该个体的活动水平,这降低了个体满足自动选择标准的概率。此外,Jane 634已经停止了讲话(例如,如图6H中Jane 634的嘴巴闭合所指示的)。如图6H所示,计算机系统600继续应用合成景深效果以相对于John 632强调Jane 634,因为计算机系统600由于不具有足够的信息而尚未确定Jane 634满足该组自动选择标准(例如,出于如上文关于图6D所讨论的类似原因)。
与图6H的计算机系统600相反,计算机系统690已经确定Jane 634在视频的特定时间帧期间满足该组自动选择标准(例如,出于如上文关于图6D至图6G所讨论的类似原因),并且基于此确定自动改变合成景深效果以相对于Jane 634强调John 632。如图6H至图6K所示,计算机系统690显示先前捕获的媒体表示640从相对于John 632强调Jane 634平滑地过渡到相对于Jane 634强调John 632的动画。作为该动画的一部分,计算机系统690逐渐以更多的模糊显示Jane 634,并逐渐以更少的模糊显示John 632,使得在图6K中John 632相对于Jane 634被强调(例如,使用如上文关于图6D至图6G所述的一种或多种类似技术)。
如图6I所示,计算机系统600在对视频的捕获期间的七秒处(例如,如经过时间指示符602d所指示的)显示实况预览630中所示的场景。实况预览630继续示出John 632在FOV中移动(例如,John 632头部在图6I中与图6H中的位置不同)。在图6I中,计算机系统600尚未确定John 632满足该组自动选择标准,因为需要更多信息来进行此确定。如图6I所示,计算机系统600继续应用合成景深效果以相对于John 632强调Jane 634,因为尚未确定John632满足该组自动选择标准(例如,依赖于在图6F中所作出的确定)。
如图6J所示,计算机系统600在捕获视频期间显示实况预览630中所示的场景,并且计算机系统600继续示出John 632正在FOV中移动。虽然经过时间指示符602d示出了七秒,但是图6J的实况预览630在显示图6I的实况预览630之后显示。在图6J中,计算机系统600确定John 632满足该组自动选择标准(例如,出于如上关于图6F至图6G所讨论的类似原因)。基于此确定,计算机系统600自动改变合成景深效果以相对于Jane 634强调John 632,并且显示John 632所显示具有的模糊减小以及John 632所显示具有的模糊增加的动画(例如,使用一种或多种技术,并且出于如上文关于图6F至图6G所讨论的类似原因)。如图6G所示,与应用合成景深效果以相对于Jane 634强调John 632一起,计算机系统600在John 632的头部周围显示主要个体指示符672a,在Jane 634的头部周围显示次要个体指示符674b,(例如,使用一种或多种技术,并且出于与上文关于图6F至图6G讨论的类似原因)。图6至图6J的图表680的媒体捕获线680d1和媒体回放线680d2也出于类似原因被更新和显示,如上文关于图6F至图6G所讨论的。
图6L至图6M示出了示例性实施方案,其中计算机系统600不改变先前已经应用的合成景深效果。如图6L所示,计算机系统600在对视频的捕获期间的十秒处(例如,如经过时间指示符602d所指示的)显示实况预览630中所示的场景,在该场景中John 632正在用毛巾642擦拭他的面部。如图6L所示,毛巾642覆盖(和/或遮挡)了John 632的面部。在一些实施方案中,毛巾642覆盖了John 632的面部,使得计算机系统600无法在该一个或多个相机的视场中检测到John 632的面部(例如,使用一种或多种面部检测技术)。如图6M所示,计算机系统600在十一秒时显示实况预览630中所示的场景,其中实况预览630示出John 632已经从他的面部取下图6L的毛巾642。因此,在图6M中,John 632的面部不再被覆盖。
在图6L至图6M中,计算机系统600和计算机系统690各自确定John 632的面部被覆盖和/或遮挡(例如,和/或相应计算机系统无法检测到John 632的面部)的时间少于预先确定的时间段(例如,2秒至60秒)。在图6L至图6M中,由于这些各自的确定,计算机系统600和计算机系统690各自继续应用先前已经应用的合成景深效果(例如,在图6H至图6K中相对于Jane 634强调John 632),而不管毛巾642是否遮挡John 632的面部。如图6L所示,即使当毛巾642正在遮挡John 632的面部时,在实况预览630和先前捕获的媒体表示640中John 632也相对于Jane 634被强调。如图6L至图6M所示,计算机系统600继续显示主要个体指示符672a和次要个体指示符674a,因为计算机系统600继续应用先前在图6L中John 632用毛巾642覆盖他的面部之前应用的合成景深效果。在一些实施方案中,在图6L至图6M中由计算机系统690相对于视频的经过时间作出确定比计算机系统600作出确定发生得更早(例如,出于如上文关于图6D至图6G所讨论的类似原因)。
图6N至图6T示出了示例性实施方案,其中计算机系统600响应于第一类型的用户输入(例如,用户指定的改变)而改变合成景深效果。如图6O所示,计算机系统600在对视频的捕获期间的十二秒处(例如,如经过时间指示符602d所指示的)显示实况预览630中所示的场景(例如,表示视频的帧)。在图6N中,计算机系统600继续向由计算机系统600的一个或多个相机捕获的内容应用合成景深效果以相对于Jane 634强调John 632(例如,如由图6N的实况预览630的阴影所示)。在图6O中,计算机系统600检测Jane 634上的单轻击输入650o。
在图6P中,响应于检测到单轻击输入650o,计算机系统600改变合成景深效果以相对于John 632强调Jane 634(例如,如由图6P的实况预览630的阴影所示)。响应于检测到单轻击输入650o,计算机系统600立即改变合成景深效果并且不显示示出合成景深效果改变的过渡动画(例如,由图6P的实况预览630在对视频的捕获期间在十二秒处显示)。因此,与实况预览630被更新以反映合成景深效果中的自动改变不同的是,实况预览630被更新以反映合成景深效果中用户指定的改变(例如,响应于检测到输入而发生的改变)。当发生合成景深效果中用户指定的改变时,立即更新实况预览630(例如,并且/或者立即发生应用合成景深效果中的改变)。然而,当发生合成景深效果的自动改变时,实况预览630被更逐渐地更新(例如,显示当前合成景深效果与新的合成景深效果之间的过渡的动画,如关于图6D至图6K所讨论的)。此外,图表680也示出了这一点。在图表680中,媒体捕获线680d1在十二秒时以直角绘制,以反映合成景深效果中用户指定的改变的立即改变是如何发生的(例如,响应于单轻击输入650o),并且媒体捕获线680d1在三秒至十秒和十二秒之间用曲线绘制,以反映合成景深效果的自动改变是如何更平滑的。
返回到图6N至图6P,计算机系统690显示具有合成景深效果中用户指定的改变的动画的先前捕获的媒体表示640(例如,响应于检测到单轻击输入650o而发生)(例如,在所捕获的视频的回放期间)。如图6N至图6P所示,当显示具有合成景深效果中用户指定的改变的先前捕获的媒体表示640时,计算机系统690提供了更平滑的过渡,因为计算机系统690具有指示将发生用户指定的改变的信息(例如,出于上文关于图6D至图6K描述的那些的类似原因)。因此,在图6N中,先前捕获的媒体表示640不同于实况预览630,其中先前捕获的表示媒体640已经开始示出合成景深效果的改变而实况预览630没有。值得注意的是,在图6O中,计算机系统690先前捕获的媒体表示640表示在其最终状态下合成景深效果的改变。在图6O中,计算机系统690完成了合成景深效果的改变,以在接收到单轻击输入650o的帧处相对于John 632强调Jane 634(例如,图6O的先前捕获的媒体表示640的模糊程度看起来与图6P的实况预览630相同)。因此,计算机系统690能够在与接收到引起用户指定的改变的输入时相对应的帧处显示该用户指定的改变。此外,媒体捕获线680d1和媒体回放线680d2的比较示出了用户指定的改变如何在视频的回放期间与对媒体的捕获期间不同地影响视觉内容(例如,经由实况预览630和先前捕获的媒体表示640)。如图表680所示,媒体回放线680d2示出了比媒体捕获线680d1更平滑且/更长的过渡(例如,在十二秒时形成直角)以响应于检测到单轻击输入650o而改变合成景深效果。
转到图6Q,实况预览630(以及先前捕获的媒体表示640)被显示具有用户指定的合成景深效果改变,该改变经由单轻击输入650o被发起,尽管图6Q中John的活动水平680a1大于Jane的活动水平680b1。当发生用户指定的改变的合成现景深效果时,计算机系统600使用修改的一组自动选择标准。该修改的一组自动标准不同于上文在图6B至图6K中所讨论的用于进行自动改变合成景深效果的该组标准(例如,在接收到对用户指定的请求改变合成景深效果的请求之前、在检测到单轻击输入650o之前发生的)。在一些实施方案中,该修改的一组自动选择标准具有比用于进行上述图6B至图6K中所讨论的自动改变合成景深效果的该组标准更高的用于自动改变合成景深效果的阈值。在一些实施方案中,John 632将必须更大声讲话、移动更多、移动得更靠近相机、直接注视相机等达更长的时间段,以便计算机系统600自动改变合成景深效果以相对于Jane 634强调John 632。在一些实施方案中,在响应于检测到单轻击输入650o而改变合成景深效果的应用之后,计算机系统600不改变合成景深效果的应用达预先确定的时间段,而不管个体活动水平如何(例如,除非未检测到个体的面部达预先确定的时间段)。
如图6Q所示,Jane 634已经开始走出该一个或多个相机的视场(例如,走出该场景,如图6Q的实况预览630所示)。当观察图6P至图6Q时,Jane 634在实况预览630(以及先前捕获的媒体表示640)中相对于John 632被强调,而Jane 634正在该一个或多个相机的视场中移动。这表明被应用以相对于其他个体强调某一个体的合成景深效果跟随和/或跟踪被强调的个体。此外,个体指示符(例如,如图6P至图6Q的主要个体指示符672b所示)随着被相应个体指示符围绕的相应个体中的每个个体移动。在一些实施方案中,响应于检测到在实况预览630的不在个体上的位置处的输入,所应用的合成景深效果则不跟随和/或跟踪个体。
在图6R中,Jane 634不在该一个或多个相机的视场中(例如,已经走出该场景)。在图6R中,确定John 632满足该组修改的自动选择标准(例如,因为Jane 634不在该帧中和/或计算机系统600未检测到Jane 634的任何活动,如Jane的活动水平680b1所指示的)。如图6R所示,计算机系统600自动改变了合成景深效果以强调John 632(例如,John 632仅被显示具有自然模糊(例如,没有阴影),而实况预览630的其他部分包括一定量的合成模糊(例如,阴影))。计算机系统600自动改变了合成景深效果以相对于实况预览630的其他部分强调John 632,因为确定John 632满足该组修改的自动选择标准和/或因为Jane没有任何活动水平达预先确定的时间段(例如,1秒)。
图6R1示出了在计算机系统600的FOV中相对于John 632的Jane 634的位置的示例性实施方案。在图6R1中,使用如上文关于图6R所讨论的一种或多种类似技术在十七秒标记处显示实况预览630。在图6R1中,边界601指示FOV的大小,其中计算机系统600的该一个或多个相机可以捕获边界601内部的视觉内容(例如,在包括实况预览630的区域603内)。如图6R1中所示,Jane 634在区域603内。因此,Jane 634被该一个或多个相机捕获,但是Jane634没有足够地定位在区域603内来使Jane 634被该一个或多个相机捕获以显示在实况预览630中。如图6R1中所示,当Jane 634定位在区域603内但在用于显示实况预览630的FOV中的内容之外时,计算机系统600继续跟踪Jane 634达预先确定的时间段(例如,0.1秒至5秒)。在一些实施方案中,虽然Jane 634定位在区域603内但在用于显示实况预览630的FOV中的内容之外(如图6R1中所示),但是如果确定Jane 634不能在对应于实况预览630的可视内容中被捕获,则计算机系统600在该预先确定的时间段之后不跟踪Jane 634。在一些实施方案中,神经网络(例如,在图12中所讨论)在一段时间后仍然跟踪Jane,并且计算机系统600可以提供Jane 634的一个或多个表示(例如,Jane 634的过去表示和/或先前捕获的表示)达第二预先确定的时间段。在一些实施方案中,在第二预先确定的时间段之后,计算机系统600自动切换以强调和/或跟踪在对应于实况预览630的FOV中捕获的视觉内容内的另一个体和/或焦平面。在一些实施方案中,当Jane 634定位在区域603之外(例如,在边界601之外)时,计算机系统600不跟踪Jane 634(例如,和/或不存储与其相对应的标识符)。在一些实施方案中,当Jane 634定位在区域603内并且在FOV中用于显示实况预览的内容之内时,计算机系统600跟踪Jane 634,而不管预先确定的时间段如何。在一些实施方案中,计算机系统600基于计算机系统600具有的关于用户(该用户定位在区域603内但在用于显示实况预览的FOV中的内容之外)的信息(例如,Jane 632已经处于区域603中和/或用于显示实况预览630的内容的FOV之外的时间段,和/或Jane 634在区域603中时Jane 634是否正在向和/或远离用于显示实况预览630的内容移动)自动切换到强调和/或跟踪在对应于实况预览630的FOV中捕获的视觉内容内的另一个体(例如,“John”)和/或焦平面。这使得计算机系统600能够更快地切换为强调进入用于显示实况预览的FOV的部分的个体,因为与计算机系统600没有机会在该个体进入用于显示实况预览的FOV的该部分之前观察该个体的行为的情况相比,计算机系统600(以及任选地,作出自动强调决策的神经网络)具有更多的时间来跟踪该个体并且观察该个体在区域603内但在用于显示实况预览的FOV之外发生的行为,以确定该个体与可以被强调的其他个体相比的相对重要性。
如图6S所示,Jane 634已经走回到该一个或多个相机的视场中(例如,站在该场景中,如由图6S的实况预览630所示)。在图6S中,实况预览630继续被显示具有相对于Jane634强调John 632的合成景深效果,这是由于图6O的单轻击输入650o为第一类型的输入。具体地说,因为图6O的单轻击输入650o为第一类型的输入,所以计算机系统600将合成景深效果的改变视为相对于John 632强调Jane 634的临时用户指定的对合成景深效果的应用的改变。当发生应用合成景深效果的临时用户指定的改变时,在已经发生了合成景深效果的自动改变之后,计算机系统600不会自动将临时改变的应用重新应用于合成景深效果(例如,不管Jane 634已离开对应于实况预览630的FOV中的视觉内容多久)。因此,计算机系统600继续应用合成景深效果以相对于实况预览630的其他部分强调John 632,因为图6O的单轻击输入650o为第一类型的输入,并且在检测到单轻击输入650o之后发生了合成景深效果的自动改变(例如,图6P中所讨论的改变)。
如图6T所示,尽管自显示图6S的实况预览630以来已经过去了四秒,但是实况预览630继续被显示具有相对于Jane 634强调John 632的合成景深效果(例如,如图6S至图6T的602d所指示的)。在图6T中,计算机系统600继续应用相对于Jane 634强调John 632的合成景深效果,因为图6O的单轻击输入650o为第一类型的输入,并且在检测到单轻击输入650o之后发生了合成景深效果的自动改变(例如,图6P中所讨论的改变)。
图6U至图6Y示出了示例性实施方案,其中计算机系统600响应于第二类型的用户输入(例如,用户指定的改变)而改变合成景深效果。如图6U所示,尽管自显示图6S的实况预览630以来已经过去了十秒,但是计算机系统600实况预览630继续被显示具有相对于Jane634强调John 632的合成景深效果(例如,如图6S至图6T的602d所指示的)。在图6U中,出于如上文关于图6S至图6T所讨论的类似原因,实况预览630被显示具有相对于Jane 634强调John 632的合成景深效果。在图6U中,计算机系统600检测双轻击输入650u。
如图6V所示,响应于检测到双轻击输入650u,计算机系统600立即改变合成景深效果以相对于John 632强调Jane 634(例如,如由图6V的实况预览630的阴影所示)。响应于检测到双轻击输入650u,计算机系统600立即改变合成景深效果并且不显示示出合成景深效果改变的过渡动画(例如,出于如上文关于图6P所讨论的类似原因,并且如在三十秒处的680d1所指示的)。
在图6V中,计算机系统600在Jane 634的头部周围显示主要个体指示符678b,在John 632的头部周围显示次要个体指示符674a。值得注意的是,因为响应于检测到不同类型的输入而显示每个相应指示符,所以主要个体指示符678b不同于响应于检测到单轻击输入650o而显示的主要个体指示符672b。具体地说,在图6V中显示主要个体指示符678b,因为确定检测到第二类型的输入(例如,图6U的双轻击输入650u),并且在图6P中显示主要个体指示符672b,因为检测到第一类型的输入(例如,图6O的单轻击输入650o)。此外,计算机系统600显示不同的个体指示符,因为当接收到第二类型的输入时应用了与接收到第一类型的输入时不同类型的跟踪。如上文关于图6O至图6P所讨论的,当接收到第一类型的输入(例如,图6O的单轻击输入650o)时,计算机系统600对所应用的合成景深效果进行临时改变。如上文关于图6O至图6P所讨论的,在已经发生了合成景深效果的自动改变之后,计算机系统600不会自动将临时改变的应用重新应用于合成景深效果。然而,当接收到第二类型的输入(例如,图6U的双轻击输入650u)时,计算机系统600对所应用的合成景深效果进行用户指定的改变。当计算机系统600对所应用的合成景深效果进行用户指定的改变时,在已经发生了合成景深效果的自动改变之后,计算机系统600会自动将用户指定的改变应用到合成景深效果(例如,如下文关于图6Y进一步讨论的)。如图6V所示,因为计算机系统600确定了双轻击输入650V为第二类型的输入,所以计算机系统600显示跟踪指示符694a(例如,“AF跟踪锁定”)。跟踪指示符694a指示计算机系统600将不会自动改变自动聚焦设置(例如,和/或当前应用的合成景深效果)。跟踪指示符694a显示在相机用户界面中并且与图6V的实况预览630同时显示。
返回到图6T至图6V,计算机系统690显示具有合成景深效果中用户指定的改变的动画的先前捕获的媒体表示640(例如,响应于检测到双轻击输入650u而发生)(例如,在所捕获的视频的回放期间)。如图6T至图6V所示,当显示具有合成景深效果中用户指定的改变的先前捕获的媒体表示640时,计算机系统690提供了更平滑的过渡(例如,与显示图6T至图6V的实况预览630时相比),因为计算机系统690具有指示将发生用户指定的改变的信息(例如,出于上文关于图6N至图6P描述的那些的类似原因)。
如图6V的实况预览630所示,Jane 634已经开始走出该一个或多个相机的视场(例如,走出该场景,如图6Q的实况预览630所示),并且合成景深效果随着Jane 634移动(例如,如图6U至图6T所示,并且出于如关于图6P至图6Q所讨论的类似原因)。在图6W中,Jane 634不在该一个或多个相机的视场中(例如,已经走出该场景)。在图6W中,确定John 632满足该组修改的自动选择标准(例如,因为Jane 634不在该FOV中、计算机系统600无法检测到Jane634的面部和/或计算机系统600未检测到Jane 634的任何活动,如Jane的活动水平680所指示的)。如图6W所示,计算机系统600自动改变了合成景深效果以相对于狗638强调John 632(例如,John 632仅被显示具有自然模糊(例如,没有阴影)),该狗已经进入该一个或多个相机的视场。计算机系统600自动改变合成景深效果以相对于狗638强调John 632(例如,出于类似原因,并且使用如上文关于图6W所公开的类似技术)。如图6W所示,因为计算机系统600已经应用了合成景深效果以相对于狗638强调John 632,所以主要个体指示符672a显示在John 632的头部周围,并且次要个体指示符674c显示在狗638的头部周围。
如图6X所示,计算机系统600已经改变了合成景深效果以相对于John 632强调狗638,因为确定狗638满足该组自动选择标准(例如,如图表680上三十四秒左右狗的活动水平680c1高于John的活动水平680a1所指示的)。此处,狗638满足该组自动选择标准,而不是该修改的一组标准,因为Jane 634不在该一个或多个相机的视场中。此外,因为确定狗638满足该组自动选择标准,所以计算机系统600在狗638的头部周围显示主要个体指示符672c,并且在John 632的头部周围显示次要个体指示符674a。
如图6Y所示,Jane 634已经走回到该一个或多个相机的视场中(例如,站在该场景中,如由图6Y的实况预览630所示)。在图6Y中,计算机系统600已经改变了合成景深效果,以相对于该一个或多个相机的视场中的其他个体(例如,John 632、狗638)强调Jane 634。具体地说,因为响应于检测到双轻击输入650u而对合成景深效果应用了用户指定的改变,所以计算机系统600改变了合成景深效果以相对于其他个体强调Jane 634。也就是说,在图6Y中,计算机系统600改变了合成景深效果以相对于其他个体强调Jane 634,而不管在对合成景深效果进行了永久改变之后是否应用了合成景深效果的自动改变(例如,响应于检测到双轻击输入650u)。如图6Y所示,因为已经应用了合成景深效果以相对于其他个体强调Jane634,所以计算机系统600在Jane 634的头部周围显示主要个体指示符678b,并且分别在John 632和狗638的头部周围显示次要个体指示符674a和674c。在一些实施方案中,在图6Y中,计算机系统600基于确定Jane 634在图6R1的区域603之内和/或在图6R1的区域603之内少于预先确定的时间段(例如,0.5秒至5秒)而应用合成景深效果以相对于其他个体强调Jane 634。在一些实施方案中,基于确定Jane 634在图6R1的区域603之外和/或图6R1的区域603之内超过预先确定的时间段,计算机系统600不会应用合成景深效果以相对于其他个体强调Jane 634。
图6Z至图6AB示出了示例性实施方案,其中计算机系统600响应于第三类型的用户输入(例如,用户指定的改变)而改变合成景深效果。如图6Z所示,实况预览630被显示具有相对于媒体中的其他个体强调Jane 634的合成景深效果。在图6Z中,计算机系统600检测狗638上的按压并保持输入650z。在一些实施方案中,在实况预览630上的另一位置处检测到按压并保持输入650z(例如,John 632、Jane 634和狗638未占用的位置、与个体的位置不对应的位置)。
在图6AA中,响应于在狗638上检测到按压并保持输入650z,计算机系统600改变合成景深效果以强调该一个或多个相机的视场的焦平面(例如,因为按压并保持输入为不同于第一类型和第二类型的输入的第三类型的输入)。被强调的焦平面包括与检测到按压并保持输入650z的位置、对象和/或个体相对应的位置、对象和/或个体。因为狗638位于焦平面内,所以狗638相对于实况预览630中的其他个体被强调(例如,如不具有阴影的狗638所指示的)。此外,John 632被显示具有比Jane 634更少的模糊,因为John 632比Jane 634更靠近正被强调的焦平面(例如,如实况预览630的阴影所指示的)。响应于检测到按压并保持输入650z,计算机系统600在与检测到按压并保持输入650z的位置相对应的位置处显示聚焦指示符676。此外,响应于检测到按压并保持输入650z,计算机系统600分别在John 632和Jane 634的头部周围显示次要个体指示符674a和674b。在图6AA中,显示聚焦指示符676以指示该焦平面正在被合成景深效果强调。在一些实施方案中,因为狗638处于焦平面并且当前正被强调,所以显示聚焦指示符676。然而,在一些实施方案中,在狗638的头部周围显示次要个体指示符674c。
在图6AB中,实况预览630示出了John 632、Jane 634,以及远离当前正被强调的焦平面移动的狗638(例如,如聚焦指示符676所指示的)。如图6AB所示,John 632、Jane 634和狗638被显示具有合成量的模糊,因为他们不在当前正被强调的焦平面内。在一些实施方案中,实况预览630的在焦平面内的一个或多个部分被强调(例如,在响应于检测到按压并保持输入650z而强调该焦平面时)。在图6AB中,计算机系统600检测停止控件616上的轻击输入650ab。
图6AC至图6AQ示出了显示和编辑在图6B至图6AB中捕获的视频的示例性实施方案(例如,响应于检测到轻击输入650b2)。在图6AC中,响应于检测到轻击输入650ab,计算机系统600停止对视频的捕获并保存所捕获的视频(例如,在图6B至图6AB中捕获的)。如图6C所示,响应于检测到轻击输入650ab,计算机系统600更新媒体集合624以显示所捕获的视频的表示(在图6B至图6AB中捕获的)。在一些实施方案中,计算机系统600检测一个或多个输入并且导航到图6AD中所示的电影视频编辑用户界面。在一些实施方案中,该一个或多个输入包括指向媒体集合624的输入。在一些实施方案中,响应于检测到媒体集合624上的输入,显示所捕获的视频的表示,并且显示用于编辑所捕获的视频的控件。在一些实施方案中,该一个或多个输入包括在用于编辑所捕获的视频的控件上的输入。在一些实施方案中,响应于检测到指向用于编辑所捕获的视频的控件的输入,计算机系统600显示图6AD的电影视频编辑用户界面。
图6AD示出了显示电影视频编辑用户界面的计算机系统600,该电影视频编辑用户界面包括控件区域662、媒体表示660、媒体导航元素664和媒体编辑模式控件684。控件区域662定位在媒体表示660上方并且包括完成控件662a、重做控件662b1、撤销控件662b2、电影视频控件662c、合成景深效果(SDOFE)控件662d、深度指示符控件662e、静音控件662f和取消控件662g。在一些实施方案中,响应于检测到指向完成控件662a的输入,计算机系统600保存在电影视频编辑用户界面已经被显示时已经被编辑的媒体的表示。在一些实施方案中,当没有对媒体进行改变和/或修改时(例如,由媒体表示660所表示的媒体),计算机系统600将完成控件662a显示为不可选择的。在一些实施方案中,当使用电影视频编辑用户界面对媒体进行至少一次改变和/或修改时,计算机系统600将完成控件662a显示为可选择的。在一些实施方案中,当完成控件662a不可选择时,计算机系统600不会响应于检测到指向完成控件662a的输入而保存媒体的表示。在一些实施方案中,响应于检测到指向重做控件662b1的输入,计算机系统600撤销最近的不当操作。在一些实施方案中,响应于检测到指向撤销控件662b2的输入,计算机系统600撤销已经对媒体进行的最近编辑(并且在一些实施方案中,保留所有编辑)。在一些实施方案中,响应于检测到指向电影视频控件662c的输入,计算机系统600执行一个或多个操作,如下文关于图6AP至图6AQ所述。在一些实施方案中,SDOFE控件662d指示计算机系统600正在显示和/或当前被配置为经由媒体表示660显示媒体的帧,其中已经手动向该帧应用合成景深效果(例如,如上文关于图6O至图6AB所讨论的合成景深效果中用户指定的改变)。在一些实施方案中,SDOFE控件662d指示计算机系统600正在显示和/或当前被配置为经由媒体表示660显示媒体的帧,其中已经自动向该帧应用合成景深效果(例如,如上文关于图6B至图6N所讨论的合成景深效果中的自动改变)。在一些实施方案中,响应于检测到指向SDOFE控件662d的输入,计算机系统600停止使用媒体中合成景深效果的用户指定的改变来显示媒体,同时继续使用合成景深效果的自动改变来显示媒体。在一些实施方案中,响应于检测到指向SDOFE 662d的输入,计算机系统600修改媒体表示660,使得合成景深效果中的一个或多个用户指定的改变不应用于该媒体的一个或多个帧,同时维持合成景深效果中自动改变的应用(例如,如下文关于图6AZ至图6BC进一步讨论的)。在一些实施方案中,响应于检测到指向SDOFE控件662d的输入,计算机系统600修改媒体表示660,使得合成景深效果中的一个或多个自动改变不应用于该媒体的一个或多个帧,同时维持对合成景深效果的应用的用户指定的改变(例如,用户指定的改变,诸如关于图6O至图6AB讨论的那些)。在一些实施方案中,响应于检测到指向深度指示符控件662e的输入,计算机系统600执行如上文关于图6AD至图6AG所讨论的一个或多个操作。在一些实施方案中,响应于检测到指向静音控件662f的输入,计算机系统600切换配置计算机系统600以在回放媒体时输出声音的设置(例如,开/关)。在一些实施方案中,响应于检测到指向取消控件662g的输入,计算机系统600显示用于取消对媒体进行的一个或多个编辑的确认屏幕。
如图6AD所示,媒体表示660是在图6B至图6AB中捕获的视频的帧的表示(“捕获的视频”)。在图6AD中,媒体表示660是视频的第一帧并且在捕获到图6B的实况预览630之前被捕获(例如,在0:00期间捕获到实况预览630)。值得注意的是,因为媒体表示660被显示具有相对于Jane 634强调John 632的合成景深效果,所以媒体表示660包括John 632的头部周围的主要个体指示符672a和Jane 634的头部周围的次要个体指示符674b(例如,出于如上文关于图6B所讨论的类似原因)。因此,计算机系统600在对视频的捕获(例如,实况预览630)期间以及在显示先前捕获的视频的表示(例如,媒体表示660)时显示个体指示符(例如,主要个体指示符和/或次要个体指示符)。如本文所示,计算机系统600在没有回放媒体时(例如,图6B的媒体表示660)和在媒体的回放期间(例如,下文讨论的图6AK的媒体表示660)显示个体指示符。在一些实施方案中,计算机系统600在没有回放媒体时和媒体(例如,先前捕获的媒体表示640)的回放期间不显示个体指示符(和/或任何个体指示符)。
如图6AD所示,媒体编辑模式控件684包括电影视频模式编辑控件684a、视觉特性编辑模式控件684b、滤镜编辑模式控件684c以及纵横比编辑模式控件684d。如图6AD中所示,电影视频模式编辑控件684a被显示为被选择(例如,如图6AD中被显示在电影视频模式编辑控件684a下方的选择指示符684a1所指示的),这指示显示了电影视频编辑用户界面。在一些实施方案中,响应于检测到指向滤镜编辑模式控件684c或纵横比编辑模式控件684d的输入,计算机系统600显示与用于编辑视频的一个或多个帧的选定控件(例如,输入指向的控件)相对应的一个或多个控件。在一些实施方案中,响应于检测到指向滤镜编辑模式控件684c或纵横比编辑模式控件684d的输入,停止显示在电影视频编辑媒体用户界面中显示的一个或多个用户界面对象。
如图6AD所示,媒体导航元素664包括擦除区域664a、效果区域664b和回放控件668a。擦除区域664a包括所捕获的视频中的帧的多个表示、播放头664a1、开始裁剪控件664a2、结束裁剪控件664a3。如图6AD所示,播放头664a1显示在与所捕获视频的初始帧表示的开始相对应的位置(例如,最远到擦除区域664a中的左侧的帧)。因为播放头664a1显示在与初始帧表示的开始相对应的位置处(例如,所捕获的视频的零秒处),所以图6A的媒体表示660是所捕获的视频的初始帧表示(例如,在视频中与播放头664a1的位置相对应的时间)。开始裁剪控件664a2和结束裁剪控件664a3指示所捕获的视频的一部分,该部分将响应于计算机系统600接收到保存经编辑媒体的请求(例如,对完成控件662a的选择)而被裁剪和保存。具体地说,将被裁剪的视频的该部分是所捕获的视频的在开始裁剪控件664a2与结束裁剪控件664a3之间的部分(和/或从视频中与擦除区域664a中的开始裁剪控件664a2的位置相对应的时间到所捕获的视频中与擦除区域664a中的结束裁剪控件664a3的位置相对应的时间)。
如图6AD所示,效果区域664b包括时间条664b1和改变指示符686a、686b、688c、686d、688e、686f、686g和688h(“改变指示符”)。时间条664b1具有多个刻度标记,其中每个刻度标记与所捕获的视频中的时间相对应。在时间条664b1上显示的刻度标记覆盖所捕获的视频的全长的至少一部分。在图6AD中,每个改变指示符被显示在时间条664b1上与所捕获的视频中的时间相对应的刻度标记附近(例如,在其顶部和/或邻近),在该时间计算机系统600改变被应用于正被捕获的视频的视频内容的合成景深效果的应用。在图6AD中,效果区域664b已经被复制到图表680上方(“效果区域664b-扩展”)以指示改变指示符与正被应用于视频的视觉内容的合成景深效果的改变如何相对应。在一些实施方案中,相对于正被应用于视觉内容的合成景深效果的实际应用发生改变的时间(例如,在正在捕获视频时和/或在已经捕获视频之后),在开始、结束、中间(平均)位置(例如,相对于时间条664b1的刻度标记)处显示一个或多个改变指示符。在一些实施方案中,这些改变指示符中的每个改变指示符显示在擦除区域664a中帧的相应表示下方,该相应表示与将合成景深效果应用于表示相应帧的内容的时间相对应。在一些实施方案中,擦除区域中的帧的相应表示被显示具有在捕获擦除区域中的相应帧的时间期间应用的合成景深效果(例如,使得擦除区域中的帧包括模糊)。在一些实施方案中,帧的这些表示不包括模糊和/或示出正被应用的合成景深效果。
值得注意的是,改变指示符686a、686b、686d、686f和686g(“自动改变指示符”)表示由计算机系统600自动进行的合成景深效果的应用中的改变。下面提供表1(改变指示符对应表)以快速总结图6AD的这些改变指示符中的每个改变指示符与所捕获的视频的连接。
Figure BDA0003774213240000761
Figure BDA0003774213240000771
表1:改变指示符对应表
如图6AD所示,使用X来表示自动改变指示符,同时使用O来表示用户指定的改变指示符。自动改变指示符的与用户指定的改变指示符不同地表示,因为自动改变指示符的视觉外观不同于用户指定的改变指示符。此外,这些用户指定的改变指示符中的每个用户指定的改变指示符与从用户指定的改变延伸到下一个改变(例如,立即改变到用户指定的改变的右侧和/或改变到效果区域664b的右端)的过渡指示符(例如,688c1、688e1和/或688h1)一起显示。在一些实施方案中,过渡指示符表示在媒体期间对在相应时间段期间发生的媒体帧应用用户指定的改变的相应时间段。在一些实施方案中,可以使用一种或多种其他技术(例如,使用不同颜色、大小、改变、文本、位置等)来区分自动改变指示符与用户指定的改变指示符。在一些实施方案中,显示用户指定的改变指示符,并且不显示自动改变指示符和/或反之亦然。在一些实施方案中,计算机系统600包括用于停止显示自动改变和/或用户指定的改变指示符的可选选项,同时维持显示用户指定的改变指示符和/或反之亦然(例如,SDOFE控件662d)。在一些实施方案中,在对视频的捕获期间发生的用户指定的改变指示符与在视频已经被捕获之后(例如,在编辑视频时)发生的用户指定的改变指示符不同地显示(例如,被显示具有不同的视觉外观)。在图6AD处,计算机系统600检测深度指示符控件662e上的轻击输入650ad。
如图6AE所示,响应于检测到轻击输入650ad,计算机系统600在媒体编辑模式控件684的左侧显示深度控件682(例如,或当计算机系统600处于纵向取向时在纵向取向的上方)。深度控件682是被显示具有深度控件值682a的滑块(例如,显示在图6AD的深度指示符控件662e中)。在一些实施方案中,响应于检测到轻击输入650ad,计算机系统600停止显示擦除区域664a和效果区域664b(例如,擦除区域664a和效果区域664b在深度控件682不显示时不显示,和/或在深度控件682显示时显示)。在图6AE处,计算机系统600检测深度控件682上的向右轻扫输入650ae。
在图6AF中,响应于检测到向右轻扫输入650ae,计算机系统600将深度控件值682a从4.5f制光圈值改变为1.4f制光圈值,这增加了应用于媒体表示660的不包括John 632的部分(例如,不在焦点上)的模糊,John当前正被已经应用于与图6AF的媒体表示660相对应的帧的合成景深效果强调(例如,在焦点上)。在图6AF中,响应于检测到向右轻扫输入650ae,John 632不被显示具有附加量的模糊(例如,当与图6AE的John 632相比时不是较深的),但是Jane 634和媒体表示660的背景和前景部分被显示具有附加量的模糊(例如,当与图6AE中每个相应部分的模糊程度相比时是较深的)。因此,对深度控件682的调整使得所应用的合成景深效果被调整。在一些实施方案中,对深度控件682的调整使得仅对在执行调整时经由媒体表示660显示的所捕获的视频的帧的表示进行调整。在一些实施方案中,对深度控件682的调整引起对所捕获的视频的帧(例如,所有帧和/或大部分帧)的调整,而不管已经将合成景深效果(例如,全局改变)应用于还是没有应用于所捕获的视频的帧。在一些实施方案中,对深度控件682的调整引起对所捕获的视频的帧的调整,该调整是已经应用的合成景深效果的相同应用(例如,其中John 632被图6AF中的合成景深效果强调的视频的帧和/或对应于和/或发生在图6AF的媒体表示660的合成景深效果的改变之后但在合成景深效果的不同的改变之前(例如,在图6AF中的零秒与三秒之间)的视频的帧)。在图6AF中,计算机系统600检测深度控件682上的轻击输入650af1和/或深度控件682上的向左轻扫输入650af2。
如图6AF1所示,响应于检测到轻击输入650af1,计算机系统600停止显示深度控件682并且继续显示具有与在检测到轻击输入650af1之前相同模糊量的媒体表示660。此外,计算机系统600更新深度指示符控件662e的显示以包括深度控件682先前被设置的值(例如,1.4)(例如,响应于检测到向右轻扫输入650ae)。在一些实施方案中,计算机系统600更新深度指示符控件662e的显示以包括响应于检测到向右轻扫输入650ae而选择的值(例如,1.4)。
如图6AG所示,响应于检测到向左轻扫输入650af2,计算机系统600将深度控件值682a从1.4f制光圈值改变为4.5f制光圈值,并且减少对媒体表示660的不在焦点上的部分所应用的模糊(例如,当与图6AF相比时,由较浅的阴影所指示的)。在一些实施方案中,本文所述的涉及深度控件682的技术也用于深度指示符602e(例如,在对媒体的捕获之前/期间,如上文关于图6B所讨论的)。在图6AG中,计算机系统600检测深度指示符控件662e上的轻击输入650ag。如图6AH所示,响应于检测到轻击输入650ag,计算机系统600停止显示深度控件682并且继续显示具有与在检测到轻击输入650ag之前相同模糊量的媒体表示660。此外,计算机系统600更新深度指示符控件662e的显示以包括深度控件682先前被设置的值(例如,4.5)(例如,响应于检测到向左轻扫输入650af2)。如图6AH所示,计算机系统600检测媒体回放控件668a上的轻击输入650ah。响应于检测到轻击输入650ah,计算机系统600发起所捕获的视频的回放。
图6AI至图6AO示出了在所捕获的视频期间创建用户指定的改变的示例性实施方案。在图6AI中,计算机系统600正在回放所捕获的视频,这由正在显示的暂停回放控件668b和停止显示的图6AH的媒体回放控件668a来指示。如图6AI所示,播放头664a1显示在对应于在所捕获的视频的持续时间内显示七秒的帧的位置处(由显示在播放头664a1上方的经过时间指示符664c所指示的),并且媒体表示660已经被更新为在所捕获的视频的持续时间内显示七秒的帧的表示。具体地说,媒体表示660对应于图6K的实况预览630(例如,表示相同帧),其中应用对合成景深效果的自动改变以相对于Jane 634强调John 632。因此,图6AI的媒体表示660包括在John632的头部周围的主要个体指示符672a和Jane 634的头部周围的次要个体指示符674b以反映所应用的合成景深效果。在图6AI中,计算机系统600在媒体回放的七秒标记处检测Jane 634上的单轻击输入650ai。
在图6AJ中,响应于检测到单个轻击输入650ai,计算机系统600改变合成景深效果以相对于John 632强调Jane 634。如图6AJ所示,已经将合成景深效果应用于视频的帧的表示,该帧在所捕获的视频中的八秒标记处显示(例如,如经过时间指示符664c所指示的)。尽管图6AJ示出了在检测到单轻击输入650ai之后发生的视频的帧的表示,但是计算机系统600改变合成景深效果,该合成景深效果已经被应用于经编辑媒体的在所捕获的视频中的五秒标记(例如,当检测到单轻击输入650ai时)至十二秒标记之间的所有帧(例如,当在所捕获的视频中发生下一个改变为合成景深效果时,如用户指定的改变的表示688C所指示的)。图表680的编辑媒体回放线680d3还指示何时和如何响应于检测到单轻击输入650ai而改变合成景深效果。如图表680所示,编辑媒体回放线680d3已经与媒体回放线680d2分离,以指示计算机系统600响应于检测到单轻击输入650ai而改变了合成景深效果的应用以及何时发生了改变。具体地说,编辑媒体回放线680d3过渡为定位在活动跟踪器680b(例如,“Jane的跟踪器”)上五秒标记与十二秒标记之间,因为计算机系统600响应于检测到单轻击输入650ai而用用户指定的改变指示符688i替换图6AI的自动改变指示符686b。
如图6AJ所示,响应于检测到单轻击输入650ai,计算机系统600停止显示图6AI的自动改变指示符686b,并且在曾显示自动改变指示符686b的位置处显示用户指定的改变指示符688i(例如,与过渡指示符688i1一起显示)。因此,在一些实施方案中,在对媒体的编辑期间用户指定的改变可以替换在对媒体的捕获期间和/或在对媒体的编辑期间发生的自动和/或用户指定的改变。在一些实施方案中,计算机系统600检测视频上的帧的表示上的相应输入,该帧的表示不对应于视频中合成景深效果的改变发生的相应时间,并且响应于检测到相应输入,计算机系统600显示附加的用户指定的改变指示符。在一些实施方案中,计算机系统600显示附加的用户指定的改变指示符,同时继续显示其他改变指示符。在一些实施方案中,响应于检测到相应输入,计算机系统600将合成景深效果的应用(例如,基于输入)改变为从视频中的相应时间开始的视频的多个帧。在一些实施方案中,响应于检测到单轻击输入650ai,计算机系统600显示过渡指示符688i1从用户指定的改变指示符688i的位置逐渐填充到下一个改变指示符(例如,用户指定的改变指示符688c)的动画(例如,通过从过渡指示符的右边缘扩展来逐渐增加大小)。在图6AJ中,计算机系统600检测暂停回放控件668b上的轻击输入650aj。响应于检测到轻击输入650aj,计算机系统600暂停媒体的回放。
如图6AK所示,媒体表示660被显示具有与视频的十秒标记相对应的帧的表示(例如,如播放头664a1和经过时间指示符664c所指示的)。此外,回放控件668a显示在图6AJ中先前显示暂停回放控件668b的位置处。在图6AK中,媒体表示660是所捕获的媒体中与图6AL的实况预览630相对应的相同帧的表示。值得注意的是,图6AK的媒体表示660不同于图6AL的实况预览630,这是由于媒体表示660是具有被应用以相对于John 632强调John634的合成景深效果的帧,而实况预览630是具有被应用以相对于Jane 634强调John 632的合成景深效果的帧。当计算机系统600改变由于在视频的帧(例如,视频的帧的表示)上检测到的输入而改变了景深效果的应用时,计算机系统600还改变了应用于在接收到输入的视频的帧之后出现的视频的帧的景深效果的应用。在图6AK中,计算机系统600检测用户指定的改变指示符688h上的轻击输入650ak。
如图6AL所示,响应于检测到轻击输入650ak,计算机系统600在用户指定的改变指示符688h上方显示播放头664a1。通过在用户指定的改变指示符688h上方的播放头664a1,在与所捕获的视频中发生用户指定的改变(例如,由用户指定的改变指示符688H表示的用户指定的改变)的时间相对应的位置处显示播放头664a1。响应于检测到轻击输入650ak,计算机系统600将媒体表示660更新为当发生用户指定的改变时显示的帧的表示(例如,如图6AL的媒体表示660所指示的,该媒体表示是图6Z的实况预览630,其中应用了合成景深效果以强调图6AA的焦平面和/或实况预览630)。在图6AL中,计算机系统600检测双轻击输入650al。
如图6AM所示,响应于检测到双轻击输入650al,计算机系统600改变合成景深效果以相对于Jane 634强调John 632。此外,计算机系统600分别在John 632的头部周围显示主要个体指示符678a,在Jane 634和狗638的头部周围显示次要个体指示符674b-674c。因为双轻击输入650al是双轻击输入,所以计算机系统600应用合成景深效果以相对于Jane 634强调John 632,使得只要可以在所捕获的视频的视觉内容中检测到(例如,使用如上文关于检测到双轻击输入650u所述的一种或多种技术)John 632(例如,John 632的面部),计算机系统600就不会自动改变所应用的合成景深效果。值得注意的是,计算机系统600响应于检测到相同类型的输入而执行相同的操作(例如,以相同的方式改变合成景深效果、显示相同类型的指示符),而不管计算机系统600正在捕获媒体还是/或者编辑媒体(例如,响应于检测到单轻击输入650u和/或650ai、响应于检测到双轻击输入650u和/或650al、响应于检测到按压并保持输入而执行上文所描述的相同操作)。如图表680所示,编辑媒体回放线680d3已经在四十秒标记之后与媒体回放线680d2分离,以指示计算机系统600响应于检测到双轻击输入650al而改变了合成景深效果的应用以及何时发生了改变。具体地说,编辑媒体回放线已经被改变,使得编辑媒体回放线680d3在活动跟踪器680a(例如,“John的跟踪器”)上,以表示在四十二秒标记(例如,期间检测到双轻击输入650al的媒体的帧)之后,John 632在经编辑媒体中正在被强调和跟踪(而不是选定焦平面)。在一些实施方案中,响应于检测到双轻击输入650al,计算机系统600用新的用户指定的改变指示符替换用户指定的改变指示符688h。
图6AN示出了显示媒体表示660的计算机系统600,该媒体表示包括所捕获的视频的在图6AM的先前捕获的媒体表示660之后发生的表示。如图6AN所示,计算机系统600已经应用合成景深效果以在由媒体表示660所示的媒体的表示中相对于Jane 634强调John 632(例如,出于如上文关于图6AK所讨论的类似原因,媒体表示660不同于图6AB的实况预览630)。
图6AO至图6AP示出了示例性实施方案,其中显示了用于移除合成景深效果的应用的改变的选项。在图6AN中,计算机系统600检测用户指定的改变指示符688h上的轻击输入650an。如图6AO所示,响应于检测到轻击输入650a,计算机系统600邻近用户指定的改变指示符688h显示删除选项688h2并且取消强调擦除区域664a和效果区域664b(例如,变灰)。此处,计算机系统600取消强调擦除区域664a和效果区域664b(例如,变灰)以指示其他部分(例如,不包括删除选项669h1)不可用、非活动和/或不响应于用户输入。计算机系统600使其他部分不可用、非活动和/或不响应于用户输入,以避免用户在尝试选择删除选项688h2时使得计算机系统执行意外操作的可能性。在一些实施方案中,响应于检测到在不对应于删除选项688h2的位置处的输入,计算机系统600重新强调擦除区域664a和效果区域664b,并且/或者停止显示删除选项688h2。在图6AO中,计算机系统600检测删除选项688h2上的轻击输入650ao。如图6AP所示,响应于检测到轻击输入650ao,计算机系统600改变相对于Jane634强调John 632的合成景深效果的应用,并且重新强调擦除区域664a和效果区域664b(例如,使擦除区域664a和效果区域664b活动)。当计算机系统600改变相对于Jane 634强调John 632的合成景深效果的应用时,计算机系统600恢复到如果没有发生所移除的用户指定的改变则将应用的合成景深效果的应用。因此,在图6AP中,计算机系统600更新媒体表示660以相对于John 632强调Jane 634,因为响应于检测到双轻击输入650u(例如,使用上文关于图6U至图6Y所描述的一种或多种技术)应用了合成景深效果的应用的永久改变。如图表680所示,编辑媒体回放线680d3已经改变以指示计算机系统600响应于检测到轻击输入650an而改变了合成景深效果的应用以及何时发生了改变。在图6AP中,计算机系统600检测电影视频控件662c上的轻击输入650ap1。
如图6AQ所示,响应于检测到轻击输入650ap1,计算机系统600以非活动状态显示电影视频控件662c,并且停止对媒体编辑用户界面中所捕获的视频(例如,由不具有阴影的媒体表示660所指示的)应用合成景深效果。在一些实施方案中,响应于检测到轻击输入650ap1,计算机系统600将改变指示符显示为不可选择(例如,变灰)或停止显示这些改变指示符中的一个或多个改变指示符。在一些实施方案中,响应于检测到指向图6AQ的电影视频控件662c的输入,计算机系统600向媒体编辑用户界面中所捕获的视频重新应用合成景深效果。在一些实施方案中,响应于在完成控件662a上检测到轻击输入,计算机系统600保存不具有所应用的合成景深效果的视频的版本(例如,仅对于视频中的一个或多个帧和/或所有帧具有自然模糊的所捕获的视频的版本)。在一些实施方案中,响应于检测到轻击输入650ap1,计算机系统600停止在区域664d中显示效果区域664b。在一些实施方案中,计算机系统600向下移动擦除区域664a,其中擦除区域664a的一部分向下移动到区域664d中。在一些实施方案中,响应于检测到轻击输入650ap1,计算机系统600扩展媒体表示660和/或擦除区域664a的大小。在一些实施方案中,响应于检测到轻击输入650ap1,计算机系统600取消强调效果区域664b和/或将效果区域664b显示为非活动。
图6AR示出了其中跨越擦除区域664a拖动播放头664a1使得播放头664a1对齐到与改变指示符相对应的位置的示例性实施方案。如图6AR所示,在位置654a处检测到向右轻扫输入650ar,计算机系统600显示播放头664a1位于位置654a,因为确定位置654a不在距与用户指定的改变指示符688c(“改变指示符位置”)相对应的位置的第一预先确定的距离内(例如,并且确定播放头664a1没有显示在该改变指示符位置处)。当在位置654b处检测到向右轻扫输入650ar时,计算机系统600在位于位置654b之前的改变位置处(例如,高于用户指定的改变指示符688c)显示播放头664a1,因为确定位置654b在距改变指示符位置的第一预先确定的距离内(例如,并且确定播放头664a1没有显示在改变指示符位置处)。如图6AR所示,当播放头664a1显示在改变位置处时,计算机系统发出输出656(例如,触觉输出(例如,振动)、声音)。当在位置654c处检测到向右轻扫输入650ar时,计算机系统600继续在改变位置处显示播放头664a1,因为确定位置654c不在距改变指示符位置的第二预先确定的距离内(例如,并且确定在改变指示符位置处显示了播放头664a1)。当在位置654d处检测到向右轻扫输入650ar时,计算机系统600在位置654d处显示播放头664a1,因为确定位置654d在距改变指示符位置的第二预先确定的距离内(例如,并且确定在改变指示符位置处显示了播放头664a1)。因此,在一些实施方案中,当播放头靠近改变指示符时,播放头会对齐到与改变指示符相关联的位置。此外,在一些实施方案中,播放头停留在与改变指示符相关联的位置处,直到播放头与改变指示符相距一定距离。在一些实施方案中,第一预先确定的距离和/或第二预先确定的距离为非零距离和/或大于距改变位置的一定数量刻度标记(例如,2个至5个刻度标记)的距离。
图6AS至图6AU示出了示例性实施方案,其中计算机系统600从被配置为在电影摄像机模式下操作转变为被配置在人像相机模式下操作。如图6AS所示,计算机系统600被配置为在电影摄像机模式下操作(例如,由处于活动状态的电影视频模式控件620e所指示的),并且在被配置为在电影摄像机模式下操作时,计算机系统600使用如上文关于图6B所述的一种或多种技术来显示相机用户界面。具体地说,如图6AS所示,计算机系统600正在向由计算机系统600的该一个或多个相机捕获的视觉内容应用合成景深效果以相对于Jane634强调John 632(例如,如图6AS中实况预览630的阴影所指示的)。如图6AS所示,计算机系统600在John 632的头部周围显示主要个体指示符672a,在Jane 634头部周围显示次要个体指示符674b。在图6AS中,计算机系统600检测相机模式控件620上的向左轻扫输入650。
如图6AT所示,响应于检测到向左轻扫输入650,计算机系统600向左移动相机模式控件620,使得在相机用户界面的中间显示人像模式控件620b。在图6AT处,计算机系统600将人像模式控件620b显示为被选择(例如,粗体)并且停止显示电影视频模式控件620e(例如,这指示电影视频模式控件620e没有被选择)。此外,响应于检测到向左轻扫输入650as,计算机系统600从被配置为在电影摄像机模式下操作转变为人像相机模式。如图6AT所示,响应于检测到向左轻扫输入650,计算机系统600压缩实况预览630,其中图6AT的实况预览630更小并且具有不同于图6AS的实况预览630的纵横比。除了压缩实况预览630之外,计算机系统600还被更新以包括照明效果控件618。照明效果控件618指示将自然光效果应用于实况预览630(例如,如自然光控件618a和正被显示的自然光指示符618a1所指示的)。在一些实施方案中,当将自然光效果应用于实况预览630时,在捕获媒体时使用/应用散景效果和/或照明效果。在一些实施方案中,对照明效果控件618的调整也反映在实况预览630中。
如图6AT所示,计算机系统600不显示任何个体指示符(例如,主要个体指示符672a、次要个体指示符674b)以指示相应个体正在/没有被强调。当在人像相机模式下操作时,计算机系统600不应用合成景深效果以相对于一个个体强调另一个体。然而,计算机系统600在以人像相机模式操作时基于所选择的自然光控件618a(例如,由图6AT的实况预览630的阴影示出)来应用散景效果和/或照明效果。在图6AT中,计算机系统600检测实况预览630上的按压并保持输入650。
如图6AU所示,响应于检测到按压并保持输入650at,计算机系统600显示聚焦并曝光控件696,该聚焦并曝光控件包括曝光控件指示符696a1。在显示聚焦并曝光控件696时,计算机系统600还在指示符区域602中显示聚焦设置指示符694c(“AE/AF锁定”),这指示计算机系统600将不允许自动曝光设置和自动聚焦设置自动改变。在图6AU中,响应于检测到按压并保持输入650at,计算机系统600使显示的部分模糊,使得计算机系统600聚焦于与接收到按压并保持输入650at的位置相对应的位置,并且使该区域的其他部分模糊。在一些实施方案中,响应于在实况预览630上检测到轻扫输入,计算机系统600基于该轻扫输入的量值和方向来调整曝光设置。
响应于检测到按压并保持输入,计算机系统600被配置为聚焦于FOV中的特定位置,而不管计算机系统600在电影相机模式下操作(例如,如上文关于图6Z至图6AA中检测到按压并保持输入650z所讨论的)还是人像相机模式(例如,如上文关于图6AS至图6AU中的向左轻扫输入650as所讨论的)。此外,图6AU的聚焦并曝光控件696的视觉外观看起来类似于图6AA的聚焦指示符676。然而,聚焦并曝光控件696包括曝光控制指示符696a1,而聚焦指示符676不包括。此外,图6AU的曝光控件指示符696a1也不同于聚焦控件指示符694b。曝光控件指示符696a1指示计算机系统600已经锁定聚焦设置(例如,在图6AU中应用的散景效果)和曝光设置,而聚焦控件指示符694b仅指示计算机系统600已经锁定聚焦设置(例如,在图6AA中应用的合成景深效果)。因此,在计算机系统600在电影摄像机模式下操作时,计算机系统600显示一个控件,该控件指示计算机系统600被配置为聚焦于特定位置并且会允许计算机系统600调整和/或锁定用于捕获媒体的曝光设置(例如,如上文关于图6Z至图6AA所讨论的)。此外,在计算机系统600在人像相机模式下操作时,计算机系统600显示一个控件,该控件指示计算机系统600被配置为聚焦于特定位置并且允许计算机系统600调整和/或锁定用于捕获媒体的曝光设置(例如,如上文关于图6AS至图6AU所讨论的)。
图6AV至图6AY示出了其中在编辑媒体时移除应用合成景深效果的自动改变的示例性实施方案。回看图6AP,计算机系统600检测包括取消控件662g上的轻击输入650ap2的一个或多个输入(例如,作为如上文关于图6AP所讨论的检测到轻击输入650ap1的另选方案)。转到图6AV,响应于检测到包括轻击输入650ap2的该一个或多个输入,计算机系统600丢弃先前对媒体作出的改变(例如,对上文关于图6AD至图6AP所讨论的一个或多个合成景深效果的应用的改变)。换句话说,计算机系统600将媒体重置为该媒体在图6AD至图6AP中被编辑之前和/或在其被捕获之后所处的状态。因此,在图6AV中,计算机系统600重新显示图6AD的电影视频编辑用户界面,该电影视频编辑用户界面另外还包括改变指示符686a、686b、688c、686d、688e、686f、686g和688h(如上文关于图6A至图6AC所讨论的自动和用户指定的合成景深改变)。在图6AV处,计算机系统600检测自动改变指示符686b上的轻击输入650av。
如图6AW所示,响应于检测到轻击输入650av,计算机系统600将媒体表示660更新为在媒体中的七秒标记处出现的媒体的帧的表示(例如,与由自动改变指示符686b指示的合成景深的自动改变的发生相对应的媒体的帧)。如图6AW的媒体表示660所示,计算机系统600已经自动应用合成景深效果以在媒体中的七秒标记处相对于Jane 634强调John 632。在图6AW中,计算机系统600检测自动改变指示符686b上的轻击输入650aw(或按压并保持输入)。如图6AX所示,响应于检测到轻击输入650aw,计算机系统600邻近自动改变指示符686b显示删除选项686b2,并且取消强调擦除区域664a和效果区域664b(例如,变灰)(例如,使用如上文关于图6AN至图6AO所讨论的一种或多种类似技术)。在图6AX处,计算机系统600检测删除选项686b2上的轻击输入650ax。
如图6AY所示,响应于检测到轻击输入650ax,计算机系统600移除图6AX的自动改变指示符686b,以及对在媒体中的七秒标记处所应用的合成景深效果的自动改变。作为移除对合成景深效果的自动改变的一部分,计算机系统600更新媒体表示660以示出在媒体中的七秒标记处Jane 634相对于John 632被强调。此处,Jane 634相对于John 632被强调,因为与自动改变指示符686a相对应的自动景深效果(例如,在七秒标记之前应用的最新合成景深效果)现在被应用于在媒体中的七秒标记处出现的媒体的帧(例如,如关于图6D至图6G所讨论的)。此外,还应当理解,对应于自动改变指示符686a的自动合成景深效果应用于在对应于自动改变指示符686a的时间(例如,4秒)与对应于用户指定的改变指示符688c的时间(例如,12秒)之间捕获的媒体的其他帧。因此,当移除了自动改变指示符686b时,计算机系统600将对应于自动改变指示符686a的合成景深效果应用到先前应用了对应于自动改变指示符686b的合成景深效果的媒体帧。如图6AY的图表680所示,编辑媒体回放线680d3在六秒标记与十秒标记之间已经与媒体回放线680d2分离,以指示响应于检测到轻击输入650ax而发生的合成景深效果的改变(例如,编辑媒体回放线680d3在图6AY中的六秒标记与十秒标记之间的活动跟踪器680b上为“Jane的跟踪器”,其不同于在图6AX中的对应时间帧期间编辑媒体回放线680d3的位置)。
图6AZ至图6BC示出了其中计算机系统600检测SDOFE控件662d上的一个或多个输入的示例性实施方案。在图6AY中,计算机系统600检测用户指定的改变指示符688h上的轻击输入650ay。如图6AZ所示,计算机系统600将播放头664a1从七秒标记向右移动到四十二秒标记并更新媒体表示660以显示与四十二秒标记相对应的媒体的帧(例如,与用户指定的改变指示符688h相对应的帧)。如图6AZ所示,媒体表示660具有被应用以强调焦平面的合成景深效果(例如,如上文关于图6Z至图6AB所讨论的)。在图6AZ中,因为狗638位于焦平面内(例如,由聚焦指示符676所指示的),所以狗638相对于媒体表示660中的其他个体被强调(例如,如媒体表示660中不具有阴影的狗638所指示的)。此外,John 632被显示具有比Jane634更少的模糊,因为John 632比Jane 634更靠近正被强调的焦平面(例如,如媒体表示660的阴影所指示的)。在图6AZ中,计算机系统600检测SDOFE控件662d上的轻击输入650az。
如图6BA所示,响应于检测到轻击输入650az,计算机系统600停止在经编辑媒体中应用与用户指定的改变相对应的景深效果的改变(例如,图6AZ的用户指定的改变指示符688c、688e和688h)。此外,响应于检测到轻击输入650az,计算机系统600停止显示用户指定的改变指示符688c、688e和688h和过渡指示符688c1、688e1和688h1,因为计算机系统600已经被配置为(例如,响应于检测到轻击输入650az)不应用先前应用的用户指定的合成景深效果改变。值得注意的是,计算机系统600移除用户指定的改变指示符688c和688e,而不用另一改变指示符替换它们。然而,在四十二秒标记处,计算机系统600用图6BA的自动改变指示符686ba替换图6AZ的用户指定的改变指示符688h。因此,计算机系统600可以基于应对合成景深效果作出自动改变的确定,在移除对合成景深效果的用户指定的改变之后,对合成景深效果插入自动改变(例如,使用下文关于图12讨论的一种或多种技术)。此处,进行了此相应确定(例如,确定应对合成景深效果作出自动改变),因为活动水平680a1(“John的活动水平”)在四十秒标记处相对于活动水平680b1(“Jane的活动水平”)和活动水平680c1(狗的活动水平)增加。因此,如媒体表示660所示,计算机系统600基于此相应确定以及在四十二秒标记处不再应用用户指定的改变而在媒体的四十二秒标记处自动应用合成景深效果以相对于Jane 634和狗638强调John632。在一些实施方案中,在捕获媒体时(例如,和/或在移除用户指定的改变之前)进行此相应确定(例如,如下文关于图12所讨论的)。在一些实施方案中,在对媒体的捕获期间保存此相应确定,使得一旦移除了用户指定的改变,就可以应用(或重新应用)该确定(例如,如下文关于图12所讨论的)。在一些实施方案中,用户指定的改变可以覆写所保存的对合成景深效果的自动改变(例如,如下文关于图12所讨论的)。在一些实施方案中,在移除了用户指定的改变之后进行此相应确定。在图6BA中,计算机系统600检测播放头664a1上的向左轻扫手势650ba。
如图6BB所示,响应于检测到向左轻扫手势650ba,计算机系统600将播放头664a1从对应于媒体中四十二秒的位置向左移动到对应于媒体中三十四秒的位置。如图6BB所示,响应于检测到向左轻扫手势650ba,计算机系统600更新媒体表示660以示出对应于媒体中三十四秒的媒体的帧。在三十四秒标记处,计算机系统600应用了相对于手推车628强调John 632的合成景深效果(例如,如上文关于图6W所讨论的)。在一些实施方案中,响应于检测到SDOFE控件662d上的输入650bb1,计算机系统600向媒体的表示重新应用用户指定的景深改变,并且重新显示用户指定的改变指示符688c、688e和688h和过渡指示符688c1、688e1和688h1(例如,经编辑媒体和电影视频编辑用户界面返回到图6AZ所示和/或在检测到轻击输入650az之前的状态)。在图6BB中,计算机系统600检测手推车628上的输入650bb2。
如图6BC所示,响应于检测到输入650bb2并且基于确定输入650bb2为按压并保持输入,计算机系统600改变合成景深效果以强调处于按压并保持输入650bb2的位置处的焦平面(从媒体中的四十二秒标记开始)。此外,计算机系统600在对应于媒体中的四十二秒标记的效果区域664b的位置处显示用户指定的改变指示符688j和过渡指示符688j1。如图6BC所示,响应于检测到输入650bb2并且基于确定输入650bb2为按压并保持输入,计算机系统600还显示聚焦设置指示符694bc(“AF锁定-5M”),该聚焦设置指示符包括计算机系统600与当前选择的焦平面(例如,由输入650bb2选择的焦平面)之间的距离的指示(例如,“5M”)。在应用强调图6BC中的焦平面的合成景深效果之后,媒体表示660示出了相对于John 632和Jane 634被强调的手推车628。此处,手推车628在媒体表示660中相对于John 632和Jane634被强调,因为手推车628位于被强调的焦平面中。值得注意的是,计算机系统600停止显示图6BB的自动改变指示符686g和686ba,因为确定不需要对与自动改变指示符686g相对应的合成景深效果的自动改变。回看图6W,因为确定Jane 634(例如,当前被强调的个体)在计算机系统600的该一个或多个相机的视场之外,所以作出了对与自动改变指示符686g相对应的合成景深效果的自动改变。然而,在与自动改变指示符686g相对应的时间之前,不再通过合成景深效果强调Jane 634。因此,在图6BC中,因为Jane 634不再被强调,所以计算机系统600移除了由于在计算机系统600的一个或多个相机的视场内无法检测到当前被强调的个体(例如,Jane 634)而作出的对合成景深效果的自动改变。计算机系统600出于类似原因移除了自动改变指示符686ba(例如,因为用户指定强调焦平面,所以计算机系统确定不需要经由应用合成景深效果来实现改变以强调媒体中的个体)。因此,如图6BB至图6BC所示,计算机系统600可以响应于在对所捕获的媒体的编辑期间对合成景深效果的用户指定的改变而移除对该合成景深效果的改变。在图6BC中,提供媒体表示661bc1(例如,在三十六秒标记处的经编辑媒体的帧)和媒体表示661bc2(例如,在四十二秒标记处的经编辑媒体的帧)以示出对强调焦平面的合成景深效果的用户指定的改变已经应用于在视频中检测到输入650bb2之后发生的媒体的帧(例如,不再应用对与图6BB的自动改变指示符686g和686ba相对应的合成景深效果的改变)(例如,也由编辑媒体回放线680d3示出)。如媒体表示661bc1和661bc2所示,不在焦平面中(例如,由聚焦指示符676所指示的)的个体(例如,John 632、Jane 634和/或狗638)没有被强调。
如图6BC所示,响应于输入650bb2,计算机系统600将SDOFE控件662d从处于非活动状态(例如,在图6BB中)转变为处于活动状态(在图6BC中)。因此,在图6BC中,计算机系统600被配置为向合成景深效果应用用户指定的改变。然而,在图6BC中,不应用图6AZ的用户指定的改变指示符688c、688e和688h,因为在SDOFE控制662d处于非活动状态时(和/或在计算机系统没有被配置为向合成景深效果应用用户指定的改变时)添加了对合成景深效果的用户指定的改变(例如,响应于检测到输入650bb2而添加的用户指定的改变)。换句话说,在图6BC中,响应于检测到输入650bb2而添加的用户指定的改变覆写了对合成景深效果的先前用户指定的改变(例如,在计算机系统没有被配置为向合成景深效果应用用户指定的改变之前应用的改变)。在一些实施方案中,代替覆写先前用户指定的改变,计算机系统600显示用户指定的改变指示符688c、688e和688h以及用户指定的改变指示器688j,并且向合成景深效果应用与用户指定的改变指示符688c、688e、688h和688j相对应的改变。
图6BC1示出了在一些实施方案中图6BC中描述的情况的另选情况。在图6BC中,计算机系统600检测到与对对象的选择相对应的输入,对于该对象,计算机系统确定计算机系统不具有足够的数据以跟踪对象通过视频的至少预先确定的部分(例如,通过视频中的多个帧)(例如,响应于输入650bb2为图6BB至图6BC处的轻击输入),在图6BC1中,计算机系统600检测与对对象的选择相对应的输入,对于该对象,设备确定设备确实具有足够的数据以跟踪对象通过至少视频的预先确定的部分。因此,在图6BC1中,响应于检测到输入650bb2并且基于确定输入650bb2为轻击输入,确定用户已经请求聚焦于手推车628,该手推车尚未被计算机系统600跟踪(例如,在图6BB中手推车628周围没有显示聚焦指示符(例如,如674a和/或674b)),并且对于该手推车,存在足够的数据以跟踪对象通过至少视频的预先确定的部分。因为确定手推车628没有被计算机系统600跟踪并且用户已经请求聚焦于手推车628,所以计算机系统600显示图6BC1的用户界面,该用户界面包括跟踪进度指示符694bc1、跟踪聚焦指示符674d、取消控件688n3、临时用户特定改变指示符688n和临时过渡指示符688n1以指示正在处理该请求。如图6BC1所示,响应于检测到输入650bb2并且基于确定输入650bb2为轻击输入,计算机系统600还取消强调擦除区域664a和效果区域664b以指示正在处理聚焦于手推车628的请求。在图6BC1中,计算机系统600基于所捕获的媒体中的视觉内容是否有足够的信息来跟踪和聚焦于手推车628来处理请求。在一些实施方案中,基于确定存在足够的信息以跟踪和聚焦于手推车628,计算机系统600应用合成景深效果以相对于媒体中的其他个体强调手推车628(例如,使用如上文关于计算机系统600检测到单轻击输入和/或双轻击输入所述的和/或如图6BC2所示的一种或多种类似技术),并且示出了新的跟踪器(例如,图6BC2中的跟踪器4),以指示该手推车可被强调和跟踪通过媒体的一部分(例如,应用相对于该媒体的其他部分强调手推车的合成景深效果)。在一些实施方案中,当确定存在足够的信息来跟踪和聚焦于手推车628时,在三十五秒时间标记处显示示出手推车628被强调的媒体表示661bc1(和/或在三十六秒时间标记处显示媒体表示661bc2,以示出当手推车628离开FOV达短暂的时间段时没有强调个体,如上文关于图6R1所讨论的)。在一些实施方案中,基于确定没有足够的信息来跟踪和聚焦于手推车628,计算机系统600应用合成景深效果以强调输入650bb2的位置处的焦平面(例如,使用如上文关于图6BC所讨论的一种或多种类似技术)。在一些实施方案中,响应于检测到取消控件688n3上的输入,计算机系统600取消聚焦于手推车628的请求并且重新显示图6BB的用户界面。在一些实施方案中,响应于检测到取消控件688n3上的输入,计算机系统600应用合成景深效果以强调输入650bb2的位置处的焦平面(例如,使用如上文关于图6BC所讨论的一种或多种类似技术)和/或显示图6BC的用户界面。在一些实施方案中,计算机系统600显示在图6BC1中显示的脉动达预先确定的时间段的一个或多个对象(例如,跟踪进度指示符694bc1、临时用户特定改变指示符688n、临时过渡指示符688n1和/或媒体表示660)和/或该一个或多个对象的一部分(一个或多个角)(例如,在处理聚焦的请求时,应用合成景深效果以强调手推车628,并且/或者指示计算机系统600正在聚焦于手推车628)。在一些实施方案中,在计算机系统600指示正在处理请求时,临时过渡指示符688n1的大小在预先确定的时间段内改变(例如,沿着效果区域664b延伸和/或移动到下一改变指示符)。
图6BD至图6BE示出了示例性实施方案,其中向经编辑媒体添加了对应用合成景深效果的用户指定的改变,这导致从经编辑媒体中移除一个或多个其他合成景深效果改变。回看图6BC,计算机系统600检测包括取消控件662g上的轻击输入650bc的一个或多个输入。如图6BD中所示,响应于检测到包括轻击输入650bc的一个或多个输入,计算机系统600使用如上文关于检测到轻击输入650ap2所讨论的一种或多种类似技术丢弃先前的改变(例如,在图6AV至图6B中对媒体作出的改变)。在图6BD中,响应于检测到包括轻击输入650bc的一个或多个输入,计算机系统600重新显示图6AD的电影视频编辑用户界面,该电影视频编辑用户界面另外还包括改变指示符686a、686b、688c、686d、688e、686f、686g和688h(如上文关于图6A至图6AC所讨论的自动和用户指定的合成景深改变)。如图6BD所示,计算机系统600在媒体表示660中在对应于媒体中的零秒时(例如,由播放头664a1的位置示出)在John 632的头部周围显示主要个体指示符672a,在Jane 634的头部周围显示次要个体指示符674b。如上文所讨论的(例如,关于图6S),在John 632的头部周围显示的主要个体指示符672a指示计算机系统600正在对合成景深效果应用临时改变以相对于Jane 634强调John 632,这由媒体表示660中的阴影表示。在图6BD中,计算机系统600检测John 632上的单轻击输入650bd。
如图6BE所示,响应于检测到单轻击输入650bd,计算机系统600应用相应非临时合成景深效果以相对于Jane 634强调John 632,使得只要可以在所捕获的视频的视觉内容中检测到(例如,使用如上文关于检测到双轻击输入650u所述和图6R1和图6N至图6Z所示的一种或多种技术)John 632(例如,John 632的面部),计算机系统600就不会自动改变所应用的合成景深效果。响应于检测到单轻击输入650bd,计算机系统600应用相应非临时合成景深效果以相对于Jane 634强调John 632,因为在检测到单轻击输入650bd时已经强调John632。因此,计算机系统600可以基于双轻击输入(例如,如上文关于图6S和图6U所讨论的第二类型的输入)和/或响应于检测到在媒体中已经被合成景深效果强调(和/或聚焦)的个体上的单轻击输入(例如,如上文关于图6N至图6S所讨论的第一类型的输入)来应用非临时改变以强调个体。
如图6BE中的媒体表示660所示,响应于检测到单轻击输入650bd,计算机系统600用主要个体指示符678a替换主要个体指示符672a以指示对合成景深效果的改变不是对合成景深效果的临时改变。因为计算机系统600已经应用相应非临时合成景深效果以相对于Jane 634强调John 632,所以计算机系统600在效果区域664b上对应于零秒标记的位置处插入用户指定的改变指示符688k,以及过渡指示符688k1。此外,计算机系统600移除了图6BD的自动过渡指示符686a和686b,因为相应确定不需要对与自动过渡指示符686a和686b相对应的合成景深效果的自动改变。在此,进行此相应确定是因为John 632可以在所捕获的媒体的视觉内容中在零秒与十秒之间被检测到,因此不需要合成景深的改变来强调媒体中的另一个体(例如,除John 632之外的个体)。值得注意的是,计算机系统600维持用户指定的改变指示符688c,因为计算机系统600确定继续需要用户指定的改变指示符688c(例如,用户希望在十二秒标记处强调Jane 634,尽管用户希望在零秒标记处强调John 632)。如图6BE的图表680所示,编辑回放线680d3已经在两秒标记左右与媒体回放线680d2分离,以指示计算机系统600响应于检测到单轻击输入650bd而改变了合成景深效果的应用以及何时发生了改变。具体地说,编辑回放线680d3已经被改变,使得编辑媒体回放线680d3保持在活动跟踪器680a(例如,“John的跟踪器”)上,以表示John 632正在经编辑媒体中的零秒标记与十秒标记之间被强调和跟踪(而不是Jane)。此外,在图6BE中,显示媒体表示661be1以示出已经应用相对于Jane 634强调John 632的合成景深效果(例如,而不是相对于John632强调Jane 634,如上文关于图6O至图6Q在七秒标记处所述)(例如,合成景深效果的相应非临时改变应用于过渡之后的帧)。
图6BF至图6BG示出了示例性实施方案,其中从经编辑媒体移除了对应用合成景深效果的用户指定的改变,这导致从经编辑媒体中移除一个或多个其他更多合成景深效果改变。在图6BE中,计算机系统600检测用户指定的改变指示符688c上的按压并保持输入650be。如图6BF所示,响应于检测到按压并保持输入650be,计算机系统600邻近用户指定的改变指示符688c显示删除选项686c2,并且取消强调擦除区域664a和效果区域664b(例如,变灰)(例如,使用如上文关于图6AN至图6AO所讨论的一种或多种类似技术)。在图6BF中,计算机系统600检测删除选项688c2上的轻击输入650bf。
如图6BG所示,响应于检测到轻击输入650bf,计算机系统600移除用户指定的改变指示符688c和与用户指定的改变指示符688c相对应的合成景深效果改变。因此,在图6BG中,已经更新媒体表示660,使得相对于Jane 634强调John 632(例如,与在检测到轻击输入650bf之前在图6BF中强调的Jane 634相反)。如图6BG所示,在媒体中的十二秒标记处应用对合成景深效果的相应非临时改变(上文关于图6BE所讨论的)(例如,如主要个体指示符678a和次要个体指示符674b所指示的)。如图6BG中所示,除了移除与图6BF的用户指定的指示符688c相对应的合成景深效果的改变之外,计算机系统600还移除图6BF的自动改变指示符686d,并且停止应用图6BF的与自动改变指示符686d相对应的合成景深效果的改变(例如,强调John的改变)。在图6BG中,计算机系统600移除自动改变指示符686d,因为确定不需要对合成景深效果的自动改变(例如,因为在改变合成景深效果之后,John 632将在十七秒标记处被强调,所以与用户指定的改变指示符688c相对应的Jane 634的改变被移除)(例如,使用如上文关于图6BC所讨论的类似技术)。如图6BG的图表680所示,编辑回放线680d3已经在十二秒标记左右与媒体回放线680d2分离,以指示计算机系统600响应于检测到轻击输入650bf而改变了合成景深效果的应用以及何时发生了改变。具体地说,编辑媒体回放线680d3已经被改变,使得编辑媒体回放线680d3保持在活动跟踪器680a(例如,“John的跟踪器”)上,以表示John 632正在经编辑媒体中的十二秒标记与十七秒标记之间被强调和跟踪(而不是Jane)。此外,在图6BG中,媒体表示661bg1和媒体表示661bg2被示出为指示相对于Jane 634强调John 632的合成景深效果(例如,而不是相对于John强调Jane 634,如上文关于图6O至图6Q在十七秒标记处所述)(例如,合成景深效果的相应非临时改变应用于过渡之后的帧)。在一些实施方案中,响应于检测到轻击输入650bf,计算机系统600移除用户指定的改变指示符688e,因为确定由于John 632已经被强调(例如,被与用户指定的改变指示符688k相对应的合成景深效果强调)而不需要用户指定的改变。在一些实施方案中,在移除图6BF的自动改变指示符686d时,计算机系统600显示过渡指示符688k1朝向用户指定的改变指示符688e的位置向右扩展的动画。
图6BH至图6BI示出了示例性实施方案,其中向经编辑媒体添加了对应用合成景深效果的用户指定的改变,这导致向经编辑媒体添加了一个或多个其他一个或多个合成景深效果改变。在图6BG中,计算机系统600检测播放头664a1上的轻扫输入650bg。如图6BH所示,响应于检测到轻扫输入650bg,计算机系统600在擦除区域664a上与所捕获的媒体中的十三秒标记相对应的位置处显示播放头664a1。响应于检测到轻扫输入650bg,计算机系统600将媒体表示660更新为在媒体中的十三秒标记处显示的帧的表示。在图6BH中,媒体表示660示出了在十三秒标记处已经向帧应用合成景深效果以相对于Jane 634强调John 632(例如,如上文关于用户指定的改变指示符688k所讨论的)。在图6BH处,计算机系统600检测Jane634上的单轻击输入650bh。
如图6BI所示,响应于检测到单轻击输入650bh,计算机系统600更新媒体表示660并且应用相应临时合成景深效果以相对于John 632强调Jane 634,使得计算机系统600在所捕获视频的视觉内容中不再能够检测到Jane 634(例如,Jane 634的面部)时自动改变所应用的合成景深效果(例如,使用如上文关于图6R和图6R1描述的一种或多种技术)。响应于检测到单轻击输入650bh,计算机系统600在Jane 634的头部周围显示主要个体指示符672b,在John 632头部周围显示次要个体指示符674a,其中主要个体指示符672b指示Jane634暂时在媒体中被强调(例如,如上文关于图6R所讨论的)。如图6BI所示,响应于检测到单轻击输入650bh,计算机系统600在媒体中的十三秒标记处显示用户指定的改变指示符688m和从十三秒标记开始的过渡指示符688m1。与添加用户指定的改变指示符688m一起,计算机系统600还在十七秒后添加自动改变指示符686d,因为确定需要对合成景深效果的自动改变。此处,计算机系统600添加自动改变指示符686d并且在媒体中的十七秒时应用合成景深效果,因为在媒体中的十七秒标记左右在所捕获的视频的视觉内容中无法检测到Jane 634(例如,使用如上文关于图6R所讨论的一种或多种类似技术)。因此,在一些实施方案中,当改变和/或向合成景深效果添加用户指定的改变时,可以添加一个或多个其他改变指示符和/或可以应用对合成景深效果的一个或多个其他改变(例如,在对合成景深效果的用户指定的改变之后的时间)。提供媒体表示661bi1和661bi2以示出在应用了与自动改变指示符686d相对应的对合成景深效果的自动改变之后,John 632相对于Jane 634被强调。如上文关于图6R1和图6Y所讨论的,在七秒时,Jane 634被跟踪,尽管她在与图6R1和/或图6Y的实况预览630(和/或图6BI的媒体表示660)相对应的所捕获的视觉内容之外。然而,如关于图6R1所讨论的,Jane 634将仅继续由计算机系统600跟踪预先确定的时间段(例如,0.5秒至5秒)。在一些实施方案中,基于确定Jane 634不在与图6R1的实况预览630(和/或图6BI的媒体表示660)相对应的所捕获的视觉内容内,计算机系统600将停止跟踪Jane 634。
图6BI至图6BJ示出了示例性实施方案,其中对应用合成景深效果的用户指定的改变被改变,这导致从经编辑媒体中移除一个或多个合成景深效果改变。在图6BI中,计算机系统600检测花698上的按压并保持输入650bi。如图6BJ所示,响应于按压并保持输入650bi,计算机系统600改变合成景深效果以强调处于按压并保持输入650bi的位置处的焦平面(从媒体中的十三秒标记开始)。如图6BJ所示,响应于检测到按压并保持输入650bi,计算机系统600还显示聚焦设置指示符694bj(“AF锁定-0.4m”),该聚焦设置指示符包括计算机系统600(例如,计算机系统600的一个或多个相机)与当前选择的焦平面(例如,由按压并保持输入650bi选择的焦平面)之间的距离(例如,0.4米)的指示(例如,“0.4m”)。在图6BJ中应用强调焦平面的合成景深效果之后,计算机系统600经由媒体表示660显示了相对于John632和Jane 634被强调的花698。值得注意的是,计算机系统600停止显示图6BI的自动改变指示符686d,因为确定不需要对与自动改变指示符686d相对应的对合成景深效果的自动改变(例如,使用如上所述的一种或多种技术以停止显示图6BB至图6BC的自动改变指示符686g)。
在图6BJ中,提供媒体表示661bj1(例如,在十七秒标记处的经编辑媒体的帧)和媒体表示661bj2(例如,在二十秒标记处的经编辑媒体的帧)以示出对强调焦平面的合成景深效果的用户指定的改变已经应用于在视频中检测到按压并保持输入650bi之后发生的媒体的帧(例如,不再应用对与图6BI的自动改变指示符686d相对应的合成景深效果的改变)(例如,也由编辑媒体回放线680d3示出)。如媒体表示661bj1和661bj2所示,不在焦平面中(例如,由聚焦指示符676所指示的)的个体(例如,John 632和Jane 634)没有被强调。值得注意的是,在图6BJ中选择的焦平面与计算机系统的距离不同于在图6BC中选择的焦平面(例如,图6BJ中的0.4M与图6BC中的5M)。在一些实施方案中,计算机系统600显示正在应用的焦平面的合成景深过渡的动画。在一些实施方案中,焦平面与计算机系统600距离越远,动画越长(例如,图6BB与图6BC之间的过渡动画长于图6BI至图6BJ中的过渡动画)。在一些实施方案中,与被强调的个体相对应的焦平面距离被选择的焦平面(例如,响应于按压并保持输入)越远,动画越长。在一些实施方案中,与被强调的个体相对应的焦平面越靠近被选择的焦平面(例如,响应于按压并保持输入),动画越短。
图7是示出根据一些实施方案的用于使用设备计算机系统更改视觉媒体的示例性方法的流程图。在与一个或多个相机(例如,位于计算机系统同一侧或不同侧(例如,前置相机、后置相机)的一个或多个相机(例如,双相机、三相机、四相机等))和/或一个或多个输入设备(例如,触敏表面和/或)通信的计算机系统(例如,100、300、500和/或600)(例如,智能手机、台式计算机、膝上型计算机和/或平板电脑)处执行方法700。在一些实施方案中,计算机系统与显示生成部件(例如,显示控制器、触摸感应显示系统)通信。方法700中的一些操作任选地被组合,一些操作的次序任选地被改变,并且一些操作任选地被省略。
如下所述,方法700提供了用于更改视觉媒体的直观方式。该方法减轻了用户在更改视觉媒体时的认知负担,从而创建了一种更有效的人机界面。针对电池驱动的计算设备,让用户能够更快速且更有效地更改视觉媒体节省了功率并且增加了电池两次充电之间的时间间隔。
计算机系统(例如,600)经由该一个或多个输入设备检测(702)捕获表示该一个或多个相机的视场的视频(例如,视频媒体)的请求(例如,650b2)(例如,用于捕获媒体的可选用户界面对象(例如,610)上的轻击手势)(和/或在一些实施方案中,指向用于捕获媒体的可选用户界面对象的非轻击手势(例如,按压并保持手势、轻扫手势))。
响应于检测到捕获视频的请求(例如,650b2),计算机系统(例如,600)在第一捕获持续时间(例如,602d)内捕获(704)(或发起捕获)(例如,经由一个或多个相机)视频。该视频包括在第一捕获持续时间内捕获的多个帧(例如,如图6C至图6AB的实况预览630所指示的)(例如,帧(例如,图像)的序列)。该多个帧表示(例如,包括,示出)该一个或多个相机的视场中的第一个体(例如,632、634、638)(例如,人、动物、其他个体(例如,具有面部的其他个体)、物体)和该一个或多个相机的视场中的第二个体(例如,632、634、638)。在该多个帧中,第一个体(例如,634)在第一捕获持续时间内相对于该一个或多个相机的视场移动。
计算机系统向视频的多个帧(例如,630、640和/或660)应用(706)(例如,在对视频的捕获期间(在比第一捕获持续时间更长的第二捕获持续时间内的对视频的捕获期间)和/或在停止对视频的捕获之前(例如,响应于检测到用于停止对媒体的捕获的可选用户界面对象上的手势)、在对视频的捕获之后和/或在停止捕获视频捕之后)合成(例如,计算机生成的和/或计算机生成并且在捕获视频的帧后应用的)景深效果,该合成景深效果更改由该一个或多个相机捕获的视觉信息(例如,视觉内容)以相对于视频的该多个帧中的第二个体(例如,632、634、638)(例如,人、动物、其他个体(例如,具有面部的其他个体)、物体)强调(和/或强调)(例如,视觉上强调)视频的该多个帧中的第一个体(例如,632、634、638),其中随着第一个体(例如,634)在该一个或多个相机的视场内移动,该合成景深效果随着时间(例如,在第一捕获持续时间内)而改变(例如,合成景深效果的量值和/或位置改变)(并且第一个体继续相对于该多个帧中的每一帧中的第二个体被强调)。在一些实施方案中,合成景深效果在多个中间状态间改变。在一些实施方案中,合成(例如,计算机生成的)景深效果调整所捕获的视频,使得看起来已经用具有与该一个或多个相机(例如,实际捕获该视频的该一个或多个相机)的孔径(例如,物理孔径、有效孔径)和/或焦距(例如,物理焦距、有效焦距)不同的孔径和/或焦距的相机捕获该视频的该一个或多个帧。在一些实施方案中,应用合成景深效果以相对于视频的该多个帧中的第二个体强调视频中的第一个体包括向第二个体应用大于应用于第一个体的模糊量(或合成散景)的模糊量(或合成散景)。在一些实施方案中,当回放所捕获的媒体时,第二个体看起来比第一个体更模糊。在一些实施方案中,在捕获视频时(和/或在停止对视频的捕获之前),计算机系统显示(例如,连续地显示)该多个帧。在一些实施方案中,合成景深效果随时间的改变表示捕获第一个体的移动的所记录视频随时间的改变。在一些实施方案中,响应于检测到捕获视频的请求而应用合成景深效果。向视频的该多个帧应用合成景深效果,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体,其中合成景深效果在视频的该多个帧中改变,其中合成景深效果随着第一个体在一个或多个相机的视场内移动(例如,响应于手势)而改变,这减少了用户提供应用合成景深效果所需的输入的数量。减少操作的数量增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,向视频的该多个帧应用合成景深效果包括显示该多个帧(例如,视频的该多个帧)中的第一组帧(例如,在第一时间、在视频的第一持续时间期间、视频中的第一连续持续时间、视频的第一部分)(例如,如图6C至图6AB的实况预览630所指示的)。在一些实施方案中,显示第一组帧(例如,如图6C至图6AB的实况预览630所指示的)包括(和/或修改视频的第一组帧以包括)在距该一个或多个相机的第一距离处(例如,距该一个或多个相机的视点(例如,对应于或是捕获该帧的视觉信息的该一个或多个相机的位置的视频的帧的位置))并以第一模糊量(例如,一定程度的渐变、出现模糊、出现失焦)显示第二个体(例如,634)。在一些实施方案中,该第一模糊量基于第二个体在距该一个或多个相机的第一距离处。在一些实施方案中,第二个体距第一组帧中的第一个体相应距离。在一些实施方案中,第一组帧包括一个帧。在一些实施方案中,第一组帧包括视频的连续片段中的多个帧,其中视频的连续片段跨越第一组帧。在一些实施方案中,向视频的该多个帧(例如,如图6C至图6AB的实况预览630所指示的)应用合成景深效果(例如,如图6C至图6AB的实况预览630所指示的)包括显示该多个帧中的第二组帧(例如,在显示第一组帧之后,在不同于第一时间的第二时间显示)。在一些实施方案中,显示第二组帧包括(例如,如图6C至图6AB的实况预览630所指示的)(和/或修改视频的第二组帧以包括)在距该一个或多个相机(例如,相机的视点)的第二距离处并以不同于第一模糊量的第二模糊量(例如,一定程度的渐变、出现模糊、出现失焦)显示第二个体(例如,634)。在一些实施方案中,第一距离不同于第二距离。在一些实施方案中,该第二模糊量基于第二个体在距该一个或多个相机的第二距离处。在一些实施方案中,根据确定在视频的第一组帧中第二个体在距该一个或多个相机的第一相应距离处,计算机系统以第一模糊显示第二个体;并且根据确定在视频的第一组帧中第二个体在距该一个或多个相机的第二相应距离处,其中在第一组帧中距该一个或多个相机的第二相应距离不同于在第一组帧中距该一个或多个相机的第一相应距离,计算机系统以不同于第一模糊量的第二模糊量显示第二个体。在一些实施方案中,根据确定在视频的第二组帧中第二个体在距该一个或多个相机的第一相应距离处,计算机系统以第一模糊量显示第二个体。在一些实施方案中,第二个体距第二组帧中第一个体的相应距离大于第一个体与第一组帧中个体之间的相应距离。在一些实施方案中,第二组帧包括一个帧。在一些实施方案中,第二组帧包括视频的连续片段中的多个帧,其中视频的连续片段跨越第二组帧。在一些实施方案中,对应于第一组帧的视频的连续片段不同于对应于第二组帧的视频的连续片段。以不同的模糊量显示帧作为向视频的该多个帧应用合成景深效果的一部分使用户获得合成景深效果如何被应用于视频的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,当(例如,在应用合成景深效果之后和/或同时)应用合成景深效果时,以第三模糊量(例如,大于或等于零)显示第一个体(例如,632、634、638)(例如,在视频的该多个帧中的一个或多个帧中),并且以大于第三模糊量的第四模糊量(例如,非零量)显示第二个体(例如,632、634、638)(例如,在该一个或多个帧中)(例如,如上文关于图6C至图6AB所述)。以不同的模糊量显示第一个体和第二个体允许用户获得关于哪个个体正在被合成景深效果强调的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,向视频的该多个帧应用(例如,如图6C至图6AB的实况预览630所指示的)合成景深效果包括向该多个帧中的第三帧(例如,第一帧、第二帧和/或该视频的另一帧)的第一部分(例如,如图6C至图6AB的实况预览630所指示的)(例如,场景的区域和/或场景中的对象、元素、个体)应用第五模糊量。在一些实施方案中,向视频的该多个帧应用(例如,如图6C至图6AB的实况预览630所指示的)合成景深效果包括向该多个帧中的第三帧的第二部分(例如,场景的区域和/或场景中的对象、元素、个体)应用大于第五模糊量的第六模糊量(例如,如图6C至图6AB的实况预览630所指示的)。在一些实施方案中,视频的第三帧的第二部分不同于视频的第三帧的第一部分。在一些实施方案中,作为向视频的该多个帧应用合成景深效果的一部分,计算机系统显示视频的第三帧,该视频的第三帧包括被显示具有第五模糊量(例如,非零量)的第一部分(例如,场景的区域和/或场景中的对象、元素、个体)和被显示具有第六模糊量(例如,非零量)的第二部分(例如,场景的区域和/或场景中的对象、元素、个体)。向帧的不同部分显示不同的模糊量可以让用户获得关于合成景深效果如何被应用于帧的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,向视频的该多个帧应用(例如,如图6C至图6AB的实况预览630所指示的)合成景深效果包括使该多个帧的第四帧(例如,第一帧、第二帧、第三帧和/或视频的另一帧;包括第一个体和/或第二个体的帧)的一部分模糊(例如,如图6C至图6AB的实况预览630所指示的)。在一些实施方案中,第四帧的该部分不包括在该一个或多个相机的视场中的个体(例如,第一个体、第二个体)(例如,个体的表示)(例如,如上文关于图6AB所述)。在一些实施方案中,作为向视频的该多个帧应用合成景深效果的一部分,计算机系统显示包括视频的不包括个体的一部分的视频的帧(例如,视频的第一帧、第二帧、第三帧和/或另一帧),其中视频的不包括个体的该部分是模糊的。使帧的不包括个体的一部分模糊允许用户获得关于合成景深效果如何被应用于帧的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,向视频的该多个帧应用合成景深效果(例如,如图6C至图6AB的实况预览630所指示的)包括使该多个帧中的第五帧相对于第一个体的前景(例如,在帧中所示的场景中最靠近/最接近该一个或多个相机的视场和/或在该一个或多个相机的视场中的主要个体(例如,第一个体)和/或对象前方的部分)和第五帧相对于该个体的背景(例如,在帧中所示的场景中最远离该一个或多个相机的视场和/或在该一个或多个相机的视场中的主要个体(例如,第一个体)和/或对象后方的部分)模糊(例如,视频的第一帧、第二帧、第三帧、第四帧和/或另一帧;包括第一个体的帧)(例如,如由图6C至图6AB的实况预览630所指示的)。在一些实施方案中,前景的模糊程度与背景不同。使帧的背景和前景模糊允许用户获得关于合成景深效果如何被应用于帧的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,视频包括在第二捕获持续时间内捕获的第二多个帧(例如,如图6C至图6AB的实况预览630所指示的)(例如,不同于该多个帧(例如,第一多个帧))。在一些实施方案中,第二多个帧表示该一个或多个相机的视场中的第一个体(例如632、634、638)和该一个或多个相机的视场中的第三个体(例如632、634、638)(例如,第二个体或不同于第一个体和第二个体的另一个体)(或对象)。在一些实施方案中,在第一多个帧之后捕获和/或显示第二多个帧。在一些实施方案中,第二捕获持续时间不同于第一捕获持续时间。在一些实施方案中,该多个帧表示第一个体、第二个体和第三个体。在一些实施方案中,第二个体与第三个体为相同个体。在一些实施方案中,第三个体不同于第一个体。在一些实施方案中,在第二多个帧中,第一个体和第三个体在第一捕获持续时间内相对于该一个或多个相机的视场移动。在一些实施方案中,当在第一捕获持续时间内捕获视频时(例如,以及当(例如,之后/同时)向视频的该多个帧(例如,视频的第一多个帧)应用时,更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调该多个帧中的第一个体),计算机系统(600)检测应相对于第二多个帧中的第一个体(例如632、634、638)强调第二多个帧中的第三个体的指示(例如,如上文关于图6D至图6G、图6H至图6K所述的输入650u、650z和/或650z)(例如,选择第三个体的用户输入)(例如,选择第三个体的用户输入(例如,在第三个体上的轻击或对应于第三个体的示能表示);系统生成的指示)。在一些实施方案中,响应于检测到指示(例如,如上文关于图6D至图6G、图6H至图6K所述的输入650u、650z和/或650z),计算机系统向视频的第二多个帧应用第二合成景深效果(例如,如实况预览630所指示的),该第二合成景深效果更改由该一个或多个相机捕获的视觉信息,以相对于视频的第二多个帧中的第一个体强调视频的第二多个帧中的第三个体(例如,632、634、638)。在一些实施方案中,更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第一个体强调视频的该多个帧中的第三个体的合成景深效果随着第三个体在该一个或多个相机的视场内移动而随时间更改。响应于检测到指示而向视频的第二多个帧应用更改由该一个或多个相机捕获的视觉信息以相对于视频的第二多个帧中的第一个体强调视频的第二多个帧中的第三个体的第二合成景深效果,这允许系统/用户在满足规定条件时控制合成景深效果如何被应用于视频。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,当第二多个帧中的第三个体满足一组自动选择标准时,计算机系统自动(例如,而不需要插入用户输入和/或用户手势,不响应于检测到经由该一个或多个输入设备的输入/手势(例如,与相对于第一个体强调第三个体的请求相对应的输入/手势(例如,如下文关于方法800所述))检测(例如,生成)该指示(例如,如关于图6D至图6G、图6H至图6K所述)。在一些实施方案中,该组自动选择标准基于由该一个或多个相机检测到的场景的属性,而不是基于由设备检测到的经由一个或多个输入设备的输入/手势(例如,与经由该一个或多个输入设备的相对于第一个体强调第三个体的请求相对应的输入/手势(例如,如下文关于方法800所述))。当满足规定条件时,自动向视频的第二多个帧应用第二合成景深效果,这允许系统控制合成景深效果如何被应用于视频而无需用户输入。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,该组自动选择标准包括基于第三个体(例如,632、634、638)在该一个或多个相机的视场中的运动而满足的标准(例如,如上文关于图6H至图6K所述)(例如,当相应个体(例如,第三个体)在该一个或多个相机的视场中的运动(例如,移动(例如,速度、转换))大于其他个体(例如,第一个体)在该一个或多个相机的视场中的运动时)。在一些实施方案中,第三个体的运动基于第三个体的运动的显著性(例如,运动的显著性(例如,与运动阈值(例如,非零阈值)相比的运动)(例如,第三个体的绝对值(例如,实际运动)和/或第三个体与该一个或多个相机的视场中的其他个体的运动相比的运动))。基于个体的运动自动向视频的第二多个帧应用第二合成景深效果允许系统基于个体的运动来控制合成景深效果如何被应用于视频而无需用户输入。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,该组自动选择标准包括当(例如,根据)确定在该一个或多个相机的视场中检测到第三个体(例如,632、634、638)(例如,或任何其他相应个体)的面部时满足的标准(例如,如上文关于图6D至图6G、图6H至图6K、图6O至图6Q、图6U至图6V所述)。在一些实施方案中,使用面部识别算法来确定检测到相应个体的面部。在一些实施方案中,该组自动选择标准包括当确定在该一个或多个相机的视场中检测到第三个体的面部达预先确定的时间段(例如,0.1秒至5秒),并且在该一个或多个相机的视场中未检测到第一个体的面部达另一预先确定的时间段(例如,0.1秒至5秒)时满足的标准。在一些实施方案中,确定在该一个或多个相机的视场中检测到第三个体的面部是基于该面部的显著性(例如,面部的绝对显著性(例如,大小、可见性(例如,清晰度、较少模糊))和/或面部相对于该一个或多个相机的视场中的其他面部的显著性)。基于面部检测自动向视频的第二多个帧应用第二合成景深效果允许系统基于个体的面部检测来控制合成景深效果如何被应用于视频而无需用户输入。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,该组自动选择标准包括基于对应于(例如,相关联、来自、检测到来自)第三个体(例如,632、634、638)的音频而满足的标准(例如,如上文关于图6D至图6G、图6H至图6K所述)(例如,或任何其他相应个体)(例如,当相应个体(例如,第三个体)在该一个或多个相机的视场中的音频(例如,移动(例如,速度、转换))大于其他个体(例如,第一个体)在该一个或多个相机的视场中的音频时)。在一些实施方案中,该标准基于对应于第三个体的音频高于音频阈值而满足(例如,非零阈值)(例如,第三个体的音频和/或第三个体的音频相对于其他个体(例如,在该一个或多个相机的视场中)的音频的绝对/实际显著性(例如,音频水平))。基于对应于个体的音频自动向视频的第二多个帧应用第二合成景深效果允许系统基于个体的音频来控制合成景深效果如何被应用于视频而无需用户输入。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,该组自动选择标准包括基于第二多个帧中的一个或多个帧中的第三个体(例如632、634、638)(例如,或任何其他相应个体)与该一个或多个相机之间的距离而满足的标准(例如,如上文关于图6D至图6G、图6H至图6K所述)(例如,该一个或多个相机的视点(例如,对应于或是捕获该帧的视觉信息的该一个或多个相机的位置的视频的帧的位置))。在一些实施方案中,该组自动选择标准包括当第二多个帧中的相应个体(例如,第三个体)比另一个体(例如,第一个体)更靠近该一个或多个相机(和/或更靠近达超过预先确定的时间段(例如,0.1秒至5秒))时满足的标准。在一些实施方案中,基于第三个体的距离的显著性(例如,距离的度量)高于第三个体的音频的距离阈值(例如,非零阈值)(例如,绝对/实际距离)和/或第三个体与该一个或多个相机之间的距离相对于该一个或多个相机之间的(例如,在该一个或多个相机的视场中的)其他个体的一个或多个距离来满足基于第二多个帧中的一个或多个帧中的第三个体与该一个或多个相机之间的距离而满足的标准。基于个体与相机之间的距离自动向视频的第二多个帧应用第二合成景深效果允许系统基于个体与相机之间的距离来控制合成景深效果如何被应用于视频而无需用户输入。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,该组自动选择标准包括基于第三个体(例如,632、634、638)(例如,或任何其他相应个体)的注视(例如,检测到的注视)而满足的标准(例如,如上文关于图6D至图6G所述)。在一些实施方案中,该组自动选择标准包括当确定第三个体正在注视捕获第三个体的该一个或多个相机时(例如,在第二多个帧中)时满足的标准。在一些实施方案中,该组自动选择标准包括当确定第三个体被确定为看起来远离该一个或多个相机和/或与看起来远离该一个或多个相机的另一个体相比,看起来更远离该一个或多个相机时不满足的标准。在一些实施方案中,基于第三个体的绝对注视和/或第三个体相对于该一个或多个相机的视场中的一个或多个其他个体的注视来确定基于第三个体的注视而满足的标准(例如,当确定第三个体比该一个或多个相机的视场的表示中的另一个体看起来更朝向该一个或多个相机的视场的表示时)。基于个体的检测到的注视自动向视频的第二多个帧应用第二合成景深效果允许系统基于个体的检测到的注视来控制合成景深效果如何被应用于视频而无需用户输入。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,该组自动选择标准包括基于第三个体的肢体(例如,手、脚、手指和/或脚趾)的位置而满足的标准(例如,如上文关于图6A至图6AC以及下文关于图12所讨论的)。基于个体的肢体的位置向视频的第二多个帧应用第二合成景深效果允许系统在没有用户输入的情况下基于肢体的位置控制合成景深效果如何被应用于视频,当已经满足一组条件时,该系统执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,该组自动选择标准包括基于在所捕获的视频中检测到的特征(例如,用户的特征或与用户相关联的特征)的一个或多个改变而满足的标准(例如,选自由面部、注视、音频、距离和/或肢体位置组成的组中的一个或多个特征)(例如,在预先确定的时间段内和/或在预先确定的时间段内高于/低于某个非零阈值改变水平)(例如,如上文关于图6A至图6AC以及下文关于图12所讨论的)。基于特征中的一个或多个改变向视频的第二多个帧应用第二合成景深效果允许系统基于特征中的一个或多个改变来控制合成景深效果如何被应用于视频而无需用户输入。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,当在第一捕获持续时间内捕获视频时,计算机系统(例如,600)经由该一个或多个输入设备检测第一手势(例如,650o、650u、650z)。在一些实施方案中,响应于检测到第一手势,计算机系统修改该组自动选择标准(例如,如上文关于图6O至图6Q、图6U至图6V所述)。在一些实施方案中,在计算机系统通过检测到经由该一个或多个输入设备的第一手势检测应强调相应个体的指示之前,该组自动选择标准包括第一组自动选择标准(例如,轻击手势、按压并保持手势、轻扫手势)(例如,如关于方法800和900以及图6O至图6Y进一步所述)。在一些实施方案中,响应于检测到第一手势,计算机系统修改该组自动选择标准以包括与不同于第一组自动选择标准的第二组自动选择标准。在一些实施方案中,该修改的一组自动选择标准不包括第一组自动选择标准(和/或第一组自动选择标准中的一个或多个标准)。在一些实施方案中,当使用该修改的一组自动选择标准来检测应强调相应个体(或对象)的指示时,与使用未修改的一组自动选择标准相比,计算机系统不太可能改变(或减少了改变次数)合成景深效果以强调另一个体(例如,与正被强调的个体不同的个体)。当接收到手势时自动修改该组自动选择标准允许计算机系统切换用于在哪些个体被强调之间自动切换的该组自动选择标准和/或基于规定条件自动改变所应用的合成景深效果。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,当检测到经由该一个或多个输入设备的第二手势(例如,轻击手势、按压并保持手势、轻扫手势和/或等)(例如,如关于方法800进一步所述)(例如,指向第三个体的手势)时,计算机系统(例如,600)检测到该指示(例如,如上文关于图6O至图6Q、图6U至图6V所述的输入650o、650u和/或650z)。在一些实施方案中,当检测到第二手势时,计算机系统检测到该指示,而不管第三个体(例如,或任何其他相应个体)是否满足该组自动选择标准。响应于检测到第二手势而向视频的第二多个帧应用更改由该一个或多个相机捕获的视觉信息以相对于视频的第二多个帧中的第一个体强调视频的第二多个帧中的第三个体的第二合成景深效果,通过帮助用户改变合成景深效果以通过提供一种输入来更改视觉信息,从而为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,响应于检测到该指示并且在捕获视频时,计算机系统(例如,600)显示第一动画(例如,如上文关于图6C至图6AB的实况预览630所述)(例如,在一段时间内显示(例如,1秒至5秒)),该第一动画包括从具有所应用的合成景深效果的该多个帧的一个或多个表示的显示(例如,实况预览630)到具有所应用的第二合成景深效果的第二多个帧的一个或多个表示的显示(例如,实况预览630)的第一过渡(例如,如上文关于图6C至图6AB所述)(例如,渐变(例如,逐渐渐变)过渡、交叉渐变过渡),该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体,该第二合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于视频的第二多个帧中的第一个体强调视频的第二多个帧中的第三个体(例如,632、634、638)(例如,如上文关于图6C至图6AB所述)。显示包括在显示具有所应用的一个合成景深效果的表示与具有所应用的另一合成景深效果的表示之间的第一过渡的第一动画,这为用户提供了反馈以了解合成景深效果正在发生改变。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在对视频的捕获结束之后的某一时间回放视频时,计算机系统显示对应于第一动画(例如,具有突然的过渡)(例如,如上文关于图6C至图6AB的实况预览630所述)的第二动画(例如,如上文关于图6C至图6AB的先前捕获的媒体表示640所述)(例如,具有平滑的过渡)。在一些实施方案中,第二动画(例如,如上文关于图6C至图6AB的先前捕获的媒体表示640所述)在与视频中的在视频中检测到指示(例如,如上文关于图6D至图6G、图6H至图6K所述的650o、650u、650z)的时间点之前发生的时间点相对应的时间(例如,646)处的视频回放中开始。在一些实施方案中,显示第二动画提供了优于传统相机的益处,传统相机不允许你改变特定点的焦点(例如,在拍摄了视频之后)(例如,在捕获视频时不能及时返回以改变焦点)。在一些实施方案中,第一过渡具有第一过渡持续时间。在一些实施方案中,在经由该一个或多个输入设备捕获视频之后,计算机系统检测一个或多个手势(例如,一个或多个轻击手势、轻扫手势和/或按压并保持手势)以发起视频的回放。在一些实施方案中,响应于检测到用于发起视频的回放的该一个或多个手势,计算机系统发起视频的回放。在一些实施方案中,在回放视频,计算机系统显示第二动画,该第二动画包括从具有所应用的合成景深效果的该多个帧的一个或多个表示的显示到具有所应用的第二合成景深效果的第二多个帧的一个或多个表示的显示的第二过渡(例如,渐变(例如,逐渐渐变)过渡、交叉渐变过渡),该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体,该第二合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于视频的第二多个帧中的第一个体强调视频的第二多个帧中的第三个体。在一些实施方案中,第二过渡具有不同于第一过渡持续时间的第二过渡持续时间。
在一些实施方案中,更改由该一个或多个相机捕获的视觉信息以相对于视频的第二多个帧中的第一个体强调视频的第二多个帧中的第三个体的第二合成景深效果是更改由该一个或多个相机捕获的视觉信息以强调视频中的选定焦平面的合成景深效果,并且其中用于显示第一动画(例如,和/或第二动画)的过渡特性(例如,过渡的速度、过渡的加速度曲线和/或过渡持续时间)基于视频中的选定焦平面与视频中的先前焦平面(例如,视频中的在检测到指示之前强调的焦平面)之间的差异(例如,距离)(例如,如上文关于图6A至图6AC和图6BI至图6BJ所讨论的)。显示第一动画,其中用于显示第一动画的过渡特性基于视频中的选定焦平面与视频中的先前焦平面之间的差异,这提供了允许用户确定这些焦平面之间的距离的量值的视觉反馈,从而提供了改进的视觉反馈。
在一些实施方案中,根据确定选定焦平面与先前焦平面之间的距离是第一距离,动画的速度是第一速度(例如,如上文关于图6A至图6AC和图6BI至图6BJ所讨论的)。在一些实施方案中,根据确定选定焦平面与先前焦平面之间的距离是短于第一距离的第二距离,动画的速度是快于第一速度的第二速度(例如,如上文关于图6A至图6AC和图6BI至图6BJ所讨论的)。显示第一动画,其中用于显示第一动画的速度基于视频中的选定焦平面与视频中的先前焦平面之间的差异,这提供了允许用户确定这些焦平面之间的距离的量值的视觉反馈,而不减少可能引起视觉分散的过渡的突然性,从而提供了改进的视觉反馈。
在一些实施方案中,应用合成景深效果包括在第一个体(例如,632)至少部分地被遮挡时(例如,被642遮挡)(例如,如上文关于图6L至图6M所述)(例如,在另一对象后面被遮挡,其中第一个体的一部分(例如,或全部)是不可见的和/或在另一对象后面)(例如,在该多个帧的至少一个帧中)将焦点维持在与第一个体(例如,632)相对应的位置上(例如,在视频中的深度或焦平面处)(例如,第一个体的位置、第一个体的最后已知位置或第一个体的投影位置)(例如,维持合成景深效果的应用)。在一些实施方案中,作为应用合成景深效果的一部分,在第一个体被遮挡达第一时间段时,计算机系统将焦点维持在与第一个体相对应的位置上(例如,维持合成景深效果的应用),并且在第一个体被遮挡达长于第一预先确定的时间段的第二预先确定的时间段时停止将焦点维持在与第一个体相对应的位置上(例如,维持合成景深效果的应用)。
在一些实施方案中,计算机系统在应用合成景深效果时显示指示第一个体(例如,632、634、638)正在被强调的第一用户界面对象(例如,672a-672c)(例如,使用如下文关于方法800和900所述的一种或多种技术)。显示指示第一个体正在被强调的第一用户界面对象为用户提供了关于被合成景深效果相对于视频中的其他个体强调的个体的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在视频正在被捕获(例如,实况预览630中的672a-672c)时,显示指示第一个体正在被强调的第一用户界面对象(例如,672a-672c)(例如,在实况预览中,该一个或多个相机的当前(例如,实况)视场的表示)。在一些实施方案中,指示正在显示第一个体的第一用户界面对象可以在视频正在被捕获和对视频的捕获已经结束时显示(例如,在该视频是先前捕获的视频的情况下)。在一些实施方案中,换句话说,显示相同的用户界面对象,而不管显示正在捕获的视频的表示还是/或者显示先前捕获的视频的表示。在视频正在被捕获时显示指示第一个体正在被强调的第一用户界面对象为用户提供了关于被合成景深效果相对于正在被捕获的视频中的其他个体强调的个体的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,指示第一个体正在被强调的第一用户界面对象(例如,672a-672c)(例如,在先前捕获的媒体的表示中)在对视频的捕获结束(例如,媒体表示660中的672a-672c)之后显示。在视频已经被捕获时显示指示第一个体正在被强调的第一用户界面对象为用户提供了关于被合成景深效果相对于已经被捕获的视频中的其他个体强调的个体的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,计算机系统在应用合成景深效果时显示对应于第二个体(例如,632、634、638)的第二用户界面对象(例如,674a-674c)(例如,指示第二个体没有被强调)。在一些实施方案中,第二用户界面对象(例如,674a-674c)在外观上不同于(例如,颜色、形状等不同)指示合成景深效果正在被应用于的第一个体(例如,632、634、638)的用户界面对象(例如,672a-672c)(例如,第一用户界面对象)。在一些实施方案中,第一个体(例如,632、634、638)是人(例如,632、634)、动物(例如,638)或物体(例如,如上文关于图6B至图6C所述)。与对应于第二个体的第二用户界面对象不同地显示指示第一个体正在被强调的第一用户界面对象为用户提供了区分合成景深效果正在强调哪些个体和没有强调哪些个体的视觉反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在计算机系统(例如,600)检测到捕获视频的请求(例如,650b2)之前并且在计算机系统(例如,600)被配置为在第一捕获模式下操作(例如,如620c所指示的)时(例如,不是电影视频捕获模式的静态或视频捕获模式),计算机系统(例如,600)检测第三手势(例如,指向第一表示的第一手势)(例如,轻扫手势)(和/或在一些实施方案中,非轻扫手势(例如,轻击手势、按压并保持手势))。在一些实施方案中,在计算机系统(例如,600)检测到捕获视频的请求(例如,650b2)之前并且响应于检测到第三手势(例如,650a1、650a2),计算机系统(例如,600)被配置为在不同于第一捕获模式(例如,620c)的电影视频捕获模式(例如,620e)下操作(例如,如图6B所指示的)(例如,如上文关于方法800(例如,802)和900(例如,902、904)所述,如关于图6A至图6C的相机用户界面、图6D至图6AQ的媒体编辑用户界面所述)。在一些实施方案中,在计算机系统处于电影视频模式时,计算机系统被配置为应用合成景深效果以更改视觉信息以强调媒体的一个或多个帧中的个体。在一些实施方案中,计算机系统显示相机控件区域,该相机控件区域包括用于相机捕获模式的多个可选用户界面对象。在一些实施方案中,每个相机模式(例如,620)(例如,视频(例如620d)、照片(例如620c)、人像(例如620b)、慢动作(例如620f)、全景模式(例如620a)、延时摄影(例如620g))具有多个设置(例如,对于人像捕获模式:工作室照明设置、轮廓照明设置、舞台照明设置),所述多个设置具有相机(例如,相机传感器)正以其操作以捕获媒体(包括在捕获之后自动执行的后处理)的模式(例如,人像捕获模式)的多个值(例如,每个设置的光水平)。这样,例如,捕获模式不同于不影响相机在捕获媒体时如何操作或者不包括多个设置的模式(例如,具有一个设置的闪光灯模式,该设置具有多个值(例如,非活动、活动、自动))。在一些实施方案中,捕获模式允许用户捕获不同类型的媒体(例如,照片或视频),并且可优化每种模式的设置以捕获对应于特定模式(例如,经由后处理)的特定类型的媒体,该特定模式具有特定属性(例如,形状(例如,正方形、矩形)、速度(例如,慢动作、时间流逝)、音频、视频)。例如,当计算机系统被配置为以静态照片捕获模式操作时,计算机系统的一个或多个相机在被激活时利用特定设置(例如,闪光灯设置、一个或多个滤镜设置)来捕获第一类型的媒体(例如,矩形照片);当计算机系统被配置为以正方形捕获模式操作时,计算机系统的一个或多个相机在被激活时利用特定设置(例如,闪光灯设置和一个或多个滤镜)来捕获第二类型的媒体(例如,正方形照片);当计算机系统被配置为以慢动作捕获模式操作时,计算机系统的一个或多个相机在被激活时利用特定设置(例如,闪光灯设置、帧每秒捕获速度)来捕获第三类型的媒体(例如,慢动作视频);当计算机系统被配置为以人像捕获模式操作时,计算机系统的一个或多个相机利用特定设置(例如,特定类型的光的量(例如,舞台光、工作室光、轮廓光)、f制光圈、模糊)来捕获第五类型的媒体(例如,人像照片(例如,具有模糊背景的照片));当计算机系统被配置为以全景捕获模式操作时,计算机系统的一个或多个相机利用特定设置(例如,缩放,移动时要捕获的视场量)来捕获第四类型的媒体(例如,全景照片(例如,宽照片))。在一些实施方案中,当在捕获模式之间切换时,视场的表示的显示改变为对应于将由该捕获模式捕获的媒体的类型(例如,当计算机系统以静态照片捕获模式操作时,该表示是矩形,而当计算机系统以正方形捕获模式操作时,该表示是正方形的)。响应于检测到第三手势,将计算机系统配置为在不同于第一捕获模式的电影视频捕获模式下操作通过允许用户在相机模式之间改变来为用户提供了更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在计算机系统(例如,600)被配置为在第一捕获模式(例如,620c)下操作时,显示该一个或多个相机的视场的第一表示(例如,图6A的实况预览630)。在一些实施方案中,在计算机系统(例如,600)被配置为在电影视频捕获模式(例如,620e)下操作时,显示该一个或多个相机的视场的第二表示(例如,图6B的实况预览630)。在一些实施方案中,第一表示比第二表示具有更少的模糊(例如,具有小于一定量的模糊)。在一些实施方案中,第一表示不具有对由该一个或多个相机捕获的视觉信息的合成景深效果应用,并且第二表示具有对由该一个或多个相机捕获的视觉信息的合成景深应用。在一些实施方案中,在第一表示中不强调个体,而在第二表示中强调个体。在计算机处于不同的捕获模式时显示视场的不同表示为用户提供了关于每个相应模式的设置如何将更改所捕获的媒体的外观的视觉反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在计算机系统(例如,600)被配置为在电影视频捕获模式(例如,620e)下操作时,计算机系统(例如,600)检测与第三手势(例如,650ar)(例如,650a1)处于不同方向的第四手势(例如,650ar)(例如,轻扫手势)(和/或在一些实施方案中,非轻扫手势(例如,轻击手势、按压并保持手势))。在一些实施方案中,响应于检测到第四手势,计算机系统被配置为在静态照片捕获模式下操作(例如,如上文关于图6A至图6B所述)(例如,不同于第二模式)。在一些实施方案中,在计算机系统被配置为以静态照片模式操作时,计算机系统的一个或多个相机在被激活(例如,经由检测到捕获媒体的请求)时利用特定设置(例如,闪光灯设置、一个或多个滤镜设置)来捕获第一类型的媒体(例如,矩形静态照片照片)。在一些实施方案中,在计算机系统被配置为在静态照片模式下操作时,计算机系统没有被配置为应用(例如,自动应用)合成景深效果以更改视觉信息以强调媒体的一个或多个帧中的个体。在一些实施方案中,响应于检测到第四手势,显示第三表示。在一些实施方案中,第三表示不具有对由该一个或多个相机捕获的视觉信息的合成景深效果应用,并且第二表示具有对由该一个或多个相机捕获的视觉信息的合成景深应用。在一些实施方案中,在第三表示中不强调个体,而在第二表示中强调个体。响应于检测到不同于第三手势的第四手势,将计算机系统配置为在不同于第一捕获模式的电影视频捕获模式下操作通过允许用户通过提供具有不同方向的用户输入而在相机模式之间改变来为用户提供了更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在检测到捕获视频的请求(例如,650b2)之前并且在计算机系统(例如,600)被配置为在第二捕获模式(例如,650e)下操作时,计算机系统检测第五手势(例如,650ar)(例如,指向第一表示的手势、处于与第二手势相同的方向的手势)(例如,轻扫手势)(和/或在一些实施方案中,非轻扫手势(例如,轻击手势、按压并保持手势));并且响应于检测到第五手势(例如,650ar),将计算机系统配置为在人像捕获模式(例如,620b)下操作(例如,不同于静态照片捕获模式、电影视频捕获模式)。在一些实施方案中,在计算机系统处于电影视频模式时,计算机系统被配置为应用合成景深效果以更改视觉信息以强调媒体的一个或多个帧中的个体。在一些实施方案中,响应于检测到第二第五,显示第四表示。在一些实施方案中,第四表示不具有对由该一个或多个相机捕获的视觉信息的合成景深效果应用,并且第二表示具有对由该一个或多个相机捕获的视觉信息的合成景深应用。在一些实施方案中,在第四表示中不强调个体,而在第二表示中强调个体。在一些实施方案中,当电子设备被配置为以人像模式操作时,计算机系统的一个或多个相机利用特定设置(例如,特定类型的光的量(例如,舞台光、工作室光、轮廓光)、f制光圈、模糊)来捕获第五类型的媒体(例如,人像照片(例如,具有模糊背景的照片))。响应于检测到第五手势,将计算机系统配置为在不同于第一捕获模式的电影视频捕获模式下操作通过允许用户在相机模式之间改变来为用户提供了更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,向视频的该多个帧(例如,媒体表示660)应用合成景深效果(例如,662、682、650ae和/或650af2)包括调整(例如,改变)应用于视频的合成景深效果的量值(例如,模拟孔径的量值或模拟和/或合成景深的量值)。在一些实施方案中,计算机系统与显示生成部件通信。在一些实施方案中,在调整应用于视频的合成景深效果的量值之后(例如,和/或同时),计算机系统显示应用于视频的合成景深效果的量值(例如,模糊量)的表示(例如,602e)(例如,数字、字词和/或符号)(例如,计算机系统和/或计算机系统的一个或多个相机与该一个或多个相机的视场中的平面之间的距离)。在一些实施方案中,根据确定应用于视频的合成景深效果的量值是默认量值和/或根据确定设置了一个或多个默认设置,计算机系统放弃显示应用于视频的合成景深效果的量值的表示,并且/或者以不同于根据确定应用于视频的合成景深效果的量值不是默认量值而应用于视频的合成景深效果的量值的表示的视觉外观来显示应用于视频的合成景深效果的量值的表示。显示应用于视频的合成景深效果的量值的表示提供了告知用户合成景深已经被调整到的量值,从而提供了改进的视觉反馈。
在一些实施方案中,在将合成景深效果应用于视频的多个帧之后,计算机系统(例如,600)检测将合成景深效果应用于已经捕获的视频的第二多个帧(例如,媒体表示660)的第二请求(例如,650ai、650al)。在一些实施方案中,响应于检测到第二请求(例如,650ai、650al)并且根据确定基于检测到第一类型的手势(例如,650ai)(例如,单轻击手势)(和/或在一些实施方案中,非轻击手势(例如,轻扫手势、按压并保持手势))而检测到第二请求(例如,650ai、650al),计算机系统(例如,600)将合成景深效果应用于已经利用第一类型的跟踪捕获的视频的第二多个帧(例如,如上文关于图6AI至图6AK所述)。在一些实施方案中,响应于检测到第二请求(例如,650ai、650al)并且根据确定基于检测到第二类型的手势(例如,650al)(例如,多轻击手势(例如,双轻击手势))(和/或在一些实施方案中,非轻击手势(例如,轻扫手势、按压并保持手势))而检测到第二请求(例如,650ai、650al),将合成景深效果应用于已经利用第二类型的跟踪捕获的视频的第二多个帧(例如,如上文关于图6AL至图6AN所述)。在一些实施方案中,第二类型的跟踪(例如,如上文关于图6AL至图6AN所述)不同于第一类型的跟踪(例如,如上文关于图6AI至图6AK所述)。在一些实施方案中,计算机系统600显示不同的视觉指示符(例如,672a-672c与676与678a-678b)以强调显示帧的一部分用于跟踪类型(例如,如上文关于图6O至图6Q、图6U至图6V、图6Z至图6AA和图6AI至图6AM所述)。
在一些实施方案中,响应于检测到第二请求(例如,650ai、650al、650z)并且根据确定基于检测到第三类型的手势(例如,650z)(例如,按压并保持手势)(和/或在一些实施方案中,非按压手势(例如,轻扫手势、轻击手势))而检测到第二请求,计算机系统(例如,600)将合成景深效果应用于已经利用第三类型的跟踪捕获的视频的第二多个帧(例如,如上文关于图6Z至图6AA所述)。在一些实施方案中,第三类型的跟踪不同于第一类型的跟踪和第二类型的跟踪(例如,不同类型的景深效果(例如,个体暂时处于焦点中的景深效果、个体永久处于焦点中的景深效果、表示的平面和/或区域处于焦点中的景深效果)(例如,如上文关于方法800所述)。在一些实施方案中,第一类型的手势、第二类型的手势和第三类型的手势彼此不同(例如,彼此不同类型的手势)。在一些实施方案中,计算机系统显示用于不同类型的跟踪的不同类型的指示符。基于接收到的手势类型(例如,第一类型的手势、第二类型的手势、第三类型的手势)来更改视觉信息通过帮助用户改变合成景深效果以通过提供特定类型的输入以特定方式更改视觉信息,从而为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,第二请求(例如,650ai、650al、650z)是单轻击手势(例如,650ai)、多轻击手势(例如,650al)(例如,双轻击手势)以及按压并保持手势(例如,650z)中的一者。
在一些实施方案中,第二请求(例如,650ai、650al、650z)基于不指向该多个帧中的一个或多个个体(例如,第一个体、第二个体)的手势(例如,650z)(例如,第三类型的手势)。在一些实施方案中,第二请求基于指向该多个帧中的该一个或多个个体的手势。在一些实施方案中,响应于检测到不指向该一个或多个个体的手势,计算机系统不向已经利用一种类型的跟踪捕获的视频的该多个帧应用合成景深效果,该种类型的跟踪当个体相对于该一个或多个相机的视场移动时跟踪该个体(例如,如上文关于图6Y至图6AB所讨论的)。
在一些实施方案中,方法800包括关于计算机系统600自动向视频应用合成景深效果的操作(例如,向视频的视觉信息)(例如,向视频的一个或多个帧(例如,在捕获持续时间内的帧的序列))。计算机系统自动向视频应用合成景深效果减少了执行一组操作所需的输入的数量,并且通过帮助用户改变合成景深效果以更改视频中的帧的序列的视觉信息而不是使用一个或多个用户输入对各个帧中的每个帧应用模糊来查看和修改各个帧以使背景模糊,从而为用户提供了对系统的更多控制。减少执行一组操作的输入的数量并且提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,视频的该多个帧中的第一个体(例如,632、634和/或638)处于距该一个或多个相机的第三距离处。在一些实施方案中,视频的该多个帧中的第二个体(例如,632、634、638)处于距该一个或多个相机的第四距离处,第四距离比第三距离更靠近该一个或多个相机(例如,如上文关于图6AG所述)。
在一些实施方案中,作为在第一捕获持续时间期间的第一时间在第一捕获持续时间捕获视频的一部分,计算机系统调整该一个或多个相机中的第一相机的一个或多个设置(例如,镜头与传感器之间的光路长度;孔径/有效孔径)以聚焦对应于第一个体的第一焦平面(例如,使第一个体处于可接受的焦点范围内);在第一捕获持续时间期间的第二时间并且在第一相机与第一焦平面对准时,计算机系统检测第一个体与第一相机之间的距离的改变;响应于检测到第一个体与第一相机之间的距离的改变,计算机系统调整第一相机的一个或多个设置以聚焦与第一个体相对应的不同于第一焦平面的第二焦平面;在第一捕获持续时间内捕获视频之后(并且在一些实施方案中,在向视频的该多个帧应用更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体的合成景深效果之后),计算机系统检测应相对于第二多个帧中的第一个体在第一多个帧中强调第二个体的指示(例如,686a、686b、688c、686d、688e、686f、686g、688h、688i、688j、688k和/或688m)(例如,选择第二个体的用户输入)(例如,如关于方法800所述),其中第一多个帧对应于第二时间;并且响应于检测到应相对于第二多个帧中的第一个体在第一多个帧中强调第二个体的指示,并且在第二焦平面未更改时(例如,应用合成景深效果不包括调整第一相机的一个或多个设置;底层未经修改的视频数据仍使第二焦平面处于焦点中),计算机系统向视频的该多个帧应用相应合成景深效果,该相应合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第一个体强调视频的该多个帧中的第二个体。在一些实施方案中,在第一捕获持续时间内捕获视频时,计算机系统通过聚焦于一组焦平面(例如,第一组真实焦平面)(例如,在捕获视频时用于跟踪该一个或多个相应个体的一个或多个焦平面)来跟踪视频的该多个帧中的一个或多个相应个体。在一些实施方案中,聚焦于该组焦平面使得该多个帧具有自然模糊量。在一些实施方案中,在捕获视频时用于跟踪该一个或多个相应个体的该一个或多个焦平面由计算机系统上的个体(和/或物体)检测算法和/或自动聚焦算法(例如,和/或设置)来识别。在一些实施方案中,通过聚焦于第一组焦平面上来跟踪视频的该多个帧中的一个或多个相应个体,将第一模糊应用于所捕获的视频。在一些实施方案中,在第一捕获持续时间内捕获视频之后(并且在一些实施方案中,在向视频的该多个帧应用更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体的合成景深效果之后),计算机系统检测应相对于第二多个帧中的第一个体在第一多个帧中强调第二个体的指示(例如,选择第二个体的用户输入)(例如,如关于方法800所述)。在一些实施方案中,响应于检测到应相对于第二多个帧中的第一个体在第一多个帧中强调第二个体的指示,计算机系统向视频的该多个帧应用相应合成景深效果,该相应合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第一个体强调视频的该多个帧中的第二个体,其中在应用该相应合成景深效果之后,该多个帧继续包括自然模糊量。在一些实施方案中,随着第二个体在该一个或多个相机的视场内移动,合成景深效果随时间而改变。
在一些实施方案中,作为向视频的该多个帧(例如,1230)应用更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体的合成景深效果的一部分,计算机系统执行以下操作:在视频的该多个帧中识别(例如,使用图像信号处理器(例如,软件算法和/或硬件处理器))一个或多个对象(例如,1232)(例如,个体、动物和/或无生命物体(例如,运动球))和/或一个或多个对象的一部分(例如,1232)(例如,面部和/或头部、躯干和/或身体)以及一个或多个特性(例如,1234)(例如,对象类型、位置、大小和/或取向、面部姿势(例如,检测到的面部的滚动、检测到的面部的偏航和/或检测到的面部的俯仰)),和/或使用对象检测算法来识别该一个或多个对象的人类关键点(例如,面部大小、面部位置、面部取向和/或手部大小、手部位置、手部取向和/或每个检测到的人的鼻部和/或左眼/右眼、耳朵、肩部、肘部、手腕、臀部、膝盖和/或脚踝的归一化(x,y)位置和置信度);将该一个或多个已识别对象和该一个或多个已识别对象的该一个或多个已识别特性提供给神经网络(例如,1224)(例如,人工神经网络;作为处理信息的一组联网人工神经元来操作的一组算法);并且基于该一个或多个已识别对象和该一个或多个已识别对象的该一个或多个已识别特性从神经网络获得输出(例如,1236)。在一些实施方案中,来自神经网络的输出从该一个或多个对象中识别第一个体(例如,632、634、628、638和/或698)以用于合成景深效果的应用。在一些实施方案中,计算机系统基于来自神经网络的输出,向视频的该多个帧应用更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体的合成景深效果。在一些实施方案中,在将该一个或多个已识别对象和该一个或多个已识别对象的该一个或多个已识别特性提供给神经网络之后,确定向视频的该多个帧应用更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体的合成景深效果(例如,基于从神经网络接收的输出)和/或基于从神经网络接收的输出应用合成景深效果(例如,和/或合成景深效果的量)。
在一些实施方案中,使用包括用户偏好数据(例如,1222)的训练数据(例如,1220)来训练神经网络(例如,1224),该用户偏好数据标识用户将在一组捕获的视频中的多个时间选择该组捕获的视频中的视频(例如,1206)中的哪些对象用于强调。在一些实施方案中,训练数据包括来自多个不同用户对同一视频或多个单个视频的用户偏好数据。在一些实施方案中,训练数据包括单个视频内的多个不同时间的用户偏好数据(例如,在不同时间对要强调的不同对象的选择)。在一些实施方案中,训练数据包括来自大量视频的数据(例如,50、100、1000和/或10,000个视频)。在一些实施方案中,训练数据识别在不同时间点要强调的不同对象。在一些实施方案中,神经网络经由训练从该一个或多个视频中的特性学习以识别视频的哪些特性可能已经导致对象被选择。
在一些实施方案中,在向视频的该多个帧应用更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体的合成景深效果之后,并且在神经网络(例如,1224)继续从该一个或多个对象中识别(例如,经由1236)第一个体以用于相应合成景深效果的相应应用(和/或继续将第一个体识别为指定的兴趣点(例如,应被强调的个体))时,计算机系统检测强调视频中的该多个帧中的第二个体的请求(例如,650o、650u、650z、650al、650ai和/或下文关于方法800所述的一个或多个输入)。在一些实施方案中,响应于检测到在视频的多个帧中强调不同个体的请求(例如,650o、650u、650z、650al、650ai和/或下文关于方法800所述的一个或多个输入)(例如,并且在神经网络继续将第一个体识别为指定的兴趣点时),计算机系统向视频的该多个帧应用不同的合成景深效果(例如,如上文关于图12所讨论的经由1238),该不同的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第一个体强调视频的该多个帧中的第二个体。在一些实施方案中,在应用不同的合成景深效果之后,将更改由该一个或多个相机捕获的视频信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体的合成景深效果保存为默认的景深效果改变。在一些实施方案中,在移除不同的景深效果之后,计算机系统自动(例如,无需介入用户输入)向视频的该多个帧重新应用更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体的合成景深效果。
应注意,上文相对于方法700所述的过程(例如,图7)的详情也以类似方式适用于本文所述的方法。例如,方法800、900、1100和/或1300任选地包括上文参考方法700所述的各种方法的一个或多个特征。例如,下文在方法900中所述的方法可用于在使用关于方法700所述的一种或多种技术捕获媒体之后在媒体编辑用户界面中显示媒体。
例如,方法700的特性可以与方法800和/或方法900组合以改进视觉媒体的更改方式。为了简明起见,这些详情在下文中不再重复。
图8是示出根据一些实施方案的用于使用计算机系统更改视觉媒体的示例性方法的流程图。在与一个或多个相机(例如,位于计算机系统同一侧或不同侧(例如,前置相机、后置相机)的一个或多个相机(例如,双相机、三相机、四相机等))、显示生成部件(例如,显示器控制器、触敏显示系统)和/或一个或多个输入设备(例如,触敏表面)通信的计算机系统(例如,100、300、500、600,智能手机、台式计算机、膝上型计算机和/或平板电脑)处执行方法800。方法800中的一些操作任选地被组合,一些操作的次序任选地被改变,并且一些操作任选地被省略。
如下所述,方法800提供了用于更改视觉媒体的直观方式。该方法减轻了用户在更改视觉媒体时的认知负担,从而创建了一种更有效的人机界面。针对电池驱动的计算设备,让用户能够更快速且更有效地更改视觉媒体节省了功率并且增加了电池两次充电之间的时间间隔。
计算机系统(例如,600)经由显示生成部件显示(802)用户界面(例如,媒体捕获用户界面、媒体视图/编辑用户界面)(并且在一些实施方案中,使用如上文/下文关于方法700和900所述的一种或多种技术来显示用户界面),该用户界面包括(例如,同时显示)视频(例如,使用如上文/下文关于方法700和900所述的一种或多种技术捕获的视频)的表示(例如,630、660)(例如,视频(例如,视频媒体)的帧(图像)的表示),该视频包括多个帧。该表示包括第一个体(例如,632、634、638)(例如,由计算机系统识别的个体;已识别个体)和第二个体(例如,632、634、638)(例如,由计算机系统识别的个体;已识别个体)。
计算机系统(例如,600)经由显示生成部件显示(804)用户界面(例如,媒体捕获用户界面、媒体视图/编辑用户界面)(并且在一些实施方案中,使用如上文/下文关于方法700和900所述的一种或多种技术来显示用户界面),该用户界面包括(例如,同时显示)指示第一个体(例如,632、634、638)正在被(例如,合成(例如,计算机生成的和/或计算机生成并且在对视频的帧的捕获之后应用的))合成景深效果强调的第一用户界面对象(例如,672a-672c),该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体(例如,632、634、638)强调(和/或强调)(例如,视觉上强调)(例如,在该多个帧中的)第一个体(例如,632、634、638)(该合成景深效果已经(例如,由计算机系统)应用于视频和/或视频的表示)(例如,使用如上文/下文关于方法700和900所述的一种或多种技术)。在一些实施方案中,在接收到与对视频的表示中的第二个体相对应的手势之前,用户界面不包括指示第二个体正在被景深效果强调的用户界面对象。在一些实施方案中,在任何给定时间,在用户界面中仅显示第一用户界面对象的一个实例。在此类实施方案中,第一用户界面对象还指示由于没有与那些个体相关联而没有被景深效果强调的个体。
在显示包括视频表示(例如,630、660)和第一用户界面对象(例如,672a-672c、678a-678b)的用户界面时,计算机系统(例如,600)检测(806)经由该一个或多个输入设备的手势(例如,650o、650u、650z、650al、650ai)(例如,单轻击手势、多轻击手势(例如,双轻击手势)、按压并保持手势),该手势与对视频的表示(例如,630、660)中的第二个体(例如,632、634、638)(例如,不同于第一个体的个体)的选择(例如,指向,在该第二个体上)相对应。
响应于(808)检测到与对视频的表示(例如,630、660)中的第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai),计算机系统(例如,600)改变(810)合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体(例如,632、634、638)强调(和/或强调)(例如,视觉上强调)该多个帧中的第二个体(例如,632、634、638)(例如,如上文关于图6B至图6AO所述)。响应于检测到与对视频的表示中的第二个体的选择相对应的手势而改变合成景深效果以更改由该一个或多个相机捕获的视觉信息,以相对于第一个体强调该多个帧中的第二个体,这通过允许用户控制合成景深效果如何被应用于视频而为用户提供了对系统的控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
响应于(808)检测到与对视频的表示(例如,630、660)中的第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai),计算机系统(例如,600)显示(812)指示第二个体(例如,632、634、638)正在被改变的合成景深效果强调的第二用户界面对象(例如,672a-672c、678a-678b),该改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第一个体(例如,632、634、638)(例如,在该多个帧中)强调(和/或强调)(例如,视觉上强调)该多个帧中的第二个体(例如,632、634、638)。在一些实施方案中,响应于检测到指向视频的表示中的第二个体的手势,计算机系统应用合成景深效果(例如,合成和/或计算机生成的),该合成景深效果相对于视频的表示(例如,一个或多个帧)和/或一个或多个后续(例如,在该表示之后显示的)表示中的第一个体(例如,人、动物、其他个体(例如,具有面部的其他个体)、物体)强调视频中的第二个体。在一些实施方案中,在相应个体的身体或身体部位(例如,头部)周围显示用户界面对象(例如,第一用户界面对象、第二用户界面对象)。在一些实施方案中,用户界面对象(例如,第一用户界面对象、第二用户界面对象)是在用户周围或其上显示的形状(例如,圆形、矩形、十字)和/或括号。在一些实施方案中,用户界面对象的颜色和/或用户界面对象的形状(例如,第一用户界面对象、第二用户界面对象)指示相应个体是否正在被合成景深效果强调。在一些实施方案中,当用户界面对象指示相应个体正在被(例如,计算机生成的)景深效果强调时,与视频的表示中的其他个体相比,该相应个体的模糊程度更低。在一些实施方案中,当用户界面对象指示相应个体没有被(例如,计算机生成的)景深效果强调时,与视频的表示中的另一个体相比,该相应个体的模糊程度更高。响应于检测到与对视频的表示中第二个体的选择相对应的手势而显示指示第二个体正在被强调的第二用户界面对象,为用户提供了关于被合成景深效果相对于视频中的其他个体强调的个体的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,第一用户界面对象(例如,672a-672c、678a-678b)和第二用户界面对象(例如,672a-672c、678a-678b)具有相同视觉外观(例如,相同颜色和/或形状)。以与指示第二个体正在被强调的第二用户界面对象相同的视觉外观来显示指示第一个体正在被强调的第一用户界面对象为用户提供了关于被合成景深效果相对于视频中的其他个体强调的个体的一致反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在检测到与对第二个体的选择相对应的手势(例如,650o、650u、650z、650al、650ai)之前,计算机系统(例如,600)经由显示生成部件(例如,在用户界面中,与第一用户界面对象同时)显示(例如,与第一用户界面对象同时)第三用户界面对象(例如,674a-674c)(例如,与第二个体相关联的框或轮廓;具有与第一用户界面对象不同的颜色和/或形状的对象)。在一些实施方案中,第三用户界面对象显示在第二个体附近或周围的位置处,指示第二个体(例如,632、635、638)没有被强调(例如,通过改变由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体的合成景深效果,以及通过更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的改变的合成景深效果)(例如,灰色框(例如,灰色个体检测框))。在一些实施方案中,响应于检测到与对视频的表示中第二个体的选择相对应的手势,计算机系统停止显示第三用户界面对象和/或用第二用户界面对象的显示替换第三用户界面对象的显示。显示指示第二个体没有被强调的第三用户界面为用户提供了关于没有被合成景深效果强调的个体的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,第一用户界面对象(例如,672a-672c)具有与第三用户界面对象(例如,674a-674c)不同的视觉外观(例如,颜色(例如,非灰色)、形状和/或除了用户界面对象在时间帧内的位置之外的其他视觉特性)。在一些实施方案中,第二用户界面对象具有与第三用户界面对象的第二视觉外观相同的视觉外观。以与指示第二个体没有被强调的第三用户界面不同的视觉外观显示指示第一个体正在被强调的第一用户界面对象为用户提供了区分合成景深效果正在强调哪些个体和没有强调哪些个体的视觉反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,视频的表示(例如,630、660)包括第三个体。在一些实施方案中,在检测到与对第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai)之前,计算机系统(例如,600)经由显示生成部件(例如,在用户界面中,与第一用户界面对象和/或第三用户界面对象同时)显示指示第二个体(例如,632、634、638)没有被强调(例如,通过更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体的合成景深效果,以及通过更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的改变的合成景深效果)的第四用户界面对象(例如,674a-674c)(例如,第三用户界面对象),以及(和/或同时显示)指示第三个体(例如,632、634、638)没有被强调(例如,通过更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体的合成景深效果,以及通过更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的改变的合成景深效果)的第五用户界面对象(例如,674a-674c)(例如,如上文关于图6AB所述)。在一些实施方案中,响应于检测到与对视频的表示中第二个体的选择相对应的手势,计算机系统继续显示第五用户界面对象和/或停止显示第四用户界面对象。显示指示第二个体没有被强调的第四用户界面对象和指示第三个体没有被强调的第五用户界面对象为用户提供了关于没有被合成景深效果强调的个体的反馈,并且允许用户识别哪些个体正在被计算机系统跟踪并且可用合成景深效果强调。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,第四用户界面对象(例如,674a-674c)和第五用户界面对象(例如,674a-674c)具有不同的视觉外观(例如,不同的颜色和/或形状)。以与指示第三个体没有被强调的第五用户界面对象相同的视觉外观来显示指示第二个体没有被强调的第四用户界面对象为用户提供了关于没有被合成景深效果强调的个体的一致反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,响应于检测到与对第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650ai、650al),计算机系统(例如,600)停止显示第一用户界面对象(例如,672a-672c)。响应于检测到与对第二个体的选择相对应的手势而停止显示第一用户界面对象为用户提供了第一个体不再被强调的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,响应于检测到与对第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai),计算机系统(例如,640)显示指示第一个体(例如,632、634、638)没有被强调(例如,通过更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体的合成景深效果,以及通过更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的改变的合成景深效果)的第六用户界面对象(例如,672a-672c)(例如,具有不同于第二用户界面对象的视觉外观(例如,颜色和/或形状)的对象)。响应于检测到与对第二个体的选择相对应的手势而显示指示第一个体没有被强调的第六用户界面对象为用户提供了第一个体不再被强调的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在该一个或多个相机正在捕获视觉信息时检测到与对第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai)(例如,如上文关于图6O至图6Z所述)(例如,对应于视频的表示的视觉信息)(例如,捕获视频)。在一些实施方案中,该用户界面是用于捕获媒体的用户界面。在一些实施方案中,用于捕获媒体的用户界面包括用于捕获媒体的可选用户界面对象。在一些实施方案中,在显示用户界面之前,计算机系统检测对用于捕获媒体的用户界面对象的选择,并且响应于检测到对用于捕获媒体的用户界面对象的选择,计算机系统显示用户界面并且经由该一个或多个相机发起对媒体的捕获。在一些实施方案中,用于捕获媒体的用户界面对象(例如,快门示能表示、启动/停止示能表示)与第一用户界面对象同时显示。在一些实施方案中,第一用户界面对象与一个或多个相机设置用户界面对象一起显示。在该一个或多个相机正在捕获视觉信息时检测到与对第二个体的选择相对应的手势,这通过帮助用户改变在视频正在被捕获时所应用的合成景深效果来为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在对视频的捕获已结束之后的视频回放(例如,后续回放;非现场回放;对视频的捕获完成之后的回放)期间,检测到与对第二个体的选择相对应的手势(例如,650o、650u、650z、650al、650ai)(例如,如下文关于图6AD至图6AQ所述)。在一些实施方案中,该媒体的表示是先前已捕获的媒体的表示。在一些实施方案中,在显示包括视频的表示和第一用户界面对象的用户界面之前,计算机系统显示包括与视频相对应的缩略图表示(在表示多个媒体项的多个缩略图表示中)的媒体图库用户界面。在一些实施方案中,响应于检测到指向与视频相对应的缩略图表示的手势,计算机系统显示包括视频的表示和第一用户界面对象的用户界面。在视频的回放期间检测到与对第二个体的选择相对应的手势,这通过帮助用户在视频已经被捕获后改变合成景深效果来为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,计算机系统(例如,600)在捕获视频时检测到与计算机系统在编辑先前捕获的视频时检测到以改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的手势相同的手势(例如,650o和650ai、650u和650al),来改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体。在一些实施方案中,在捕获视频时使用与计算机系统在编辑先前捕获的视频时检测到以改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的手势相同的手势,来改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体,这使系统更易于使用,因为无论设备是录制视频还是编辑录制的视频,都使用相同的反馈和输入来执行相同的操作。
在一些实施方案中,与对第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai)是第一单轻击手势(例如,650o、650ai)(例如,指向第二个体(例如,在第二个体上)的轻击手势)(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势))。在视频媒体的表示中检测到与对第二个体的选择相对应的单轻击手势,这通过帮助用户在视频已经被捕获后通过提供特定类型的输入以改变合成景深效果来为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,与对第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai)是第一多轻击手势(例如,650o、650al)(例如,指向第二个体(例如,在第二个体上)的多轻击手势(例如,双轻击手势))(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势))。在一些实施方案中,多轻击手势包括比单轻击手势更多的轻击。在视频媒体的表示中检测到与对第二个体的选择相对应的多轻击手势,这通过帮助用户在视频已经被捕获后通过提供特定类型的输入以改变合成景深效果来为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,与对第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai)是第一按压并保持手势(例如,650z)(例如,指向第二个体(例如,在第二个体上)的按压并保持手势)(和/或在一些实施方案中,指向个体的非按压并保持手势(例如,轻击手势、轻扫手势))。在一些实施方案中,按压并保持手势是在比单轻击手势长的时间段内检测到的经由一个或多个输入设备的手势。在视频媒体的表示中检测到与对第二个体的选择相对应的按压并保持手势,这通过帮助用户在视频已经被捕获后通过提供特定类型的输入以改变合成景深效果来为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体(例如,632、634、638)强调该多个帧中(例如,如630、660中所示)的第二个体(例如,632、634、638)包括:根据确定与对第二个体的选择相对应的手势为第一类型的手势(例如,650o、650ai)(例如,单轻击手势)(例如,指向第二个体(例如,在第二个体上)的轻击手势)(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势)),更改由该一个或多个相机捕获的视觉信息以强调第二个体,直到满足第一标准(例如,而不是该多个帧的第二组)。在一些实施方案中,改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体包括:根据确定与对第二个体的选择相对应的手势为不同于第一类型的手势的第二类型的手势(例如,650u、650l)(例如,指向第二个体(例如,在第二个体上)的多轻击手势(例如,双轻击手势))(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势)),更改由该一个或多个相机捕获的视觉信息以强调第二个体,直到满足第二标准。在一些实施方案中,第二标准不同于第一标准。在一些实施方案中,根据确定与对第二个体的选择相对应的手势为第一类型的手势,计算机系统应用合成景深效果以更改由该一个或多个相机捕获的视觉信息,以对于在视频的第一持续时间内出现的一组帧(例如,第一组帧(例如,由计算机系统显示的)),相对于第一个体强调该多个帧中的第二个体。在一些实施方案中,根据确定与对第二个体的选择相对应的手势为第二类型的手势,计算机系统应用合成景深效果以更改由该一个或多个相机捕获的视觉信息,以对于在比视频的第一持续时间更长的视频的第二持续时间内出现的一组帧(例如,第二组帧(例如,由捕获系统显示的)),相对于第一个体强调该多个帧中的第二个体。在一些实施方案中,根据确定与对第二个体的选择相对应的手势为第一类型的手势,在视频的持续时间内停止更改视觉信息,直到检测到手势和/或直到已经过预先确定的时间和/或是否满足一个或多个自动选择和/或不管对于另一对象是否满足一个或多个自动选择标准(例如,使用如上文关于方法700所述的一种或多种技术)。在一些实施方案中,根据确定与对第二个体的选择相对应的手势为第二类型的手势,在视频的持续时间内停止更改视觉信息,直到检测到手势(例如,与对媒体的表示中第二个体的选择相对应的手势)并且不管是否已经过预先确定的时间段。基于接收到的手势类型(例如,第一类型的手势和/或第二类型的手势)来更改视觉信息通过帮助用户改变合成景深效果以通过提供特定类型的输入以特定方式更改视觉信息,从而为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,第一类型的手势(例如,650o、650u、650z、650al、650ai)为第二单轻击手势(例如,650o、650ai)(例如,指向第二个体(例如,在第二个体上)的轻击手势)(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势))。在一些实施方案中,第二类型的手势(例如,650o、650u、650z、650al、650ai)为第二多轻击手势(例如,650u、650al)(例如,指向第二个体(例如,在第二个体上)的多轻击手势(例如,双轻击手势))(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势))。在一些实施方案中,多轻击手势包括比单轻击手势更多的轻击。基于接收到的手势类型(例如,单轻击手势和/或多轻击手势)来不同地更改视觉信息通过帮助用户改变合成景深效果以通过提供特定类型的输入以特定方式更改视觉信息,从而为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在更改由该一个或多个相机捕获的视觉信息以强调第二个体直到满足第一标准时(例如,在确定与对第二个体的选择相对应的手势为第一类型的手势之后),计算机系统检测指向第二个体的第一类型的手势(例如,650be)(而不是第二类型的手势)。响应于检测到指向第二个体的第一类型的手势的手势(例如,650be)(例如,在由该一个或多个相机捕获的视觉信息被更改以强调第二个体直到满足第一标准时),计算机系统更改由该一个或多个相机捕获的视觉信息以强调第二个体,直到满足第二标准(例如,关于上文关于图6S和图6BE所讨论的合成景深效果的临时/非临时改变)。在一些实施方案中,根据确定与对第二个体的选择相对应的手势为第二类型的手势,在视频的持续时间内停止更改视觉信息,直到检测到手势(例如,与对媒体的表示中第二个体的选择相对应的手势)并且不管是否已经过预先确定的时间段(例如,使用如上文关于方法800所述的一种或多种技术)。在一些实施方案中,在由该一个或多个相机捕获的视觉信息被更改以强调第二个体直到满足第一个标准时,计算机系统检测指向非第二个体的个体的第一类型的手势的手势,并且响应于检测到指向非第二个体的个体(例如,第一个体)的第一类型的手势的手势,计算机系统更改由该一个或多个相机捕获的视觉信息以强调非第二个体的个体,直到满足第一标准。在由该一个或多个相机捕获的视觉信息正在被更改以强调第二个体直到满足第一标准时,响应于检测到指向第二个体的第一类型的手势的手势而更改由该一个或多个相机捕获的视觉信息以强调第二个体直到满足第二标准,这通过允许用户放弃输入更复杂的手势来更改由该一个或多个相机捕获的视觉信息以强调第二个体直到在某些情况下满足第二标准,从而为用户提供了对用户界面的附加控制,这减少了执行操作所需的输入的数量,并且可以为某些用户带来更有效的对用户界面的控制。
在一些实施方案中,改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体包括:根据确定与对第二个体的选择相对应的手势(例如,650o、650u、650z、650al、650ai)为第三类型的手势(例如,650z)(例如,不同于第一类型的手势和第二类型的手势)(例如,按压并保持手势)(和/或在一些实施方案中,指向个体的非按压并保持手势(例如,轻击手势、轻扫手势)),通过向该多个帧中的固定焦平面(例如,不随着相应个体(例如,第二个体)在该多个帧内移动而改变的焦平面)应用合成景深效果来更改由该一个或多个相机捕获的视觉信息以强调第二个体。在一些实施方案中,该固定焦平面包括检测到经由该一个或多个输入设备的与对第二个体的选择相对应的手势的位置。基于接收到的手势类型(例如,第三类型的手势)来不同地更改视觉信息通过帮助用户改变合成景深效果以通过提供特定类型的输入以特定方式更改视觉信息,从而为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,根据确定与对第二个体的选择相对应的手势为第三类型的手势(例如,650bb2和/或650bi),显示到固定焦平面的距离的指示(例如,694bc和/或694bj)
(例如,在视频的表示上的位置处)(例如,数字、字词和/或符号)(例如,0.01毫米至50米)(例如,计算机系统和/或计算机系统的该一个或多个相机与该一个或多个相机的视场中的平面之间的距离)(例如,在先前捕获的视频的表示和/或正在捕获的视频的表示上)。响应于检测到改变在该视频中的第二时间的个体强调的请求而显示到固定焦平面的距离的指示为用户提供了关于被选择的固定焦平面的视觉反馈,从而提供了改进的视觉反馈。
在一些实施方案中,在显示第二用户界面对象(和确定是否应将重点从第一个体改变到第二个体时,以及在检测到与对第二个体的选择相对应的手势之后)并且不显示第一用户界面对象时,并且根据确定该多个帧中(例如,在该多个帧的子集中)的第一个体(例如,相对于其他个体)满足一组自动选择标准(例如,如上文关于方法700所述),计算机系统显示(重新显示)第一用户界面对象并且停止显示第二用户界面对象(并且改变(自动(例如,在没有检测到指向第一个体和/或用户界面上的位置的手势的情况下))合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体)。当满足规定条件时自动显示第一用户界面对象并且停止显示第二用户界面对象允许计算机系统基于规定条件在被强调和/或没有被强调的个体之间自动切换。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,根据确定与对第二个体的选择相对应的手势(例如,650o、650u、650z、650al、650ai)为第四类型的手势(例如,650o、650ai)(例如,单轻击手势)(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势)),该组自动选择标准为第一组自动选择标准(例如,当满足时,使得计算机系统在被强调的个体走出该帧时切换为永久地强调另一个体,而不管该被强调的个体是否回到该帧中)。在一些实施方案中,根据确定与对第二个体的选择相对应的手势为不同于第四类型的手势的第五类型的手势(例如,650u、650al)(例如,多轻击手势(例如,双轻击手势))(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势)),该组自动选择标准为不同于第一组自动选择标准的第二组自动选择标准(例如,当满足时,使得计算机系统暂时切换为强调另一个体,直到被强调的个体在走出该帧之后回到帧中)(例如,如上文关于图6O至图6V和图6AI至图6AM所讨论的)。当满足规定条件时自动改变该组自动选择标准允许计算机系统切换用于在哪些个体被强调之间自动切换的该组自动选择标准和/或基于规定条件自动改变所应用的合成景深效果。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在检测到与对第二个体的选择相对应的手势(例如,650o、650u、650z、650al、650ai)之前,该组自动选择标准包括当媒体的表示(例如,630、660)中的相应个体(例如,632、634、638)满足第一选择置信度阈值(例如,基于相应个体的检测到的移动、注视、面部、与该一个或多个相机的视点的距离的置信度阈值)时满足的标准。在一些实施方案中,响应于检测到与对第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai),该组自动选择标准包括当媒体的表示中的相应个体(例如,632、634、638)满足高于第一选择置信度阈值的第二选择置信度(例如,基于检测到的移动、注视、面部、与相应个体的该一个或多个相机的视点的距离的置信度阈值)阈值(例如,基于相应个体的检测到的移动、注视、面部、与该一个或多个相机的视点的距离的置信度阈值)时满足的标准。在一些实施方案中,当该组自动选择标准包括当媒体的表示中的相应个体满足第二选择置信度阈值时满足的标准时,与当该组自动选择标准包括当媒体的表示中的相应个体满足第一选择置信度阈值时满足的标准时发生的改变数量相比,合成景深效果的改变的数量减少。当满足规定条件时自动增加满足自动选择标准的阈值允许计算机系统减少在接收到改变合成景深效果的手势之后所应用的合成景深效果的改变量。在一组条件已经被满足而不需要进一步的用户输入时执行最优化操作增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,更改由该一个或多个相机捕获的视觉信息以相对于第一个体(例如,632、634、638)强调该多个帧中的第二个体(例如632、634、638)的合成景深效果随着第二个体在该一个或多个相机的视场内移动而随时间(例如,在第一捕获持续时间内)改变{(例如,合成景深效果的大小和/或位置改变),并且在一些实施方案中,合成景深效果在多个中间状态间改变。}(并且第二个体在该多个帧中的每个帧中继续相对于第一个体被强调)(例如,使用如上文关于方法700所述的一种或多种技术)(例如,如上文关于图6O至图6V所讨论的)。在一些实施方案中,作为显示第二用户界面对象的一部分,计算机系统随着第二个体在该多个帧中移动而移动第二用户界面对象。
在一些实施方案中,用户界面包括视频导航用户界面元素(例如,664)(并且,在一些实施方案中,视频导航用户界面元素不包括视频的表示和/或第一用户界面对象和/或第二用户界面对象)(并且在一些实施方案中,合成景深效果在被应用于视频的表示时不被应用于视频导航用户界面元素)(并且在一些实施方案中,视频导航用户界面元素与视频的表示和/或第一用户界面对象和/或第二用户界面对象一起显示)。
在一些实施方案中,在显示视频导航用户界面元素时(例如,664)并且响应于检测到与对第二个体的选择相对应的手势(例如,650o、650u、650z、650al、650ai),计算机系统(例如,600)在视频导航用户界面元素(例如,664)(例如,时间线擦除器)中显示指示在视频中(在回放期间、在捕获期间)的时间发生用户指定的改变(例如,关于哪些个体已经被强调)的用户界面对象(例如,688c、688e、688h)(例如,表示改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的第一指示)(例如,如下文关于方法900所述)。在一些实施方案中,在与视频中的帧相对应的位置处显示用户界面对象,该用户界面对象指示在视频中的该时间(例如,当检测到与对第二个体的选择相对应的手势时的时间)发生的用户指定的改变,其中在该帧处,当检测到与对第二个体的选择相对应的手势时显示第二个体。响应于检测到手势而显示指示在视频中的某个时间发生了用户指定的改变的用户界面对象,这为用户提供了该手势引起在视频中的该时间发生的对合成景深效果的用户指定的改变的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,根据确定与对第二个体(例如,632、634、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai)为第六类型的手势(例如,单轻击手势)(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势))(例如,作出临时强调改变的请求),指示发生了用户指定的改变的用户界面对象(例如,688c、688e、688h)包括第四视觉外观(例如,颜色、突出显示、文本、形状)(例如,内部没有形状(例如,圆形)的括号)。在一些实施方案中,根据确定与对第二个体的选择相对应的手势为不同于第六类型的手势的第七类型的手势(例如,650o、650u、650z、650al、650ai)(例如,多轻击手势(例如,双轻击手势))(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势))(例如,作出永久强调改变的请求),指示发生了用户指定的改变的用户界面对象(例如,688c、688e、688h)包括不同于第四视觉外观的第五视觉外观(例如,颜色、突出显示、文本、形状)(例如,内部具有形状(例如,圆形)的括号)(例如,如上文关于图6AI至图6AM所讨论的)。基于接收到的手势的类型来不同地显示指示发生了用户指定的改变的用户界面为用户提供了应用于视频的特定合成景深效果的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,根据确定与对第二个体(例如,632、634、638)的选择相对应的手势为第八类型的手势(例如,650o、650ai)(例如,单轻击手势)(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势))(例如,作出临时强调改变的请求),显示第二用户界面对象(例如,672a-672c、678a-678b)包括以第六视觉外观(例如,颜色、突出显示、文本、形状)(例如,括号内没有形状(例如,圆形)的括号)显示第二用户界面对象(例如,672a-672c)。在一些实施方案中,根据确定与对第二个体的选择相对应的手势为不同于第八类型的手势的第九类型的手势(例如,650u、650al)(例如,多轻击手势(例如,双轻击手势))(和/或在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势))(例如,作出永久强调改变的请求),显示第二用户界面对象(例如,672a-672c、678a-678b)包括以不同于第六视觉外观的第七视觉外观(例如,颜色、突出显示、文本、形状)(例如,括号内具有形状(例如,圆形)的括号)显示第二用户界面对象(例如,678a-678b)。基于接收到的手势类型不同地显示第二用户界面对象为用户提供了应用于视频的特定合成景深效果的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,用户界面是媒体捕获用户界面(例如,用于捕获媒体的用户界面、包括用于捕获媒体的可选用户界面对象的用户界面、不包括视频擦除器的用户界面)(例如,图6B至图6AB的用户界面,如关于方法700所述)。在一些实施方案中,在检测到与对第二个体的选择相对应的手势(例如,650o、650u、650z、650al、650ai)之后,并且在显示用户界面时(例如,并且在捕获视频之后),计算机系统经由该一个或多个输入设备检测一个或多个手势(例如,一个或多个轻击手势、轻扫手势和/或按压并保持手势)。在一些实施方案中,响应于检测到该一个或多个手势,计算机系统显示媒体编辑用户界面(例如,图6AD至图6AQ的用户界面)(例如,用于编辑媒体的用户界面、不包括用于捕获媒体的可选用户界面对象的用户界面、包括视频擦除器的用户界面)(例如,如上文关于图6AC所述)。在一些实施方案中,响应于检测到该一个或多个手势,计算机系统(例如,600)显示包括视频的第二表示的媒体编辑用户界面,该视频包括第三多个帧。在一些实施方案中,第二表示(例如,660)包括第一个体和第二个体。在一些实施方案中,响应于检测到该一个或多个手势,计算机系统显示包括第六用户界面对象(例如,672a-672c)的媒体编辑用户界面,该第六用户界面对象指示第一个体正在被合成景深效果强调,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调第三多个帧中的第一个体。在一些实施方案中,在显示媒体编辑用户界面时,计算机系统经由该一个或多个输入设备检测与对视频的第二表示(例如,660)中第二个体(例如,632、634、638)的选择相对应的第二手势(例如,650ai、650al)(例如,轻击手势、轻扫手势和/或按压并保持手势)。在一些实施方案中,第二手势是和与对视频的表示中第二个体(例如,显示在媒体捕获用户界面中)的选择相对应的手势的类型相同类型的手势。在一些实施方案中,第二类型的手势将使得计算机系统响应于接收到与对视频的表示中第二个体的选择相对应的第二类型的手势而执行与该类型的手势相同的功能(例如,当计算机系统响应于接收到改变合成景深效果的一种类型的手势而执行相同的功能时,而不管是正在捕获(和/或记录)视频还是在已经捕获和/或记录了视频之后编辑该视频)。在一些实施方案中,在显示不具有所应用的合成景深效果(在视频没有以电影模式操作时捕获)或不具有深度信息(或没有足够的深度信息来生成合成景深效果)的视频时(例如,而不管是正在捕获视频还是已经捕获视频),计算机系统不应用和/或改变合成景深效果以更改由该一个或多个相机捕获的视觉信息和/或响应于接收到改变合成景深效果的一个或多个输入来执行任何动作。在一些实施方案中,响应于检测到与对视频的第二表示中第二个体的选择相对应的第二手势,计算机系统改变合成景深效果以更改由该一个或多个相机捕获的视觉信息,以相对于第一个体强调第三多个帧中的第二个体。在一些实施方案中,响应于检测到与对视频的第二表示中第二个体的选择相对应的第二手势,计算机系统显示指示第二个体正在被改变的合成景深效果强调的第七用户界面对象,该改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调第三多个帧中的第二个体。在一些实施方案中,视频的表示是当前正在捕获的视频的表示,并且视频的第二表示是先前已捕获的视频的表示。在一些实施方案中,当计算机系统处于视频编辑模式时使得合成景深效果改变的相同手势(例如,单轻击手势、多轻击手势、按压并保持手势)使得合成景深效果在计算机系统处于视频捕获模式时改变。当在编辑媒体期间接收到与对视频的第二表示中第二个体的选择相对应的手势时,执行与当在捕获媒体期间接收到与对视频的第二表示中第二个体的选择相对应的手势时所执行的操作相同的操作,这通过允许用户以相同的方式控制多个用户界面来为用户提供了对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在检测到与对第二个体(例如,632、635、638)的选择相对应的手势(例如,650o、650u、650z、650al、650ai)并且改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体之后,计算机系统检测指向媒体的表示(例如,630、660)(并且不指向媒体的表示中的任何个体)的第一手势(例如,650o、650u、650z、650al、650ai)(例如,按压并保持手势)(和/或在一些实施方案中,非按压并保持手势(例如,轻击手势、轻扫手势))。在一些实施方案中,响应于检测到指向媒体的表示的第一手势(例如,650o、650u、650z、650al、650ai),计算机系统(例如,600)修改改变的合成景深效果以更改由该一个或多个相机捕获的视觉信息(例如,基于指向媒体的表示的手势的位置(并且不指向媒体的表示中的任何个体))(例如,如上文关于图6O至图6V和图6AI至图6AL所述)。在一些实施方案中,作为响应于检测到指向媒体的表示的手势而修改改变的合成景深效果以更改由该一个或多个相机捕获的视觉信息的一部分,计算机系统更改由该一个或多个相机捕获的向固定焦平面(例如,不随着相应个体(例如,第二个体)在该多个帧内移动而改变的焦平面)应用合成景深效果的视觉信息以强调第二个体。
在一些实施方案中,用户界面包括用于改变合成景深效果的可选用户界面对象(例如,622e),该可选用户界面对象在被选择时改变合成景深效果(例如,改变效果的特性(例如,效果的视觉强度))。在一些实施方案中,在显示用于改变合成景深效果的用户界面,并且在合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体时,计算机检测包括指向用于改变合成景深效果的可选用户界面对象的手势的一个或多个手势,并且响应于检测到包括指向用于改变合成景深效果的可选用户界面对象的手势的该一个或多个手势,修改改变的合成景深效果以不同地更改由该一个或多个相机捕获的视觉信息(并且在一些实施方案中,在继续相对于第一个体强调该多个帧中的第二个体和/或继续显示第二用户界面对象时)。显示用于改变合成景深效果的可选用户界面对象(该可选用户界面对象在被选择时改变合成景深效果)为用户提供了对系统的更多控制,并且允许用户改变应用于视频的合成景深效果。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,用户界面包括用于控制视频捕获模式(例如,电影视频捕获模式)的可选用户界面对象(例如,622c)(例如,如上文关于620e和622c所述)。在一些实施方案中,用于控制视频捕获模式(例如,622c)的可选用户界面对象与(例如,包括)指示视频捕获模式处于活动状态的状态指示(例如,图6AP中的622c)一起显示。在一些实施方案中,在显示包括视频的表示(例如,660)、第一用户界面对象(例如,672a-672c、678a-678b)(和/或第二用户界面对象)的用户界面,并且用于控制视频捕获模式的可选用户界面对象(例如,622c)与(例如,包括)指示视频捕获模式处于活动状态的状态指示(例如,图6AP中的622c)一起显示时,计算机系统(例如,600)应用更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体的合成景深效果(例如,和/或应用更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的合成景深效果)。在一些实施方案中,在应用更改由该一个或多个相机捕获的视觉信息相对于第二个体(例如,632、634、638)强调该多个帧中的第一个体的合成景深效果时,(例如,和/或在显示包括视频的表示、第一用户界面对象(和/或第二用户界面对象)的用户界面,并且用于控制视频捕获模式的可选用户界面对象与指示视频捕获模式处于活动状态的状态指示一起显示时),计算机系统检测指向用于控制视频捕获模式的可选用户界面对象的手势(例如,650ap1)(例如,轻击手势)(和/或在一些实施方案中,非轻击手势(例如,按压并保持手势、轻扫手势))。在一些实施方案中,响应于检测到指向用于控制视频捕获模式的可选用户界面对象(例如,620e)的手势,计算机系统(例如,600)停止应用更改由该一个或多个相机捕获的视觉信息以相对于视频的该多个帧中的第二个体强调视频的该多个帧中的第一个体的合成景深效果(例如,如上文关于图6AQ所述)(例如,并且/或者停止应用更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的合成景深效果)(例如,停止应用任何合成景深效果)。在一些实施方案中,响应于检测到指向用于控制视频捕获模式的可选用户界面对象的手势,计算机系统将用于控制视频捕获模式的可选用户界面对象与指示视频捕获模式处于非活动状态的状态指示一起显示。在一些实施方案中,响应于检测到指向用于控制视频捕获模式的可选用户界面对象的手势,计算机系统停止显示第一用户界面对象(和/或第二用户界面对象)。在一些实施方案中,在响应于检测到指向用于控制视频捕获模式的可选用户界面对象的手势而停止显示更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体的合成景深效果之后,计算机系统检测指向用于控制视频捕获模式的可选用户界面对象的第二手势,并且响应于检测到指向用于控制视频捕获模式的可选用户界面对象的第二手势,应用(重新应用)更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体的合成景深效果(例如,并且/或者应用更改由该一个或多个相机捕获的视觉信息以相对于第一个体强调该多个帧中的第二个体的合成景深效果),并且/或者将用于控制视频捕获模式的可选用户界面对象与指示视频捕获模式处于活动状态的状态指示一起显示。在一些实施方案中,在停止应用更改由该一个或多个相机捕获的视觉信息以相对于第二个体强调该多个帧中的第一个体的合成景深效果之后,计算机系统显示没有应用合成景深效果的视频的表示。在一些实施方案中,在没有应用合成景深效果的情况下显示的视频的表示包括由于相机镜头而自然发生的物理景深效果,但是与合成景深效果相比不太突出(例如,不太模糊)。显示用于控制打开/关闭合成景深效果的应用的视频捕获模式的可选用户界面对象减少了用户改变应用于视频的合成景深效果所需的操作的数量。减少操作的数量增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在检测到指向用于控制视频捕获模式的可选用户界面对象(例如,622c)的手势(例如,650ap1)之前,表示(例如,660)被显示具有第一模糊量(例如,合成模糊(并且在一些实施方案中,和自然模糊)、由所应用的合成景深效果引起的合成模糊)(例如,前景模糊和背景模糊)。在一些实施方案中,响应于检测到指向用于控制视频捕获模式的可选用户界面对象的手势(例如,650ap1),计算机系统经由显示生成部件以低于第一模糊量的第二模糊量(例如,自然模糊)显示视频的表示(例如,660)。在一些实施方案中,响应于检测到指向用于控制视频捕获模式的可选用户界面对象的手势,计算机系统减少视频媒体的表示中的模糊量并且/或者移除合成模糊(例如,由所应用的合成景深效果引起的模糊)。响应于检测到指向用于控制视频捕获模式的可选用户界面对象的手势而以不同模糊量显示视频的表示为用户提供了关于合成景深效果是否将被和/或被应用于视频的视觉反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,响应于检测到与对第二个体的选择相对应的手势(例如,650o、650u、650ai、650al),计算机系统(例如,600)配置一个或多个相机的聚焦设置以聚焦于视频的表示中的第二个体(例如,638)。在一些实施方案中,计算机系统没有被配置为自动改变该一个或多个相机的聚焦设置达至少预先确定的时间段(例如,30秒至90秒)(例如,在视频的表示的一个或多个部分之间(例如,基于媒体的表示包括第一个体时媒体的表示的改变))。在一些实施方案中,在计算机系统被配置为聚焦于视频的表示中(例如,630、660)的第二个体(例如,632、634、638)时,计算机系统(例如,600)检测第二手势(例如,650ai)(例如,单轻击手势、非按压并保持手势的手势)(和/或在一些实施方案中,指向视频的表示(例如,660)(并且不指向媒体的表示中的任何个体)的非轻击手势(例如,旋转手势、轻扫手势))。在一些实施方案中,响应于检测到指向视频的表示的第二手势(例如,650ai),使得计算机系统(例如,600)能够自动改变该一个或多个相机的聚焦设置达至少预先确定的时间段(例如,如下文关于图6AI至图6AM所述)。在一些实施方案中,在显示第一用户界面对象时,该一个或多个相机聚焦于第一个体。在一些实施方案中,响应于检测到与对视频媒体的表示中第二个体的选择相对应的手势,计算机系统将该一个或多个相机从聚焦于第一个体改变为聚焦于第二个体。在一些实施方案中,响应于检测到与对视频媒体的表示中第二个体的选择相对应的手势,计算机系统没有被配置为维持一组自动曝光值。
在一些实施方案中,视频的表示包括来自一个或多个相机的视场的第一部分(例如,图6R的实况预览630)的内容子集的表示(例如,可见表示)。在一些实施方案中,该一个或多个相机的视场延伸超过视场的第一部分到达该一个或多个相机的视场的第二部分(例如,图6R1的603),该第二部分不包括在视频的表示(例如,所显示的视频的表示)中(例如,不包括来自第二相机的内容的表示(例如,如下文所述))。在一些实施方案中,关于强调哪个个体的确定是基于在视频期间(例如,在捕获视频期间或在捕获视频之后)来自该一个或多个相机的视场的第二部分的信息。在一些实施方案中,视频的第一部分和视频的第二部分在第一相机的视场中。在一些实施方案中,视频的第一部分在第一相机的视场中,并且视频的第二部分在不同于第一相机的第二相机的视场中。在一些实施方案中,视频的第一部分在第一相机的视场之外,在第二相机(例如,具有比第一相机更宽的视场的相机)的视场之内。在一些实施方案中,关于强调哪个个体的确定包括相应个体在视场的第一部分中可见之前自动选择要强调的相应个体。在一些实施方案中,关于强调哪个个体的确定包括:在相应个体正在被强调时,检测该相应个体移出视场的第一部分;并且响应于检测到该相应个体移出视场的第一部分:根据确定该相应个体移出视场的第二部分,自动选择要强调的不同的个体;并且根据确定第一个体保持在视场的第二部分中,放弃选择要强调的不同的个体达至少预先确定的时间段(例如,如果该相应个体返回视场的第一部分,则继续强调该相应个体)(例如,如上文关于自动改变指示符686c所讨论的)。在一些实施方案中,如果经过了预先确定的时间段而该相应个体没有返回视场的第一部分,则计算机系统自动选择要强调的不同的个体。在一些实施方案中,如果在视场的第二部分中不再检测到相应个体(例如,无论是否经过了预先确定的时间段),则计算机系统自动选择要强调的不同的个体。
应注意,上面相对于方法800所述的过程(例如,图8)的详情也以类似方式适用于本文所述的方法。例如,方法700、900、1100和/或1300任选地包括上文参考方法800所述的各种方法的一个或多个特征。例如,下文在方法900中所述的方法可用于在使用关于方法800所述的一种或多种技术捕获媒体之后在媒体编辑用户界面中显示媒体。为了简明起见,上文和/或下文不再重复这些细节。
图9是示出根据一些实施方案的用于使用计算机系统更改视觉媒体的示例性方法的流程图。在与显示生成部件(例如,显示器控件器和/或触敏显示器系统)通信的计算机系统(例如,100、300、500、600、智能手机和/或智能手表)处执行方法900。在一些实施方案中,计算机系统与一个或多个输入设备(例如,触敏表面)和/或一个或多个相机(例如,位于计算机系统同一侧或不同侧(例如前置相机、后置相机)的一个或多个相机(例如,双相机、三相机、四相机等))通信。方法900中的一些操作任选地被组合,一些操作的次序任选地被改变,并且一些操作任选地被省略。
如下所述,方法900提供了用于更改视觉媒体的直观方式。该方法减轻了用户在更改视觉媒体时的认知负担,从而创建了一种更有效的人机界面。针对电池驱动的计算设备,让用户能够更快速且更有效地更改视觉媒体节省了功率并且增加了电池两次充电之间的时间间隔。
计算机系统(例如,600)经由显示生成部件显示(902)用户界面(例如,媒体视图/编辑用户界面)(并且在一些实施方案中,使用如上文关于方法700和800所述的一种或多种技术来显示用户界面),该用户界面包括(例如,同时显示)同时显示(904)视频(例如,使用如上文关于方法700和800所述的一种或多种技术捕获的视频)的表示(例如,660)(例如,视频(例如,视频媒体)的帧(图像)的表示),该视频具有第一持续时间。该视频包括视频中的个体(例如632、634、638)重点的多个改变,其中视频中的个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于视频中的一个或多个元素强调一个个体(例如,经由合成景深效果,如上文关于方法700和800所述)(例如,在第一时间强调第一个体,而在第二时间强调对第二个体的改变)。该多个改变包括在第一持续时间期间的第一时间的个体强调的自动改变(例如,如上文关于图6D至图6K所述)(例如,在不介入用户输入/手势的情况下发生的改变(例如,使用如上文关于方法700和800所述的一种或多种技术;至少一个自动改变))以及在第一持续时间期间不同于第一时间的第二时间的用户指定的个体强调的改变(例如,如上文关于图6O至图6Q、图6U至图6V和图6Z至图6AB所述)(例如,手动改变、响应于一个或多个手势而发生的改变(例如,使用如上文关于方法800所述的一种或多种技术);至少一个用户指定的改变)。
计算机系统(例如,600)显示(902)包括用户界面,该用户界面包括同时显示(906)用于导航经过包括第一时间的表示(例如,686a、686b、686d、686f和/或686g)(例如,视频的图像/帧)和第二时间的表示(例如,688c、688e和/或688h)(例如,视频的图像/帧)的视频(例如,视频的多个帧(图像))的视频导航用户界面元素(例如,664)(例如,时间线擦除器)。第二时间的表示(例如,688c、688e和/或688h)在视觉上与视频的第一持续时间中的不对应于个体强调的改变的其他时间(例如,其他时间的其他表示)(例如,664b)区分开来。在一些实施方案中,第一时间的表示在视觉上与(视频的第一持续时间中的不对应于个体强调的改变的)其他时间区分开来。第一时间的表示(例如,686a、686b、686d、686f和/或686g)(例如,664b)在视觉上与第二时间的表示(例如,688c、688e和/或688h)(例如,664b)区分开来(例如,以指示在位置处发生了个体强调的用户指定改变)。在一些实施方案中,使用视频导航用户界面元素中的第一时间的表示的位置之外的某个视觉区别,第一时间的表示在视觉上与第二时间的表示区分开来(例如,第一时间的表示的位置被显示为比第二时间的表示更靠近自动改变的指示(例如,图形对象),第二时间的表示的位置被显示为比第一时间的表示更靠近自动改变的指示(例如,图形对象,第二时间的表示被显示为具有不同的合成景深效果(例如,第二时间的表示的部分被模糊为不同于第一时间的表示的对应部分)),显示该表示)。在一些实施方案中,第一时间是计算机系统已经自动确定应发生自动改变的时间。在一些实施方案中,第一时间是个体的重点已经改变在视频的回放期间在第一时间显示的表示的时间(例如,或更多时间)。在一些实施方案中,第二时间是检测到使得用户指定的改变发生的用户输入/手势的时间。在一些实施方案中,第二时间是个体的重点已经改变在视频的回放期间在第二时间显示的表示的时间。显示第一时间的在视觉上与其他表示(例如,第二时间(例如,用户指定的改变)的表示)区分开来的表示(例如,自动改变)为用户提供了在第一时间而非其他时间发生了强调的不同改变的视觉反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,个体强调的自动改变是第一合成景深效果,该第一个合成景深效果更改由一个或多个相机捕获的视觉信息(例如,计算机系统和/或另一计算机系统的一个或多个相机)以相对于视频中的第二个体(例如,632、634、638)(例如,第三个体、第四个体或另一个体)强调视频中的第一个体(例如,632、634、638)(例如,使用如上文关于方法700和800所述的一种或多种技术)(例如,如上文关于表I所述)。个体强调的用户指定改变是第二合成现景深效果,该第二合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于视频中的第四个体(例如,第一个体、第二个体或另一个体)强调视频中的第三个体(例如,第一个体、第二个体或另一个体)(例如,使用如上文关于方法700和800所述的一种或多种技术)(例如,如上文关于表I所述)。
在一些实施方案中,用于导航经过视频的视频导航用户界面元素(例如,664)不包括指示在第一时间发生了自动改变的图形用户界面对象(例如,686a、686b、686d、686f和/或686g)。在一些实施方案中,当用于导航经过视频的视频导航用户界面元素不包括指示在第一时间发生的自动改变的图形用户界面对象时,用于导航经过视频的视频导航用户界面元素包括指示在第二时间发生了用户指定改变的图形用户界面对象。显示指示在第一时间发生了自动改变的图形用户界面对象为用户提供了在第一时间而非其他时间发生了强调的自动改变的视觉反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,用于导航经过视频的视频导航用户界面元素(例如,664)包括位于视频导航用户界面元素上的第一位置(例如,(例如,686a、686b、686d、686f和/或686g)的位置)(例如,视频的第一帧上方、第一帧下方和/或第一帧上))处的第一图形用户界面对象(例如,686a、686b、686d、686f和/或686g),该第一图形用户界面对象指示在视频(在视频的回放期间、在视频的捕获期间)中的第一时间发生了自动改变(例如,关于已强调了哪些个体)(例如,指示在视频的第一帧中关于已强调了哪些个体而发生了自动改变)。在一些实施方案中,第一图形用户界面对象(例如,686a、686b、686d、686f和/或686g)具有第一视觉外观(例如,颜色、突出显示、文本、形状)(例如,菱形、白色用户界面对象、白色菱形)。在一些实施方案中,用于导航经过视频的视频导航用户界面元素(例如,644)包括位于视频导航用户界面元素上的不同于第一位置的第二位置(例如,688c、688e、688h的位置)处的第二图形用户界面对象(例如,688c、688e、688h),该第二图形用户界面对象指示在视频中不同于第一时间的第二时间发生了用户指定改变(例如,关于已强调了哪些个体)(例如,指示在视频的不同于第一帧的第二帧中关于已强调了哪些个体而发生了用户指定改变)。在一些实施方案中,第二图形用户界面对象(例如,688c、688e、688h)具有不同于第一视觉外观的第二视觉外观(例如,颜色、突出显示、文本、形状)(例如,圆形、黄色用户界面对象、黄色圆形)(例如,与显示第一用户界面对象和第二用户界面对象的显示器的位置无关)。在一些实施方案中,在视频捕获期间进行的手动改变与在编辑视频期间做出的手动改变相同(并且在一些实施方案中,手动改变不同)。显示指示自动改变发生的具有与指示用户指定改变发生的第二图形用户界面对象不同的视觉外观的第一图形用户界面对象为用户提供了视觉反馈,以区分强调中的自动改变何时发生和用户指定改变何时发生的表示。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,用于导航经过视频的视频导航用户界面元素包括位于视频导航用户界面元素上的相应位置处的图形用户界面对象,该图形用户界面对象指示在视频中的第二时间之前发生的视频中的相应时间发生相应改变(例如,下一改变)。在一些实施方案中,根据确定在视频中的相应时间发生的相应改变是相应的用户指定改变,计算机系统显示视觉指示(例如,688c1、688e1、688h1、688i1、688k1和/或688m1)(例如,当不显示视觉指示时,与视频导航元素的该一种或多种颜色不同的颜色(例如,黄色和/或白色)),该视觉指示从视频导航用户界面元素上的相应位置(例如,688c、688e、688h、688i、688k和/或688m的位置)延伸到视频导航用户界面元素(例如,664)上的第二位置(例如,686d和/或686f)。在一些实施方案中,根据确定在视频中的相应时间发生的相应改变是相应的自动改变和/或根据确定视频中的相应时间发生相应变化不是相应的用户指定改变,放弃显示从视频导航用户界面元素上的相应位置延伸到视频导航用户界面元素上的第二位置的视觉指示。显示从视频导航用户界面元素上的相应位置延伸到视频导航用户界面元素上的第二位置的视觉指示提供视觉反馈,该视觉反馈通知用户该用户指定的改变将发生多长时间和/或用户指定的改变将在视频的什么特定部分上影响视频,这提供了改进的视觉反馈。
在一些实施方案中,在第二时间的表示处(例如,664b)或邻近该表示显示第二图形用户界面对象(例如,688c、688e、688h)。在一些实施方案中,相比于第一图形用户界面对象被显示为靠近第二时间的表示,第二图形用户界面对象被显示为更靠近第二时间的表示。在一些实施方案中,在第一时间的表示上或邻近该表示显示第一图形用户界面对象。在一些实施方案中,第二时间的表示包括第二图形用户界面对象。在一些实施方案中,第一时间的表示包括第一图形用户界面对象。显示第二图形用户界面对象被显示在第二时间的表示上或邻近该表示为用户提供了关于用户指定改变何时发生的视觉反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,响应于在正在捕获视频(例如,由计算机系统或另一计算机系统的一个或多个相机捕获)(例如,使用如上文关于方法800所述的一种或多种技术)(例如,和/或在显示媒体捕获用户界面的同时捕获,同时用于捕获媒体的可选用户界面对象处于活动状态)时检测到的手势(例如,650o、650u、650z)(例如,单轻击手势、多轻击手势(例如,双轻击手势)、按压并保持手势)而引起个体强调的用户指定改变。在一些实施方案中,响应于在已经捕获视频之后(例如,在显示作为媒体编辑用户界面的用户界面时,在显示包括视频的表示和视频导航用户界面元素的用户界面时)检测到的手势而引起个体强调的用户指定改变。在正在捕获视频时响应于手势而显示引起个体强调的用户指定改变的表示为用户提供了关于在正在捕获视频时发生的视频的改变的视觉反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在显示第二时间的表示(例如,688c、688e、688h)(例如664)(例如,和/或在显示指示在第二时间发生了用户指定改变的图形用户界面对象)时,计算机系统(例如,600)检测指向第二时间的表示(例如,688c、688e、688h)(例如,664)(例如,和/或指向在第二时间发生了用户指定改变的图形用户界面对象)的手势(例如,650ak)。在一些实施方案中,响应于检测到指向第二时间的表示(例如,688c、688e、688h)的手势(例如,650ak),计算机系统在视频的第一持续时间期间显示第二时间的第二表示(例如,图6AL中的660)。在一些实施方案中,在第一视频持续时间期间的第二时间的第二表示大于第二时间的表示(例如,第一表示)。在一些实施方案中,在第一视频持续时间期间的第二时间的第二表示是正被回放的视频的表示,并且第二时间的表示是缩略图表示(例如,未正被回放的媒体的表示)。在一些实施方案中,响应于检测到指向第二时间的表示的手势,用第二时间的第二表示替换视频的表示。响应于检测到指向第二时间的表示的手势而显示第二时间的第二表示,通过允许用户导航到与手势所指向的表示相对应的视频的一部分来向用户提供对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在显示视频导航用户界面元素(例如,664)时,计算机系统(例如,600)检测指向视频导航用户界面元素的手势(例如,6ar)。在一些实施方案中,响应于检测到指向视频导航用户界面元素(例如,664)的手势(例如,6ar)(例如,和/或在检测该手势时),导航经过视频的表示(例如,如上文关于图6R所述)。在一些实施方案中,作为导航经过视频的一部分,计算机系统在检测指向视频导航用户界面元素的手势时和/或基于指向视频导航用户界面元素的手势的移动来顺序显示视频的多个表示。响应于检测到指向视频导航用户界面元素的手势而导航经过视频,通过允许用户经由手势导航经过视频来向用户提供对系统的更多控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在检测指向视频导航用户界面元素的手势(例如,650ar)之前,视频导航用户界面元素包括位于第一播放头位置(例如,图6AR中66a1的位置)处的第一播放头(例如,664a1)(例如,垂直线、显示的视频的当前表示的时间/位置的指示符、视频回放的时间/位置的指示符)。在一些实施方案中,视频的表示(例如,660)是在对应于第一播放头位置(例如,图6AR中66a1的位置)的时间的视频的表示(例如,660)。在一些实施方案中,响应于检测到指向视频导航用户界面元素的手势(例如,650ar)(例如,和/或在检测该手势时),计算机系统(例如,600)将第一播放头(例如,664a1)从第一播放头位置(例如,图6AR中的66a1的位置)移动到第二播放头位置(例如,图6AR中的66a1的位置)(例如,基于手势的移动方向量或速度的播放头的移动方向和移动量或速度)。在一些实施方案中,响应于检测到指向视频导航用户界面元素的手势(例如,650ar)(例如,和/或在检测该手势时),计算机系统(例如,600)在对应于第二播放头位置的时间显示视频的表示(例如,660),同时停止在对应于第一播放头位置的时间显示视频的表示(例如,660)(例如,如上文关于图6AK至图6AL和图6AR所述)。在对应于第二播放头位置的时间显示视频的表示,同时响应于手势而停止在对应于第一播放头位置的时间显示视频的表示,从而允许用户看到对应于播放头的视频帧。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在检测到指向视频导航用户界面元素(例如,664)的手势(例如,650AR)时(和/或响应于检测到该手势的结束),计算机系统移动可选指示符(例如,664a2、664a3)(例如,第一播放头、微调指示符(例如,指示一旦完成编辑视频(例如,原始视频、编辑前的视频)就将被保存的修改视频的一部分的开始和/或结束的指示符)),包括根据确定可选指示符不在距第二时间的表示(或第一时间的表示)的阈值距离内,显示根据指向视频导航用户界面元素(例如,664)的手势的检测到的速度而移动的可选指示符(例如,664a2、664a3)。在一些实施方案中,当检测到指向视频导航用户界面元素的手势时(和/或响应于检测到该手势的结束),计算机系统(例如,600)移动可选指示符,包括根据确定可选指示符在距第二时间的表示的阈值距离内,显示位于第二时间的表示处的可选指示符(例如,664a2、664a3)(例如,如上文关于图6AR所述)。在一些实施方案中,可选指示符随着其更靠近第二时间的表示(例如,对齐点)而更快地移动。根据确定可选指示符在距第二时间的表示的阈值距离内,显示以不同于第一速度的第二速度移动的可选指示符减少导航到视频的特定位置(例如,合成景深效果的改变)所需的输入的数量和/或输入的长度。减少输入的数量(和/或输入的长度)增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,根据确定可选指示符(例如,664a1、664a2、664a3)在距第二时间的表示的阈值距离内,计算机系统(例如,600)提供对应于对齐到第二时间的触觉输出(例如,振动)(例如,如上文关于图6AR所述)。在一些实施方案中,可选指示符是第一播放头(例如,664a1)。在一些实施方案中,可选指示符是微调指示符(例如,664a2、664a3)(例如,指示一旦完成编辑视频(例如,原始视频、编辑之前的视频)就将被设置的修改视频的一部分的开始和/或结束的指示符))(例如,微调指示符不同于播放头指示符)。在一些实施方案中,在两个微调指示符之间显示播放头。在一些实施方案中,移动微调指示符不包括移动播放头,反之亦然。在一些实施方案中,根据确定第二播放头在距第二时间的表示的阈值距离内,计算机系统提供另一类型的输出,诸如音频或视觉输出。在一些实施方案中,根据确定第二播放头不在距第二时间的表示的阈值距离内,计算机系统不提供触觉输出(例如,移动播放头而不提供触觉输出)或其他类型的输出。提供触觉输出为用户提供了关于视频中何时发生合成景深效果改变的视觉反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,视频的表示(例如,660)是在包括第五个体(例如,632、634、638)和第六个体(例如,632、634、638)的第一持续时间期间的第三时间(例如,和/或第一时间或第二时间)的表示。在一些实施方案中,视频的表示与视频导航用户界面元素分开地显示(例如,不是其一部分,在其间具有空间或在其间具有其他用户界面元素,在用户界面的不同部分中显示)。在一些实施方案中,显示视频的表示(例如,660)包括显示第一用户界面对象(例如,672a-672c、678a-678b),该第一用户界面对象指示第五个体正在被合成景深效果所强调,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第六个体(例如,632、634、638)强调视频的表示中的第五个体(例如,632、634、638)(例如,使用如上文关于方法700所述的一种或多种技术)。示指示第五个体正在被强调的第一用户界面对象为用户提供了关于被合成景深效果相对于视频中的其他个体强调的个体的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,多个帧中的第五个体(例如,632、634、638)被显示为具有第一视觉特性(例如,第一模糊/渐变量)(例如,因为强调第一个体)。在一些实施方案中,多个帧中的第六个体被显示为具有不同于第一视觉特性的第二视觉特性(例如,第二模糊/渐变量)(例如,因为不强调第二个体)(例如,如上文关于图6AI至图6AM所述)。显示与不被强调的第六个体不同的被强调的第五个体为用户提供了反馈以区分相对于视频中的其他个体由合成景深效果强调的个体。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
一些实施方案中,在显示视频的表示(例如,660)和第一用户界面对象时,计算机系统检测与对视频的表示(例如,660)中的第六个体(例如,632、634、638)的选择相对应的手势(例如,650ai、650al)(例如,使用如上文关于方法800所述的一种或多种技术)。在一些实施方案中,响应于检测到与对视频的表示(例如,660)中的第六个体(例如,632、634、638)的选择相对应的手势(例如,650ai、650al)(例如,轻击手势、按压并保持手势、鼠标点击),计算机系统改变合成景深效果以更改由该一个或多个相机捕获的视觉信息,从而相对于第五个体强调视频的表示中的第六个体(例如,使用如上文关于方法800所述的一种或多种技术)(例如,如上文关于图6AI至图6AM所述)。响应于检测到与对视频的表示中的第二个体的选择相对应的手势而改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第六个体强调该多个帧中的第五个体,这通过允许用户控制合成景深效果如何被应用于视频而为用户提供了对系统的控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,响应于检测到与对视频的表示中的第六个体的选择相对应的手势(例如,650ai、650al)(例如,轻击手势、按压并保持手势),计算机系统显示第七图形用户界面对象(例如,672a-672c、678a-678b),该第七图形用户界面对象指示改变的合成景深效果正在强调第六个体,所改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第五个体(例如,632、634、638)强调视频的表示中的第六个体(例如,632、634、638)(例如,使用如上文关于方法700和800所述的一种或多种技术)。响应于检测到与对视频的表示中的第二个体的选择相对应的手势而显示指示所改变的合成景深效果正在强调第六个体的第七图形用户界面对象,该所改变的合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第五个体强调视频的表示中的第六个体,这通过允许用户控制合成景深效果如何被应用于视频来为用户提供了对系统的控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,用于导航经过视频的视频导航用户界面元素(例如,664)包括:视频导航用户界面元素上的第七位置处的第七图形用户界面对象(例如,668c、688e、688h、688i、688j、688k和/或688m);视频导航用户界面元素上的第八位置处的第八图形对象(例如,686d和/或686f),该第八图形对象指示合成景深改变(例如,用户指定的改变和/或自动改变)已发生在视频中的第八时间(并且,在一些实施方案中,第七位置位于视频导航用户界面元素上的第八位置之前);以及位于第七位置与第八位置之间的部分(例如,664b的一部分)。在一些实施方案中,在检测到与对视频的表示中的第六个体的选择相对应的手势之前,以第一视觉状态显示视频导航用户界面元素的位于第七位置与第八位置之间的部分(例如,视频导航用户界面元素的从第七位置延伸到第八位置的一部分和/或视频导航用户界面元素的从第七图形对象延伸到第八图形对象的一部分)(例如,如上文关于图6BB所示)。在一些实施方案中,响应于检测到与对视频的表示中的第六个体的选择相对应的手势(例如,650bb2),计算机系统显示视频导航用户界面元素的位于第七位置与第八位置之间的一部分的动画,该动画从第一视觉状态改变为不同于该第一视觉状态的第二视觉状态(例如,688c1、688e1、688h1、688i1、688k1和/或688m1)(例如,如关于图6BC所讨论和所示)。在一些实施方案中,响应于检测到与对视频的表示中的第六个体的选择相对应的手势,视频导航用户界面元素的位于第七位置之前的一部分继续以与在检测到与对视频的表示中的第六个体的选择相对应的手势之前显示该部分的状态相同状态而显示。在一些实施方案中,响应于检测到与对视频的表示中的第六个体的选择相对应的手势,视频导航用户界面元素的位于第八位置之后的一部分继续以与在检测到与对视频的表示中的第六个体的选择相对应的手势之前显示该部分的状态相同状态而显示。响应于检测到与对视频的表示中的第六个体的选择相对应的手势而显示视频导航用户界面元素的位于第七位置与第八位置之间的一部分的从第一视觉状态改变为不同于该第一视觉状态的第二视觉状态的动画提供了视觉反馈,该视觉反馈基于对与在第七位置处显示的图形对象相对应的合成景深效果的改变来向用户通知视频导航用户界面元素的哪些部分已被改变,这提供了改进的视觉反馈。
在一些实施方案中,响应于检测到与对视频的表示中的第六个体的选择相对应的手势(例如,650ai、650al)(例如,轻击手势、按压并保持手势),计算机系统在视频导航用户界面元素中显示第三时间的第二表示(例如,688h、688i)(例如,缩略图表示)。在一些实施方案中,第三时间的第二表示(例如,688h、688i)表示个体强调的用户指定改变(例如,其中,在检测到与视频的表示中的第二个体相对应的手势之前,先前未显示第三时间的第二表示)。在一些实施方案中,响应于检测到与对视频的表示中的第二个体的选择相对应的手势(例如,轻击手势、按压并保持手势),计算机系统显示在视频导航用户界面元素中的第五位置处显示的第一图形对象,以指示在视频中的第三时间发生了用户指定的改变。在一些实施方案中,在检测到手势之前,显示第三时间的表示个体强调的自动改变的第三表示(和/或在视频导航用户界面元素中的第五位置处显示以指示在视频中的第三时间发生了自动改变的第二图形对象),并且响应于检测到与对视频的表示中的第二个体的选择相对应的手势,计算机系统停止显示第三时间的第三表示(和/或在视频导航用户界面元素中的第五位置处显示的第二图形对象)并且/或者用第三时间的第二表示(和/或在视频导航用户界面元素中的第五位置处显示的第一图形对象)替换该第三表示。在视频导航用户界面元素中显示第三时间的第二表示,其中该第三时间的第二表示表示个体强调的用户指定的改变,这为用户提供了响应于检测到与对第二个体的选择相对应的手势而在第三时间发生了用户指定改变的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,第三时间的表示(例如,660)包括第七个体。在一些实施方案中,在显示视频的表示(例如,660)和第一用户界面对象(例如,672a至672c)时,计算机系统(例如,600)检测与对视频的表示中的第七个体的选择相对应的手势(例如,650ai、650al)(例如,使用如上文关于方法800所述的一种或多种技术)。在一些实施方案中,响应于检测到与对视频的表示中的第七个体的选择相对应的手势(例如,650ai、650al)(例如,轻击手势、按压并保持手势),计算机系统(例如,600)改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第五个体(以及第五个体和/或第六个体)强调视频的表示中的第七个体(例如,632、634、638)(例如,使用如上文关于方法800所述的一种或多种技术)。在一些实施方案中,响应于检测到与对视频的表示(例如,660)中的第七个体(例如,632、634、638)的选择相对应的手势(例如,650ai、650al)(例如,轻击手势、按压并保持手势),计算机系统显示指示第七个体正由改变的合成景深效果强调的第三用户界面对象,该合成景深效果更改由该一个或多个相机捕获的视觉信息以相对于第五个体(以及第五个体和/或第六个体)强调视频的表示中的第七个体(例如,使用如上文关于方法800所述的一种或多种技术)(例如,如上文关于图6AI至图6AM所述)。改变合成景深效果以更改由该一个或多个相机捕获的视觉信息以相对于第五个体强调视频的表示中的第七个体,这通过允许用户控制合成景深效果如何被应用于视频来为用户提供了对系统的控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,用于导航经过视频的视频导航用户界面元素(例如,664)包括视频导航用户界面元素(例如,664)上的第三位置处(例如,在视频的第一帧上方、第一帧下方和/或第一帧上)的第三图形用户界面对象(例如,688c、688e、688h、688i),该第三图形用户界面对象指示在视频中的第二时间(在视频的回放期间、在视频的捕获期间)发生了用户指定的改变(例如,关于已强调了哪些个体)(或者指示在视频中的第二时间发生的自动改变(例如,关于已强调了哪些个体))。在一些实施方案中,在显示第三图形用户界面对象(例如,688c、688e、688h、688i)时,计算机系统(例如,600)检测指向第三图形用户界面对象(例如,688c、688e、688h、688i)的手势(例如,轻击手势)。在一些实施方案中,响应于检测到指向第三图形用户界面对象(例如,688c、688e、688h、688i)的手势,计算机系统显示选项(例如,688h1)(例如,可选选项)以移除在视频中的第二时间发生的用户指定改变。在一些实施方案中,响应于检测到指向选项的手势,计算机系统移除在视频中的第二时间发生的用户指定改变,停止显示第三图形用户界面对象(并且在一些实施方案中,显示另一图形用户界面对象(例如,表示自动改变和/或系统生成改变)),停止显示第二时间的表示,用不包括相对于另一个体被强调的个体的第二时间的不同表示的显示来替换第二时间的表示的显示,并且用包括合成景深效果的第二时间的不同表示的显示来替换第二时间的表示的显示,该合成景深效果具有与用户指定改变所对应的跟踪类型不同的跟踪类型。响应于检测到指向第三图形用户界面对象的手势而提供用于移除在视频中的第二时间发生的用户指定改变的选项,通过允许用户移除已经应用的合成景深效果来为用户提供了对系统的控制。提供对该系统的附加控制而不由于附加显示的控件使UI杂乱增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,用于导航经过视频的视频导航用户界面元素(例如,664)包括视频导航用户界面元素上的第四位置处(例如,在视频的第一帧上方、第一帧下方和/或第一帧上)的第四图形用户界面对象(例如,688c、688e、688h、688i),该第四图形用户界面对象指示在视频中的第二时间(在视频的回放期间、在视频的捕获期间)发生了用户指定的改变(例如,关于已强调了哪些个体)(或者指示在视频中的第二时间发生的自动改变(例如,关于已强调了哪些个体))。在一些实施方案中,在第二时间的表示之后,显示多个表示(多个表示,其中每个表示均表示在第二时间之后的视频中的时间),该多个表示包括相对于视频(例如,664a元素强调的一个个体(例如,基于(例如,在第二时间发生的)用户指定改变)。在一些实施方案中,没有表示或多个表示被邻近图形用户界面对象指示或在该指示上显示,该图形用户界面对象指示表示在相应多个表示中的每一个相应表示的相应时间处已经发生改变。在第二时间的表示之后,显示所显示的包括相对于视频中的一个或多个元素强调的一个个体的多个表示为用户提供了在第三时间发生了用户指定改变并且已经改变了在第三时间显示的视频帧的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,视频的表示是第二时间的第三表示。在一些实施方案中,第二时间的第三表示根据确定用户指定改变是第一类型的用户指定改变(例如,临时强调变化)(例如,使用如上文关于方法800所述的一种或多种技术,响应于检测到如上文关于方法80所述的单轻击手势而发生的改变)而具有第三视觉外观((例如,颜色、突出显示、文本、形状)例如,在括号内没有形状(例如,圆形)的括号(例如,如上文关于图6AI至图6AL所述))。在一些实施方案中,第二时间的第三表示根据确定用户指定改变是不同于第一类型的用户指定改变的第二类型的用户指定改变(例如,临时强调变化)(例如,使用如上文关于方法800所述的一种或多种技术,响应于检测到如上文关于方法800所述的多轻击手势而发生的改变)而具有第四视觉外观((例如,颜色、突出显示、文本、形状)例如,在括号内具有形状(例如,圆形)的括号(例如,如上文关于图6AI至图6AL所述))。基于发生的用户指定改变的类型而不同地显示第二时间的第三表示为用户提供了反馈并使得用户区分发生的特定类型的用户指定改变。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在显示视频导航用户界面元素(例如,664)时,计算机系统(例如,600)检测指向视频导航用户界面元素(例如,664)上的第六位置的手势(例如,650ak)。在一些实施方案中,响应于检测到指向视频导航用户界面元素上的第六位置的手势(例如,650ak)(例如,检测指向第一时间的表示、第二时间的表示、指示在特定时间发生用户指定改变或在特定时间发生自动改变的图形用户界面对象的手势),计算机系统显示表示对应于第六位置(例如,由该第六位置表示)的视频的回放中的时间(例如,664c)的进度指示符。显示表示对应于第六位置的视频的回放中的时间的进度指示符为用户提供了关于用户已选择的视频中的时间的反馈。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,用户界面包括用于控制视频编辑模式(例如,电影视频编辑模式)(例如,662c)的可选用户界面对象。在一些实施方案中,用于控制视频编辑模式的可选用户界面对象与指示视频编辑模式处于活动状态(例如,图6AP中的662)的状态指示一起显示。一些实施方案中,用于导航经过视频的视频导航用户界面元素(例如,664)包括视频导航用户界面元素(例如,664)上的第七位置处(例如,在视频的第一帧上方、第一帧下方和/或第一帧上)的第六图形用户界面对象(例如,688c、688e、688h和/或688i),该第六图形用户界面对象指示在视频中的第二时间发生了用户指定的改变(例如,关于已强调了哪些个体)(或者指示在视频中的第二时间(在视频的回放期间、在视频的捕获期间)发生的自动改变(例如,关于已强调了哪些个体))(例如,不显示具有特定颜色(例如,灰色))。在一些实施方案中,第六图形用户界面对象以可选状态(例如,688c、688e、688h和/或688i)显示(例如,其中对第五图形用户界面对象的选择将导致计算机系统执行操作)。在一些实施方案中,在显示用于控制视频编辑模式的可选用户界面对象以及指示视频编辑模式处于活动状态(例如,图6AP中的662c)的状态指示时,计算机系统(例如,600)检测指向用于控制视频编辑模式(例如,662c)的可选用户界面对象的手势(例如,650ap1)。在一些实施方案中,响应于检测到指向用于控制视频编辑模式的可选用户界面对象(例如,662c)的手势(例如,650ap1),放弃以可选状态显示第六图形用户界面对象的显示(例如,如上文关于图6AP至图6AQ所讨论的)(例如,以非可选状态中显示第六图形用户界面对象或停止显示第六图形使用界面对象)(例如,其中对第五图形用户界面对象的选择将不会导致计算机系统执行操作)(例如,被显示具有特定颜色(灰色))(例如,其中非可选状态不同于可选状态)。响应于检测到指向用于控制视频编辑模式的可选用户界面对象的手势而以非可选择状态显示第六图形用户界面对象为用户提供了以下反馈:图形用户界面对象指示用户指定改变是不可用的并且/或者已禁用了电影视频编辑模式。为用户提供改进的视觉反馈增强了该系统的可操作性并且使用户-系统界面更有效(例如,通过帮助用户提供合适的输入并且减少操作该系统/与该系统进行交互时的用户错误),这又通过使用户能够更快速且有效地使用该系统而减少了电力使用并且延长了该系统的电池寿命。
在一些实施方案中,在检测到指向用于控制视频编辑模式的可选用户界面对象的手势之前,以第一视觉强调量显示用于导航经过视频的视频导航用户界面元素(例如,如上文关于图6AP所讨论的)。在一些实施方案中,响应于检测指向用于控制视频编辑模式的可选用户界面对象的手势(例如,650ap1),计算机系统显示用于以小于第一视觉强调量(例如,如上文关于图6AQ所讨论)的第二视觉强调量控制视频编辑模式的视频导航用户界面元素(例如,如上文关于图6AP所讨论的)。在一些实施方案中,当计算机以第一视觉强调量显示视频导航用户界面元素时,视频导航用户界面元素在视觉上被去强调(例如,更模糊、更小、变灰、更半透明和/或更少放大)。响应于检测到指向第一图形用户界面对象的输入而以小于第一视觉强调量的第二视觉强调量显示视频导航用户界面元素作为显示用于移除在第二时间发生的第二个体强调改变的选项的一部分为用户提供了关于将被移除的个体强调和/或图形用户界面对象(例如,以避免非故意的移除)的视觉反馈,这提供了改进的视觉反馈。
应注意,上文相对于方法900(例如,图9)所述的过程的详情也以类似方式适用于上文和/或下文所述的方法。例如,方法700、800、1100和1300任选地包括上文参考方法900所述的各种方法的特征中的一个或多个特征。例如,下文在方法900中所述的方法可用于在使用关于方法700所述的一种或多种技术捕获媒体之后在媒体编辑用户界面中显示媒体。为了简明起见,本文不再重复这些细节。
图10A至图10I示出了根据一些实施方案的用于使用计算机系统管理媒体捕获的示例性用户界面。些附图中的用户界面用于示出下文所述的过程,这些过程包括图11中的过程。
图10A示出了具有正面600a和背面600b的计算机系统600。相机1080a-1080c被定位在计算机系统600的背面600b上。相机1080a-1080c彼此不同,其中相机1080a-1080c具有不同的硬件规格(例如,相机传感器尺寸、形状和/或位置、相机透镜形状、尺寸和/或位置,和/或孔尺寸、形状和/或位置)。因为相机1080a-1080c的硬件是不同的,所以相机1080a-1080c中的每一个相机具有不同的图像捕获参数集,例如最小聚焦距离、最大和/或最小视场、焦距、孔尺寸范围和/或最大/最小光学缩放。
提供(例如,图10A中的)表1090以示出在关于图10A至图10I所述的示例中使用的每个相应相机(例如,1080a-1080c)的示例性图像捕获参数(例如,最小聚焦距离和最大视场)的子集之间的比较。如图10A所示,相机1080a(例如,“CAM 1”)具有在参数列1090a中显示的一组图像捕获参数,相机1080b(例如,“CAM 2”)具有在参数列1090b中显示的一组图像捕获参数,并且相机1080c(例如,“CAM 3”)具有在参数列1090c中显示的一组图像捕获参数。如图10A所示,相机1080a具有小于相机1080b(“CAM 2”)的最小焦距(例如,“B”)的最小聚焦距离(例如,“A”)。此外,相机1080b具有小于相机1080c(“CAM 3”)的最小焦距(例如,“C”)的最小聚焦距离(例如,“B”)。具有较短的最小聚焦距离的相机能够聚焦于比具有较长的最小聚焦距离的相机更靠近相机的对象。例如,提供图形图示1068并且示出了计算机系统600的一个或多个相机相对于花1068a(例如,更靠近相机、左侧)和树1068b(例如,进一步远离相机、右侧)的位置。距离标记1072a是相机1080a的最小聚焦距离的示例性表示,距离标记1072b是相机1080b的最小聚焦距离的示例性表示,并且距离标记1072c是相机1080c是最小聚焦距离的示例性表示。每个距离标记表示相应相机在计算机系统600处于环境中的特定位置时可聚焦于哪些对象(例如,花1068a、树1068b)的示例。当计算机系统600处于环境中的特定位置时,相应相机仅可聚焦于相应距离标记的右侧的对象上(例如,不比相应距离标记的距离更靠近相机)。在图10A,相机1080a能够聚焦于花1068a和树1068b上,因为距离标记1072a位于花1068a之前(例如,并且/或者花1068a和树1060b比相机1080a的最小聚焦距离更远离相机1080a)。相机1080b和1080c不能聚焦于花1068a,但是能够聚焦在树1068b上,因为距离标记1072b和1072c定位在花1068a之间(例如,并且/或者相比于距离相机1080b和1080c的最小聚焦距离,花1068a更靠近并且树1060b更远离相机1080b和1080c)。在一些实施方案中,相机1080c的最小聚焦距离使得其不能聚焦于花1068a和树1068b上(例如,树的最靠近计算机系统600的部分)。
在图10A至图10I中,相机1080a具有聚焦于比相机1080b更靠近计算机系统600的物体上的能力,并且相机1080b具有聚焦于比相机1080c更靠近计算机系统600的物体上的能力(例如,考虑到相机全部定位在背面600b上)。换句话说,计算机系统600能够显示对象和/或捕获媒体的表示,该对象和/或捕获媒体对应于在对象处于相机1080a的最小聚焦距离之内但在相机1080b的最小聚焦距离之外(例如,并且相同的关系将应用于相机1080b与相机1080c)时使用相机1080a角点对准的对象。因此,当对象在相机1080a的最小聚焦距离内但在相机1080b的最小聚焦距离之外时,计算机系统600将在聚焦于对象时使用相机1080a和/或使用相机1080a捕获焦点对准的对象。然而,在对象在多个相机(诸如相机1080a和1080b)的最小聚焦距离内的一些情况下,使用具有最小聚焦距离的相机不是最佳的。在一些情况下,当聚焦于相机1080a和1080b的最小聚焦距离内的对象时,计算机系统600使用具有更大的最小聚焦距离的相机(例如,1080b)是最佳的。在一些实施方案中,这是因为计算机系统600必须应用更多数字缩放(例如,数字和/或计算机生成的放大率)(例如,而不是使用一个或多个相机透镜放大的光学放大),以在使用具有较短的最小聚焦距离但较大视场的相机时而不是在使用具有较长的最小聚焦距离的相机和较窄的视场时以特定缩放级别显示对象和/或对应于该物体的捕获媒体的表示。在一些实施方案中,应用更多数字缩放导致对象和/或对应于该对象的捕获媒体的所显示的表示中的更多失真和/或更小的保真度。在一些实施方案中,相机1080a具有0-6cm之间的距离的最小聚焦距离。在一些实施方案中,相机1080b具有7-12cm之间的距离的最小聚焦距离。在一些实施方案中,相机1080b具有在12-15cm之间的距离的最小聚焦距离。在一些实施方案中,相机1080a-1080c的最小聚焦距离中的一个或多个最小聚焦距离是距离范围和/或与上文提供的示例不同的距离的距离。
如图10A所示,表1080还提供每个相应相机的最大视场参数。相机1080a具有大于相机1080b的最大视场(例如,“Y”)的最大视场(例如,“X”),并且相机1080b具有大于相机1080c的最大视场(例如,“Z”)的最大视场。在图10A中,提供视场指示符1070a-1070c以显示每个相机的相对视场。例如,视场指示符1070a是最宽视场指示符以指示相机1080a具有最大视场,视场指示符1070c是最小视场指示符以指示相机1080c具有最小视场,并且提供视场指示符1070b以显示相机1080b具有介于相机1080a的视场与1080c的视场之间的视场。在一些实施方案中,相机1080a是超广角相机(例如,具有超宽视场的相机),相机1080b是广角相机(例如,包括具有宽视场和/或比超宽视场窄的视场的相机传感器),并且相机1080c是长焦相机(例如,包括具有比宽视场窄的视场的相机传感器)。
如图10A所示,计算机系统600经由显示器显示包括指示符区域602、相机显示区域604和控件区域606的相机用户界面。指示符区域602包括闪存指示符602a、模式到设置指示符602b和动画图像指示符602c,这些指示符使用如上文关于图6A所述的一种或多种技术显示。控件区域606包括相机模式控件620,包括相机模式控件620、快门控件610、相机切换器控件614以及媒体集合612的表示,这些控件使用如上文关于图6A所述的一种或多种技术来显示。如图10A所示,相机显示区域604包括实况预览630和缩放控件622。缩放控件622包括0.5x缩放控件622a、1x缩放控件622b和2x缩放控件622c。如图10A所示,与其他缩放控件相比,1x缩放控件622b被放大,这指示选择了1x缩放控件622b并且计算机系统600以“1x”缩放级别显示实况预览630。当实况预览630以1x缩放级别显示时,计算机系统600使用在计算机系统600的背面600b上呈现的相机1080b(例如,如图10A中位于相机1080b处的使用指示符1092所指示的)以显示在相机显示区域604中的实况预览630的部分。在图10A中,计算机系统600聚焦于树1068b(例如,由聚焦指示符1078表示)。因此,计算机系统600具有选择相机1080a和/或1080b的选项(例如,基于最小聚焦距离,如位于树1068b的更靠近计算机系统600的部分之前的距离标记1072a和1072b所示)以显示实况预览630。在此,如上文所提及,计算机系统600使用相机1080b,因为与使用相机1080a以1x缩放级别显示实况预览630所需应用的数字缩放相比,在聚焦树1068b时应用更少的数字变焦以1x缩放级别显示实况预览630(例如,包括树表示1038b)。在一些实施方案中,当使用相机1080b以1x缩放级别显示实况预览630时,不需要数字缩放。在一些实施方案中,计算机系统600使用相机1080a、1080b和/或1080c来显示位于指示符区域602和/或控件区域606中的实况预览630的部分,而计算机系统600使用相机1080b来显示位于相机显示区域604中的实况预览630的部分。在图10A中,计算机系统600向下移动到新位置,使得花1068a至少部分地位于相机1080a-1080c的视场内。
在图10B中,当处于新位置时,计算机系统600由于向下移动而检测相机1080a-1080c(例如,至少一个)与焦点(例如,树1068b的特定位置)之间的距离改变。响应于检测到距离改变,确定所改变的距离不小于预先确定的距离(例如,不比计算机系统600用来显示图10A中的实况预览630的相机(例如,相机1080b)的最小聚焦距离和/或基于最小聚焦距离的距离更近)。如图10B所示,因为确定所改变的距离不小于预先确定的距离,因此计算机系统600使用相机1080b继续显示相机显示区域604中的实况预览630的部分(例如,如位于图10B中的相机1080b中的使用指示符1092所指示的)。在图10B中,计算机系统600在实况预览630中检测在花表示1038a上(例如,在对应于该花表示的位置处)的轻击输入1050b。
如图10C所示,响应于检测到轻击输入1050b,计算机系统600改变相机1080a-1080c的焦点(例如,相机中的至少一个相机)。在图10C中,计算机系统600改变相机1080a-1080c的焦点,使得相机1080a-1080c被构造成聚焦于环境中的花1068a而不是树1068b上。在图10C中,在实况预览630中,对焦点的改变由加粗的花表示1038a(例如,焦点中的对象)和虚线的树表示1038b(例如,焦点外的对象)来指示,这不同于图10B中的加粗的树表示1038B和虚线的花表示1038a。此外,聚焦指示符1078被显示为围绕花1068a定位以指示相机1068a-1068c被构造成聚焦于环境中的花1068a而不是树1068b上。在改变相机1080a-1080c的焦点之后,计算机系统600由于选择新焦点而检测相机1080a-1080c与相机1080a-1080c的焦点之间的距离改变。在图10C中,相机1080a-1080c和树1068b之间的距离D2长于相机1080a-1080c与花1068a之间的距离D1。因此,在图10C中,计算机系统600检测相机1080a-1080c与焦点之间的距离减小。响应于检测到相机1080a-108c与焦点之间的距离减小,确定相机1080a-1080c与焦点之间的所减小的距离小于预先确定的距离(例如,基于在检测到所减小的距离之前用于捕获实况预览630的部分的相机(例如,相机1080b)的最小聚焦距离的距离)(例如,相机1080a-1080c更靠近预先确定的距离)。
在图10C中,由于确定相机1080a-1080c与焦点之间的所减小的距离小于预先确定的距离,因此计算机系统600从使用相机1080b切换(例如,过渡)到使用相机1080a(例如,如位于图10C中的相机1080a处的使用指示符1092所指示的)以显示相机显示区域604中的实况预览630的部分。如上所述,相机1080a具有比相机1080b更短的最小聚焦距离。因此,在图10C中,计算机系统600自动切换为使用相机1080a,因为相机1080a-1080c与焦点之间的距离短于相机1080b的最小聚焦距离。在图10C中,计算机系统600应用数字缩放以继续以1x缩放级别(例如,由选择的1x缩放控件622b所指示)显示实况预览630。在一些实施方案中,作为从使用相机1080b过渡到使用相机1080a来显示相机显示区域604中的实况预览630的部分的一部分,计算机系统600更新并且/或者改变实况预览630的外观。在一些实施方案中,因为相机1080a具有与相机1080b不同的视场(例如,由于相机1080a和1080b在背面600b上的不同物理位置),当更新实况预览630时,计算机系统600相对于计算机系统600的显示器平移和/或移动实况预览630的场景(例如,以补偿由于背面600b上的相机1080a和1080b的不同物理位置引起的角度改变)。在一些实施方案中,计算机系统600相对于计算机系统600的显示器平移和/或移动实况预览630的场景,以便减少实况预览630的中心中和/或焦点(例如,花1068a)处的偏移量。在一些实施方案中,在计算机系统600相对于计算机系统600的显示器平移和/或移动实况预览630之后,计算机系统600增加了显示器的其他区域(例如,相机显示区域604和指示符区域602的边界附近和/或相机显示区域604和控件区域606的边界附近的区域)中的实况预览630的场景所发生的偏移量。
尽管图10B至图10C示出了示例性实施方案,其中计算机系统响应于输入(例如,1050b)而将相机1080a-1080c的焦点从树1068a改变为花1068a,但是计算机系统600可自动将相机1080a-1080c的焦点从树1068b改变为花1068a(例如,不接收输入;基于一个或多个自动对焦标准)。因此,在一些实施方案中,计算机系统600不检测轻击输入1050b并且将相机1080a-1080c的焦点从树1068b改变为花1068a。在一些实施方案中,计算机系统600基于计算机系统600的移动自动地将相机1080a-1080c的焦点从树1068b改变为花1068a。在一些实施方案中,计算机系统600基于在特定时间实例(例如,在图10B)花1068a比树1068B占据相机1080a-1080c的视场的更大部分而自动地将相机1080a-1080c的焦点从树1068B改变为花1068a。
图10D至图10E是可以在计算机系统600显示图10C的相机用户界面之后发生的替代场景。图10D是其中计算机系统600响应于检测到缩放控件622中的输入而以不同缩放级别(0.5x缩放级别)显示实况预览630的场景。图10D至图10E是其中当计算机系统600移动到环境中的不同位置时计算机系统600切换到显示实况预览630以使用不同相机的场景。
在图10C中,计算机系统以1x缩放控件622b检测轻击输入1050c。如图10D所示,响应于检测到轻击输入1050c,计算机系统600以0.5x缩放级别显示实况预览630(例如,如放大且加粗的放大控件622a所指示的)。当以0.5x缩放级别显示实况预览630时,计算机系统600继续使用相机1080a(例如,如位于图10D中的相机1080a处的使用指示符1092所指示的)。为了使用相机1080a以0.5x缩放级别显示实况预览630,计算机系统600应用比计算机系统600应用于以图10C中的1x缩放级别显示实况预览630更少的数字缩放(例如,或者无数字缩放)。在一些实施方案中,在图10D中,计算机系统600将来自相机1080a的整个视场的内容显示为相机显示区域604中的实况预览630,并且在图10D的指示符区域602和/或控件区域606中没有来自相机1080a的视场的内容显示为实况预览630。在一些实施方案中,在图10C中,计算机系统600在相机显示区域604中显示来自相机1080a的仅一部分视场的内容,所以在图10C的指示符区域602和/或控件区域606中存在来自相机1080a的视场的内容被显示为实况预览630。
另选地,在图10C中,计算机系统600移动到环境中的不同位置(例如,移动得远离花1068a和树1068b),如图10E所示。在图10E中,计算机系统600检测相机1080a-1080c与焦点(例如,1068a)之间的距离已增加。响应于检测到所增加的距离,计算机系统600检测相机1080a-1080c与焦点之间的所增加的距离不小于预先确定的距离(例如,基于相机1080b的预先确定的距离(例如,相机1080b的最小聚焦距离))。在图10E中,由于相机1080a-1080c与焦点之间的所增加的距离不小于预先确定的距离,因此计算机系统600从使用相机1080a切换到使用相机1080b(例如,如位于图10E中的相机1080a处的使用指示符1092所指示的)以显示相机显示区域604中的实况预览630的部分。此处,计算机系统600响应于由于计算机系统600的移动而发生的距离改变而从使用相机1080a切换到使用相机1080b,同时将焦点保持在相同对象上(例如,图10E中围绕花1068a的1078)。在一些实施方案中,计算机系统600从使用相机1080a切换到使用相机1080b以使用类似技术并且出于与上文关于图10A至图10C所讨论的原因相似的原因(例如,因为这样做将减少数字缩放的使用)在相机显示区域604中显示实况预览630的部分。
图10F至图10I示出了示例性实施方案,其中计算机系统600移动得更靠近焦点(例如,树1068b)。如图10F所示,计算机系统600正在使用相机1080c来在相机显示区域604中显示实况预览630的部分。如图10F所示,实况预览630以2x缩放级别显示(例如,如由2x缩放控件622c所指示的)。在图10F中,计算机系统600检测快门控件610上的轻击输入1050f。在图10F中,确定焦点与相机1080a-1080c之间的当前距离(例如,图10F中的D2)大于第一预先确定的阈值距离(例如,基于相机1080c的最小聚焦距离)。在图10F中,因为确定焦点与相机1080a-1080c之间的当前距离大于第一预先确定的阈值距离,因此计算机系统600使用相机1080c捕获表示实况预览630的媒体。
如图10G所示,计算机系统600更新媒体集合612以包括响应于检测到轻击输入1050f而捕获的媒体的表示。在一些实施方案中,由于确定焦点与相机1080a-1080c之间的当前距离小于第一预先确定的阈值距离,因此计算机系统600使用另一相机(诸如相机1080b)启动对表示实况预览630的媒体的捕获。因此,在一些实施方案中,计算机系统600使用与上文关于自动选择相机以显示实况预览630的类似技术来自动选择相机以捕获媒体。
如图10G所示,计算机系统600已经移动得更靠近焦点(例如,树1068b)。在图10G中,响应于检测到焦点与相机1080a-1080c之间的距离改变,确定焦点与相机1080a-1080c之间的当前距离(例如,图10G中的D3)不大于第一预先确定的阈值距离(例如,基于相机1080c的最小聚焦距离)。基于该确定,计算机系统600从使用相机1080c切换到使用相机1080b(例如,如位于图10G中的相机1080b处的使用指示符1092所指示的),以在相机显示区域604中显示实况预览630的部分(例如,使用类似技术并且出于与上文关于图10A至图10C所讨论的原因相似的原因)。在图10G中,计算机系统600检测快门控件610上的轻击输入1050g。在图10G中,确定焦点与相机1080a-1080c之间的当前距离(例如,图10G中的D3)不大于第一预先确定的阈值距离(例如,基于相机1080c的最小聚焦距离)。在图10G中,因为确定焦点与相机1080a-1080c之间的当前距离不大于第一预先确定的阈值距离,因此计算机系统600使用相机1080b捕获表示实况预览630的媒体。
如图10H所示,计算机系统600更新媒体集合612以包括响应于检测到轻击输入1050g而捕获的媒体的表示。如图10H所示,计算机系统600已经移动得更靠近焦点(例如,树1068b)。在图10H中,响应于检测到焦点与相机1080a-1080c之间的距离改变,确定焦点与相机1080a-1080c之间的当前距离(例如,图10H中的D4)不大于第二预先确定的阈值距离(例如,基于相机1080b的最小聚焦距离、比图10F至图10G的第一预先确定的阈值距离小的阈值距离)。基于该确定,计算机系统600从使用相机1080b切换到使用相机1080a(例如,如位于图10H中的相机1080a处的使用指示符1092所指示的),以在相机显示区域604中显示实况预览630的部分(例如,使用类似技术并且出于与上文关于图10A至图10C所讨论的原因相似的原因)。在图10H中,计算机系统600检测快门控件610上的轻击输入1050h。在图10H中,确定焦点与相机1080a-1080c之间的当前距离(例如,图10H中的D4)不大于第二预先确定的阈值距离(例如,基于相机1080b的最小聚焦距离、比图10F至图10G的第一预先确定的阈值距离小的阈值距离)。在图10H中,因为确定焦点与相机1080a-1080c之间的当前距离不大于第二预先确定的阈值距离,因此计算机系统600使用相机1080a捕获表示实况预览630的媒体。如图10I所示,计算机系统600更新媒体集合612以包括响应于检测到轻击输入1050h而捕获的媒体的表示。
图10A至图10I描述了实施方案,其中基于焦点与相机1080a-1080c之间的距离大于和/或小于一个或多个预先确定的阈值距离,计算机系统600确定是否在使用相机之间自动切换以显示实况预览630和/或捕获媒体。在一些实施方案中,基于该一个或多个相机的视场中检测到的光量来调整和/或改变预先确定的阈值距离。在一些实施方案中,当该一个或多个相机的视场中的所检测到的光量低于光阈值(例如,20lux、15lux、10lux或5lux)时,调整预先确定的阈值距离以使得在一组相机之间和/或到相机(例如,相机1080a)的切换发生在与当该一个或多个相机的视场中的所检测到的光量高于光阈值时不同的距离处。在一些实施方案中,通过使计算机系统600切换到一组相机和/或相应相机(例如,相机1080a)的距离范围更小,调整预先确定的阈值距离以使在该组相机和/或相应相机之间的切换发生在不同的距离处。例如,如果当视场中所检测到的光量高于光阈值时,预先确定的阈值距离是8-10cm,则当视场中所检测到的光量低于光阈值时,可将预先确定的阈值距离调整到6-8cm。
图11是示出根据一些实施方案的用于使用计算机系统管理媒体捕获的示例性方法的流程图。方法1100在与显示生成组件(例如,显示控制器和/或触敏显示系统)和多个相机(例如,1080a、1080b和/或1080c)(例如,在计算机系统的同一侧或不同侧的一个或多个相机/相机传感器(例如,双相机/相机传感器、三相机/相机传感器,以及/或者四相机/相机传感器(例如,前置摄像头和/或后置摄像头)))(例如,一个或多个超广角相机、广角相机和/或长焦相机)通信的计算机系统(例如,600)(例如,智能手机、台式计算机、膝上型计算机和/或平板电脑)处执行,该多个相机包括具有由该第一相机的硬件(例如,传感器尺寸、形状和/或位置;透镜形状、尺寸和/或位置;和/或孔尺寸、形状和/或位置)确定的(例如,一个或多个)第一图像捕获参数(例如,由1090b或1090c表示)(例如,1072b或1072c)的第一相机(例如,1080b或1080c)(例如,硬件相机和/或相机传感器(例如,广角相机和/或相机传感器,具有广角宽度的相机)和/或(例如,长焦相机))(例如,第一最小聚焦距离(例如,7-12cm或12-15cm)和第一视场(例如,相机可见的开放可观察区域、距相机透镜给定距离处图像的水平(或垂直或对角线)长度)(以及,在一些实施方案中,基于传感器尺寸和透镜焦距(例如,不是数字放大的FOV))和具有由该第二相机的硬件(例如,传感器尺寸、形状和/或位置;透镜形状、尺寸和/或位置;和/或孔尺寸、形状和/或位置)确定的(例如,一个或多个)第二图像捕获参数(例如,由1090a或1090b表示)(例如,1072a或1072b)的第二相机(例如,1080a或1080b)(例如,硬件相机和/或相机传感器(例如,超角度相机和/或相机传感器,具有超广角宽度的相机)和/或(例如,广角相机))(例如,比第一相机的第一最小聚焦距离(例如,7-12cm或12-15cm)短的第二最小聚焦距离(例如,0-6cm或7-12cm)和/或比第一相机的第一视场更宽的第二视场(例如,在至少一个维度上具有更宽视角的FOV)(例如,广角相机)。第二图像捕获参数不同于第一图像捕获参数。在一些实施方案中,计算机系统与一个或多个输入设备(例如,触敏表面)通信。
如下所述,方法1100提供了用于改变视觉媒体的直观方式。该方法减轻了用户在管理媒体捕获时的认知负担,从而创建了一种更有效的人机界面。对于电池驱动的计算设备,使得用户能够更快更有效地管理媒体捕获节省功率并且增加了电池两次充电之间的时间间隔。
计算机系统(例如,600)经由显示生成组件显示(1102)包括该多个相机中的一个或多个相机的视场的表示(例如,630)(例如,随时间推移的表示和/或来自相机的数据的实况预览馈送)的相机用户界面,其中(例如,630)视场的表示是使用由具有第一图像捕获参数(例如,由1090b或1090c表示)的第一相机(例如,1080b或1080c)收集的视觉信息(例如,使用/基于(例如,基于/使用由捕获的数据生成))来显示(例如,不使用第二相机(和/或由具有第二相机图像捕获参数的第二相机收集的视觉信息)来显示媒体的表示)。在一些实施方案中,第一相机是第一类型的相机。
在使用由第一相机收集的视觉信息(例如,1080b或1080c)显示的视场表示(例如,630)时(例如,使用第一图像捕获参数),计算机系统检测(1104)对应于多个照相机(例如,1080a、1080b或1080c)(例如,第一相机和/或第二相机)中的至少一个相机的相机位置(例如,1080a、1080b或1080c的位置)(例如,相机焦平面的位置或基于相机焦平面的位置)与对应于(例如,由1078显示的)焦点的(例如,由1078的位置表示的)焦点位置之间的距离(例如,图10A至图10I中的D1或D2)(例如,物理距离或光路距离)减小(例如,在已经选择的焦点处到物理对象的估计或确定的距离(例如,自动地(例如,没有用户输入)或使用与对焦点的选择相对应的用户输入(例如,诸如轻击输入的用户输入(例如,单轻击和/或双轻击)、按压并保持输入和/或拖动输入)))(例如,用于媒体捕获)(例如,在一些实施方案中,由于计算机系统和/或多个相机中的至少一个相机的移动、焦点移动(例如,相机聚焦于移动的对象),和/或对不同焦点的选择)。在一些实施方案中,计算机系统被配置为使该多个相机中的至少一个相机聚焦在焦点处(例如,视场中的焦点)。
响应于(1106)检测相机位置(例如1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的距离的减小(例如,图10A至图10I中的D1、D2或D3),并且根据确定相机位置与焦点位置之间的减小的距离(例如,图10A至图10I中的D1、D2或D3)比预先确定的阈值距离(例如,2-3cm、8-10cm、0-6cm、7-12cm、12-15cm、1-5m、2-6m或3-10m)更近,计算机系统从使用由第一相机(例如,1080b或1080c)收集的视觉信息来显示视场的表示(例如,630)过渡(1108)(例如,切换)为使用由第二相机(例如,由1080a或1080b)(例如,该第二相机具有比第一相机的视场更宽的视场)收集的信息来显示视场(例如,630)的表示(例如,不使用第一相机来显示媒体的表示)。在一些实施方案中,第二相机是与对应于第一相机的第一类型相机不同类型的相机(例如,具有与相机不同(例如,更宽)透镜的透镜)。在满足规定条件时从使用由第一相机收集的视觉信息来显示视场的表示自动过渡到使用由第二相机收集的视觉信息来显示视场的表示,允许计算机系统自动选择将使用第一相机还是第二相机来显示表示而不需要用户(例如,经由一个或多个附加输入)选择优选相机(例如,基于相机的图像捕获参数)用于在特定时间点显示视场的表示,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,预先确定的阈值距离(例如,2-3cm、8-10cm、0-6cm、7-12cm、12-15cm、1-5m、2-6m或3-10m)基于(例如,至少)(例如,第一相机的)第一图像捕获参数(例如,由1090b或1090c表示)(例如,诸如第一相机的最小聚焦距离)(和/或第二图像捕获参数(例如,由1090a或1090b表示))。在满足规定条件时从使用由第一相机收集的视觉信息来显示视场的表示自动过渡到使用由第二相机收集的视觉信息来显示视场的表示,其中规定条件中的至少一个预设条件基于设备的相机的图像捕获参数,允许计算机系统自动选择将使用第一相机还是第二相机来显示表示而不需要用户(例如,经由一个或多个附加输入)选择优选相机用于在特定时间点显示视场的表示,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,在使用由第一相机收集的视觉信息来显示视场的表示(例如,630)的同时,计算机系统检测到捕获媒体的请求(例如,1050f、1050g或1050h)。在一些实施方案中,作为检测到捕获媒体的请求的一部分,计算机系统检测指向(例如,在对应于用户界面对象的位置上、在该位置处)用于捕获媒体的用户界面对象(例如,快门按钮)的输入。在一些实施方案中,计算机系统显示相机用户界面包括用于捕获媒体的用户界面对象。在一些实施方案中,计算机系统显示用于捕获媒体的用户界面对象与媒体的表示同时显示。在一些实施方案中,响应于检测到捕获媒体的请求,计算机系统使用以下各项捕获媒体(例如,由图10G至图10I中的612表示):根据确定相机位置(例如,相机的位置和/或相机1080a、1080b或1080c的视点)和焦点位置(例如,由1078表示)之间的当前距离(例如,图10F至图10G中的D2)(例如,在检测到媒体捕获后所确定)比第二预先确定的阈值距离(例如,2-3cm、8-10cm、0-6cm、7-12cm、12-15cm、1-5米、2-6米或3-10米)更近(例如,如上文相对于图10F至图10G所讨论的),由第一相机收集的第二视觉信息(例如,1080b或1080c)(例如,不使用第二相机收集的视觉信息);根据确定相机位置(例如,1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的当前距离不比第二预先确定的阈值距离更近(例如,如上文关于图10F至图10G所讨论的)、由第二相机收集的第二视觉信息(例如,1080a或1080b)(例如,不使用由第一相机收集的视觉信息)。在一些实施方案中,响应于检测到捕获媒体的请求,计算机系统确定相机位置与焦点位置之间的当前距离是否比第二预先确定的阈值距离更近。在一些实施方案中,由第一相机收集的第二视觉信息是在检测到捕获媒体的请求之后已经捕获的视觉信息。在一些实施方案中,由第二相机收集的第二视觉信息是在检测到捕获媒体的请求之后已经捕获的视觉信息。在一些实施方案中,第二预先确定的阈值距离与预先确定的阈值距离相同。在满足规定条件时选择是使用第一相机还是第二相机来捕获媒体允许计算机系统自动选择将使用第一相机还是第二相机来捕获媒体,而不需要用户(例如,经由一个或多个附加输入)选择优选相机用于在特定时间点捕获媒体,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,响应于(1106)检测到相机位置(例如1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的距离(例如,图10A至图10I中的D1、D2或D3)的减小并且根据确定相机位置(例如,1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的减小的距离(例如,图10A至图10I中的D1、D2或D3)不比预先确定的阈值距离更近,计算机系统放弃从使用由第一相机收集的视觉信息(例如,1080b或1080c)来显示视场的表示(例如,630)过渡到使用由第二相机收集的视觉信息(例如,1080a或1080b)来显示视场的表示(并且使用由第一相机收集的视觉信息来继续显示视场的表示)。在满足规定条件时选择是否从使用由第一相机收集的视觉信息来显示视场的表示过渡到使用由第二相机收集的视觉信息来显示视场的表示,而不需要用户(例如,经由一个或多个附加输入)选择优选相机用于在特定时间点显示视场的表示,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,基于(例如,至少)(例如,响应于)计算机系统(例如,600)的移动(例如,如图10A至图10I所示)而检测相机位置(例如,1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的距离的减小(例如,响应于该一个或多个相机移动和/或计算机系统移动而检测相机位置与焦点位置之间的距离的减小)。在一些实施方案中,计算机系统与一个或多个传感器(例如,运动传感器和/或加速度计)通信,该一个或多个传感器能够检测计算机系统的移动并检测距离的减小包括经由一个或多个传感器检测计算机系统的移动。在由于相机的移动而满足规定条件时从使用由第一相机收集的视觉信息来显示视场的表示自动过渡到使用由第二相机收集的视觉信息来显示视场的表示,允许计算机系统自动选择将使用第一相机还是第二相机来显示表示,而不需要用户(例如,基于相机的图像捕获参数)(例如,经由一个或多个附加输入)选择优选相机用于当已经移动相机时在特定时间点显示视场的表示,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,基于选择新焦点(例如1078)(例如,如图10A至图10D所示)(例如在检测到相机位置与焦点位置之间的距离的减小之前未选择新焦点和/或焦点的情况下),检测相机位置(例如1080a、1080b或1080c的位置和/或1080A、1080b、1080c的视点)与焦点地点(例如由1078的位置表示)之间的距离的减小。在一些实施方案中,由计算机系统基于视场中的一个或多个条件来自动(例如,没有指向显示生成组件的用户输入)选择新焦点由所述计算机系统从旧焦点改变为新焦点(和/或焦点从旧焦点改变为新焦点)。在一些实施方案中,手动选择(例如,由设备的用户经由指向显示生成组件的一个或多个输入)新焦点。在一些实施方案中,该一个或多个输入是指向显示生成组件的轻击输入(例如,单轻击输入和/或多轻击输入)。在一些实施方案中,该一个或多个输入是非轻击输入(例如,按压并保持输入、语音输入、捏合输入(例如,以改变表示的缩放级别))和/或轻扫输入(例如,以平移表示)。在由于正在选择新焦点而满足规定条件时从使用由第一相机收集的视觉信息来显示视场的表示自动过渡到使用由第二相机收集的视觉信息来显示视场的表示,允许计算机系统自动选择将使用第一相机还是第二相机来显示表示而不需要用户(例如,经由一个或多个附加输入)选择优选相机(例如,基于相机的图像捕获参数)用于当已经选择新焦点时在特定时间点显示视场的表示,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,在使用由第二相机(例如,1080a或1080b)收集的视觉信息来显示视场的表示(例如,630)的同时,计算机系统检测相机位置(例如,1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的距离增加。在一些实施方案中,响应于(1106)检测到相机位置(例如,1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的距离(例如,图10A至图10I中的D1、D2或D3)的减小并且根据确定相机位置(例如,1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的所增加的距离(例如,图10A至图10I中的D1、D2或D3)不比第三预先确定的阈值距离(例如,2-3cm、8-10cm、0-6cm、7-12cm、12-15cm、1-5m、2-6m或3-10m)更近(例如,比其更远),计算机系统从使用由第二相机(例如,1080a或1080b)收集的视觉信息来显示视场的表示过渡到使用由第一相机(例如,1080b或1080c)收集的视觉信息来显示视场的表示(例如,不使用由第一相机收集的视觉信息来显示媒体的表示)。在一些实施方案中,第三预先确定的阈值距离与预先确定的阈值距离相同。在一些实施方案中,第三预先确定的阈值距离不同于(例如,大于)预先确定的阈值距离。在一些实施方案中,第三预先确定的阈值距离与预先确定的阈值距离相同。在一些实施方案中,响应于检测到相机位置与焦点位置之间的距离的增加并且根据确定相机位置与焦点位置之间的增加的距离比第三预先确定的阈值距离更近,计算机系统不会(例如,放弃)从使用由第二相机收集的视觉信息来显示视场的表示过渡到以使用由第一相机收集的视场信息来显示视场的表示(并且使用由第二相机收集的视场信息来继续显示视场的表示)。在满足规定条件时从使用由第二相机收集的视觉信息来显示视场的表示过渡到使用由第一相机收集的视觉信息来显示视场的表示,允许计算机系统自动选择将使用第一相机还是第二相机来显示表示而不需要用户(例如,经由一个或多个附加输入)选择优选相机(例如,基于相机的图像捕获参数)用于在特定时间点显示视场的表示,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,在检测到相机位置(例如,1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的距离的减小之前,以有效缩放级别(例如,呈现为显示表示的缩放级别、处于彼此之间的预先确定的量(例如,低于阈值量)内的缩放级别的范围(例如,0.00000001x、0.0000004x、0.0003x、03x、07x、0.1x、0.16x或0.2x缩放量)显示视场的表示。在一些实施方案中,作为从使用由第一相机(例如,1080b或1080c)收集的视觉信息来显示视场的表示(例如,630)过渡到使用由第二相机(例如,1080a或1080b)收集的视觉信息来显示视场的表示的一部分,计算机系统继续以有效缩放级别显示视场的表示(例如,如由622a、622b、622c表示)。在一些实施方案中,有效缩放级别不同于第二相机的本地缩放级别(例如,以有效缩放级别显示视场的表示包括以相对于第二相机的本地缩放级别的数字缩放级别显示视场的表示)(例如,在检测到相机位置与焦点位置之间的距离的减小之前显示表示)。在一些实施方案中,在从使用由第一相机收集的视觉信息来显示视场的表示过渡到使用由第二相机收集的视觉信息来显示视场的表示之后,以不大于缩放级别的第一缩放量(例如,0.0001x至0.02x)的缩放级别来显示视场的表示,使得该表示看起来继续以该缩放级别来显示。在一些实施方案中,响应于检测到相机位置与焦点位置之间的距离的减小并且根据确定相机位置与焦点位置之间的减小的距离比预先确定的阈值距离更近,计算机系统继续以缩放级别显示视场的表示。作为从使用由第一相机收集的视觉信息来显示视场的表示过渡到使用由第二相机收集的视觉信息来显示视场的表示的一部分,继续以有效缩放级别显示视场的表示通过维持(和/或减小)显示视场的表示的有效缩放为用户提供了改进的视觉反馈,这提供了改进的视觉反馈。
在一些实施方案中,从使用由第一相机(例如,1080b或1080c)收集的视觉信息来显示视场的表示过渡到使用由第二相机(例如,1080a或1080b)收集的视觉信息来显示视场的表示(例如,630)包括改变视场的表示的外观(例如,在视觉上更新视场的表示的外观)。在一些实施方案中,视场的更新的外观具有与在从使用由第一相机收集的视觉信息来显示视场的表示过渡到使用由第二相机收集的视觉信息来显示视场的表示之前显示的视场的表示的外观不同的外观。作为从使用由第一相机收集的视觉信息来显示视场的表示过渡到使用由第二相机收集的视觉信息来显示视场的表示的一部分,改变视场的表示的外观,向用户提供了已相对于视场的表示被显示的方式发生了一个或多个改变的反馈,这提供了改进的视觉反馈。
在一些实施方案中,第一相机(例如,1080b或1080c)定位在(例如,物理地定位在)计算机系统(例如,600)上的第一位置处。在一些实施方案中,第二相机(例如,1080a或1080b)定位在(例如,物理地定位在)计算机系统(例如,600)上的第二位置(例如,不同于第一位置)处。在一些实施方案中,作为从使用由第一相机(例如,1080b或1080c)收集的视觉信息来显示视场的表示(例如,630)过渡到使用由第二相机(例如,1080a或1080b)收集的视觉信息来显示视场的表示的一部分,计算机系统显示视场的表示,该视场的表示被移位以增加相机用户界面(例如,包括602、604和606的用户界面)的预先确定部分(例如,视场的表示的中心(例如,实况预览)或相机用户界面的焦点处的一部分)附近第一相机的视场与第二相机的视场之间的对准,而不是增加在预先确定部分附近的平移量,同时减少在视场的表示的更加远离预先确定部分的一个或多个部分处第一相机的视场与第二相机的视场之间的对准。在一些实施方案中,相机用户界面的预先确定部分处的平移量小于相机用户界面的第二预先确定部分处(例如,相机用户界面的边缘处)的平移量。在一些实施方案中,根据确定焦点对应于相机用户界面上的第一位置,计算机系统将视场的表示移位第一量,以增加相机用户界面的预先确定部分附近第一相机的视场与第二相机的视场之间的对准。在一些实施方案中,根据确定焦点对应于相机用户界面上的第一位置,计算机系统将视场的表示移位不同于(例如,大于或小于)第一量的第二量,以增加相机用户界面的预先确定部分附近第一相机的视场与第二相机的视场之间的对准。作为从使用由第一相机收集的视觉信息来显示视场的表示过渡到使用由第二相机收集的视觉信息来显示视场的表示的一部分,显示在相机用户界面的预先确定部分附近具有与在第一相机定位在不同于第一位置的位置处时和/或在第二相机定位不同于第二位置的位置处时将发生的预先确定部分附近的平移量相比而言减少的平移量的视场的表示,通过减少平移量(和/或对相机用户界面的分散和改变)向用户提供了改进的视觉反馈,其在使用相机会导致显示相机用户界面和/或视场的表示之间过渡,从而提供改进的视觉反馈。
在一些实施方案中,该多个相机包括具有由第三相机的硬件(例如,传感器大小、形状和/或放置;透镜形状、大小和/或放置;和/或第三相机的孔尺寸、形状和/或放置)确定的(例如,一个或多个)第三图像捕获参数(例如,1090b或1090c)(例如,长于第一相机的第一最小聚焦距离和第二相机的第二最小聚焦距离的第三最小聚焦距离,以及窄于第一视场和/或第二视场的第三视场)的第三相机(例如,1080b或1080c)(例如,硬件相机和/或相机传感器(例如,远距照相机和/或相机传感器、具有宽度的相机))(例如,不同于第一相机和/或第二相机的相机),并且其中第三图像捕获参数(例如,1090b或1090c)不同于第一图像捕获参数(例如,1090b或1090c)和第二图像捕获参数(例如,1090a或1090b)。在一些实施方案中,在使用由具有第一图像捕获参数的第一相机(例如,1090b或1090c)收集的视觉信息来显示视场的表示(例如,630)之前,计算机系统使用由具有第三图像捕获参数的第三相机收集的视觉信息来显示视场的表示。在一些实施方案中,在使用由第三相机(例如,1090b或1090c)收集的视场信息(例如,利用第三图像捕获参数)显示视场的表示时,计算机系统检测相机位置(例如,1080a、1080b或1080c的位置和/或1080a、1080b、1080c的视点)与焦点位置(例如,由1078的位置表示)之间的第二距离(例如,物理距离或光路距离)减小(例如,由D1、D2或D3表示)。在一些实施方案中,由于与距离减小不同的一组情况而发生第二距离减小。在一些实施方案中,响应于检测到相机位置与焦点位置之间的第二距离减小,并且根据确定相机位置与焦点位置之间的第二减小距离的比第四预先确定距离更近(例如,2-3cm、8-10cm、0-6cm、7-12cm、12-15cm、1-5m、2-6m或3-10m),计算机系统从使用由第三相机收集的视觉信息来显示视场的表示过渡到使用由第一相机收集的视觉信息来显示视场的表示(例如,不使用由第一相机和/或第三相机收集的视觉信息)。在一些实施方案中,响应于检测到相机位置与焦点位置之间的第二距离减小,并且根据确定相机位置与焦点位置之间的第二减小距离的不比第四预先确定距离更近,计算机系统放弃从使用由第三相机收集的视觉信息来显示视场的表示过渡到使用由第一相机收集的视觉信息来显示视场的表示。在一些实施方案中,作为从使用由第三相机收集的视觉信息来显示视场的表示过渡到使用由第一相机收集的视觉信息来显示视场的表示的一部分和/或在此之后,计算机系统使用由第一相机收集的视场信息来显示视场的表示。在满足规定条件时从使用由第三相机收集的视觉信息来显示视场的表示自动过渡到使用由第一相机收集的视觉信息来显示视场的表示,允许计算机系统自动选择将使用第一相机还是第二相机来显示表示,而不需要用户(例如,基于相机的图像捕获参数)(例如,经由一个或多个附加输入)选择优选相机用于在特定时间点显示视场的表示,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,根据确定(例如,当检测到相机位置与焦点位置之间的距离(例如,物理距离或光路的距离)减小时)该多个相机中的一个或多个相机的视场中的光(例如,环境光和/或可用光)量高于阈值光量(例如,22lux、20lux、11lux、10lux、5lux和/或1lux)(例如,低光阈值、在视场中的光量低于阈值时计算机系统可被配置在低光模式下操作的情况下的阈值),预先确定的阈值距离是第一阈值距离(例如,如上文(例如,关于图10I)所讨论的)。在一些实施方案中,根据确定(例如,当检测到相机位置与焦点位置之间的距离(例如,物理距离或光路的距离)减小时)该多个相机中的一个或多个相机的视场中的光量不高于阈值光量,预先确定的阈值距离是不同于第一阈值距离的第二阈值距离(例如,如上文(例如,关于图10I)所讨论的)。在一些实施方案中,根据确定该多个相机中的一个或多个相机的视场中的光量不高于阈值,在计算机系统从使用由一个相机(例如,第一相机和/或第三相机)收集的视觉信息来显示视场的表示过渡到使用由其他相机(例如,第二相机和/或第三相机)收集的视觉信息来显示视场的表示之前,相机位置必须更靠近焦点位置。自动具有当满足规定条件时改变的预先确定的阈值距离,允许计算机系统基于视场中的光量自动选择将使用第一相机还是第二相机来显示表示,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,第一相机(例如,1080b或1080c)具有第一固定焦距(例如,第一固定角视场)并且第二相机(例如,1080a或1080b)具有不同于第一固定焦距的第二固定焦距(例如,对应于第二固定角视场)(例如,第一主相机和第二主相机)。在一些实施方案中,第一相机具有不同于第二相机的固定焦距(例如,更长或更短)的固定焦距。在一些实施方案中,第一相机(例如,1080B或1080C)具有第一最小聚焦距离(例如,1090中的A、B或C)(例如,1072a、1072b或1072c)(例如,7-12cm或12-15cm)。在一些实施方案中,第二相机(例如,1080a或1080b)具有第二最小聚焦距离(例如,1090中的A、B或C)(例如,1072a、1072b或1072c)(例如,1-6cm或7-12cm)。在一些实施方案中,第一最小聚焦距离长于(例如,大于;在长度上大于)第二最小聚焦距。在一些实施方案中,第一相机具有第一最小缩放级别。在一些实施方案中,第二相机具有第二最小缩放级别。在一些实施方案中,第一最小缩放级别不同于(例如,大于或小于)第二最小缩放级别。在一些实施方案中,第一相机具有第一最大缩放级别(例如,1090中的X、Y或Z)。在一些实施方案中,第二相机具有第二最大缩放级别(例如,1090中的X、Y或Z)。在一些实施方案中,第一最大缩放级别不同于(例如,大于或小于)第二最大缩放级别。
应注意,上文相对于方法1100(例如,图11)所述的过程的详情也以类似方式适用于上文和/或下文所述的方法。例如,方法700、800、900和1300任选地包括上文参考方法1100所述的各种方法的特征中的一个或多个特征。例如,上文在方法900中所述的方法可用于在使用关于方法700和/或方法1100所述的一种或多种技术捕获媒体之后在媒体编辑用户界面中显示媒体。为了简明起见,本文不再重复这些细节。
图12是示出示例性神经网络系统1200的框图。在一些实施方案中,神经网络系统1200的一个或多个部件用于确定是否应将对合成景深效果的自动改变应用于捕获和/或经编辑的媒体(例如,在如上文关于图6A至图6BJ所讨论的一个或多个场景中)。在一些实施方案中,神经网络系统1200包括神经网络训练部分1202和神经网络使用部分1204。
神经网络训练部分1202提供关于如何训练神经网络1224的示例性实施方案。神经网络训练部分202包括训练媒体1206。在一些实施方案中,训练媒体1262包括表示媒体(例如,视频)中的一个或多个帧的数据。在一些实施方案中,训练媒体包括来自100、200、500、1000和/或100,000个视频的一个或多个帧。在一些实施方案中,该一个或多个帧先前已由计算机系统600的一个或多个相机捕获。在一些实施方案中,训练媒体1206由一个或多个对象处理算法(例如,一个或多个机器学习算法)处理。在一些实施方案中,该一个或多个对象处理算法使用计算机视觉来识别媒体中的一个或多个对象。在一些实施方案中,该一个或多个对象处理算法识别训练媒体1206的一个或多个帧中的一个或多个对象标识符1208和一个或多个对象属性1210。在一些实施方案中,对象标识符1208包括与以下项相对应的标识符:人(例如,John 632和/或Jane 634)和/或动物(例如,狗638)的面部和/或头部、人和/或动物的躯干,以及/或者无生命物体(例如,手推车626和/或花698)诸如球(例如,运动球)和/或手推车。在一些实施方案中,对象标识符1208包括对象类型(例如,人、动画、植物、花等)。在一些实施方案中,对象属性1210包括对象的一个或多个属性(例如,特性),诸如面部姿势。在一些实施方案中,面部姿势包括一个或多个属性,诸如检测到的面部的滚动、俯仰和/或偏航。在一些实施方案中,对象属性1210可包括检测到的面部的鼻部和/或检测到的人和/或动物的左眼和/或右眼、耳朵、肩部、肘部、手腕、臀部、膝盖和/或脚踝的归一化(x,y)位置、大小和/或置信度。
如图12的神经网络训练部分1202中所示,训练媒体1206、对象标识符1208和对象属性1210用作馈送到神经网络1224中的训练数据1220。训练数据1220用于训练神经网络1224,并且还被人类查看者用于作出训练者强调决策1222。在一些实施方案中,神经网络1224是多层感知器(例如,用于二元分类器的监督学习的算法)。在一些实施方案中,神经网络基于训练数据1220来输出神经网络强调决策1226。在一些实施方案中,神经网络强调决策1226包括对在多个视频中的不同时间是否需要对合成景深效果的自动改变的一个或多个确定。在一些实施方案中,将训练者强调决策1222和神经网络强调决策1226与强调评分模块1214进行比较以生成强调得分。在一些实施方案中,训练者强调决策1222表示一组人类意见,其中一个或多个人(例如,多个人类注释者)已经通过查看视频来提供了对应该在训练媒体1206的一个或多个帧中强调哪个个体(例如,人、动物和/或任选被算法识别为对象标识符1208的物体)和/或焦平面的指示。训练者强调决策1222任选地指示何时应该应用合成景深效果来在训练媒体1206的该一个或多个帧中强调个体和/或焦平面。在一些实施方案中,强调评分1214将神经网络强调决策1226与训练者强调决策1222进行比较,并且神经网络1224被训练来最小化神经网络强调决策1226与训练者强调决策1222之间的差异;可利用基于对神经网络1224的改变的另外神经网络强调决策1226、基于查看训练媒体1206的另外查看者的另外训练者强调决策1222或被查看的新训练媒体1206来迭代地重复该过程。在一些实施方案中,将更多或更少数量的强调评分模块用于训练神经网络1224。在一些实施方案中,训练者强调决策1222表示不同人对同一媒体进行评分(例如,其中对于媒体的每个不同帧,人不同)。当多个人对同一视频进行评分时,有时将存在关于应该在不同时间强调哪个个体的分歧,当发生这种情况时,神经网络训练可以采用在训练中使用的平均或最频繁的训练者强调决策,同时丢弃或忽略较不频繁的训练者强调决策。在一些实施方案中,将强调评分1214(例如,神经网络强调决策与对应训练者强调决策的比较)与训练数据1220一起馈送到神经网络1224中以用于训练。
神经网络使用部分1204提供了关于如何使用神经网络1224(例如,在捕获和/或编辑媒体期间)的示例性实施方案。神经网络使用部分1204的神经网络1224是神经网络训练部分1202的神经网络1224的经训练和/或经调谐版本(例如,使用来自训练媒体1206的人类查看者的训练者强调决策1222训练的神经网络1224)。在一些实施方案中,当设备(例如,诸如计算机系统600)的运行神经网络1224的软件被更新时,周期性地更新神经网络1224(例如,对神经网络的训练发生在与运行神经网络的设备分开的设备上)。如神经网络使用部分1204中所示,提供了捕获的媒体1230。在一些实施方案中,捕获的媒体1230包括媒体的当前正在被捕获的帧。在一些实施方案中,捕获的媒体1230包括当前正在被编辑的媒体的帧和/或在媒体已被捕获之后的媒体的帧。在一些实施方案中,根据捕获的媒体1230(例如,使用如上文关于训练媒体1206、对象标识符1208和对象标识符1208讨论的一种或多种技术)来确定一个或多个对象标识符1232和/或对象属性1234。在一些实施方案中,捕获的媒体1230、对象标识符1232和对象属性1234被馈送到神经网络1224(例如,经训练和/或经调谐网络)中。在一些实施方案中,神经网络1224基于捕获的媒体1230、对象标识符1232和对象属性1234来输出一个或多个神经网络强调决策1236。在一些实施方案中,神经网络1224基于用户强调决策1238来输出一个或多个神经网络强调决策1236,其中用户强调决策1238可以覆写基于捕获的媒体1230、对象标识符1232和对象属性1234的神经网络强调决策。在一些实施方案中,用户强调决策1238被用作用于神经网络1224的输入来确定另外的神经网络强调决策1236(例如,基于用户强调决策来添加或移除神经网络强调决策)。在一些实施方案中,神经网络强调决策1236被媒体处理器1240用于输出经处理的媒体1242。在一些实施方案中,媒体处理器1240决定神经网络强调决策1236应该被用户强调决策1238覆写。在一些实施方案中,当媒体处理器1240决定神经网络强调决策1236应该被用户强调决策1238覆写时,被覆写的神经网络强调决策1236被保存以供将来使用(例如,当用户指定的改变被如上文关于图6AZ至图6BJ所讨论的那样删除时)(例如,连同在捕获媒体时和/或在捕获媒体之后(例如,紧接在捕获媒体之后)确定、保存和/或创建的媒体的深度图一起保存和/或与该深度图相关联)。在一些实施方案中,来自媒体处理器1240的输出和用户强调决策1238被反馈回捕获的媒体1230,使得可以调整媒体的捕获(例如,如上文关于图6A至图6AA的计算机系统600和计算机系统690所讨论的)。
图13是示出根据一些实施方案的用于使用计算机系统更改视觉媒体的示例性方法的流程图。在与显示生成部件(例如,显示器控件器和/或触敏显示器系统)通信的计算机系统(例如,100、300、500、600、智能手机和/或智能手表)处执行方法1300。
如下所述,方法1300提供了用于更改视觉媒体的直观方式。该方法减轻了用户在管理媒体捕获时的认知负担,从而创建了一种更有效的人机界面。对于电池驱动的计算设备,使得用户能够更快更有效地管理媒体捕获节省功率并且增加了电池两次充电之间的时间间隔。在一些实施方案中,计算机系统与一个或多个输入设备(例如,触敏表面)和/或一个或多个相机(例如,位于计算机系统同一侧或不同侧(例如前置相机、后置相机)的一个或多个相机(例如,双相机、三相机、四相机等))通信。
计算机系统经由显示生成部件播放(1302)(例如,由660表示)(例如,先前捕获的视频媒体)(例如,使用如上文关于方法700、800和900所述的一种或多种技术捕获的视频)视频的一部分(例如,当播放视频的该部分时,经由显示生成部件显示该视频的一个或多个帧),该部分包括在第一时间发生的第一个体强调改变(例如,686a、686b、688c、686d、688e、686f、686g、688h、688i、688j、688k和/或688m)(例如,合成景深过渡),其中第一个体强调改变(例如,686a、686b、688c、686d、688e、686f、686g、688h、688i、688j、688k和/或688m)包括在第一时间之后的第一时间段期间的由一个或多个相机捕获的视觉信息的外观的改变(例如,如由660表示),以相对于视频中的一个或多个元素(例如,一个或多个个体(例如,人、物体和/或动物))强调相应个体(例如,经由合成景深效果,如上文关于方法700、800和900所述)(例如,在第一时间强调第一个体,而在第二时间强调对第二个体的改变)。在一些实施方案中,第一时间段包括第一时间。在一些实施方案中,视频中个体强调的多个改变由多个时间表示来表示(例如,如上文关于方法900中的第一时间的表示和/或第二时间的表示所述)。
在播放视频的包括在第一时间发生的第一个体强调改变的部分之后,计算机系统检测(1304)改变在视频中的不同于第一时间的第二时间(例如,在视频的持续时间期间的第一时间段)的个体强调的请求(例如,650ax、650az、650bb1、650bb2、650bd、650bf、650bh和/或650bi)。在一些实施方案中,作为检测改变在视频中的第一时间段的个体强调的请求的一部分,计算机系统检测指向视频的表示和/或视频导航元素(例如,使用如上文关于方法700、800和900所述的一种或多种技术)的用户输入,诸如轻击输入(例如,单个轻击和/或双击)、按压并保持输入和/或拖动输入。
响应于(1306)检测到改变(例如,自动地,无需介入用户输入)在视频中的第二时间的个体强调的请求(例如,650ax、650az、650bb1、650bb2、650bd、650bf、650bh和/或650bi),计算机系统改变(1308)在视频中的第二时间之后的第二时间段期间的个体强调(例如,686a、686b、688c、686d、688e、686f、686g、688h、688i、688j、688k和/或688m)(例如,如由661bc2至661bi2所指示的)(例如,将合成景深效果应用于在第二时间段期间出现的视频的多个帧,其中应用于在第二时间段期间出现的视频的该多个帧的合成景深效果不同于曾应用于在第二时间段期间出现的视频的该多个帧的合成景深效果(例如,使用如上文关于方法700所讨论的一种或多种技术))(以及修改(例如,添加、更新和/或删除)在第二时间段期间发生的个体强调改变和/或在第二时间段期间添加新的个体强调改变)。在一些实施方案中,第二时间段包括第二时间。在一些实施方案中,第二时间段不同于第一时间段。在一些实施方案中,第二时间段不包括在第一时间段中。在一些实施方案中,第二时间在第一时间之前。在一些实施方案中,第二时间段不包括在第一时间段中,并且第一时间段不包括在第二时间段中。在一些实施方案中,第二时间段中的任一部分都不与第一时间段重叠。
响应于(1306)检测到改变(例如,自动地,无需介入用户输入)在视频中的第二时间的个体强调的请求(例如,650ax、650az、650bb1、650bb2、650bd、650bf、650bh和/或650bi),计算机系统改变(1310)在第一时间发生的第一个体强调改变,该第一个体强调改变包括改变在第一时间之后的第一时间段期间的相应个体相对于视频中的一个或多个元素的强调(例如,如上文关于图6AV至图6BJ所讨论的)(例如,将合成景深效果应用于在第一时间(例如,并且在第一时间段期间)出现的视频的多个帧,其中应用于在第一时间出现的视频的该多个帧的合成景深效果不同于曾应用于在第一时间出现的视频的该多个帧的合成景深效果(例如,使用如上文关于方法700所讨论的一种或多种技术))(以及修改(例如,添加、更新和/或删除)在第一时间段期间发生的个体强调改变和/或在第一时间段期间添加新的个体强调改变)。在一些实施方案中,改变在视频中的第二时间之后的第二时间段期间的个体强调并且改变在第一时间发生的第一个体强调改变(其包括改变在第一时间之后的第一时间段期间的相应个体相对于视频中的一个或多个元素的强调)之后(并且/或者响应于检测到改变在视频中的第二时间发生的个体强调的请求),在视频中的第一时间和/或第一时间段期间的个体强调不同于在视频中的第二时间段期间的个体强调。在一些实施方案中,在计算机系统检测到改变在视频中的第二时间发生的个体强调的请求之前(并且/或者在改变在视频中的第一时间段的个体强调以及改变在视频中的第一时间段的个体强调之前),在视频中的第一时间和/或第一时间段期间的个体强调不同于在视频中的第二时间段期间的个体强调。响应于检测到改变在视频中的第二时间的个体强调的请求而改变在视频中的第二时间之后的第二时间段期间的个体强调并且改变在第一时间发生的第一个体强调改变,允许计算机系统在请求未指向的时间自动改变个体强调,同时也在请求指向的时间改变个体强调,并且允许计算机系统在视频中不同于视频中与改变个体强调的请求相对应的时间的一个或多个时间智能地改变个体强调,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,在检测到改变在第二时间的个体强调的请求(例如,650ax、650az、650bb1、650bb2、650bd、650bf、650bh和/或650bi)之前,视频包括在第二时间发生的第二个体强调改变(例如,686a、686b、688c、686d、688e、686f、686g、688h、688i、688j、688k和/或688m)。在一些实施方案中,作为改变在视频中的第二时间之后的第二时间段期间的个体强调的一部分,计算机系统移除在第二时间发生的第二个体强调改变(例如,如上文关于图6BB至图6BC、图6BF至图6BG和图6BI至图6BJ所讨论的)。在一些实施方案中,当计算机系统响应于检测到用户输入(例如,单轻击输入、双轻击输入和/或按压并保持输入)而应用合成景深效果以强调焦平面并且/或者非暂时地强调个体时,移除对合成景深效果的改变(和/或合成景深效果改变指示符)。在一些实施方案中,当计算机系统响应于检测到用户输入(例如,单轻击输入、双轻击输入和/或按压并保持输入)而应用合成景深效果以强调焦平面并且/或者非暂时地强调个体时,移除和/或忽略对合成景深效果的一个或多个自动改变。在一些实施方案中,当计算机系统应用合成景深效果以强调对合成景深效果的相应自动改变(例如,其在第一时间之后和/或在对合成景深效果的另一个用户指定的改变之前发生)也已经确定要强调的个体时,移除和/或忽略相应自动改变。响应于检测到改变在视频中的第二时间的个体强调的请求而移除在第二时间发生的第二个体强调改变并且改变在第一时间发生的第一个体强调改变,允许计算机系统在视频中不同于移除个体强调的时间的一个或多个时间期间智能地改变个体强调,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,在检测到改变在第二时间的个体强调请求之前(例如,650ax、650az、650bb1、650bb2、650bd、650bf、650bh和/或650bi),计算机(在视频导航用户界面元素上、在视频导航用户界面元素上与第二时间相对应的位置处(例如,使用如上文关于方法900所述的一种或多种技术))(例如,经由显示生成部件))显示指示在第二时间发生的第二个体强调改变的第一图形用户界面对象(例如,688c和/或688h)(例如,指示在第二时间发生个体强调的自动改变的图形用户界面对象和/或指示在第二时间发生手动改变的图形用户界面对象)(例如,使用如上文关于方法900所述的一种或多种技术)(例如,第二时间的表示、第一时间的表示、指示在第二时间发生个体强调的自动改变的图形用户界面对象和/或指示在第二时间发生手动改变的图形用户界面对象)。作为检测改变在第二时间发生的个体强调的请求的一部分,计算机系统:在显示第一图形用户界面对象(例如,688c和/或688h)时,检测指向第一图形用户界面对象的输入(例如,650be)(例如,轻击手势/输入,已经/或者在一些实施方案中,按压并保持手势/输入、鼠标点击和/或轻扫手势/输入);响应于检测到指向第一图形用户界面对象的输入,显示用于移除在第二时间发生的第二个体强调改变的选项(例如,688c2和/或688h2)(例如,可选选项)(例如,使用如上文关于用于移除在视频中的第二时间发生的个体强调的用户指定的改变的选项和方法900所述的一种或多种类似技术);以及在显示用于移除在第二时间发生的第二个体强调改变的选项时,检测指向用于移除在第二时间发生的第二个体强调改变的选项的输入(例如,650bf)(例如,轻击手势/输入,以及/或者在一些实施方案中,按压并保持手势/输入、鼠标点击和/或轻扫手势/输入);以及响应于检测到指向用于移除在第二时间发生的第二个体强调改变的选项的输入,通过移除在第二时间发生的第二个体强调改变来改变在视频中的第二时间之后的第二时间段期间的个体强调(例如,如上文关于图6BG所讨论的)。在一些实施方案中,响应于检测到指向用于移除在第二时间发生的第二个体强调改变的选项的输入,计算机检测改变在视频中的第二时间的个体强调的请求。
在一些实施方案中,在检测到指向第一图形用户界面对象的输入之前,第一图形用户界面对象与具有第一视觉强调量的视频导航用户界面元素(例如,664a和/或664b)同时显示(例如,邻近视频导航用户界面元素显示,在视频导航用户界面元素上方显示,在视频导航用户界面元素下方显示,在视频导航用户界面元素右侧显示,在视频导航用户界面元素左侧显示,在视频导航用户界面元素附近显示和/或在视频导航用户界面元素上显示)(例如,如上文关于图6BE所讨论的)。在一些实施方案中,用于移除响应于检测到指向第一图形用户界面对象的输入(例如,650)而在第二时间发生的第二个体强调改变的选项(例如,688c2和/或688h2)与具有第二视觉强调量的视频导航用户界面元素同时显示,该第二视觉强调量小于第一视觉强调量(例如,如上文关于图6BF所讨论的)。在一些实施方案中,当计算机以第一视觉强调量显示视频导航用户界面元素时,视频导航用户界面元素在视觉上被去强调(例如,更模糊、更小、变灰、更半透明和/或更少放大)。在一些实施方案中,在检测到指向第一图形用户界面对象的输入之前,第一图形用户界面对象与第一视觉外观同时显示。在一些实施方案中,显示用于移除响应于检测到指向第一图形用户界面对象的输入而在第二时间发生的第二个体强调改变的选项包括,以第二视觉外观显示视频导航用户界面元素,其中以第二视觉外观显示的视频导航用户界面元素比以第一视觉外观显示的视频导航用户界面元素更少在视觉上强调(例如,更模糊、更小、变灰、更半透明和/或更少放大)。作为显示用于移除响应于检测到指向第一图形用户界面对象的输入而在第二时间发生的第二个体强调改变的选项的一部分,以小于第一视觉强调量的第二视觉强调量同时显示视频导航用户界面元素,向用户提供了关于将被移除的个体强调和/或图形用户界面对象的视觉反馈(例如,以避免无意移除),这提供了改进的视觉反馈。
在一些实施方案中,在检测到改变在第二时间的个体强调的请求之前,视频不包括在第二时间发生的个体强调改变(或者在一些实施方案中,任何个体强调改变)(例如,如上文关于图6BH至图6BI所讨论的)。在一些实施方案中,作为改变在视频中的第二时间之后的第二时间段期间的个体强调的一部分,计算机系统添加在第二时间发生的第三个体强调改变(例如,686d)(例如,如上文关于图6BH至图6BI所讨论的)。响应于检测到改变在视频中的第二时间的个体强调的请求而添加在第二时间发生的第三个体强调改变,允许计算机系统在视频中不同于添加个体强调的时间的一个或多个时间期间智能地改变个体强调,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,检测改变在第二时间发生的个体强调的请求包括检测指向视频的第一表示(例如,660)的第一类型的输入(例如,650bb2和/或650bi)(例如,按压并保持手势)(在一些实施方案中,指向个体的非按压并保持手势(例如,轻击手势、轻扫手势))。在一些实施方案中,第一类型的输入是选择视频中的第一固定焦平面(例如,如676所指示的)的第一输入(例如,按压并保持手势)(在一些实施方案中,如上文关于方法700、800和900所述的指向个体的非按压并保持手势(例如,轻击手势、轻扫手势))。在一些实施方案中,改变在视频中的第二时间之后的第二时间段期间的个体强调包括在与第二时间段相对应的视频的第一多个帧中向第一固定焦平面(例如,不随相应个体(例如,第二个体)在多个帧内的移动而改变的焦平面)应用合成景深效果(例如,更改由该一个或多个相机捕获的视觉信息,以强调在固定焦平面附近、在固定焦平面上和/或邻近固定焦平面的一个或多个对象/个体)(例如,使用如上文关于方法700、800和900所述的一种或多种技术)(例如,如关于图6BC至图6BD和图6BI至图6BJ所讨论的)。在一些实施方案中,固定焦平面包括视频的表示上输入指向的位置。作为响应于检测到第一类型的输入而改变在视频中的第二时间之后的第二时间段期间的个体强调的一部分,响应于检测到第一类型的输入而将合成景深效果应用于固定焦平面,允许用户控制如何将合成景深效果应用于视频,并且向用户提供了对用户界面的更多控制,从而使得对用户界面的控制更有效。
在一些实施方案中,检测改变在第二时间发生的个体强调的请求包括检测指向视频的第二表示(例如,660)的第二类型的输入(例如,650bd和/或650bh)(例如,指向个体(例如,个体上)的轻击手势)(在一些实施方案中,指向个体的非轻击手势(例如,旋转手势、轻扫手势))(例如,指向个体(例如,个体上)的多轻击手势(例如,双轻击手势))(在一些实施方案中,如上文关于方法700、800和900所述的指向个体的非轻击手势(例如,旋转手势、轻扫手势))。在一些实施方案中,第二类型的输入是在视频中选择要聚焦的第一个体(例如,632、634和/或638)的输入。在一些实施方案中,改变在视频中的第二时间之后的第二时间段期间个体强调包括在与第二时间段相对应的视频的第二多个帧中应用合成景深效果以相对于第二个体(例如,相应个体)强调第一个体(例如,如上文关于图6BC至图6BD和图6BH至图6BI所讨论的)(例如,更改由该一个或多个相机捕获的视觉信息,以相对于第二个体强调第一个体)(例如,使用如上文关于方法700、800和900所述的一种或多种技术)。响应于检测到第二类型的输入而在与第二时间段相对应的视频的第二多个帧中应用合成景深效果以相对于第二个体强调第一个体,允许用户控制如何将合成景深效果应用于视频,并且向用户提供了对用户界面的更多控制,从而使得对用户界面的控制更有效。
在一些实施方案中,检测改变在第二时间发生的个体强调的请求包括检测指向视频的第三表示(例如,660)的第三类型的输入(例如,650bb2和/或650bi)(例如,按压并保持手势)(在一些实施方案中,指向个体的非按压并保持手势(例如,轻击手势、轻扫手势))。在一些实施方案中,第三类型的输入是选择视频中的第二固定焦平面的第二输入(例如,按压并保持手势)(在一些实施方案中,如上文关于方法700、800和900所述的指向个体的非按压并保持手势(例如,轻击手势、轻扫手势))。在一些实施方案中,响应于检测到改变在视频中的第二时间的个体强调的请求,计算机系统显示到第二固定焦平面的距离的指示(例如,694bc和/或694bj)(例如,数字、字词和/或符号)(例如,0.01米至50米)(例如,计算机系统和/或计算机系统的一个或多个相机与该一个或多个相机的视场中的平面之间的距离)。在一些实施方案中,在显示到固定焦平面的距离的指示时和/或在显示到固定焦平面的距离的指示之后,计算机系统检测选择不同于第二固定焦平面的第三固定焦平面的第四输入,并且响应于检测到第四输入,计算机系统显示到第三固定焦平面的距离的指示。在一些实施方案中,到第三固定焦平面的距离的指示不同于到第二固定焦平面的距离的指示。在一些实施方案中,到第二固定焦平面的距离的指示显示在第二时间和/或第二时间段的视频的帧上(例如,视频的帧上)并且/或者在播放视频时显示。在一些实施方案中,在预先确定的时间段之后,到第二固定焦平面的距离的指示消失。响应于检测到改变在视频中的第二时间的个体强调的请求而显示到第二固定焦平面的距离的指示为用户提供了关于被选择的固定焦平面的视觉反馈,从而提供了改进的视觉反馈。
在一些实施方案中,在第一时间发生的第一个体强调改变是第一类型的个体强调改变(例如,将合成景深效果应用于固定焦平面,应用合成景深效果以相对于视频中的一个或多个个体强调不同个体)(例如,如上文关于方法700、800和900所述)。在一些实施方案中,改变在第一时间发生的第一个体强调改变包括添加在第一时间的第四个体强调改变(例如,688i、688j、688k和/或688m)(例如,并且移除在第一时间发生的第一个体强调改变)。在一些实施方案中,第四个体强调改变是不同于第一类型的个体强调改变的第二类型的个体强调改变(例如,将合成景深效果应用于固定焦平面,应用合成景深效果以相对于视频中的一个或多个个体强调不同个体)(例如,如上文关于方法700、800和900所述)。在一些实施方案中,当在相机的视场中停止检测到被强调的个体(例如,响应于检测到改变在视频中的第二时间的个体强调的请求而强调的个体)(并且计算机系统因此需要自动选择新的个体)时,添加对合成景深的自动改变。作为改变在视频的第一时间发生的第一个体强调改变的一部分,添加在第一时间的第四个体强调改变,允许计算机系统在视频中不同于选择个体强调改变的时间的一个或多个时间期间智能地改变个体强调,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,第一时间对应于视频的第一子集,在该第一子集处,在第一时间之前的视频的第二部分中可见的被强调的个体(例如,被选择的个体,使用如上文关于方法700、800和900所述的一种或多种技术)停止可见(例如,如上文关于图6BH至图6BI所讨论的)。
在一些实施方案中,改变在第一时间发生的第一个体强调改变包括移除在第一时间发生的第一个体强调改变(例如,如上文关于图6BF至图6BG所讨论的)。作为改变在视频的第一时间发生的第一个体强调改变的一部分,移除在第一时间发生的第一个体强调改变,允许计算机系统在视频中不同于选择个体强调改变的时间的一个或多个时间期间智能地改变个体强调,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,在第一时间发生的第一个体强调改变是个体强调的自动变改变(例如,686d、686f和/或686g)(例如,计算机生成的改变和/或不响应于在第一时间生成个体强调改变的明确用户输入而生成的改变)(并且不是如上文关于方法700、800和900所述的个体强调的用户指定的改变)(例如,在无需用户输入/手势介入的情况下发生的改变(例如,如上文关于方法700、800和900所述的个体强调的自动改变))。作为改变在视频的第一时间发生的第一个体强调改变的一部分,移除为个体强调的自动改变并且在第一时间发生的第一个体强调改变,允许计算机系统在视频中不同于选择个体强调改变的时间的一个或多个时间期间智能地改变个体强调,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,在检测到改变在视频中不同于第一时间的第二时间的个体强调的请求之前,视频包括在第三时间发生的第五个体强调改变。在一些实施方案中,响应于检测到改变在视频中的第二时间的个体强调的请求,并且根据确定满足一组强调改变标准,该组强调改变标准包括当在第三时间发生的第五个体强调改变是个体强调的用户指定的改变时满足的标准,计算机系统放弃改变在第三时间发生的第五个体强调改变(例如,如上文关于图6BG所讨论的)(例如,同时放弃包括改变在第三时间之后的第三时间段期间的相应个体相对于视频中的该一个或多个元素的强调)。在一些实施方案中,响应于检测到改变在视频中的第二时间的个体强调的请求,并且根据确定不满足该组强调改变标准(例如,在第三时间发生的第五个体强调改变是个体强调的自动(例如,计算机生成的)改变),计算机系统改变在第三时间发生的第五个体强调改变,包括改变在第三时间之后的第三时间段期间的相应个体相对于视频中的该一个或多个元素的强调。根据确定在第三时间发生的第五个体强调改变是个体强调的用户指定的改变而放弃改变在第三时间发生的第五个体强调改变,允许计算机系统智能地选择不移除个体强调的用户指定的改变,该计算机系统在已满足一组条件时执行操作而不需要进一步的用户输入,并且减少了执行操作所需的输入的数量。
在一些实施方案中,第二时间在视频中的第一时间之后(例如,在视频的持续时间中)发生(例如,在视频中晚于第一时间的时间发生)。在一些实施方案中,第二时间段在第一时间段之后(例如,在视频的持续时间中)发生。在一些实施方案中,第二时间在视频中的第一时间之前(例如,在视频的持续时间中)发生(例如,在视频中早于第一时间的时间发生)。在一些实施方案中,第二时间段发生在第一时间段之前(例如,在视频的持续时间中)。
在一些实施方案中,视频包括在第四时间发生的第五个体强调改变(和/或一个或多个其他个体强调改变)。在一些实施方案中,计算机系统显示第一可选用户界面对象(例如,662d)。在一些实施方案中,在显示第一可选用户界面对象时并且在视频包括在第四时间发生的第五个体强调改变时,计算机系统检测指向第一可选用户界面对象的第一输入(例如,650az)。在一些实施方案中,响应于检测到指向第一可选用户界面对象的第一输入,并且根据确定在第四时间发生的第五个体强调改变是个体强调的用户指定的改变(和/或为个体强调的一个或多个用户指定的改变的该一个或多个其他个体强调改变),计算机系统从视频移除(例如,禁用和/或删除)在第四时间发生的第五个体强调改变(例如,688c、688e和/或688h)(例如,移除与第五个体强调改变对应的合成景深效果)(并且/或者移除为个体强调的一个或多个用户指定的改变的该一个或多个其他个体强调改变)(例如,停止显示与第五个体强调改变对应的图形指示符)。在一些实施方案中,第五个体强调改变是在媒体的捕获期间和/或在媒体的编辑(例如,捕获后编辑)期间请求的改变。在一些实施方案中,响应于检测到指向第一可选用户界面对象的第一输入,计算机系统移除在媒体的捕获期间请求的一个或多个用户指定的改变并且移除在媒体的编辑期间请求的一个或多个用户指定的改变。在一些实施方案中,响应于检测到指向第一可选用户界面对象的第一输入,计算机系统以非活动状态显示第一可选用户界面对象。在一些实施方案中,在检测到指向第一可选用户界面对象的第一输入之前,第一可选用户界面对象以活动状态显示。在一些实施方案中,响应于检测到指向第一可选用户界面对象的第一输入,任选地将被应用于媒体的所有用户指定的改变移除而不将其应用于媒体。响应于检测到指向第一可选用户界面对象的第一输入,并且根据确定第五个体强调改变是个体强调的用户指定的改变,从视频中移除在第四时间发生的第五个体强调改变,允许用户控制有无个体强调的用户指定的改变,并且向用户提供了对系统的更多控制,从而使得对用户界面的控制更有效。
在一些实施方案中,响应于检测到指向第一可选用户界面对象的输入,并且根据确定在第四时间发生的第五个体强调改变是个体强调的自动改变,计算机系统放弃从视频中移除在第四时间发生的第五个体强调改变(例如,图6AZ中的686f和/或686g)(例如,如上文关于图6AZ至图6BA所讨论的)(并且/或者放弃移除为个体强调的一个或多个用户指定的改变的该一个或多个其他个体强调改变)(例如,继续显示与第五个体强调改变对应的图形指示符)。响应于检测到指向第一可选用户界面对象的第一输入,并且根据确定第五个体强调改变是个体强调的自动改变,放弃从视频中移除在第四时间发生的第五个体强调改变,允许用户控制有无个体强调的用户指定的改变,并且向用户提供了对系统的更多控制,从而使得对用户界面的控制更有效。
在一些实施方案中,在显示第一可选用户界面对象(例如,662d)时并且在从视频中移除在第四时间发生的第五个体强调改变时,计算机系统检测指向第一可选用户界面对象的第二输入(例如,650bb1)。响应于检测到指向第一可选用户界面对象的第二输入(例如,650bb1),计算机系统将在第四时间发生的第五个体强调改变添加(例如,重新添加和/或重新启用)到视频(例如,如上文关于650bb1所讨论的)(例如,重新应用与第五个体强调改变相对应的合成景深效果)(并且/或者添加为个体强调的一个或多个用户指定的改变的该一个或多个其他个体强调改变)。在一些实施方案中,响应于检测到指向第一可选用户界面对象的第二输入,计算机系统以活动状态显示第一可选用户界面对象。在一些实施方案中,在检测到指向第一可选用户界面对象的第二输入之前,第一可选用户界面对象以非活动状态显示。在一些实施方案中,根据确定视频不包括一个或多个用户指定的(或任何用户指定的)个体强调改变,第一可选用户界面对象以非活动状态(例如,禁用状态)显示,并且根据确定视频包括一个或多个用户指定的(或任何用户指定的)个体强调改变,第一可选用户界面对象以活动状态(例如,启用状态)显示。响应于检测到在显示第一可选用户界面对象时检测到的指向第一可选用户界面对象的第一输入并且在从视频中移除了在第四时间发生的第五个体强调改变时,在视频中添加在第四时间发生的第五个体强调改变,允许用户控制有无个体强调的用户指定的改变,并且向用户提供了对系统的更多控制,从而使得对用户界面的控制更有效。
在一些实施方案中,在从视频中移除在第四时间发生的第五个体强调改变(例如,688c)并且在以非活动状态显示第一可选用户界面对象(例如,图6BB中的662d)时,计算机系统检测添加个体强调的一个或多个用户指定的改变的请求(例如,650bb2)。在一些实施方案中,响应于检测到添加个体强调的一个或多个用户指定的改变的请求,计算机系统以不同于非活动状态的活动状态显示第一可选用户界面对象(例如,图6BC中的622d),而不将在第四时间发生的第五个体强调改变添加(例如,重新添加和/或重新启用)到视频。在一些实施方案中,响应于检测到添加个体强调的一个或多个用户指定的改变的请求,计算机系统将个体强调的该一个或多个用户指定的改变添加到视频,并且删除在第四时间发生的对视频的第五个体强调改变。以不同于非活动状态的活动状态显示第一可选用户界面对象,而不响应于检测到添加对象强调的该一个或多个用户指定的改变的请求将在第四时间发生的第五个体强调改变添加到视频,允许计算机系统管理个体强调的新改变并删除个体强调的旧改变,并且向用户提供了对系统的更多控制,从而使得对用户界面的控制更有效。
在一些实施方案中,在视频包括在第一时间发生的第一个体强调改变时,并且根据确定第一个体强调改变(例如,686a、686b、688c、686d、688e、686f、686g、688h、688i、688j、688k和/或688m)是个体强调的用户指定的改变,计算机以第一视觉外观显示指示在第一时间发生的第一个体强调改变(例如,688c、688e、688h、688i、688j、688k和/或688m)的第二图形用户界面对象(例如,如上文关于方法900所述)。在一些实施方案中,在视频包括在第一时间发生的第一个体强调改变时,并且根据确定第一个体强调改变(例如,686a、686b、688c、686d、688e、686f、686g、688h、688i、688j、688k和/或688m)是个体强调的自动改变,计算机系统以不同于第一视觉外观的第二视觉外观(例如,686a、686b、686d、686f和/或686g的外观)显示第二图形用户界面对象(例如,如上文关于方法900所述)。在一些实施方案中,计算机系统将指示个体强调的自动改变的图形对象与指示个体强调的用户指定的改变的图形对象同时显示。在一些实施方案中,指示个体强调的自动改变的图形对象具有第二视觉外观,并且指示个体强调的用户指定的改变的图形对象具有第一视觉外观。基于第一个体强调改变是为用户指定的改变还是自动改变而不同地显示指示在第一时间发生的第一个体强调改变的第二图形用户界面对象,提供关于使个体强调改变引起的来源的视觉反馈,从而提供改进的视觉反馈。
在一些实施方案中,在视频中的第二时间的个体强调是第三类型的个体强调。在一些实施方案中,在播放视频的包括在第一时间的第一个体强调改变的该部分之后,计算机系统检测改变在第二时间的个体强调的第二请求(例如,650bd)。在一些实施方案中,响应于检测到改变在第二时间的个体强调的第二请求(例如,650bd),并且根据确定改变在第二时间的个体强调的第二请求是将在视频中的第二时间的个体强调改变为第三类型的个体强调的请求(例如,应用当前被应用于视频中的第二时间的相同合成景深效果的请求)(例如,相对于其他个体强调个体的请求,其中该个体已经相对于其他个体被强调,以及/或者强调当前在第二时间被强调的焦平面(和/或在焦平面上的一个或多个对象)的请求),计算机系统放弃改变在视频中的第二时间之后的第二时间段期间的个体强调(例如,如上文关于图6BD所讨论的)。在一些实施方案中,响应于检测到改变在第二时间的个体强调的第二请求,并且根据确定改变在第二时间的个体强调的第二请求是将在视频中的第二时间的个体强调改变为不同于第一类型的个体强调的第二类型的个体强调的请求,计算机系统改变在视频中的第二时间之后的第二时间段期间的个体强调。响应于检测到改变在第二时间的个体强调的第二请求,并且根据确定改变在第二时间的个体强调的第二请求是将在视频中的第二时间的个体强调改变为第三类型的个体强调,放弃改变在视频中的第二时间之后的第二时间段期间的个体强调,允许计算机系统智能地放弃应用被确定为需要的个体强调的改变,该计算机系统在已满足一组条件时执行操作。
需注意,上文相对于方法1300(例如,图13)所述的过程的详情也以类似方式适用于上文和/或下文所述的方法。例如,方法700、800、900和/或1100任选地包括上文参考方法1300所述的各种方法的一个或多个特征。例如,上文在方法1300中所述的方法可用于在使用关于方法700和/或方法1100所述的一种或多种技术捕获媒体之后在媒体编辑用户界面中显示媒体。为了简明起见,本文不再重复这些细节。
出于解释的目的,前面的描述是通过参考具体实施方案来描述的。然而,上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择并描述这些实施方案是为了最好地解释这些技术的原理及其实际应用程序。本领域的其他技术人员由此能够最好地利用这些技术以及具有适合于所预期的特定用途的各种修改的各种实施方案。
虽然参照附图对本公开以及示例进行了全面的描述,但应当注意,各种变化和修改对于本领域内的技术人员而言将变得显而易见。应当理解,此类变化和修改被认为被包括在由权利要求书所限定的本公开和示例的范围内。
如上文所述,本技术的一个方面在于采集并使用得自各种来源的数据,以改进视觉媒体的更改方式。本公开预期,在一些实例中,这些所采集的数据可包括唯一地识别或可用于联系或定位特定人员的个人信息数据。此类个人信息数据可以包括人口统计数据、基于位置的数据、电话号码、电子邮件地址、推特ID、家庭地址、与用户的健康或健身水平有关的数据或记录(例如,生命体征测量、药物信息、锻炼信息)、出生日期或任何其他识别或个人信息。
本公开认识到在本发明技术中使用此类个人信息数据可用于使用户受益。例如,个人信息数据可用于更改视觉媒体。因此,使用此类个人信息数据使得用户能够对更改视觉媒体进行有计划的控制。此外,本公开还预期个人信息数据有益于用户的其他用途。例如,健康和健身数据可用于向用户的总体健康状况提供见解,或者可用作使用技术来追求健康目标的个人的积极反馈。
本公开设想负责采集、分析、公开、传输、存储或其他使用此类个人信息数据的实体将遵守既定的隐私政策和/或隐私实践。具体地,此类实体应当实行并坚持使用被公认为满足或超出对维护个人信息数据的隐私性和安全性的行业或政府要求的隐私政策和实践。此类政策应该能被用户方便地访问,并应随着数据的采集和/或使用变化而被更新。来自用户的个人信息应当被收集用于实体的合法且合理的用途,并且不在这些合法使用之外共享或出售。此外,应在收到用户知情同意后进行此类采集/共享。此外,此类实体应考虑采取任何必要步骤,保卫和保障对此类个人信息数据的访问,并确保有权访问个人信息数据的其他人遵守其隐私政策和流程。另外,这种实体可使其本身经受第三方评估以证明其遵守广泛接受的隐私政策和实践。此外,应当调整政策和实践,以便采集和/或访问的特定类型的个人信息数据,并适用于包括管辖范围的具体考虑的适用法律和标准。例如,在美国,对某些健康数据的收集或获取可能受联邦和/或州法律的管辖,诸如健康保险流通和责任法案(HIPAA);而其他国家的健康数据可能受到其他法规和政策的约束并应相应处理。因此,在每个国家应为不同的个人数据类型保持不同的隐私实践。
不管前述情况如何,本公开还预期用户选择性地阻止使用或访问个人信息数据的实施方案。即本公开预期可提供硬件元件和/或软件元件,以防止或阻止对此类个人信息数据的访问。例如,就更改视觉媒体而言,本发明技术可被配置为在注册服务期间或之后的任何时间允许用户选择“选择加入”或“选择退出”参与对个人信息数据的收集。在另一个示例中,用户可选择不提供用于更改视觉媒体的数据。在又一个示例中,用户可选择限制维护数据的长度或完全禁止更改视觉媒体。除了提供“选择加入”和“选择退出”选项外,本公开设想提供与访问或使用个人信息相关的通知。例如,可在下载应用时向用户通知其个人信息数据将被访问,然后就在个人信息数据被应用访问之前再次提醒用户。
此外,本公开的目的是应管理和处理个人信息数据以最小化无意或未经授权访问或使用的风险。一旦不再需要数据,通过限制数据收集和删除数据可最小化风险。此外,并且当适用时,包括在某些健康相关应用程序中,数据去标识可用于保护用户的隐私。可在适当时通过移除特定标识符(例如,出生日期等)、控制所存储数据的量或特异性(例如,在城市级别而不是在地址级别收集位置数据)、控制数据如何被存储(例如,在用户之间聚合数据)、和/或其他方法来促进去标识。
因此,虽然本公开广泛地覆盖了使用个人信息数据来实现一个或多个各种所公开的实施方案,但本公开还预期各种实施方案也可在无需访问此类个人信息数据的情况下被实现。即,本发明技术的各种实施方案不会由于缺少此类个人信息数据的全部或一部分而无法正常进行。例如,可通过基于非个人信息数据或绝对最低限度的个人信息(诸如,与用户相关联的设备所请求的内容、对更改视觉媒体可用的其他非个人信息或公开可用信息)推断偏好来更改视觉媒体。

Claims (180)

1.一种方法,包括:
在与一个或多个相机和一个或多个输入设备通信的计算机系统处:
经由所述一个或多个输入设备检测捕获表示所述一个或多个相机的视场的视频的请求;
响应于检测到捕获所述视频的所述请求:
在第一捕获持续时间内捕获所述视频,其中所述视频包括在所述第一捕获持续时间内捕获的多个帧,其中所述多个帧表示所述一个或多个相机的所述视场中的第一个体和所述一个或多个相机的所述视场中的第二个体,并且其中,在所述多个帧中,所述第一个体在所述第一捕获持续时间内相对于所述一个或多个相机的所述视场移动;以及
向所述视频的所述多个帧应用合成景深效果,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第二个体强调所述视频的所述多个帧中的所述第一个体,其中所述合成景深效果随着所述第一个体在所述一个或多个相机的所述视场内移动而随时间改变。
2.根据权利要求1所述的方法,其中向所述视频的所述多个帧应用所述合成景深效果包括:
显示所述多个帧中的第一组帧,其中显示所述第一组帧包括在距所述一个或多个相机的第一距离处并且以第一模糊量显示所述第二个体;以及
显示所述多个帧中的第二组帧,其中显示所述第二组帧包括在距所述一个或多个相机的第二距离处以不同于所述第一模糊量的第二模糊量显示所述第二个体,并且其中所述第一距离不同于所述第二距离。
3.根据权利要求1至2中任一项所述的方法,其中,当应用所述合成景深效果时,以第三模糊量显示所述第一个体,并且以大于所述第三模糊量的第四模糊量显示所述第二个体。
4.根据权利要求1至3中任一项所述的方法,其中向所述视频的所述多个帧应用所述合成景深效果包括:
向所述多个帧中的第三帧的第一部分应用第五模糊量;以及
向所述多个帧中的所述第三帧的第二部分应用大于所述第五模糊量的第六模糊量。
5.根据权利要求1至4中任一项所述的方法,其中向所述视频的所述多个帧应用所述合成景深效果包括:
使所述多个帧中的第四帧的一部分模糊,其中所述第四帧的所述一部分不包括在所述一个或多个相机的所述视场中的个体。
6.根据权利要求1至5中任一项所述的方法,其中向所述视频的所述多个帧应用所述合成景深效果包括使所述多个帧中的第五帧相对于所述第一个体的前景和所述第五帧相对于所述个体的背景模糊。
7.根据权利要求1至6中任一项所述的方法,其中:
所述视频包括在第二捕获持续时间内捕获的第二多个帧;
所述第二多个帧表示所述一个或多个相机的所述视场中的所述第一个体和所述一个或多个相机的所述视场中的第三个体;并且
所述方法还包括:
在所述第一捕获持续时间内捕获所述视频时,检测应相对于所述第二多个帧中的所述第一个体在所述第二多个帧中强调所述第三个体的指示;以及
响应于检测到所述指示,向所述视频的所述第二多个帧应用第二合成景深效果,所述第二合成景深效果更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述视频的所述第二多个帧中的所述第一个体强调所述视频的所述第二多个帧中的所述第三个体。
8.根据权利要求7所述的方法,其中当所述第二多个帧中的所述第三个体满足一组自动选择标准时,所述计算机系统自动检测所述指示。
9.根据权利要求7至8中任一项所述的方法,其中所述一组自动选择标准包括基于所述第三个体在所述一个或多个相机的所述视场中的运动而满足的标准。
10.根据权利要求7至9中任一项所述的方法,其中所述一组自动选择标准包括当确定在所述一个或多个相机的所述视场中检测到所述第三个体的面部时满足的标准。
11.根据权利要求7至10中任一项所述的方法,其中所述一组自动选择标准包括基于与所述第三个体相对应的音频而满足的标准。
12.根据权利要求7至11中任一项所述的方法,其中所述一组自动选择标准包括基于所述第二多个帧中的一个或多个帧中的所述第三个体与所述一个或多个相机之间的距离而满足的标准。
13.根据权利要求7至12中任一项所述的方法,其中所述一组自动选择标准包括基于所述第三个体的注视而满足的标准。
14.根据权利要求7至13中任一项所述的方法,其中所述一组自动选择标准包括基于所述第三个体的肢体的位置而满足的标准。
15.根据权利要求7至14中任一项所述的方法,其中所述一组自动选择标准包括基于在所捕获的视频中检测到的特征中的一个或多个改变而满足的标准。
16.根据权利要求7至15中任一项所述的方法,还包括:
在所述第一捕获持续时间内捕获所述视频时,经由所述一个或多个输入设备检测第一手势;以及
响应于检测到所述第一手势,修改所述一组自动选择标准。
17.根据权利要求7所述的方法,其中所述计算机系统在经由所述一个或多个输入设备检测到第二手势时检测所述指示。
18.根据权利要求7至17中任一项所述的方法,还包括:
响应于检测到所述指示并且在捕获所述视频时:
显示第一动画,所述第一动画包括从具有所应用的所述合成景深效果的所述多个帧的一个或多个表示的显示到具有所应用的所述第二合成景深效果的所述第二多个帧的一个或多个表示的显示的第一过渡,所述合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第二个体强调所述多个帧中的所述第一个体,所述第二合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述视频的所述第二多个帧中的所述第一个体强调所述视频的所述第二多个帧中的所述第三个体。
19.根据权利要求18所述的方法,还包括:
在所述视频的捕获结束之后的某个时间回放所述视频时,显示与所述第一动画相对应的第二动画,其中所述第二动画在与所述视频中的在所述视频中检测到所述指示的时间点之前发生的时间点相对应的时间的所述视频的回放中开始。
20.根据权利要求18至19中任一项所述的方法,其中更改由所述一个或多个相机捕获的所述视觉信息以相对于所述视频的所述第二多个帧中的所述第一个体强调所述视频的所述第二多个帧中的所述第三个体的所述第二合成景深效果是更改由所述一个或多个相机捕获的所述视觉信息以强调所述视频中的选定焦平面的合成景深效果,并且其中用于显示所述第一动画的过渡特性基于所述视频中的所述选定焦平面与所述视频中的先前焦平面之间的差异。
21.根据权利要求20所述的方法,其中:
根据确定所述选定焦平面与所述先前焦平面之间的距离是第一距离,所述动画的速度是第一速度;并且
根据确定所述选定焦平面与所述先前焦平面之间的距离是短于所述第一距离的第二距离,所述动画的所述速度是快于所述第一速度的第二速度。
22.根据权利要求1至21中任一项所述的方法,其中应用所述合成景深效果包括在所述第一个体被至少部分地遮挡时将焦点维持在与所述第一个体相对应的位置上。
23.根据权利要求1至22中任一项所述的方法,还包括:
显示指示在应用所述合成景深效果时所述第一个体正在被强调的第一用户界面对象。
24.根据权利要求23所述的方法,其中在所述视频正在被捕获时显示指示所述第一个体正在被强调的所述第一用户界面对象。
25.根据权利要求23所述的方法,其中在所述视频的捕获结束之后显示指示所述第一个体正在被强调的所述第一用户界面对象。
26.根据权利要求1至25中任一项所述的方法,还包括:
在应用所述合成景深效果时显示与所述第二个体相对应的第二用户界面对象,其中所述第二用户界面对象在外观上不同于指示正被应用所述合成景深效果的第一个体的用户界面对象。
27.根据权利要求1至26中任一项所述的方法,其中所述第一个体是人、动物或物体。
28.根据权利要求1至27中任一项所述的方法,还包括:
在检测到捕获所述视频的所述请求之前:
在所述计算机系统被配置为在第一捕获模式下操作时,检测第三手势;以及
响应于检测到所述第三手势,将所述计算机系统配置为在不同于所述第一捕获模式的电影视频捕获模式下操作。
29.根据权利要求28所述的方法,其中:
在所述计算机系统被配置为在所述第一捕获模式下操作时,显示所述一个或多个相机的所述视场的第一表示;以及
在所述计算机系统被配置为在所述电影视频捕获模式下操作时,显示所述一个或多个相机的所述视场的第二表示,其中所述第一表示具有少于所述第二表示的模糊。
30.根据权利要求28至29中任一项所述的方法,还包括:
在所述计算机系统被配置为在所述电影视频捕获模式下操作时,检测与所述第三手势处于不同方向的第四手势;以及
响应于检测到所述第四手势,将所述计算机系统配置为在静态照片捕获模式下操作。
31.根据权利要求1至30中任一项所述的方法,还包括:
在检测到捕获所述视频的所述请求之前:
在所述计算机系统被配置为在第二捕获模式下操作时,检测第五手势;以及
响应于检测到所述第五手势,将所述计算机系统配置为在人像捕获模式下操作。
32.根据权利要求1至31中任一项所述的方法,其中向所述视频的所述多个帧应用所述合成景深效果包括调整应用于所述视频的所述合成景深效果的量值。
33.根据权利要求32所述的方法,其中所述计算机系统与显示生成部件通信,所述方法还包括:
在调整应用于所述视频的所述合成景深效果的所述量值之后,显示应用于所述视频的所述合成景深效果的所述量值的表示。
34.根据权利要求1至33中任一项所述的方法,还包括:
在将所述合成景深效果应用于所述视频的所述多个帧之后,检测将合成景深效果应用于已经捕获的所述视频的第二多个帧的第二请求;以及
响应于检测到所述第二请求:
根据基于检测到的第一类型手势检测到所述第二请求的确定,将所述合成景深效果应用于已经用第一类型的跟踪捕获的所述视频的所述第二多个帧;以及
根据基于检测到的第二类型手势检测到所述第二请求的确定,将所述合成景深效果应用于已经用第二类型的跟踪捕获的所述视频的所述第二多个帧,其中所述第二类型的跟踪不同于所述第一类型的跟踪。
35.根据权利要求34所述的方法,还包括:
响应于检测到所述第二请求:
根据基于检测到的第三类型手势检测到所述第二请求的确定,将所述合成景深效果应用于已经用第三类型的跟踪捕获的所述视频的所述第二多个帧,其中所述第三类型的跟踪不同于所述第一类型的跟踪和所述第二类型的跟踪。
36.根据权利要求34所述的方法,其中所述第二请求是单轻击手势、多轻击手势和按压并保持手势中的一者。
37.根据权利要求34至36中任一项所述的方法,其中所述第二请求基于不指向所述多个帧中的一个或多个个体的手势。
38.根据权利要求1至37中任一项所述的方法,其中:
所述视频的所述多个帧中的所述第一个体在距所述一个或多个相机的第三距离处;并且
所述视频的所述多个帧中的所述第二个体在距所述一个或多个相机的第四距离处,所述第四距离比所述第三距离更靠近所述一个或多个相机。
39.根据权利要求1至38中任一项所述的方法,其中在所述第一捕获持续时间内捕获所述视频包括:
在所述第一捕获持续时间期间的第一时间,调整所述一个或多个相机中的第一相机的一个或多个设置,以聚焦与所述第一个体相对应的第一焦平面;
在所述第一捕获持续时间期间的第二时间并且在所述第一相机与所述第一焦平面对准时,检测所述第一个体与所述第一相机之间的所述距离的改变;
响应于检测到所述第一个体与所述第一相机之间的所述距离的改变,调整所述第一相机的所述一个或多个设置以聚焦与所述第一个体相对应的不同于所述第一焦平面的第二焦平面;
在所述第一捕获持续时间内捕获所述视频之后,检测应相对于所述第二多个帧中的所述第一个体在所述第一多个帧中强调所述第二个体的指示,其中所述第一多个帧与所述第二时间相对应;以及
响应于检测到应相对于所述第二多个帧中的所述第一个体在所述第一多个帧中强调所述第二个体的指示,并且在所述第二焦平面未更改时,向所述视频的所述多个帧应用相应合成景深效果,所述相应合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第一个体强调所述视频的所述多个帧中的所述第二个体。
40.根据权利要求1至39中任一项所述的方法,其中向所述视频的所述多个帧应用更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第二个体强调所述视频的所述多个帧中的所述第一个体的所述合成景深效果包括:
使用对象检测算法在所述视频的所述多个帧中识别一个或多个对象和所述一个或多个对象的一个或多个特性;以及
将一个或多个已识别对象和所述一个或多个已识别对象的一个或多个已识别特性提供给神经网络;以及
基于所述一个或多个已识别对象和所述一个或多个已识别对象的所述一个或多个已识别特性从所述神经网络获得输出,其中来自所述神经网络的所述输出从所述一个或多个对象中识别所述第一个体以用于所述合成景深效果的应用。
41.根据权利要求40所述的方法,其中使用包括用户偏好数据的训练数据来训练所述神经网络,所述用户偏好数据标识用户将在一组捕获的视频中的多个时间选择所述一组捕获的视频中的视频中的哪些对象用于强调。
42.根据权利要求40至41中任一项所述的方法,还包括:
在向所述视频的所述多个帧应用更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第二个体强调所述视频的所述多个帧中的所述第一个体的所述合成景深效果之后,并且在所述神经网络继续从所述一个或多个对象中识别所述第一个体以用于相应合成景深效果的相应应用时,检测强调所述视频中的所述多个帧中的所述第二个体的请求;以及
响应于检测到强调所述视频的所述多个帧中的不同个体的所述请求,向所述视频的所述多个帧应用更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第一个体强调所述视频的所述多个帧中的所述第二个体的不同的合成景深效果,其中,在应用所述不同的合成景深效果之后,将更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第二个体强调所述视频的所述多个帧中的所述第一个体的所述合成景深效果保存为默认景深效果改变。
43.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与一个或多个相机和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求1至42中任一项所述的方法的指令。
44.一种被配置为与一个或多个相机和一个或多个输入设备通信的计算机系统,所述计算机系统包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求1至42中任一项所述的方法的指令。
45.一种被配置为与一个或多个相机和一个或多个输入设备通信的计算机系统,所述计算机系统包括:
用于执行根据权利要求1至42中任一项所述的方法的装置。
46.一种计算机程序产品,包括被配置为由与一个或多个相机和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求1至42中任一项所述的方法的指令。
47.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与一个或多个相机和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述一个或多个输入设备检测捕获表示所述一个或多个相机的视场的视频的请求;
响应于检测到捕获所述视频的所述请求:
在第一捕获持续时间内捕获所述视频,其中所述视频包括在所述第一捕获持续时间内捕获的多个帧,其中所述多个帧表示所述一个或多个相机的所述视场中的第一个体和所述一个或多个相机的所述视场中的第二个体,并且其中,在所述多个帧中,所述第一个体在所述第一捕获持续时间内相对于所述一个或多个相机的所述视场移动;以及
向所述视频的所述多个帧应用合成景深效果,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第二个体强调所述视频的所述多个帧中的所述第一个体,其中所述合成景深效果随着所述第一个体在所述一个或多个相机的所述视场内移动而随时间改变。
48.一种被配置为与一个或多个相机和一个或多个输入设备通信的计算机系统,所述计算机系统包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述一个或多个输入设备检测捕获表示所述一个或多个相机的视场的视频的请求;
响应于检测到捕获所述视频的所述请求:
在第一捕获持续时间内捕获所述视频,其中所述视频包括在所述第一捕获持续时间内捕获的多个帧,其中所述多个帧表示所述一个或多个相机的所述视场中的第一个体和所述一个或多个相机的所述视场中的第二个体,并且其中,在所述多个帧中,所述第一个体在所述第一捕获持续时间内相对于所述一个或多个相机的所述视场移动;以及
向所述视频的所述多个帧应用合成景深效果,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第二个体强调所述视频的所述多个帧中的所述第一个体,其中所述合成景深效果随着所述第一个体在所述一个或多个相机的所述视场内移动而随时间改变。
49.一种被配置为与一个或多个相机和一个或多个输入设备通信的计算机系统,所述计算机系统包括:
用于经由所述一个或多个输入设备检测捕获表示所述一个或多个相机的视场的视频的请求的装置;
响应于检测到捕获所述视频的所述请求而用于以下操作的装置:
在第一捕获持续时间内捕获所述视频,其中所述视频包括在所述第一捕获持续时间内捕获的多个帧,其中所述多个帧表示所述一个或多个相机的所述视场中的第一个体和所述一个或多个相机的所述视场中的第二个体,并且其中,在所述多个帧中,所述第一个体在所述第一捕获持续时间内相对于所述一个或多个相机的所述视场移动;以及
用于向所述视频的所述多个帧应用合成景深效果的装置,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第二个体强调所述视频的所述多个帧中的所述第一个体,其中所述合成景深效果随着所述第一个体在所述一个或多个相机的所述视场内移动而随时间改变。
50.一种计算机程序产品,包括被配置为由与一个或多个相机和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述一个或多个输入设备检测捕获表示所述一个或多个相机的视场的视频的请求;
响应于检测到捕获所述视频的所述请求:
在第一捕获持续时间内捕获所述视频,其中所述视频包括在所述第一捕获持续时间内捕获的多个帧,其中所述多个帧表示所述一个或多个相机的所述视场中的第一个体和所述一个或多个相机的所述视场中的第二个体,并且其中,在所述多个帧中,所述第一个体在所述第一捕获持续时间内相对于所述一个或多个相机的所述视场移动;以及
向所述视频的所述多个帧应用合成景深效果,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述视频的所述多个帧中的所述第二个体强调所述视频的所述多个帧中的所述第一个体,其中所述合成景深效果随着所述第一个体在所述一个或多个相机的所述视场内移动而随时间改变。
51.一种方法,包括:
在与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统处:
经由所述显示生成部件显示用户界面,所述用户界面包括:
视频的表示,所述视频包括多个帧,所述表示包括第一个体和第二个体;以及
第一用户界面对象,所述第一用户界面对象指示所述第一个体正在被合成景深效果强调,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述第二个体强调所述多个帧中的所述第一个体;
在显示包括所述视频的所述表示和所述第一用户界面对象的所述用户界面时,经由所述一个或多个输入设备检测与对所述视频的所述表示中所述第二个体的选择相对应的手势;以及
响应于检测到与对所述视频的所述表示中所述第二个体的选择相对应的所述手势:
改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第一个体强调所述多个帧中的所述第二个体;以及
显示第二用户界面对象,所述第二用户界面对象指示所述第二个体正在被改变的合成景深效果强调,所述改变的合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第一个体强调所述多个帧中的所述第二个体。
52.根据权利要求51所述的方法,其中所述第一用户界面对象和所述第二用户界面对象具有相同视觉外观。
53.根据权利要求51至52中任一项所述的方法,还包括:
在检测到与对所述第二个体的选择相对应的所述手势之前,经由所述显示生成部件显示指示所述第二个体没有被强调的第三用户界面对象。
54.根据权利要求53所述的方法,其中所述第一用户界面对象具有与所述第三用户界面对象不同的视觉外观。
55.根据权利要求51至54中任一项所述的方法,其中所述视频的所述表示包括第三个体,所述方法还包括:
在检测到与对所述第二个体的选择相对应的所述手势之前,经由所述显示生成部件显示指示所述第二个体没有被强调的第四用户界面对象和指示所述第三个体没有被强调的第五用户界面对象。
56.根据权利要求55所述的方法,其中所述第四用户界面对象和所述第五用户界面对象具有不同的视觉外观。
57.根据权利要求51至56中任一项所述的方法,还包括:
响应于检测到与对所述第二个体的选择相对应的所述手势,停止显示所述第一用户界面对象。
58.根据权利要求51至57中任一项所述的方法,还包括:
响应于检测到与对所述第二个体的选择相对应的所述手势,显示指示所述第一个体没有被强调的第六用户界面对象。
59.根据权利要求51至58中任一项所述的方法,其中在所述一个或多个相机正在捕获所述视觉信息时检测到与对所述第二个体的选择相对应的所述手势。
60.根据权利要求51至59中任一项所述的方法,其中在对所述视频的捕获已经结束之后,在所述视频的回放期间检测到与对所述第二个体的选择相对应的所述手势。
61.根据权利要求51至60中任一项所述的方法,其中与对所述第二个体的选择相对应的所述手势是第一单轻击手势。
62.根据权利要求51至61中任一项所述的方法,其中与对所述第二个体的选择相对应的所述手势是第一多轻击手势。
63.根据权利要求51至61中任一项所述的方法,其中与对所述第二个体的选择相对应的所述手势是第一按压并保持手势。
64.根据权利要求51至63中任一项所述的方法,其中改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第一个体强调所述多个帧中的所述第二个体包括:
根据确定与对所述第二个体的选择相对应的所述手势是第一类型的手势,更改由所述一个或多个相机捕获的所述视觉信息以强调所述第二个体直到满足第一标准;以及
根据确定与对所述第二个体的选择相对应的所述手势是不同于所述第一类型的手势的第二类型的手势,更改由所述一个或多个相机捕获的所述视觉信息以强调所述第二个体直到满足第二标准,其中所述第二标准不同于所述第一标准。
65.根据权利要求64所述的方法,其中:
所述第一类型的手势是第二单轻击手势;并且
所述第二类型的手势是第二多轻击手势。
66.根据权利要求64至65中任一项所述的方法,还包括:
在由所述一个或多个相机捕获的所述视觉信息正在被更改以强调所述第二个体直到满足第一标准时,检测指向所述第二个体的所述第一类型的手势的手势;以及
响应于检测到指向所述第二个体的所述第一类型的手势的所述手势,更改由所述一个或多个相机捕获的所述视觉信息以强调所述第二个体直到满足第二标准。
67.根据权利要求51至66中任一项所述的方法,其中改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第一个体强调所述多个帧中的所述第二个体包括:
根据确定与对所述第二个体的选择相对应的所述手势是第三类型的手势,更改由所述一个或多个相机捕获的所述视觉信息,以通过向所述多个帧中的固定焦平面应用所述合成景深效果来强调所述第二个体。
68.根据权利要求67所述的方法,还包括:
根据确定与对所述第二个体的选择相对应的所述手势是所述第三类型的手势,显示到所述固定焦平面的距离的指示。
69.根据权利要求51至68中任一项所述的方法,还包括:
在显示所述第二用户界面对象并且不显示所述第一用户界面对象时:
根据确定所述多个帧中的所述第一个体满足一组自动选择标准,显示所述第一用户界面对象并且停止显示所述第二用户界面对象。
70.根据权利要求69所述的方法,其中:
根据确定与对所述第二个体的选择相对应的所述手势是第四类型的手势,所述一组自动选择标准是第一组自动选择标准;并且
根据确定与对所述第二个体的选择相对应的所述手势是不同于所述第四类型的手势的第五类型的手势,所述一组自动选择标准是不同于所述第一组自动选择标准的第二组自动选择标准。
71.根据权利要求69至70中任一项所述的方法,其中:
在检测到与对所述第二个体的选择相对应的所述手势之前,所述一组自动选择标准包括当所述媒体的所述表示中的相应个体满足第一选择置信度阈值时满足的标准;并且
响应于检测到与对所述第二个体的选择相对应的所述手势,所述一组自动选择标准包括当所述媒体的所述表示中的所述相应个体满足高于所述第一选择置信度阈值的第二选择置信度阈值时满足的标准。
72.根据权利要求51至71中任一项所述的方法,其中更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第一个体强调所述多个帧中的所述第二个体的所述合成景深效果随着所述第二个体在所述一个或多个相机的视场内移动而随时间改变。
73.根据权利要求51至72中任一项所述的方法,其中所述用户界面包括视频导航用户界面元素,所述方法还包括:
在显示所述视频导航用户界面元素时并且响应于检测到与对所述第二个体的选择相对应的所述手势,在所述视频导航用户界面元素中显示指示在所述视频中的某个时间发生了用户指定的改变的用户界面对象。
74.根据权利要求73所述的方法,其中指示发生了所述用户指定的改变的所述用户界面对象包括:
根据确定与对所述第二个体的选择相对应的所述手势是第六类型的手势,第四视觉外观;以及
根据确定与对所述第二个体的选择相对应的所述手势是不同于所述第六类型的手势的第七类型的手势,不同于所述第四视觉外观的第五视觉外观。
75.根据权利要求51至74中任一项所述的方法,其中显示所述第二用户界面对象包括:
根据确定与对所述第二个体的选择相对应的所述手势是第八类型的手势,以第六视觉外观显示所述第二用户界面对象;并且
根据确定与对所述第二个体的选择相对应的所述手势是不同于所述第八类型的手势的第九类型的手势,以不同于所述第六视觉外观的第七视觉外观显示所述第二用户界面对象。
76.根据权利要求51至75中任一项所述的方法,其中所述用户界面是媒体捕获用户界面,所述方法还包括:
在检测到与对所述第二个体的选择相对应的所述手势之后并且在显示所述用户界面时,经由所述一个或多个输入设备检测一个或多个手势;
响应于检测到所述一个或多个手势,显示媒体编辑用户界面,所述媒体编辑用户界面包括:
所述视频的第二表示,所述视频包括第三多个帧,所述第二表示包括所述第一个体和所述第二个体;和
第六用户界面对象,所述第六用户界面对象指示所述第一个体正在被合成景深效果强调,所述合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第二个体强调所述第三多个帧中的所述第一个体;以及
在显示所述媒体编辑用户界面时,经由所述一个或多个输入设备检测与对所述视频的所述第二表示中所述第二个体的选择相对应的第二手势;以及
响应于检测到与对所述视频的所述第二表示中所述第二个体的选择相对应的所述第二手势:
改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第一个体强调所述第三多个帧中的所述第二个体;以及
显示第七用户界面对象,所述第七用户界面对象指示所述第二个体正在被所述改变的合成景深效果强调,所述改变的合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第一个体强调所述第三多个帧中的所述第二个体。
77.根据权利要求51至76中任一项所述的方法,还包括:
在检测到与对所述第二个体的选择相对应的所述手势并且改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第一个体强调所述多个帧中的所述第二对象之后,检测指向所述媒体的所述表示的第一手势;以及
响应于检测到指向所述媒体的所述表示的所述第一手势,修改所述改变的合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息。
78.根据权利要求51到77中任一项所述的方法,其中所述用户界面包括用于改变所述合成景深效果的可选用户界面对象,所述可选用户界面对象在被选择时改变所述合成景深效果。
79.根据权利要求51至78中任一项所述的方法,其中:
所述用户界面包括用于控制视频捕获模式的可选用户界面对象;
用于控制所述视频捕获模式的所述可选用户界面对象与指示所述视频捕获模式处于活动状态的状态指示一起显示;并且
所述方法还包括:
在显示包括所述视频的所述表示、所述第一用户界面对象的所述用户界面,并且用于控制所述视频捕获模式的所述可选用户界面对象与指示所述视频捕获模式处于活动状态的所述状态指示一起显示时,应用更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第二个体强调所述多个帧中的所述第一个体的所述合成景深效果;
在应用更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第二个体强调所述多个帧中的所述第一个体的所述合成景深效果时,检测指向用于控制所述视频捕获模式的所述可选用户界面对象的手势;以及
响应于检测到指向用于控制所述视频捕获模式的所述可选用户界面对象的所述手势,停止应用更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第二个体强调所述多个帧中的所述第一个体的所述合成景深效果。
80.根据权利要求79所述的方法,其中在检测到指向用于控制所述视频捕获模式的所述可选用户界面对象的所述手势之前,以第一模糊量显示所述表示,所述方法还包括:
响应于检测到指向用于控制所述视频捕获模式的所述可选用户界面对象的所述手势,经由所述显示生成部件以低于所述第一模糊量的第二模糊量显示所述视频的所述表示。
81.根据权利要求51至80中任一项所述的方法,还包括:
响应于检测到与对所述第二个体的选择相对应的所述手势,配置一个或多个相机的聚焦设置以聚焦于所述视频的所述表示中的所述第二个体,其中所述计算机系统没有被配置为自动改变所述一个或多个相机的所述聚焦设置达至少预先确定的时间段;
在所述计算机系统被配置为聚焦于所述视频的所述表示中的所述第二个体时,检测指向所述视频的所述表示的第二手势;以及
响应于检测到指向所述视频的所述表示的所述第二手势,使所述计算机系统能够自动改变所述一个或多个相机的所述聚焦设置达至少所述预先确定的时间段。
82.根据权利要求51至81中任一项所述的方法,其中:
所述视频的所述表示包括来自一个或多个相机的视场的第一部分的内容子集的表示,其中:
所述一个或多个相机的所述视场延伸超过所述视场的所述第一部分到达所述一个或多个相机的所述视场的不被包括在所述表示中的第二部分;并且
关于强调哪个个体的确定是基于在所述视频期间来自所述一个或多个相机的所述视场的所述第二部分的信息的。
83.根据权利要求82所述的方法,其中关于强调哪个个体的所述确定包括相应个体在所述视场的所述第一部分中可见之前自动选择要强调的所述相应个体。
84.根据权利要求82至83中任一项所述的方法,其中关于强调哪个个体的所述确定包括:
在所述相应个体正在被强调时,检测所述相应个体移出所述视场的所述第一部分;以及
响应于检测到所述相应个体移出所述视场的所述第一部分:
根据确定所述相应个体移出所述视场的所述第二部分,自动选择要强调的不同的个体;以及
根据确定所述第一个体保持在所述视场的所述第二部分中,放弃选择要强调的不同的个体达至少预先确定的时间段。
85.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求51至84中任一项所述的方法的指令。
86.一种被配置为与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统,所述计算机系统包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求51至84中任一项所述的方法的指令。
87.一种被配置为与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统,所述计算机系统包括:
用于执行根据权利要求51至84中任一项所述的方法的装置。
88.一种计算机程序产品,包括被配置为由与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求51至84中任一项所述的方法的指令。
89.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件显示用户界面,所述用户界面包括:
视频的表示,所述视频包括多个帧,所述表示包括第一个体和第二个体;和
第一用户界面对象,所述第一用户界面对象指示所述第一个体正在被合成景深效果强调,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述第二个体强调所述多个帧中的所述第一个体;
在显示包括所述视频的所述表示和所述第一用户界面对象的所述用户界面时,经由所述一个或多个输入设备检测与对所述视频的所述表示中所述第二个体的选择相对应的手势;以及
响应于检测到与对所述视频的所述表示中所述第二个体的选择相对应的所述手势:
改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第一个体强调所述多个帧中的所述第二个体;以及
显示第二用户界面对象,所述第二用户界面对象指示所述第二个体正在被改变的合成景深效果强调,所述改变的合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第一个体强调所述多个帧中的所述第二个体。
90.一种被配置为与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统,所述计算机系统包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件显示用户界面,所述用户界面包括:
视频的表示,所述视频包括多个帧,所述表示包括第一个体和第二个体;以及
第一用户界面对象,所述第一用户界面对象指示所述第一个体正在被合成景深效果强调,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述第二个体强调所述多个帧中的所述第一个体;
在显示包括所述视频的所述表示和所述第一用户界面对象的所述用户界面时,经由所述一个或多个输入设备检测与对所述视频的所述表示中所述第二个体的选择相对应的手势;以及
响应于检测到与对所述视频的所述表示中所述第二个体的选择相对应的所述手势:
改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第一个体强调所述多个帧中的所述第二个体;以及
显示第二用户界面对象,所述第二用户界面对象指示所述第二个体正在被改变的合成景深效果强调,所述改变的合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第一个体强调所述多个帧中的所述第二个体。
91.一种被配置为与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统,所述计算机系统包括:
用于经由所述显示生成部件显示用户界面的装置,所述用户界面包括:
视频的表示,所述视频包括多个帧,所述表示包括第一个体和第二个体;和
第一用户界面对象,所述第一用户界面对象指示所述第一个体正在被合成景深效果强调,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述第二个体强调所述多个帧中的所述第一个体;
在显示包括所述视频的所述表示和所述第一用户界面对象的所述用户界面时,用于经由所述一个或多个输入设备检测与对所述视频的所述表示中所述第二个体的选择相对应的手势的装置;以及
响应于检测到与对所述视频的所述表示中所述第二个体的选择相对应的所述手势而用于以下操作的装置:
改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第一个体强调所述多个帧中的所述第二个体;以及
显示第二用户界面对象,所述第二用户界面对象指示所述第二个体正在被改变的合成景深效果强调,所述改变的合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第一个体强调所述多个帧中的所述第二个体。
92.一种计算机程序产品,包括被配置为由与一个或多个相机、显示生成部件和一个或多个输入设备通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件显示用户界面,所述用户界面包括:
视频的表示,所述视频包括多个帧,所述表示包括第一个体和第二个体;和
第一用户界面对象,所述第一用户界面对象指示所述第一个体正在被合成景深效果强调,所述合成景深效果更改由所述一个或多个相机捕获的视觉信息以相对于所述第二个体强调所述多个帧中的所述第一个体;
在显示包括所述视频的所述表示和所述第一用户界面对象的所述用户界面时,经由所述一个或多个输入设备检测与对所述视频的所述表示中所述第二个体的选择相对应的手势;以及
响应于检测到与对所述视频的所述表示中所述第二个体的选择相对应的所述手势:
改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第一个体强调所述多个帧中的所述第二个体;以及
显示第二用户界面对象,所述第二用户界面对象指示所述第二个体正在被改变的合成景深效果强调,所述改变的合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第一个体强调所述多个帧中的所述第二个体。
93.一种方法,包括:
在与显示生成部件通信的计算机系统处:
经由所述显示生成部件显示用户界面,包括同时显示:
具有第一持续时间的视频的表示,其中所述视频包括所述视频中个体强调的多个改变,其中所述视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于所述视频中的一个或多个元素强调一个个体,其中所述多个改变包括在所述第一持续时间期间的第一时间的个体强调的自动改变,以及在所述第一持续时间期间与所述第一时间不同的第二时间的个体强调的用户指定的改变;以及
用于在所述视频中导航的视频导航用户界面元素,所述视频包括所述第一时间的表示和所述第二时间的表示,
其中:
所述第二时间的所述表示在视觉上与所述视频的所述第一持续时间中不与个体强调的改变相对应的其他时间区分开来;并且
所述第一时间的所述表示在视觉上与所述第二时间的所述表示区分开来。
94.根据权利要求93所述的方法,其中:
所述个体强调的自动改变是第一合成景深效果,所述第一合成景深效果更改由一个或多个相机捕获的视觉信息,以相对于所述视频中的第二个体强调所述视频中的第一个体;并且
所述个体强调的用户指定的改变是第二合成景深效果,所述第二合成景深效果更改由所述一个或多个相机捕获的视觉信息,以相对于所述视频中的第四个体强调所述视频中的第三个体。
95.根据权利要求93至94中任一项所述的方法,其中用于在所述视频中导航的所述视频导航用户界面元素不包括:
指示在所述第一时间发生了所述自动改变的图形用户界面对象。
96.根据权利要求93至95中任一项所述的方法,其中用于在所述视频中导航的所述视频导航用户界面元素包括:
在所述视频导航用户界面元素上的第一位置处,指示在所述视频中的所述第一时间发生了所述自动改变的第一图形用户界面对象,其中所述第一图形用户界面对象具有第一视觉外观;以及
在所述视频导航用户界面元素上与所述第一位置不同的第二位置处,指示在与所述第一时间不同的所述第二时间发生了所述用户指定的改变的第二图形用户界面对象,其中所述第二图形用户界面对象具有与所述第一视觉外观不同的第二视觉外观。
97.根据权利要求96所述的方法,其中用于在所述视频中导航的所述视频导航用户界面元素包括在所述视频导航用户界面元素上相应位置处的图形用户界面对象,所述图形用户界面对象指示在所述视频中的所述第二时间之前发生的所述视频中的相应时间已经发生相应改变,所述方法还包括:
根据确定在所述视频中的所述相应时间发生的所述相应改变是相应用户指定的改变,显示从所述视频导航用户界面元素上的所述相应位置延伸到所述视频导航用户界面元素上的所述第二位置的视觉指示。
98.根据权利要求96至97中任一项所述的方法,其中所述第二图形用户界面对象在所述第二时间的所述表示处或邻近所述表示显示。
99.根据权利要求93至98中任一项所述的方法,其中响应于正在捕获所述视频时检测到的手势而引起个体强调的所述用户指定的改变。
100.根据权利要求93至99中任一项所述的方法,还包括:
在显示所述第二时间的所述表示时,检测指向所述第二时间的所述表示的手势;以及
响应于检测到指向所述第二时间的所述表示的所述手势,在所述视频的所述第一持续时间期间显示所述第二时间的第二表示。
101.根据权利要求93至100中任一项所述的方法,还包括:
在显示所述视频导航用户界面元素时,检测指向所述视频导航用户界面元素的手势;以及
响应于检测到指向所述视频导航用户界面元素的所述手势,在所述视频的所述表示中导航。
102.根据权利要求101所述的方法,其中:
在检测到指向所述视频导航用户界面元素的所述手势之前,所述视频导航用户界面元素包括在第一播放头位置处的第一播放头;并且
所述视频的所述表示是所述视频在与所述第一播放头位置相对应的时间的表示;
所述方法还包括:
响应于检测到指向所述视频导航用户界面元素的所述手势:
将所述第一播放头从所述第一播放头位置移动到第二播放头位置;以及
在与所述第二播放头位置相对应的时间显示所述视频的表示,同时停止在与所述第一播放头位置相对应的所述时间显示所述视频的所述表示。
103.根据权利要求101至102中任一项所述的方法,还包括:
在检测到指向所述视频导航用户界面元素的所述手势时,移动可选指示符,包括:
根据确定所述可选指示符不在距所述第二时间的所述表示的阈值距离内,显示根据指向所述视频导航用户界面元素的所述手势的检测到的速度而移动的所述可选指示符;以及
根据确定所述可选指示符在距所述第二时间的所述表示的阈值距离内,在所述第二时间的所述表示处显示所述可选指示符。
104.根据权利要求103所述的方法,其中:
根据确定所述可选指示符在距所述第二时间的所述表示的阈值距离内,提供与所述第二时间对齐相对应的触觉输出。
105.根据权利要求103至104中任一项所述的方法,其中所述可选指示符是所述第一播放头。
106.根据权利要求103至104中任一项所述的方法,其中所述可选指示符是微调指示符。
107.根据权利要求93至106中任一项所述的方法,其中:
所述视频的所述表示是在所述第一持续时间期间的第三时间的表示,所述表示包括第五个体和第六个体;并且
显示所述视频的所述表示包括:
显示第一用户界面对象,所述第一用户界面对象指示所述第五个体正在被合成景深效果强调,所述合成景深效果更改由所述一个或多个相机捕获的所述视觉信息以相对于所述第六个体强调所述视频的所述表示中的所述第五个体。
108.根据权利要求107所述的方法,其中:
多个帧中的所述第五个体被显示具有第一视觉特性;以及
所述多个帧中的所述第六个体被显示具有与所述第一视觉特性不同的第二视觉特性。
109.根据权利要求107至108所述的方法,还包括:
在显示所述视频的所述表示和所述第一用户界面对象时,检测与对所述视频的所述表示中所述第六个体的选择相对应的手势;以及
响应于检测到与对所述视频的所述表示中所述第六个体的选择相对应的所述手势:
改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第五个体强调所述视频的所述表示中的所述第六个体。
110.根据权利要求109所述的方法,还包括:
响应于检测到与对所述视频的所述表示中所述第六个体的选择相对应的所述手势:
显示第七图形用户界面对象,所述第七图形用户界面对象指示所述第六个体正在被改变的合成景深效果强调,所述改变的合成景深效果更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第五个体强调所述视频的所述表示中的所述第六个体。
111.根据权利要求110所述的方法,其中:
用于在所述视频中导航的所述视频导航用户界面元素包括:
在所述视频导航用户界面元素上的第七位置处,所述第七图形用户界面对象;
在所述视频导航用户界面元素上的第八位置处,指示在所述视频中的第八时间已经发生合成景深效果改变的第八图形对象;以及
位于所述第七位置与所述第八位置之间的部分;
在检测到与对所述视频的所述表示中所述第六个体的选择相对应的所述手势之前,以第一视觉状态显示所述视频导航用户界面元素的位于所述第七位置与所述第八位置之间的所述部分;
所述方法还包括:
响应于检测到与对所述视频的所述表示中所述第六个体的选择相对应的所述手势,显示所述视频导航用户界面元素的位于所述第七位置与所述第八位置之间的所述部分的动画,所述动画从所述第一视觉状态改变为与所述第一视觉状态不同的第二视觉状态。
112.根据权利要求109至111中任一项所述的方法,还包括:
响应于检测到与对所述视频的所述表示中所述第六个体的选择相对应的所述手势,在所述视频导航用户界面元素中显示所述第三时间的第二表示,其中所述第三时间的所述第二表示表示个体强调的用户指定的改变。
113.根据权利要求107至112中任一项所述的方法,其中所述第三时间的所述表示包括第七个体,所述方法还包括:
在显示所述视频的所述表示和所述第一用户界面对象时,检测与对所述视频的所述表示中所述第七个体的选择相对应的手势;以及
响应于检测到与对所述视频的所述表示中所述第七个体的选择相对应的所述手势:
改变所述合成景深效果以更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第五个体强调所述视频的所述表示中的所述第七个体;以及
显示第三用户界面对象,所述第三用户界面对象指示所述第七个体正在被改变的合成景深效果强调,所述改变的合成景深效果更改由所述一个或多个相机捕获的所述视觉信息,以相对于所述第五个体强调所述视频的所述表示中的所述第七个体。
114.根据权利要求93至113中任一项所述的方法,其中用于在所述视频中导航的所述视频导航用户界面元素包括所述视频导航用户界面元素上的第三位置处的第三图形用户界面对象,所述第三图形用户界面对象指示在所述视频中的所述第二时间发生了所述用户指定的改变,所述方法还包括:
在显示所述第三图形用户界面对象时,检测指向所述第三图形用户界面对象的手势;以及
响应于检测到指向所述第三图形用户界面对象的所述手势,显示用于移除在所述视频中的所述第二时间发生的所述用户指定的改变的选项。
115.根据权利要求93至114中任一项所述的方法,其中用于在所述视频中导航的所述视频导航用户界面元素包括:
在所述视频导航用户界面元素上的第四位置处,指示在所述视频中的所述第二时间发生了所述用户指定的改变的第四图形用户界面对象;并且
在所述第二时间的所述表示之后,显示包括相对于所述视频中的一个或多个元素被强调的所述一个个体的多个表示。
116.根据权利要求93至115中任一项所述的方法,其中:
所述视频的所述表示是所述第二时间的第三表示;并且
所述第二时间的所述第三表示:
根据确定所述用户指定的改变是第一类型的用户指定的改变,具有第三视觉外观;以及
根据确定所述用户指定的改变是与所述第一类型的用户指定的改变不同的第二类型的用户指定的改变,具有与所述第三视觉外观不同的第四视觉外观。
117.根据权利要求93至116中任一项所述的方法,还包括:
在显示所述视频导航用户界面元素时,检测指向所述视频导航用户界面元素上的第六位置的手势;以及
响应于检测到指向所述视频导航用户界面元素上的所述第六位置的所述手势,显示表示所述视频的回放中与所述第六位置相对应的时间的进度指示符。
118.根据权利要求93至117中任一项所述的方法,其中:
所述用户界面包括用于控制视频编辑模式的可选用户界面对象;
用于控制所述视频编辑模式的所述可选用户界面对象与指示所述视频编辑模式处于活动状态的状态指示一起显示;
用于在所述视频中导航的所述视频导航用户界面元素包括所述视频导航用户界面元素上的第七位置处的第六图形用户界面对象,所述第六图形用户界面对象指示在所述视频中的所述第二时间发生了所述用户指定的改变;
所述第六图形用户界面对象以可选状态显示;并且
所述方法还包括:
在显示用于控制所述视频编辑模式的所述可选用户界面对象以及指示所述视频编辑模式处于所述活动状态的所述状态指示时,检测指向用于控制所述视频编辑模式的所述可选用户界面对象的手势;以及
响应于检测到指向用于控制所述视频编辑模式的所述可选用户界面对象的所述手势,放弃以所述可选状态显示所述第六图形用户界面对象的显示。
119.根据权利要求118所述的方法,其中在检测到指向用于控制所述视频编辑模式的所述可选用户界面对象的所述手势之前,用于在所述视频中导航的所述视频导航用户界面元素被显示具有第一视觉强调量,所述方法还包括:
响应于检测到指向用于控制所述视频编辑模式的所述可选用户界面对象的所述手势,用于控制所述视频编辑模式的所述视频导航用户界面元素被显示具有小于所述第一视觉强调量的第二视觉强调量。
120.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与显示生成部件和一个或多个相机通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求93至119中任一项所述的方法的指令。
121.一种被配置为与显示生成部件通信的计算机系统,所述计算机系统包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求93至119中任一项所述的方法的指令。
122.一种被配置为与显示生成部件通信的计算机系统,所述计算机系统包括:
用于执行根据权利要求93至119中任一项所述的方法的装置。
123.一种计算机程序产品,包括被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求93至119中任一项所述的方法的指令。
124.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件显示用户界面,包括同时显示:
具有第一持续时间的视频的表示,其中所述视频包括所述视频中个体强调的多个改变,其中所述视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于所述视频中的一个或多个元素强调一个个体,其中所述多个改变包括在所述第一持续时间期间的第一时间的个体强调的自动改变,以及在所述第一持续时间期间不同于所述第一时间的第二时间的个体强调的用户指定的改变;和
用于在所述视频中导航的视频导航用户界面元素,所述视频包括所述第一时间的表示和所述第二时间的表示,其中:
所述第二时间的所述表示在视觉上与所述视频的所述第一持续时间中不对应于个体强调的改变的其他时间区分开来;并且
所述第一时间的所述表示在视觉上与所述第二时间的所述表示区分开来。
125.一种被配置为与显示生成部件通信的计算机系统,所述计算机系统包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件显示用户界面,包括同时显示:
具有第一持续时间的视频的表示,其中所述视频包括所述视频中个体强调的多个改变,其中所述视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于所述视频中的一个或多个元素强调一个个体,其中所述多个改变包括在所述第一持续时间期间的第一时间的个体强调的自动改变,以及在所述第一持续时间期间与所述第一时间不同的第二时间的个体强调的用户指定的改变;和
用于在所述视频中导航的视频导航用户界面元素,所述视频包括所述第一时间的表示和所述第二时间的表示,
其中:
所述第二时间的所述表示在视觉上与所述视频的所述第一持续时间中不与个体强调的改变相对应的其他时间区分开来;并且
所述第一时间的所述表示在视觉上与所述第二时间的所述表示区分开来。
126.一种被配置为与显示生成部件通信的计算机系统,所述计算机系统包括:
用于经由所述显示生成部件显示用户界面的装置,所述用户界面包括:
经由所述显示生成部件显示用户界面,包括同时显示:
具有第一持续时间的视频的表示,其中所述视频包括所述视频中个体强调的多个改变,其中所述视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于所述视频中的一个或多个元素强调一个个体,其中所述多个改变包括在所述第一持续时间期间的第一时间的个体强调的自动改变,以及在所述第一持续时间期间与所述第一时间不同的第二时间的个体强调的用户指定的改变;和
用于在所述视频中导航的视频导航用户界面元素,所述视频包括所述第一时间的表示和所述第二时间的表示,其中:
所述第二时间的所述表示在视觉上与所述视频的所述第一持续时间中不与个体强调的改变相对应的其他时间区分开来;并且
所述第一时间的所述表示在视觉上与所述第二时间的所述表示区分开来。
127.一种计算机程序产品,包括被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件显示用户界面,包括同时显示:
具有第一持续时间的视频的表示,其中所述视频包括所述视频中个体强调的多个改变,其中所述视频中个体强调的改变包括由一个或多个相机捕获的视觉信息的外观改变,以相对于所述视频中的一个或多个元素强调一个个体,其中所述多个改变包括在所述第一持续时间期间的第一时间的个体强调的自动改变,以及在所述第一持续时间期间与所述第一时间不同的第二时间的个体强调的用户指定的改变;和
用于在所述视频中导航的视频导航用户界面元素,所述视频包括所述第一时间的表示和所述第二时间的表示,其中:
所述第二时间的所述表示在视觉上与所述视频的所述第一持续时间中不与个体强调的改变相对应的其他时间区分开来;并且
所述第一时间的所述表示在视觉上与所述第二时间的所述表示区分开来。
128.一种方法,包括:
在与显示生成部件和多个相机通信的计算机系统处,所述多个相机包括第一相机和第二相机,所述第一相机具有由所述第一相机的硬件确定的第一图像捕获参数,所述第二相机具有由所述第二相机的硬件确定的第二图像捕获参数,其中所述第二图像捕获参数不同于所述第一图像捕获参数:
经由所述显示生成部件显示包括所述多个相机中的一个或多个相机的视场的表示的相机用户界面,其中使用由具有所述第一图像捕获参数的所述第一相机收集的视觉信息来显示所述视场的所述表示;
在使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示时,检测与所述多个相机中的至少一个相机相对应的相机位置与与焦点相对应的焦点位置之间的距离减小;以及
响应于检测到所述相机位置与所述焦点位置之间的所述距离减小:
根据确定所述相机位置与所述焦点位置之间减小的距离比预先确定的阈值距离更近,从使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第二相机收集的视觉信息来显示所述视场的所述表示。
129.根据权利要求128所述的方法,其中所述预先确定的阈值距离基于所述第一图像捕获参数。
130.根据权利要求128至129中任一项所述的方法,还包括:
在使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示时,检测捕获媒体的请求;以及
响应于检测到捕获媒体的所述请求,使用以下来捕获媒体:
根据确定所述相机位置与所述焦点位置之间的当前距离比第二预先确定的阈值距离更近,使用由所述第一相机收集的第二视觉信息来捕获媒体;以及
根据确定所述相机位置与所述焦点位置之间的所述当前距离不比所述第二预先确定的阈值距离更近,使用由所述第二相机收集的第二视觉信息来捕获媒体。
131.根据权利要求128至130中任一项所述的方法,还包括:
响应于检测到所述相机位置与所述焦点位置之间的所述距离减小:
根据确定所述相机位置与所述焦点位置之间减小的距离不比所述预先确定的阈值距离更近,放弃从使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第二相机收集的所述视觉信息来显示所述视场的所述表示。
132.根据权利要求128至131中任一项所述的方法,其中基于所述计算机系统的移动来检测所述相机位置与所述焦点位置之间的所述距离减小。
133.根据权利要求128至132中任一项所述的方法,其中基于所选择的新焦点来检测所述相机位置与所述焦点位置之间的所述距离减小。
134.根据权利要求128至133中任一项所述的方法,还包括:
在使用由所述第二相机收集的视觉信息显示所述视场的所述表示时,检测所述相机位置与所述焦点位置之间的距离增加;以及
响应于检测到所述相机位置与所述焦点位置之间的所述距离增加:
根据确定所述相机位置与所述焦点位置之间增加的距离不比第三预先确定的阈值距离更近,从使用由所述第二相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第一相机收集的视觉信息来显示所述视场的所述表示。
135.根据权利要求128至134中任一项所述的方法,其中:
在检测到所述相机位置与所述焦点位置之间的所述距离减小之前,以有效缩放级别显示所述视场的所述表示;并且
从使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第二相机收集的所述视觉信息来显示所述视场的所述表示包括继续以所述有效缩放级别显示所述视场的所述表示。
136.根据权利要求128至135中任一项所述的方法,其中从使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第二相机收集的所述视觉信息来显示所述视场的所述表示包括改变所述视场的所述表示的外观。
137.根据权利要求128至136中任一项所述的方法,其中:
所述第一相机位于所述计算机系统上的第一位置处;
所述第二相机位于所述计算机系统上的第二位置处;并且
从使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第二相机收集的所述视觉信息来显示所述视场的所述表示包括显示所述视场的所述表示,所述视场的所述表示被移位以增加所述相机用户界面的预先确定部分附近所述第一相机的所述视场与所述第二相机的所述视场之间的对准,而不是在所述预先确定部分附近的平移量,同时减少在所述视场的所述表示的更远离所述预先确定部分的一个或多个部分处所述第一相机的所述视场与所述第二相机的所述视场之间的对准。
138.根据权利要求128至137中任一项所述的方法,其中所述多个相机包括第三相机,所述第三相机具有由所述第三相机的硬件确定的第三图像捕获参数,并且其中所述第三图像捕获参数不同于所述第一图像捕获参数和所述第二图像捕获参数,所述方法还包括:
在使用由具有所述第一图像捕获参数的所述第一相机收集的所述视觉信息来显示所述视场的所述表示之前,使用由具有所述第三图像捕获参数的所述第三相机收集的视觉信息来显示所述视场的所述表示;
在使用由所述第三相机收集的所述视觉信息显示所述视场的所述表示时,检测与所述多个相机中的至少一个相机相对应的所述相机位置与对应于所述焦点的所述焦点位置之间的第二距离减小;以及
响应于检测到所述相机位置与所述焦点位置之间的所述第二距离减小:
根据确定所述相机位置与所述焦点位置之间第二减小的距离比第四预先确定的距离更近,从使用由所述第三相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示。
139.根据权利要求128至138中任一项所述的方法,其中:
根据确定所述多个相机中的一个或多个相机的所述视场中的光量高于阈值光量,所述预先确定的阈值距离是第一阈值距离;并且
根据确定所述多个相机中的一个或多个相机的所述视场中的所述光量不高于所述阈值光量,所述预先确定的阈值距离是与所述第一阈值距离不同的第二阈值距离。
140.根据权利要求128至139中任一项所述的方法,其中所述第一相机具有第一固定焦距,并且所述第二相机具有与所述第一固定焦距不同的第二固定焦距。
141.根据权利要求128至140中任一项所述的方法,其中:
所述第一相机具有第一最小聚焦距离;
所述第二相机具有第二最小聚焦距离;并且
所述第一最小聚焦距离长于所述第二最小聚焦距离。
142.根据权利要求128至141中任一项所述的方法,其中:
所述第一相机具有第一最小缩放级别;
所述第二相机具有第二最小缩放级别;并且
所述第一最小缩放级别与所述第二最小缩放级别不同。
143.根据权利要求128至142中任一项所述的方法,其中:
所述第一相机具有第一最大缩放级别;
所述第二相机具有第二最大缩放级别;并且
所述第一最大缩放级别与所述第二最大缩放级别不同。
144.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与显示生成部件和多个相机通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述多个相机包括第一相机和第二相机,所述第一相机具有由所述第一相机的硬件确定的第一图像捕获参数,所述第二相机具有由所述第二相机的硬件确定的第二图像捕获参数,其中所述第二图像捕获参数与所述第一图像捕获参数不同,所述一个或多个程序包括用于执行根据权利要求128至143中任一项所述的方法的指令。
145.一种计算机系统,所述计算机系统被配置为与显示生成部件和多个相机通信,所述多个相机包括第一相机和第二相机,所述第一相机具有由所述第一相机的硬件确定的第一图像捕获参数,所述第二相机具有由所述第二相机的硬件确定的第二图像捕获参数,其中所述第二图像捕获参数与所述第一图像捕获参数不同,所述计算机系统包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求128至143中任一项所述的方法的指令。
146.一种计算机系统,所述计算机系统被配置为与显示生成部件和多个相机通信,所述多个相机包括第一相机和第二相机,所述第一相机具有由所述第一相机的硬件确定的第一图像捕获参数,所述第二相机具有由所述第二相机的硬件确定的第二图像捕获参数,其中所述第二图像捕获参数与所述第一图像捕获参数不同,所述计算机系统包括:
用于执行根据权利要求128至143中任一项所述的方法的装置。
147.一种计算机程序产品,所述计算机程序产品包括被配置为由与显示生成部件和多个相机通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述多个相机包括第一相机和第二相机,所述第一相机具有由所述第一相机的硬件确定的第一图像捕获参数,所述第二相机具有由所述第二相机的硬件确定的第二图像捕获参数,其中所述第二图像捕获参数与所述第一图像捕获参数不同,所述一个或多个程序包括用于执行根据权利要求128至143中任一项所述的方法的指令。
148.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与显示生成部件和多个相机通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述多个相机包括第一相机和第二相机,所述第一相机具有由所述第一相机的硬件确定的第一图像捕获参数,所述第二相机具有由所述第二相机的硬件确定的第二图像捕获参数,其中所述第二图像捕获参数与所述第一图像捕获参数不同,所述一个或多个程序包括用于执行以下操作的指令:
经由所述显示生成部件显示包括所述多个相机中的一个或多个相机的视场的表示的相机用户界面,其中使用由具有所述第一图像捕获参数的所述第一相机收集的视觉信息来显示所述视场的所述表示;
在使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示时,检测与所述多个相机中的至少一个相机相对应的相机位置与对应于焦点的焦点位置之间的距离减小;以及
响应于检测到所述相机位置与所述焦点位置之间的所述距离减小:
根据确定所述相机位置与所述焦点位置之间减小的距离比预先确定的阈值距离更近,从使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第二相机收集的视觉信息来显示所述视场的所述表示。
149.一种计算机系统,所述计算机系统被配置为与显示生成部件和多个相机通信,所述多个相机包括第一相机和第二相机,所述第一相机具有由所述第一相机的硬件确定的第一图像捕获参数,所述第二相机具有由所述第二相机的硬件确定的第二图像捕获参数,其中所述第二图像捕获参数与所述第一图像捕获参数不同,所述计算机系统包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件显示包括所述多个相机中的一个或多个相机的视场的表示的相机用户界面,其中使用由具有所述第一图像捕获参数的所述第一相机收集的视觉信息来显示所述视场的所述表示;
在使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示时,检测与所述多个相机中的至少一个相机相对应的相机位置与对应于焦点的焦点位置之间的距离减小;以及
响应于检测到所述相机位置与所述焦点位置之间的所述距离减小:
根据确定所述相机位置与所述焦点位置之间减小的距离比预先确定的阈值距离更近,从使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第二相机收集的视觉信息来显示所述视场的所述表示。
150.一种计算机系统,所述计算机系统被配置为与显示生成部件和多个相机通信,所述多个相机包括第一相机和第二相机,所述第一相机具有由所述第一相机的硬件确定的第一图像捕获参数,所述第二相机具有由所述第二相机的硬件确定的第二图像捕获参数,其中所述第二图像捕获参数与所述第一图像捕获参数不同,所述计算机系统包括:
用于经由所述显示生成部件显示包括所述多个相机中的一个或多个相机的视场的表示的相机用户界面的装置,其中使用由具有所述第一图像捕获参数的所述第一相机收集的视觉信息来显示所述视场的所述表示;
在使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示时,用于检测与所述多个相机中的至少一个相机相对应的相机位置与对应于焦点的焦点位置之间的距离减小的装置;以及
响应于检测到所述相机位置与所述焦点位置之间的所述距离减小而用于以下操作的装置:
根据确定所述相机位置与所述焦点位置之间减小的距离比预先确定的阈值距离更近,从使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第二相机收集的视觉信息来显示所述视场的所述表示。
151.一种计算机程序产品,所述计算机程序产品包括被配置为由与显示生成部件和多个相机通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述多个相机包括第一相机和第二相机,所述第一相机具有由所述第一相机的硬件确定的第一图像捕获参数,所述第二相机具有由所述第二相机的硬件确定的第二图像捕获参数,其中所述第二图像捕获参数与所述第一图像捕获参数不同,所述一个或多个程序包括用于执行以下操作的指令:
经由所述显示生成部件显示包括所述多个相机中的一个或多个相机的视场的表示的相机用户界面,其中使用由具有所述第一图像捕获参数的所述第一相机收集的视觉信息来显示所述视场的所述表示;
在使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示时,检测与所述多个相机中的至少一个相机相对应的相机位置与对应于焦点的焦点位置之间的距离减小;以及
响应于检测到所述相机位置与所述焦点位置之间的所述距离减小:
根据确定所述相机位置与所述焦点位置之间减小的距离比预先确定的阈值距离更近,从使用由所述第一相机收集的所述视觉信息来显示所述视场的所述表示过渡到使用由所述第二相机收集的视觉信息来显示所述视场的所述表示。
152.一种方法,包括:
在与显示生成部件通信的计算机系统处:
经由所述显示生成部件播放视频的一部分,所述部分包括在第一时间发生的第一个体强调改变,其中所述第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在所述视频中的所述第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;
在播放所述视频的包括在所述第一时间发生的所述第一个体强调改变的所述部分之后,检测改变在所述视频中不同于所述第一时间的第二时间的个体强调的请求;以及
响应于检测到改变在所述视频中的所述第二时间的个体强调的所述请求:
改变在所述视频中的所述第二时间之后的第二时间段期间的所述个体强调;以及
改变在所述第一时间发生的所述第一个体强调改变,所述第一个体强调改变包括改变在所述视频中的所述第一时间之后的所述第一时间段期间的所述相应个体相对于所述一个或多个元素的强调。
153.根据权利要求152所述的方法,其中:
在检测到改变在所述第二时间的个体强调的所述请求之前,所述视频包括在所述第二时间发生的第二个体强调改变;并且
改变在所述视频中的所述第二时间之后的所述第二时间段期间的所述个体强调包括移除在所述第二时间发生的所述第二个体强调改变。
154.根据权利要求153所述的方法,还包括:
在检测到改变在所述第二时间的个体强调的所述请求之前,显示指示在所述第二时间发生的所述第二个体强调改变的第一图形用户界面对象,其中检测改变在所述第二时间发生的个体强调的所述请求包括:
在显示所述第一图形用户界面对象时,检测指向所述第一图形用户界面对象的输入;
响应于检测到指向所述第一图形用户界面对象的所述输入,显示用于移除在所述第二时间发生的所述第二个体强调改变的选项;以及
在显示用于移除在所述第二时间发生的所述第二个体强调改变的所述选项时,检测指向用于移除在所述第二时间发生的所述第二个体强调改变的所述选项的输入;以及
响应于检测到指向用于移除在所述第二时间发生的所述第二个体强调改变的所述选项的所述输入,通过移除在所述第二时间发生的所述第二个体强调改变来改变在所述视频中的所述第二时间之后的所述第二时间段期间的所述个体强调。
155.根据权利要求154所述的方法,其中:
在检测到指向所述第一图形用户界面对象的所述输入之前,所述第一图形用户界面对象与具有第一视觉强调量的视频导航用户界面元素同时显示;并且
用于移除响应于检测到指向所述第一图形用户界面对象的所述输入而在所述第二时间发生的所述第二个体强调改变的所述选项与具有第二视觉强调量的所述视频导航用户界面元素同时显示,所述第二视觉强调量小于所述第一视觉强调量。
156.根据权利要求152至155中任一项所述的方法,其中:
在检测到改变在所述第二时间的个体强调的所述请求之前,所述视频不包括在所述第二时间发生的个体强调改变;并且
改变在所述视频中的所述第二时间之后的所述第二时间段期间的所述个体强调包括添加在所述第二时间发生的第三个体强调改变。
157.根据权利要求152至156中任一项所述的方法,其中:
检测改变在所述第二时间发生的个体强调的所述请求包括检测指向所述视频的第一表示的第一类型的输入,其中所述第一类型的输入是选择所述视频中的第一固定焦平面的第一输入;并且
改变在所述视频中的所述第二时间之后的所述第二时间段期间的所述个体强调包括在所述视频与所述第二时间段相对应的第一多个帧中向所述第一固定焦平面应用合成景深效果。
158.根据权利要求152至157中任一项所述的方法,其中:
检测改变在所述第二时间发生的个体强调的所述请求包括检测指向所述视频的第二表示的第二类型的输入,其中所述第二类型的输入是选择所述视频中要聚焦的第一个体的输入;并且
改变在所述视频中的所述第二时间之后的所述第二时间段期间的所述个体强调包括在所述视频与所述第二时间段相对应的第二多个帧中应用合成景深效果以相对于第二个体强调所述第一个体。
159.根据权利要求152至158中任一项所述的方法,其中:
检测改变在所述第二时间发生的个体强调的所述请求包括检测指向所述视频的第三表示的第三类型的输入,其中所述第三类型的输入是选择所述视频中的第二固定焦平面的第二输入;并且
所述方法还包括:
响应于检测到改变在所述视频中的所述第二时间的个体强调的所述请求,显示到所述第二固定焦平面的距离的指示。
160.根据权利要求152至159中任一项所述的方法,其中:
在所述第一时间发生的所述第一个体强调改变是第一类型的个体强调改变;并且
改变在所述第一时间发生的所述第一个体强调改变包括添加在所述第一时间的第四个体强调改变,其中所述第四个体强调改变是与所述第一类型的个体强调改变不同的第二类型的个体强调改变。
161.根据权利要求152到160中任一项所述的方法,其中所述第一时间对应于第一子集,在所述第一子集处,在所述视频的所述第一时间之前的第二部分中可见的被强调的个体不再可见。
162.根据权利要求152至159和161中任一项所述的方法,其中改变在所述第一时间发生的所述第一个体强调包括移除在所述第一时间发生的所述第一个体强调。
163.根据权利要求152至162中任一项所述的方法,其中在所述第一时间发生的所述第一个体强调是个体强调的自动改变。
164.根据权利要求152至163中任一项所述的方法,其中:
在检测到改变在所述视频中与所述第一时间不同的所述第二时间的个体强调的所述请求之前,所述视频包括在第三时间发生的第五个体强调改变;并且
所述方法还包括:
响应于检测到改变在所述视频中的所述第二时间的个体强调的所述请求,并且根据确定满足一组个体强调标准,所述一组强调改变标准包括当在所述第三时间发生的所述第五个体强调改变是个体强调的用户指定的改变时满足的标准,放弃改变在所述第三时间发生的所述第五个体强调改变。
165.根据权利要求152至164中任一项所述的方法,其中所述第二时间在所述视频中的所述第一时间之后发生。
166.根据权利要求152到164中任一项所述的方法,其中所述第二时间在所述视频中的所述第一时间之前发生。
167.根据权利要求152至166中任一项所述的方法,其中:
所述视频包括在第四时间发生的第五个体强调;并且
所述方法还包括:
显示第一可选用户界面对象;以及
在显示所述第一可选用户界面对象时并且在所述视频包括在所述第四时间发生的所述第五个体强调改变时,检测指向所述第一可选用户界面对象的第一输入;以及
响应于检测到指向所述第一可选用户界面对象的所述第一输入并且根据确定在所述第四时间发生的所述第五个体强调改变是个体强调的用户指定的改变,从所述视频移除在所述第四时间发生的所述第五个体强调改变。
168.根据权利要求167所述的方法,还包括:
响应于检测到指向所述第一可选用户界面对象的所述输入并且根据确定在所述第四时间发生的所述第五个体强调改变是个体强调的自动改变,放弃从所述视频移除在所述第四时间发生的所述第五个体强调改变。
169.根据权利要求167至168中任一项所述的方法,还包括:
在显示所述第一可选用户界面对象时并且在从所述视频移除在所述第四时间发生的所述第五个体强调改变时,检测指向所述第一可选用户界面对象的第二输入;以及
响应于检测到指向所述第一可选用户界面对象的所述第二输入,将在所述第四时间发生的所述第五个体强调改变添加到所述视频。
170.根据权利要求167至169中任一项所述的方法,还包括:
在从所述视频移除在所述第四时间发生的所述第五个体强调改变时并且在以非活动状态显示所述第一可选用户界面对象时,检测添加个体强调的一个或多个用户指定的改变的请求;以及
响应于检测到添加个体强调的一个或多个用户指定的改变的所述请求,以不同于非活动状态的活动状态显示所述第一可选用户界面对象,而不将在所述第四时间发生的所述第五个体强调改变添加到所述视频。
171.根据权利要求152至170中任一项所述的方法,还包括:
在所述视频包括在所述第一时间发生的所述第一个体强调时:
根据确定所述第一个体强调改变是个体强调的用户指定的改变,以第一视觉外观显示指示在所述第一时间发生的所述第一个体强调改变的第二图形用户界面对象;以及
根据确定所述第一个体强调改变是个体强调的自动改变,
以与所述第一视觉外观不同的第二视觉外观显示所述第二图形用户界面对象。
172.根据权利要求152至171中任一项所述的方法,其中:
在所述视频中的所述第二时间的所述个体强调是第三类型的个体强调;并且
所述方法还包括:
在播放所述视频的包括在所述第一时间的所述第一个体强调改变的所述部分之后,检测改变在所述第二时间的个体强调的第二请求;以及
响应于检测到改变在所述第二时间的个体强调的所述第二请求,并且根据确定改变在所述第二时间的个体强调的所述第二请求是将在所述视频中的所述第二时间的所述个体强调改变为所述第三类型的个体强调的请求,放弃改变在所述视频中的所述第二时间之后的所述第二时间段期间的所述个体强调。
173.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求152至172中任一项所述的方法的指令。
174.一种被配置为与显示生成部件通信的计算机系统,所述计算机系统包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求152至172中任一项所述的方法的指令。
175.一种被配置为与显示生成部件通信的计算机系统,包括:
用于执行根据权利要求152至172中任一项所述的方法的装置。
176.一种计算机程序产品,包括被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求152至172中任一项所述的方法的指令。
177.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件播放视频的一部分,所述部分包括在第一时间发生的第一个体强调改变,其中所述第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在所述视频中的所述第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;
在播放所述视频的包括在所述第一时间发生的所述第一个体强调改变的所述部分之后,检测改变在所述视频中与所述第一时间不同的第二时间的个体强调的请求;以及
响应于检测到改变在所述视频中的所述第二时间的个体强调的所述请求:
改变在所述视频中的所述第二时间之后的第二时间段期间的所述个体强调;以及
改变在所述第一时间发生的所述第一个体强调改变,所述第一个体强调改变包括改变在所述视频中的所述第一时间之后的所述第一时间段期间的所述相应个体相对于所述一个或多个元素的所述强调。
178.一种被配置为与显示生成部件通信的计算机系统,包括:
一个或多个处理器;和
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件播放视频的一部分,所述部分包括在第一时间发生的第一个体强调改变,其中所述第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在所述视频中的所述第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;
在播放所述视频的包括在所述第一时间发生的所述第一个体强调改变的所述部分之后,检测改变在所述视频中与所述第一时间不同的第二时间的个体强调的请求;以及
响应于检测到改变在所述视频中的所述第二时间的个体强调的所述请求:
改变在所述视频中的所述第二时间之后的第二时间段期间的所述个体强调;以及
改变在所述第一时间发生的所述第一个体强调改变,所述第一个体强调改变包括改变在所述视频中的所述第一时间之后的所述第一时间段期间的所述相应个体相对于所述一个或多个元素的所述强调。
179.一种被配置为与显示生成部件和一个或多个输入设备通信的计算机系统,包括:
用于经由所述显示生成部件播放视频的一部分的装置,所述部分包括在第一时间发生的第一个体强调改变,其中所述第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在所述视频中的所述第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;
在播放所述视频的包括在所述第一时间发生的所述第一个体强调改变的所述部分之后,用于检测改变在所述视频中与所述第一时间不同的第二时间的个体强调的请求的装置;以及
响应于检测到改变在所述视频中的所述第二时间的个体强调的所述请求,用于以下操作的装置:
改变在所述视频中的所述第二时间之后的第二时间段期间的所述个体强调;以及
改变在所述第一时间发生的所述第一个体强调改变,所述第一个体强调改变包括改变在所述视频中的所述第一时间之后的所述第一时间段期间的所述相应个体相对于所述一个或多个元素的所述强调。
180.一种计算机程序产品,包括被配置为由与显示生成部件通信的计算机系统的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
经由所述显示生成部件播放视频的一部分,所述部分包括在第一时间发生的第一个体强调改变,其中所述第一个体强调改变包括由一个或多个相机捕获的视觉信息的外观改变,以在所述视频中的所述第一时间之后的第一时间段期间相对于一个或多个元素强调相应个体;
在播放所述视频的包括在所述第一时间发生的所述第一个体强调改变的所述部分之后,检测改变在所述视频中与所述第一时间不同的第二时间的个体强调的请求;以及
响应于检测到改变在所述视频中的所述第二时间的个体强调的所述请求:
改变在所述视频中的所述第二时间之后的第二时间段期间的所述个体强调;以及
改变在所述第一时间发生的所述第一个体强调改变,所述第一个体强调改变包括改变在所述视频中的所述第一时间之后的所述第一时间段期间的所述相应个体相对于所述一个或多个元素的所述强调。
CN202280002476.1A 2021-04-30 2022-04-15 用于更改视觉媒体的用户界面 Pending CN115552886A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202211073034.4A CN115474003A (zh) 2021-04-30 2022-04-15 用于更改视觉媒体的用户界面
CN202211072261.5A CN115529415A (zh) 2021-04-30 2022-04-15 用于更改视觉媒体的用户界面
CN202211072958.2A CN115474002A (zh) 2021-04-30 2022-04-15 用于更改视觉媒体的用户界面

Applications Claiming Priority (17)

Application Number Priority Date Filing Date Title
US202163182751P 2021-04-30 2021-04-30
US63/182,751 2021-04-30
US202163197460P 2021-06-06 2021-06-06
US63/197,460 2021-06-06
US202163243724P 2021-09-13 2021-09-13
US63/243,724 2021-09-13
US202163244213P 2021-09-14 2021-09-14
US63/244,213 2021-09-14
US17/483,684 2021-09-23
US17/483,684 US11539876B2 (en) 2021-04-30 2021-09-23 User interfaces for altering visual media
US17/484,307 US11350026B1 (en) 2021-04-30 2021-09-24 User interfaces for altering visual media
US17/484,321 2021-09-24
US17/484,279 2021-09-24
US17/484,321 US11416134B1 (en) 2021-04-30 2021-09-24 User interfaces for altering visual media
US17/484,279 US11418699B1 (en) 2021-04-30 2021-09-24 User interfaces for altering visual media
US17/484,307 2021-09-24
PCT/US2022/024964 WO2022231869A1 (en) 2021-04-30 2022-04-15 User interfaces for altering visual media

Related Child Applications (3)

Application Number Title Priority Date Filing Date
CN202211072958.2A Division CN115474002A (zh) 2021-04-30 2022-04-15 用于更改视觉媒体的用户界面
CN202211073034.4A Division CN115474003A (zh) 2021-04-30 2022-04-15 用于更改视觉媒体的用户界面
CN202211072261.5A Division CN115529415A (zh) 2021-04-30 2022-04-15 用于更改视觉媒体的用户界面

Publications (1)

Publication Number Publication Date
CN115552886A true CN115552886A (zh) 2022-12-30

Family

ID=83978916

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280002476.1A Pending CN115552886A (zh) 2021-04-30 2022-04-15 用于更改视觉媒体的用户界面

Country Status (5)

Country Link
EP (3) EP4109883A1 (zh)
JP (1) JP2024516519A (zh)
KR (1) KR20230151027A (zh)
CN (1) CN115552886A (zh)
WO (1) WO2022231869A1 (zh)

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
US6323846B1 (en) 1998-01-26 2001-11-27 University Of Delaware Method and apparatus for integrating manual input
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
JP5246275B2 (ja) * 2011-01-25 2013-07-24 株式会社ニコン 撮像装置およびプログラム
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
JP6244655B2 (ja) * 2013-05-16 2017-12-13 ソニー株式会社 画像処理装置および画像処理方法
US20140355960A1 (en) * 2013-05-31 2014-12-04 Microsoft Corporation Touch optimized design for video editing
KR102101740B1 (ko) * 2013-07-08 2020-04-20 엘지전자 주식회사 이동 단말기 및 이의 제어방법
KR102257620B1 (ko) * 2014-03-20 2021-05-28 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
US10091411B2 (en) * 2014-06-17 2018-10-02 Lg Electronics Inc. Mobile terminal and controlling method thereof for continuously tracking object included in video
CN110495125B (zh) 2017-03-24 2022-07-15 苹果公司 用于传输或接收下行链路控制信息的方法和装置
CN108712609A (zh) * 2018-05-17 2018-10-26 Oppo广东移动通信有限公司 对焦处理方法、装置、设备及存储介质
EP3787285B1 (en) * 2018-05-29 2023-04-12 Sony Group Corporation Image processing device, image processing method, and program
CN110932673A (zh) 2018-09-19 2020-03-27 恩智浦美国有限公司 一种包含并联陷波滤波器的斩波稳定放大器

Also Published As

Publication number Publication date
EP4109884A1 (en) 2022-12-28
JP2024516519A (ja) 2024-04-16
EP4101156A1 (en) 2022-12-14
KR20230151027A (ko) 2023-10-31
WO2022231869A8 (en) 2023-11-09
EP4109883A1 (en) 2022-12-28
WO2022231869A1 (en) 2022-11-03
WO2022231869A9 (en) 2023-09-28

Similar Documents

Publication Publication Date Title
US11350026B1 (en) User interfaces for altering visual media
EP3415985B1 (en) User interface for camera effects
CN116235507A (zh) 用于媒体捕获和管理的用户界面
US11778339B2 (en) User interfaces for altering visual media
CN110933355B (zh) 一种用于显示相机用户界面的方法、电子设备和存储介质
US20220382440A1 (en) User interfaces for managing media styles
CN112654956A (zh) 用于模拟深度效果的用户界面
CN115552363A (zh) 编辑头像的特征
WO2022165147A1 (en) User interfaces for wide angle video conference
EP4109884A1 (en) User interfaces for altering visual media
CN115474002A (zh) 用于更改视觉媒体的用户界面
US20240080543A1 (en) User interfaces for camera management
CN116886854A (zh) 用于广角视频会议的用户界面
WO2022256200A1 (en) User interfaces for managing media styles
CN117099094A (zh) 聚合内容项用户界面

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
CB03 Change of inventor or designer information

Inventor after: J - B - Manzhali

Inventor after: Moussaoui Saliha

Inventor after: A. Nimes

Inventor after: J. J. Paris Gao

Inventor after: P. T. Schneider

Inventor after: J. B. Shargam

Inventor after: W. A. sorenteno III

Inventor after: A. suzados Santos

Inventor after: P. J. Stanchik

Inventor after: H. W. Verkhoy

Inventor after: J A Blass, Kurt

Inventor after: G.R. Clark

Inventor after: S. Das Gupta

Inventor after: W. J. eagleston

Inventor after: M. B. Etienne

Inventor after: T. Jason

Inventor after: W. Loveblu

Inventor after: J.A. Maria

Inventor before: B.J. Manzali

Inventor before: Moussaoui Saliha

Inventor before: A. Nimes

Inventor before: J. J. Paris Gao

Inventor before: P. T. Schneider

Inventor before: J. B. Shargam

Inventor before: W. A. sorenteno III

Inventor before: A. suzados Santos

Inventor before: P. J. Stanchik

Inventor before: H. W. Verkhoy

Inventor before: J A Blass, Kurt

Inventor before: G.R. Clark

Inventor before: S. Das Gupta

Inventor before: W. J. eagleston

Inventor before: M. B. Etienne

Inventor before: T. Jason

Inventor before: W. Loveblu

Inventor before: J.A. Maria

CB03 Change of inventor or designer information