CN109644217B - 用于在多种模式下捕获和录制媒体的设备、方法和图形用户界面 - Google Patents

用于在多种模式下捕获和录制媒体的设备、方法和图形用户界面 Download PDF

Info

Publication number
CN109644217B
CN109644217B CN201780053139.4A CN201780053139A CN109644217B CN 109644217 B CN109644217 B CN 109644217B CN 201780053139 A CN201780053139 A CN 201780053139A CN 109644217 B CN109644217 B CN 109644217B
Authority
CN
China
Prior art keywords
image
media
camera
display
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780053139.4A
Other languages
English (en)
Other versions
CN109644217A (zh
Inventor
M·I·布朗
J·T·伯恩斯坦
W·D·林德梅尔
L·R·T·格灵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Priority to CN202111213035.XA priority Critical patent/CN113923301B/zh
Priority to CN202311182022.XA priority patent/CN117221439A/zh
Publication of CN109644217A publication Critical patent/CN109644217A/zh
Application granted granted Critical
Publication of CN109644217B publication Critical patent/CN109644217B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72463User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions to restrict the functionality of the device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21Intermediate information storage
    • H04N1/2104Intermediate information storage for one or a few pictures
    • H04N1/2112Intermediate information storage for one or a few pictures using still video cameras
    • H04N1/2137Intermediate information storage for one or a few pictures using still video cameras with temporary storage before final recording, e.g. in a frame buffer
    • H04N1/2141Intermediate information storage for one or a few pictures using still video cameras with temporary storage before final recording, e.g. in a frame buffer in a multi-frame buffer
    • H04N1/2145Intermediate information storage for one or a few pictures using still video cameras with temporary storage before final recording, e.g. in a frame buffer in a multi-frame buffer of a sequence of images for selection of a single frame before final recording, e.g. from a continuous sequence captured before and after shutter-release
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/9201Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving the multiplexing of an additional signal and the video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/0122Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal the input and the output signals having different aspect ratios
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/52Details of telephonic subscriber devices including functional features of a camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Graphics (AREA)
  • Environmental & Geological Engineering (AREA)
  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

一种设备显示相机用户界面,所述相机用户界面包括来自相机的实时视图。在显示来自所述相机的所述实时视图时:在继续显示来自所述相机的所述实时视图时,所述设备录制由所述相机捕获的媒体图像;并且所述设备还显示多个媒体图像的表示,所述媒体图像是在将来自所述相机的所述实时视图显示为在第一方向上在所述显示器上滚动的帧时录制的。

Description

用于在多种模式下捕获和录制媒体的设备、方法和图形用户 界面
技术领域
本发明整体涉及具有触敏表面和一个或多个相机的电子设备,包括但不限于具有触敏表面以及以多种模式捕获和录制图像的相机的电子设备。
背景技术
触敏表面作为计算机和其他电子计算设备的输入设备的使用在近年来显著增长。示例性触敏表面包括触摸板和触摸屏显示器。此类表面广泛地用于操纵显示器上的用户界面对象。
对于具有一个或多个相关联相机的电子设备,相机用户界面提供用于控制各种相机功能的示能表示,诸如选择图像录制模式(例如,照片、视频或全景录制模式),并选择何时抓拍或何时开始和结束视频录制。相机用户界面通常包括来自与电子设备相关联的相机的实时视图。来自相机的实时视图帮助用户查看相机正在捕获的图像,并决定是否应该录制这些图像并将它们保存为对应的媒体项。相机用户界面可以包括用于在来自不同相机的实时视图之间切换的示能表示。当用户希望查看使用相机用户界面录制的媒体项时,通常使用单独的媒体查看界面或应用程序。
用于控制相机功能和查看录制的媒体项的现行方法是麻烦且低效的。例如,使用输入序列来访问期望的图像录制功能或模式会导致不可接受的延迟并错过捕获和录制期望图像的机会。用户需要在很短的时间窗口内做出决定并执行所需的动作,而没有来自设备的足够信息和帮助,这给用户带来了过度的认知负担并增加了用户错误的机会。通常,使用相机用户界面执行一个功能(例如,拍摄静止照片)将阻止相机用户界面的另一功能的同时执行(例如,拍摄视频)。此外,这些方法花费比所需时间更长的时间,从而浪费能量。这后一考虑在电池驱动的设备中是特别重要的。
发明内容
因此,需要具有更快、更有效的方法和界面的电子设备,用于以多种模式捕获和录制图像。此类方法和界面任选地补充或替换用于以多种模式捕获和录制图像的传统方法。此类方法和界面减少了来自用户的输入的数量、程度、和/或性质,并且产生更有效的人机界面。对于电池驱动设备,此类方法和界面可节省用电并且增加两次电池充电之间的时间。
借助所公开的设备可减少或消除与具有触敏表面的电子设备的用户界面相关联的上述缺陷和其他问题。在一些实施方案中,该设备是台式计算机。在一些实施方案中,该设备是便携式的(例如,笔记本电脑、平板电脑或手持设备)。在一些实施方案中,该设备是个人电子设备(例如,可穿戴电子设备,诸如手表)。在一些实施方案中,该设备具有触控板。在一些实施方案中,该设备具有触敏显示器(也称为“触摸屏”或“触摸屏显示器”)。在一些实施方案中,该设备具有图形用户界面(GUI)、一个或多个处理器、存储器和一个或多个模块、被存储在存储器中以用于执行多个功能的程序或指令集。在一些实施方案中,用户主要通过触笔和/或手指接触以及触敏表面上的手势来与GUI进行交互。在一些实施方案中,这些功能任选地包括图像编辑、绘图、演示、文字处理、电子表格制作、玩游戏、接打电话、视频会议、收发电子邮件、即时消息通信、健身支持、数字摄影、数字视频录制、网页浏览、数字音乐播放、记笔记和/或数字视频播放。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。
根据一些实施方案,在具有一个或多个处理器、存储器、显示器和相机的电子设备处执行一种方法。该方法包括在显示器上显示相机用户界面,该相机用户界面包括来自相机的实时视图。在显示来自相机的实时视图时,该方法包括在继续显示来自相机的实时视图时,录制由相机捕获的媒体图像;以及显示多个媒体图像的表示,这些媒体图像是在将来自相机的实时视图显示为在第一方向上在显示器上滚动的帧时录制的。
根据一些实施方案,电子设备包括:显示单元,其被配置为显示用户界面并检测接触;相机单元,其被配置为捕获媒体;以及处理单元,其被耦接到显示单元和相机单元。在一些实施方案中,处理单元包括检测单元、录制单元、捕获单元、滚动单元、替换单元、改变单元和创建单元。处理单元被配置为:能够在显示单元上显示相机用户界面,相机用户界面包括来自相机单元的实时视图;在显示来自相机单元的实时视图时:在继续显示来自相机单元的实时视图时,录制由相机单元捕获的媒体图像;并且能够显示多个媒体图像的表示,媒体图像是在将来自相机单元的实时视图显示为在第一方向上在显示单元上滚动的帧时录制的。
根据一些实施方案,在具有一个或多个处理器、存储器、相机和显示器的电子设备处执行一种方法。该方法包括在显示器上显示相机用户界面,其中该相机用户界面包括来自相机的实时视图。在显示来自相机的实时视图时,该方法还包括检测第一接触的输入的开始,第一接触利用相机激活媒体录制。响应于检测第一接触的输入的开始,第一接触利用相机激活媒体录制,该方法还包括显示相机处于与单个图像的录制对应的第一媒体录制模式的第一指示。在显示相机处于第一媒体录制模式的第一指示时,该方法包括检测第一接触的输入继续。响应于检测第一接触的输入的继续,并且在检测输入的终止之前,该方法还包括:根据至少确定输入的继续满足第一预定义时间阈值:显示相机处于第二媒体录制模式的第二指示,该第二媒体录制模式对应于与第一接触的输入的继续同时录制的图像序列;在显示相机处于第二媒体录制模式的第二指示时,检测第一接触的输入的进一步继续;响应于检测第一接触的输入的进一步继续,并且在检测输入的终止之前:根据至少确定输入的进一步继续满足第二预定义时间阈值,显示相机处于对应于视频录制的第三媒体录制模式的第三指示。
根据一些实施方案,电子设备包括:显示单元,其被配置为显示用户界面;相机单元,其被配置为捕获媒体;以及处理单元,其被耦接到显示单元和相机单元。在一些实施方案中,处理单元包括检测单元、捕获单元、获取单元和存储单元。处理单元被配置为:能够在显示器上显示相机用户界面,相机用户界面包括来自相机单元的实时视图。在显示来自相机单元的实时视图时,处理单元被配置为检测第一接触的输入的开始,第一接触利用相机单元激活媒体录制。响应于检测第一接触的输入的开始,第一接触利用相机单元激活媒体录制,处理单元被配置为能够显示相机单元处于与单个图像的录制对应的第一媒体录制模式的第一指示。在显示相机单元处于第一媒体录制模式的第一指示时,处理单元被配置为检测第一接触的输入的继续。响应于检测第一接触的输入的继续,并且在检测输入的终止之前,处理单元被配置为:根据至少确定输入的继续满足第一预定义时间阈值:能够显示相机单元处于第二媒体录制模式的第二指示,该第二媒体录制模式对应于与第一接触的输入的继续同时录制的图像序列;在显示相机单元处于第二媒体录制模式的第二指示时,检测第一接触的输入的进一步继续;响应于检测第一接触的输入的进一步继续,并且在检测输入的终止之前:根据至少确定输入的进一步继续满足第二预定义时间阈值,能够显示相机单元处于对应于视频录制的第三媒体录制模式的第三指示。
根据一些实施方案,在具有显示器、触敏表面和一个或多个相机的电子设备处执行一种方法。该方法包括在相机用户界面的第一显示区域中显示来自电子设备的第一相机的第一实时视图。当在相机用户界面的第一显示区域中显示来自第一相机的第一实时视图时,该方法包括检测第一接触在触敏表面上的移动。响应于检测第一接触在触敏表面上的移动,该方法包括:根据第一接触的移动满足第一移动标准的确定:根据第一接触在触敏表面上的移动,在第一显示区域中移动第一实时视图;在第一显示区域中显示来自电子设备的第二相机的第二实时视图;以及根据第一接触在触敏表面上的移动,在第一显示区域中移动第二实时视图。
根据一些实施方案,电子设备包括:显示单元,其被配置为显示用户界面;触敏表面单元,其被配置为检测接触;一个或多个相机单元(包括第一相机单元和第二相机单元),其被配置为捕获媒体;处理单元,其耦接到显示单元、触敏表面单元和相机单元。在一些实施方案中,处理单元包括检测单元、移动单元、旋转单元、滑动单元、录制单元、改变单元、切换单元和调整单元。处理单元被配置为:能够在相机用户界面的第一显示区域中显示来自电子设备的第一相机单元的第一实时视图。当在相机用户界面的第一显示区域中显示来自第一相机单元的第一实时视图时,处理单元被配置为检测第一接触在触敏表面单元上的移动。响应于检测第一接触在触敏表面单元上的移动,处理单元被配置为:根据第一接触的移动满足第一移动标准的确定:根据第一接触在触敏表面单元上的移动,在第一显示区域中移动第一实时视图;能够在第一显示区域中显示来自电子设备的第二相机单元的第二实时视图;以及根据第一接触在触敏表面单元上的移动,在第一显示区域中移动第二实时视图。
根据一些实施方案,在具有显示器和一个或多个相机的电子设备上执行一种方法。该方法包括:显示以多种媒体录制模式录制媒体图像的相机用户界面。在显示相机用户界面时,该方法包括利用相机中的一个或多个捕获媒体。响应于捕获媒体,该方法包括:根据捕获的媒体与多个媒体录制模式的第一媒体录制模式一致的确定,在相机用户界面中显示第一提示,以提示用户采取与第一媒体录制模式相关联的一个或多个动作;并且根据捕获的媒体与多个媒体录制模式的第二媒体录制模式一致的确定,在相机用户界面中显示第二提示,以提示用户采取与第二媒体录制模式相关联的一个或多个动作,其中第一媒体录制模式与第二媒体录制模式不同。
根据一些实施方案,电子设备包括:显示单元,其被配置为显示用户界面;一个或多个相机单元,其被配置为捕获媒体;以及处理单元,其被耦接到显示单元和一个或多个相机单元。在一些实施方案中,处理单元包括捕获单元、移位单元、确认单元、确定单元、播放单元、指定单元、识别单元、存储单元、检测单元、注释单元、接收单元、生成单元、提取单元、移动单元和扩展单元。处理单元被配置为:能够显示以多种媒体录制模式录制媒体图像的相机用户界面。在显示相机用户界面时,处理单元被配置为利用一个或多个相机单元捕获媒体。响应于捕获媒体,处理单元被配置为:根据捕获的媒体与多个媒体录制模式的第一媒体录制模式一致的确定,能够在相机用户界面中显示第一提示,以提示用户采取与第一媒体录制模式相关联的一个或多个动作;并且根据捕获的媒体与多个媒体录制模式的第二媒体录制模式一致的确定,能够在相机用户界面中显示第二提示,以提示用户采取与第二媒体录制模式相关联的一个或多个动作,其中第一媒体录制模式与第二媒体录制模式不同。
根据一些实施例,在具有显示器的电子设备处执行一种方法。该方法包括:在显示器上显示第一用户界面,用于呈现具有多个识别的静止图像的媒体内容序列,其中第一用户界面包括:来自媒体内容序列的第一静止图像的表示;与媒体内容序列对应的时间线;以及多个图像调整对象,其中:第一图像调整对象在时间线上具有第一位置;并且第二图像调整对象在时间线上具有与第一位置不同的第二位置。在显示第一静止图像的表示时,该方法包括接收在时间线中移动多个图像调整对象的相应图像调整对象的请求。响应于接收在时间线中移动相应图像调整对象的请求,该方法还包括:根据相应的图像调整对象是第一图像调整对象的确定,根据该请求将时间线中的第一图像调整对象移动到第一经更新位置,并且更新第一静止图像的表示,以对应于时间线上的第一图像调整对象的第一经更新位置;并且根据相应的图像调整对象是第二图像调整对象的确定,根据该请求将沿时间线的第二图像调整对象移动到第二经更新位置,并且更新第二静止图像的表示,以对应于时间线上的第二图像调整对象的第二经更新位置。
根据一些实施方案,电子设备包括:显示单元,其被配置为显示用户界面;以及处理单元,其被耦接到显示单元。在一些实施方案中,处理单元包括接收单元、移动单元、替换单元、更新单元、录制单元、识别单元、调整单元、检测单元、保持单元和捕获单元。处理单元被配置为:能够在显示单元上显示第一用户界面,用于呈现具有多个识别的静止图像的媒体内容序列,其中第一用户界面包括:来自媒体内容序列的第一静止图像的表示;与媒体内容序列对应的时间线;以及多个图像调整对象,其中:第一图像调整对象在时间线上具有第一位置;并且第二图像调整对象在时间线上具有与第一位置不同的第二位置。在显示第一静止图像的表示时,处理单元被配置为接收在时间线中移动多个图像调整对象的相应图像调整对象的请求。响应于接收在时间线中移动相应图像调整对象的请求,处理单元被配置为:根据相应的图像调整对象是第一图像调整对象的确定,根据该请求将时间线中的第一图像调整对象移动到第一经更新位置,并且更新第一静止图像的表示,以对应于时间线上的第一图像调整对象的第一经更新位置;并且根据相应的图像调整对象是第二图像调整对象的确定,根据该请求将沿时间线的第二图像调整对象移动到第二经更新位置,并且更新第二静止图像的表示,以对应于时间线上的第二图像调整对象的第二经更新位置。
根据一些实施例,电子设备包括显示器、触敏表面、存储器、一个或多个处理器、一个或多个程序以及用于检测与触敏表面的接触强度的任选地一个或多个传感器;一个或多个程序被存储在存储器中并且被配置为由一个或多个处理器执行,并且一个或多个程序包括用于执行或导致执行任何本文所述的方法的操作的指令。根据一些实施方案,计算机可读存储介质在其中存储有指令,所述指令当由具有显示器、触敏表面和用于检测与触敏表面的接触强度的任选地一个或多个传感器的电子设备执行时,使得该设备执行本文所述的任何方法的操作或使得本文所述任何方法的操作被执行。根据一些实施方案,具有显示器、触敏表面、用于检测与触敏表面的接触强度的任选地一个或多个传感器、存储器以及执行存储于存储器中的一个或多个程序的一个或多个处理器的电子设备上的图形用户界面包括在本文所述任何方法中所显示的一个或多个元件,该一个或多个元件响应于输入进行更新,如本文所述的任何方法中所描述的。根据一些实施例,一种电子设备包括:显示器、触敏表面、和用于检测与触敏表面的接触强度的任选的一个或多个传感器;以及用于执行或导致执行本文所述方法中的任一方法的操作的装置。根据一些实施方案,用于具有显示器和触敏表面以及用于检测与触敏表面的接触强度的任选地一个或多个传感器的电子设备中的信息处理设备包括用于执行本文所述的任何方法的操作或使得本文所述的任何方法的操作被执行的装置。
因此,为具有显示器、触敏表面和用于检测与触敏表面的接触强度的任选一个或多个传感器的电子设备提供更快速更有效的方法和界面,以多种模式捕获和录制图像,从而提高此类设备的效能、效率和用户满意度。此类方法和界面可补充或替换用于以多种模式捕获和录制图像的传统方法。
附图说明
为了更好地理解各种所述实施方案,应结合以下附图参考下面的具体实施方式,其中类似的附图标号在所有附图中指示对应的部分。
图1A是示出根据一些实施方案的具有触敏显示器的便携式多功能设备的框图。
图1B是示出根据一些实施方案的用于事件处理的示例性部件的框图。
图2示出了根据一些实施方案的具有触摸屏的便携式多功能设备。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施方案的便携式多功能设备上的应用程序菜单的示例性用户界面。
图4B示出了根据一些实施方案用于具有与显示器分开的触敏表面的多功能设备的示例用户界面。
图5A至图5AG示出了根据一些实施方案的用于同时捕获和编辑数字媒体的示例用户界面。
图6A至图6S示出了根据一些实施方案的用于在不同成像模式下捕获数字媒体的示例用户界面。
图7A至图7R示出了根据一些实施方案的用于自动检测和提示关于图像录制模式的用户动作的示例用户界面。
图8A至图8AC示出了根据一些实施方案的用于在图像捕获期间在相机实时视图之间切换的示例用户界面。
图9A至图9S示出了根据一些实施方案的用于从视频录制调整所选图像和视频剪辑的示例用户界面。
图10A至图10E是示出根据一些实施方案的同时捕获和编辑数字媒体的方法的流程图。
图11是根据一些实施方案的电子设备的功能框图。
图12A至图12D是示出根据一些实施方案的在不同成像模式下捕获数字媒体的方法的流程图。
图13是根据一些实施方案的电子设备的功能框图。
图14A至图14F是示出根据一些实施方案的在图像捕获期间在相机实时视图之间切换的方法的流程图。
图15是根据一些实施方案的电子设备的功能框图。
图16A至图16H是示出根据一些实施方案的自动检测和提示关于图像录制模式的用户动作的方法的流程图。
图17是根据一些实施方案的电子设备的功能框图。
图18A至图18D是示出根据一些实施方案的从视频录制调整所选择图像和视频剪辑的方法的流程图。
图19是根据一些实施方案的电子设备的功能框图。
具体实施方式
本发明提供了相机用户界面,其包括来自相机的实时视图。当开始媒体捕获时,由相机捕获的图像与实时视图同时显示为在显示器上滚动的帧,例如,形成实时帧流。帧流向用户提供关于刚刚捕获的图像的反馈。用户可以与帧流中表示的图像交互,以将图像标记为将在不同媒体录制模式下持久存储的媒体项,以查看媒体项,并且以其他方式操纵图像(例如,删除模糊图像),而不中断正在进行的媒体捕获和/或录制。
当检测到指向相机用户界面中的实时视图的输入时,输入的持续时间用于确定将激活哪种媒体录制模式以及在输入结束时将录制什么类型的媒体项。无需用户的特定指令或其他输入,设备会自动从一种录制模式切换到下一种录制模式,从而使录制体验更加简化和有效。
当设备具有多个相关联的相机时,响应于来自相机中的一个或多个处的显示实时视图的实时视图显示对象上的接触的移动,执行来自多个相机的实时视图之间的切换。实时视图显示对象上的接触的移动会导致对当前显示的实时视图的纵横比进行调整。在一些实施方案中,在不中断正在进行的媒体捕获和/或录制的情况下,在不同相机的实时视图之间执行切换,并调整当前显示的实时视图的纵横比。
电子设备自动提示用户与基于设备移动的分析和由相机捕获的图像检测到的一个或多个图像录制模式相关联的动作。由相机捕获的图像被自动处理并被布置成一个或多个媒体摘要,其中媒体项以不同的图像录制模式录制,其中一些是由设备基于设备移动的分析和捕获图像的图像特征自动生成的,无需用户干预。
当协助用户为媒体内容序列选择代表性静止图像时,用户界面在网格视图与时间线视图之间切换,在时间线视图中,沿时间线移动媒体调整对象(例如,图像调整对象和视频调整对象),以更新被选定以表示媒体内容序列的静止图像。时间线视图为用户提供直观且有效的方式来擦除大量内容,以识别合适的静止图像来表示内容序列,并且网格视图提供当前识别的静止图像的直接完整概览。
下面,图1A至图1B、图2和图3提供对示例设备的描述。图4A至图4B示出了根据一些实施方案的便携式多功能设备上的示例用户界面。图5A至图5AG、图6A至图6S、图7A至图7R、图8A至图8AC和图9A至图9S示出了根据一些实施方案的用于捕获、录制和查看图像的示例用户界面。图10A至图10E是示出根据一些实施方案的同时捕获和编辑数字媒体的方法的流程图。图12A至图12D是示出根据一些实施方案的在不同成像模式下捕获数字媒体的方法的流程图。图14A至图14F是示出根据一些实施方案的在图像捕获期间在相机实时视图之间切换的方法的流程图。图16A至图16H是示出根据一些实施方案的自动检测和提示关于图像录制模式的用户动作的方法的流程图。图18A至图18D是示出根据一些实施方案的从视频剪辑调整所选择图像和视频的方法的流程图。图5A至图5AG、图6A至图6S、图7A至图7R、图8A至图8AC和图9A至图9S中的用户界面用于示出图10A至图10E、图12A至图12D、图14A至图14F、图16A至图16H和18A至18D中的过程。图11、图13、图15、图17和图19是执行图10A至图10E、图12A至图12D、图14A至图14F、图16A至图16H和图18A至图18D中描述的方法的电子设备的功能框图。
示例性设备
现在将详细地参考实施方案,这些实施方案的示例在附图中示出。下面的详细描述中示出许多具体细节,以便提供对各种所描述的实施方案的充分理解。但是,对本领域的普通技术人员将显而易见的是,各种所描述的实施方案可以在没有这些具体细节的情况下被实践。在其他情况下,没有详细地描述众所周知的方法、过程、部件、电路和网络,从而不会不必要地使实施方案的各个方面晦涩难懂。
还将理解的是,虽然在一些情况下,术语“第一”、“第二”等在本文中用于描述各种元件,但是这些元件不应受到这些术语限制。这些术语只是用于将一个元件与另一元件区分开。例如,第一接触可被命名为第二接触,并且类似地,第二接触可被命名为第一接触,而不脱离各种所描述的实施方案的范围。第一接触和第二接触均为接触,但它们不是同一个接触,除非上下文另外明确指示。
在本文中对各种所述实施方案的描述中所使用的术语只是为了描述特定实施方案的目的,而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样,单数形式“一个”和“该”旨在也包括复数形式,除非上下文另外明确地指示。还将理解的是,本文中所使用的术语“和/或”是指并且涵盖相关联的所列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”(“includes”、“including”、“comprises”和/或“comprising”)在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
如本文中所使用,根据上下文,术语“如果”任选地被解释为意思是“当……时”(“when”或“upon”)或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为是指“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关过程的实施方案。在一些实施方案中,该设备为还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自AppleInc.(Cupertino,California)的
Figure BDA0001980604550000111
iPod
Figure BDA0001980604550000112
Figure BDA0001980604550000113
设备。任选地使用其他便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型电脑或平板电脑。还应当理解的是,在一些实施方案中,该设备并非便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触摸板)的台式计算机。
在下面的讨论中,描述了一种包括显示器和触敏表面的电子设备。然而,应当理解,该电子设备任选地包括一个或多个其他物理用户接口设备,诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用,诸如以下应用中的一个或多个应用:记笔记应用、绘图应用、演示应用、文字处理应用、网站创建应用、盘编辑应用、电子表格应用、游戏应用、电话应用、视频会议应用、电子邮件应用、即时消息应用、健身支持应用、照片管理应用、数字相机应用、数字摄像机应用、Web浏览应用、数字音乐播放器应用序、和/或数字视频播放器应用。
在设备上执行的各种应用程序任选地使用至少一个通用的物理用户界面设备,诸如触敏表面。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地对于不同应用程序被调整和/或变化,和/或在相应应用程序内被调整和/或变化。这样,设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在将注意力转到具有触敏显示器的便携式设备的实施方案。图1A是示出根据一些实施方案的具有触敏显示器系统112的便携式多功能设备100的框图。触敏显示器系统112有时为了方便而被叫做“触摸屏”,并且有时被简称为触敏显示器。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入、或控制设备116吗、和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100(例如,触敏表面,诸如设备100的触敏显示器系统112)上的接触的强度的一个或多个强度传感器165。设备100任选地包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如,在触敏表面诸如设备100的触敏显示器系统112或设备300的触摸板355上生成触觉输出)。这些部件任选地通过一个或多个通信总线或信号线103进行通信。
如本说明书和权利要求书中所使用的,术语“触觉输出”是将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户手部的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解释为触感,该触感对应于设备或设备的部件的物理特征的所感知的变化。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如,即使在触敏表面的光滑度无变化时,触敏表面的移动也会任选地由用户解释或感测为触敏表面的“粗糙度”。虽然用户对触摸的此类解释将受到用户的个体化感官知觉的限制,但是对触摸的许多感官知觉是大多数用户共有的。因此,当触觉输出被描述为对应于用户的特定感官知觉(例如,“按下点击”、“松开点击”、“粗糙度”)时,除非另外陈述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移将会生成典型(或普通)用户的所述感官知觉。
应当理解,设备100仅仅是便携式多功能设备的一个示例,并且设备100任选地具有比所示出的部件更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件在硬件、软件、固件、或它们的任何组合(包括一个或多个信号处理电路和/或专用集成电路)中实施。
存储器102任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。设备100的其他部件(诸如一个或多个CPU 120和外围设备接口118)对存储器102的访问任选地由存储器控制器122来控制。
外围设备接口118可被用于将设备的输入外围设备和输出外围设备耦接到存储器102和一个或多个CPU 120。所述一个或多个处理器120运行或执行存储器102中所存储的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。
在一些实施方案中,外围设备接口118、一个或多个CPU 120、和存储器控制器122任选地在单个芯片诸如芯片104上实现。在一些其他实施方案中,它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被称作电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络和其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信来与网络和其他设备进行通信,这些网络为诸如互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如,蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。该无线通信任选地使用多种通信标准、协议、和技术中的任一者,包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE 802.11ac、IEEE 802.11ax、IEEE 802.11b、IEEE 802.11g和/或IEEE802.11n)、互联网协议语音技术(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS)、和/或短消息服务(SMS))、或者包括在本文档提交日期还未开发出的通信协议的其他任何适当的通信协议。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人类可听到的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据,并且将音频数据传输到外围设备接口118以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中,音频电路110还包括耳麦插孔(例如,图2中的212)。耳麦插孔提供音频电路110和可移除的音频输入/输出外围设备之间的接口,该可移除的音频输入/输出外围设备诸如仅输出的耳机或者具有输出(例如,单耳耳机或双耳耳机)和输入(例如,麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触敏显示器系统112和其他输入或控制设备116与外围设备接口118耦接。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161、和用于其他输入或控制设备的一个或多个输入控制器160。所述一个或多个输入控制器160从其他输入或控制设备116接收电信号/将电信号发送到所述其他输入或控制设备。其他输入控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮等。在一些另选的实施方案中,一个或多个输入控制器160任选地耦接至以下各项中的任一者(或不耦接至以下各项中的任一者):键盘、红外线端口、USB端口、触笔、和/或指针设备诸如鼠标。一个或多个按钮(例如,图2中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的向上/向下按钮。一个或多个按钮任选地包括下压按钮(例如,图2中的206)。
触敏显示器系统112提供设备与用户之间的输入接口和输出接口。显示控制器156从触敏显示器系统112接收电信号和/或将电信号发送至触敏显示器系统112。触敏显示器系统112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频以及它们的任何组合(统称为“图形”)。在一些实施方案中,一些视觉输出或全部的视觉输出对应于用户界面对象。如本文所使用,术语“示能表示”是用户交互式图形用户界面对象(例如,被配置为对指向图形用户界面对象的输入做出响应的图形用户界面对象)。用户交互式图形用户界面对象的示例包括但不限于按钮、滑块、图标、可选择菜单项、开关、超链接、或其他用户界面控件。
触敏显示器系统112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器、或传感器组。触敏显示器系统112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触敏显示器系统112上的接触(和该接触的任何移动或中断),并且将检测到的接触转换为与被显示在触敏显示器系统112上的用户界面对象(例如,一个或多个软按键、图标、网页或图像)的交互。在一个示例性实施方案中,触敏显示器系统112和用户之间的接触点对应于用户的手指或触笔。
触敏显示器系统112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术,但是在其他实施方案中使用其他显示技术。触敏显示系统112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触敏显示系统112接触的一个或多个点的其他元件来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在一个示例性实施方案中,使用投射式互电容感测技术,诸如从Apple Inc.(Cupertino,California)的
Figure BDA0001980604550000151
iPod
Figure BDA0001980604550000152
Figure BDA0001980604550000153
中发现的技术。
触敏显示器系统112任选地具有超过100dpi的视频分辨率。在一些实施方案中,触摸屏视频分辨率超过400dpi(例如,为500dpi、800dpi或更大)。用户任选地使用任何合适的物体或附加物诸如触笔、手指等来与触敏显示系统112接触。在一些实施方案中,将用户界面设计成与基于手指的接触和手势一起工作,由于手指在触摸屏上的接触区域较大,因此这可能不如基于触笔的输入精确。在一些实施方案中,设备将基于手指的粗略输入转化为精确的指针/光标位置或命令以用于执行用户所期望的动作。
在一些实施方案中,除了触摸屏之外,设备100任选地包括用于激活或去激活特定功能的触控板(未示出)。在一些实施方案中,触控板是设备的触敏区域,与触摸屏不同,该触敏区域不显示视觉输出。触摸板任选地是与触敏显示器系统112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电源状态指示符(例如,发光二极管(LED))以及与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出与I/O子系统106中的光学传感器控制器158耦接的光学传感器。一个或多个光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。一个或多个光学传感器164从环境接收通过一个或多个透镜而投射的光,并且将光转换为表示图像的数据。结合成像模块143(也被叫做相机模块),一个或多个光学传感器164任选地捕获静态图像和/或视频。在一些实施方案中,光学传感器位于设备100的与设备前部上的触敏显示系统112相背对的后部上,使得触摸屏能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中,另一光学传感器位于设备的前部上,从而获取该用户的图像(例如,用于自拍、用于在用户在触摸屏上观看其他视频会议参与者时进行视频会议等等)。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了与I/O子系统106中的强度传感器控制器159耦接的接触强度传感器。一个或多个接触强度传感器165任选地包括一个或多个压阻应变仪、电容式力传感器、电气式力传感器、压电力传感器、光学力传感器、电容式触敏表面、或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。一个或多个接触强度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施方案中,至少一个接触强度传感器与触敏表面(例如,触敏显示器系统112)并置排列或邻近。在一些实施方案中,至少一个接触强度传感器位于设备100的与位于设备100的前部上的触敏显示系统112相背对的后部上。
设备100任选地还包括一个或多个接近传感器166。图1A示出了与外围设备接口118耦接的接近传感器166。另选地,接近传感器166与I/O子系统106中的输入控制器160耦接。在一些实施方案中,当多功能设备被置于用户耳朵附近时(例如,用户正在打电话时),接近传感器关闭并禁用触敏显示器系统112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了与I/O子系统106中的触觉反馈控制器161耦接的触觉输出发生器。触觉输出发生器167任选地包括一个或多个电声设备,诸如扬声器或其他音频部件,和/或将能量转换成线性运动的机电设备,诸如马达、螺线管、电活性聚合器、压电致动器、静电致动器或其他触觉输出生成部件(例如,将电信号转换成设备上的触觉输出的部件)。触觉输出发生器167从触觉反馈模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,触敏显示器系统112)并置排列或邻近,并且任选地通过竖直地(例如,向设备100的表面内/外)或侧向地(例如,在与设备100的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。在一些实施方案中,至少一个触觉输出发生器传感器位于设备100的与位于设备100的前部上的触敏显示系统112相背对的后部上。
设备100任选地还包括一个或多个加速度计168。图1A示出与外围设备接口118耦接的加速度计168。另选地,加速度计168任选地与I/O子系统106中的输入控制器160耦接。在一些实施方案中,基于对从该一个或多个加速度计所接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图来显示信息。设备100任选地除了加速度计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系统)接收器(未示出),以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息。
在一些实施方案中,存储于存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、触觉反馈模块(或指令集)133、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135、以及应用程序(或指令集)136。此外,在一些实施方案中,存储器102存储设备/全局内部状态157,如图在1A和图3中所示的。设备/全局内部状态157包括以下中的一者或多者:活动应用程序状态,其指示哪些应用程序(如果有的话)当前是活动的;显示状态,其指示什么应用程序、视图或其它信息占据触敏显示器系统112的各个区域;传感器状态,包括从设备的各个传感器和其他输入或控制设备116获得的信息;以及关于设备的位置和/或姿态的位置和/或方位信息。
操作系统126(例如,iOS、Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电源管理等)的各种软件组件和/或驱动器,并且有利于各种硬件和软件组件之间的通信。
通信模块128促进通过一个或多个外部端口124来与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件部件。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备或间接地经由网络(例如,互联网、无线LAN等)耦接。在一些实施方案中,外部端口是与Apple Inc.(Cupertino,California)的一些
Figure BDA0001980604550000181
iPod
Figure BDA0001980604550000182
和iPod设备中所使用的30针连接器相同或类似和/或兼容的多针(例如,30针)连接器。在一些实施方案中,外部端口是与Apple Inc.(Cupertino,California)的一些
Figure BDA0001980604550000184
iPod
Figure BDA0001980604550000183
和iPod设备中所使用的Lightning连接器相同或类似和/或兼容的Lightning连接器。
接触/运动模块130任选地检测与触敏显示器系统112(结合显示控制器156)和其他触敏设备(例如,触摸板或物理点击轮)的接触。接触/运动模块130包括各种软件部件以用于执行与(例如通过手指或触笔)接触检测相关的各种操作,诸如确定是否已发生接触(例如,检测手指按下事件)、确定接触的强度(例如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪跨触敏表面的移动(例如,检测一个或多个手指拖动事件),以及确定接触是否已停止(例如,检测手指抬离事件或者接触断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变),所述接触点的移动由一系列接触数据表示。这些操作任选地被应用于单点接触(例如,单指接触或触笔接触)或者多点同时接触(例如,“多点触摸”/多指接触)。在一些实施方案中,接触/运动模块130和显示控制器156检测触摸板上的接触。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触模式(例如,所检测到的接触的不同运动、计时和/或强度)。因此,任选地通过检测特定接触模式来检测手势。例如,检测单指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。又如,检测触敏表面上的手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且随后检测手指抬起(抬离)事件。类似地,通过检测触笔的特定接触图案来任选地检测触笔的轻击、轻扫、拖动和其他手势。
在一些实施方案中,检测手指轻击手势取决于检测手指按下事件与手指抬起事件之间的时间长度,但是与检测手指按下事件与手指抬起事件之间的手指接触强度无关。在一些实施方案中,根据确定手指按下事件与手指抬起事件之间的时间长度小于预先确定的值(例如,小于0.1、0.2、0.3、0.4或0.5秒),检测轻击手势,而不管轻击期间手指接触的强度是否达到给定的强度阈值(大于标称接触检测强度阈值),例如轻按压或深按压强度阈值。因此,手指轻击手势可以满足特定输入标准,该特定输入标准不要求接触的特征强度满足给定强度阈值以满足特定输入标准。为清楚起见,轻击手势中的手指接触通常需要满足标称接触检测强度阈值以检测到手指按下事件,低于该标称接触检测强度阈值时,不会检测到接触。类似的分析适用于通过触笔或其他接触检测轻击手势。在设备能够检测在触敏表面上方悬停的手指或触笔接触的情况下,标称接触检测强度阈值任选地不与手指或触笔与触敏表面之间的物理接触对应。
同样的概念以类似方式适用于其他类型的手势。例如,可基于满足与手势中包括的接触的强度无关或者不要求执行手势的一个或多个接触达到强度阈值以便被识别的标准来任选地检测轻扫手势、捏合手势、展开手势和/或长按压手势。例如,轻扫手势基于一个或多个接触的移动的量来检测;缩放手势基于两个或更多个接触朝彼此的移动来检测;扩放手势基于两个或更多个接触背离彼此的移动来检测;长按压手势基于触敏表面上具有少于阈值移动量的接触的持续时间来检测。因此,关于特定手势识别标准不要求接触强度满足相应的强度阈值以满足特定手势识别标准的陈述意味着特定手势识别标准能够在手势中的接触未达到相应的强度阈值时被满足,并且还能够在手势中的一个或多个接触达到或超过相应的强度阈值的情况下被满足。在一些实施方案中,基于确定在预定义时间段内检测到手指按下事件和手指抬起事件来检测轻击手势,而不考虑在预定义时间段期间接触是高于还是低于相应的强度阈值,并且基于确定接触移动大于预定义量值来检测轻扫手势,即使在接触移动结束时接触高于相应的强度阈值也是如此。即使在对手势的检测受到执行手势的接触的强度的影响的具体实施中(例如,当接触的强度高于强度阈值时,设备更快地检测到长按压,或者当接触的强度更高时,设备会延迟对轻击输入的检测),只要在接触未达到特定强度阈值的情况下可以满足识别手势的标准,则对这些手势的检测也不会要求接触达到特定强度阈值(例如,即使识别手势所需的时间量发生变化)。
在某些情况下,接触强度阈值、持续时间阈值和移动阈值以各种不同组合进行组合,以便创建启发式算法来区分针对相同输入元素或区域的两个或更多个不同手势,使得与相同输入元素的多个不同交互能够提供更丰富的用户交互和响应的集合。关于一组特定手势识别标准不要求接触的强度满足相应的强度阈值以满足特定手势识别标准的陈述不排除对其他强度相关手势识别标准进行同时评估,以识别具有当手势包括具有高于相应强度阈值的强度的接触时被满足的标准的其他手势。例如,在某些情况下,第一手势的第一手势识别标准(其不要求接触的强度满足相应的强度阈值以满足第一手势识别标准)与第二手势的第二手势识别标准(其取决于达到相应强度阈值的接触)竞争。在此类竞争中,如果第二手势的第二手势识别标准首先得到满足,则手势任选地不被识别为满足第一手势的第一手势识别标准。例如,如果在接触移动预定义的移动量之前接触达到相应的强度阈值,则检测到深按压手势而不是轻扫手势。相反,如果在接触达到相应的强度阈值之前接触移动预定义的移动量,则检测到轻扫手势而不是深按压手势。即使在此类情况下,第一手势的第一手势识别标准仍然不要求接触的强度满足相应的强度阈值以满足第一手势识别标准,因为如果接触保持低于相应的强度阈值直到手势结束(例如,具有不会增大到高于相应强度阈值的强度的接触的轻扫手势),手势将被第一手势识别标准识别为轻扫手势。因此,不要求接触的强度满足相应的强度阈值以满足特定手势识别标准的特定手势识别标准将会(A)在某些情况下,忽略相对于强度阈值的接触强度(例如,对于轻击手势而言)和/或(B)在某些情况下,如果在特定手势识别标准识别与输入对应的手势之前,一组竞争的强度相关手势识别标准(例如,对于深按压手势而言)将输入识别为与强度相关手势对应,则不能满足特定手势识别标准(例如,对于长按压手势而言),从这个意义上来讲,仍然取决于相对于强度阈值的接触强度(例如,对于与深按压手势竞争识别的长按压手势而言)。
图形模块132包括用于在触敏显示器系统112或其他显示器上渲染和显示图形的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等。
在一些实施方案中,图形模块132存储表示待使用的图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收用于指定待显示的图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其他图形属性数据,并且然后生成屏幕图像数据,以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件部件,该指令由触觉输出发生器167使用,以便响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如,联系人137、-电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置并提供这种信息以在各种应用程序中使用(例如,提供至用于基于位置的拨号的电话138;提供至相机143作为图片/视频元数据;以及提供至提供基于位置的服务诸如天气桌面小程序、当地黄页桌面小程序和地图/导航桌面小程序的应用程序)。
应用程序136任选地包括以下模块(或指令集)或者其子集或超集:
·联系人模块137(有时称为通讯录或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健身支持模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·浏览器模块147;
·日历模块148;
·桌面小程序模块149,其任选地包括以下各项中的一者或多者:天气桌面小序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5、和由用户获得的其他桌面小程序、以及用户创建的桌面小程序149-6;
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150;
·搜索模块151;
·任选地由视频播放器模块和音乐播放器模块构成的视频和音乐播放器模块152;
·记事本模块153;
·地图模块154;和/或
·在线视频模块155。
任选地存储在存储器102中的其他应用程序136的示例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密、数字权益管理、语音识别和语音复制。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,联系人模块137包括可执行指令用于管理通讯录或联系人列表(例如,存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192中),包括:添加姓名到通讯录;从地址簿删除姓名;将电话号码、电子邮件地址、物理地址或其他信息与姓名关联;将图像与姓名关联;对姓名进行归类和分类;提供电话号码和/或电子邮件地址来发起和/或促进通过电话138、视频会议139、电子邮件140或即时消息141的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示器系统112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,电话模块138包括用于进行以下操作的可执行指令:输入与电话号码对应的字符序列、访问通讯录137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话、以及当会话完成时断开或挂断。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示系统112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包括根据用户指令来发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,即时消息模块141包括用于进行以下操作的可执行指令:输入与即时消息对应的字符序列、修改先前输入的字符、发送相应即时消息(例如,使用针对基于电话的即时消息的短消息服务(SMS)或多媒体消息服务(MMS)协议或者使用针对基于互联网的即时消息的XMPP、SIMPLE、Apple推送通知服务(APNs)或IMPS)、接收即时消息、以及查看所接收的即时消息。在一些实施方案中,所传输和/或接收的即时消息任选地包括图形、相片、音频文件、视频文件、和/或MMS和/或增强消息服务(EMS)中所支持的其他附接件。如本文所用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS发送的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE、APNs或IMPS发送的消息)两者。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块146,健身支持模块142包括可执行指令用于创建健身(例如,具有时间、距离和/或卡路里燃烧目标);与(体育设备和智能手表中的)健身传感器通信;接收健身传感器数据;校准用于监视健身的传感器;为健身选择和播放音乐;以及显示、存储和传输健身数据。
结合触敏显示器系统112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144,相机模块143包括用于进行以下操作的可执行指令:捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特征、和/或从存储器102删除静态图像或视频。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134、和相机模块143,图像管理模块144包括用于排列、修改(例如,编辑)、或以其他方式操控、加标签、删除、展示(例如,在数字幻灯片或相册中)、以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,浏览器模块147包括根据用户指令来浏览互联网(包括搜索、链接到、接收、和显示网页或其部分、以及链接到网页的附件和其他文件)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括用于根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序模块149是任选地由用户下载和使用的微型应用程序(例如,天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和词典桌面小程序149-5)、或由用户创建的微型应用程序(例如,用户创建的桌面小程序149-6)。在一些实施方案中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中,桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、和浏览器模块147,桌面小程序创建器模块150包括用于创建桌面小程序(例如,将网页的用户指定部分转到桌面小程序中)的可执行指令。
结合触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包括用于根据用户指令来搜索存储器102中的与一个或多个搜索条件(例如,一个或多个用户指定的搜索词)匹配的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触敏显示系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令,以及用于显示、呈现或以其他方式回放视频(例如,在触敏显示系统112上或在经由外部端口124无线连接的外部显示器上)的可执行指令。在一些实施方案中,设备100任选地包括MP3播放器诸如iPod(Apple Inc.的商标)的功能。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,记事本模块153包括用于根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154包括用于根据用户指令来接收、显示、修改和存储地图以及与地图相关联的数据(例如,驾车路线;特定位置处或附近的商店和其他兴趣点的数据;和其他基于位置的数据)的可执行指令。
结合触敏显示系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、回放(例如在触摸屏112上或在无线连接的或经由外部端口124连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件、以及以其他方式管理一种或多种文件格式诸如H.264的在线视频的可执行指令。在一些实施方案中,使用即时消息模块141而不是电子邮件客户端模块140来发送特定在线视频的链接。
上述所识别的每个模块和应用对应于用于执行上述一种或多种功能以及在本申请中所描述的方法(例如,本文中所描述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(即,指令集)不必以独立的软件程序、过程或模块实现,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。在一些实施方案中,存储器102任选地存储上述模块和数据结构的子组。此外,存储器102任选地存储上面未描述的另外的模块和数据结构。
在一些实施方案中,设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触控板作为用于操作设备100的主要输入控制设备,任选地减少设备100上的物理输入控制设备(例如,下压按钮、拨盘等等)的数量。
唯一地通过触摸屏和/或触控板来执行的预定义的一组功能任选地包括在用户界面之间的导航。在一些实施方案中,触摸板在被用户触摸时将设备100从设备100上显示的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施方案中,使用触摸板来实现“菜单按钮”。在一些其他实施方案中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触摸板。
图1B是示出根据一些实施方案的用于事件处理的示例性部件的框图。在一些实施方案中,存储器102(图1A中)或存储器370(图3)包括事件分类器170(例如,在操作系统126中)和相应的应用程序136-1(例如,前述应用程序136、137至155、380至390中的任一个应用程序)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中,应用程序136-1包括应用程序内部状态192,该应用程序内部状态指示当应用程序是活动的或正在执行时在触敏显示器系统112上显示的一个或多个当前应用程序视图。在一些实施方案中,设备/全局内部状态157被事件分类器170用来确定哪个(哪些)应用程序当前是活动的,并且应用程序内部状态192被事件分类器170用来确定要将事件信息递送到的应用程序视图191。
在一些实施方案中,应用程序内部状态192包括附加信息,诸如以下各项中的一者或多者:当应用程序136-1恢复执行时将被使用的恢复信息、指示信息正被显示或准备好用于被应用程序136-1显示的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列,以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如,作为多点触摸手势的一部分的触敏显示器系统112上的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器诸如接近传感器166、加速度计168和/或麦克风113(通过音频电路110)接收的信息。外围设备接口118从I/O子系统106所接收的信息包括来自触敏显示器系统112或触敏表面的信息。
在一些实施方案中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在其他实施方案中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中,事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器系统112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户能够在显示器上看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图,本文中有时也称为应用程序视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如,在其中检测到触摸的最低水平视图任选地被称为命中视图,并且被识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,所述初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时,命中视图确定模块172将命中视图识别为应当对子事件进行处理的分级结构中的最低视图。在大多数情况下,命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别,命中视图便通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块173确定仅命中视图应接收特定子事件序列。在其他实施方案中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图,并因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施方案中,即使触摸子事件完全被局限到与一个特定视图相关联的区域,分级结构中的较高视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施方案中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施方案中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器模块182进行检索。
在一些实施方案中,操作系统126包括事件分类器170。另选地,应用程序136-1包括事件分类器170。在又一个实施方案中,事件分类器170是独立模块,或者是存储在存储器102中的另一个模块(诸如,接触/运动模块130)的一部分。
在一些实施方案中,应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191,其中的每一个都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常,相应应用程序视图191包括多个事件识别器180。在其他实施方案中,事件识别器180中的一个或多个事件识别器是独立模块的一部分,该独立模块为诸如用户界面工具包(未示出)或应用程序136-1从中继承方法和其他属性的较高级别的对象。在一些实施方案中,相应事件处理程序190包括以下各项中的一者或多者:数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用程序内部状态192。另选地,应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序190。另外,在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178中的一者或多者包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施方案中,事件识别器180还包括元数据183和事件传递指令188(其任选地包括子事件递送指令)的至少一个子集。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速率和方向。在一些实施方案中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向取向,或反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,并且基于该比较来确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施方案中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其他事件。在一些实施方案中,事件187中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个示例中,事件1(187-1)的定义是被显示对象上的双击。例如,双击包括被显示对象上的预先确定时长的第一次触摸(触摸开始)、预先确定时长的第一次抬起(触摸结束)、被显示对象上的预先确定时长的第二次触摸(触摸开始)以及预先确定时长的第二次抬起(触摸结束)。在另一个示例中,事件2(187-2)的定义是被显示对象上的拖动。例如,拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器系统112上的移动、以及触摸的抬离(触摸结束)。在一些实施方案中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中,事件定义187包括对用于相应用户界面对象的事件的定义。在一些实施方案中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在触敏显示器系统112上显示三个用户界面对象的应用程序视图中,当在触敏显示器系统112上检测到触摸时,事件比较器184执行命中Test以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示对象与相应事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中,对相应事件187的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列是否确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件序列不与事件定义186中的任何事件匹配时,该相应事件识别器180进入事件不可能、事件失败或事件结束状态,在此之后忽略基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪并处理持续进行的基于触摸的手势的子事件。
在一些实施方案中,相应事件识别器180包括具有指示事件递送系统应当如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表的元数据183。在一些实施方案中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标志和/或列表。在一些实施方案中,元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施方案中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中,相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中,事件识别器180抛出与所识别的事件相关联的标记,并且与该标记相关联的事件处理程序190获取该标记并执行预定义过程。
在一些实施方案中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件序列相关联的事件处理程序或者递送到活跃参与的视图。与子事件序列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中,数据更新器176创建并更新在应用程序136-1中使用的数据。例如,数据更新器176对联系人模块137中所使用的电话号码进行更新,或者对视频播放器模块145中所使用的视频文件进行存储。在一些实施方案中,对象更新器177创建和更新在应用程序136-1中使用的对象。例如,对象更新器177创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息,并且将显示信息发送到图形模块132用以显示在触敏显示器上。
在一些实施方案中,事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对它们的访问权限。在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序136-1或应用程序视图191的单个模块中。在其他实施方案中,它们被包括在两个或更多个软件模块中。
应当理解,关于触敏显示器上的用户触摸的事件处理的上述论述还适用于利用输入设备来操作多功能设备100的其他形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,任选地与单次或多次键盘按下或按住协作的鼠标移动和鼠标按钮按下;触摸板上的接触移动,诸如轻击、拖动、滚动等;触笔输入;设备的移动;口头指令;检测到的眼睛移动;生物特征输入;和/或它们的任何组合任选地被用作对应于限定要识别的事件的子事件的输入。
图2示出了根据一些实施方案的具有触摸屏(例如,图1A的触敏显示器系统112)的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在本实施方案以及下文所述的其他实施方案中,用户能够通过例如利用一根或多根手指202(在图中未按比例绘制)或一支或多支触笔203(在图中未按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中,当用户中断与一个或多个图形的接触时,将发生对一个或多个图形的选择。在一些实施方案中,手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,不经意地与图形接触不会选择图形。例如,当与选择对应的手势是轻击时,在应用程序图标上方扫动的轻扫手势任选地不会选择对应的应用程序。
设备100任选地还包括一个或多个物理按钮,诸如“home”按钮、或菜单按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。作为另外一种选择,在一些实施方案中,菜单按钮被实现为被显示在触摸屏显示器上的GUI中的软键。
在一些实施方案中,设备100包括触摸屏显示器、菜单按钮204、用于使设备通电/断电和用于锁定设备的下压按钮206、一个或多个音量调整按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212、和对接/充电外部端口124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压下状态持续预定义的时间间隔来对设备进行开/关机;通过压下该按钮并在该预定义的时间间隔过去之前释放该按钮来锁定设备;和/或对设备进行解锁或发起解锁过程。在一些实施方案中,设备100还通过麦克风113来接受用于激活或停用某些功能的语音输入。设备100还任选地包括用于检测触敏显示器系统112上的接触的强度的一个或多个接触强度传感器165、和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施方案中,设备300是膝上型电脑、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如,家用控制器或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于将这些部件互联的一根或多根通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时称作芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330,该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触控板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如,类似于以上参考图1A所述的一个或多个触觉输出发生器167)、传感器359(例如,光学传感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图1A所述的一个或多个接触强度传感器165的接触强度传感器)。存储器370包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备;并且任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离CPU310定位的一个或多个存储设备。在一些实施方案中,存储器370存储与便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块、和数据结构,或它们的子组。此外,存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加程序、模块和数据结构。例如,设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中上述所识别的元件中的每个元件任选地存储在先前提到的存储器设备中的一个或多个存储器设备中。上述所识别的模块中的每个模块对应于用于执行上述功能的一组指令。上述所识别的模块或程序(即,指令集)不必被实现为单独的软件程序、过程或模块,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。在一些实施方案中,存储器370任选地存储上述模块和数据结构的子组。此外,存储器370任选地存储上面未描述的另外的模块和数据结构。
现在将注意力转到任选地在便携式多功能设备100上实现的用户界面(“UI”)的实施方案。
图4A示出根据一些实施方案的便携式多功能设备100上的应用程序菜单的示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施方案中,用户界面400包括以下元件或者其子集或超集:
·一个或多个无线通信(诸如蜂窝信号和Wi-Fi信号)的一个或多个信号强度指示符402;
·时间404;
·蓝牙指示器405;
·电池状态指示器406;
·具有常用应用程序的图标的托盘408,该图标诸如:
o电话模块138的被标记为“电话”的图标416,该图标416任选地包括未接来电或语音留言的数量的指示符414;
o电子邮件客户端模块140的被标记为“邮件”的图标418,该图标418任选地包括未读电子邮件的数量的指示符410;
o浏览器模块147的被标记为“浏览器”的图标420;以及
o视频和音乐播放器模块152(也称为iPod(Apple Inc.的商标)模块152)的被标记为“iPod”的图标422;以及
·其他应用的图标,诸如:
o IM模块141的被标记为“消息”的图标424;
o日历模块148的被标记为“日历”的图标426;
o图像管理模块144的被标记为“照片”的图标428;
o相机模块143的被标记为“相机”的图标430;
o在线视频模块155的被标记为“在线视频”的图标432;
o股市桌面小程序149-2的被标记为“股市”的图标434;
o地图模块154的被标记为“地图”的图标436;
o天气桌面小程序149-1的被标记为“天气”的图标438;
o闹钟桌面小程序149-4的被标记为“时钟”的图标440;
o健身支持模块142的被标记为“健身支持”的图标442;
o记事本模块153的被标记为“记事本”的图标444;以及
o用于设置应用程序或模块的图标446,该图标提供对设备100及其各种应用程序136的设置的访问。
应当注意,图4A中示出的图标标签仅仅是示例性的。例如,在一些实施方案中,视频和音乐播放器模块152的图标422被标记为“音乐”或“音乐播放器”。对于各种应用程序图标任选地使用其他标签。在一些实施方案中,相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施方案中,特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。
图4B示出了具有与显示器450分开的触敏表面451(例如,图3中的平板或触控板355)的设备(例如,图3中的设备300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如,传感器357中的一个或多个传感器)和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器359。
图4B示出了具有与显示器450分开的触敏表面451(例如,图3中的平板或触控板355)的设备(例如,图3中的设备300)上的示例性用户界面。尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出随后的许多实施例,但是在一些实施方案中,设备检测与显示器分开的触敏表面上的输入,如图4B中所示。在一些实施方案中,触敏表面(例如,图4B中的451)具有与显示器(例如,450)上的主轴线(例如,图4B中的453)对应的主轴线(例如,图4B中的452)。根据这些实施方案,设备检测与显示器上相应位置对应的位置处的与触敏表面451的接触(例如,图4B中的460和462)(例如,在图4B中,460对应于468并且462对应于470)。这样,在触敏表面(例如,图4B中的451)与多功能设备的显示器(例如,图4B中的450)是分开的时侯,由设备在触敏表面上所检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操纵显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界面。
另外,虽然主要是参考手指输入(例如,手指接触、单指轻击手势、手指轻扫手势等)来给出下面的示例,但是应当理解的是,在一些实施方案中,这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如,基于鼠标的输入或触笔输入)替换。例如,轻扫手势任选地由鼠标点击(例如,而不是接触),之后是光标沿着轻扫的路径的移动(例如,而不是接触的移动)替代。又如,轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如,代替对接触的检测,之后是停止检测接触)替代。类似地,当同时检测到多个用户输入时,应当理解的是,多个计算机鼠标任选地被同时使用,或鼠标和手指接触任选地被同时使用。
如本文所用,术语“焦点选择器”是指指示用户正与之进行交互的用户界面的当前部分的输入元件。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如,图3中的触控板355或图4B中的触敏表面451)上检测到输入(例如,按压输入)的情况下,该特定用户界面元素根据所检测到的输入而被调整。在包括使得能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如,图1A中的触敏显示器系统112或图4A中的触摸屏)的一些具体实施中,在触摸屏上检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如,通过接触的按压输入)时,根据所检测到的输入来调整特定用户界面元素。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据焦点在用户界面的不同区域之间的移动而移动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制以便传送与用户界面的用户期望的交互(例如,通过向设备指示用户界面的用户期望与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触摸板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
用户界面和相关联的过程
现在将注意力转向可在具有显示器、触敏表面和(任选地)用于检测与触敏表面的接触的强度的一个或多个传感器的电子设备诸如便携式多功能设备100或设备300上实现的用户界面(“UI”)和相关联的过程的实施方案。
图5A至图5AG示出了根据一些实施方案的用于同时捕获和编辑数字媒体的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程,包括图10A至图10E中的过程。为了便于解释,将参考在具有触敏显示器系统112的设备上执行的操作来论述实施方案中的一些实施方案。在此类实施方案中,焦点选择器为任选地:相应手指或触笔接触、对应于手指或触笔接触的表示点(例如,相应接触的重心或与相应接触相关联的点)、或在触敏显示器系统112上所检测到的两个或更多个接触的重心。然而,响应于当在显示器450上显示附图中示出的用户界面连同焦点选择器时检测到触敏表面451上的接触,任选地在具有显示器450和独立的触敏表面451的设备上执行类似的操作。
图5A至图5J和图5O至图5AA以及图5AE至图5AG示出了用于数字相机应用程序的示例性用户界面500。用户界面包括来自设备100的相关联数字相机(例如,光学传感器164)的实时视图,并且实时视图包括树枝502、猫510、鸟522和鹰542的实时显示。用户界面也包括在用户界面500的底部上的先前捕获的图像508等的滚动506(例如,覆盖在实时视图的底部部分上)。轻击滚动506中的图像打开了显示器上先前捕获的图像和/或标记了图像(例如,用于以后查看和/或长期存储作为与录制会话期间捕获的其他图像分开的图像)。类似地,轻击实时显示创建了时间戳,在检测接触的同时标记了捕获的图像。图5K至图5N和图5AB至图5AD示出了用于在数字相机应用程序内查看先前捕获的图像和视频剪辑的示例性用户界面526和示例性用户界面568。
图5A至图5G示出了示例性实施方案,其中设备同时捕获来自相关联数字相机的实时图像,并显示与覆盖在实时显示器上的捕获图像的子集对应的帧。在图5A中,设备在用户界面500中显示树枝502的实时图像。响应于检测来自图5B中的相机的实时视图上的接触504,设备开始从相机捕获实时图像(例如,用于后续处理以进行长期存储)并开始显示捕获图像的帧。在一些实施方案中,除了捕获实时图像之外,设备还响应于检测来自图5B中的相机的实时视图上的接触504而开始录制来自相机的实时图像,以进行长期存储。如图5C至图5D所示,显示树枝502的捕获图像的帧508似乎是从右下部分滚动到显示器上,接着是随后捕获图像的帧509。
如图5E至图5G所示,当帧512开始滚动到屏幕上时,它显示来自数字相机的实时图像,其反映了屏幕上的较大实时图像。例如,当猫510出现在来自相机的实时视图中时,在图5E中,它也显示出现在帧512中的图像中。当猫510继续进入图5F中的实时视图时,类似地更新帧512以显示猫的移动(例如,帧512示出了图5E中的猫的两条腿和图5F中的猫的三条腿)。当帧512在屏幕上完全显示时,如图5G所示,在帧512中显示的实时图像在该时间点被冻结。例如,在图5G中的实时视图中看到了猫510的所有四条腿,但是在帧512中仅可看到猫的三条腿,因为一旦帧完全迁移到屏幕上,图像就被冻结。
图5H至图5I示出了在实时视图中轻击实时图像标记同时捕获的图像的示例性实施方案。设备通过图5H中的实时图像上的接触518检测到轻击手势,并且作为响应,标记在该时间点捕获的图像。对应于标记图像的帧516在滚动506中显示得更大,如图5I所示。与标记的图像相关联地创建元数据,使得可以在后续处理期间从捕获的图像中识别标记的图像。在一些实施方案中,标记的图像独立于其余捕获的图像存储。
图5J至图5O示出了示例性实施方案,其中轻击帧激活了图像查看模式,打开了与显示器上的帧相关联的图像,并允许在图像查看模式内手动导航所捕获的图像。如图5J所示,设备检测到标记的帧516上的轻击524,并且作为响应,打开与图像查看用户界面526中的帧516相关联的图像,如图5K所示。如图5L所示,设备然后检测到轻扫手势,包括向右的接触526的移动528,并且作为响应,导航到较早捕获的图像,例如,刚好就在猫510在地面上躺下之前,如图5M所示。然后,设备检测到包括从图5N中的显示器顶部向下的接触530的移动532的轻扫手势,并且作为响应,返回到用户界面500中的实时视图,如图5O所示。
如图像滚动506的高级状态所示(例如,示出鸟522飞入图像并落在树枝502上),设备在显示图像查看用户界面526时,继续从相机捕获实时图像。图像查看用户界面526中的图像之间的导航也改变了在检测到轻击518时创建的由时间戳标记的图像(例如,如图5H中所示),如通过滚动506中的帧515(在退出图像查看用户界面526之前显示的帧(例如,在猫510躺下之前捕获的图像))替换帧516(响应于检测到轻击518,在图5I中放大的帧)所反映的。
图5P至图5U示出了示例性实施方案,其中沿屏幕底部的帧的滚动独立于实时视图中的实时图像导航。如图5P所示,设备检测到轻扫手势,包括在滚动506上向右的接触544的移动546。作为响应,设备在时间上向后导航滚动506(例如,向右移动滚动506),如图5Q中的帧515和帧514的再现所示。如图5R和图5S所示,在导航期间也暂停向左的自动前进滚动,如完成轻扫手势之后帧的静态性质所示。
然后,设备检测到第二轻扫手势,包括在滚动506上向左移动的接触548的移动550,如图5S所示。作为响应,设备适时地向前导航滚动,如图5T中的帧536、帧538和帧540的再现所示。在抬离接触548之后,根据模拟的惯性,滚动继续适时地向前移动,如图5U中的帧554和帧556的外观所示。
图5V至图5Z示出了示例性实施方案,其中保持实时图像上的接触标记了同时捕获的视频剪辑,以用于后续处理和长期存储。设备检测到来自图5V中的相机的实时视图中的实时图像上的接触558,并且作为响应,开始标记在检测到接触时捕获的图像。对应于在检测接触558时标记的第一图像的帧556在滚动506中显示得更大。当设备继续检测到实时图像上的接触558时,后续帧560和帧562也在滚动506中显示得更大,如图5W至图5X所示,从而指示对应于那些帧的图像被包括在标记的视频剪辑中。
然后,设备检测到图5X中接触558的抬离,并且作为响应,停止将同时捕获的图像标记为视频剪辑的一部分。在接触抬离时,设备还在帧562中冻结图像,如图5Y所示,其中帧562中的图像—否则将显示实时图像,因为它尚未完全迁移到屏幕上—显示了猫510的尾部,即使猫已离开上面的实时图像。在图5Z中,下一帧564以正常尺寸显示,因为该设备不再标记视频剪辑。
尽管未在图5V至5X中示出,但是在一些实施方案中,设备实时分析了标记的视频剪辑中的图像,并自动识别了质量差的帧(例如,由于相机移动或实时视图中对象快速移动而模糊的图像)。当检测到质量差的帧时,设备显示提示(例如,滚动506上方的弹出文本框),询问用户是否想要移除质量差的帧。用户可以通过单次轻击(例如,在确认示能表示上)确认或拒绝该建议,以移除模糊帧,或者忽略该提示。
图5AA至图5AE示出了示例性实施方案,其中轻击对应于标记的视频剪辑的帧在显示器上打开了视频剪辑。如图5AA所示,设备通过标记帧560上的接触568检测轻击手势,其对应于标记的视频剪辑,该标记的视频剪辑跨越了对应于标记帧556至帧562的图像。作为响应,设备在视频查看用户界面568中打开了相关联的视频剪辑,如图5AB所示。然后设备播放该视频剪辑,如图5AC至图5AD中的猫510走出屏幕所示。然后,设备检测到包括从图5AD中的显示器顶部向下的接触570的移动572的轻扫手势,并且作为响应,返回到用户界面500中的实时视图,如图5AE所示。
图5AF至图5AG示出了示例性实施方案,其中轻击滚动中未标记的帧标记了与该帧相关联的图像,而不打开图像显示用户界面中的图像。在图5AG中,设备通过在滚动506内的未标记帧576上的接触580检测到轻击手势。作为响应,设备标记了与帧576相关联的图像,并增加了帧的大小,以指示标记了相关相图像。与图5J中的接触516对轻击手势的响应不同—设备显示与图5K中的帧516对应的图像,因为在检测轻击手势之前标记了帧516—设备不在图像查看用户界面中显示与图5AG中的帧576对应的图像,因为先前没有标记该图像。
图6A至图6S示出了根据一些实施方案的用于在不同成像模式下捕获数字媒体的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程,包括图12A至图12D中的过程。为了便于解释,将参考在具有触敏显示器系统112的设备上执行的操作来论述实施方案中的一些实施方案。在此类实施方案中,焦点选择器为任选地:相应手指或触笔接触、对应于手指或触笔接触的表示点(例如,相应接触的重心或与相应接触相关联的点)、或在触敏显示器系统112上所检测到的两个或更多个接触的重心。然而,响应于当在显示器450上显示附图中示出的用户界面连同焦点选择器时检测到触敏表面451上的接触,任选地在具有显示器450和独立的触敏表面451的设备上执行类似的操作。
图6A至图6S示出了相机应用程序的示例性用户界面600。用户界面包括来自设备100的相关联数字相机(例如,光学传感器164)的实时视图。实时视图包括树枝602、猫610、鸟622和鹰642的实时显示。附图示出了一个实施方案,其中轻击实时视图以第一图像录制模式发起数字图像的捕获,从而对应于在检测到接触时获取的单个图像。保持实时视图上的接触自动将图像获取模式从单图像录制模式改变为连拍图像录制模式,然后改变为视频录制模式。图6A至图6S中的示例性用户界面示出了警告用户在图像录制模式之间自动切换的视觉提示。
图6A至图6C示出了示例性实施方案,其中设备响应于短轻击手势以单图像录制模式录制数字媒体。在图6A中,来自相机的实时视图包括树枝602的实时图像。响应于检测图6B中的接触604,设备开始以与单个图像的录制相关联的第一图像录制模式录制数字媒体。设备通过在检测到接触604的位置周围显示环606来指示第一图像录制模式。响应于检测接触604的抬离,如图6C所示,设备停止录制数字媒体。因为接触604的长度短于第一阈值时间长度(例如,TTs),所以设备没有转换到第二图像录制模式并且标记单个图像以用于长期存储。换句话讲,响应于轻击手势录制单个静止图像,并且单个静止图像对应于在检测到轻击手势时捕获的图像(例如,在最初检测到接触604时或者当检测到接触604的抬起时捕获的图像,或者从检测到接触604时捕获的多个图像中选择的图像)。
图6D至图6F示出了示例性实施方案,其中响应于通过接触检测短暂的轻击并保持手势,设备从单个图像录制模式和图像连拍录制模式过渡。在图6D中,设备检测到接触608,并且作为响应,开始以与单个图像的录制相关联的第一图像录制模式录制数字媒体。设备通过在检测到接触608的位置周围显示环606来指示第一图像录制模式。
随着设备继续检测实时视图上的接触608超过第一时间阈值(例如,时间阈值TTS),设备从单个图像录制模式改变为图6E中的图像连拍录制模式。在图6E中,设备通过用计数标记612替换图6D中的环606来指示图像录制模式的这种变化,其中该计数标记环绕检测到的接触608的位置。设备也显示了已经收集的连拍图像的数量(例如,“8”)。响应于检测接触608的抬离,如图6F所示,设备停止录制数字媒体。因为通过接触608的手势的长度长于第一阈值量的时间(例如,TTS),但是短于第二阈值量的时间(例如,TTS>TTs),所以设备没有转换到第三图像录制模式并标记连拍图像用于长期存储。换句话讲,响应于短暂的轻击并保持手势录制静止图像序列,并且静止图像序列对应于在检测到接触608期间捕获的图像。在一些实施方案中,连拍图像包括从在短暂的轻击并保持手势期间捕获的所有图像中选择的图像子集。
图6G至图6J示出了一个示例性实施方案,其中设备从单个图像录制模式过渡到图像连拍录制模式,然后过渡到视频录制模式,该视频录制模式响应于检测到中间的轻击并保持手势,在接触抬离时终止。在图6G中,设备检测到接触614,并且作为响应,开始以与单个图像的录制相关联的第一图像录制模式录制数字媒体。设备通过在检测到接触614的位置周围显示环606来指示第一图像录制模式。
随着设备继续检测实时视图上的接触614超过第一时间阈值(例如,时间阈值TTS),设备从单个图像录制模式改变为图6H中的图像连拍录制模式。在图6H中,设备通过用计数标记612替换图6G中的环606来指示图像录制模式的这种变化,其中该计数标记环绕检测到的接触614的位置。
随着设备进一步继续检测实时视图上的接触614超过第二时间阈值(例如,时间阈值TTM>时间阈值TTs),设备从图6I中的图像连拍录制模式改变为图6J中的视频录制模式。通过用图6I中的标记环616替换图6H中的计数标记612,设备在图像录制模式中指示了这种变化。设备也显示了已经录制视频的时间长度(例如,“0:02”)。
响应于检测接触614的抬离,如图6J所示,设备停止录制数字媒体,因为接触614的持续时间短于第三时间阈值(例如,TTL)。因为接触614的持续时间长于第二阈值时间长度(例如,TTM),所以设备转换到第三成像模式并标记视频,以用于后续处理和长期存储。标记的视频包括在树枝602下行走并躺下的猫610的脚注,两者都在设备转换到视频录制模式之前发生,因为该设备从初始检测到接触614开始连续地收集数字图像。换句话讲,响应于中间的轻击并保持手势录制视频,并且该视频包括在检测到接触614的时间期间捕获的图像。在一些实施方案中,该视频包括从在中间的轻击并保持手势期间捕获的所有图像中选择的图像子集(例如,图像捕获的帧速率高于录制视频的帧速率)。
图6K至6S示出了一个示例性实施方案,其中设备从单个图像录制模式过渡到图像连拍录制模式,然后过渡到视频录制模式,该视频录制模式响应于检测到长的轻击并保持手势,未在接触抬离时终止。在图6K中,设备检测到接触618,并且作为响应,开始以与单个图像的录制相关联的第一图像录制模式录制数字媒体。设备通过在检测到接触618的位置周围显示环606来指示第一图像录制模式。
随着设备继续检测实时视图上的接触618超过第一时间阈值(例如,时间阈值TTS),设备从单个图像录制模式改变为图6L中的图像连拍录制模式。在图6L中,设备通过用计数标记612替换图6K中的环606来指示图像录制模式的这种变化,其中该计数标记环绕检测到的接触618的位置。
随着设备进一步继续检测实时视图上的接触618超过第二时间阈值(例如,时间阈值TTM),设备从图6L中的图像连拍录制模式改变为图6L中的视频录制模式。通过用图6M中的标记环616替换图6L中的计数标记612,设备在图像录制模式中指示了这种变化。设备也显示了已经录制视频的时间长度(例如,“0:02”)。
设备继续检测实时视图上的接触618,并且作为响应,当接触618的持续时间接近第三时间阈值(例如,时间阈值TTL>TTM)时,显示录制按钮620,该录制按钮似乎产生于接触618并逐渐填充标记环616,如图6N所示。当接触618的持续时间达到第三时间阈值(例如,时间阈值TTL)时,录制按钮620完全填充、并替换标记环616,如图6O所示。设备现在处于第二视频录制模式,如图6O中录制按钮620从接触618下方迁移到显示器的底部所指示,如图6P所示。
因为设备已经转换到第二视频录制模式,所以设备在检测到接触618的抬离之后继续录制数字媒体,如图6Q中的录制按钮620的保持显示所示。然后,设备通过录制按钮620上的接触624检测到轻击手势,并且作为响应,停止录制数字媒体,如图6S中的录制按钮620的消失所指示。因为接触618的持续时间长于第二(和第三)阈值时间长度(例如,TTM(和TTL)),所以设备标记视频以用于后续处理和长期存储。
图7A至图7R示出了根据一些实施方案的用于自动检测和提示关于图像录制模式的用户动作的示例性用户界面。设备自动检测与设备当前捕获的媒体内容一致的图像录制模式,并且自动提示与检测到的图像录制模式相关联的用户动作。这些附图中的用户界面用于示出下文描述的过程,包括图16A至图16H中的过程。为了便于解释,将参考在具有触敏屏112的设备上执行的操作来讨论一些实施方案。在此类实施方案中,焦点选择器为任选地:相应手指或触笔接触、对应于手指或触笔接触的表示点(例如,相应接触的重心或与相应接触相关联的点)、或在触敏显示器系统112上所检测到的两个或更多个接触的重心。然而,响应于当在显示器450上显示附图中示出的用户界面连同焦点选择器时检测到触敏表面451上的接触,任选地在具有显示器450和独立的触敏表面451的设备上执行类似的操作。
图7A至图7R示出了相机应用程序的示例性用户界面702。相机用户界面702包括来自设备100的第一相机(例如,后置相机)的实时视图704。在图7A至图7R所示的示例中,实时视图704覆盖在显示区域(例如,实时视图显示对象、窗口或视口)内的用户界面702上。该示例中的实时视图具有与用户界面702相同的形状和尺寸。在一些实施方案中,实时视图可以小于用户界面702并且具有与该用户界面不同的形状。实时视图704呈现由第一相机实时捕获的图像。
在图7A中,响应于检测设备100基本上静止并且设备100的水平边缘基本上水平至少阈值量的时间,设备100已经使用第一相机自动开始捕获图像。由设备100捕获的图像具有足够大的分辨率、尺寸、帧速率和/或纵横比,以允许在以后的时间从其中提取多个不同图像录制模式(例如,单个图像录制模式、HD视频录制模式、正方形图像录制模式等)的图像。在图7A中,当发起和进行图像的自动捕获时,显示指示器706。在一些实施方案中,帧流(例如,诸如图5A至图5AE中所示的帧滚动506)被覆盖在实时视图上或者在实时视图下方示出,以示出刚刚被设备捕获的图像。由设备捕获的图像被临时存储,并且可用于设备或用户的标记和后续处理;然而,如果设备捕获的图像未被用户标记为长期存储或符合其他预设条件,则在预定时间量(例如,24小时)之后丢弃或重写这些捕获的图像。
图7A至图7D示出了在进行图像捕获时,设备100检测到包括第一相机的设备正在水平移动(例如,如由移动703所指示)至少阈值量的时间或距离。实时视图704示出了当设备及其第一相机正在水平向右移动时,图片帧从用户界面702的左侧逐渐进入视场。基于设备及其相机的移动模式(例如,稳定的水平移动)和/或正被捕获的图像的改变(例如,新的像素模式主要出现在每个新捕获的图像的右边缘),设备确定了相机正在捕获的图像与全景的初始部分一致。图7D示出了在确定正被捕获的图像与全景录制模式一致时,设备100显示一组全景录制引导对象,以协助用户采取正确的动作来完成全景。
如图7D所示,该组全景录制引导对象包括全景查看对象708,其显示正在拍摄的全景的当前完成部分。在一些实施方案中,全景的完成部分包括在设备确定正在拍摄全景之前捕获的一个或多个图像。该组全景录制引导对象也包括具有中心线716和箭头718的引导窗口714。全景查看对象708和引导窗口714的显示用作提示用户继续水平移动设备以完成已经开始的全景。在一些实施方案中,显示文本提示710(例如,“连续移动以拍摄全景”)以向用户解释完成全景所需的动作。如果用户未遵循文本提示710中指定的指令,并将相机向左移动或使相机保持静止以超过阈值量的时间,则设备100将确定用户不希望拍摄全景,并且将停止显示全景录制引导对象。
图7E示出了用户继续根据文本提示710中的指令将设备水平向右移动(例如,如由移动703所指示)。当设备100向右移动时,连续更新实时视图704以显示当前捕获的图像。全景查看对象708用已经完成的全景的附加部分连续更新。图7E也示出了在全景录制期间,设备100检测到设备和相机的移动稍微不稳定并且稍微偏离水平方向,并且作为响应,设备100显示另一个提示(例如,文本提示720),从而请求用户沿中心线716保持箭头718。
图7F示出了用户已经将设备进一步向右移动并且全景的附加部分已经完成并在全景查看对象708中呈现。实时视图704示出了飞入相机视场的鸟。用户减慢设备的移动(例如,如由移动703的较小幅度所指示)以更好地观察鸟。响应于检测鸟在新捕获的图像内的移动(例如,移动与全景拍摄不一致的像素)和/或设备的较慢移动,设备确定当前捕获的图像与视频录制模式一致。根据当前捕获的图像与视频录制模式一致的确定,设备100显示提示(例如,文本提示722“保持静止以开始视频”)以请求用户确认应该开始视频录制。在一些实施方案中,当鸟在相机的视场内移动时,设备暂停全景的录制。在一些实施方案中,设备自动从全景的完成部分移除表示飞鸟的移动像素。在一些实施方案中,设备将表示飞鸟的移动像素合并到全景的完成部分的一个位置(例如,来自一帧的飞鸟图像覆盖在全景的完成部分上)中。
图7G示出了当鸟在相机的视场内继续飞行时,用户在文本提示722中遵循指令并停止相机的移动。在相机保持静止以超过阈值量的时间之后,设备激活视频录制模式。在一些实施方案中,所录制的视频包括在设备激活视频录制模式之前已捕获的至少一些帧(例如,自设备确定捕获的图像与视频录制一致时已捕获的帧)。在图7G中,在设备100激活视频录制模式之后,设备100显示指示视频录制模式已被激活并且当前正在录制视频的通知724。在一些实施方案中,录制指示器706改变其外观以指示正在录制视频。图7H示出了视频录制继续,只要设备保持基本平稳,并且/或者捕获的图像继续改变(例如,由于飞鸟的移动)。
图7I示出了设备100检测到已经录制了一个或多个模糊帧(例如,由于飞鸟的快速速度)。响应于检测模糊帧,设备100显示询问用户他/她是否希望现在移除模糊帧的提示(例如,文本提示726)。在一些实施方案中,设备100响应于文本提示724上的轻击来移除模糊帧。
图7J示出了,如果用户没有提供任何输入来移除模糊帧(例如,如果在显示提示724之后的阈值量的时间内没有检测到轻击输入),则然后设备确定此时不应移除模糊帧,并继续录制视频。在一些实施方案中,设备100显示通知(例如,通知728),从而通知用户在视频录制完成之后仍然可以在视频查看模式中删除模糊帧。在一些实施方案中,当检测到模糊帧时和/或当在视频录制期间检测到设备的移动时,设备重新开始新的视频剪辑(例如,或者在视频录制中插入标记以指示场景的改变)。在一些实施方案中,如果用户在视频录制仍在进行时拒绝移除模糊帧,则设备重新开始新视频剪辑或插入标记以指示场景的改变。
图7K指示了,当鸟飞出相机视场时,相机捕获的图像不再包含大量移动像素(例如,因为飞鸟不在实时视场中),设备100确定可以从停止的地方恢复全景拍摄。设备100在其先前位置用箭头718重新显示引导对象714,以及全景查看对象708,该全景查看对象包括在视频录制开始时已完成的全景712的部分(参见图7K)。设备100也通过水平移动设备来显示请求用户恢复全景的提示730。
图7L至图7M示出了当用户根据提示730中的指令将设备水平向右移动(例如,如移动705所表示)时,恢复全景拍摄。在图7L至图7M中,完成了全景的附加部分并显示在全景查看对象708中。
在图7N中,完成了全景,并且用户在全景查看对象708上轻击(例如,如接触713所指示)以进入图像查看模式。响应于在全景查看对象708上检测到轻击手势,设备用媒体查看用户界面732替换相机用户界面702,如图7O所示。
如图7O所示,媒体查看用户界面732包括捕获和录制的图像的所选择子集的表示。例如,所选择的图像子集包括全景734和视频736,它们对应于在捕获图像期间被激活的全景录制模式和视频录制模式。另外,媒体查看用户界面732包括几个静止图像(例如,图像738、图像740和图像742)的表示。基于所捕获图像的内容(例如,图像特征)以及与已录制的视频736和全景734的时间关系,从捕获的图像中提取这些静止图像。在捕获图像期间未激活单个图像录制模式;然而,设备从所捕获的图像中选择这些图像以提供内容的代表性子集(例如,媒体捕获的突出显示)供用户查看。
图7P示出了在视频736的表示上检测到轻击手势(例如,通过接触743)。响应于检测视频736的表示上的轻击手势,设备100显示图像滚动750,其示出来自视频736的代表帧,包括已经检测到的模糊帧752(例如,在捕获期间或在视频完成之后检测到模糊帧)。设备显示提示746,从而请求用户以确认是否应该移除检测到的模糊帧,如图7Q所示。
图7Q还示出了在提示746中的“是”按钮上检测到轻击手势(例如,通过接触748)。响应于检测到轻击手势,设备100移除检测到的模糊帧752(以及任选地在视频736中检测到的其他模糊帧)。图7R示出了经更新的图像滚动750,其中移除了模糊帧752。
图8A至图8AC示出了根据一些实施方案的用于在图像捕获期间在相机实时视图之间切换的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程,包括图14A至图14F中的过程。为了便于解释,将参考在具有触敏屏112的设备上执行的操作来讨论一些实施方案。在此类实施方案中,焦点选择器为任选地:相应手指或触笔接触、对应于手指或触笔接触的表示点(例如,相应接触的重心或与相应接触相关联的点)、或在触敏显示器系统112上所检测到的两个或更多个接触的重心。然而,响应于当在显示器450上显示附图中示出的用户界面连同焦点选择器时检测到触敏表面451上的接触,任选地在具有显示器450和独立的触敏表面451的设备上执行类似的操作。
图8A至图8AC示出了相机应用程序的示例性用户界面802。相机用户界面802包括来自设备100的第一相机(例如,后置相机)的实时视图804。在图8A至图8AC所示的示例中,实时视图804覆盖在显示区域(例如,实时视图呈现对象、窗口或视口)内的用户界面802上,该显示区域小于用户界面802并且具有与该用户界面不同的形状。实时视图804呈现由第一相机实时捕获的图像。
在图8A中,响应于检测设备100基本上静止并且设备100的水平边缘基本上水平至少阈值量的时间,设备100已经使用第一相机自动开始捕获图像。由设备100捕获的图像具有足够大的分辨率、尺寸、帧速率和/或纵横比,以允许在以后的时间提取多个不同图像录制模式(例如,单个图像录制模式、HD视频录制模式、正方形图像录制模式等)的图像。在图8A中,当发起和进行图像的自动捕获时,显示指示器806。在一些实施方案中,帧流(例如,诸如图5A至图5AE中所示的帧滚动506)被覆盖在实时视图上或者在实时视图下方示出,以示出刚刚被相机捕获的图像。
在图8A中,用户界面802包括控制区域810,其包括:许多相机控制示能表示,包括用于启动媒体查看用户界面的相册示能表示(例如,图7O中所示的媒体查看用户界面);电影示能表示,用于显示电影录制模式菜单(例如,慢动作录制模式、延时录制模式等);照片示能表示,用于显示照片录制模式菜单(例如,正方形照片录制模式、4:3照片录制模式等);全景示能表示,用于激活全景录制模式;编辑示能表示,用于显示媒体编辑用户界面;闪光控制示能表示,用于改变相机闪光设置;以及相机切换示能表示,用于在前后相机视图之间切换。在一些实施方案中,如果显示帧流,则任选地不显示控制区域810。
图8A至图8C示出了在显示实时视图804并且正在进行图像捕获时,在实时视图804上检测到接触(例如,接触808)(如图8A所示)。在实时视图804的上部部分中检测到接触808,并且在触摸屏112上向下移动。响应于检测接触808的向下移动,设备100减小实时视图804的垂直尺度以调整实时视图804的纵横比。在一些实施方案中,不改变实时视图的纵横比,并且根据接触808的移动来调整实时视图内的帧大小指示器(例如,矩形框),以示出正被捕获的图像的当前纵横比。在一些实施方案中,根据实时视图804的纵横比调整所捕获的图像的纵横比。在一些实施方案中,创建指示当前纵横比的元数据,并且设备100继续捕获具有原始纵横比的图像。然后处理捕获的图像以在后处理期间获得具有正确纵横比的图像。
如图8D所示,当接触808的移动在方向上(例如,向上)反转时,设备100增加实时视图804的垂直尺度,以根据接触808的向上移动调整实时视图804的纵横比。
在图8E中,检测到接触808的抬离,并且设备100在检测到接触808的抬离时维持实时视图804的当前纵横比。图像捕获继续了当前的纵横比。
在图8A至图8E中,接触808的移动是缓慢且有意的移动,其持续时间长于预先确定时间阈值和/或速度慢于预先确定速度阈值。响应于接触的此类长和/或慢的移动,设备100根据接触的移动连续且平滑地调整实时视图(以及正在捕获的图像)的纵横比(例如,通过调整实时视图804的垂直尺度),直到检测到接触的抬离。在一些实施方案中,如果水平移动不用于触发相机用户界面中的其他功能(例如,相机视图的切换),则水平移动可以使用接触来调整正在捕获的图像的水平尺度。
与图8A至图8E相反,图8F至图8I示出了使用快速轻弹手势在两个预设纵横比(例如,4:3纵横比和正方形纵横比)之间快速切换。如图8F至图8G所示,在实时视图804的上部部分检测到接触(例如,接触812)。接触812快速向下移动,并且在接触812的触摸按下之后不久检测到接触812的抬离。根据接触812已执行轻弹手势(例如,接触812的特征速度(例如,提升时的接触速度812)大于阈值速度,并且/或者接触812的持续时间小于阈值量的时间)的确定,设备100根据接触812的向下移动将当前纵横比改变为正方形纵横比。在一些实施方案中,为了达到预设的正方形纵横比,也调整了实时视图814的水平尺度,如图8G所示。
在图8H至图8I中,在实时视图804的上部部分检测到另一接触(例如,接触814)。接触814快速向上移动,并且在接触814的触摸按下之后不久检测到接触814的抬离。根据接触814已执行轻弹手势(例如,接触814的特征速度(例如,提升时的接触速度814)大于阈值速度,并且/或者接触814的持续时间小于阈值量的时间)的确定,设备100根据接触814的向上移动将当前纵横比从正方形纵横比改变为4:3纵横比。在一些实施方案中,为了达到预设的4:3纵横比,也调整了实时视图814的水平尺度。
图8J至图8N示出了一种过程,其中接触(例如,接触816)的水平移动旋转显示实时视图804上的实时视图显示对象。在实时视图显示对象的反面,则显示来自另一相机的实时视图。在一些实施方案中,在旋转双侧实时视图显示对象时,继续进行图像捕获。在一些实施方案中,设备捕获实时视图显示对象的旋转,包括在实时视图显示对象的旋转期间,实时视图如何在实时视图显示对象上出现。在一些实施方案中,设备继续从相机中的一个捕获实时视图中的图像,直到来自另一相机的实时视图移动到相机用户界面中的前中心位置。
如图8J所示,当来自后置相机的实时视图804显示在实时视图显示对象的第一侧时,在实时视图804上检测到接触816(例如,在实时视图804的右部部分)。在图8K至图8L中,设备100检测到接触816的向左移动,并且响应于接触816的向左移动,设备100围绕相机用户界面平面中的垂直中心轴旋转实时视图显示对象,而实时视图804根据后置相机正在捕获的图像继续在实时视图显示对象的第一侧上显示和更新。
图8M示出了当检测到接触816的抬离时,实时视图显示对象尚未旋转到实时视图显示对象的第二侧在相机用户界面中变得可见的点。在图8N中,响应于检测接触816的抬离,设备反转实时视图显示对象的旋转,以在相机用户界面中的前中心位置处重新显示实时视图804。如果实时视图显示对象已旋转到实时视图显示对象的第二侧在相机用户界面中变得可见的点,则然后在接触的抬离时,设备将继续旋转实时视图显示对象,直到与实时视图显示对象的第二侧相关联的实时视图在相机用户界面的前中心位置处显示。换句话讲,当通过慢速移动接触来旋转实时视图显示对象时,实时视图显示对象捕捉到最接近接触抬离时的位置的稳定位置。
图8O至图8T示出了水平轻弹手势翻转双侧实时视图显示对象的过程,该双侧实时视图显示对象在实时视图显示对象的相对侧上显示实时视图804和实时视图820。
如图8O所示,在图像捕获正在进行时,设备100通过接触818检测到轻弹手势。接触818的移动在实时视图804的左部部分开始,并以高速朝向显示器的右侧。在触敏表面上短暂移动之后检测到接触818的抬离,如图8J所示。响应于通过接触818检测轻弹手势(例如,基于通过接触818的移动的快速和/或短暂持续时间),设备100根据接触818的移动方向旋转实时视图显示对象,如图8P所示。
图8Q至图8R示出了在轻弹手势终止之后,实时视图显示对象继续旋转,并且实时视图显示对象的第二侧在相机用户界面中变得可见(例如,如图8R所示)。来自设备100的另一相机(例如,前置相机)的实时视图820在实时视图显示对象的第二侧上显示。
图8S至图8J示出了实时视图显示对象继续旋转,直到实时视图显示对象的第二侧占据相机用户界面的前中心位置。实时视图820在实时视图显示对象的第二侧上显示。实时视图820示出了用户操作设备100的图像。
在一些实施方案中,在旋转实时视图显示对象时,继续进行图像捕获。在一些实施方案中,设备捕获实时视图显示对象的旋转,包括在实时视图显示对象的旋转期间,实时视图如何在实时视图显示对象上出现。在一些实施方案中,设备继续从相机中的一个捕获实时视图中的图像,直到来自另一相机的实时视图占据相机用户界面中的前中心位置。
图8U至图8Y示出了以下过程:轻扫手势滑动多面板实时视图显示对象,以将当前显示的实时视图(例如,实时视图820)移出相机用户界面的可见区域,并且将当前不可见的另一实时视图(例如,实时视图804)引入到相机用户界面的可见区域中。
在图8U中,在实时视图820的左边缘附近检测到接触(例如,接触822)(例如,在距实时视图820的边缘的阈值数量的像素内)。在图8V至图8W中,接触822朝向显示器的右侧移动。根据接触822的向右移动,设备100将实时视图显示对象向右滑动,并且实时视图804利用实时视图显示对象向右移动。实时视图820的右部部分逐渐移出相机用户界面的可见区域,并且实时视图804的左部部分逐渐进入相机用户界面的可见区域。
图8X示出了接触822反转其移动方向并朝向显示器的左侧移动。根据接触822的向左移动,设备200将实时视图显示对象向左滑动,并且实时视图804和实时视图820向左移动。实时视图804的左部部分逐渐移出相机用户界面的可见区域,并且实时视图820的右部部分逐渐重新进入相机用户界面的可见区域。
图8Y示出,在接触822抬离时,实时视图804和实时视图820在相机用户界面上部分可见,并且实时视图显示对象的可见部分在实时视图804与实时视图820之间分割。
图8Z至图8AA示出了在实时视图显示对象的左边缘处检测到的轻弹手势将实时视图显示对象捕捉到即将出现在轻弹手势方向上的下一个实时视图。如果设备只有两个实时视图可用,则轻弹手势会在两个实时视图之间来回切换。
如图8Z所示,接触824的轻弹手势在向右方向,并且即将出现在轻弹手势的方向上的实时视图是实时视图804。响应于接触824的轻弹手势,实时视图804被实时视图显示对象向右移动,并占据相机用户界面的前中心位置。如果轻弹手势在向左方向上,则实时视图820将与实时视图显示对象一起向左移动,并占据相机用户界面的前中心位置。如果在图8AA中所示的实时视图804上检测到另一轻弹手势,则设备将根据轻弹手势的方向向左或向右滑动实时视图显示对象和实时视图804,并在相机用户界面的前中心位置处显示实时视图820。
图8AB示出了在控制显示区域810中的电影示能表示828上检测到轻击手势(例如,通过接触826)。响应于激活电影示能表示828的轻击手势,设备100激活了由后置相机捕获并在实时视图804中示出的图像的视频录制(例如,如由录制指示器806的改变外观所指示)(例如,在默认视频录制模式中),如图8AC所示。设备100也在控制区域810中显示了一组新的示能表示(例如,用于激活慢动作录制模式的示能表示834、用于停止当前视频录制的示能表示830、用于激活延时录制模式的示能表示832、以及用于在视频录制期间拍摄静止照片的示能表示836),如图8AC所示。在一些实施方案中,在控制区域810上向左或向右的轻扫输入使得设备将视频录制模式切换为例如从默认视频录制分别更多地切换到慢动作录制模式或切换到延时录制模式。
图8J至图8AA示出了在正在进行的图像捕获期间从不同相机切换实时视图。在一些实施方案中,控制区域810中的专用示能表示(例如,示能表示838)可用于切换来自不同相机的实时视图。例如,在示能表示838上检测到的轻击手势使得在相机用户界面中示出的实时视图切换到当前未在相机用户界面中显示的另一相机的实时视图。在一些实施方案中,当实现用于切换实时视图的上述方法时,图像捕获不一定正在进行中。
图9A至图9S示出了根据一些实施方案的用于从视频录制调整所选图像和视频剪辑的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程,包括图18A至图18D中的过程。尽管将参考触摸屏显示器(其中组合了触敏表面和显示器)上的输入给出随后的示例中的一些示例,但是在一些实施方案中,设备检测与显示器650分开的触敏表面651上的输入,如图6B中所示。
在一些实施方案中,设备是具有独立显示器(例如,显示器650)和独立触敏表面(例如,触敏表面651)的电子设备。在一些实施方案中,设备是便携式多功能设备100,显示器是触敏显示系统112,并且触敏表面包括显示器上的触觉输出发生器167(图1A)。为了便于解释,参考图9A至图9S和图18A至图18D所述的实施方案将参考在具有触敏显示系统112的设备上执行的操作来讨论。在此类实施方案中,焦点选择器为任选地:相应手指或触笔接触、对应于手指或触笔接触的表示点(例如,相应接触的重心或与相应接触相关联的点)、或在触敏显示器系统112上所检测到的两个或更多个接触的重心。然而,任选地,响应于在触敏表面651上检测到如图9A至图9S所述的接触同时显示显示器650上的如图9A至图9S所示的用户界面,对具有显示器650和单独触敏表面651以及焦点选择器的设备执行类似的操作。
图9A示出了媒体查看用户界面的网格视图用户界面902,用于从视频录制中选择静止图像,例如,以提供视频录制的图像摘要。网格视图用户界面902包括用于访问时间线视图用户界面935的“时间线”按钮904(例如,从网格视图用户界面902)和用于访问网格视图用户界面902的“网格”按钮906(例如,从时间线视图用户界面935)。在一些实施方案中,“网格”按钮不显示在网格视图用户界面中,并且“时间线”按钮不显示在时间线视图用户界面中。
网格视图用户界面902包括以网格布局显示的静止图像908、910、912、914、916、918、920、922、924、926、928和930。静止图像908至930是来自视频录制的所选择图像。例如,静止图像908至930是在捕获或录制视频时响应于用户输入而选择的图像,并且/或者在捕获或录制视频时自动选择(例如,以周期性间隔)的图像。在一些实施方案中,静止图像908至930是通过例如视频序列中的时间戳或选择图像的次序进行排序(至少最初)的图像序列。如下面关于图9E进一步描述的,静止图像924是与视频录制的所选择视频子剪辑对应的缩略图。
在图9B中,在与时间线按钮904对应的位置处检测到输入(例如,通过接触931的轻击手势)。响应于检测到输入,显示时间线视图用户界面935,如图9E所示。在一些实施方案中,如图9B所示,从显示网格视图用户界面902到显示时间线视图用户界面935的过渡,如图9E所示,包括如图9B至图9E所示的动画过渡。例如,在动画期间,静止图像908至930逐渐从网格下降,如图9C至图9D所示,并且随着静止图像908至930下降,静止图像在时间线934上重新布置成图像调整对象和/或视频调整对象的线性排列,如图9E所示。在一些实施方案中,在从网格视图用户界面902到时间线视图用户界面935的动画过渡期间,来自静止图像908至930的图像的表示932(例如,静止图像908的表示)逐渐淡入视图。
如图9E所示,时间线视图用户界面935包括与视频录制对应的时间线934(例如,从中选择静止图像908至930的视频录制)。在时间线934上显示图像调整对象936、938、940、942、944、946、948、950、952、954和956。图像调整对象936至958中的每个对应于静止图像(例如,在网格视图界面902中显示的静止图像)。图像调整对象936至958的位置对应于视频录制内的静止图像908至930的位置。
在一些实施方案中,与图像调整对象对应的静止图像在与图像调整对象对应的位置处显示。例如,第一静止图像908在第一图像调整对象936的一侧上显示,第二静止图像910在第二图像调整对象938的一侧上显示等。在一些实施方案中,图像调整对象在时间线934上的位置处显示,该位置表示视频录制内的静止图像908至930的位置。
如图9E所示,视频调整对象958在时间线934上显示。视频调整对象958表示视频子剪辑,该视频子剪辑是由时间线934表示的视频录制的一部分(例如,少于全部)。视频调整对象956的左边缘960对应于视频子剪辑的开始时间,并且视频调整对象958的右边缘962对应于视频子剪辑的结束时间。
在一些实施方案中,与视频子剪辑的对应的缩略图在与视频调整对象对应的位置处显示。例如,缩略图924在视频调整对象958的左边缘960处显示。在一些实施方案中,缩略图在视频调整对象958的右边缘962处或视频调整对象958内显示。缩略图不一定对应于视频子剪辑的开始或结束帧,并且任选地是来自视频子剪辑的所选则代表帧。
在一些实施方案中,在与视频调整对象958的左边缘960对应的位置处接收的输入(例如,拖动输入)调整视频子剪辑的开始时间。当接收到拖动输入时,更新在时间线视图用户界面935中显示的图像的表示,以指示与时间线934上的左边缘960的当前位置对应的图像。当拖动输入完成时,视频子剪辑的开始时间被调整到视频剪辑内的时间,该时间与时间线934上的视频调整对象958的左边缘960的位置对应。在一些实施方案中,在与视频调整对象958的右边缘962对应的位置处接收的输入(例如,拖动输入)调整视频子剪辑的结束时间。当接收到拖动输入时,更新在时间线视图用户界面935中显示的图像的表示,以指示与时间线934上的右边缘962的当前位置对应的图像。当拖动输入完成时,视频子剪辑的结束时间被调整到视频剪辑内的时间,该时间与时间线934上的视频调整对象958的右边缘962的位置对应。
图9F至图9H示出了向右选择和移动第一图像调整对象936以更新与第一图像调整对象936相关联的静止图像908的输入。
在图9F中,检测到选择第一图像调整对象936的输入,如焦点选择器960所指示。响应于该输入,改变第一图像调整对象936的外观(例如,增加图像调整对象936的宽度)以指示其选择状态。
在图9G中,当焦点选择器960选择第一图像调整对象936时,第一图像调整对象936根据焦点选择器的移动开始沿箭头962指示的路径移动。
在图9H中,响应于焦点选择器960沿箭头962所示的路径的移动,第一图像调整对象936已移动到时间线934上的新位置,该新位置位于第一图像调整对象936的先前位置的右侧(如图9G所示),并且更新了静止图像908的表示932。静止图像908的经更新表示932是与时间线934上的第一图像调整对象936的新位置对应的图像。在图9I中,已经检测到先前输入的终止,并且当前未在时间线中选择图像调整对象(例如,没有图像调整显示为加宽或突出显示)。
图9J至图9K示出了向左选择和移动第一图像调整对象936以更新与第一图像调整对象936相关联的静止图像908的输入。
在图9J中,检测到选择第一图像调整对象936的输入,如焦点选择器964所指示。当焦点选择器964选择第一图像调整对象936时,第一图像调整对象936根据焦点选择器964的移动开始沿箭头966指示的路径移动。
在图9K中,响应于焦点选择器964沿箭头966所示的路径的移动,第一图像调整对象936已移动到时间线934上的新位置,该新位置位于第一图像调整对象936的先前位置的左侧(如图9J所示),并且更新了静止图像908的表示932。静止图像908的经更新表示932是与时间线934上的图像调整对象936的新位置对应的图像。在图9L中,已经检测到先前输入的终止,并且当前未在时间线中选择图像调整对象(例如,没有图像调整显示为加宽或突出显示)。
图9M至图9O示出了向右选择和移动第二图像调整对象938以更新与图像调整对象938相关联的静止图像910的输入。
在图9M中,检测到选择第二图像调整对象938的输入,如焦点选择器968所指示。响应于该输入,改变第二图像调整对象938的外观(例如,增加第二图像调整对象938的宽度),并且在时间线视图用户界面935中显示静止图像910的表示970。
在图9N中,当焦点选择器968选择第二图像调整对象938时,第二图像调整对象938根据焦点选择器968的移动开始沿箭头972指示的路径移动。
在图9O中,响应于焦点选择器968沿箭头972所示的路径的移动,第二图像调整对象938已移动到时间线934上的新位置,该新位置位于第二图像调整对象938的先前位置的右侧(如图9N所示),并且更新了静止图像910的表示970。静止图像910的经更新表示970是与时间线934上的第二图像调整对象938的新位置对应的图像。在图9P中,已经检测到先前输入的终止,并且当前未在时间线中选择图像调整对象(例如,没有图像调整显示为加宽或突出显示)。
在图9Q中,在与网格按钮906对应的位置处检测到输入(例如,轻击输入),如焦点选择器974所指示。响应于该输入,重新显示网格视图用户界面902,如图9S所指示。在一些实施方案中,如图9Q所示,从显示时间线视图用户界面935到显示网格视图用户界面902的过渡,如图9S所示,包括如图9Q至图9S所示的动画过渡。例如,在动画期间,静止图像908至930从时间线934逐渐上升,并且当静止图像908至930上升时,这些静止图像被重新布置成静止图像908至930的网格布置。在网格视图界面902中显示的静止图像908至930的网格包括静止图像908的经更新版本,如图9K中的静止图像908的表示932所指示(例如,在对第一图像调整对象936进行图9F至图9K所示的调整以更新静止图像908之后),以及静止图像910的经更新版本,如图9O中的静止图像910的表示970所示(例如,在对第二图像调整对象938进行图9M至图9O所示的调整以更新静止图像910之后)。
图10A至图10E是示出根据一些实施方案的同时捕获和编辑数字媒体的方法1000的流程图。如下所述,方法1000涉及利用来自相机用户界面中的相机的实时视图来显示帧流(例如,在第一方向上作为帧在显示器上滚动的多个新近捕获和录制的媒体图像)。滚过相机用户界面的帧流向用户提供视觉反馈,并用作刚刚捕获和/或录制的媒体图像的视觉提醒。帧流还允许用户花一些时间来提供附加的输入以标记、查看或操纵帧流中表示的图像,而不中断媒体的捕获和录制。从相机向帧流提供实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过及时提供最近录制的图像的视觉提醒,提供了对这些最近录制的图像执行附加操作的机会,而不会中断正在进行的媒体捕获和录制,并且在操作/与设备交互时帮助用户提供适当的输入并减少用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
方法1000在具有一个或多个处理器、存储器、相机(例如,安装在电子设备的背面,背离用户)和显示器(例如,触敏显示器)的电子设备上执行。在一些实施方案中,电子设备包括第二相机(例如,安装在电子设备的前面,面向用户)。方法1000中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
设备在显示器上显示(1002)相机用户界面(例如,图5C中的触摸屏112上的用户界面500),该相机用户界面包括来自相机的实时视图(例如,示出图5C中的树枝502)。在一些实施方案中,相机用户界面也包括用于启动图像录制的示能表示、用于设置操作模式的一个或多个示能表示(例如,闪光/照明设置、动态范围设置和/或图像滤波器设置)、以及用于在(第一)相机与第二相机之间切换的示能表示。
在显示来自相机的实时视图时,设备录制(1004)由相机捕获的媒体图像(例如,图像)(例如,将支持后期处理的纵横比、分辨率和帧速率的视频录制到任何视频、连拍组照片和高分辨率摄影中),同时继续显示来自摄像机的实时视图(例如,设备100正在录制图5C中的树枝502的图像,或者设备100正在将图像录制为图5V至图5X中的视频)。在一些实施方案中,也录制音频。另外,当帧在第一方向上在显示器上滚动(例如,当捕获录制中的图像时,每个第X图像在触敏显示器上以从右到左的方向在实时视图的底部上滚动)时,设备显示了在显示来自相机的实时视图时录制的多个媒体图像的表示(例如,在滚动中显示的多个捕获的媒体帧中的一些的表示)。例如,当设备100录制了包括树枝502和猫510的图像时,在图5D至图5G中,帧508、帧509等在滚动506中从右到左滚过实时视图的底部部分。在另一示例中,设备在图5V至图5W中录制图像,并且帧556至帧562在滚动506中从右向左滚过实时视图的底部部分。这些帧显示由设备捕获的小版本图像。并非每个录制的图像都显示在滚动506中(例如,猫510在帧509中不可见,然后,在下一帧512中,猫的四分之三已进入相机的视场)。在一些实施方案中,当首次启动媒体捕获应用程序时,设备显示来自相机的实时视图,但是由相机捕获的图像未被录制(例如,指定用于存储器中的持久存储,受自动和/或手动处理或删除),直到用户输入激活录制(例如,在一些实施方案中,在图5A中,设备100捕获树枝502的图像,但是没有开始录制图像并在屏幕上滚动图像的帧,直到检测到包括图5B中的接触504的轻击)。在图5C中,在检测到轻击之后,设备开始录制捕获的图像并显示滚动506,(例如,在一些实施方案中,如果设备100仅捕获图像,但在检测到包括图5B中的接触504的轻击之后没有开始录制图像,则当检测到长按输入时,例如在图5V至图5W中设备开始录制捕获的图像,并且在图55V至图5X中以滚动506显示录制的帧)。在一些实施方案中,一旦启动媒体捕获应用程序,设备就开始录制媒体(例如,没有单独的用户激活录制)。
在一些实施方案中,在录制由相机捕获的媒体图像前,在显示来自相机的实时视图时,设备在没有录制的情况下捕获(1006)与来自相机的实时视图对应的媒体图像;并且检测用相机激活媒体图像录制的第一输入(例如,检测来自相机的实时视图上的轻击输入或用于启动媒体捕获的示能表示(例如,录制按钮)(例如,在实时视图上显示))。在一些实施方案中,响应于检测到第一输入,开始录制媒体图像。例如,在一些实施方案中,设备100捕获图5A中的树枝502的图像,但是并未开始在屏幕上录制图像和滚动图像帧,直到检测到包括图5B中的接触504的轻击。在图5C中,在检测到轻击之后,设备开始录制捕获的图像并显示滚动506。
在一些实施方案中,“捕获”媒体是指电子设备在没有来自用户的主动干预的情况下自动、临时和实时存储媒体。在一些实施方案中,由相机捕获的媒体被自动存储(例如,在电子设备的存储器中)预先确定的持续时间(例如,当相机用户界面处于活动状态时,或者在捕获之后24小时),除非从用户接收指令以标记捕获的媒体用于后续处理(例如,标记、编辑、压缩、转换等)和/或持久存储,否则将自动删除或覆盖。在一些实施方案中,被标记用于后续处理或持久存储的媒体(例如,根据用户输入或预先配置的设备设置)被认为是“录制的”。响应于用户输入开始录制有助于减少不必要的存储空间使用并且使用户能够更好地控制设备的操作。节省存储空间并改善用户控制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过释放存储空间用于其他用途,帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,响应于第一输入的检测,开始将多个媒体图像的表示显示为在显示器上滚动的帧(1008)(例如,在一些实施方案例中,通过图5B中的接触504的轻击手势)(例如,在图5V中通过接触558的长按压输入,在一些实施方案中,其中仅通过较早的轻击输入开始捕获和不录制)。响应于用户输入显示帧流有助于减少不必要的视觉混乱,并使用户能够更好地控制设备的操作。节省显示空间并改善用户控制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过释放显示空间用于其他用途,帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在第一输入的检测前,开始将多个媒体图像的表示显示为在显示器上滚动的帧(1010)(例如,一旦开始捕获媒体图像,就开始将多个媒体图像的表示显示为在显示器上滚动的帧);例如,在一些实施方案中,应用程序被启动到图5C所示的状态并且自动开始录制)。自动启动帧流有助于减少查看捕获/录制图像所需的输入数量。自动启动帧流增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少执行期望操作需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,作为帧在显示器上滚动的多个图像的表示(例如,图5B至图5J中的帧508、帧509等)(1012)覆盖在来自相机的实时视图的一部分上(例如,在实时视图的底部,如图5B至图5J中的滚动506所示)。在实时视图上显示帧流有助于减少不必要的视觉混乱并节省显示空间。节省显示空间增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过释放显示空间用于其他用途),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,将多个媒体图像的表示显示为在显示器上滚动的帧包括(1014)从显示器的第一侧将相应的帧(例如,当前帧序列中的最后或最右边的帧,诸如图5E中的帧512)滚动到显示器上(例如,每个帧从显示器的右侧逐渐滑入,诸如图5E至图5G中的帧512);在将相应的帧滚动到显示器上时并且在显示整个相应的帧之前,在相应的帧内显示来自相机的实时视图的缩小尺寸的副本(例如,在显示器上仅可看到帧的左部部分;例如,帧512示出了在图5E至图5F中在用户界面500中显示的实时图像的副本);并且,在确定整个相应的帧已滚动到显示器上时,用与实时视图中的当前图像对象的相应媒体图像替换相应的帧中的实时视图的缩小尺寸的副本(例如,一旦相应的帧一直滚动到显示器上,实时视图的缩小尺寸的副本就会冻结;例如,一旦整个帧512在触摸屏112上可见,图像就会被冻结,如图5G所示)。在一些实施方案中,替换帧中的实时图像的媒体图像是在帧完全滚动到屏幕上之前捕获或录制的最后媒体图像(例如,紧接在帧512之前在图5F中录制的图像在触摸屏112上变得完全可见,是图5G中的帧512中显示的图像)。在一些实施方案中,替换帧中的实时图像的媒体图像是在帧完全滚动到屏幕上之后录制的第一媒体图像。在帧流结束时显示实时图像有助于提供关于时间线中帧的相对位置的进展的视觉反馈。增强的视觉反馈增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,作为帧在显示器上滚动的多个媒体图像的表示包括(1016)少于由相机录制的所有媒体图像(例如,在一个实施方案中,每秒录制三十张图像,在滚动中仅显示两张图像,例如,每第十五张录制的图像在滚动中显示)。例如,如图5I所示,其示出了猫510在帧514中示出的图像中在树枝502下行走,然后在帧516中示出的图像中躺下。尽管相机也在躺下过程中录制了猫的图像,但是这些图像不会在滚动506中显示。仅在帧流中显示录制图像的子集有助于减少不必要的视觉混乱并且更容易检查帧。视觉混乱的减少还增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过释放显示空间用于其他用途,帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,当显示来自相机的实时视图并且将多个图像的表示作为在显示器上滚动的帧时,设备检测到(1018)第二输入(例如,触敏显示器上的轻击手势,或电子设备上的虚拟或物理按钮上的按压输入),而焦点选择器位于与当前在显示器上滚动的第一媒体图像的相应表示对应的位置(例如,在检测到第二输入时、在最接近检测到第二输入时、在紧接检测到第二输入之前由相机捕获的图像);并且响应于检测第二输入,改变在滚动显示器的帧中的第一媒体图像的相应表示的外观(例如,突出显示、着色和/或放大滚动中的帧/图像),以指示第一媒体图像已被标记以供以后参考(例如,独立于也包括第一媒体图像的录制视频存储)。例如,设备100检测包括图5AF中的帧576上的接触580的轻击手势,并且作为响应,增加图5AG中的帧576的大小,以指示图像被标记以供以后参考。在一些实施方案中,设备创建标记第一媒体图像的元数据(例如,在第一图像上创建时间戳或标志,并将持久性存储的第一媒体图像录制为单独图像)。允许用户在滚动帧流中标记图像在标记图像时为用户提供了适当的视觉上下文。标记帧外观的改变提供了关于已经执行的操作的视觉反馈。视觉内容和改进的视觉反馈增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,相应标记的媒体图像的副本(1020)独立于(例如,作为单个图像)来自是录制的视频存储,该录制的视频包括在设备的存储器中的相应标记的媒体图像(例如,标记的图像的第一副本作为帧存储在录制的视频中(例如,作为未处理或处理过的视频),并且标记的图像的第二副本作为照片独立存储)。在一些实施方案中,在终止媒体图像的连续捕获之后,将所有标记的媒体帧和/或视频收集到相关联的媒体管理应用内的专用用户界面中(例如,设备从所收集的媒体流中挑选出所有标记的照片和视频)。在一些实施方案中,收集的媒体项以自动摘要显示,该自动摘要包括各种类型的媒体项,例如,如图7O所示。在一些实施方案中,收集的媒体以时间线或网格显示,如图9A和图9E所示。将标记的图像独立于也包括标记的图像的视频存储允许用户访问标记的图像,而与存储的视频无关,从而允许用户更好地控制存储的内容。改善的控制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少访问和操作标记的图像需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,相应标记的媒体图像的副本(1022)被配置为以与包括相应标记的媒体图像的录制的视频不同的纵横比(和/或分辨率)显示(例如,标记图像的副本与录制视频的处理方式不同,使得标记图像被配置为以照片纵横比显示,并且捕获的媒体被配置为以视频纵横比显示)。
标记图像具有独立于也包括标记图像的视频的显示纵横比的显示纵横比。这允许用户更好地控制如何显示存储的内容。改善的控制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少以适当的纵横比查看标记图像需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,当显示来自相机的实时视图并且将多个图像的表示作为在显示器上滚动的帧时,设备检测到(1024)第三输入(例如,在触敏显示器上显示的实时视图上的轻击手势,或者在电子设备上的虚拟或物理快门按钮上的按压输入),其标记同时捕获的图像(例如,在检测到第三输入时、在最接近检测到第三输入时、在紧接检测到第三输入之前由相机正在捕获的图像)(例如,同时捕获的图像是在实时视图中或在刚刚滚动到显示器上或将要完全滚动到显示器上的表示/帧中的实时图像中示出的图像);并且响应于检测第三输入,显示同时标记和捕获的图像的相应表示,其中同时标记和捕获的图像的相应表示的外观被改变(例如,相对于滚动中的图像的其他表示突出显示,着色和/或放大),以指示同时标记和捕获的图像已被标记以供以后参考(例如,独立于也包括同时捕获和标记的图像的录制视频存储)。例如,设备100检测到轻击手势,包括实时图像上的接触518,对应于滚动506中的帧516,如图5H所示。作为响应,设备标记捕获的图像并放大图5I中的帧516的显示。允许用户标记同时捕获的图像使用户能够更精确和及时地控制图像的标记。标记帧外观的改变提供了关于已经执行的操作的视觉反馈。改进的控制和视觉反馈增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在滚动显示器的多个数字媒体图像中显示(1026)同时标记和捕获的图像(图5J中的放大帧516)的相应表示,如果尚未标记同时标记和捕获的数字媒体图像,则无论是否已经显示了同时标记和捕获的图像的相应表示。例如,在一个实施方案中,每秒捕获三十张图像,并且在滚动中仅显示两张图像(例如,每第十五张捕获的图像在滚动中显示)。在此类实施方案中,即使同时标记和捕获的图像恰好不是将在滚动中显示的两张图像,也将图像的表示添加到滚动。在一些实施方案中,在滚动内不会显示标记的媒体图像的表示的情况下,设备将在时间上最接近的媒体图像的表示的外观改变为在滚动内显示的标记图像的外观。在帧流中显示标记的帧提供了关于已经执行的操作的视觉反馈。改进的视觉反馈增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在将多个图像的表示显示为在第一方向上在显示器上滚动的帧时(以及在显示来自相机的实时视图时),设备检测到(1028)第三输入,该第三输入引起焦点选择器沿与第一方向相反的第二方向移动(例如,当焦点选择器位于相机用户界面中的第一位置时开始的轻扫输入,该第一位置与作为在显示器上滚动的帧的多个图像的表示对应,其中轻扫输入包括焦点选择器在与第一方向相反的第二方向上的移动(例如,刷动滚动的轻扫或拖动手势);例如,包括接触544的移动546的轻扫手势在滚动506上从图5P中的位置544-a到图5Q中的位置544-b);并且,响应于检测到第三输入,根据焦点选择器的移动,在第二方向上滚动多个图像的表示作为在显示器上的帧(例如,倒回滚动)(例如,接触546的移动546导航滚动506中的帧,而与用户界面500中显示的实时图像无关,使得先前显示的帧514和帧515返回到触摸屏112上,如图5P至图5Q所示)。在一些实施方案中,当多个图像的表示在第二方向上在显示器上滚动时,来自相机的实时视图被先前捕获的图像中的一个或多个替换(例如,滚动506后面的实时图像也被倒回)。允许用户在帧流上轻扫以恢复不再在视图中的帧允许用户更好地控制存储的内容。改善的控制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少查看存储内容需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在将多个图像的表示显示为在显示器上滚动的帧时(以及在显示来自相机的实时视图时),设备检测到(1030)第四输入(例如,当焦点选择器位于与作为帧在显示器上滚动的图像的第一表示对应的位置时检测到的轻击输入;例如,包括图5J中的帧516上的接触524的轻击手势),第四输入激活(例如,打开)图像查看模式(例如,帧上的轻击手势);并且,响应于检测到激活图像查看模式的第四输入,通过在多个媒体图像上显示第一录制媒体图像(例如,与第一表示对应的录制图像)来替换来自相机的实时视图的显示(例如,响应于检测到图5J中的接触524,设备100用图5K中的图像查看用户界面526替换实时图像用户界面500的显示)。通过允许用户利用实时视图和帧流从用户界面进入图像查看模式,设备使用户能够更详细地查看录制的图像。能够使用实时视图从用户界面访问图像查看模式增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少检查存储内容需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,响应于检测激活图像查看模式的第四输入,设备创建(1032)在多个媒体图像中标记第一录制媒体图像的元数据。在一些实施方案中,当随后在帧滚动中显示第一录制媒体图像的表示时,也可以在视觉上标记该表示。在进入图像查看模式时自动标记图像增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少检查和标记存储图像需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在图像查看模式中显示第一录制媒体图像(例如,与第一表示对应的录制图像)时,设备检测到(1034)引起焦点选择器沿第三方向移动的第五输入(例如,在一些实施方案中,第三方向垂直于第一方向;在一些实施方案中,第三方向平行于第一方向)(例如,第五输入是轻扫输入,当焦点选择器位于相机用户界面中与第一录制媒体图像的显示对应的第一位置时,开始轻扫输入,其中轻扫输入包括焦点选择器在第三方向上的移动(例如,在具有垂直于录制的媒体图像的主轴的分量移动的方向上);例如,在图5L中包括向右的接触526的移动528的轻扫手势);并且响应于检测到第五输入,用第二录制媒体图像替换第一录制媒体图像的显示(例如,紧接在第一录制媒体图像之前或之后的录制图像;例如,设备100用图5M中躺下之前的猫的图像替换在图5L中显示位于树枝502下方的猫100的图像)。允许用户在图像查看模式下切换图像增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少检查附加的存储图像需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,当在图像查看模式中显示第一录制媒体时,响应于检测到引起焦点选择器在第三方向上移动的第五输入,设备创建(1036)标记第二录制媒体图像的元数据(并且任选地,删除标记第一录制媒体图像的元数据;例如,在图5J中标记了对应于猫510在树枝502下方躺下的图像的帧516,在图5K至图5L中,图像查看用户界面526内的导航标记了在猫刚刚躺下之前的图像,如图5L所示,并且未标记猫躺下的图像,如图5J所示。另外,当图像查看用户界面526由包括从图5N中的屏幕顶部向下的接触530的移动532的轻扫手势关闭时,先前标记的帧516被新标记的帧515替换,从而对应于图5O中在躺下之前的猫510的图像)(例如,刷过录制图像调整了时间戳,以表示应该存储哪个图像来作为独立于整个录制的图像数据的图像)。在一些实施方案中,针对在图像查看模式内显示的每个图像显示选择示能表示,并且允许用户在图像查看模式中选择将标记的多个图像。在图像查看模式下切换图像时自动标记图像增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少检查和标记存储图像需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在图像查看模式中显示第一录制媒体图像时(例如,如图5O中的滚动506的推进所示,在图像查看用户界面526被实时图像用户界面500替换之后),设备继续(1038)用相机录制媒体图像(例如,在后台处理中)。在图像查看模式下继续媒体录制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少录制媒体和检查存储内容需要的输入数量和时间),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在图像查看模式中显示相应的录制媒体图像(例如,第一、第二或后续照片,而不是来自相机的实时图像)时,设备检测到(1040)停用(例如,关闭)图像查看模式的第六输入(例如,包括从图5N中的屏幕顶部向下的接触530的移动532的轻扫手势);并且,响应于检测停用图像查看模式的第六输入,用来自相机的实时视图替换相应录制的媒体图像的显示(例如,在激活图像查看模式前,将媒体捕获应用程序返回到它所处的状态;例如,图5N中的设备100用图5O中的实时图像用户界面500替换图像查看用户界面526)。退出图像查看模式时允许用户返回实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少录制媒体和检查存储的媒体内容需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,当将多个图像的表示显示为在第一方向上在显示器上滚动的帧时(以及在显示来自相机的实时视图时),设备检测到(1042)第七输入,该第七输入指定录制的媒体图像序列的开始和结束(例如,检测对应于实时视图上的长按输入或深按输入的接触的初始触摸按下,以将当前录制的媒体图像标记为录制的媒体图像序列的开始(例如,创建识别视频剪辑开始的元数据),继续检测接触以标记录制的媒体图像序列的主体(例如,创建元数据以识别视频剪辑的主体),检测接触的抬离以将当前录制的媒体图像标记为录制的媒体图像序列的结束(例如,创建识别视频剪辑结束的元数据);例如,设备100在图5V至图5X中检测到包括接触558的长按手势)。响应于检测指定录制的媒体图像序列的开始和结束的第七输入,设备创建元数据,该元数据将录制的媒体图像序列标记为第一类型的媒体的单元(例如,视频剪辑);以及在作为帧在所述显示器上滚动的所述多个图像中,显示录制的媒体图像的序列被标记为第一类型的媒体单元的指示(例如,以滚动为单位突出显示、着色和/或放大帧/图像序列;例如,在图5V至图5X中放大了帧556、帧560和帧562。允许用户在显示帧流时标记视频增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少录制视频需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,录制的媒体图像序列的副本(例如,标记的视频剪辑)是(1044)独立于(例如,作为视频剪辑)录制的媒体图像(例如,全长录制的视频)存储在设备的存储器中(例如,录制的媒体图像序列的第一副本作为帧存储在录制的视频中(例如,作为未处理或处理的视频),并且标记的图像的第二副本作为视频剪辑单独存储)。在一些实施方案中,在终止媒体图像的连续捕获之后,将所有标记的媒体帧和/或视频收集到相关联的媒体管理应用内的专用用户界面中(例如,设备从所收集的媒体流中挑选出所有标记的照片和视频)。将标记的视频独立于也包括标记的视频的其余录制的图像数据存储允许用户访问标记的视频,而与存储的图像数据的其余部分无关,从而允许用户更好地控制存储的内容。改善的控制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少访问和操作标记的视频需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,录制的媒体图像序列的副本(1046)被配置为以与录制的媒体图像不同的纵横比(和/或分辨率)显示(例如,视频剪辑的副本与录制的视频的处理方式不同,使得标记的视频剪辑被配置为以与全长录制的视频不同的纵横比显示)。标记图像具有独立于也包括标记视频的录制媒体图像的显示纵横比的显示纵横比。这允许用户更好地控制如何显示存储的内容。改善的控制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少以适当的纵横比查看标记视频需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在将多个图像的表示显示为在显示器上滚动的帧时(以及在显示来自相机的实时视图时),设备检测到(1048)第八输入(例如,在焦点选择器位于与所标记的媒体图像序列的至少一部分对应的位置处时检测到的轻击手势,在作为帧在显示器上滚动的多个图像中;例如,在图5AA中的标记帧560上包括接触568的轻击手势,其激活了(例如,打开)视频查看模式(例如,标记帧序列中的帧上的轻击手势);并且,响应于检测激活视频查看模式的第八输入,用第一录制视频剪辑的回放替换来自相机的实时视图的显示(例如,第一录制视频剪辑对应于录制的媒体图像的标记序列;例如,设备用图5AB中的视频查看用户界面568替换图5AA中的实时图像用户界面500,并播放图5AB至图5AD中的标记视频)。在一些实施方案中,当处于视频查看模式时,设备显示用于从多个图像的表示中为标记的视频剪辑选择不同的开始和/或结束的控件(例如,可调整的边界线)。通过允许用户利用实时视图和帧流从用户界面进入视频查看模式,设备使用户能够更详细地查看录制的视频。能够使用实时视图从用户界面访问视频查看模式增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少检查存储内容需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在回放第一视频剪辑时(例如,如图5AE中的滚动506的推进所示,在视频查看用户界面568被实时图像用户界面500替换之后),设备继续(1050)用相机录制媒体图像。在视频查看模式下继续媒体录制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少录制媒体和检查存储内容需要的输入数量和时间),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在回放第一视频剪辑时,设备检测到(1052)第九输入(例如,包括从图5A中的触摸屏112的顶部向下的接触570的移动572的轻扫手势),第九输入停用了(例如,关闭)视频查看模式;并且,响应于检测停用图像查看模式的第九输入,用来自相机的实时视图替换第一视频剪辑的回放(例如,在激活视频查看模式前,将媒体捕获应用程序返回到它所处的状态;例如,图5AD中的设备100用图5AE中的实时图像用户界面500替换视频查看用户界面568的显示)。退出视频查看模式时允许用户返回实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少录制媒体和检查存储的媒体内容需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
应当理解,对图10A至图10E中已进行描述的操作的具体次序仅仅是示例,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法1200、1400、1600和1800)所述的其他过程的细节同样以类似的方式适用于上文相对于图10A至图10E所述的方法1000。例如,上面参考方法1000描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画任选地具有参考本文描述的其他方法(例如,方法1200、方法1400、方法1600和方法1800)在此描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画的一个或多个特征。为了简明起见,此处不再重复这些细节。
根据一些实施方案,图11示出根据各种所述实施方案的原理进行配置的电子设备1100的功能框图。该设备的功能块任选地由执行各种所述实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图11中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图11所示,电子设备1100包括:显示单元1102,其被配置为显示用户界面;相机单元1106,其被配置为捕获媒体;以及处理单元1108,其被耦接到显示单元1102和相机单元1106。在一些实施方案中,处理单元包括检测单元1110、录制单元1112、捕获单元1114、滚动单元1116、替换单元1118、改变单元1120和创建单元1122。
处理单元1108被配置为:能够在显示单元1102上显示(例如,利用显示单元1102)相机用户界面,相机用户界面包括来自相机单元1106的实时视图;在显示来自相机单元1106的实时视图时:在继续显示来自相机单元1106的实时视图时,录制(例如,利用录制单元1112)由相机单元1106捕获的媒体图像;并且能够显示(例如,利用显示单元1102)多个媒体图像的表示,媒体图像是在将来自相机单元1106的实时视图显示为在第一方向上在显示单元1102上滚动(例如,利用滚动单元1116)的帧时录制的。
在一些实施方案中,处理单元1108还被配置为:在录制由相机单元1106捕获的媒体图像前:在显示来自相机单元1106的实时视图时:在没有录制的情况下捕获(例如,利用捕获单元1114)与来自相机单元1106的实时视图对应的媒体图像;并且检测(例如,利用检测单元1110)利用相机单元1106激活媒体图像录制的第一输入,其中响应于第一输入的检测开始媒体图像的录制。
在一些实施方案中,将多个媒体图像的表示的显示单元1102作为在显示单元1102上滚动(例如,利用滚动单元1116)的帧是响应于第一输入的检测开始的。
在一些实施方案中,将多个媒体图像的表示的显示单元1102作为在显示单元1102上滚动(例如,利用滚动单元1116)的帧是在第一输入的检测前开始的。
在一些实施方案中,多个图像的表示作为帧在显示单元1102上滚动(例如,利用滚动单元1116)覆盖了在来自相机单元1106的实时视图的一部分。
在一些实施方案中,将多个媒体图像的表示显示为在显示单元1102上滚动(例如,利用滚动单元1116)的帧包括:将相应的帧从显示单元1102的第一侧滚动(例如,利用滚动单元1116)到显示单元1102上;在将相应的帧滚动(例如,利用滚动单元1116)到显示单元1102上时并且在显示整个相应的帧之前,在相应的帧内显示(例如,利用显示单元1102)来自相机单元1106的实时视图的缩小尺寸的副本;并且在确定整个相应帧已经滚动到显示单元1102上时,用对应于实时视图中的当前图像的相应媒体图像替换(例如,利用替换单元1118)相应帧中的实时视图的缩小尺寸的副本。
在一些实施方案中,多个媒体图像的表示作为帧在显示单元1102上滚动(例如,利用滚动单元1116)包括少于由相机单元1106录制的所有媒体图像。
在一些实施方案中,处理单元1108还被配置为:在显示来自相机单元1106上的实时视图并且将多个图像的表示显示为在显示单元1102上滚动(例如,利用滚动单元1116)的帧时:当焦点选择器位于与当前在显示单元1102上滚动(例如,利用滚动单元1116)的第一媒体图像的相应表示对应的位置时,检测(例如,利用检测单元1110)第二输入;并且响应于检测所述第二输入,改变(例如,利用改变单元1120)滚动(例如,利用滚动单元1116)显示单元1102的帧中的第一媒体图像的相应表示的外观,以指示第一媒体图像已被标记以供以后参考。
在一些实施方案中,处理单元1108还被配置为:在显示来自相机单元1106上的实时视图并且将多个图像的表示显示为在显示单元1102上滚动(例如,利用滚动单元1116)的帧时:检测(例如,利用检测单元1110)第三输入,该第三输入标记了当前捕获的图像;并且响应于检测第三输入,能够显示(例如,利用显示单元1102)同时标记和捕获的图像的相应表示,其中同时标记和捕获的图像的相应表示的外观被改变,以指示同时标记和捕获的图像已被标记以供以后参考。
在一些实施方案中,在显示单元1102上滚动(例如,利用滚动单元1116)的多个数字媒体图像中,显示同时标记和捕获的图像的相应表示,如果尚未标记同时标记和捕获的数字媒体图像,则无论是否已经显示了同时标记和捕获的图像的相应表示。
在一些实施方案中,相应标记的媒体图像的副本独立于包括相应标记的媒体图像的录制视频存储在设备的存储器中。
在一些实施方案中,相应标记的媒体图像的副本被配置为以与包括相应标记的媒体图像的录制视频不同的纵横比显示。
在一些实施方案中,处理单元1108还被配置为:在将多个图像的表示显示为在第一方向上在显示单元1102上滚动(例如,利用滚动单元1116)的帧时:检测(例如,利用检测单元1110)第三输入,该第三输入使焦点选择器沿与第一方向相反的第二方向移动;并且响应于检测第三输入,根据焦点选择器的移动,在第二方向上滚动(例如,利用滚动单元1116)多个图像的表示作为在显示单元1102上的帧。
在一些实施方案中,处理单元1108还被配置为:在将多个图像的表示显示为在显示单元1102上滚动(例如,利用滚动单元1116)的帧时:检测(例如,利用检测单元1110)第四输入,该第四输入激活了图像查看模式;并且响应于检测激活图像查看模式的第四输入,用多个媒体图像中的第一录制媒体图像的显示替换(例如,利用替换单元1118)来自相机单元1106的实时视图的显示。
在一些实施方案中,处理单元1108还被配置为:响应于检测激活图像查看模式的第四输入,创建(例如,利用创建单元1122)在多个媒体图像中标记第一录制媒体图像的元数据。50.根据权利要求48或49所述的电子设备,处理单元1108还被配置为:在图像查看模式下显示第一录制媒体图像时:检测(例如,利用检测单元1110)第五输入,该第五输入引起焦点选择器在第三方向上移动;并且响应于检测第五输入,用第二录制媒体图像替换(例如,利用替换单元1118)第一录制媒体图像的显示。
在一些实施方案中,处理单元1108还被配置为:当在图像查看模式中显示第一录制媒体时,响应于检测到引起焦点选择器在第三方向上移动的第五输入,创建(例如,利用创建单元1122)标记第二录制媒体图像的元数据。
在一些实施方案中,在图像查看模式下显示第一录制媒体图像时,设备继续用相机单元1106录制(例如,利用录制单元1112)媒体图像。
在一些实施方案中,处理单元1108还被配置为:在图像查看模式下显示相应录制的媒体图像时:检测(例如,利用检测单元1110)第六输入,该第六输入停用了图像查看模式;并且响应于检测停用图像查看模式的第六输入,用来自相机单元1106的实时视图替换(例如,利用替换单元1118)相应录制的媒体图像的显示。
在一些实施方案中,处理单元1108还被配置为:在将多个图像的表示显示为在第一方向上在显示单元1102上滚动(例如,利用滚动单元1116)的帧时:检测(例如,利用检测单元1110)第七输入,该第七输入指定录制的媒体图像序列的开始和结束;响应于检测指定录制的媒体图像序列的开始和结束的第七输入,创建(例如,利用创建单元1122)元数据,该元数据将录制的媒体图像序列标记为第一类型的媒体的单元;并且在多个图像中,能够将在显示单元1102上滚动(例如,利用滚动单元1116)的指示显示(例如,利用显示单元1102)为帧,录制的媒体图像序列被标记为第一类型的媒体单元。
在一些实施方案中,录制的媒体图像序列的副本独立于录制的媒体图像存储。
在一些实施方案中,录制的媒体图像的序列的副本被配置为以与录制的媒体图像不同的纵横比显示。
在一些实施方案中,处理单元1108还被配置为:在将多个图像的表示显示为在显示单元1102上滚动(例如,利用滚动单元1116)的帧时:检测(例如,利用检测单元1110)第八输入,该第八输入激活了视频查看模式;并且响应于检测激活视频查看模式的第八输入,用回放第一录制的视频剪辑替换(例如,利用替换单元1118)来自相机单元1106的实时视图的显示。
在一些实施方案中,在回放第一视频剪辑时,设备继续用相机单元1106录制(例如,利用录制单元1112)媒体图像。59.根据权利要求57或58所述的电子设备,处理单元1108还被配置为:在回放第一视频剪辑时,检测(例如,利用检测单元1110)第九输入,该第九输入停用了视频查看模式;并且响应于检测停用图像查看模式的第九输入,用来自相机单元1106的实时视图替换(例如,利用替换单元1118)第一视频剪辑的回放。
上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图10A至图10E所述的操作任选地由图1A至图1B或图11中所描绘的部件来实现。例如,操作1004中的录制操作、操作1006中的检测操作,任选地,由事件分类器170、事件识别器180和事件处理器190实现。事件分类器170中的事件监视器171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息传送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否与预定义的事件或子事件对应,预定义的事件或子事件诸如为对用户界面上的对象的选择。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地利用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序所显示的内容。类似地,本领域的技术人员会清楚地知道基于在图1A至图1B中所描绘的部件可如何实现其他过程。
图12A至图12D是示出根据一些实施方案的在不同成像模式下捕获数字媒体的方法1200的流程图。如下所述,方法1200涉及,响应于继续检测已在设备上激活单个图像录制模式的输入,当连续检测到输入超过相应的阈值量的时间以触发一个或多个附加图像录制模式时,在以后的时间点自动切换到一个或多个附加图像录制模式。另外,也显示了当前活动的媒体录制模式的视觉指示。基于在不同时间点满足不同时间阈值的连续输入和对应的视觉反馈来自动切换媒体录制模式增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过基于满足预设条件执行模式切换操作而不需要单独的用户输入,并且不中断正在进行的媒体录制),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
方法1200在具有一个或多个处理器、存储器、相机(例如,安装在电子设备的背面,背离用户)和显示器(例如,触敏显示器)的电子设备(例如,图3中的设备300,或图1A中的便携式多功能设备100)处执行。在一些实施方案中,电子设备包括第二相机(例如,安装在电子设备的前面,面向用户)。方法1200中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
设备显示器(1202)在显示器上显示相机用户界面(例如,图6A中的用户界面600),相机用户界面包括来自相机的实时视图(例如,包括图6A中的树枝602的实时视图)。在一些实施方案中,相机用户界面也包括用于启动图像录制的示能表示、用于设置操作模式的一个或多个示能表示(例如,闪光/照明设置、动态范围设置和/或图像滤波器设置)、以及用于在(第一)相机与第二相机之间切换的示能表示。
在显示来自相机的实时视图时,设备通过第一接触(例如,图6B中的接触604、图6D中的接触608、图6G中的接触614或图6K中的接触618)检测(1204)输入的开始,该第一接触用相机激活媒体录制(例如,设备检测实时视图上的轻击或用于启动图像捕获的示能表示(例如,在来自相机的实时视图上显示的示能表示))。
响应于检测第一接触的输入的开始,该第一接触利用相机激活媒体录制,设备显示(1206)相机处于与单个图像的录制对应的第一媒体录制模式的第一指示(例如,图6B、图6D、图6G和图6K中的环606)。在一些实施方案中,响应于检测第一接触的输入的开始,相机录制单个图像(例如,设备100获取图6B中的树枝602的单个图像)。在一些实施方案中,响应于检测第一接触的输入的开始,相机开始以原始格式捕获媒体,该原始格式可以被处理成各种不同类型的媒体(例如,SD视频、HD视频、不同纵横比的图像、分辨率等),并且如果设备没有继续检测到超过预定义时间阈值的第一接触,则标记将保留在电子设备的存储器(或外部存储器)中的单个图像(例如,在输入是轻击的情况下,保留单个图像并且在预定义时间段之后(例如,在输入终止之后),从存储器中自动删除所有其他媒体数据)(例如,设备100开始录制图6G中的猫610的行走)。
在一些实施方案中,“捕获”媒体是指电子设备在没有来自用户的主动干预的情况下自动、临时和实时存储媒体。由相机捕获的媒体被自动存储(例如,在电子设备的存储器中)预先确定的持续时间(例如,当相机用户界面处于活动状态时,或者在捕获之后24小时),除非从用户接收指令以标记捕获的媒体用于后续处理(例如,标记、编辑、压缩、转换等)和/或持久存储,否则将自动删除或覆盖。在一些实施方案中,被标记用于后续处理和/或持久存储的媒体(例如,根据用户输入或预先配置的设备设置)被认为是“录制的”。
在显示相机处于第一媒体录制模式(例如,单个图像录制模式)的第一指示时,设备检测到(1208)第一接触的输入的继续(例如,继续检测第一接触)(例如,继续检测图6E中的接触608、图6H中的接触614、或图6L中的接触618)。
响应于检测第一接触的输入的继续,并且在检测输入的终止之前(例如,继续检测第一接触)(1210),根据至少确定输入的继续满足第一预定义时间阈值(例如,电子设备在满足第一预定义时间阈值的时间段内连续检测到第一接触;例如,图6E、图6H和图6L中的时间阈值TTS(1212),设备显示(1214)第二指示(例如,在图6E、图6H和图6L中环绕检测到的接触的位置的计数标记612),指示相机处于第二媒体录制模式,该第二媒体录制模式对应于与第一接触的输入继续同时录制的图像序列(例如,继续检测第一接触(例如,在第一接触抬离时相机停止捕获图像的地方))。在一些实施方案中,在第二图像录制模式中,相机录制图像连拍,每个图像在时间上分开预定义的时间段,该时间长于限定相机被配置为捕获的视频帧速率的最小时间段(例如,设备100录制了猫610在图6E中走入视场的照片连拍)。在一些实施方案中,在处于第二图像录制模式时,相机以与多种不同录制模式兼容的配置录制多个图像(例如,视频),但是如果设备没有继续检测到超过第二时间阈值的第一接触,则标记将保留在电子设备的存储器(或外部存储器)中的一些(少于全部)多个图像(例如,在输入长于轻击但比长按短的情况下,保留图像连拍,并且在输入终止之后自动从存储器中删除所有其他图像;例如,当检测图6F中的接触608抬离时)。
在显示相机处于第二媒体录制模式(例如,图像连拍录制模式)的第二指示时,设备检测到(1216)第一接触的输入的进一步继续(例如,继续检测第一接触)
响应于检测第一接触的输入的进一步继续,并且在检测输入的终止之前(例如,继续检测第一接触)(1218)(例如,继续检测图6I中的接触614或图6M中的接触618),根据至少确定输入的进一步继续满足第二预定义时间阈值(例如,电子设备已经连续检测到第一接触一段时间,该时间段满足比第一预定义时间阈值长的第二预定义时间阈值;例如,图6I和图6M中的时间阈值TTM),设备显示(1220)第三指示(例如,图6I和图6M中标记为环616),指示相机处于与视频录制对应的第三媒体录制模式。在一些实施方案中,相机在输入终止时继续录制视频(例如,第一接触的抬离)并继续录制视频,直到检测到终止视频录制的输入为止(例如,设备100在检测图6P中的接触618的抬离时继续录制视频。在检测图6R中的接触624时,设备在图6S中停止录制。在一些实施方案中,当激活第三图像录制模式时,相机保持在输入满足第二时间阈值时开始的视频(例如,在达到第二时间阈值之前,相机录制单个图像或仅保持来自在达到第二时间阈值前捕获的所有图像的一些单独图像;例如,在图6I中继续检测接触614之后录制的视频包括猫610在树枝602下行走和躺下的镜头,如图6G至图6H所示,在设备100进入第三媒体录制模式之前捕获)。在一些实施方案中,当激活第三图像录制模式时,相机保持在最初检测到输入中的第一接触时开始的视频。
在一些实施方案中,响应于检测第一接触的输入的继续,并且在检测输入的终止之前(例如,继续检测第一接触)(1210)(例如,继续检测图6E中的接触608、图6H中的接触614、或图6L中的接触618),根据至少确定输入的继续满足第一预定义时间阈值(例如,电子设备在满足第一预定义时间阈值的时间段内连续检测到第一接触;例如,图6E、图6H和图6L中的时间阈值TTS)(1212),响应于检测第一接触的进一步继续输入,并且在检测输入终止之前(例如,继续检测第一接触)(1218),并且根据输入的进一步继续不满足第二预定义时间阈值的确定(例如,图6E、图6H和图6L中的时间阈值TTM),设备维持(1222)显示相机处于第二媒体录制模式的第二指示(例如,环绕设备在图6E、图6H和图6L中检测到接触的位置的计数标记612)。
在一些实施方案中,响应于检测第一接触的输入的继续,并且在检测输入的终止之前(例如,继续检测第一接触)(1210)(例如,继续检测图6B中的接触604、图6D中的接触608、图6G中的接触614、或图6K中的接触618),根据输入的继续满足第一预定义时间阈值的确定(例如,图6B、图6D、图6G和图6K中的时间阈值TTS),设备维持(1224)相机处于第一媒体录制模式的第一指示(例如,图6B、图6D、图6G和图6K中的环606)的显示。
在一些实施方案中,响应于检测第一接触的输入的开始,第一接触利用相机激活媒体录制,利用与包括第一、第二和第三媒体录制模式的多种媒体录制模式兼容的配置,设备开始(1226)继续捕获媒体图像(例如,捕获并临时存储以最大分辨率、帧速率和尺寸以及纵横比捕获的视频)。
在一些实施方案中,在显示对应于第一、第二和第三媒体录制模式中的相应一个的第一、第二和第三指示中的相应一个时,设备检测到(1228)第一接触的输入的终止(例如,检测第一接触的抬离;例如,图6C中的接触604、图6F中的接触608或图6J中的接触614的抬离);并且响应于检测到通过第一接触进行的输入的终止:从连续捕获的媒体图像中获取与第一、第二和第三媒体录制模式中的相应一个对应的第一类型的媒体(例如,单个图像、图像连拍或视频);并且持久地存储所获取的第一类型的媒体(例如,持久地存储单个图像、图像连拍或视频,并且丢弃其余的媒体图像数据)。在一些实施方案中,设备还停止显示第一、第二和第三指示中的所述相应的一个。在一些实施方案中,只有当在用于激活连续视频录制模式的第三阈值量的时间已经到期之前终止输入时,输入的终止才终止录制并触发第一类型的媒体的输出(例如,在图6Q中的第三阈值TTL之后的接触618的抬离不会终止图像录制)。基于激活的媒体录制模式,在输入终止时自动存储适当类型的媒体增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少录制期望类型媒体需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,响应于检测第一接触的输入终止(例如,图6C中的接触604、图6F中的接触608或图6J中的接触614的抬离),设备停止(1230)连续捕获具有与多种媒体录制模式兼容的配置的媒体图像。在一些实施方案中,只有当在用于激活连续视频录制模式的第三阈值量的时间已经到期之前终止输入时,输入的终止才终止连续捕获媒体图像(例如,在图6Q中的第三阈值TTL之后的接触618的抬离不会终止图像录制)。在输入终止时自动停止录制媒体增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少在期望时间停止录制需要的输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,当相机处于第一媒体录制模式,检测到第一接触的输入的终止(1232)(例如,单个图像录制模式;例如,图6C中的接触604的抬离);并且第一类型媒体包括具有第一组媒体属性的单个图像(例如,照片的第一尺寸、纵横比和分辨率,它们与已捕获的多模态媒体的媒体属性组不同)。例如,裁剪、降采样和/或收缩来自多模态媒体的帧,以生成具有第一组媒体属性的单个图像。基于激活的媒体录制模式,在输入终止时自动存储适当类型的媒体(例如,单个图像)增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过基于满足预设条件执行操作),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,当相机处于第二媒体录制模式,检测到第一接触的输入的终止(1234)(例如,单个连拍录制模式;例如,图6F中的接触608的抬离);并且第一类型媒体包括具有第二组媒体特性的两个或多个图像序列(例如,照片序列的第一尺寸、纵横比、分辨率和帧速率,它们与已捕获的多模态媒体的媒体属性组不同)。例如,裁剪、降采样和/或收缩来自多模态媒体的两个或多个帧,以生成具有第二组媒体属性的图像序列(例如,图像序列的帧速率低于已捕获的多模态媒体的帧速率,并且低于可从多模态媒体提取的视频)。在一些实施方案中,两个或多个图像序列从检测到第一输入的开始时的时间或附近开始(例如,在检测到第一输入的开始之前或之后)。基于激活的媒体录制模式,在输入终止时自动存储适当类型的媒体(例如,图像连拍中的图像序列)增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过基于满足预设条件执行操作),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,两个或多个图像序列包括(1236)在相机进入第二媒体录制模式之前捕获的至少一个图像(例如,在图6F中,响应于检测接触608的抬离而存储的图像序列包括在设备进入第二媒体录制模式之前在图6D中捕获的没有猫610的图像,如图6E所示)。包括在第二媒体录制模式之前捕获的图像进入到以第二媒体录制模式存储的图像序列中增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少包括较早在随后激活的媒体录制模式下创建的媒体项中捕获的媒体内容需要的步骤数),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,当相机处于第三媒体录制模式,检测到第一接触的输入的终止(1238)(例如,视频录制模式;例如,图6J中的接触614的抬离);并且第一类型媒体包括具有第三组媒体属性的视频(例如,照片的第一尺寸、纵横比、分辨率和帧速率,它们与已捕获的多模态媒体的媒体属性组不同)。例如,裁剪、降采样和/或收缩来自多模态媒体的帧序列,以生成具有第三组媒体属性的视频(例如,视频的帧速率低于或等于已捕获的多模态媒体的帧速率,并且高于可从多模态媒体提取的图像连拍)。基于激活的媒体录制模式,在输入终止时自动存储适当类型的媒体(例如,视频)增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过基于满足预设条件执行操作),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,视频包括(1240)在相机进入第三媒体录制模式之前捕获的至少一个帧。在一些实施方案中,视频从检测到第一输入的开始时的时间或附近开始(例如,在检测到第一输入的开始的稍微之前或之后)(例如,在图6J中响应于检测接触614的抬离而存储的视频,包括在树枝602下行走的猫610的图像,如图6G所捕获,在设备进入第三媒体录制模式之前,如图6I所示)。包括在第三媒体录制模式之前捕获的图像进入到以第三媒体录制模式存储的视频中增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少包括较早在随后激活的媒体录制模式下创建的媒体项中捕获的媒体内容需要的步骤数),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,显示相机处于第一媒体录制模式的第一指示包括(1242)显示具有第一外观的录制示能表示(例如,图6B、图6D、图6G和图6K中的环606);显示相机处于第二媒体录制模式的第二指示包括显示具有与第一外观不同的第二外观的录制示能表示(例如,第一外观是圆形按钮,第二外观包括圆形按钮周围的一系列刻度标记和/或圆形按钮上方的连拍计数指示器,例如,环绕在图6E、图6H和图6L中检测到的接触位置的计数标记612);并且显示相机处于第三媒体录制模式的第三指示包括显示具有与第一外观和第二外观不同的第三外观的录制示能表示(例如,第一外观是圆形快门按钮,第二外观包括圆形快门按钮周围的一系列刻度标记和/或圆形快门按钮上方的连拍计数指示器,第三外观包括圆形录制按钮,在圆形录制按钮周围有一系列更紧密间隔的刻度标记和/或在圆形录制按钮上方的录制持续时间指示器;例如,图6I和图6M中标记的环616)。显示不同媒体录制模式的不同指示增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,显示相机处于第一媒体录制模式的第一指示包括以第一视觉特征(例如,第一纵横比、尺寸和/或分辨率)显示来自相机的实时视图;并且显示相机处于第三媒体录制模式的第三指示包括以与第一视觉特征不同的第二视觉特征(例如,第二纵横比、尺寸和/或分辨率)显示来自相机的实时视图。为不同的媒体录制模式显示具有不同视觉特征的指示增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,显示相机处于第一媒体录制模式的第一指示包括(1246)在第一状态下显示模式指示器(例如,处于相机状态的来回切换开关)(例如,处于不活动状态的视频指示器);显示相机处于第三媒体录制模式的第三指示包括在第二状态下显示模式指示器(例如,处于视频状态的来回切换开关)(例如,处于不活动状态的视频指示器);并且,在检测第一接触的输入继续时,设备显示从第一状态的模式指示器到第二状态的模式指示器的动画过渡(例如,模式选择器的来回切换按钮逐渐扩展以覆盖视频图标)(例如,视频指示器逐渐从非活动状态改变为活动状态)。当设备在不同媒体录制模式之间过渡时显示动画过渡增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在显示与第三媒体录制模式对应的第三指示时,设备检测到(1248)第一接触的输入终止(例如,检测第一接触的抬离;例如,图6Q中的接触618的抬离)。另外,响应于检测第一接触的输入终止,根据输入的持续时间满足第三预定义时间阈值的确定(例如,设备连续检测到第一接触超过第三阈值量的时间,该时间长于进入视频录制模式所需的阈值量的时间;例如,图6O中的时间阈值TTL),设备继续利用与多种媒体录制模式兼容的配置捕获媒体图像,直到检测到与第一输入不同的终止输入;在检测终止输入时从连续捕获的媒体处获取第一视频(例如,第一视频包括从第一接触的输入的初始检测到终止输入的检测的整个持续时间内捕获的帧);持久地存储所获取的第一视频(例如,持久地存储视频,并且丢弃其余的媒体图像数据;例如,图6R中包括接触624的轻击手势终止了视频录制,如图6S所示)。根据输入的持续时间不满足第三预定义时间阈值的确定(例如,设备连续检测到第一接触超过第二阈值量的时间以进入视频录制模式,但是不超过第三阈值量的时间以激活连续视频录制模式;例如,图6J中的接触614的抬离),设备利用与多种媒体录制模式兼容的配置停止媒体图像的继续捕获;从连续捕获的媒体获取第二视频(例如,第二视频包括在第一接触的输入的整个持续时间内捕获的帧);并且持久地存储所获取的第二视频(例如,持久地存储视频,并且丢弃其余的媒体图像数据)。
当输入维持足够量的时间时进入连续录制模式,并且在进入连续录制模式之后需要单独输入以终止视频录制增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少开始连续录制模式需要的用户输入数量,并为用户提供更精确的控制,以便何时停止连续录制),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
应当理解,对图12A-图12D中的操作进行描述的具体次序仅仅是示例,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法1000、1400、1600和1800)所述的其他过程的细节同样以类似的方式适用于上文相对于图12A至图12D所述的方法1200。例如,上面参考方法1200描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画任选地具有参考本文描述的其他方法(例如,方法1000、方法1400、方法1600和方法1800)在此描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画的一个或多个特征。为了简明起见,此处不再重复这些细节。
根据一些实施方案,图13示出了根据各种所述实施方案的原理进行配置的电子设备1300的功能框图。该设备的功能块任选地由执行各种所述实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图13中所述的功能块任选地被组合或被分离为子块,以便实现各种所述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图13所示,电子设备1300包括:显示单元1302,其被配置为显示用户界面;相机单元1306,其被配置为捕获媒体;以及处理单元1308,其被耦接到显示单元1302和相机单元1306。在一些实施方案中,处理单元包括检测单元1310、捕获单元1312、获取单元1314和存储单元1316。
处理单元1308被配置为:能够在显示器上显示(例如,利用显示单元1302)相机用户界面,相机用户界面包括来自相机单元1306的实时视图;在显示来自相机单元1306的实时视图时,通过第一接触检测(例如,利用检测单元1310)输入的开始,该第一接触利用相机单元1306激活媒体录制;响应于检测第一接触的输入的开始,该第一接触利用相机单元1306激活媒体录制,能够显示(例如,利用显示单元1302)相机单元1306处于与单个图像的录制对应的第一媒体录制模式的第一指示;在显示相机单元1306处于第一媒体录制模式的第一指示时,检测(例如,利用检测单元1310)第一接触的输入继续;响应于检测第一接触的输入的继续,并且在检测输入的终止之前:根据至少确定输入的继续满足第一预定义时间阈值:能够显示(例如,利用显示单元1302)相机单元1306处于第二媒体录制模式的第二指示,第二媒体录制模式对应于与第一接触的输入的继续同时录制的图像序列;在显示相机单元1306处于第二媒体录制模式的第二指示时,检测(例如,利用检测单元1310)第一接触的输入的进一步继续;响应于检测第一接触的输入的进一步继续,并且在检测输入的终止之前:根据至少确定输入的进一步继续满足第二预定义时间阈值,能够显示(例如,利用显示单元1302)相机单元1306处于对应于视频录制的第三媒体录制模式的第三指示。
在一些实施方案中,处理单元1308还被配置为:响应于检测第一接触的输入的继续并且在检测输入的终止之前:根据至少确定输入的继续满足第一预定义时间阈值:响应于检测第一接触的输入的进一步继续并且在检测输入终止之前:根据输入的进一步继续不满足第二预定义时间阈值的确定,维持显示(例如,利用显示单元1302)第二指示,即相机单元1306处于第二媒体录制模式。
在一些实施方案中,处理单元1308还被配置为:响应于检测第一接触的输入的继续并且在检测输入终止之前:根据输入的继续不满足第一预定义时间阈值的确定,维持显示(例如,利用显示单元1302)第一指示,即相机单元1306处于第一媒体录制模式。
在一些实施方案中,处理单元1308还被配置为:响应于检测第一接触的输入的开始,该第一接触利用相机单元1306激活媒体录制,利用与包括第一、第二和第三媒体录制模式的多种媒体录制模式兼容的配置停止媒体图像的继续捕获(例如,利用捕获单元1312)。
在一些实施方案中,处理单元1308还被配置为:在显示对应于第一、第二和第三媒体录制模式中的相应一个的第一、第二和第三指示中的相应一个时,检测(例如,利用检测单元1310)第一接触的输入的终止;并且响应于检测到通过第一接触进行的输入的终止:从连续捕获的媒体图像中获取(例如,利用获取单元1314)与第一、第二和第三媒体录制模式中的相应一个对应的第一类型的媒体;并且持久地存储(例如,利用存储单元1316)所获取的第一类型的媒体。
在一些实施方案中,处理单元1308还被配置为:响应于检测第一接触的输入的终止,利用与多种媒体录制模式兼容的配置停止媒体图像的继续捕获(例如,利用捕获单元1312)。
在一些实施方案中,在相机单元1306处于第一媒体录制模式时,检测到第一接触的输入的终止;并且第一类型的媒体包括具有第一组媒体属性的单个图像。
在一些实施方案中,在相机单元1306处于第二媒体录制模式时,检测到第一接触的输入的终止;并且第一类型的媒体包括具有第二组媒体属性的两个或多个图像的序列。
在一些实施方案中,两个或多个图像序列包括在相机单元1306进入第二媒体录制模式之前捕获的至少一个图像。
在一些实施方案中,在相机单元1306处于第三媒体录制模式时,检测到第一接触的输入的终止;并且第一类型的媒体包括具有第三组媒体属性的视频。
在一些实施方案中,视频包括在相机单元1306进入第三媒体录制模式之前捕获的至少一个帧。
在一些实施方案中,显示相机单元1306处于第一媒体录制模式的第一指示包括显示(例如,利用显示单元1302)具有第一外观的录制示能表示;显示相机单元1306处于第二媒体录制模式的第二指示包括显示(例如,利用显示单元1302)具有与第一外观不同的第二外观的录制示能表示;并且显示相机单元1306处于第三媒体录制模式的第三指示包括显示(例如,利用显示单元1302)具有与第一外观和第二外观不同的第三外观的录制示能表示。
在一些实施方案中,显示相机单元1306处于第一媒体录制模式的第一指示包括利用第一视觉特征显示(例如,利用显示单元1302)来自相机单元1306的实时视图;并且显示相机单元1306处于第三媒体录制模式的第三指示包括以与第一视觉特征不同的第二视觉特征显示(例如,利用显示单元1302)来自相机单元1306的实时视图。
在一些实施方案中,显示相机单元1306处于第一媒体录制模式的第一指示包括显示(例如,利用显示单元1302)处于第一状态的模式指示器;显示相机单元1306处于第三媒体录制模式的第三指示包括显示(例如,利用显示单元1302)处于第二状态的模式指示器;并且处理单元1308还被配置为:在检测第一接触的输入的继续时,能够显示(例如,利用显示单元1302)从第一状态的模式指示器到第二状态的模式指示器的动画过渡。
在一些实施方案中,处理单元1308还被配置为:在显示对应于第三媒体录制模式的第三指示时,检测(例如,利用检测单元1310)第一接触的输入的终止;并且响应于检测第一接触的输入的终止:根据输入的持续时间满足第三预定义时间阈值的确定:继续使用与多种媒体录制模式兼容的配置捕获(例如,利用捕获单元1312)媒体图像,直到检测到与第一输入不同的终止输入;在检测到终止输入时从连续捕获的媒体获取(例如,利用获取单元1314)第一视频;并且持久地存储(例如,利用存储单元1316)所获取的第一视频;并且根据输入的持续时间不满足第三预定义时间阈值的确定:利用与多种媒体录制模式兼容的配置停止媒体图像的继续捕获(例如,利用捕获单元1312);从连续捕获的媒体获取(例如,利用获取单元1314)第二视频;并且持久地存储(例如,利用存储单元1316)所获取的第二视频。
上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图12A至图12D所述的操作任选地由图1A至图1B或图13中所描绘的部件来实现。例如,检测操作1204、确定操作1212、1220、1222和1224任选地由事件分类器170、事件识别器180和事件处理程序190来实现。事件分类器170中的事件监视器171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息传送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否与预定义的事件或子事件对应,预定义的事件或子事件诸如为对用户界面上的对象的选择。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地利用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序所显示的内容。类似地,本领域的技术人员会清楚地知道基于在图1A至图1B中所描绘的部件可如何实现其他过程。
图14A至图14F是示出根据一些实施方案的在图像捕获期间在相机实时视图之间切换的方法1400的流程图。如下所述,方法1400涉及操纵当前通过接触的移动从第一相机显示实时视图的用户界面对象,使得来自第二相机的实时视图在用户界面对象中显示。另外,来自第一相机和第二相机的实时视图均根据接触的移动而移动。响应于在显示来自第一相机的实时视图时检测到的接触的移动,从第二相机切换到实时视图,并且根据接触的移动从两个相机移动实时视图允许用户更好地控制来自不同相机的实时视图在用户界面中移动的速度和程度。在用户界面中移动和/或切换来自不同相机的实时视图的速度和程度的附加控制增强了设备的可操作性,并且使用户-设备界面更高效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
方法1400是在具有显示器、触敏表面以及一个或多个相机的电子设备(例如,图3的设备300,或图1A的便携式多功能设备100)处执行。在一些实施方案中,该触敏表面和显示器整合成触敏显示器。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。方法1400中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
设备在相机用户界面的第一显示区域中显示(1402)来自电子设备的第一相机的第一实时视图(例如,图8A中的实时视图804)。例如,在一些实施方案中,第一显示区域是包括第一实时视图的实时取景器。在一些实施方案中,第一显示区域不同时包括由电子设备的第二相机捕获的第二实时视图(例如,第一相机是前置相机而第二相机是后置相机,反之亦然)在一些实施方案中,相机用户界面包括用于激活或停止一个或多个媒体录制模式的示能表示。
当在相机用户界面的第一显示区域中显示来自第一相机的第一实时视图时,设备检测到(1404)触敏表面上的第一接触的移动(例如,在第一显示区域中的第一实时视图上检测触敏显示器上的第一轻扫手势)(例如,在与用于在前置相机与后置相机之间切换的来回切换示能表示对应的任何位置处未检测到第一接触)。例如,检测到的第一接触是图8A至图8D中的接触808、图8F至图8G中的接触812、图8H至图8I中的接触814、图8J至图8M中的接触816、图8O至图8P中的接触818、图8U至图8Y中的接触822或者图8Z至图8AA中的接触824。
响应于检测第一接触在触敏表面上的移动,根据第一接触的移动满足第一移动标准的确定(例如,第一移动标准要求第一接触的移动处于第一方向(例如,水平方向)),设备根据触敏表面上的第一接触的移动来移动(1406)第一显示区域中的第一实时视图(例如,第一实时视图在双侧用户界面对象的前侧显示,并且双侧用户界面对象根据第一接触的移动绕显示器平面中的轴旋转)(例如,第一实时视图根据第一接触的移动而水平移动,使得第一实时视图的一部分移动到第一显示区域之外并且不再对用户可见)。这在图8J至图8N(例如,实时视图804随着接触816的移动而旋转)、图8O至图8P(例如,实时视图804随着接触818的移动而旋转)、图8T至图8X(例如,实时视图820随着接触822的移动而向右移动)、图8Z至图8AA(例如,实时视图820随着接触824的移动而向右移动)中示出,例如。另外,设备在第一显示区域中显示来自电子设备的第二相机的第二实时视图(例如,第二实时视图在双侧用户界面对象的后侧显示;并且当双侧用户界面对象根据第一接触的移动完全翻转(例如,绕显示器平面中的轴旋转超过90度)时,第一实时视图不再在第一个显示区域中显示,并且第二实时视图在第一显示区域中显示)(例如,当第一实时视图根据第一接触的移动而水平移动时,第二实时视图移动到由第一实时视图空出的空间中)。此外,设备根据触敏表面上的第一接触的移动在第一显示区域中移动第二实时视图(例如,在双侧用户界面对象的后侧(具有第二实时视图)在第一显示区域中变得可见之后,双侧用户界面对象根据第一接触的移动绕显示器平面中的轴旋转,直到双侧用户界面对象的后侧(具有第二实时视图)已到达第一显示区域的正面位置)(例如,当第一和第二实时视图根据第一接触的移动而连续地水平移位时,第二实时视图最终占据整个第一显示区域并且第一实时视图不再对用户可见)。这在图8O至图8T(例如,实时视图820随着由接触818的移动引起的模拟惯性而旋转)、图8T至图8X(例如,实时视图804随着接触822的移动而向右移动)、图8Z至图8AA(例如,实时视图804随着由接触824的移动引起的模拟惯性而向右移动)中示出,例如。
在一些实施方案中,第一实时视图是(1408)在多侧用户界面对象(例如,双侧用户界面对象)的第一侧上显示;第二实时视图显示在多侧用户界面对象的第二侧上;并且根据触敏显示器上的第一接触的移动来移动第一实时视图和第二实时视图包括根据触敏显示器上的第一接触的移动来旋转多侧用户界面对象。例如,这在图8J至图8T和随附的描述中示出。通过旋转多侧用户界面对象来切换来自不同相机的实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,第一接触的移动包括(1410)沿第一方向(例如,从左向右)的移动的第一部分,以及沿与第一方向相反的第二方向(例如,从右向左)的移动的第二部分;并且根据触敏显示器上的第一接触的移动来旋转多侧用户界面对象包括响应于移动的第一部分,在第一方向上旋转多侧用户界面对象;并且响应于移动的第二部分,在第二方向上旋转多侧用户界面对象。例如,用户可以通过从左向右轻扫来开始翻转双侧用户界面对象以查看第二实时视图,然后在抬离接触之前反转轻扫方向以返回到第一实时视图。允许用户反转多侧用户界面对象的旋转增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在根据触敏显示器上的第一接触旋转多侧用户界面对象之后,设备检测到(1412)第一接触的抬离;并且响应于检测第一接触的抬离,根据第一接触的移动满足第二移动标准的确定(例如,移动超过阈值距离、阈值速度和/或阈值持续时间),设备在第一接触的抬离之后继续旋转多侧用户界面对象,直到多侧用户界面对象的第二侧占据整个第一显示区域。例如,这在图8O至图8T和随附的描述中示出。响应于满足预定移动标准的旋转/移动而自动捕捉第二实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量并降低用户输入的精度要求来执行操作),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,响应于检测第一接触的抬离,根据第一接触的移动满足第三移动标准的确定(例如,移动未超过阈值距离、阈值速度和/或阈值持续时间),设备在第一接触的抬离之后反转(1414)多侧用户界面对象的旋转,直到多侧用户界面对象的第一侧重新占据整个第一显示区域。例如,这在图8J至图8N和随附的描述中示出。在满足预先确定移动标准的旋转/移动终止之后自动恢复到第一实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量并降低用户输入的精度要求来执行操作),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,第一实时视图是(1416)在多面板用户界面对象(例如,双面板用户界面对象)的第一面板中显示;在多面板用户界面对象的第二面板中显示第二实时视图;并且根据触敏显示器上的第一接触的移动来移动第一实时视图和第二实时视图包括根据触敏显示器上的第一接触的移动来滑动第一显示区域中的多面板用户界面对象。例如,当用户水平滑动双面板用户界面对象时,第一实时视图逐渐移出第一显示区域,并且第二实时视图逐渐移动到第一显示区域,并且最终占据整个第一显示区域。例如,这在图8U至图8Y和随附的描述中示出。自动分割用户界面对象以显示来自两个相机的实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少从两个相机显示实时视图所需的用户输入的数量,并提供对两个实时视图的相对大小的更精确控制),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,第一接触的移动包括(1418)沿第一方向的移动的第一部分,以及与第一方向相反的第二方向上的第二部分运动,并且根据触敏显示器上的第一接触的移动来滑动多面板用户界面对象包括响应于移动的第一部分,在第一方向上滑动多面板用户界面对象;并且响应于移动的第二部分,在第二方向上滑动多面板用户界面对象。例如,这在图8W和图8X和随附的描述中示出。允许用户反转多面板用户界面对象的滑动增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在根据触敏显示器上的第一接触的移动滑动多面板用户界面对象之后,设备检测到(1420)第一接触的抬离;并且响应于检测第一接触的抬离,根据第一接触的移动满足第四移动标准的确定(例如,移动超过阈值距离、阈值速度和/或阈值持续时间),设备在第一接触的抬离之后继续滑动多面板用户界面对象,直到多面板用户界面对象的第二面板占据整个第一显示区域。例如,这在图8Z和图8AA和随附的描述中示出。响应于满足预定移动标准的移动而自动捕捉第二实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量并降低用户输入的精度要求来执行操作),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,响应于检测第一接触的抬离,根据第一接触的移动满足第五移动标准的确定(例如,移动未超过阈值距离、阈值速度和/或阈值持续时间),设备在第一接触的抬离之后反转(1422)多侧用户界面对象的滑动,直到多面板用户界面对象的第一面板重新占据整个第一显示区域。在满足预先确定移动标准的移动终止之后自动恢复到第一实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量并降低用户输入的精度要求来执行操作),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在根据触敏显示器上的第一接触的移动来滑动多面板用户界面对象之后,设备检测到(1424)第一接触的抬离;并且,响应于检测第一接触的抬离,在第一接触抬离之后停止滑动多面板用户界面对象。在一些实施方案中,第一显示区域同时显示多面板用户界面对象的第一面板的一部分和多面板用户界面对象的第二面板的一部分。例如,这在图8Y和随附的描述中示出。分割用户界面对象以基于轻扫输入中的接触的抬离从一个位置处显示两个相机的实时视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少从两个相机显示实时视图所需的用户输入的数量,并提供对两个实时视图的相对大小的更精确控制),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,该设备检测到(1426)第一接触的提离。在一些实施方案中,在第一接触抬离之后,根据第一接触的移动满足第六移动标准的确定(例如,第一轻扫手势是具有快速速度(例如,大于阈值速度的速度)、短距离(例如,小于阈值距离的距离)和/或短持续时间(例如,小于阈值持续时间的持续时间)的快速轻扫),第一实时视图停止在第一显示区域中显示,并且第二实时视图占据整个第一显示区域;并且根据第一接触的移动满足第七移动标准的确定(例如,第一轻扫手势是具有慢速速度(例如,不大于阈值速度的速度)、长距离(例如,不小于阈值距离的距离)和/或长持续时间(例如,不小于阈值持续时间的持续时间)的慢速轻扫),在显示第一实时视图的一部分与第二实时视图的一部分之间分割第一显示区域。例如,这在图8U至图8AA和随附的描述中示出。在图8U至图8Y中,响应于接触822的慢速轻扫手势,在实时视图804与实时视图820之间分割实时视图显示对象,并且在图8Z至图8AA中,响应于快速轻弹手势,实时视图显示对象捕捉到仅显示一个实时视图的位置处。基于输入提离时的输入满足哪些运动标准来确定是捕捉到另一实时视图还是在两个实时视图之间分割用户界面对象增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少显示期望实时视图所需的用户输入数量,并提供对实时视图的相对大小的更精确控制),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在通过第一相机的视频录制(或媒体捕获)正在进行时检测到第一接触的移动(1428)(例如,使得所录制的视频在检测到第一接触的移动之前示出第一实时视图,并且示出第一实时视图的移动和响应于第一接触的移动而显示的第二实时视图的移动)。当检测到用于切换实时视图的输入时继续录制媒体增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少切换实时视图和继续录制媒体所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,设备在检测到触敏显示器上的第一接触的移动之后继续(1430)录制视频(或继续捕获媒体)(例如,使得所录制的视频在检测到第一接触的移动之前示出第一实时视图,并且示出第一实时视图的移动和响应于第一接触的移动而显示的第二实时视图的移动)。在检测到用于切换实时视图的输入时继续录制媒体增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少切换实时视图和继续录制媒体所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在检测到触敏显示器上的第一接触的移动之后继续录制视频包括(1432)继续录制由第一相机捕获的视频,同时根据第一接触的移动来移动第一实时视图和第二实时视图(例如,使得所录制的视频在检测到第一接触的移动之前示出第一实时视图,并且示出第一实时视图的移动和响应于第一接触的移动而显示的第二实时视图的移动)。在切换实时视图时继续录制由第一相机捕获的媒体增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少切换实时视图和继续从提供初始实时视图的相机录制媒体所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在检测到触敏显示器上的第一接触的移动之后继续录制视频包括(1434)当由第一相机捕获的第一实时视图不再显示在第一显示区域时,停止录制第一相机捕获的视频;并且当由第二相机捕获的第二实时视图在第一显示区域中显示时,开始录制由第二相机捕获的视频。基于相机视图的实时切换来切换录制相机增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量来改变录制相机),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在检测到触敏显示器上的第一接触的移动之后继续录制视频包括(1436)继续录制第一显示区域中所示的视频,包括录制第一实时视图和第二实时视图的移动(例如,双侧用户界面对象的旋转,或双面板用户界面对象的滑动)。录制包括相机视图的实时切换的媒体增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量来捕获相机视图的实时切换),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在检测到触敏显示器上的第一接触的移动之后继续录制视频包括(1438)继续录制由第一相机捕获的视频,同时显示由第二相机捕获的第二实时视图(例如,当第二实时视图占据整个第一显示区域时并且在检测到明确停止录制输入之前)。无论当前显示的实时视图如何,继续录制由第一相机捕获的媒体增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少从一个相机录制媒体的用户输入数量,同时检查另一相机的实时视图),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在检测到触敏显示器上的第一接触的移动之后继续录制视频包括(1440)同时录制由第一相机捕获并由第二相机捕获的视频(例如,创建两个视频,每个相机一个;或者另选地,创建单个视频,其中图像数据来自占据每个图像帧的一部分的两个相机中的每一个(例如,以画中画格式、分屏格式或一些其他格式))。在相机视图的实时切换期间录制由两个相机捕获的媒体增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少从两个相机录制媒体的用户输入数量,同时检查两个相机的实时视图),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在检测触敏显示器上的第一接触的移动之后继续录制视频时,设备检测到(1442)停止录制示能表示的激活,并且,响应于检测停止录制示能表示的激活,停止录制视频。要求明确停止输入以停止用户录制来停止录制所捕获的媒体增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过让用户更精确地控制何时应停止媒体录制,并减少用户输入的数量以继续录制媒体),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在继续录制由第一相机捕获的视频时,检测到停止录制示能表示的激活(1444),并且停止录制视频包括停止录制由第一相机捕获的视频。
在一些实施方案中,在继续录制由第二相机捕获的视频时,检测到停止录制示能表示的激活(1446),并且停止录制视频包括停止录制由第二相机捕获的视频。
在一些实施方案中,响应于检测第一接触的移动,根据第一接触的移动满足第八移动标准确定(例如,第八移动标准要求第一接触的移动在垂直于第一方向的第二方向上(例如,第一轻扫手势在垂直方向上)),设备根据第一接触的移动改变(1448)第一实时视图的纵横比或第一显示区域的纵横比。这在图8A至图8I和随附的描述中示出(例如,实时视图804的纵横比分别响应于接触808、接触812和接触814的垂直移动而改变),例如。根据满足预先确定标准的接触的移动来改变实时视图的纵横比增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量来录制期望纵横比的录制媒体),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,根据第一接触的移动改变第一实时视图的纵横比或第一显示区域的纵横比包括(1450),根据第一接触的移动满足第九移动标准的确定(例如,第一轻扫手势是具有快速速度(大于阈值速度的速度)、短距离(例如,小于阈值距离的距离)和/或短持续时间(例如,小于阈值持续时间的持续时间)的快速轻扫),从第一纵横比(例如,预设纵横比诸如4:3纵横比)切换到第二纵横比(例如,当前纵横比诸如正方形纵横比)。这在图8F至图8I和随附的描述中示出(例如,分别响应于通过接触812和接触814的两个轻弹手势,实时视图804在正方形纵横比与4:3纵横比之间来回切换的纵横比),例如。根据满足预先确定标准的接触的移动来改变实时视图的纵横比增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量来录制期望纵横比的录制媒体),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,根据第一接触的移动改变第一实时视图的纵横比或第一显示区域的纵横比包括(1452),根据第一接触的移动满足第十移动标准的确定(例如,第一轻扫手势是具有慢速度(不大于阈值速度的速度)的慢速轻扫,根据第一接触的移动动态调整第一实时视图或第一显示区域的纵横比(例如,根据接触的移动幅度,诸如由接触移动的速度或距离)。这在图8A至图8E和随附的描述中示出(例如,实时视图804的纵横比根据接触808的移动而动态改变),例如。根据满足预先确定标准的接触的移动来改变实时视图的纵横比增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量来录制期望纵横比的录制媒体),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,第一接触的移动是(1454)在触敏显示器上的第一区域中,该第一区域与第一显示区域内的位置对应,并且,在显示包括由第一相机捕获的第一实时视图的第一显示区域时(例如,当第一实时视图占据整个第一显示区域时),设备检测触敏显示器上的第二区域中的第二接触的移动(例如,检测与第一轻扫手势不同的第二轻扫手势),该第二区域与第一显示区域之外的位置对应(例如,在包括用于不同图像捕获模式的多个示能表示的相机控制区域中,例如,视频、静止相机、慢动作、连拍、全景、夜视等的相应示能表示)。响应于检测第二接触在第二方向上的移动,设备根据第二接触的移动从第一相机的第一媒体捕获模式切换到第二媒体捕获模式(例如,根据第二接触的移动的方向和/或幅度,使得沿第一方向的移动使得设备切换到第一其他媒体捕获模式,并且在与第一方向相反的第二方向上的移动使得设备切换到与第一其他媒体捕获模式不同的第二其他媒体捕获模式)。这在图8AC中示出,其中控制区域810包括示能表示834和示能表示832。例如,控制区域810上的轻扫输入使得相机从常规视频录制切换到慢动作录制模式,或者取决于轻扫是向右轻扫还是向左轻扫而转换到延时录制模式,例如。根据满足预先确定标准的接触的移动来改变媒体捕获模式增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过使用期望的媒体捕获模式减少用于录制媒体的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
应当理解,对图14A至图14F中已进行描述的操作的具体次序仅仅是示例,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法1000、1200、1600和1800)所述的其他过程的细节同样以类似的方式适用于上文相对于图14A至图14F所述的方法1400。例如,上面参考方法1400描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画任选地具有参考本文描述的其他方法(例如,方法1000、方法1200、方法1600和方法1800)在此描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画的一个或多个特征。为了简明起见,此处不再重复这些细节。
根据一些实施方案,图15示出了根据各种所述实施方案的原理进行配置的电子设备1500的功能框图。该设备的功能块任选地由执行各种所述实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图15中所述的功能块任选地被组合或被分离为子块,以便实现各种所述实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图15所示,电子设备1500包括:显示单元1502,其被配置为显示用户界面;触敏表面单元1504,其被配置为检测接触;一个或多个相机单元1506(包括第一相机单元1506-1和第二相机单元1506-2),其被配置为捕获媒体;处理单元1508,其耦接到显示单元1502、触敏表面单元1504和相机单元1506。在一些实施方案中,处理单元包括检测单元1510、移动单元1512、旋转单元1514、滑动单元1516、录制单元1518、改变单元1520、切换单元1522和调整单元1524。
处理单元1508被配置为:能够在相机用户界面的第一显示区域中显示(例如,利用显示单元1502)来自电子设备的第一相机单元1506-1的第一实时视图;当在相机用户界面的第一显示区域中显示来自第一相机单元1506-1的第一实时视图时,检测(例如,利用检测单元1510)第一接触在触敏表面单元1504上的移动;并且响应于检测第一接触在触敏表面单元1504上的移动,该方法包括:根据第一接触的移动满足第一移动标准的确定:根据第一接触在触敏表面单元1504上的移动,在第一显示区域中移动(例如,利用移动单元1512)第一实时视图;能够在第一显示区域中显示(例如,利用显示单元1502)来自电子设备的第二相机单元1506-2的第二实时视图;并且根据第一接触在触敏表面单元1504上的移动,在第一显示区域中移动(例如,利用移动单元1512)第二实时视图。
在一些实施方案中,在多侧用户界面对象的第一侧上显示第一实时视图(例如,利用显示单元1502),在多侧用户界面对象的第二侧上显示第二实时视图(例如,利用显示单元1502);并且根据第一接触在触敏表面单元1504上的移动来移动第一实时视图和第二实时视图包括,根据第一接触在触敏表面单元1504上的移动来旋转(例如,利用旋转单元1514)多侧用户界面对象。
在一些实施方案中,第一接触的移动包括沿第一方向的移动的第一部分,以及与第一方向相反的第二方向上的第二部分运动,并且根据触敏表面单元1504上的第一接触的移动旋转多侧用户界面对象包括:响应于移动的第一部分,在第一方向上旋转(例如,利用旋转单元1514)多侧用户界面对象;并且响应于移动的第二部分,在第二方向上旋转(例如,利用旋转单元1514)多侧用户界面对象。
在一些实施方案中,处理单元2508还被配置为:在根据触敏显示表面单元1504上的第一接触旋转多侧用户界面对象之后,检测到(例如,利用检测单元1510)第一接触的抬离;并且响应于检测第一接触的抬离:根据第一接触的移动满足第二移动标准的确定,在第一接触的抬离之后继续旋转(例如,利用旋转单元1514)多侧用户界面对象,直到多侧用户界面对象的第二侧占据整个第一显示区域。
在一些实施方案中,处理单元2508还被配置为:响应于检测第一接触的抬离:根据第一接触的移动满足第三移动标准的确定,在第一接触的抬离之后反向旋转(例如,利用旋转单元1514)多侧用户界面对象,直到多侧用户界面对象的第一侧重新占据整个第一显示区域。
在一些实施方案中,在多面板用户界面对象的第一面板中显示第一实时视图(例如,利用显示单元1502),并且在多面板用户界面对象的第二面板中显示第二实时视图(例如,利用显示单元1502);并且根据第一接触在触敏表面单元1504上的移动来移动第一实时视图和第二实时视图包括,根据第一接触在触敏表面单元1504上的移动而在第一显示区域中滑动(例如,利用滑动单元1516)多面板用户界面对象。
在一些实施方案中,第一接触的移动包括沿第一方向的移动的第一部分,以及与第一方向相反的第二方向上的第二部分运动,并且根据触敏表面单元1504上的第一接触的移动来滑动多面板用户界面对象包括:响应于移动的第一部分,在第一方向上滑动(例如,利用滑动单元1516)多面板用户界面对象;并且响应于移动的第二部分,在第二方向上滑动(例如,利用滑动单元1516)多面板用户界面对象。
在一些实施方案中,处理单元2508还被配置为:在根据触敏显示表面单元1504上的第一接触的移动而滑动多面板用户界面对象之后,检测到(例如,利用检测单元1510)第一接触的抬离;并且响应于检测第一接触的抬离:根据第一接触的移动满足第四移动标准的确定,在第一接触的抬离之后继续滑动(例如,利用滑动单元1516)多面板用户界面对象,直到多面板用户界面对象的第二面板占据整个第一显示区域。
在一些实施方案中,处理单元2508还被配置为:响应于检测第一接触的抬离:根据第一接触的移动满足第五移动标准的确定,在第一接触的抬离之后反向滑动(例如,利用滑动单元1516)多侧用户界面对象,直到多面板用户界面对象的第一面板重新占据整个第一显示区域。
在一些实施方案中,处理单元2508还被配置为:在根据触敏显示表面单元1504上的第一接触的移动而滑动多面板用户界面对象之后,检测到(例如,利用检测单元1510)第一接触的抬离;并且响应于检测第一接触的抬离,在第一接触抬离之后停止滑动(例如,利用滑动单元1516)多面板用户界面对象,其中第一显示区域同时显示多面板用户界面对象的第一面板的一部分和多面板用户界面对象的第二面板的一部分。
在一些实施方案中,处理单元2508还被配置为:检测(例如,利用检测单元1510)第一接触的抬离,其中在第一接触抬离之后:根据第一接触的移动满足第六移动标准的确定,第一实时视图在第一显示区域中停止显示(例如,利用显示单元1502),并且第二实时视图占据整个第一显示区域;并且根据第一接触的移动满足第七移动标准的确定,在显示第一实时视图的一部分与述第二实时视图的一部分之间分割(例如,利用显示单元1502)第一显示区域。
在一些实施方案中,当通过第一相机单元1506-1进行视频录制(例如,利用录制单元1518)时,检测到第一接触的移动。
在一些实施方案中,处理单元2508还被配置为:在检测触敏表面单元1504上的第一接触的移动之后,继续录制(例如,利用录制单元1518)视频。
在一些实施方案中,在检测触敏表面单元1504上的第一接触的移动之后,继续录制(例如,利用录制单元1518)视频包括:在根据第一接触的移动来移动第一实时视图和第二实时视图时,继续录制(例如,利用录制单元1518)由第一相机单元1506-1捕获的视频。
在一些实施方案中,在检测触敏表面单元1504上的第一接触的移动之后,继续录制(例如,利用录制单元1518)视频包括:当由第一相机单元1506-1捕获的第一实时视图不再在第一显示区域中显示时,停止录制(例如,利用录制单元1518)由第一相机单元1506-1捕获的视频。并且当由第二相机单元1506-2捕获的第二实时视图在第一显示区域中显示时,开始录制(例如,利用录制单元1518)由第二相机单元1506-2捕获的视频。
在一些实施方案中,在检测触敏表面单元1504上的第一接触的移动之后,继续录制(例如,利用录制单元1518)视频包括:继续录制(例如,利用录制单元1518)第一显示区域中所示的视频,包括录制(例如,利用录制单元1518)第一实时视图和第二实时视图的移动。
在一些实施方案中,在检测触敏表面单元1504上的第一接触的移动之后,继续录制(例如,利用录制单元1518)视频包括:在显示由第二相机单元1506-2捕获的第二实时视图时,继续录制(例如,利用录制单元1518)由第一相机单元1506-1捕获的视频。
在一些实施方案中,在检测触敏表面单元1504上的第一接触的移动之后,继续录制(例如,利用录制单元1518)视频包括:同时录制(例如,利用录制单元1518)由第一相机单元1506-1捕获和由第二相机单元1506-2捕获的视频。
在一些实施方案中,处理单元2508还被配置为:在检测触敏表面单元1504上的第一接触的移动之后、继续录制(例如,利用录制单元1518)视频时,检测(例如,利用检测单元1510)停止录制示能表示的激活,并且响应于检测停止录制示能表示的激活,停止录制(例如,利用录制单元1518)视频。
在一些实施方案中,其中在继续录制(例如,利用录制单元1518)由第一相机单元1506-1捕获的视频时,检测到停止录制示能表示的激活,并且其中停止录制(例如,利用录制单元1518)视频包括停止录制由第一相机单元1506-1捕获的视频。
在一些实施方案中,在继续录制(例如,利用录制单元1518)由第二相机单元1506-2捕获的视频时,检测到停止录制示能表示的激活,并且其中停止录制(例如,利用录制单元1518)视频包括停止录制(例如,利用录制单元1518)由第二相机单元1506-2捕获的视频。
在一些实施方案中,处理单元2508还被配置为:响应于检测第一接触的移动:根据第一接触的移动满足第八移动标准的确定:根据第一接触的移动改变(例如,利用改变单元1520)第一实时视图的纵横比或第一显示区域的纵横比。
在一些实施方案中,根据第一接触的移动改变第一实时视图的纵横比或第一显示区域的纵横比包括:根据第一接触的移动满足第九移动标准的确定,从第一纵横比切换(例如,利用切换单元1522)到第二纵横比。
在一些实施方案中,根据第一接触的移动改变第一实时视图的纵横比或第一显示区域的纵横比包括:根据第一接触的移动满足第十移动标准的确定,根据第一接触的移动动态调整(例如,利用调整单元1524)第一实时视图或第一显示区域的纵横比。
在一些实施方案中,第一接触的移动位于触敏表面单元1504上的第一区域中,该第一区域与第一显示区域内的位置对应,并且处理单元1508还被配置为:在显示包括由第一相机单元1506-1捕获的第一实时视图的第一显示区域时,检测到(例如,利用检测单元1510)在触敏表面单元1504上的第二区域中的第二接触的移动,该第二区域与第一显示区域之外的位置对应;并且响应于检测第二接触在第二方向上的移动,根据第二接触的移动从第一相机单元1506-1的第一媒体捕获模式切换(例如,利用切换单元1522)到第二媒体捕获模式。
上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图14A至图14F所述的操作任选地由图1A至图1B或图15中所描绘的部件来实现。例如,检测操作1404和操作1406中的移动操作任选地由事件分类器170、事件识别器180和事件处理程序190来实现。事件分类器170中的事件监视器171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息传送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否与预定义的事件或子事件对应,预定义的事件或子事件诸如为对用户界面上的对象的选择。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地利用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序所显示的内容。类似地,本领域的技术人员会清楚地知道基于在图1A至图1B中所描绘的部件可如何实现其他过程。
图16A至图16H是示出根据一些实施方案的自动检测和提示关于图像录制模式的用户动作的方法1600的流程图。该方法涉及捕获媒体并提示用户采取与不同媒体录制模式相关联的动作,这取决于捕获的媒体与哪种媒体录制模式一致。基于与捕获的媒体一致的媒体录制模式的确定,主动提示用户关于采取的适当动作增强了设备的可操作性并使得用户设备界面更有效(例如,通过减少对捕获的媒体内容采取适当行动所需的输入数量,并帮助用户在操作设备/与设备交互时提供适当的输入并减少用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
方法1600是在具有显示器以及一个或多个相机的电子设备(例如,设备300,图3;或便携式多功能设备100,图1A)处执行。在一个实施方案中,电子设备包括显示器、触敏表面和用于检测与该触敏表面接触的强度的一个或多个传感器。在一些实施方案中,该触敏表面和显示器整合成触敏显示器。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。方法1600中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
设备显示(1602)用于以多种媒体录制模式录制媒体图像的相机用户界面(例如,相机用户界面702)(例如,相机用户界面提供用于在单个图像录制模式、图像连拍录制模式、视频录制模式、全景图像录制模式、慢动作录制模式等中录制的选项)。
在显示相机用户界面时,设备利用相机中的一个或多个捕获(1604)媒体。在一些实施方案中,“捕获”媒体是指电子设备在没有来自用户的主动干预的情况下自动、临时和实时存储媒体。由相机捕获的媒体被自动存储(例如,在电子设备的存储器中)预先确定的持续时间(例如,当相机用户界面处于活动状态时,或者在捕获之后24小时),除非从用户接收指令以标记捕获的媒体用于后续处理(例如,标记、编辑、压缩、转换等)和/或持久存储,否则将自动删除或覆盖。在一些实施方案中,被标记用于后续处理和/或持久存储的媒体(例如,根据用户输入或预先配置的设备设置)被认为是“录制的”。
响应于捕获媒体(1606):根据所捕获的媒体与多个媒体录制模式的第一媒体录制模式一致的确定,设备在相机用户界面中显示第一个提示,提示用户采取与第一媒体录制模式相关联的一个或多个动作(例如,当捕获的图像指示相机以均匀的速度水平摇摄时,设备显示提示以引导用户稳定地摇摄相机,以在全景录制模式下录制多图像全景);并且根据所捕获的媒体与多个媒体录制模式的第二媒体录制模式一致的确定,能够在相机用户界面中显示第二提示,以提示用户采取与第二媒体录制模式相关联的一个或多个动作(例如,当在视频录制模式下录制的视频中的某些帧模糊时,设备显示提示,询问用户是否应该移除视频的模糊部分),其中第一媒体录制模式与第二媒体录制模式不同。这在图7A至图7E中示出,其中设备响应于检测到媒体捕获与全景录制模式一致而显示文本提示710和文本提示720以及全景引导对象708和全景引导对象714;并且在图7F至图7G和图7I至图7J中,例如,响应于检测到媒体捕获与视频录制模式一致,设备显示文本提示722和文本提示726。
在一些实施方案中,第一媒体录制模式是(1608)全景录制模式,例如,如图7A至图7E所示。在一些实施方案中,第二媒体录制模式是(1610)视频录制模式,例如,如图7F至图7J所示。
在一些实施方案中,与第一媒体录制模式相关联的一个或多个动作包括(1612)移动相机的视场以捕获用于生成多图像全景的附加媒体(例如,设备显示水平指南、方向箭头和提示“移动设备以拍摄全景”,或“减速”或“保持移动”等)。例如,这在图7A至图7E中示出。提示用户移动相机的视场以捕获附加媒体,基于已捕获的媒体与全景模式一致的确定来生成全景增强了设备的可操作性并使得用户设备界面更有效(例如,通过减少生成全景所需的用户输入数量,并帮助用户在操作设备/与设备交互时提供适当的输入并减少用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,与第二媒体录制模式相关联的一个或多个动作包括(1614)确认或拒绝将删除的内容的建议(例如,设备显示帧序列并提示“自动删除这些模糊帧?”)。例如,这在图7I中示出。基于已经捕获的媒体与视频录制模式一致的确定,提示用户确认是否删除模糊帧增强了设备的可操作性并使得用户设备界面更有效(例如,通过减少移除录制的视频中模糊帧所需的用户输入数量,并帮助用户在操作设备/与设备交互时提供适当的输入并减少用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在捕获媒体正在进行时,设备做出(1616)捕获的媒体与第一(和/或)媒体录制模式一致的确定。例如,当用户以均匀的速度水平地摇摄相机时,设备做出所捕获的媒体与全景录制模式一致的确定。做出关于已经捕获的媒体与哪种模式一致以及在媒体的捕获正在进行中时将提示哪些动作的确定增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量和生成期望类型和质量的媒体项所需的时间),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在暂停或停止媒体捕获之后,设备做出(1618)所捕获的媒体与第二(和/或第一)媒体录制模式一致的确定(例如,在录制视频之后,设备识别视频中的模糊部分,并提示用户确认在录制视频之前是否应移除所识别的模糊部分(为持久存储而处理))。例如,这在图7P至图7R中示出。做出关于已经捕获的媒体与哪种模式一致以及在暂停或停止捕获媒体之后将提示哪些动作的确定增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过做出更准确地决定,并帮助用户提供适当的输入),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,设备确定(1620)捕获的媒体的第一部分与第一媒体录制模式一致,并且捕获的媒体的第二部分与第二媒体录制模式一致,其中:设备在相机用户界面中显示关于捕获的媒体的第一部分的第一提示(例如,如图7A至图7E所示),并且设备在相机用户界面中显示关于捕获的媒体的第二部分的第二提示(例如,如图7F至图7J所示)。例如,捕获的媒体包括可用于构成全景图像的第一帧序列,以及包括几个模糊帧的第二帧序列。设备向用户提供两个提示:“基于这些帧生成全景图像?”和“从视频中移除这些帧?”识别多种媒体录制模式,并基于捕获的媒体的不同或相同部分提示多种录制模式的动作增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量和生成期望类型的媒体项所需的时间),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,自动开始媒体的捕获(1622),而无需用户手动激活媒体捕获示能表示(例如,在相机用户界面(任选地包括来自相机中的一个的实时视图)在设备上显示之后立即开始媒体捕获)。这也在图7A中示出,其中当设备静止且水平时自动开始媒体捕获。开始媒体捕获而无需手动激活媒体捕获示能表示增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少捕获媒体所需的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,与第一(或第二)媒体录制模式相关联的一个或多个动作包括(1624)指定将在第一(或第二)媒体录制模式下录制的媒体项的开始例如,在一些实施方案中,设备确定捕获的媒体与视频录制模式一致(例如,捕获的图像可以制成连续视频),设备要求用户指定捕获的媒体的帧以作为将基于捕获的媒体录制/存储的视频的开始。在另一示例中,在一些实施方案中,设备确定捕获的媒体与全景录制模式一致(例如,捕获的图像可以拼接到多图像全景),设备要求用户指定捕获的媒体的帧以作为将基于捕获的媒体录制/存储的全景的开始图像。允许用户指定将在识别的媒体录制模式下录制的媒体内容的开始,使用户可以更好地控制媒体录制,增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少捕获图像所需的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,响应于捕获媒体(1626):根据捕获的媒体与多个媒体录制模式的第二(和/或第一)媒体录制模式一致的确定,设备自动识别(例如,不需要用户输入或干预)在第二(和/或第一)媒体录制模式下将录制的媒体项的开始。例如,在一些实施方案中,设备确定捕获的媒体与视频录制模式一致(例如,捕获的图像可以制成连续视频),设备自动识别捕获的媒体的帧以作为将基于捕获的媒体录制/存储的视频的开始。在另一示例中,在一些实施方案中,设备确定捕获的媒体与全景录制模式一致(例如,捕获的图像可以拼接到多图像全景),设备自动识别捕获的媒体的帧以作为将基于捕获的媒体录制/存储的全景的开始图像。在一些实施方案中,设备基于对媒体项的分析或其他上下文信息(例如,相机的移动特性、历史用户行为分析等)自动识别媒体项的开始。在一些实施方案中,设备识别媒体项的开始而没有开始录制特定类型的媒体项的特定用户输入。自动识别将在识别的媒体录制模式下录制的媒体内容的开始增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少捕获图像所需的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,设备显示(1628)来自相机用户界面中的一个或多个相机的第一相机的实时视图(例如,实时视图704),其中电子设备捕获与实时视图中的图像对应的媒体(例如,相机用户界面包括来自相机中的一个的实时视图,或来自多个相机的实时视图的分屏,并且设备临时存储由提供实时视图的相机捕获的帧流)。显示来自相机的实时视图以示出正在捕获的图像增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,相机用户界面的一个或多个视觉特征指示(1630)当前在电子设备处活动的一个或多个媒体录制模式(例如,实时视图的闪光或闪烁指示拍摄了静止照片,实时视图内的实时视图的纵横比和/或纵横比轮廓指示全景模式或特定视频模式(例如,4:3、正方形等)是否有效,在实时视图或相机用户界面上覆盖的正在运行的录制计时器指示视频录制正在进行中,快门按钮或录制按钮的外观指示活动媒体录制模式,相机用户界面中的模式选择示能表示状态指示活动媒体录制模式等)。在视觉上指示当前活动的媒体录制模式增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在利用相机中的一个或多个(显示实时视图和)捕获媒体(例如,多个媒体帧(例如,图像))时:设备存储(1632)由电子设备中的一个或多个相机捕获的图像数据,而与电子设备中当前活动的一个或多个媒体录制模式无关(例如,无论视频录制还是静止照片模式被激活,都以预设的帧速率和预设的分辨率(例如,相机设计能力内的最高帧速率和分辨率)捕获图像数据流,并且无论当前激活了视频录制(例如,慢动作、标准4:3或正方形纵横比)或静止图像(例如,全景、连拍、低光等)的哪些子模式)。独立于当前活动的媒体录制模式存储图像数据允许后处理获取用于不活动的媒体录制模式的其他类型的媒体项的可能性。这种灵活性增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过提供后处理以获取附加媒体项的可能性,并减少获取期望类型的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,设备根据当前在电子设备处活动的一个或多个媒体录制模式来注释(1634)所存储的图像数据(例如,图像数据流的时间线用模式激活事件和模式停用事件注释,诸如特定视频录制模式的开始和停止、拍摄静止照片、全景照片的开始和停止、改变捕获纵横比、相机切换)。基于当前活动的媒体录制模式注释图像数据增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过提供后处理以获取附加媒体项的可能性,并减少获取期望类型的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,设备接收(1636)显示所存储的图像数据的指令(例如,在媒体捕获正在进行时或在媒体捕获终止之后从相机用户界面内,或者在完成媒体图像的录制之后从应用程序启动界面处接收启动媒体查看应用程序(例如,“照片”应用程序)的请求);并且,响应于接收到显示存储的图像数据的指令,设备显示存储的图像数据的媒体摘要,其中:基于存储的图像数据的注释从存储的图像数据生成媒体摘要,并且,媒体摘要包括根据在存储图像数据的第一部分时被激活的第一媒体录制模式,从录制的图像数据的第一部分中提取的至少第一媒体项。例如,在自动捕获媒体期间,无论当前活动图像捕获模式如何,都以3264×2448的分辨率和60fps的帧速率捕获图像数据。如果在自动捕获期间激活标准视频捕获模式一段时间,则从存储的图像数据的一部分中提取具有1280×720分辨率和25fps的视频剪辑,该部分与标准视频录制模式活动的时间段对应。类似地,如果在自动捕获期间在特定点激活正方形照片模式(例如,用户在视频录制期间拍摄具有正方形纵横比的静止照片),则当激活正方形照片模式时,从存储的图像数据中提取分辨率为2448×2448的静止图像,该图像数据对应于图像数据时间线上的特定点。这也在图7N至图7O中示出,其中响应于通过相机用户界面702中的全景查看对象708上的接触713的轻击手势来显示媒体摘要732。基于与活动的媒体录制模式相关联的图像数据的注释来显示媒体项增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少查看期望类型的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,媒体摘要至少包括(1638)第二媒体项,第二媒体项根据在存储图像数据的第二部分时未激活的第二媒体录制模式,从录制图像数据的第二部分中提取。例如,在一些实施方案中,基于录制的图像数据的后录制分析,设备确定可以基于录制的图像数据的一部分生成全景,并且当设备首先捕获所录制的图像数据的一部分时,即使全景录制模式未激活,设备也自动生成全景。显示从图像数据中提取的媒体项,用于在媒体捕获时未激活的媒体录制模式增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望类型的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,第一媒体录制模式是(1640)视频录制模式,第一媒体项是从录制的图像数据中提取的视频剪辑,第二媒体录制模式是全景录制模式,第二媒体项是从录制的图像数据中提取的全景图像。在录制的图像数据的摘要中显示从录制的图像数据中提取的全景和视频增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望类型的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,从录制的图像数据的相同部分中提取第一媒体项和第二媒体项(1642)。从录制的图像数据的相同部分处提取全景和视频增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望类型的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,设备基于存储的图像数据的第二部分的图像分析,在捕获媒体期间识别(1644)电子设备的连续的水平运动;并且从在电子设备的连续的水平运动期间捕获的存储的图像数据的第二部分处,设备识别全景图像。例如,这在图8A至图8D中示出。基于存储的图像数据的图像分析自动识别全景增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望类型的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在利用相机中的一个或多个捕获媒体时(1646):当捕获存储的图像数据的第二部分时,设备检测到电子设备的连续水平运动;并且设备利用水平运动事件注释存储的图像数据的第二部分。基于存储的图像数据的第二部分上的水平运动事件注释,设备从存储的图像数据的第二部分处识别全景图像。基于存储的图像数据的图像注释自动识别全景增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望类型的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,媒体摘要至少包括(1648)第三媒体项,第三媒体项根据在捕获存储的图像数据的第三部分时未激活的第三媒体录制模式,从存储的图像数据的第三部分中提取。例如,媒体摘要包括当未激活静止图像录制模式时捕获的静止图像742。在摘要中包括附加媒体项增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望类型的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,第三媒体录制模式是(1650)静止图像模式,并且第三媒体项是从存储的图像数据的第三部分中提取的静止图像。
在一些实施方案中,媒体摘要包括(1652)一个或多个媒体组;并且一个或多个媒体组中的相应媒体组至少包括一个视频剪辑和至少一个具有至少一个共同特征的静止图像(例如,类似的录制时间戳、类似的图像特征等)。在一些实施方案中,存在多个媒体组,并且第一媒体组具有至少一个视频剪辑和一个静止图像,它们共享第一共同特征,并且第二媒体组具有至少一个视频剪辑和一个静止图像,它们共享与第一特征不同的第二共同特征。在媒体摘要中包括媒体组(例如,具有共同特征的静止图像和视频组)增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望特征的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,一个或多个媒体组包括(1654)多个第一媒体组;共同特征是时间段;相应媒体组对应于存储的图像数据的相应时间段;并且相应的媒体组包括至少一个视频剪辑和至少一个静止图像,这些至少一个视频剪辑和至少一个静止图像从与相应的时间段对应的存储的图像数据的一部分中提取。在媒体摘要中包括媒体组(例如,具有共同时间特征的内容组)增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望时间特征的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,一个或多个媒体组包括(1656)多个第二媒体组;多个第二媒体组中的每个第二媒体组对应于在存储的图像数据中识别的相应图像特征(例如,已识别的面部、人物、地标等);并且多个第二媒体组中的每个第二媒体组包括从存储的图像数据的一个或多个部分提取的多个媒体项,这些多个媒体项包括相应的图像特征。在媒体摘要中包括媒体组(例如,具有图像特征的静止图像和视频组)增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望图像特征的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,一个或多个媒体组包括(1658)多个第三媒体组;多个第三媒体组中的每个第三媒体组对应于在所存储的图像数据中识别的相应场景(例如,可以从由电子设备的运动引起的图像的突然模糊来识别场景切换);并且多个第三媒体组中的每个第三媒体组包括从对应于每个第三媒体组的相应场景中提取的多个媒体项。在媒体摘要中包括媒体组(例如,具有与共同场景相关联的静止图像和视频组)增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少获取和查看期望场景的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,显示所存储的图像数据的媒体摘要包括(1660):在可滚动窗口中显示多个媒体组,其中可滚动窗口包括有效区域(例如,窗口的中心区域)和无效区域(例如,窗口的外围区域);当在可滚动窗口的活动区域中显示第一媒体组时,自动播放第一媒体组中的第一视频;并且当第一媒体组从可滚动窗口的活动区域滚动到非活动区域时,停止播放第一媒体组中的第一视频。当媒体组滚动到用户界面中的活动区域时,自动开始回放媒体组中的内容增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少查看期望媒体组的媒体项所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,显示所存储的图像数据的媒体摘要包括(1662):接收滚动可滚动窗口的输入;并且响应于接收滚动可滚动窗口的输入:根据滚动输入将第二媒体组从可滚动窗口的非活动区域移动到活动区域;并且当第二媒体组从可滚动窗口的非活动区域移动到活动区域时,开始在第二媒体组中回放第二视频。
在一些实施方案中,多个媒体组对应于(1664)单个视频录制的不同部分。当与视频的不同部分对应的媒体组滚动到用户界面中的活动区域时,自动开始回放视频的不同部分中的内容增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少查看视频期望部分所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在显示媒体摘要时,通过扩展或减少用于生成自动生成的媒体项的捕获媒体的范围,设备向用户提供(1666)编辑自动生成的媒体项的选项(例如,扩展全景或延长视频的持续时间)。允许用户调整用于在媒体摘要中生成媒体项的捕获媒体的范围增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少生成媒体项目期望内容所需的用户输入数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
应当理解,对图16A至图16H中已进行描述的操作的具体次序仅仅是示例,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法1000、1200、1400和1800)所述的其他过程的细节同样以类似的方式适用于上文相对于图16A至图16H所述的方法1600。例如,上面参考方法1600描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画任选地具有参考本文描述的其他方法(例如,方法1000、方法1200、方法1400和方法1800)在此描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画的一个或多个特征。为了简明起见,此处不再重复这些细节。
根据一些实施方案,图17示出了根据各种所述实施方案的原理进行配置的电子设备1700的功能框图。该设备的功能块任选地由执行各种所述实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图17中所述的功能块任选地被组合或被分离为子块,以便实现各种所述实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图17所示,电子设备1700包括:显示单元1702,其被配置为显示用户界面;一个或多个相机单元1706,其被配置为捕获媒体;以及处理单元1708,其被耦接到显示单元1702和一个或多个相机单元1706。在一些实施方案中,处理单元包括捕获单元1710、移位单元1712、确认单元1714、确定单元1716、播放单元1718、指定单元1720、识别单元1722、存储单元1724、检测单元1726、注释单元1728、接收单元1730、生成单元1732、提取单元1734、移动单元1736和扩展单元1738。
处理单元1708被配置为:能够显示(例如,利用显示单元1702)以多种媒体录制模式录制媒体图像的相机用户界面;在显示相机用户界面时,利用一个或多个相机单元捕获(例如,利用捕获单元1710)媒体;并且响应于捕获媒体:根据捕获的媒体与多个媒体录制模式的第一媒体录制模式一致的确定,能够在相机用户界面中显示(例如,利用显示单元1702)第一提示,以提示用户采取与第一媒体录制模式相关联的一个或多个动作;并且根据捕获的媒体与多个媒体录制模式的第二媒体录制模式一致的确定,能够在相机用户界面中显示(例如,利用显示单元1702)第二提示,以提示用户采取与第二媒体录制模式相关联的一个或多个动作,其中第一媒体录制模式与第二媒体录制模式不同。
在一些实施方案中,第一媒体录制模式是全景录制模式。
在一些实施方案中,第二媒体录制模式是视频录制模式。
在一些实施方案中,与第一媒体录制模式相关联的一个或多个动作包括移动(例如,利用移位单位1712)相机的视场以捕获用于生成多图像全景的附加媒体。
在一些实施方案中,与第二媒体录制模式相关联的一个或多个动作包括确认(例如,利用确认单元1714)或拒绝将删除的内容的建议。
在一些实施方案中,在捕获媒体正在进行时,设备做出捕获的媒体与第一媒体录制模式一致的确定(例如,利用确定单元1716)。
在一些实施方案中,在捕获(例如,利用捕获单元1710)媒体被暂停或停止之后,设备做出捕获的媒体与第二媒体录制模式一致的确定(例如,利用确定单元1716)。
在一些实施方案中,处理单元2508还被配置为:确定(例如,利用确定单元1716)捕获的媒体的第一部分与第一媒体录制模式一致,并且捕获的媒体的第二部分与第二媒体录制模式一致,其中:设备在相机用户界面中显示(例如,利用显示单元1702)关于捕获的媒体的第一部分的第一提示,并且设备在相机用户界面中显示(例如,利用显示单元1702)关于捕获的媒体的第二部分的第二提示。
在一些实施方案中,自动开始捕获媒体,而不需要用户手动激活媒体捕获示能表示。
在一些实施方案中,与第一媒体录制模式相关联的一个或多个动作包括指定(例如,利用指定单元1720)将在第一媒体录制模式下录制的媒体项的开始。
在一些实施方案中,处理单元2508还被配置为:响应于捕获(例如,利用捕获单元1710)媒体:根据捕获的媒体与多个媒体录制模式的第二媒体录制模式一致的确定,自动识别(例如,利用识别单元1722)在第二媒体录制模式下将录制的媒体项的开始。
在一些实施方案中,处理单元2508还被配置为:能够在相机用户界面中显示(例如,利用显示单元1702)来自一个或多个相机单元1706的第一相机单元的实时视图,其中电子设备捕获与实时视图中的图像对应的媒体。
在一些实施方案中,相机用户界面的一个或多个视觉特征指示当前在电子设备处活动的一个或多个媒体录制模式。
在一些实施方案中,处理单元2508还被配置为:在利用一个或多个相机单元1706捕获媒体时:存储(例如,利用存储单元1724)由电子设备的一个或多个相机单元1706捕获的图像数据,而与当前在电子设备处活动的一个或多个媒体录制模式无关。
在一些实施方案中,处理单元2508还被配置为:根据当前在电子设备处活动的一个或多个媒体录制模式,注释(例如,利用注释单元1728)存储的图像数据。
在一些实施方案中,处理单元2508还被配置为:接收(例如,利用接收单元1730)显示所存储的图像数据的指令;并且,响应于接收到显示存储的图像数据的指令,能够显示(例如,利用显示单元1702)存储的图像数据的媒体摘要,其中:基于存储的图像数据的注释从存储的图像数据生成(例如,利用生成单元1732)媒体摘要,并且,媒体摘要包括根据在存储图像数据的第一部分时被激活的第一媒体录制模式,从录制的图像数据的第一部分中提取(例如,利用提取单元1734)的至少第一媒体项。
在一些实施方案中,媒体摘要至少包括第二媒体项,第二媒体项根据在存储图像数据的第二部分时未激活的第二媒体录制模式,从录制的图像数据的第二部分中提取(例如,利用提取单元1734)。
在一些实施方案中,第一媒体录制模式是视频录制模式,第一媒体项是从录制的图像数据中提取(例如,利用提取单元1734)的视频剪辑,第二媒体录制模式是全景录制模式,第二媒体项是从录制的图像数据中提取(例如,利用提取单元1734)的全景图像。
在一些实施方案中,从录制的图像数据的相同部分中提取(例如,利用提取单元1734)第一媒体项和第二媒体项。
在一些实施方案中,处理单元2508还被配置为:基于存储的图像数据的第二部分的图像分析,在捕获媒体期间识别(例如,利用识别单元1722)电子设备的连续的水平运动;并且从在电子设备的连续的水平运动期间捕获的存储的图像数据的第二部分处,识别(例如,利用识别单元1722)全景图像。
在一些实施方案中,处理单元2508还被配置为:在利用相机单元1706中的一个或多个捕获媒体时:当捕获存储的图像数据的第二部分时,检测(例如,利用检测单元1726)电子设备的连续水平运动;并且利用水平运动事件注释(例如,利用注释单元1728)存储的图像数据的第二部分;并且基于存储的图像数据的第二部分上的水平运动事件注释,从存储的图像数据的第二部分处识别(例如,利用识别单元1722)全景图像。
在一些实施方案中,媒体摘要至少包括第三媒体项,第三媒体项根据在捕获存储的图像数据的第三部分时未激活的第三媒体录制模式,从存储的图像数据的第三部分中提取(例如,利用提取单元1734)。
在一些实施方案中,第三媒体录制模式是静止图像模式,并且第三媒体项是从存储的图像数据的第三部分中提取(例如,利用提取单元1734)的静止图像。
在一些实施方案中,媒体摘要包括一个或多个媒体组;并且一个或多个媒体组中的相应媒体组至少包括一个视频剪辑和至少一个具有至少一个共同特征的静止图像。
在一些实施方案中,一个或多个媒体组包括多个第一媒体组;共同特征是时间段;相应媒体组对应于存储的图像数据的相应时间段;并且相应的媒体组包括至少一个视频剪辑和至少一个静止图像,这些至少一个视频剪辑和至少一个静止图像从与相应的时间段对应的存储的图像数据的一部分中提取(例如,利用提取单元1734)。
在一些实施方案中,一个或多个媒体组包括多个第二媒体组;多个第二媒体组中的每个第二媒体组对应于在存储的图像数据中识别的相应图像特征;并且多个第二媒体组中的每个第二媒体组包括从存储的图像数据的一个或多个部分提取(例如,利用提取单元1734)的多个媒体项,这些多个媒体项包括相应的图像特征。
在一些实施方案中,一个或多个媒体组包括多个第三媒体组;多个第三媒体组中的每个第三媒体组对应于在存储的图像数据中识别的相应场景;并且多个第三媒体组中的每个第三媒体组包括从对应于每个第三媒体组的相应场景中提取(例如,利用提取单元1734)的多个媒体项
在一些实施方案中,显示所存储的图像数据的媒体摘要包括:在可滚动窗口中显示(例如,利用播放单元1718)多个媒体组,其中可滚动窗口包括活动区域和非活动区域;当在可滚动窗口的活动区域中显示(例如,利用播放单元1718)第一媒体组时,自动播放第一媒体组中的第一视频;并且当第一媒体组从可滚动窗口的活动区域滚动到非活动区域时,停止播放(例如,利用播放单元1718)第一媒体组中的第一视频。
在一些实施方案中,显示所存储的图像数据的媒体摘要包括:接收(例如,利用接收单元1730)滚动可滚动窗口的输入;并且响应于接收滚动可滚动窗口的输入:根据滚动输入将第二媒体组从可滚动窗口的非活动区域移动(例如,利用移动单元1736)到活动区域;并且当第二媒体组从可滚动窗口的非活动区域移动(例如,利用移动单元1736)到活动区域时,开始在第二媒体组中回放(例如,利用播放单元1718)第二视频。
在一些实施方案中,多个媒体组对应于单个视频录制的不同部分。
在一些实施方案中,处理单元2508还被配置为:在显示媒体摘要时,通过扩展(例如,利用扩展单元1738)或减少用于生成自动生成的媒体项的捕获媒体的范围,向用户提供编辑自动生成的媒体项的选项。
上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图16A至图16H所述的操作任选地由图1A至图1B或图17中所描绘的部件来实现。例如,操作1606和操作1620中的确定操作任选地由事件分类器170、事件识别器180和事件处理器190实现。事件分类器170中的事件监视器171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息传送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否与预定义的事件或子事件对应,预定义的事件或子事件诸如为对用户界面上的对象的选择。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地利用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序所显示的内容。类似地,本领域的技术人员会清楚地知道基于在图1A至图1B中所描绘的部件可如何实现其他过程。
图18A至图18D是示出根据一些实施方案的从视频录制调整所选图像和视频剪辑的方法1800的流程图。该方法涉及在用户界面中呈现具有多个识别的静止图像的媒体内容序列。用户界面包括所识别的静止图像的表示、与媒体内容序列对应的时间线、以及时间线上的多个图像调整对象。当沿时间线移动相应的媒体调整对象中的一个时,设备根据相应的媒体调整对象的移动更新与相应媒体调整对象对应的所识别的静止图像。沿时间线呈现对应于媒体内容序列的多个识别的静止图像的相应媒体调整对象,并且基于其对应的图像调整对象沿时间线的移动自动更新识别的静止图像增强了设备的可操作性并使得用户设备界面更有效(例如,通过减少更新媒体内容序列的所识别的静止图像所需的输入数量,以及帮助用户在操作/与设备交互时提供适当的输入并减少用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
方法1800在具有显示器的电子设备(例如,图3中的设备300或图1A中的便携式多功能设备100)处执行。在一个实施方案中,电子设备包括显示器、触敏表面和用于检测与该触敏表面接触的强度的一个或多个传感器。在一些实施方案中,该触敏表面和显示器整合成触敏显示器。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。方法1800中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
设备在显示器上显示(1802)用于呈现具有多个识别的静止图像(例如,从媒体内容序列中识别的两个或多个单独帧,其表示媒体内容序列中的所有帧的子集)的媒体内容序列(例如,视频、或视频剪辑序列或图像序列)的第一用户界面(例如,图9E中的时间线视图用户界面935),其中第一用户界面(例如,时间线用户界面935)包括:来自媒体内容序列的第一静止图像(例如,静止图像908的表示932)(例如,第一选择帧)的表示;与媒体内容序列对应的时间线(例如,时间线在视觉上表示布置媒体内容序列内的子序列或图像的顺序);以及多个图像调整对象(例如,图9E中的图像调整对象936、938、940等)(例如,每个图像调整对象对应于媒体内容序列内的片段或子序列,并且包括从该片段或子序列中选择的至少一个静止图像的表示)(例如,图像调整对象根据它们在媒体内容序列内的位置放置在时间线上),其中:第一图像调整对象(例如,图像调整对象936)在时间线上具有第一位置(例如,第一图像调整对象对应于时间线上第一位置处的媒体内容序列内的片段或子序列);以及第二图像调整对象(例如,图像调整对象938)在时间线上具有与第一位置不同的第二位置(例如,第二图像调整对象对应于时间线上第二位置处的媒体内容序列内的片段或子序列)。在一些实施方案中,第一图像调整对象和第二图像调整对象对应于媒体内容序列的两个非重叠片段或子序列。在一些实施方案中,时间线在用户界面内具有图形表示(例如,直线、线性或弯曲条纹,在其上根据媒体内容序列内的位置放置媒体内容序列内的子序列或图像的表示)。在一些实施方案中,时间线在用户界面中不具有其自己的图形表示,并且由用户界面中的媒体内容序列内的子序列或图像的表示的相对位置(例如,相对位置根据它们在媒体内容序列中的位置确定)示出。
在显示第一静止图像的表示(例如,静止图像908的表示932)时(例如,视频的第一选择帧),设备接收(1804)移动时间线中的多个图像调整对象的相应图像调整对象(例如,图像调整对象936或938)的请求(例如,该请求是指向多个图像调整对象之一的选择和拖动输入)。
响应于在时间线中接收移动相应图像调整对象的请求(1806):根据相应的图像调整对象是第一图像调整对象(例如,图像调整对象936)的确定,设备根据该请求将时间线中的第一图像调整对象移动到第一经更新位置(例如,如图9F至图9H所示)(例如,可调整帧选择对象根据光标或手指的移动沿时间线移动),并且设备更新第一静止图像的表示(例如,图像908的表示932),以对应于时间线上的第一图像调整对象(例如,图像调整对象936)的第一经更新位置;并且根据相应的图像调整对象是第二图像调整对象(例如,如图9M至图9O所示)的确定,设备根据该请求将第二图像调整对象(例如,图像调整对象938)沿时间线移动到第二经更新位置(例如,可调整帧选择对象根据光标或手指的移动沿时间线移动),并且设备更新第二静止图像(例如,静止图像910的表示970)的表示,以对应于时间线上的第二图像调整对象的第二经更新位置。
在一些实施方案中,在显示第一用户界面时,在接收到移动相应图像调整对象的请求之后,设备接收(1808)显示第二用户界面的请求(例如,“网格”按钮906上的轻击手势,如图9Q所示)(例如,该请求包括选择/激活用于显示第二用户界面的示能表示(例如,“网格视图”按钮)),其中:第二用户界面(例如,图9S中的网格用户界面902)包括媒体内容序列内的多个媒体项的相应表示,这些多个媒体项的相应表示至少包括多个识别的静止图像的子集(例如,第二用户界面包括来自媒体内容序列的静止图像和/或视频剪辑的阵列,以网格(二维阵列)布置);并且响应于接收显示包括多个媒体项的相应表示的第二用户界面的请求,设备显示第二用户界面(并且停止显示第一用户界面和/或时间线),其中多个媒体项的相应表示包括与相应图像调整对象的经更新位置对应的经更新静止图像。这在图9Q至图9S中示出,例如(与图9A相比,图9S已经更新了图像908和910)。在一些实施方案中,在从第一用户界面(例如,时间线视图)到第二用户界面(例如,网格视图)的过渡期间显示动画(例如,如图9R中所示)(例如,设备显示动画,其中沿一维时间线布置的多个图像调整对象变换为二维网格中的多个媒体项(例如,多个识别的静止图像)的相应表示)。显示第二用户界面,以显示与时间线中的图像调整对象的经更新位置对应的经更新静止图像,提供了关于设备内部状态的信息并增强设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在显示用于呈现具有多个识别的静止图像的媒体内容序列的第一用户界面之前,设备显示(1810)第二用户界面(例如,网格视图用户界面902),其包括多个媒体项的相应表示,如图9A所示。在显示包括多个媒体项的相应表示的第二用户界面时,设备接收显示第一用户界面的请求,该第一用户界面用于呈现具有多个识别的静止图像的媒体内容序列(例如,该请求包括选择用于显示媒体内容序列的第一用户界面的示能表示(例如,“时间线”按钮))。响应于接收显示用于呈现具有多个识别的静止图像的媒体内容序列的第一用户界面的请求,设备用第一用户界面的显示替换第二用户界面的显示。例如,这在图9A至图9E中示出。在一些实施方案中,在从第二用户界面(例如,网格视图)到第一用户界面(例如,时间线视图)的过渡期间显示动画(例如,设备显示动画,其中二维网格中的多个媒体项(例如,多个识别的静止图像)的相应表示变换为沿一维时间线线性布置的多个图像调整对象)。例如,这在图9C和图9D中示出。在一些实施方案中,响应于指向网格视图中所示的媒体项的相应表示的输入,对媒体项执行与媒体项的相应表示对应的动作(例如,显示编辑模式界面,其用于编辑与媒体项的表示对应的静止图像/视频,和/或速率、标记、共享、删除该媒体项)。允许用户从网格视图切换到时间线视图并返回到网格视图增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少用户输入的数量来检查不同视图中存储的内容),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在接收移动相应的图像调整对象的请求之前,设备接收(1812)选择第二图像调整对象的请求(例如,移动请求和选择第二图像调整对象的请求可以是两个不同的输入(例如,指向第二图像调整对象的轻击和轻扫手势),或单个连续输入(例如,指向第二图像调整对象的轻扫手势))。响应于选择第二图像调整对象的请求,设备用第一用户界面中的第二静止图像的显示替换第一静止图像的显示(在响应于移动第二图像调整对象的请求移动第二图像调整对象之前)。在图9M中,例如,焦点选择器968选择第二图像调整对象(例如,图像调整对象938)。
在一些实施方案中,响应于在时间线中接收移动相应图像调整对象的请求(1814):根据相应图像调整对象是第一(或第二)图像调整对象的确定:根据在时间线中移动相应图像调整对象的请求,在将第一(第二)图像调整对象沿时间线移动到第一经更新位置时,设备顺序地显示从媒体内容序列中选择的一个或多个静止图像,该媒体内容序列与在移动期间在时间线上的第一(或第二)图像调整对象的一个或多个当前位置对应(例如,所显示的静止图像是第一(或第二)静止图像与经更新的第一(或第二)静止图像之间的帧序列)。例如,这在图9G、图9H、图9J、图9K、图9N和图9O中示出。在图像调整对象移动期间根据图像调整对象在时间线上的当前位置提供实时反馈(例如,通过显示从媒体内容序列中选择的静止图像)增强了设备的可操作性,并且使用户-设备界面更加高效(例如,通过提供有关设备内部状态的信息,帮助用户提供适当的输入并减少在使用设备/与设备交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,移动相应图像调整对象的请求包括(1816)移动相应图像调整对象的请求,使得相应图像调整对象通过时间线中的多个图像调整对象中的另一个图像调整对象(并且设备根据该请求移动相应的图像调整对象)。允许用户将图像调整对象拖过时间线上的另一个图像调整对象增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过让用户更自由地选择期望的静止图像,帮助用户提供适当的输入,并减少执行期望操作需要的输入数量),这又通过使用户能够更快速且高效地使用设备而减少了电力使用并且改善了设备的电池寿命。
在一些实施方案中,时间线中的多个图像调整对象的第一图像调整对象包括(1818)第一静止图像的表示(例如,该表示是第一静止图像的缩小比例版本(例如,缩略图))。在一些实施方案中,第一静止图像的缩小比例版本在第一图像调整对象上显示(例如,在第一图像调整对象的面上)。例如,图像908的缩略图在图9E中的图像调整对象936上显示。在一些实施方案中,时间线中的多个图像调整对象的第二图像调整对象包括第二静止图像的表示(例如,该表示是第二静止图像的缩小比例版本(例如,缩略图))。在一些实施方案中,第二静止图像的缩小比例版本在第二图像调整对象上显示(例如,在第二图像调整对象的面上)。例如,图像910的缩略图在图9E中的图像调整对象938上显示。在图像调整对象中显示对应的静止图像增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过提供关于图像调整对象的信息,帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,响应于在时间线中接收移动相应图像调整对象的请求(1820):根据相应图像调整对象是第一(或第二)图像调整对象的确定:根据在时间线中移动相应图像调整对象的请求,在将第一(或第二)图像调整对象沿时间线移动到第一经更新位置时,在第一(或第二)图像调整对象的移动期间,该设备连续更新第一(或第二)图像调整对象上的第一(或第二)静止图像的表示,以对应于时间线上的第一(或第二)图像调整对象的当前位置。这在图9G至图9H和图9J至图9K中示出,其中当图像调整对象沿时间线移动时,更新图像调整对象936上所示的缩略图。这也在图9N至图9O中示出,其中当图像调整对象沿时间线移动时,更新图像调整对象938上所示的缩略图。在图像调整对象中连续更新对应的静止图像增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过提供关于图像调整对象的经更新信息,帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在显示用于呈现具有多个识别的静止图像的媒体内容序列的第一用户界面之前(1822):设备录制媒体内容序列;并且在录制媒体内容序列期间,设备识别多个静止图像(例如,识别是响应于用户输入(诸如,由光标或接触提供的图像选择输入,诸如在正在进行的视频录制期间拍摄/选择照片的输入)和/或自动(例如,在限定的时间间隔和/或使用图像处理技术来识别用于选择的代表性图像/帧))发生的。在一些实施方案中,可以在媒体捕获或录制期间执行静止图像或视频剪辑的标记,例如,通过轻击帧或实时视图,或者通过对实时视图进行轻击并保持,如图5A至图5AG所示。在录制媒体内容期间选择媒体内容序列的静止图像增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少识别静止图像所需的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,响应于接收移动相应图像调整对象的请求,设备调整(1824)相应图像调整对象的外观(例如,为了在视觉上区分相应的图像调整对象与时间线中的多个图像调整对象的其他图像调整对象,诸如通过改变相应图像调整对象的宽度或另一尺度(例如,如图9F、图9J和图9M所示,其中所选择的图像调整对象936和938似乎比未选择的图像调整对象宽)和/或突出显示相应的图像调整对象)。在一些实施方案中,当选择相应的图像调整对象时,设备显示动画以指示从相应图像调整对象的未选择状态到相应图像调整对象的选择状态的过渡(例如,相应的图像调整对象逐渐变大和/或变宽)。当在时间线中移动相应的图像调整对象时可视地区分它们增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过提供关于图像调整对象的信息,帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,设备在与媒体内容序列对应的时间线上显示(1826)第一视频调整对象(例如,图9E中的视频调整对象958)(例如,多个视频调整对象的第一视频调整对象),第一视频调整对象与来自媒体内容序列的第一个识别的视频片段对应(例如,响应于用户输入(诸如在正在进行的视频录制期间由光标或接触提供的视频片段开始和停止输入)和/或自动(例如,在限定的时间间隔和/或使用图像处理技术来识别用于选择的代表性视频片段)识别视频片段)。在时间线上包括视频调整对象增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少在媒体内容序列中选择和调整代表性图像/视频片段需要的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在显示具有多个识别的静止图像的媒体内容序列的第一用户界面之前(1828):设备捕获媒体内容序列,并且在捕获媒体内容序列时,设备识别包括第一识别视频片段的一个或多个视频片段(例如,识别是响应于用户输入(诸如在正在进行的视频捕获或录制期间由光标或接触提供的视频开始/停止输入)和/或自动(诸如在限定的时间间隔和/或使用图像处理技术来识别用于选择的视频)发生的)。在一些实施方案中,可以在媒体捕获或录制期间执行静止图像或视频剪辑的标记,例如,通过轻击帧或实时视图,或者通过对实时视图进行轻击并保持,如图5A至图5AG所示。在录制媒体内容期间选择媒体内容序列的静止图像/视频片段增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少识别静止图像/视频片段所需的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,在显示第一用户界面时,设备检测(1830)编辑第一视频调整对象的请求(例如,当焦点选择器位于与第一视频调整对象对应的位置处和/或在与第一视频调整对象对应的位置处双击时,接收双击)。响应于检测编辑第一视频调整对象的请求,设备显示第三用户界面,第三用户界面包括用于编辑对应于第一视频调整对象的第一识别视频片段的至少一个示能表示。允许用户从时间线视图进入编辑界面增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少编辑存储内容所需的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,第一视频调整对象的视觉特征对应于(1832)第一视频片段的长度(例如,第一视频调整对象的宽度对应于第一视频片段的持续时间,并且/或者第一视频调整对象的左边缘与时间线上的第一视频调整对象的右边缘之间的距离指示第一视频片段的开始点和结束点)。例如,图9E中的视频调整对象958的左边缘与右边缘之间的距离对应于由视频调整对象958表示的视频剪辑的持续时间。使用视频调整对象可视地表示视频片段的长度增强了设备的可操作性,并且使用户-设备界面更加高效(例如,通过帮助用户提供适当的输入并减少在操作设备/与设备交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,设备检测(1834)在时间线中移动第一视频调整对象的请求(例如,该请求是经由输入提供的,该输入引起焦点选择器的移动,该焦点选择器沿时间线选择和拖动第一视频调整对象)。响应于检测在时间线中移动视频调整对象的请求,设备调整与第一视频调整对象对应的第一识别视频片段的开始时间(和/或结束时间)。允许用户移动视频调整对象以针对媒体内容序列调整对应的识别视频片段的开始和/或结束增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少识别视频片段所需的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,响应于检测在时间线中移动视频调整对象的请求,在调整与第一视频调整对象对应的第一识别视频片段的开始时间(和/或结束时间)时,设备维持(1836)第一识别视频片段的持续时间。允许用户移动视频调整对象以针对媒体内容序列调整对应的识别视频片段的开始和/或结束而不改变视频片段的持续时间增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过减少识别具有适当持续时间的视频片段所需的用户输入的数量),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
在一些实施方案中,多个图像调整对象(和视频调整对象)在时间线上具有(1838)不同的取向(例如,远离所显示的时间线中心的图像调整对象和视频调整对象更加水平倾斜),例如,如图9E所示。在具有不同取向的时间线上显示图像调整对象(和视频调整对象)增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过更好地传送所识别的静止图像/视频片段相对于时间线的位置信息,帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),另外,通过使用户能够更快速和有效地使用设备,这还可以降低电力使用并延长设备的电池寿命。
应当理解,对图18A至图18D中已进行描述的操作的具体次序仅仅是示例,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法1000、1200、1400和1600)所述的其他过程的细节同样以类似的方式适用于上文相对于图18A至图18D所述的方法1800。例如,上面参考方法1800描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画任选地具有参考本文描述的其他方法(例如,方法1000、方法1200、方法1400和方法1600)在此描述的接触、手势、用户界面对象、各种类型的阈值、焦点选择器、实时视图、帧流、捕获的媒体内容、媒体项和实时视图显示对象、示能表示和动画的一个或多个特征。为了简明起见,此处不再重复这些细节。
根据一些实施方案,图19示出根据各种所述实施方案的原理进行配置的电子设备1900的功能框图。该设备的功能块任选地由执行各种所述实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图19中所述的功能块任选地被组合或被分离为子块,以便实现各种所述实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图19所示,电子设备1900包括被配置为显示用户界面的显示单元1902和耦接至显示单元1902的处理单元1908。在一些实施方案中,处理单元包括接收单元1910、移动单元1912、替换单元1914、更新单元1916、录制单元1918、识别单元1920、调整单元1922、检测单元1924、保持单元1926和捕获单元1928。
处理单元1908被配置为:能够在显示单元1902上显示(例如,利用显示单元1902)第一用户界面,用于呈现具有多个识别的静止图像的媒体内容序列,其中第一用户界面包括:来自媒体内容序列的第一静止图像的表示;与媒体内容序列对应的时间线;并且多个图像调整对象,其中:第一图像调整对象在时间线上具有第一位置;并且第二图像调整对象在时间线上具有与第一位置不同的第二位置;在显示第一静止图像的表示时,该方法包括接收(例如,利用接收单元1910)在时间线中移动多个图像调整对象的相应图像调整对象的请求;响应于接收在时间线中移动相应图像调整对象的请求,根据相应的图像调整对象是第一图像调整对象的确定,根据请求将时间线中的第一图像调整对象移动(例如,利用异动单元1912)到第一经更新位置,并且更新(例如,利用更新单元1916)第一静止图像的表示,以对应于时间线上的第一图像调整对象的第一经更新位置;并且根据相应的图像调整对象是第二图像调整对象的确定,根据请求将沿时间线的第二图像调整对象移动(例如,利用异动单元1912)到第二经更新位置,并且更新(例如,利用更新单元1916)第二静止图像的表示,以对应于时间线上的第二图像调整对象的第二经更新位置。
在一些实施方案中,处理单元2508还被配置为:在接收移动相应图像调整对象的请求之后,在显示第一用户界面时,接收(例如,利用接收单元1910)显示第二用户界面的请求,其中:第二用户界面包括媒体内容序列内的多个媒体项的相应表示,这些多个媒体项的相应表示包括多个识别的静止图像中的至少一个子集;并且响应于接收显示所述第二用户界面的所述请求,所述第二用户界面包括所述多个媒体项的所述相应表示,能够显示(例如,利用显示单元1902)所述第二用户界面,其中所述多个媒体项的所述相应表示包括对应于所述相应图像调整对象的经更新位置的经更新静止图像。
在一些实施方案中,处理单元2508还被配置为:在显示用于呈现具有多个识别的静止图像的媒体内容序列的第一用户界面之前,能够显示(例如,利用显示单元1902)包括多个媒体项的相应表示的第二用户界面;在显示包括多个媒体项的相应表示的第二用户界面时,接收(例如,利用接收单元1910)显示用于呈现具有多个识别的静止图像的媒体内容序列的第一用户界面的请求;并且响应于接收显示用于呈现具有多个识别的静止图像的媒体内容序列的第一用户界面的请求,用第一用户界面的显示替换(例如,利用替换单元1914)第二用户界面的显示
在一些实施方案中,处理单元2508还被配置为:在接收移动相应图像调整对象的请求之前,接收(例如,利用接收单元1910)选择第二图像调整对象的请求;并且响应于选择第二图像调整对象的请求,用第一用户界面中的第二静止图像的显示替换(例如,利用替换单元1914)第一静止图像的显示。
在一些实施方案中,处理单元2508还被配置为:响应于在时间线中接收移动相应图像调整对象的请求:根据相应图像调整对象是第一图像调整对象的确定:根据在时间线中移动相应图像调整对象的请求,在将第一图像调整对象沿时间线移动到第一经更新位置时,能够在移动期间顺序地显示(例如,利用显示单元1902)在时间线上对应于第一图像调整对象的一个或多个当前位置的媒体内容序列中选择的一个或多个静止图像。
在一些实施方案中,移动相应图像调整对象的请求包括移动相应图像调整对象的请求,使得相应图像调整对象通过时间线中的多个图像调整对象中的另一个图像调整对象。
在一些实施方案中,时间线中的多个图像调整对象的第一图像调整对象包括第一静止图像的表示;并且时间线中的多个图像调整对象的第二图像调整对象包括第二静止图像的表示。
在一些实施方案中,处理单元2508还被配置为:响应于在时间线中接收移动相应图像调整对象的请求:根据相应图像调整对象是第一图像调整对象的确定:根据在时间线中移动相应图像调整对象的请求,在将第一图像调整对象沿时间线移动到第一经更新位置时,在第一图像调整对象的移动期间,在第一图像调整对象上连续更新(例如,利用更新单元1916)第一静止图像的表示,以对应于时间线上的第一图像调整对象的当前位置。
在一些实施方案中,处理单元2508还被配置为:在显示用于呈现具有多个识别的静止图像的媒体内容序列的第一用户界面之前:录制(例如,利用录制单元1918)媒体内容序列;并且在录制媒体内容的序列期间,识别(例如,利用识别单元1920)多个静止图像。
在一些实施方案中,处理单元2508还被配置为:响应于接收移动相应图像调整对象的请求,调整(例如,利用调整单元1922)相应图像调整对象的外观。
在一些实施方案中,处理单元2508还被配置为:能够在与媒体内容序列对应的时间线上显示(例如,利用显示单元1902)第一视频调整对象,第一视频调整对象对应于来自媒体内容序列的第一识别视频片段。
在一些实施方案中,处理单元2508还被配置为:在显示具有多个识别的静止图像的媒体内容序列的第一用户界面之前:捕获(例如,利用捕获单元1928)媒体内容序列,并且在捕获媒体内容序列时,识别(例如,利用识别单元1920)包括第一识别的视频片段的一个或多个视频片段。
在一些实施方案中,处理单元2508还被配置为:在显示第一用户界面时,检测(例如,利用检测单元1924)编辑第一视频调整对象的请求;并且响应于检测编辑第一视频调整对象的请求,能够显示(例如,利用显示单元1902)第三用户界面,第三用户界面包括用于编辑对应于第一视频调整对象的第一识别视频片段的至少一个示能表示。
在一些实施方案中,第一视频调整对象的视觉特征对应于第一视频片段的长度。
在一些实施方案中,处理单元2508还被配置为:检测(例如,利用检测单元1924)在时间线上移动第一视频调整对象的请求;并且响应于检测在时间线中移动视频调整对象的请求,调整(例如,利用调整对象1922)与第一视频调整对象对应的第一识别视频片段的开始时间。
在一些实施方案中,处理单元2508还被配置为:响应于检测在时间线中移动视频调整对象的请求,在调整与第一视频调整对象对应的第一识别视频片段的开始时间时,保持(例如,利用保持单元1926)第一识别视频片段的持续时间。
在一些实施方案中,多个图像调整对象在时间线上具有不同的取向。
上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
上文参考图18A至图18D所述的操作任选地由图1A至图1B或图19中所描绘的部件来实现。例如,接收操作1804和移动操作1806任选地由事件分类器170、事件识别器180和事件处理程序190来实现。事件分类器170中的事件监视器171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息传送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否与预定义的事件或子事件对应,预定义的事件或子事件诸如为对用户界面上的对象的选择。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地利用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序所显示的内容。类似地,本领域的技术人员会清楚地知道基于在图1A至图1B中所描绘的部件可如何实现其他过程。
出于解释的目的,前面的描述是通过参考具体实施方案来描述的。然而,上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择和描述实施方案是为了最佳地阐明本发明的原理及其实际应用,以便由此使得本领域的其他技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施方案。

Claims (28)

1.一种用于显示相机用户界面的方法,包括:
在具有一个或多个处理器、存储器、显示器和相机的电子设备处:
在所述显示器上显示相机用户界面,所述相机用户界面包括来自所述相机的实时视图;
在显示来自所述相机的所述实时视图时:
在没有来自用户的主动干预的情况下,捕获媒体图像;
在继续显示来自所述相机的所述实时视图时,在没有来自用户的主动干预的情况下录制由所述相机捕获的所述媒体图像;
同时显示第一多个媒体图像的表示,所述第一多个媒体图像是在将来自所述相机的所述实时视图显示为在第一方向上在所述显示器上滚动的帧时在没有来自用户的主动干预的情况下由所述相机捕获的;以及
在继续在没有来自用户的主动干预的情况下录制由所述相机捕获的媒体图像时,用在没有来自用户的主动干预的情况下在所述第一多个媒体图像之后由所述相机捕获的附加媒体图像的一个或多个表示来替换对所述第一多个媒体图像中的一个或多个媒体图像的显示。
2.根据权利要求1所述的方法,包括:
在录制由所述相机捕获的所述媒体图像之前:
在显示来自所述相机的所述实时视图时:
在没有录制的情况下捕获对应于来自所述相机的所述实时视图的媒体图像;以及
检测激活利用所述相机录制媒体图像的第一输入,其中响应于检测到所述第一输入,开始所述媒体图像的所述录制。
3.根据权利要求2所述的方法,其中响应于检测到所述第一输入,开始将所述第一多个媒体图像的所述表示显示为在所述显示器上滚动的帧。
4.根据权利要求2所述的方法,其中在所述第一输入的所述检测之前,将所述第一多个媒体图像的所述表示显示为在所述显示器上滚动的帧。
5.根据权利要求1至4中任一项所述的方法,其中作为在所述显示器上滚动的帧的所述第一多个媒体图像的所述表示覆盖在来自所述相机的所述实时视图的一部分上。
6.根据权利要求1至4中任一项所述的方法,其中将所述第一多个媒体图像的所述表示显示为在所述显示器上滚动的帧包括:
从所述显示器的第一侧将相应帧滚动到所述显示器上;
在将所述相应帧滚动到所述显示器上时并且在显示整个所述相应帧之前,在所述相应帧内显示来自所述相机的所述实时视图的缩小尺寸的副本;以及
在确定整个所述相应帧已经滚动到所述显示器上时,用对应于所述实时视图中的当前图像的相应媒体图像来替换所述相应帧中的所述实时视图的所述缩小尺寸的副本。
7.根据权利要求1至4中任一项所述的方法,其中作为在所述显示器上滚动的帧的所述第一多个媒体图像的所述表示包括少于由所述相机录制的所有媒体图像。
8.根据权利要求1至4中任一项所述的方法,包括:
在将来自所述相机的所述实时视图和所述第一多个媒体图像的所述表示显示为在所述显示器上滚动的帧时:
在焦点选择器处于对应于当前在所述显示器上滚动的第一媒体图像的相应表示的位置时,检测第二输入;以及
响应于检测到所述第二输入,改变在所述显示器上滚动的所述帧中的所述第一媒体图像的相应表示的外观,以指示所述第一媒体图像已被标记以供以后参考。
9.根据权利要求1至4中任一项所述的方法,包括:
在将来自所述相机的所述实时视图和所述第一多个媒体图像的所述表示显示为在所述显示器上滚动的帧时:
检测标记捕获的图像的第三输入;以及
响应于检测到所述第三输入,显示被标记的捕获的图像的相应表示,其中被标记的捕获的图像的所述相应表示的外观被改变,以指示被标记的捕获的图像已被标记以供以后参考。
10.根据权利要求9所述的方法,其中在所述显示器上滚动的所述第一多个媒体图像中,显示被标记的捕获的图像的所述相应表示,不管在没有标记所述被标记的捕获的媒体图像的情况下是否应该显示所述被标记的捕获的图像的所述相应表示。
11.根据权利要求8所述的方法,其中相应标记的媒体图像的副本由所述设备与包括所述相应标记的媒体图像的录制视频独立地存储。
12.根据权利要求11所述的方法,其中所述相应标记的媒体图像的所述副本被配置为以与包括所述相应标记的媒体图像的所述录制视频不同的纵横比显示。
13.根据权利要求1至4中任一项所述的方法,包括:
在将所述第一多个媒体图像的所述表示显示为在所述第一方向上在所述显示器上滚动的帧时:
检测导致焦点选择器在与所述第一方向相反的第二方向移动的第四输入;以及
响应于检测到所述第四输入,根据所述焦点选择器的所述移动,作为帧在所述第二方向上在所述显示器上滚动所述第一多个媒体图像的所述表示。
14.根据权利要求1所述的方法,包括:
在将所述第一多个媒体图像的所述表示显示为在所述显示器上滚动的帧时:
检测激活图像查看模式的第五输入;以及
响应于检测到激活所述图像查看模式的所述第五输入,用所述第一多个媒体图像中的第一录制媒体图像的显示替换来自所述相机的所述实时视图的显示。
15.根据权利要求14所述的方法,包括:
响应于检测到激活所述图像查看模式的所述第五输入,创建在所述第一多个媒体图像中标记所述第一录制媒体图像的元数据。
16.根据权利要求14或15所述的方法,包括:
在所述图像查看模式下显示所述第一录制媒体图像时:
检测导致焦点选择器在第三方向上移动的第六输入;以及
响应于检测到所述第六输入,用第二录制媒体图像替换所述第一录制媒体图像的显示。
17.根据权利要求16所述的方法,包括:
在所述图像查看模式下显示所述第一录制媒体时:
响应于检测到导致所述焦点选择器在所述第三方向上移动的所述第六输入,创建标记所述第二录制媒体图像的元数据。
18.根据权利要求14或15所述的方法,其中在所述图像查看模式下显示所述第一录制媒体图像时,所述设备继续利用所述相机录制媒体图像。
19.根据权利要求14或15所述的方法,包括:
在所述图像查看模式下显示相应录制媒体图像时:
检测停用所述图像查看模式的第七输入;以及
响应于检测到停用所述图像查看模式的所述第七输入,用来自所述相机的所述实时视图替换所述相应录制媒体图像的显示。
20.根据权利要求1所述的方法,包括:
在将所述第一多个媒体图像的所述表示显示为在所述第一方向上在所述显示器上滚动的帧时:
检测指定录制媒体图像的序列的开始和结束的第八输入;
响应于检测到指定录制媒体图像的所述序列的所述开始和所述结束的所述第八输入:
创建元数据,所述元数据将录制媒体图像的所述序列标记为第一类型的媒体单元;以及
在作为帧在所述显示器上滚动的所述第一多个媒体图像中,显示录制媒体图像的所述序列被标记为所述第一类型的媒体单元的指示。
21.根据权利要求20所述的方法,其中录制媒体图像的所述序列的副本独立于所述录制媒体图像被存储。
22.根据权利要求21所述的方法,其中录制媒体图像的所述序列的所述副本被配置为以与所述录制媒体图像不同的纵横比显示。
23.根据权利要求20至22中任一项所述的方法,包括:
在将所述第一多个媒体图像的所述表示显示为在所述显示器上滚动的帧时:
检测激活视频查看模式的第九输入;以及
响应于检测到激活所述视频查看模式的所述第九输入,用第一录制视频剪辑的回放替换来自所述相机的所述实时视图的显示。
24.根据权利要求23所述的方法,其中在回放所述第一录制视频剪辑时,所述设备继续利用所述相机录制媒体图像。
25.根据权利要求23所述的方法,还包括:
在回放所述第一录制视频剪辑时,检测停用所述视频查看模式的第十输入;以及
响应于检测到停用所述视频查看模式的所述第十输入,用来自所述相机的所述实时视图替换所述第一录制视频剪辑的回放。
26.一种电子设备,包括:
显示器;
相机;
一个或多个处理器;
存储器;以及
一个或多个程序,其中所述一个或多个程序存储在所述存储器中并且被配置为由所述一个或多个处理器执行,所述一个或多个程序包括用于执行根据权利要求1至25所述的方法中的任一种方法的指令。
27.一种存储一个或多个程序的计算机可读存储介质,所述一个或多个程序包括指令,所述指令当由具有显示器和相机的电子设备执行时,使得所述设备执行权利要求1至25所述的方法中的任一种方法。
28.一种电子设备,包括:
显示器;
相机;以及
用于执行根据权利要求1至25所述的方法中的任一种方法的装置。
CN201780053139.4A 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备、方法和图形用户界面 Active CN109644217B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202111213035.XA CN113923301B (zh) 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备和方法
CN202311182022.XA CN117221439A (zh) 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备和方法

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662399292P 2016-09-23 2016-09-23
US62/399,292 2016-09-23
US15/691,701 2017-08-30
US15/691,701 US10547776B2 (en) 2016-09-23 2017-08-30 Devices, methods, and graphical user interfaces for capturing and recording media in multiple modes
PCT/US2017/049752 WO2018057267A1 (en) 2016-09-23 2017-08-31 Devices, methods, and graphical user interfaces for capturing and recording media in multiple modes

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN202111213035.XA Division CN113923301B (zh) 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备和方法
CN202311182022.XA Division CN117221439A (zh) 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备和方法

Publications (2)

Publication Number Publication Date
CN109644217A CN109644217A (zh) 2019-04-16
CN109644217B true CN109644217B (zh) 2021-10-29

Family

ID=61686855

Family Applications (3)

Application Number Title Priority Date Filing Date
CN202111213035.XA Active CN113923301B (zh) 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备和方法
CN201780053139.4A Active CN109644217B (zh) 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备、方法和图形用户界面
CN202311182022.XA Pending CN117221439A (zh) 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备和方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202111213035.XA Active CN113923301B (zh) 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202311182022.XA Pending CN117221439A (zh) 2016-09-23 2017-08-31 用于在多种模式下捕获和录制媒体的设备和方法

Country Status (4)

Country Link
US (4) US10547776B2 (zh)
EP (1) EP3491812B1 (zh)
CN (3) CN113923301B (zh)
WO (1) WO2018057267A1 (zh)

Families Citing this family (70)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD738394S1 (en) * 2013-06-09 2015-09-08 Apple Inc. Display screen or portion thereof with animated graphical user interface
US10116460B2 (en) * 2015-06-03 2018-10-30 sonnen GmbH Remote battery management system, management device, and remote battery management method
US10503264B1 (en) * 2015-06-16 2019-12-10 Snap Inc. Radial gesture navigation
CN105095873B (zh) * 2015-07-31 2018-12-18 小米科技有限责任公司 照片共享方法、装置
USD849027S1 (en) * 2015-08-03 2019-05-21 Google Llc Display screen with animated graphical user interface
USD848458S1 (en) * 2015-08-03 2019-05-14 Google Llc Display screen with animated graphical user interface
US10009536B2 (en) 2016-06-12 2018-06-26 Apple Inc. Applying a simulated optical effect based on data received from multiple camera sensors
US10547776B2 (en) 2016-09-23 2020-01-28 Apple Inc. Devices, methods, and graphical user interfaces for capturing and recording media in multiple modes
US20180095938A1 (en) * 2016-09-30 2018-04-05 Sap Se Synchronized calendar and timeline adaptive user interface
US10257586B1 (en) * 2016-12-13 2019-04-09 Alexander B. Mensh System and method for timing events utilizing video playback on a mobile device
JP6794284B2 (ja) * 2017-01-31 2020-12-02 キヤノン株式会社 カメラ機能を有する携帯可能な情報処理装置、その表示制御方法、及びプログラム
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US11206347B2 (en) * 2017-06-05 2021-12-21 Sony Group Corporation Object-tracking based slow-motion video capture
US11323398B1 (en) * 2017-07-31 2022-05-03 Snap Inc. Systems, devices, and methods for progressive attachments
EP3447623B1 (en) * 2017-08-22 2020-01-29 Samsung Electronics Co., Ltd. Electronic device and control method thereof
AU2017248569A1 (en) * 2017-10-20 2019-05-09 Canon Kabushiki Kaisha Method, apparatus and system for browsing images on a user interface displaying a map
US10929511B2 (en) * 2017-12-05 2021-02-23 Facebook, Inc. Systems and methods for protecting sensitive information
JP7091065B2 (ja) * 2017-12-26 2022-06-27 キヤノン株式会社 記録制御装置、記録制御装置の制御方法およびプログラム
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
KR102512298B1 (ko) 2018-02-23 2023-03-22 삼성전자주식회사 영상 데이터의 편집을 위한 인터페이스를 표시하는 전자 장치 및 그 동작 방법
US11093103B2 (en) * 2018-04-09 2021-08-17 Spatial Systems Inc. Augmented reality computing environments-collaborative workspaces
US11436791B2 (en) * 2018-04-30 2022-09-06 The Regents Of The University Of California Methods and systems for acquiring svBRDF measurements
CN108920226B (zh) * 2018-05-04 2022-04-29 维沃移动通信有限公司 屏幕录制方法及装置
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
CN109275028B (zh) * 2018-09-30 2021-02-26 北京微播视界科技有限公司 视频获取方法、装置、终端和介质
CN115580773A (zh) 2018-10-09 2023-01-06 谷歌有限责任公司 用移动图像捕获设备执行倒回操作的系统和方法
WO2020075456A1 (ja) * 2018-10-11 2020-04-16 オムロン株式会社 入力装置
US11574476B2 (en) * 2018-11-11 2023-02-07 Netspark Ltd. On-line video filtering
IL279336B1 (en) 2018-11-11 2024-04-01 Netspark Ltd On-line video filtering
EP3850830A4 (en) * 2018-11-14 2021-12-08 Samsung Electronics Co., Ltd. METHOD OF RECORDING MULTIMEDIA FILES AND ELECTRONIC DEVICE THEREFORE
CN109819319A (zh) * 2019-03-07 2019-05-28 重庆蓝岸通讯技术有限公司 一种录像记录关键帧的方法
CN110162598B (zh) * 2019-04-12 2022-07-12 北京搜狗科技发展有限公司 一种数据处理方法和装置、一种用于数据处理的装置
KR20200121440A (ko) 2019-04-15 2020-10-26 삼성디스플레이 주식회사 표시 장치 및 이의 구동 방법
USD941867S1 (en) * 2019-04-29 2022-01-25 Lg Electronics Inc. Display screen with animated graphical user interface
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
US11385789B1 (en) * 2019-07-23 2022-07-12 Facebook Technologies, Llc Systems and methods for interacting with displayed items
CN110489040B (zh) * 2019-08-15 2021-08-03 北京字节跳动网络技术有限公司 特征模型展示的方法及装置、终端和存储介质
USD956060S1 (en) * 2019-08-16 2022-06-28 Aristocrat Technologies Australia Pty Limited Display screen or portion thereof with graphical user interface
AU2019216700A1 (en) 2019-08-16 2021-03-04 Aristocrat Technologies Australia Pty Limited Gaming device with upgradeable symbol awards
CN110658971B (zh) * 2019-08-26 2021-04-23 维沃移动通信有限公司 一种截屏方法及终端设备
US10990263B1 (en) 2019-09-03 2021-04-27 Gopro, Inc. Interface for trimming videos
CN112650405B (zh) * 2019-10-10 2023-11-03 华为技术有限公司 一种电子设备的交互方法及电子设备
CN116112786A (zh) * 2019-11-29 2023-05-12 华为技术有限公司 一种视频拍摄方法与电子设备
CN114930278A (zh) * 2020-02-18 2022-08-19 深圳市欢太科技有限公司 一种录屏方法、装置及计算机可读存储介质
US10715412B1 (en) * 2020-03-05 2020-07-14 Gigantic Ltd. Systems and methods for monitoring of overall latency
CN111526314B (zh) * 2020-04-24 2022-04-05 荣耀终端有限公司 视频拍摄方法及电子设备
CN115185431A (zh) * 2020-06-01 2022-10-14 苹果公司 用于管理媒体的用户界面
US11054973B1 (en) 2020-06-01 2021-07-06 Apple Inc. User interfaces for managing media
US20230319399A1 (en) * 2020-09-18 2023-10-05 Google Llc Interface for Communicating a Threshold in a Camera
US11393432B2 (en) 2020-09-24 2022-07-19 Snap Inc. Rotational image viewer
US11212449B1 (en) * 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
US11671559B2 (en) 2020-09-30 2023-06-06 Snap Inc. Real time video editing
CN112399076B (zh) * 2020-10-27 2022-08-02 维沃移动通信有限公司 视频拍摄方法及装置
US20220137700A1 (en) * 2020-10-30 2022-05-05 Rovi Guides, Inc. System and method for selection of displayed objects by path tracing
CN117251091A (zh) * 2020-12-25 2023-12-19 北京字节跳动网络技术有限公司 信息交互方法、装置、设备、存储介质及程序产品
US11861800B2 (en) 2020-12-30 2024-01-02 Snap Inc. Presenting available augmented reality content items in association with multi-video clip capture
US12002135B2 (en) 2020-12-30 2024-06-04 Snap Inc. Adding time-based captions to captured video within a messaging system
US11924540B2 (en) * 2020-12-30 2024-03-05 Snap Inc. Trimming video in association with multi-video clip capture
JP2022110316A (ja) * 2021-01-18 2022-07-29 キヤノン株式会社 撮像装置、その制御方法およびプログラム
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
USD1018582S1 (en) * 2021-05-10 2024-03-19 Beijing Zitiao Network Technology Co., Ltd. Display screen or portion thereof with a graphical user interface
CN113596321B (zh) * 2021-06-16 2023-05-09 荣耀终端有限公司 转场动效的生成方法、设备和存储介质
EP4364397A1 (en) * 2021-06-30 2024-05-08 Snap Inc. User interface for presenting functions applicable to a camera

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103139480A (zh) * 2013-02-28 2013-06-05 华为终端有限公司 一种图像采集方法及装置

Family Cites Families (59)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL109487A (en) * 1994-04-29 1996-09-12 Orad Hi Tec Systems Ltd Chromakeying system
US6118480A (en) * 1997-05-05 2000-09-12 Flashpoint Technology, Inc. Method and apparatus for integrating a digital camera user interface across multiple operating modes
JP4325071B2 (ja) * 2000-04-07 2009-09-02 ソニー株式会社 デジタルビデオ再生方法及びデジタルビデオ再生装置
US20050193425A1 (en) * 2000-07-24 2005-09-01 Sanghoon Sull Delivery and presentation of content-relevant information associated with frames of audio-visual programs
US7918808B2 (en) * 2000-09-20 2011-04-05 Simmons John C Assistive clothing
US6741911B2 (en) * 2000-09-20 2004-05-25 John Castle Simmons Natural robot control
JP3914705B2 (ja) 2000-11-29 2007-05-16 富士フイルム株式会社 ディジタル・カメラおよびその動作制御方法
US7319480B2 (en) * 2003-06-26 2008-01-15 Eastman Kodak Company Method and apparatus for compressing motion image files to provide an improved image navigation display
US20050007468A1 (en) * 2003-07-10 2005-01-13 Stavely Donald J. Templates for guiding user in use of digital camera
CN101959021B (zh) * 2004-05-13 2015-02-11 索尼株式会社 图像显示装置及其图像显示方法
JP2006246173A (ja) * 2005-03-04 2006-09-14 Sony Corp 画像処理方法および画像処理装置
KR101155526B1 (ko) * 2005-06-15 2012-06-19 삼성전자주식회사 찾아가기 기능을 가진 디지털 영상 처리 장치의 제어 방법
US7509588B2 (en) * 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
JP2008060731A (ja) * 2006-08-29 2008-03-13 Olympus Imaging Corp カメラ、出力画像選択方法、プログラム
US20080055453A1 (en) 2006-09-05 2008-03-06 Battles Amy E Displaying a live view and captured images in a digital camera
JP4931845B2 (ja) * 2008-03-18 2012-05-16 富士フイルム株式会社 撮像装置及び撮影画像表示制御方法
US8751921B2 (en) * 2008-07-24 2014-06-10 Microsoft Corporation Presenting annotations in hierarchical manner
US8666223B2 (en) * 2008-09-25 2014-03-04 Kabushiki Kaisha Toshiba Electronic apparatus and image data management method
EP2207342B1 (en) * 2009-01-07 2017-12-06 LG Electronics Inc. Mobile terminal and camera image control method thereof
US20110032259A1 (en) * 2009-06-09 2011-02-10 Intromedic Co., Ltd. Method of displaying images obtained from an in-vivo imaging device and apparatus using same
EP2495953A4 (en) 2009-10-27 2015-11-25 Nec Casio Mobile Comm Ltd IMAGE RECORDING AND IMAGE RECORDING
JP5714812B2 (ja) * 2009-11-20 2015-05-07 ソニー株式会社 情報処理装置、ブックマーク設定方法およびプログラム
US8346056B2 (en) * 2010-10-14 2013-01-01 Honeywell International Inc. Graphical bookmarking of video data with user inputs in video surveillance
JP5480777B2 (ja) * 2010-11-08 2014-04-23 株式会社Nttドコモ オブジェクト表示装置及びオブジェクト表示方法
JP2012205037A (ja) * 2011-03-25 2012-10-22 Olympus Imaging Corp 画像処理装置および画像処理方法
WO2013076359A1 (en) * 2011-11-24 2013-05-30 Nokia Corporation Method, apparatus and computer program product for generation of animated image associated with multimedia content
US9225904B2 (en) * 2012-02-13 2015-12-29 Htc Corporation Image capture method and image capture system thereof
US9100588B1 (en) * 2012-02-28 2015-08-04 Bruce A. Seymour Composite image formatting for real-time image processing
WO2013169846A1 (en) * 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
JP2014017579A (ja) * 2012-07-06 2014-01-30 Olympus Imaging Corp 撮影装置、画像処理方法、及び、画像処理プログラム
JP6306512B2 (ja) * 2012-11-05 2018-04-04 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置
KR102078136B1 (ko) * 2013-01-07 2020-02-17 삼성전자주식회사 오디오 데이터를 가지는 이미지를 촬영하기 위한 장치 및 방법
US9189067B2 (en) * 2013-01-12 2015-11-17 Neal Joseph Edelstein Media distribution system
KR102045957B1 (ko) * 2013-01-18 2019-11-18 삼성전자 주식회사 휴대단말의 촬영 방법 및 장치
JP5725049B2 (ja) 2013-01-24 2015-05-27 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
WO2014178228A1 (ja) * 2013-04-30 2014-11-06 ソニー株式会社 クライアント端末、表示制御方法、プログラム、およびシステム
KR102067620B1 (ko) * 2013-05-21 2020-01-17 삼성전자주식회사 파노라마 사진의 썸네일 이미지 표시 장치, 방법 및 컴퓨터 판독 가능한 기록 매체
US20150350611A1 (en) * 2013-05-30 2015-12-03 Manything Systems Limited Methods and systems for monitoring environments using smart devices
US10021295B1 (en) * 2013-06-03 2018-07-10 Amazon Technologies, Inc. Visual cues for managing image capture
US10168882B2 (en) * 2013-06-09 2019-01-01 Apple Inc. Device, method, and graphical user interface for switching between camera interfaces
KR20150018264A (ko) * 2013-08-09 2015-02-23 엘지전자 주식회사 안경형 단말기의 정보 제공 장치 및 그 방법
WO2015098061A1 (ja) 2013-12-24 2015-07-02 京セラ株式会社 電子機器
US9684435B2 (en) * 2014-01-13 2017-06-20 Disney Enterprises, Inc. Camera selection interface for producing a media presentation
CN103841332B (zh) * 2014-03-21 2018-10-12 英华达(上海)科技有限公司 全景景象拍摄及浏览的移动装置、系统及方法
KR102158214B1 (ko) * 2014-05-19 2020-09-22 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
FR3021485A1 (fr) * 2014-05-26 2015-11-27 Lg Electronics Inc Dispositif mobile et methode de controle associee
US9554052B2 (en) * 2014-06-04 2017-01-24 Wit Dot Media, Inc. Single action photo and video messaging
EP3065042B1 (en) * 2015-02-13 2018-11-07 LG Electronics Inc. Mobile terminal and method for controlling the same
CN106055190B (zh) * 2015-04-16 2021-03-09 三星电子株式会社 用于经由显示器的部分提供信息的设备和方法
US20160353012A1 (en) * 2015-05-25 2016-12-01 Htc Corporation Zooming control method for camera and electronic apparatus with camera
KR102399049B1 (ko) * 2015-07-15 2022-05-18 삼성전자주식회사 전자 장치 및 전자 장치의 이미지 처리 방법
KR20170014356A (ko) * 2015-07-29 2017-02-08 엘지전자 주식회사 이동 단말기 및 이의 제어방법
KR20170032761A (ko) * 2015-09-15 2017-03-23 엘지전자 주식회사 이동 단말기
US10003853B2 (en) * 2016-04-14 2018-06-19 One Gold Tooth, Llc System and methods for verifying and displaying a video segment via an online platform
JP6642243B2 (ja) * 2016-04-27 2020-02-05 株式会社リコー 半導体集積回路及び情報処理方法
CN106231181B (zh) * 2016-07-29 2017-10-17 广东欧珀移动通信有限公司 全景拍摄方法、装置及终端设备
US10127632B1 (en) * 2016-09-05 2018-11-13 Google Llc Display and update of panoramic image montages
US10303333B2 (en) * 2016-09-21 2019-05-28 Htc Corporation Mobile device, method for camera user interface, and non-transitory computer readable storage medium
US10547776B2 (en) 2016-09-23 2020-01-28 Apple Inc. Devices, methods, and graphical user interfaces for capturing and recording media in multiple modes

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103139480A (zh) * 2013-02-28 2013-06-05 华为终端有限公司 一种图像采集方法及装置

Also Published As

Publication number Publication date
EP3491812B1 (en) 2022-03-16
US20230328359A1 (en) 2023-10-12
US20210051275A1 (en) 2021-02-18
US10848661B2 (en) 2020-11-24
US20180091728A1 (en) 2018-03-29
US20200120265A1 (en) 2020-04-16
US11750914B2 (en) 2023-09-05
CN117221439A (zh) 2023-12-12
EP3491812A1 (en) 2019-06-05
CN113923301B (zh) 2023-09-26
CN109644217A (zh) 2019-04-16
CN113923301A (zh) 2022-01-11
US10547776B2 (en) 2020-01-28
WO2018057267A1 (en) 2018-03-29

Similar Documents

Publication Publication Date Title
CN109644217B (zh) 用于在多种模式下捕获和录制媒体的设备、方法和图形用户界面
US11921978B2 (en) Devices, methods, and graphical user interfaces for navigating, displaying, and editing media items with multiple display modes
US11835985B2 (en) Devices and methods for capturing and interacting with enhanced digital images
JP6898964B2 (ja) メディアコンテンツをナビゲートするためのデバイス、方法及びグラフィカルユーザインターフェース
KR102514612B1 (ko) 카메라 효과를 위한 사용자 인터페이스
US11979656B2 (en) Devices, methods, and graphical user interfaces for assisted photo- taking
EP3885884A1 (en) Devices, methods, and graphical user interfaces for navigating, displaying, and editing media items with multiple display modes
KR20230169299A (ko) 별개의 애플리케이션들로부터 공유된 미디어 항목들을 디스플레이하기 위한 디바이스들, 방법들 및 그래픽 사용자 인터페이스들

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant