CN110618756A - 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面 - Google Patents

用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面 Download PDF

Info

Publication number
CN110618756A
CN110618756A CN201910893846.5A CN201910893846A CN110618756A CN 110618756 A CN110618756 A CN 110618756A CN 201910893846 A CN201910893846 A CN 201910893846A CN 110618756 A CN110618756 A CN 110618756A
Authority
CN
China
Prior art keywords
media item
display mode
display
images
user interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910893846.5A
Other languages
English (en)
Inventor
B·J·曼扎里
B·S·缪拉
S·O·勒梅
A·苏扎多斯桑托斯
C·A·米扎克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DKPA201770370A external-priority patent/DK179932B1/en
Application filed by Apple Inc filed Critical Apple Inc
Publication of CN110618756A publication Critical patent/CN110618756A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • G06F3/04855Interaction with scrollbars
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005Reproducing at a different information rate from the information rate of recording
    • G11B27/007Reproducing at a different information rate from the information rate of recording reproducing continuously a part of the information, i.e. repeating
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 

Abstract

本发明提供了一种电子设备,所述电子设备在第一用户界面中显示与第一显示模式下的图像序列对应的媒体项,所述第一显示模式是针对所述媒体项的多个用户可选显示模式中的一个。响应于检测到输入,所述设备显示同时显示所述媒体项的表示的显示模式选择用户界面,所述媒体项的表示包括与第二显示模式对应的所述媒体项的第二表示。所述设备检测在所述媒体项的所述多个表示中的所述第二表示上的输入。作为响应,所述设备针对所述媒体项选择所述多个用户可选显示模式中的第二显示模式,所述第二显示模式对应于所述媒体项的所述多个表示中的所述第二表示。

Description

用于导航、显示和编辑具有多个显示模式的媒体项的设备、方 法和图形用户界面
本申请是申请号为201880015192.X,申请日为2018年5月2日,发明名称为“用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面”的发明专利申请的分案申请。
技术领域
本文整体涉及具有触敏表面的电子设备,包括但不限于具有导航、显示和/或编辑具有多个用户可选显示模式的媒体项的触敏表面的电子设备。
背景技术
电子设备在捕获、查看、编辑和共享数字内容方面的使用近年来显著增加。用户时常利用其便携式电子设备(例如,智能电话、平板电脑和专用数字相机)来创建媒体项(例如,图像和/或视频,诸如来自Apple Inc.(Cupertino,California)的动态照片);在图像管理应用程序中查看和编辑其媒体项(例如,来自Apple Inc.(Cupertino,California)的照片)和/或数字内容管理应用程序(例如,来自Apple Inc.(Cupertino,California)的iTunes);并通过即时消息、电子邮件、社交媒体应用程序和其他通信应用程序与其他人共享其数字内容。
一些媒体项可以多个不同的显示模式来显示。用户可能难以导航、显示和编辑此类媒体项,因为多个显示模式创建了用于显示和编辑给定媒体项的多个选项。
发明内容
因此,需要具有更快、更有效的方法和界面以用于导航、显示和编辑具有多个显示模式的媒体项的电子设备。此类方法和界面任选地补充或替换用于导航、显示和编辑具有多个显示模式的媒体项的常规方法。此类方法和界面减少了来自用户的输入的数量、程度和/或性质,并且产生更有效的人机界面。对于电池驱动设备,此类方法和界面可节省用电并且增加两次电池充电之间的时间。
借助所公开的设备可减少或消除与具有触敏表面的电子设备的用户界面相关联的上述缺陷和其他问题。在一些实施方案中,该设备是台式计算机。在一些实施方案中,该设备是便携式的(例如,笔记本电脑、平板电脑或手持设备)。在一些实施方案中,该设备是个人电子设备(例如,可穿戴电子设备,诸如手表)。在一些实施方案中,该设备具有触控板。在一些实施方案中,该设备具有触敏显示器(也称为“触摸屏”或“触摸屏显示器”)。在一些实施方案中,该设备具有图形用户界面(GUI)、一个或多个处理器、存储器和一个或多个模块、被存储在存储器中以用于执行多个功能的程序或指令集。在一些实施方案中,用户主要通过触笔和/或手指接触以及触敏表面上的手势来与GUI进行交互。在一些实施方案中,这些功能任选地包括图像编辑、绘图、演示、文字处理、电子表格制作、玩游戏、接打电话、视频会议、收发电子邮件、即时消息通信、健身支持、数字摄影、数字视频录制、网页浏览、数字音乐播放、记笔记和/或数字视频播放。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。
根据一些实施方案,在具有显示器和触敏表面的电子设备处执行一种方法。该方法包括:在显示器上的第一用户界面中显示来自与相应显示模式下的图像序列对应的媒体项的一个或多个图像,其中相应显示模式是针对与图像序列对应的媒体项的多个用户可选显示模式中的一个;当显示来自相应显示模式下的媒体项的一个或多个图像时,检测第一输入;响应于检测到第一输入,在显示器上显示针对相应显示模式的编辑用户界面,其中:针对相应显示模式的编辑用户界面被配置为在以相应显示模式显示媒体项时更改哪些图像包括在媒体项内;并且针对相应显示模式的编辑用户界面同时显示:被配置为显示图像序列中的图像的第一区域;不同于第一区域的第二区域,该第二区域包括图像序列中的图像的表示、指示用于通过图像序列回放的第一边界的用户可调节的开始修剪示能表示,以及指示用于通过图像序列回放的第二边界的用户可调节的结束修剪示能表示;在显示针对相应显示模式的编辑用户界面时:根据一个或多个编辑输入来调节媒体项;检测用于退出针对相应显示模式的编辑用户界面的输入;退出针对相应显示模式的编辑用户界面;以及在第一用户界面中以相应显示模式显示已编辑的媒体项。
根据一些实施方案,在具有显示器和触敏表面的电子设备处执行一种方法。该方法包括:在显示器上的第一用户界面中以第一显示模式显示来自与图像序列对应的媒体项的一个或多个图像,其中第一显示模式是针对与图像序列对应的媒体项的多个用户可选显示模式中的一个;在以第一显示模式显示来自媒体项的一个或多个图像时,检测第一输入;响应于检测到第一输入,在显示器上显示显示模式选择用户界面,其中:显示模式选择用户界面同时显示媒体项的多个表示,包括与不同于第一显示模式的第二显示模式对应的媒体项的第二表示;在显示器上显示该显示模式选择用户界面时,检测媒体项的所述多个表示中的第二表示上的输入;以及响应于检测到媒体项的所述多个表示中的第二表示上的输入,针对与媒体项的所述多个表示中的第二表示对应的媒体项,选择所述多个用户可选显示模式中的第二显示模式。
根据一些实施方案,在具有显示器和触敏表面的电子设备处执行一种方法。该方法包括:在显示器上的第一用户界面中显示与图像序列对应的媒体项的表示,该媒体项包括来自第一显示模式下的图像序列的代表性图像;当显示与第一显示模式下的图像序列对应的媒体项的表示时,检测第一输入;响应于检测到第一输入,在显示器上以第一显示模式显示针对媒体项的编辑用户界面,其中编辑用户界面同时显示:被配置为顺序地显示在第一放大率下的图像序列中的图像的第一区域;以及不同于第一区域的第二区域,该第二区域包括在小于第一放大率的第二放大率下的图像序列中的图像的表示、被配置为经由第二区域中的代表性图像选择示能表示的位置来选择图像序列中的新代表性图像的用户可调节的代表性图像选择示能表示、多个范围修剪示能表示,所述多个范围修剪示能表示包括:指示用于通过图像序列回放的第一边界的用户可调节的开始修剪示能表示,以及指示用于通过图像序列回放的第二边界的用户可调节的结束修剪示能表示;当显示编辑用户界面时,检测指向代表性图像选择示能表示的第二输入;在检测到指向代表性图像选择示能表示的第二输入时:根据第二输入对第二区域中的代表性图像选择示能表示进行移动;显示第二区域中的图像的视觉上强调的表示,该图像对应于第二区域中的代表性图像选择示能表示的当前位置;以及在第一区域中显示来自图像序列的图像,该图像对应于第二区域中的代表性图像选择示能表示的当前位置。
根据一些实施方案,在具有显示器和触敏表面的电子设备处执行一种方法。该方法包括:在显示器上的第一用户界面中以多个用户可选显示模式的第一显示模式显示与图像序列对应的第一媒体项的表示,其中:第一媒体项是媒体项的集合的一部分;媒体项的集合按基于预先确定的标准的次序布置;一个或多个先前媒体项按该次序在第一媒体项之前;并且一个或多个后续媒体项按该次序在第一媒体项之后;当显示第一媒体项的表示时,检测包括在触敏表面上的相应方向上的移动的触摸输入;响应于检测到触摸输入:根据确定该移动是沿第一方向的移动,并且对应于第二图像序列的后续媒体项被指定为以第一显示模式显示,以第一显示模式显示该后续媒体项包括以基于第一显示模式确定的方式显示来自第二图像序列中的多个图像的内容;并且根据确定该移动是沿第一方向的移动,并且该后续媒体项被指定为以不同于第一显示模式的第二显示模式显示,以第二显示模式显示该后续媒体项包括以基于第二显示模式确定的方式显示来自第二图像序列中的多个图像的内容;
根据一些实施方案,在具有显示器和触敏表面的电子设备处执行一种方法。该方法包括:在显示器上的第一用户界面中以多个用户可选显示模式的相应显示模式显示与图像序列对应的第一媒体项的第一表示;在显示器上以相应显示模式显示第一媒体项的第一表示时,在触敏表面上与第一媒体项的表示对应的位置处检测触摸输入;响应于检测到触摸输入,并且在与第一媒体项的表示对应的位置处在触敏表面上继续检测触摸输入时:根据确定触摸输入满足基于该触摸的相应属性的量值的表示更改标准,并且第一媒体项的相应显示模式处于如下显示模式,在该显示模式下第一媒体项的第一表示是第一媒体项的随时间变化的动态表示,用第一媒体项的不随时间变化的静态表示替换媒体项的第一表示的显示;并且根据确定触摸输入不满足表示更改标准,将第一媒体项的第一表示的显示保持为动态表示。
根据一些实施方案,一种电子设备包括:显示器;触敏表面;任选地一个或多个存储器,用于检测与触敏表面的接触强度;任选地一个或多个触觉输出发生器;一个或多个处理器;以及存储器,该存储器存储一个或多个程序;一个或多个程序被配置为由一个或多个处理器执行,并且一个或多个程序包括用于执行或引起执行本文所述方法中的任一方法的操作的指令。根据一些实施方案,一种计算机可读存储介质在其中存储有指令,这些指令当由具有显示器、触敏表面、用于检测与触敏表面的接触强度的任选地一个或多个传感器以及任选地一个或多个触觉输出发生器的电子设备执行时,使得该设备执行本文所述的任何方法的操作或使得本文所述任何方法的操作被执行。根据一些实施方案,具有显示器、触敏表面、用于检测与触敏表面的接触强度的任选地一个或多个传感器、任选地一个或多个触觉输出发生器、存储器和用于执行存储在存储器中的一个或多个程序的一个或多个处理器的电子设备上的图形用户界面包括在本文所述任何方法中所显示的一个或多个元件,该一个或多个元件响应于输入进行更新,如本文所述的任何方法中所描述的。根据一些实施方案,一种电子设备包括:显示器、触敏表面、用于检测与触敏表面的接触强度的任选的一个或多个传感器以及任选地一个或多个触觉输出发生器。以及用于执行或导致执行本文所述方法中的任一种方法的操作的装置。根据一些实施方案,用于具有显示器、触敏表面、用于检测与触敏表面的接触强度的任选地一个或多个传感器以及任选地一个或多个触觉输出发生器的电子设备中的信息处理设备包括用于执行本文所述的任何方法的操作或使得本文所述的任何方法的操作被执行的装置。
因此,具有显示器、触敏表面,任选地用于检测与触敏表面的接触强度的一个或多个传感器以及任选地一个或多个触觉输出发生器的电子设备设置有用于导航、显示和编辑具有多个显示模式的媒体项的改进的方法和界面,从而提高此类设备的效能、效率和用户满意度。此类方法和界面可补充或替换用于导航、显示和编辑具有多个显示模式的媒体项的常规方法。
附图说明
为了更好地理解各种所述实施方案,应结合以下附图参考下面的具体实施方式,其中类似的附图标号在所有附图中指示对应的部分。
图1A是示出根据一些实施方案的具有触敏显示器的便携式多功能设备的框图。
图1B是示出根据一些实施方案的用于事件处理的示例性部件的框图。
图2示出了根据一些实施方案的具有触摸屏的便携式多功能设备。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施方案的便携式多功能设备上的应用程序菜单的示例性用户界面。
图4B示出了根据一些实施方案的用于具有与显示器分开的触敏表面的多功能设备的示例用户界面。
图4C-图4E示出了根据一些实施方案的动态强度阈值的实施例。
图5A至图5DW示出了根据一些实施方案的用于导航、显示以及编辑具有多个显示模式的媒体项的示例性用户界面。
图6A至图6F是根据一些实施方案的用于编辑具有多个显示模式的媒体项的方法的流程图。
图7A至图7D是根据一些实施方案的用于导航至具有多个显示模式的媒体项并针对该媒体项选择显示模式的方法的流程图。
图8A至图8F是根据一些实施方案的用于更改针对与图像序列对应的媒体项的代表性图像的方法的流程图。
图9A至图9I是根据一些实施方案的用于导航通过媒体项的集合的方法的流程图,其中媒体项具有多个用户可选显示模式。
图10A至图10C是根据一些实施方案的用于显示媒体项的动态表示与媒体项的静态表示之间的对应关系的方法的流程图,其中媒体项具有多个用户可选显示模式。
具体实施方式
本文描述了用于导航、显示和/或编辑具有多个用户可选显示模式的媒体项的多种不同方法。使用这些方法中的一种或多种(任选地相互结合)减少了来自用户的输入的数量、程度、和/或性质,并且提供了更有效的人机界面。这使得用户能够更快且更有效地与具有多个显示模式的媒体项交互。对于电池驱动设备,这些改进节省了功率并且增加了电池充电之间的时间。本文所述的方法中的一些包括:
·编辑具有多个显示模式的媒体项;
·导航至具有多个显示模式的媒体项并针对该媒体项选择显示模式;
·更改针对与图像序列对应的媒体项的代表性图像;
·导航通过媒体项的集合,其中媒体项具有多个用户可选显示模式;
以及
·显示媒体项的动态表示与媒体项的静态表示之间的对应关系,其中媒体项具有多个用户可选显示模式。
下面,图1A-1B、图2和图3提供对示例性设备的描述。图4A至图4B和图5A至图5DW示出了用于导航、显示和编辑具有多个显示模式的媒体项的示例性用户界面。图6A至图6F示出了根据一些实施方案的用于编辑具有多个显示模式的媒体项的方法的流程图。图7A至图7D示出了用于导航至具有多个显示模式的媒体项并针对该媒体项选择显示模式的方法的流程图。图8A至图8F示出了用于更改针对与图像序列对应的媒体项的代表性图像的方法的流程图。图9A至图9I示出了用于导航通过媒体项的集合的方法的流程图,其中媒体项具有多个用户可选显示模式。图10A至图10C示出了用于显示媒体项的动态表示与媒体项的静态表示之间的对应关系的方法的流程图,其中媒体项具有多个用户可选显示模式。图5A至图5DW中的用户界面用于示出图6A至图6F、图7A至图7D、图8A至图8F、图9A至图9I和图10A至图10C中的过程。
示例性设备
现在将详细地参考实施方案,这些实施方案的示例在附图中示出。下面的详细描述中示出许多具体细节,以便提供对各种所描述的实施方案的充分理解。但是,对本领域的普通技术人员将显而易见的是,各种所描述的实施方案可以在没有这些具体细节的情况下被实践。在其他情况下,没有详细地描述众所周知的方法、过程、部件、电路和网络,从而不会不必要地使实施方案的各个方面晦涩难懂。
还将理解的是,虽然在一些情况下,术语“第一”、“第二”等在本文中用于描述各种元件,但是这些元件不应受到这些术语限制。这些术语只是用于将一个元件与另一元件区分开。例如,第一接触可被命名为第二接触,并且类似地,第二接触可被命名为第一接触,而不脱离各种所描述的实施方案的范围。第一接触和第二接触均为接触,但它们不是同一个接触,除非上下文另外明确指示。
在本文中对各种所述实施方案的描述中所使用的术语只是为了描述特定实施方案的目的,而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样,单数形式“一个”和“该”旨在也包括复数形式,除非上下文另外明确地指示。还将理解的是,本文中所使用的术语“和/或”是指并且涵盖相关联的所列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
如本文中所使用,根据上下文,术语“如果”任选地被解释为意思是“当……时”后“在……时”或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为是指“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关过程的实施方案。在一些实施方案中,该设备为还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自AppleInc.(Cupertino,California)的iPod设备。任选地使用其他便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型电脑或平板电脑。还应当理解的是,在一些实施方案中,该设备并非便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触摸板)的台式计算机。
在下面的讨论中,描述了一种包括显示器和触敏表面的电子设备。然而,应当理解,该电子设备任选地包括一个或多个其他物理用户接口设备,诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用,诸如以下应用中的一个或多个应用:记笔记应用、绘图应用、演示应用、文字处理应用、网站创建应用、盘编辑应用、电子表格应用、游戏应用、电话应用、视频会议应用、电子邮件应用、即时消息应用、健身支持应用、照片管理应用、数字相机应用、数字摄像机应用、Web浏览应用、数字音乐播放器应用序、和/或数字视频播放器应用。
在设备上执行的各种应用程序任选地使用至少一个通用的物理用户界面设备,诸如触敏表面。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地对于不同应用程序被调整和/或变化,和/或在相应应用程序内被调整和/或变化。这样,设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在将注意力转到具有触敏显示器的便携式设备的实施方案。图1A是示出根据一些实施方案的具有触敏显示器系统112的便携式多功能设备100的框图。触敏显示器系统112有时为了方便而被叫做“触摸屏”,并且有时被简称为触敏显示器。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入、或控制设备116吗、和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100(例如,触敏表面,诸如设备100的触敏显示器系统112)上的接触强度的一个或多个强度传感器165。设备100任选地包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如,在触敏表面诸如设备100的触敏显示器系统112或设备300的触摸板355上生成触觉输出)。这些部件任选地通过一个或多个通信总线或信号线103进行通信。
如本说明书和权利要求书中所使用的,术语“触觉输出”是将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户手部的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解释为触感,该触感对应于设备或设备的部件的物理特征的所感知的变化。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如,即使在触敏表面的光滑度无变化时,触敏表面的移动也会任选地由用户解释或感测为触敏表面的“粗糙度”。虽然用户对触摸的此类解释将受到用户的个体化感官知觉的限制,但是对触摸的许多感官知觉是大多数用户共有的。因此,当触觉输出被描述为对应于用户的特定感官知觉(例如,“按下点击”、“松开点击”、“粗糙度”)时,除非另外陈述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移将会生成典型(或普通)用户的所述感官知觉。使用触觉输出向用户提供触觉反馈增强了设备的可操作性,并且使用户-设备界面更高效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误),从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,触觉输出模式指定触觉输出的特性,诸如触觉输出的幅值、触觉输出的运动波形的形状、触觉输出的频率、和/或触觉输出的持续时间。
当设备(例如经由移动可移动质块生成触觉输出的一个或多个触觉输出发生器)生成具有不同触觉输出模式的触觉输出时,触觉输出可在握持或触摸设备的用户中产生不同触感。虽然用户的感官基于用户对触觉输出的感知,但大多数用户将能够识别设备生成的触觉输出的波形、频率和幅值的变化。因此,波形、频率和幅值可被调节以向用户指示已执行了不同操作。这样,具有被设计、选择和/或安排用于模拟给定环境(例如,包括图形特征和对象的用户界面、具有虚拟边界和虚拟对象的模拟物理环境、具有物理边界和物理对象的真实物理环境、和/或以上任意者的组合)中对象的特性(例如大小、材料、重量、刚度、光滑度等);行为(例如振荡、位移、加速、旋转、伸展等);和/或交互(例如碰撞、粘附、排斥、吸引、摩擦等)的触觉输出模式的触觉输出在一些情况下将为用户提供有帮助的反馈,其减少输入错误并提高用户对设备的操作的效率。另外,触觉输出任选地被生成为对应于与所模拟物理特性(诸如输入阈值或对象选择)无关的反馈。此类触觉输出在一些情况下将为用户提供有帮助的反馈,其减少输入错误并提高用户对设备的操作的效率。
在一些实施方案中,具有合适触觉输出模式的触觉输出充当在用户界面中或在设备中屏幕后面发生感兴趣事件的提示。感兴趣事件的示例包括设备上或用户界面中提供的示能表示(例如真实或虚拟按钮、或拨动式开关)的激活、所请求操作的成功或失败、到达或穿过用户界面中的边界、进入新状态、在对象之间切换输入焦点、激活新模式、达到或穿过输入阈值、检测或识别一种类型的输入或手势等等。在一些实施方案中,提供触觉输出以充当关于除非改变方向或中断输入被及时检测到、否则会发生的即将发生事件或结果的警告或提示。触觉输出在其他情境下也用于丰富用户体验、改善具有视觉或运动困难或者其他可达性需要的用户对设备的可达性、和/或改善用户界面和/或设备的效率和功能性。任选地将触觉输出与音频输入和/或视觉用户界面改变进行比较,这进一步增强用户与用户界面和/或设备交互时用户的体验,并有利于关于用户界面和/或设备的状态的信息的更好传输,并且这减少输入错误并提高用户对设备的操作的效率。
应当理解,设备100仅仅是便携式多功能设备的一个示例,并且设备100任选地具有比所示出的部件更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件在硬件、软件、固件、或它们的任何组合(包括一个或多个信号处理电路和/或专用集成电路)中实施。
存储器102任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。设备100的其他部件(诸如一个或多个CPU 120和外围设备接口118)对存储器102的访问任选地由存储器控制器122来控制。
外围设备接口118可被用于将设备的输入外围设备和输出外围设备耦接到存储器102和一个或多个CPU 120。所述一个或多个处理器120运行或执行存储器102中所存储的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。
在一些实施方案中,外围设备接口118、一个或多个CPU 120、和存储器控制器122任选地在单个芯片诸如芯片104上实现。在一些其他实施方案中,它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被称作电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络和其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信来与网络和其他设备进行通信,这些网络为诸如互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如,蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。该无线通信任选地使用多种通信标准、协议和技术中的任一者,包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE 802.11ac、IEEE 802.11ax、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)、互联网协议语音技术(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS))、和/或短消息服务(SMS)、或者包括在本文档提交日期还未开发出的通信协议的其他任何适当的通信协议。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人类可听到的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据,并且将音频数据传输到外围设备接口118以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中,音频电路110还包括耳麦插孔(例如,图2中的212)。耳麦插孔提供音频电路110和可移除的音频输入/输出外围设备之间的接口,该可移除的音频输入/输出外围设备诸如仅输出的耳机或者具有输出(例如,单耳耳机或双耳耳机)和输入(例如,麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触敏显示器系统112和其他输入或控制设备116与外围设备接口118耦接。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161、和用于其他输入或控制设备的一个或多个输入控制器160。所述一个或多个输入控制器160从其他输入或控制设备116接收电信号/将电信号发送到所述其他输入或控制设备。其他输入控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮等。在一些另选的实施方案中,一个或多个输入控制器160任选地耦接至以下各项中的任一者(或不耦接至以下各项中的任一者):键盘、红外线端口、USB端口、触笔、和/或指针设备诸如鼠标。一个或多个按钮(例如,图2中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的向上/向下按钮。一个或多个按钮任选地包括下压按钮(例如,图2中的206)。
触敏显示器系统112提供设备与用户之间的输入接口和输出接口。显示控制器156从触敏显示器系统112接收电信号和/或将电信号发送至触敏显示器系统112。触敏显示器系统112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频以及它们的任何组合(统称为“图形”)。在一些实施方案中,一些视觉输出或全部的视觉输出对应于用户界面对象。如本文所用,术语“示能表示”是用户-交互式图形用户界面对象(例如,被配置为对被引向图形用户界面对象的输入进行响应的图形用户界面对象)。用户交互式图形用户界面对象的示例包括但不限于按钮、滑块、图标、可选择菜单项、开关、超链接或其他用户界面控件。
触敏显示器系统112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器、或传感器组。触敏显示器系统112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触敏显示器系统112上的接触(和该接触的任何移动或中断),并且将检测到的接触转换为与被显示在触敏显示器系统112上的用户界面对象(例如,一个或多个软按键、图标、网页或图像)的交互。在一些实施方案中,在触敏显示器系统112和用户之间的接触点对应于用户的手指或触笔。
触敏显示器系统112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术,但是在其他实施方案中使用其他显示技术。触敏显示系统112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触敏显示系统112接触的一个或多个点的其他元件来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在一些实施方案中,使用投射式互电容感测技术,诸如从Apple Inc.(Cupertino,California)的iPod中发现的技术。
触敏显示器系统112任选地具有超过100dpi的视频分辨率。在一些实施方案中,触摸屏视频分辨率超过400dpi(例如,为500dpi、800dpi或更大)。用户任选地使用任何合适的物体或附加物诸如触笔、手指等来与触敏显示系统112接触。在一些实施方案中,将用户界面设计成与基于手指的接触和手势一起工作,由于手指在触摸屏上的接触区域较大,因此这可能不如基于触笔的输入精确。在一些实施方案中,设备将基于手指的粗略输入转化为精确的指针/光标位置或命令以用于执行用户所期望的动作。
在一些实施方案中,除了触摸屏之外,设备100任选地包括用于激活或去激活特定功能的触控板(未示出)。在一些实施方案中,触控板是设备的触敏区域,与触摸屏不同,该触敏区域不显示视觉输出。触摸板任选地是与触敏显示器系统112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电源状态指示符(例如,发光二极管(LED))以及与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出与I/O子系统106中的光学传感器控制器158耦接的光学传感器。一个或多个光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。一个或多个光学传感器164从环境接收通过一个或多个透镜而投射的光,并且将光转换为表示图像的数据。结合成像模块143(也被叫做相机模块),一个或多个光学传感器164任选地捕获静态图像和/或视频。在一些实施方案中,光学传感器位于设备100的与设备前部上的触敏显示系统112相背对的后部上,使得触摸屏能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中,另一光学传感器位于设备的前部上,从而获取该用户的图像(例如,用于自拍、用于在用户在触摸屏上观看其他视频会议参与者时进行视频会议等等)。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了与I/O子系统106中的强度传感器控制器159耦接的接触强度传感器。一个或多个接触强度传感器165任选地包括一个或多个压阻应变仪、电容式力传感器、电气式力传感器、压电力传感器、光学力传感器、电容式触敏表面、或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。一个或多个接触强度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施方案中,至少一个接触强度传感器与触敏表面(例如,触敏显示器系统112)并置排列或邻近。在一些实施方案中,至少一个接触强度传感器位于设备100的与位于设备100的前部上的触敏显示系统112相背对的后部上。
设备100任选地还包括一个或多个接近传感器166。图1A示出了与外围设备接口118耦接的接近传感器166。另选地,接近传感器166与I/O子系统106中的输入控制器160耦接。在一些实施方案中,当多功能设备被置于用户耳朵附近时(例如,用户正在打电话时),接近传感器关闭并禁用触敏显示器系统112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了与I/O子系统106中的触觉反馈控制器161耦接的触觉输出发生器。在一些实施方案中,一个或多个触觉输出发生器167包括一个或多个电声设备诸如扬声器或其他音频部件;和/或用于将能量转换成线性运动的机电设备诸如电机、螺线管、电活性聚合器、压电致动器、静电致动器、或其他触觉输出生成部件(例如,用于将电信号转换成设备上的触觉输出的部件)。触觉输出发生器167从触觉反馈模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,触敏显示器系统112)并置排列或邻近,并且任选地通过竖直地(例如,向设备100的表面内/外)或侧向地(例如,在与设备100的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。在一些实施方案中,至少一个触觉输出发生器传感器位于设备100的与位于设备100的前部上的触敏显示系统112相背对的后部上。
设备100任选地还包括一个或多个加速度计168。图1A示出与外围设备接口118耦接的加速度计168。另选地,加速度计168任选地与I/O子系统106中的输入控制器160耦接。在一些实施方案中,基于对从该一个或多个加速度计所接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图来显示信息。设备100任选地除了一个或多个加速度计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系统)接收器(未示出),以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息。
在一些实施方案中,存储于存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、触觉反馈模块(或指令集)133、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135、以及应用程序(或指令集)136。此外,在一些实施方案中,存储器102存储设备/全局内部状态157,如图在1A和图3中所示的。设备/全局内部状态157包括以下中的一者或多者:活动应用程序状态,其指示哪些应用程序(如果有的话)当前是活动的;显示状态,其指示什么应用程序、视图或其它信息占据触敏显示器系统112的各个区域;传感器状态,包括从设备的各个传感器和其他输入或控制设备116获得的信息;以及关于设备的位置和/或姿态的位置和/或方位信息。
操作系统126(例如,iOS、Darwin、RTXC、LINUX、UNIX、OSX、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电源管理等)的各种软件组件和/或驱动器,并且有利于各种硬件和软件组件之间的通信。
通信模块128促进通过一个或多个外部端口124来与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件部件。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备或间接地经由网络(例如,互联网、无线LAN等)耦接。在一些实施方案中,外部端口是与Apple Inc.(Cupertino,California)的一些iPod和iPod设备中所使用的30针连接器相同或类似和/或兼容的多针(例如,30针)连接器。在一些实施方案中,外部端口是与Apple Inc.(Cupertino,California)的一些iPod和iPod设备中所使用的Lightning连接器相同或类似和/或兼容的Lightning连接器。
接触/运动模块130任选地检测与触敏显示器系统112(结合显示控制器156)和其他触敏设备(例如,触摸板或物理点击轮)的接触。接触/运动模块130包括各种软件部件以用于执行与(例如通过手指或触笔)接触检测相关的各种操作,诸如确定是否已发生接触(例如,检测手指按下事件)、确定接触的强度(例如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪跨触敏表面的移动(例如,检测一个或多个手指拖动事件),以及确定接触是否已停止(例如,检测手指抬离事件或者接触断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变),所述接触点的移动由一系列接触数据表示。这些操作任选地被应用于单点接触(例如,单指接触或触笔接触)或者多点同时接触(例如,“多点触摸”/多指接触)。在一些实施方案中,接触/运动模块130和显示控制器156检测触摸板上的接触。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触模式(例如,所检测到的接触的不同运动、计时和/或强度)。因此,任选地通过检测特定接触模式来检测手势。例如,检测单指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。又如,检测触敏表面上的手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且随后检测手指抬起(抬离)事件。类似地,通过检测触笔的特定接触图案来任选地检测触笔的轻击、轻扫、拖动和其他手势。
在一些实施方案中,检测手指轻击手势取决于检测手指按下事件与手指抬起事件之间的时间长度,但是与检测手指按下事件与手指抬起事件之间的手指接触强度无关。在一些实施方案中,根据确定手指按下事件与手指抬起事件之间的时间长度小于预先确定的值(例如,小于0.1、0.2、0.3、0.4或0.5秒),检测轻击手势,而不管轻击期间手指接触的强度是否达到给定的强度阈值(大于标称接触检测强度阈值),例如轻按压或深按压强度阈值。因此,手指轻击手势可以满足特定输入标准,该特定输入标准不要求接触的特征强度满足给定强度阈值以满足特定输入标准。为清楚起见,轻击手势中的手指接触通常需要满足标称接触检测强度阈值以检测到手指按下事件,低于该标称接触检测强度阈值时,不会检测到接触。类似的分析适用于通过触笔或其他接触检测轻击手势。在设备能够检测在触敏表面上方悬停的手指或触笔接触的情况下,标称接触检测强度阈值任选地不与手指或触笔与触敏表面之间的物理接触对应。
同样的概念以类似方式适用于其他类型的手势。例如,可基于满足与手势中包括的接触的强度无关或者不要求执行手势的一个或多个接触达到强度阈值以便被识别的标准来任选地检测轻扫手势、捏合手势、展开手势和/或长按压手势。例如,轻扫手势基于一个或多个接触的移动的量来检测;缩放手势基于两个或更多个接触朝彼此的移动来检测;扩放手势基于两个或更多个接触背离彼此的移动来检测;长按压手势基于触敏表面上具有少于阈值移动量的接触的持续时间来检测。因此,关于特定手势识别标准不要求接触强度满足相应的强度阈值以满足特定手势识别标准的陈述意味着特定手势识别标准能够在手势中的接触未达到相应的强度阈值时被满足,并且还能够在手势中的一个或多个接触达到或超过相应的强度阈值的情况下被满足。在一些实施方案中,基于确定在预定义时间段内检测到手指按下事件和手指抬起事件来检测轻击手势,而不考虑在预定义时间段期间接触是高于还是低于相应的强度阈值,并且基于确定接触移动大于预定义量值来检测轻扫手势,即使在接触移动结束时接触高于相应的强度阈值也是如此。即使在对手势的检测受到执行手势的接触的强度的影响的具体实施中(例如,当接触的强度高于强度阈值时,设备更快地检测到长按压,或者当接触的强度更高时,设备会延迟对轻击输入的检测),只要在接触未达到特定强度阈值的情况下可以满足识别手势的标准,则对这些手势的检测也不会要求接触达到特定强度阈值(例如,即使识别手势所需的时间量发生变化)。
在某些情况下,接触强度阈值、持续时间阈值和移动阈值以各种不同组合进行组合,以便创建启发式算法来区分针对相同输入元素或区域的两个或更多个不同手势,使得与相同输入元素的多个不同交互能够提供更丰富的用户交互和响应的集合。关于一组特定手势识别标准不要求接触的强度满足相应的强度阈值以满足特定手势识别标准的陈述不排除对其他强度相关手势识别标准进行同时评估,以识别具有当手势包括具有高于相应强度阈值的强度的接触时被满足的标准的其他手势。例如,在某些情况下,第一手势的第一手势识别标准(其不要求接触的强度满足相应的强度阈值以满足第一手势识别标准)与第二手势的第二手势识别标准(其取决于达到相应强度阈值的接触)竞争。在此类竞争中,如果第二手势的第二手势识别标准首先得到满足,则手势任选地不被识别为满足第一手势的第一手势识别标准。例如,如果在接触移动预定义的移动量之前接触达到相应的强度阈值,则检测到深按压手势而不是轻扫手势。相反,如果在接触达到相应的强度阈值之前接触移动预定义的移动量,则检测到轻扫手势而不是深按压手势。即使在此类情况下,第一手势的第一手势识别标准仍然不要求接触的强度满足相应的强度阈值以满足第一手势识别标准,因为如果接触保持低于相应的强度阈值直到手势结束(例如,具有不会增大到高于相应强度阈值的强度的接触的轻扫手势),手势将被第一手势识别标准识别为轻扫手势。因此,不要求接触的强度满足相应的强度阈值以满足特定手势识别标准的特定手势识别标准将会(A)在某些情况下,忽略相对于强度阈值的接触强度(例如,对于轻击手势而言)和/或(B)在某些情况下,如果在特定手势识别标准识别与输入对应的手势之前,一组竞争的强度相关手势识别标准(例如,对于深按压手势而言)将输入识别为与强度相关手势对应,则不能满足特定手势识别标准(例如,对于长按压手势而言),从这个意义上来讲,仍然取决于相对于强度阈值的接触强度(例如,对于与深按压手势竞争识别的长按压手势而言)。
图形模块132包括用于在触敏显示器系统112或其他显示器上渲染和显示图形的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等。
在一些实施方案中,图形模块132存储表示待使用的图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收用于指定待显示的图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其他图形属性数据,并且然后生成屏幕图像数据,以输出至显示控制器156。
触觉反馈模块133包括用于生成指令(例如,由触觉反馈控制器161使用的指令)的各种软件部件,以响应于用户与设备100的交互而使用触觉输出发生器167在设备100上的一个或多个位置处生成触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置并提供这种信息以在各种应用程序中使用(例如,提供至用于基于位置的拨号的电话138;提供至相机143作为图片/视频元数据;以及提供至提供基于位置的服务诸如天气桌面小程序、当地黄页桌面小程序和地图/导航桌面小程序的应用程序)。
应用程序136任选地包括以下模块(或指令集)或者其子集或超集:
·联系人模块137(有时称为通讯录或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健身支持模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·浏览器模块147;
·日历模块148;
·桌面小程序模块149,其任选地包括以下各项中的一者或多者:天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5、和由用户获得的其他桌面小程序、以及用户创建的桌面小程序149-6;
用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150;
·搜索模块151;
·任选地由视频播放器模块和音乐播放器模块构成的视频和音乐播放器模块152;
·记事本模块153;
·地图模块154;以及/或者
·在线视频模块155。
任选地存储在存储器102中的其他应用程序136的示例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密、数字权益管理、语音识别和语音复制。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,联系人模块137包括可执行指令用于管理通讯录或联系人列表(例如,存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192中),包括:添加姓名到通讯录;从地址簿删除姓名;将电话号码、电子邮件地址、物理地址或其他信息与姓名关联;将图像与姓名关联;对姓名进行归类和分类;提供电话号码和/或电子邮件地址来发起和/或促进通过电话138、视频会议139、电子邮件140或即时消息141的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示器系统112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,电话模块138包括用于进行以下操作的可执行指令:输入与电话号码对应的字符序列、访问通讯录137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话、以及当会话完成时断开或挂断。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示系统112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包括根据用户指令来发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,即时消息模块141包括用于进行以下操作的可执行指令:输入与即时消息对应的字符序列、修改先前输入的字符、传输相应即时消息(例如,使用针对基于电话的即时消息的短消息服务(SMS)或多媒体消息服务(MMS)协议或者使用针对基于互联网的即时消息的XMPP、SIMPLE、Apple推送通知服务(APN)或IMPS)、接收即时消息,以及查看所接收的即时消息。在一些实施方案中,所传输和/或接收的即时消息任选地包括图形、相片、音频文件、视频文件、和/或MMS和/或增强消息服务(EMS)中所支持的其他附接件。如本文所用,“即时消息”是基于电话的消息(例如,使用SMS或MMS发送的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE、APN或IMPS发送的消息)两者。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154以及视频和音乐播放器模块152,健身支持模块142包括可执行指令用于创建健身(例如,具有时间、距离和/或卡路里燃烧目标);与(体育设备和智能手表中的)健身传感器通信;接收健身传感器数据;校准用于监视健身的传感器;为健身选择和播放音乐;以及显示、存储和传输健身数据。
结合触敏显示器系统112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144,相机模块143包括用于进行以下操作的可执行指令:捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特征、和/或从存储器102删除静态图像或视频。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134、和相机模块143,图像管理模块144包括用于排列、修改(例如,编辑)、或以其他方式操控、加标签、删除、展示(例如,在数字幻灯片或相册中)、以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,浏览器模块147包括根据用户指令来浏览互联网(包括搜索、链接到、接收、和显示网页或其部分、以及链接到网页的附件和其他文件)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括用于根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序模块149是任选地由用户下载和使用的微型应用程序(例如,天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和词典桌面小程序149-5)、或由用户创建的微型应用程序(例如,用户创建的桌面小程序149-6)。在一些实施方案中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中,桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、和浏览器模块147,桌面小程序创建器模块150包括用于创建桌面小程序(例如,将网页的用户指定部分转到桌面小程序中)的可执行指令。
结合触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包括用于根据用户指令来搜索存储器102中的与一个或多个搜索条件(例如,一个或多个用户指定的搜索词)匹配的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触敏显示系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令,以及用于显示、呈现或以其他方式回放视频(例如,在触敏显示系统112上或在经由外部端口124无线连接的外部显示器上)的可执行指令。在一些实施方案中,设备100任选地包括MP3播放器诸如iPod(Apple Inc.的商标)的功能。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,记事本模块153包括用于根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154包括用于根据用户指令来接收、显示、修改和存储地图以及与地图相关联的数据(例如,驾车路线;特定位置处或附近的商店和其他兴趣点的数据;和其他基于位置的数据)的可执行指令。
结合触敏显示系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、回放(例如在触摸屏112上或在无线连接的或经由外部端口124连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件、以及以其他方式管理一种或多种文件格式诸如H.264的在线视频的可执行指令。在一些实施方案中,使用即时消息模块141而不是电子邮件客户端模块140来发送特定在线视频的链接。
上述所识别的每个模块和应用对应于用于执行上述一种或多种功能以及在本申请中所描述的方法(例如,本文中所描述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(即,指令集)不必以独立的软件程序、过程或模块实现,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。在一些实施方案中,存储器102任选地存储上述模块和数据结构的子组。此外,存储器102任选地存储上文未描述的另外的模块和数据结构。
在一些实施方案中,设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触控板作为用于操作设备100的主要输入控制设备,任选地减少设备100上的物理输入控制设备(例如,下压按钮、拨盘等等)的数量。
唯一地通过触摸屏和/或触控板来执行的预定义的一组功能任选地包括在用户界面之间的导航。在一些实施方案中,触摸板在被用户触摸时将设备100从设备100上显示的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施方案中,使用触摸板来实现“菜单按钮”。在一些其他实施方案中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触摸板。
图1B是示出根据一些实施方案的用于事件处理的示例性部件的框图。在一些实施方案中,存储器102(图1A中)或存储器370(图3)包括事件分类器170(例如,在操作系统126中)和相应的应用程序136-1(例如,前述应用程序136、137至155、380至390中的任一个应用程序)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中,应用程序136-1包括应用程序内部状态192,该应用程序内部状态指示当应用程序是活动的或正在执行时在触敏显示器系统112上显示的一个或多个当前应用程序视图。在一些实施方案中,设备/全局内部状态157被事件分类器170用来确定哪个(哪些)应用程序当前是活动的,并且应用程序内部状态192被事件分类器170用来确定要将事件信息递送到的应用程序视图191。
在一些实施方案中,应用程序内部状态192包括附加信息,诸如以下各项中的一者或多者:当应用程序136-1恢复执行时将被使用的恢复信息、指示信息正被显示或准备好用于被应用程序136-1显示的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列,以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如,作为多点触摸手势的一部分的触敏显示器系统112上的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器诸如接近传感器166、一个或多个加速度计168和/或麦克风113(通过音频电路110)接收的信息。外围设备接口118从I/O子系统106所接收的信息包括来自触敏显示器系统112或触敏表面的信息。
在一些实施方案中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在其他实施方案中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中,事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器系统112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户能够在显示器上看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图,本文中有时也称为应用程序视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如,在其中检测到触摸的最低水平视图任选地被称为命中视图,并且被识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,所述初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时,命中视图确定模块172将命中视图识别为应当对子事件进行处理的分级结构中的最低视图。在大多数情况下,命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别,命中视图便通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块173确定仅命中视图应接收特定子事件序列。在其他实施方案中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图,并因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施方案中,即使触摸子事件完全被局限到与一个特定视图相关联的区域,分级结构中的较高视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施方案中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施方案中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器模块182进行检索。
在一些实施方案中,操作系统126包括事件分类器170。另选地,应用程序136-1包括事件分类器170。在又一个实施方案中,事件分类器170是独立模块,或者是存储在存储器102中的另一个模块(诸如,接触/运动模块130)的一部分。
在一些实施方案中,应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191,其中的每一个都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常,相应应用程序视图191包括多个事件识别器180。在其他实施方案中,事件识别器180中的一个或多个事件识别器是独立模块的一部分,该独立模块为诸如用户界面工具包(未示出)或应用程序136-1从中继承方法和其他属性的较高级别的对象。在一些实施方案中,相应事件处理程序190包括以下各项中的一者或多者:数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用程序内部状态192。另选地,应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序190。另外,在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178中的一者或多者包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施方案中,事件识别器180还包括元数据183和事件传递指令188(其任选地包括子事件递送指令)的至少一个子集。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速率和方向。在一些实施方案中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向取向,或反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,并且基于该比较来确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施方案中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其他。在一些实施方案中,事件187中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个示例中,事件1(187-1)的定义是被显示对象上的双击。例如,双击包括被显示对象上的预先确定时长的第一次触摸(触摸开始)、预先确定时长的第一次抬起(触摸结束)、被显示对象上的预先确定时长的第二次触摸(触摸开始)以及预先确定时长的第二次抬起(触摸结束)。在另一个示例中,事件2(187-2)的定义是被显示对象上的拖动。例如,拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器系统112上的移动、以及触摸的抬离(触摸结束)。在一些实施方案中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中,事件定义187包括对用于相应用户界面对象的事件的定义。在一些实施方案中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在触敏显示器系统112上显示三个用户界面对象的应用程序视图中,当在触敏显示器系统112上检测到触摸时,事件比较器184执行命中Test以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示对象与相应事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中,对相应事件187的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列是否确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件序列不与事件定义186中的任何事件匹配时,该相应事件识别器180进入事件不可能、事件失败或事件结束状态,在此之后忽略基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪并处理持续进行的基于触摸的手势的子事件。
在一些实施方案中,相应事件识别器180包括具有指示事件递送系统应当如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表的元数据183。在一些实施方案中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标志和/或列表。在一些实施方案中,元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施方案中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中,相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中,事件识别器180抛出与所识别的事件相关联的标记,并且与该标记相关联的事件处理程序190获取该标记并执行预定义过程。
在一些实施方案中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件序列相关联的事件处理程序或者递送到活跃参与的视图。与子事件序列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中,数据更新器176创建并更新在应用程序136-1中使用的数据。例如,数据更新器176对联系人模块137中所使用的电话号码进行更新,或者对视频或音乐播放器模块152中所使用的视频文件进行存储。在一些实施方案中,对象更新器177创建和更新在应用程序136-1中使用的对象。例如,对象更新器177创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息,并且将显示信息发送到图形模块132用以显示在触敏显示器上。
在一些实施方案中,事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对它们的访问权限。在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序136-1或应用程序视图191的单个模块中。在其他实施方案中,它们被包括在两个或更多个软件模块中。
应当理解,关于触敏显示器上的用户触摸的事件处理的上述论述还适用于利用输入设备来操作多功能设备100的其他形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,任选地与单次或多次键盘按下或按住协作的鼠标移动和鼠标按钮按下;触摸板上的接触移动,诸如轻击、拖动、滚动等;触笔输入;设备的移动;口头指令;检测到的眼睛移动;生物特征输入;和/或它们的任何组合任选地被用作对应于限定要识别的事件的子事件的输入。
图2示出了根据一些实施方案的具有触摸屏(例如,图1A的触敏显示器系统112)的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在这些实施方案中以及在下文中描述的其他实施方案中,用户能够通过例如利用一个或多个手指202(在图中未按比例绘制)或一个或多个触笔203(在图中未按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中,当用户中断与一个或多个图形的接触时,将发生对一个或多个图形的选择。在一些实施方案中,手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,不经意地与图形接触不会选择图形。例如,当与选择对应的手势是轻击时,在应用程序图标上方扫动的轻扫手势任选地不会选择对应的应用程序。
设备100任选地还包括一个或多个物理按钮,诸如“home”按钮、或菜单按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。作为另外一种选择,在一些实施方案中,菜单按钮被实现为被显示在触摸屏显示器上的GUI中的软键。
在一些实施方案中,设备100包括触摸屏显示器、菜单按钮204(有时称为主屏幕按钮204)、用于使设备通电/断电和用于锁定设备的下压按钮206、音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压下状态持续预定义的时间间隔来对设备进行开/关机;通过压下该按钮并在该预定义的时间间隔过去之前释放该按钮来锁定设备;和/或对设备进行解锁或发起解锁过程。在一些实施方案中,设备100还通过麦克风113来接受用于激活或停用某些功能的语音输入。设备100还任选地包括用于检测触敏显示器系统112上的接触的强度的一个或多个接触强度传感器165、和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施方案中,设备300是膝上型电脑、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如,家用控制器或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于将这些部件互联的一根或多根通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时称作芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330,该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触控板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如,类似于以上参考图1A所述的一个或多个触觉输出发生器167)、传感器359(例如,光学传感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图1A所述的一个或多个接触强度传感器165的接触强度传感器)。存储器370包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备;并且任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离CPU310定位的一个或多个存储设备。在一些实施方案中,存储器370存储与便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块、和数据结构,或它们的子组。此外,存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加程序、模块和数据结构。例如,设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中上述所识别的元件中的每个元件任选地存储在先前提到的存储器设备中的一个或多个存储器设备中。上述所识别的模块中的每个模块对应于用于执行上述功能的一组指令。上述所识别的模块或程序(即,指令集)不必被实现为单独的软件程序、过程或模块,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。在一些实施方案中,存储器370任选地存储上述模块和数据结构的子组。此外,存储器370任选地存储上文未描述的另外的模块和数据结构。
现在将注意力转到任选地在便携式多功能设备100上实现的用户界面(“UI”)的实施方案。
图4A示出根据一些实施方案的便携式多功能设备100上的应用程序菜单的示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施方案中,用户界面400包括以下元件或者其子集或超集:
·一种或多种无线通信诸如蜂窝信号和Wi-Fi信号的一个或多个信号强度指示器;
·时间;
·蓝牙指示器;
·电池状态指示器;
·具有针对常用应用程序的图标的托盘408,该图标诸如:
ο电话模块138的被标记为“电话”的图标416,该图标416任选地包括未接来电或语音留言的数量的指示符414;
ο电子邮件客户端模块140的被标记为“邮件”的图标418,该图标418任选地包括未读电子邮件的数量的指示符410;
ο浏览器模块147的标记为“浏览器”的图标420;以及
ο视频和音乐播放器模块152的被标记为“音乐”的图标422;以及
·其他应用的图标,诸如:
οIM模块141的被标记为“消息”的图标424;
ο日历模块148的被标记为“日历”的图标426;
ο图像管理模块144的被标记为“照片”的图标428;
ο相机模块143的被标记为“相机”的图标430;
ο在线视频模块155的被标记为“在线视频”的图标432;
ο股市桌面小程序149-2的被标记为“股市”的图标434;
ο地图模块154的被标记为“地图”的图标436;
ο天气桌面小程序149-1的被标记为“天气”的图标438;
ο闹钟桌面小程序149-4的被标记为“时钟”的图标440;
ο健身支持模块142的被标记为“健身支持”的图标442;
ο记事本模块153的标记为“记事本”的图标444;以及
ο用于设置应用程序或模块的图标446,该图标提供对设备100及其各种应用程序136的设置的访问。
应当注意,图4A中示出的图标标签仅仅是示例性的。例如,其他标签任选地用于各种应用图标。在一些实施方案中,相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施方案中,特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。
图4B示出了具有与显示器450分开的触敏表面451(例如,图3中的平板或触控板355)的设备(例如,图3中的设备300)上的示例性用户界面。尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出随后的许多实施例,但是在一些实施方案中,设备检测与显示器分开的触敏表面上的输入,如图4B中所示。在一些实施方案中,触敏表面(例如,图4B中的451)具有与显示器(例如,450)上的主轴线(例如,图4B中的453)对应的主轴线(例如,图4B中的452)。根据这些实施方案,设备检测与显示器上相应位置对应的位置处的与触敏表面451的接触(例如,图4B中的460和462)(例如,在图4B中,460对应于468并且462对应于470)。这样,在触敏表面(例如,图4B中的451)与多功能设备的显示器(例如,图4B中的450)是分开的时侯,由设备在触敏表面上所检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操纵显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界面。
另外,虽然主要是参考手指输入(例如,手指接触、单指轻击手势、手指轻扫手势等)来给出下面的示例,但是应当理解的是,在一些实施方案中,这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如,基于鼠标的输入或触笔输入)替换。例如,轻扫手势任选地由鼠标点击(例如,而不是接触),之后是光标沿着轻扫的路径的移动(例如,而不是接触的移动)替代。又如,轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如,代替对接触的检测,之后是停止检测接触)替代。类似地,当同时检测到多个用户输入时,应当理解的是,多个计算机鼠标任选地被同时使用,或鼠标和手指接触任选地被同时使用。
如本文所用,术语“焦点选择器”是指示用户正与之交互的用户界面的当前部分的输入元素。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如,图3中的触控板355或图4B中的触敏表面451)上检测到输入(例如,按压输入)的情况下,该特定用户界面元素根据所检测到的输入而被调整。在包括使得能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如,图1A中的触敏显示器系统112或图4A中的触摸屏)的一些具体实施中,在触摸屏上检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如,通过接触的按压输入)时,根据所检测到的输入来调整特定用户界面元素。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据焦点在用户界面的不同区域之间的移动而移动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制以便传送与用户界面的用户期望的交互(例如,通过向设备指示用户界面的用户期望与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触摸板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
如在本说明书和权利要求书中所使用的,术语触敏表面上的接触的“强度”是触敏表面上的接触(例如,手指接触或触笔接触)的力或压力(每单位面积的力),或者是触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围,该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如,至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中,来自多个力传感器的力测量被合并(例如,加权平均或者加和),以确定估计的接触力。类似地,触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地,在触敏表面上检测到的接触区域的大小和/或其变化、接触附近的触敏表面的电容和/或其变化以及/或者接触附近的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中,接触力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如,强度阈值以对应于替代物测量的单位来描述)。在一些具体实施中,将接触力或压力的替代测量值转换为预估力或压力,并且使用预估力或压力确定是否已超过强度阈值(例如,强度阈值是以压力单位测量的压力阈值)。使用接触的强度作为用户输入的属性,从而允许用户访问用户在用于(例如,在触敏显示器上)显示示能表示和/或接收用户输入(例如,经由触敏显示器、触敏表面或物理控件/机械控件诸如旋钮或按钮)的实地面积有限的尺寸更小的设备上本来不能容易地访问的附加设备功能。
在一些实施方案中,接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如,确定用户是否已“点击”图标)。在一些实施方案中,根据软件参数来确定强度阈值的至少一个子集(例如,强度阈值不是由特定物理致动器的激活阈值来确定的,并且可在不改变设备100的物理硬件的情况下被调节)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏显示器的鼠标“点击”阈值可被设置为预定义阈值的大范围中的任一个阈值。另外,在一些具体实施中,设备的用户提供有用于调节一组强度阈值中的一个或多个强度阈值(例如,通过调节各个强度阈值和/或通过利用对“强度”参数的系统级点击来一次调节多个强度阈值)的软件设置。
如说明书和权利要求书中所使用的,接触的“特征强度”这一术语是基于接触的一个或多个强度的接触的特征。在一些实施方案中,特征强度基于多个强度样本。特征强度任选地基于相对于预定义事件(例如,在检测到接触之后,在检测到接触抬离之前,在检测到接触开始移动之前或之后,在检测到接触结束之前,在检测到接触的强度增大之前或之后和/或在检测到接触的强度减小之前或之后)而言在预先确定的时间段(例如,0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间采集的预定义数量的强度样本或一组强度样本。接触的特征强度任选地基于以下各项中的一者或多者:接触强度的最大值、接触强度的均值、接触强度的平均值、接触强度的前10%处的值、接触强度的半最大值、接触强度的90%最大值、通过在预定义时间段上或从预定义时间开始低通滤波接触强度而生成的值等。在一些实施方案中,在确定特征强度时使用接触的持续时间(例如,在特征强度是接触的强度在时间上的平均值时)。在一些实施方案中,将特征强度与一组一个或多个强度阈值进行比较,以确定用户是否已执行操作。例如,该组一个或多个强度阈值可包括第一强度阈值和第二强度阈值。在该实施例中,特征强度未超过第一强度阈值的接触导致第一操作,特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作,并且特征强度超过第二强度阈值的接触导致第三操作。在一些实施方案中,使用特征强度和一个或多个强度阈值之间的比较来确定是否要执行一个或多个操作(例如,是否执行相应选项或放弃执行相应操作),而不是用于确定执行第一操作还是第二操作。
在一些实施方案中,识别手势的一部分以用于确定特征强度。例如,触敏表面可接收连续轻扫接触,该连续轻扫接触从起始位置过渡并达到结束位置(例如拖动手势),在该结束位置处,接触的强度增大。在该实施例中,接触在结束位置处的特征强度可仅基于连续轻扫接触的一部分,而不是整个轻扫接触(例如,仅结束位置处的轻扫接触的一部分)。在一些实施方案中,可在确定接触的特征强度之前向轻扫手势的强度应用平滑化算法。例如,平滑化算法任选地包括以下各项中的一种或多种:不加权滑动平均平滑化算法、三角平滑化算法、中值滤波器平滑化算法和/或指数平滑化算法。在一些情况下,这些平滑化算法消除了轻扫接触的强度中的窄的尖峰或凹陷,以实现确定特征强度的目的。
本文所述的用户界面图任选地包括各种强度图(例如,强度图5148),这些强度图示出触敏表面上的接触相对于一个或多个强度阈值(例如,接触检测强度阈值IT0、轻按压强度阈值ITL、深按压强度阈值ITD(例如,至少初始高于ITL)和/或一个或多个其他强度阈值(例如,比ITL低的强度阈值ITH))的当前强度。该强度图通常不是所显示的用户界面的一部分,但是被提供以帮助解释所述图。在一些实施方案中,轻按压强度阈值对应于这样的强度:在该强度下设备将执行通常与点击物理鼠标或触摸板的按钮相关联的操作。在一些实施方案中,深按压强度阈值对应于这样的强度:在该强度下设备将执行与通常与点击物理鼠标或触控板的按钮相关联的操作不同的操作。在一些实施方案中,当检测到特征强度低于轻按压强度阈值(例如,并且高于标称接触检测强度阈值IT0,比标称接触检测强度阈值低的接触不再被检测到)的接触时,设备将根据接触在触敏表面上的移动来移动焦点选择器,而不执行与轻按压强度阈值或深按压强度阈值相关联的操作。一般来讲,除非另有陈述,否则这些强度阈值在不同组的用户界面附图之间是一致的。
在一些实施方案中,设备对设备所检测到的输入的响应取决于基于输入期间的接触强度的标准。例如,对于一些“轻按压”输入,在输入期间超过第一强度阈值的接触的强度触发第一响应。在一些实施方案中,设备对由设备所检测到的输入的响应取决于包括输入期间的接触强度和基于时间的标准两者的标准。例如,对于一些“深按压”输入,只要在满足第一强度阈值与满足第二强度阈值之间经过延迟时间,在输入期间超过大于轻按压的第一强度阈值的第二强度阈值的接触的强度便触发第二响应。该延迟时间的持续时间通常小于200ms(毫秒)(例如,40ms、100ms、或120ms,这取决于第二强度阈值的量值,其中该延迟时间随着第二强度阈值增大而增大)。该延迟时间帮助避免意外地识别深按压输入。又如,对于一些“深按压”输入,在达到第一强度阈值之后将出现敏感度降低的时间段。在该敏感度降低的时间段期间,第二强度阈值增大。第二强度阈值的这种暂时增大还有助于避免意外深按压输入。对于其他深按压输入,对检测到深按压输入的响应不取决于基于时间的标准。
在一些实施方案中,输入强度阈值和/或对应输出中的一者或多者基于一个或多个因素(诸如用户设置、接触运动、输入定时、应用运行、施加强度时的速率、同时输入的数量、用户历史、环境因素(例如,环境噪声)、焦点选择器位置等)而变化。示例因素在美国专利申请14/399,606和14/624,296中有所描述,这些美国专利申请全文以引用方式并入本文。
例如,图4C示出了部分地基于触摸输入476随时间的强度而随时间改变的动态强度阈值480。动态强度阈值480是两个分量的总和:在从触摸输入476初始被检测到开始的预定义的延迟时间p1之后随时间衰减的第一分量474和随时间而跟踪触摸输入476的强度的第二分量478。第一分量474的初始高强度阈值减少意外触发“深按压”响应,同时仍然允许在触摸输入476提供足够强度的情况下进行即时“深按压”响应。第二分量478减少通过触摸输入的逐渐的强度波动而无意触发“深按压”响应。在一些实施方案中,在触摸输入476满足动态强度阈值480时(例如,在图4C中的点481处),触发“深按压”响应。
图4D示出了另一个动态强度阈值486(例如,强度阈值ID)。图4D还示出了两个其他强度阈值:第一强度阈值IH和第二强度阈值IL。在图4D中,尽管触摸输入484在时间p2之前满足第一强度阈值IH和第二强度阈值IL,但是直到在时间482处经过延迟时间p2才提供响应。同样在图4D中,动态强度阈值486随时间衰减,其中衰减在从时间482(触发了与第二强度阈值IL相关联的响应的时候)已经过预定义的延迟时间p1之后的时间488开始。这种类型的动态强度阈值减少紧接在触发与较低阈值强度(诸如第一强度阈值IH或第二强度阈值IL)相关联的响应之后或与其同时意外触发与动态强度阈值ID相关联的响应。
图4E示出了另一个动态强度阈值492(例如,强度阈值ID)。在图4E中,在从触摸输入490被初始检测到的时候已经过延迟时间p2之后,触发与强度阈值IL相关联的响应。同时,动态强度阈值492在从触摸输入490被初始检测到的时候已经过预定义的延迟时间p1之后衰减。因此,在触发与强度阈值IL相关联的响应之后降低触摸输入490的强度,接着在不释放触摸输入490的情况下增大触摸输入490的强度可触发与强度阈值ID相关联的响应(例如,在时间494处),即使当触摸输入490的强度低于另一强度阈值(例如,强度阈值IL)时也是如此。
接触特征强度从低于轻按压强度阈值ITL的强度增大到介于轻按压强度阈值ITL与深按压强度阈值ITD之间的强度有时被称为“轻按压”输入。接触的特征强度从低于深按压强度阈值ITD的强度增大到高于深按压强度阈值ITD的强度有时称为“深按压”输入。接触特征强度从低于接触检测强度阈值IT0的强度增大到介于接触检测强度阈值IT0与轻按压强度阈值ITL之间的强度有时被称为检测到触摸表面上的接触。接触的特征强度从高于接触检测强度阈值IT0的强度减小到低于接触检测强度阈值IT0的强度有时被称为检测到接触从触摸表面抬离。在一些实施方案中,IT0为零。在一些实施方案中,IT0大于零在一些例示中,阴影圆或椭圆用于表示触敏表面上的接触的强度。在一些例示中,没有阴影的圆或椭圆用于表示触敏表面上的相应接触而不指定相应接触的强度。
在本文中所述的一些实施方案中,响应于检测到包括相应按压输入的手势或响应于检测到利用相应接触(或多个接触)所执行的相应按压输入来执行一个或多个操作,其中至少部分地基于检测到该接触(或多个接触)的强度增大到高于按压输入强度阈值而检测到该相应按压输入。在一些实施方案中,响应于检测到相应接触的强度增大到高于按压输入强度阈值来执行相应操作(例如,在相应按压输入的“向下冲程”上执行相应操作)。在一些实施方案中,按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于按压输入强度阈值,并且响应于检测到相应接触的强度随后减小到低于按压输入阈值来执行相应操作(例如,在相应按压输入的“向上冲程”上执行相应操作)。
在一些实施方案中,设备采用强度滞后以避免有时被称为“抖动”的意外输入,其中设备限定或选择与按压输入强度阈值具有预定义关系的滞后强度阈值(例如,滞后强度阈值比按压输入强度阈值低X个强度单位,或滞后强度阈值是按压输入强度阈值的75%、90%或某个合理比例)。因此,在一些实施方案中,按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于对应于按压输入强度阈值的滞后强度阈值,并且响应于检测到相应接触的强度随后减小到低于滞后强度阈值来执行相应操作(例如,在相应按压输入的“向上冲程”上执行相应操作)。类似地,在一些实施方案中,仅在设备检测到接触强度从等于或低于滞后强度阈值的强度增大到等于或高于按压输入强度阈值的强度并且任选地接触强度随后减小到等于或低于滞后强度的强度时才检测到按压输入,并且响应于检测到按压输入(例如,根据环境,接触强度增大或接触强度减小)来执行相应操作。
为了容易解释,任选地响应于检测到以下情况而触发对响应于与按压输入强度阈值相关联的按压输入或响应于包括按压输入的手势而执行的操作的描述:接触的强度增大到高于按压输入强度阈值、接触的强度从低于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接触的强度减小到低于按压输入强度阈值、或接触的强度减小到低于与按压输入强度阈值对应的滞后强度阈值。另外,在将操作描述为响应于检测到接触的强度减小到低于按压输入强度阈值而执行的示例中,任选地响应于检测到接触的强度减小到低于对应于并且小于按压输入强度阈值的滞后强度阈值来执行操作。如上所述,在一些实施方案中,对这些操作的触发还取决于满足基于时间的标准(例如,在满足第一强度阈值和满足第二强度阈值之间已经过延迟时间)。
用户界面和相关联的过程
现在将注意力转向可在具有显示器、触敏表面、用于生成触觉输出的(可选的)一个或多个触觉输出发生器以及用于检测与触敏表面的接触的强度的(可选的)一个或多个传感器的电子设备诸如便携式多功能设备100或设备300上实现的用户界面(“UI”)和相关联的过程的实施方案。
图5A至图5DW示出了根据一些实施方案的用于导航、显示以及编辑具有多个显示模式的媒体项的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程,包括图6A至图6F、图7A至图7D、图8A至图8F、图9A至图9I和图10A至图10C中的过程。为了便于解释,将参考在具有触敏显示器系统112的设备上执行的操作来论述实施方案中的一些实施方案。在此类实施方案中,焦点选择器为任选地:相应手指或触笔接触、对应于手指或触笔接触的表示点(例如,相应接触的重心或与相应接触相关联的点)、或在触敏显示器系统112上所检测到的两个或更多个接触的重心。然而,任选地在具有显示器450和单独的触敏表面451的设备上响应于当在显示器450上显示附图中示出的用户界面连同焦点选择器时检测到触敏表面451上的接触而执行类似的操作。
图5A至图5U示出了根据一些实施方案的用于媒体回放和编辑的示例性用户界面。在图5A中,设备100显示了家庭用户界面500-1。家庭用户界面500-1显示了可由用户选择的不同应用程序。响应于检测到在图像应用程序428处的轻击502-1,设备100打开图像应用程序428。在图像应用程序428中,显示用于导航、显示和编辑媒体项的用户界面。图5B中的媒体用户界面500-2以网格图案显示缩略图,以便于用户选择。在一些实施方案中,每个缩略图是与媒体项中的图像序列相关联的代表性图像,该代表性图像从初始图像开始并以最终图像结束,该最终图像可响应于检测到某些用户动作而被“播放”。响应于检测到在媒体项550处的轻击502-2,设备100显示媒体项显示用户界面501,如图5C所示。媒体项显示用户界面501包括控件,诸如收藏项控件504-a、共享媒体项控件504-b、删除媒体项控件504-c、编辑媒体项控件504-d以及媒体项详细控件504-e。媒体项显示用户界面501包括显示区域508。显示区域508显示媒体项550的代表性图像,并且经由显示模式指示符512指示用户界面处于“生动”显示模式媒体项550中。媒体项显示用户界面501还包括媒体项集合区域510。除了显示存储在设备100上的媒体项的其他缩略图表示之外,媒体项集合区域510还显示媒体项550的代表性图像514的表示(例如,缩略图)。响应于检测到在显示区域508中由接触502-3作出的按压超过轻按压强度阈值ITL,如图5C至图5D所示,设备100回放媒体项550(例如根据序列538-1和序列538-2中的任一者,从代表性图像532开始,在最终图像536处结束之前,最后前进到初始图像534),如图5E所示。然后重新显示代表性图像532。代表性图像532表示照片应用程序中(例如,库或其他集合中)的媒体项550。代表性图像通常显示在照片应用程序中的多个用户界面中,诸如在媒体项显示用户界面501的第一区域中(例如,图5C)、在媒体项显示用户界面501的第二区域中作为表示514(例如,缩略图)(例如,图5C);在编辑用户界面503的第一区域523中(例如,图5V)、在编辑用户界面503的第二区域521中作为表示(例如,缩略图);以及在一系列图像中作为表示514(例如,缩略图)(图5B)。
图5F类似于图5C,不同的是媒体项550处于“循环”显示模式。在不存在用户输入的情况下,设备100反复循环媒体项550,例如根据图5G所示的序列538-2。在图5H中,设备100以“循环”模式显示媒体项显示用户界面501。在处于“循环”显示模式时,响应于检测到在编辑控件504-d处的轻击手势502-5,设备100显示媒体项编辑用户界面503,如图5I所示,具体地,显示针对“循环”模式的媒体项编辑用户界面503-2。媒体项编辑用户界面503包括媒体编辑显示区域523和图像序列区域524。在“循环”模式中,媒体编辑显示区域523以循环序列显示与媒体项550相关联的图像序列,如图5G中所述。可使用开始修剪示能表示516和/或结束修剪示能表示518来修剪媒体项550中的图像序列。媒体项编辑用户界面503还包括编辑控件,诸如完成控件505-a、裁切控件505-b、颜色控件505-c、计时器控件505-d、静音控件505-f、识别笔控件505-g和回放切换控件505-h。在一些实施方案中,针对“循环模式”的媒体项编辑用户界面503-2放弃显示代表性图像选择示能表示,如图5I所示。在其他实施方案中,针对“循环”模式的媒体项编辑用户界面503-2显示代表性图像选择示能表示520,如图5J所示。
图5K类似于图5C,不同的是媒体项550处于“来回”显示模式。在该示例中,设备100例如根据图5L所示的序列538-3来回回放媒体项550。在图5M中,设备100以“来回”模式显示媒体项显示用户界面501。在处于“来回”显示模式时,响应于检测到在编辑控件504-d处的轻击手势502-6,设备显示媒体项编辑用户界面503-3,如图5N所示。图5N类似于图5I,不同的是媒体项550处于“来回”编辑模式。在一些实施方案中,媒体项编辑用户界面503-3放弃显示代表性图像选择示能表示,如图5N所示。在其他实施方案中,媒体项编辑用户界面503-3显示代表性图像选择示能表示520,如图5O所示。
图5P类似于图5C,不同的是媒体项550处于“合并”显示模式。在该示例中,设备100在显示区域508中显示与媒体项相关联的图像序列的合并图像。响应于检测到在显示区域508中接触502-7处的按压超过轻按压强度阈值ITL,如图5P-5Q所示,设备100回放媒体项550,例如根据图5R所示的序列538-4。在图5S中,设备100以“合并”模式显示媒体项显示用户界面501。响应于检测到在编辑控件504-d处的轻击手势502-8,设备显示媒体项编辑用户界面503-4,如图5T所示。图5T类似于图5I,不同的是媒体项550处于“合并”编辑模式。在该模式下,编辑显示区域523示出与媒体项550相关联的图像序列的合并静态图像。
图5U至图5BE示出了根据一些实施方案的用于媒体编辑的示例性用户界面。在图5U中,在以“生动”模式显示媒体项显示用户界面501时,设备100检测到编辑控件504-d处的轻击502-9。作为响应,设备100显示图5V中所示的媒体项编辑用户界面503-1。媒体项编辑用户界面503-1类似于图5I,其示出了“循环”模式编辑用户界面503-2,不同的是媒体项550的静态代表性图像示出在编辑显示区域523中。在图5W中,响应于检测到由开始修剪示能表示516处的接触502-10作出的拖动,随着用户继续通过接触502-10作出的拖动,设备100更新编辑显示区域523以显示序列中的新初始图像,如图5X至图5Z所示。开始修剪示能表示516还响应于检测到拖动502-10而移动。在一些实施方案中,如图5Y所示,设备100阻止开始修剪示能表示516移动超过代表性图像选择示能表示520,并且替代性地提供触觉响应527。在图5AA中,在接触502-10抬离时,设备100在编辑显示区域523中重新显示代表性图像。响应于检测到在完成控件505-a上的接触502-11处的轻击,因为与媒体项550相关联的图像序列的一部分(如由开始修剪示能表示516的位置所指示的)被修剪,所以设备100保存修剪的媒体项550。
图5AB紧随图5Z之后,其中设备100继续检测到由接触502-10作出的拖动。在图5AB中,如果允许开始修剪示能表示516移动超过图5Z中所示的代表性图像选择示能表示520的位置,则设备100在原始代表性图像上方显示代表性图像指示符542。此外,设备100将代表性图像选择示能表示520移动到图像序列中的图像,与开始修剪示能表示516的位置相邻。
在图5AC中,响应于接触502-10的抬离(其中抬离由虚线椭圆标出),设备100在代表性图像选择示能表示520的新位置附近显示“制作关键照片”确认示能表示525。响应于检测到在确认示能表示525处的轻击502-11,如图5AD所示,设备100将与代表性图像选择示能表示520相关联的图像设置为媒体项550的新代表性图像,如图5AE所示。响应于检测到远离确认示能表示525的轻击502-12,如图5AF所示,设备100不将与代表性图像选择示能表示520相关联的新图像设置为媒体项550的新代表性图像,如图5AG所示。在该示例中,开始修剪示能表示516和代表性图像选择示能表示520移动回到由代表性图像选择示能表示520的原始位置所指示的代表性图像。
在紧随图5AE的图5AH中,设备100在完成控件505-a处检测到轻击502-14。作为响应,设备100保存新修剪的媒体项,退出媒体编辑用户界面503并显示媒体项显示用户界面501。在一些实施方案中,例如,如果媒体项的编辑是破坏性的,则响应于检测到在完成控件505-a处的轻击502-14,设备100显示保存新媒体项菜单526,如图5AI所示。在图5AJ中,响应于检测到在保存新媒体项菜单526的“修剪原始”选项处的轻击手势502-16,设备100保存已修剪的媒体项,退出媒体编辑用户界面503并显示媒体项显示用户界面501中的已修剪的媒体项,如图5AK所示。在图5AL中,响应于检测到在保存新媒体项菜单526的“另存为新”选项处的轻击手势502-18,设备100保持媒体项550,将已修剪的媒体项保存为新媒体项,退出媒体编辑用户界面503并显示媒体项显示用户界面501,如图5AM所示。在图5AM中,原始的(未修剪的)媒体项514的表示和新的(修剪的)媒体项515的表示均在媒体项的集合区域510中示出。
图5AN至图5AP示出了根据一些实施方案的用于编辑合并照片的示例性用户界面。在图5AN中,设备100正在显示针对“合并”图像模式的媒体项编辑用户界面503-4。在该模式下,设备100在编辑显示区域523中显示与媒体项550相关联的图像序列的合并静态图像。在图5AO中,响应于检测到由开始修剪示能表示516处的接触502-20作出的输入,设备100显示在编辑显示区域523中与开始修剪示能表示516相邻的图像(而非合并图像)。在抬离时,设备100返回显示编辑显示区域523中的合并静态图像,如图5AP所示。
图5AQ遵循图5X,不同的是设备100检测到拖动手势502-10的抬离。作为响应,设备100在编辑显示区域523中显示媒体项550的代表性图像。接着,设备100检测到由代表性图像选择示能表示520处的接触502-22作出的拖动手势,如图5AR至图5AX所示。图5AS至图5AU示出,当对图像选择示能表示520进行水平滚动时,媒体项中的图像序列中的附加图像同时在图像选择示能表示520和显示区域523中显示。在抬离时,设备100检测到接触502-22的抬离位置接近代表性图像的原始位置。作为响应,设备100将代表性图像选择示能表示520与原始代表性图像对齐。
图5AY至图5BA示出了根据一些实施方案的用于在媒体项编辑模式503之间切换的示例性用户界面。在图5AY中,当处于针对生动模式的媒体项编辑用户界面503-1时,设备100在编辑显示区域523中显示媒体项的代表性图像。在媒体项处于“生动”编辑模式时,设备100检测到由显示模式指示符512处的接触502-24作出的输入(例如,轻击或按压)。作为响应,如图5AZ所示,设备100显示具有与媒体项550相关联的编辑模式的编辑模式选择菜单528。响应于检测到在“循环”编辑模式选项上的轻击502-26,设备100以“循环”编辑模式503-2显示与媒体项550相关联的图像序列,如图5BA所示。
图5BB至图5BE示出了根据一些实施方案的用于使用结束修剪示能表示518来编辑媒体项的示例性用户界面。在图5BB中,在显示媒体项编辑用户界面503-1时,设备100检测到由结束修剪示能表示518处的接触502-28作出的拖动。作为响应,设备100移动结束修剪示能表示518,并在编辑显示区域523中显示图像序列区域524中的图像,与结束修剪示能表示518相邻,如图5BB至图5BC所示。响应于检测到接触502-28的抬离,设备100在编辑显示区域523中显示代表性图像,如图5BD所示。在图5BE中,响应于检测到“完成”控件505-a上的轻击502-30,设备100基于开始修剪示能表示516和结束修剪示能表示518的位置来创建并保存修剪的媒体项。
图5BF至图5BR示出了根据一些实施方案的用于显示关于媒体项的附加信息的示例性用户界面。在图5BF中,设备100在针对媒体项550的“生动”显示模式下显示媒体项显示用户界面501。响应于检测到向上轻扫560-2,如图5BG所示,设备100显示显示模式选择用户界面511,其包括“生动”显示模式表示540-1、“循环”显示模式表示540-2、“来回”显示模式表示540-3和“合并”显示模式表示540-4,如图5BH所示。设备100还围绕“生动”显示模式表示540-1显示显示模式选择指示符541,以指示“生动”显示模式表示540-1是当前所选择的显示模式。响应于检测到在“循环”显示模式表示540-2处的轻击560-4,设备100切换至显示区域508中的“循环”显示模式,隐藏显示模式选择用户界面511并显示整个显示区域508,如图5BI所示。响应于检测到向上轻扫560-6,设备100显示图5BH中所示的显示模式选择用户界面511,不同的是显示模式选择指示符541围绕“循环”显示模式表示540-2定位。响应于检测到由接触560-8作出的左轻扫,如图5BJ所示,或另选地,在显示模式扩大列表指示符540-5处的轻击,设备100滑动显示模式选择用户界面511中所示的表示并显示新“电影”显示模式表示540-6,如图5BK所示。在显示显示模式选择用户界面511时,响应于检测到图5BL中的向上轻扫560-10,设备100显示地图562,该地图示出了位置564,其中媒体项由设备100在该位置处生成,如图5BM所示。响应于检测到图5BM中的向上轻扫560-12,设备100显示与媒体项550相关联的附加信息,如图5BN所示。
在图5BO(在图5BH之后显示)中,设备100显示显示模式选择用户界面511,并且以“循环”显示模式显示媒体项550。响应于检测到在“循环”显示模式表示540-2处的轻击560-14,设备100隐藏显示模式选择用户界面511并显示整个显示区域508。
图5BP至图5BR示出了根据一些实施方案的用于当设备100处于纵向模式时显示显示模式选择用户界面511的示例性用户界面。在图5BP中,设备100在显示模式选择用户界面511处显示两个表示:“生动”显示模式表示540-1和“循环”显示模式表示540-2。响应于检测到左轻扫560-16,如图5BP所示,或在显示模式扩大列表指示符540-5处的轻击,设备100在显示模式选择用户界面511处显示两个新表示:“来回”显示模式表示540-3和“合并”显示模式表示540-4,如图5BQ所示。在图5BR中,响应于检测到在“细节”控件504-e处的轻击560-18,设备100以合并模式在媒体项显示用户界面501中显示媒体项550。
图5BS至图5CM示出了根据一些实施方案的用于编辑媒体项的示例性用户界面。在图5BS中,设备100显示媒体项显示用户界面501。响应于检测到在编辑控件504-d处的轻击560-2,如图5BT所示,设备100显示媒体项编辑用户界面503-1,如图5BU所示。媒体项编辑用户界面503-1包括在编辑显示区域523中以“生动”显示模式显示的媒体项550。响应于检测到在代表性图像选择示能表示520的接触570-4处的拖动,如图5BV至图5BW所示,设备100更新编辑显示区域523中所示的图像,并且还更新图像序列区域524中的代表性图像选择示能表示520的位置以对应于接触570-4的水平位置。此外,当代表性图像选择示能表示520移动到除原始代表性图像之外的位置时,设备100在图像序列区域524中的原始代表性图像上方的位置处显示代表性图像指示符542,如图5BW所示。在图5BX中,如果接触570-4返回至原始代表性图像的位置,则设备100放弃显示代表性图像指示符542并提供触觉响应527。在图5BY中,如果图5BV中所示的接触570-4继续向右并接触到修剪示能表示(诸如开始修剪示能表示516),则在一些实施方案中,设备100不提供触觉响应。在图5BZ中,拖动570-4在图5CA中的最终抬离之前继续。响应于检测到抬离,设备100在代表性图像选择示能表示520的当前位置处或附近显示确认示能表示525。响应于检测到确认示能表示525上的轻击570-6,如图5CB所示,设备100将与代表性图像选择示能表示520相关联的图像序列区域524中的图像设置为媒体项550的新代表性图像,如图5CC所示。另选地,响应于检测到远离确认示能表示525的轻击570-8,如图5CD所示,设备100不将与代表性图像选择示能表示520相关联的图像序列区域524中的图像设置为媒体项550的新代表性图像,如图5CE所示。
在图5CC之后,在图5CF处,设备100检测到由代表性图像选择示能表示520上的接触570-10作出的拖动。如果拖动570-10将代表性图像选择示能表示520移动远离代表性图像序列524中的新代表性图像,则在图像序列区域524中的新代表性图像上方的位置处显示新代表性图像指示符543,如图5CF所示。如果拖动570-10将代表性图像选择示能表示520返回至图像序列区域524中的新代表性图像,如图5CG所示,则设备100提供触觉响应527。在图5CH处,在接触570-10的抬离之后,代表性图像选择示能表示520被定位在新代表性图像处。响应于检测到由开始修剪示能表示516上的接触570-12作出的拖动,设备100对开始修剪示能表示516进行移动。在一些实施方案中,如图5CI所示,响应于检测到拖动570-12将开始修剪示能表示516移动到代表性图像选择示能表示520,设备100阻止开始修剪示能表示516移动超过代表性图像选择示能表示520并提供触觉响应527。在接触570-12的抬离之后,设备检测到由代表性图像示能表示520上的接触570-14作出的朝向开始修剪示能表示516的拖动,如图5CJ所示。作为响应,设备100将开始修剪示能表示516连同代表性图像示能表示520一起移动,如图5CK所示。
图5CK至图5CM示出了用于在将代表性图像选择示能表示520拖动到代表性图像之上时选择性地提供触觉响应的示例性用户界面。在图5CK中,设备100检测到由代表性图像选择示能表示520上的接触570-15作出的拖动。作为响应,设备100对代表性图像选择示能表示520进行移动。在图5CL中,如果由箭头572的长度表示的拖动手势570-15的速度低于速度阈值,则设备100提供触觉响应527。在图5CM中,如果由箭头574的长度表示的拖动手势570-15的速度超过速度阈值,则设备100放弃提供触觉响应。
图5CN至图5DJ示出了根据一些实施方案的用于显示及播放媒体项的示例性用户界面。在图5CN中,设备100在处于“生动”显示模式时显示媒体项显示用户界面501,该媒体项显示用户界面在显示区域508中显示针对原始媒体项550的代表性图像。在图5CO中,设备100检测到由接触580-2作出的轻扫手势。作为响应,设备100将原始媒体项550滑出屏幕,并且将新媒体项584(其顺序地跟随媒体项的集合中的原始媒体项550)滑动到屏幕上,如图5CP所示。在图5CP中,新媒体项584具有与原始媒体项550相同的显示模式,即“生动”显示模式。如图5CP中所示,在继续检测由接触580-2作出的轻扫手势时,设备100仅显示新媒体项584中的初始图像,因为新媒体项584处于生动显示模式。在图5CQ至图5CR中,响应于检测到接触580-2的抬离,在新媒体项584滑动到屏幕上时,设备顺序地播放与新媒体项584相关联的图像序列,从初始图像到代表性图像。
图5CS类似于图5CP,不同的是新媒体项584处于“循环”显示模式。如图5CS所示,在检测到由接触580-4作出的轻扫时,因为新媒体项584处于“循环”显示模式,所以当新媒体项584滑动到屏幕上时,设备100对与新媒体项584相关联的图像序列进行循环。
图5CT类似于图5CP和图5CS,不同的是新媒体项584处于“来回”显示模式。如图5CT所示,在检测到由接触580-6作出的轻扫时,因为新媒体项584处于“来回”显示模式,所以当新媒体项584滑动到屏幕上时,设备100以来回模式播放与新媒体项584相关联的图像序列。
图5CU类似于图5CP和图5CS,不同的是新媒体项586顺序地先于媒体项的集合中的原始媒体项550,并且新媒体项586处于“来回”显示模式。如图5CU所示,在检测到由接触580-8作出的轻扫时,因为新媒体项586处于“来回”显示模式,所以当新媒体项586滑动到屏幕上时,设备100以来回模式播放与新媒体项586相关联的图像序列。
图5CV类似于图5CP,不同的是新媒体项584处于“合并”显示模式。如图5CV所示,在检测到由接触580-10作出的轻扫时,设备100显示针对新媒体项584的静态合并图像。响应于接触580-10的抬离,设备100播放与新媒体项584相关联的图像序列的至少一部分(例如四分之一、二分之一或四分之三),然后显示合并图像。
图5CW类似于图5CV,不同的是新媒体项586在媒体项的集合中顺序地在原始媒体项550之前。如图5CW所示,在检测到由接触580-12作出的轻扫时,设备100显示针对新媒体项586的静态合并图像。在图5CX中,响应于接触580-12的抬离,设备100播放与新媒体项586相关联的图像序列的至少一部分(例如四分之一、二分之一或四分之三),然后显示合并图像。
图5CY类似于图5CW,不同的是新媒体项586处于“生动”显示模式。在检测到由接触580-14作出的轻扫时,因为新媒体项586处于“生动”显示模式,所以设备100显示新媒体项586的初始图像。响应于检测到接触580-14的抬离,在新媒体项586滑动到屏幕上时,设备100将与新媒体项586相关联的图像序列从初始图像顺序地播放至代表性图像。
图5CZ类似于图5CY,不同的是新媒体项586处于“循环”显示模式。当检测到轻扫580-16时,设备100显示与新媒体项586相关联的图像序列,因为新媒体项586处于“循环”显示模式,所以当新媒体项586滑动到屏幕上时,该图像序列循环。
在图5DA中,设备100在媒体项集合区域510中的媒体项550的表示514处检测到由接触580-18作出的轻击。作为响应,设备100在媒体项集合区域510中显示媒体项550的扩展表示551,该媒体项集合区域显示与媒体项550相关联的其他图像中的至少一些,如图5DB所示。设备100还显示滚动条(scrubber bar)544。响应于检测到由接触580-20作出的轻扫和轻扫580-22,如图5DB至图5DE所示,设备100使媒体项550的扩展表示551滚动,使之相应地相对于滚动条544移动,并且在显示区域508中显示与该媒体项相关联的图像序列中的图像。当滚动条544定位成远离代表性图像514时,代表性图像指示符542显示在代表性图像514上方,如图5DC所示。当滚动条544以慢速返回到代表性图像514附近时,设备100生成触觉响应527并对齐至代表性图像514,如图5DD至图5DE所示。
在图5DF中,设备100检测到显示区域508中由接触580-24作出的轻扫。作为响应,设备100显示新媒体项584(其顺序地跟随区域508中的媒体项的集合中的原始媒体项550),并且将媒体项550的扩展表示551向下缩回至单个图像(例如,媒体项550的代表性图像的缩略图),如图5DG所示。
在图5DG至图5DJ中,响应于检测到由接触580-26作出的按压输入超过强度阈值(例如,ITL),设备100显示媒体项集合区域510中的媒体项584的扩展表示552,该媒体项集合区域显示与媒体项584相关联的其他图像中的至少一些。响应于检测到由接触580-26作出的按压输入超过强度阈值(例如,ITL),设备100还显示播放头545,该播放头在媒体项集合区域510中的媒体项584的扩展表示之上移动,以示出被示出于区域508中的媒体项584中的图像序列中的当前回放位置。
图5DK至图5DW示出了根据一些实施方案的用于根据媒体项的显示模式来显示与媒体项相关联的图像序列的示例性用户界面。在图5DK中,设备100在媒体项显示用户界面501上以“循环”模式显示媒体项550,如通过显示模式指示符512所指示的,其中与媒体项相关联的图像序列在显示区域508中顺序并重复地循环显示。响应于由接触590-2作出的按压输入超过轻按压强度阈值,如图5DL至图5DM所示,设备100在静态显示器中显示媒体项550的代表性图像。在图5DN中,在接触590-2抬离之后,设备100返回到以动态“循环”模式显示媒体项550。另选地,在图5DO中,在接触590-2的强度减小之后,设备100返回到以动态“循环”模式显示媒体项。
在图5DP中,设备100在媒体项显示用户界面501中以“合并”模式显示媒体项550,如由显示模式指示符512所指示的,其中与媒体项相关联的图像序列同时在显示区域508中显示为静态合并图像。响应于由接触590-4作出的按压输入超过轻按压强度阈值,如图5DP至图5DQ所示,设备100顺序地显示与媒体项相关联的图像序列。在图5DR中,在接触590-4抬离之后,设备100返回到将媒体项550显示为静态合并图像。另选地,在图5DS中,在接触590-4的强度减小之后,设备100返回到将媒体项550显示为静态合并图像。
在图5DT中,设备100在媒体项显示用户界面501上显示处于“来回”模式的媒体项,如由显示模式指示符512所指示的,其中与媒体项550相关联的图像序列在显示区域508中以来回的方式顺序并重复地显示。响应于由接触590-6作出的按压输入超过轻按压强度阈值,如图5DT至图5DU所示,设备100显示与媒体项相关联的代表性图像。在检测到接触590-6抬离(或在一些实施方案中,强度减小)之后,设备100返回到在显示区域508中以来回方式重复地播放与媒体项550相关联的图像序列。
在图5DV中,设备100在媒体项显示用户界面501上以“生动”模式显示媒体项,如由显示模式指示符512所指示的,其中与媒体项相关联的代表性图像在显示区域508中显示。响应于由接触590-8作出的按压输入超过轻按压强度阈值,如图5DV至图5DW所示,设备100顺序地显示与媒体项相关联的图像序列。在接触590-6抬离(或在一些实施方案中,强度减小)之后,设备100返回到显示代表性图像。
图6A至图6F是根据一些实施方案的用于编辑具有多个显示模式的媒体项的方法600的流程图。方法600是在具有显示器、触敏表面和用于检测与触敏表面的接触的强度的任选地一个或多个传感器的电子设备(例如,图3中的设备300或图1A中的便携式多功能设备100)处执行的。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。方法600中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
如下所述,方法600提供了编辑具有多个显示模式的媒体项的直观方式。提供编辑用户界面,该界面可根据媒体项的当前选定的显示模式进行定制,使得易于查看编辑将如何影响当前显示模式下的媒体项。当编辑具有多个显示模式的媒体项时,该方法减少了来自用户的输入的数量、程度和/或性质,从而创建了更有效的人机界面。对于电池驱动电子设备,使得用户能够更快且更有效地编辑具有多个显示模式的媒体项,从而节省了电力并增加了电池充电之间的时间。
该设备在显示器上的第一用户界面中显示(602)来自与相应显示模式下的图像序列对应的媒体项的一个或多个图像,其中相应显示模式是针对与图像序列对应的媒体项的多个用户可选显示模式中的一个;(例如,生动照片显示模式、循环显示模式、长曝光显示模式、来回显示模式、电影显示模式、频闪效果显示模式,或用于显示可由用户选择的媒体项的其他显示模式)。例如,图5U示出了处于“生动”模式的媒体项显示用户界面501。
在显示来自相应显示模式下的媒体项的一个或多个图像时,设备检测(604)第一输入(例如,由编辑示能表示上的接触作出的轻击手势,诸如在编辑控件504-d处的轻击502-9,如图5U所示)。
响应于检测到第一输入,设备在显示器上显示(606)针对相应显示模式的编辑用户界面。例如,图5V示出了针对“生动”模式的媒体项编辑用户界面503-1。针对相应显示模式的编辑用户界面是针对与图像序列对应的媒体项的多个编辑用户界面中的一个。所述多个编辑用户界面中的给定编辑用户界面被定制为针对媒体项的对应显示模式。例如,针对媒体项的生动照片显示模式的编辑用户界面在第一区域(例如,图5V中的编辑显示区域523)中显示媒体项的代表性图像,因为代表性图像是在不存在用户交互的情况下以生动照片显示模式显示的图像。例如,针对循环显示模式的编辑用户界面在第一区域(例如,图5I中的编辑显示区域523)中显示循环媒体项,因为循环媒体项是在没有用户交互的情况下以循环显示模式所显示的媒体项。例如,针对来回显示模式的编辑用户界面在第一区域(例如,图5N中的编辑显示区域523)中显示来回播放的媒体项,因为来回播放的媒体项是在没有用户交互的情况下以来回显示模式所显示的媒体项。例如,针对媒体项的合并显示模式的编辑用户界面在第一区域(例如,图5T中的编辑显示区域523)中显示媒体项的合并图像,因为合并图像是在没有用户交互的情况下以合并显示模式所显示的图像。
在一些实施方案中,所述多个编辑用户界面中的给定编辑用户界面包括被定制为针对媒体项的对应显示模式的示能表示。例如,针对媒体项的生动照片显示模式的编辑用户界面包括被配置为调节生动照片显示模式下的代表性图像(例如,关键照片)的代表性图像选择示能表示520(图5V)。在一些实施方案中,针对循环显示模式的编辑用户界面不具有代表性图像选择示能表示,因为在针对媒体项的循环显示模式下无法调节代表性图像(例如,图5I)。在一些其他实施方案中,针对循环显示模式的编辑用户界面具有代表性图像选择示能表示以调节媒体项的代表性图像(例如,图5J)。
在一些实施方案中,响应于检测到与编辑媒体项的请求对应的输入而显示给定编辑用户界面,同时激活针对媒体项的对应显示模式。例如,当激活了针对媒体项的生动照片显示模式时,响应于检测到“编辑”图标504-d上的轻击手势(图5U),显示针对生动照片显示模式的编辑用户界面,如图5U至图5V所示。例如,当激活了针对媒体项的循环显示模式时,响应于检测到“编辑”图标504-d上的轻击手势(图5H),显示针对循环显示模式的编辑用户界面,如图5H和图5I,或图5H和图5J所示。等等。针对相应显示模式的编辑用户界面被配置为当以相应显示模式显示媒体项时更改哪些图像包括在媒体项内(例如,针对相应显示模式的编辑用户界面被配置为将以相应显示模式显示的媒体项中的图像序列修剪为图像序列的小于全部的子集)。在一些实施方案中,修剪减少了来自以相应显示模式显示的媒体项的图像序列中的图像的数量,而不移除来自媒体项的图像序列中的图像(例如,非破坏性编辑)。在一些实施方案中,修剪永久移除来自媒体项的图像序列中的图像(例如,破坏性编辑)。在一些实施方案中,还将对相应显示模式下的媒体项的修剪应用于(延续)针对媒体项的其他显示模式。在一些实施方案中,不将对相应显示模式下的媒体项的修剪应用于针对媒体项的其他显示模式,使得可针对媒体项的每个显示模式来定制修剪。针对相应显示模式的编辑用户界面同时显示:被配置为显示图像序列中的图像的第一(预定义)区域(例如,区域523,图5V)。在一些实施方案中,对于一些显示模式,第一区域一次显示图像序列中的图像,其中当播放相应图像时,该相应图像填充第一区域。在一些实施方案中,对于一些显示模式,第一区域显示图像序列中的图像,这些图像合并为填充第一区域的单个图像。针对相应显示模式的编辑用户界面同时显示:不同于第一区域的第二(预定义)区域(例如,区域521,图5V),该第二区域包括图像序列中的图像的表示(例如,媒体项的图像序列中的多个图像的缩小比例表示在第二区域中的滑块中显示);用户可调节的开始修剪示能表示(例如,开始手柄516,图5V),其指示用于通过图像序列回放的第一边界(例如,开始修剪示能表示经由第二区域中的开始修剪示能表示的位置界定图像序列的子集中的开始图像);以及用户可调节的结束修剪示能表示(例如,结束手柄518,图5V),其指示用于通过图像序列回放的第二边界(例如,结束修剪示能表示经由结束修剪示能表示在第二区域中的位置界定图像序列的子集中的结束图像)。
在一些实施方案中,第一区域显示(608)媒体项的预览,该预览显示将如何以相应显示模式显示媒体项(例如,通过在针对一些显示模式的编辑用户界面中自动地重复播放第一区域中的图像序列,或通过在针对其他显示模式的编辑用户界面中将多个图像合并为第一区域中的单个图像),其中预览包括来自图像序列中的多个图像的内容。例如,图5I示出了媒体项编辑用户界面503-2,其中来自媒体项550的图像在编辑显示区域523中循环。例如,图5T示出了媒体项编辑用户界面503-4,其中媒体项550的静态合并图像在编辑显示区域523中显示。提供预览,该预览可根据媒体项的当前选定的显示模式进行定制,使得易于查看编辑将如何影响当前显示模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备交互时减少用户错误的反馈)。
在一些实施方案中,针对相应显示模式的编辑用户界面同时显示(610)多个图像调节示能表示(例如,505-a—505-h,图5V),其在被激活时提供对图像调节功能(例如,裁切、旋转、过滤、点亮、标记、魔杖、取消、保存/完成和/或其他图像编辑功能)的访问。提供对这些图像编辑功能的快速访问增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过减少编辑媒体项所需的来自用户的输入的数量、程度和/或性质)。
在一些实施方案中,编辑用户界面包括(612)音量示能表示,该音量示能表示在被激活时切换媒体项的声音开关(例如,静音切换505-f,图5V)。提供用于在编辑时关闭媒体项的声音的示能表示增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过在操作编辑用户界面/与编辑用户界面交互时根据需要提供或消除声音)。
在显示针对相应显示模式的编辑用户界面时:设备根据一个或多个编辑输入来调节(编辑)(614)媒体项(例如,被指向范围修剪示能表示的检测到的输入,诸如开始修剪示能表示516或结束修剪示能表示518、代表性图像选择示能表示520,和/或相应显示模式的编辑用户界面中的其他示能表示);并且检测用于退出针对相应显示模式的编辑用户界面的输入(例如,由接触502-11作出的轻击,图5AA)。
设备退出(616)针对相应显示模式的编辑用户界面。例如,在由图5AA中的接触502-11作出的轻击之后,设备显示媒体项显示用户界面501,如图5AK所示。
设备以相应显示模式在第一用户界面中显示(618)已编辑的媒体项(例如,响应于检测到输入以退出针对相应显示模式的编辑用户界面)。在一些实施方案中,响应于检测到“完成”按钮的激活(例如,利用轻击手势),设备保存针对相应显示模式的编辑用户界面中所做的更改,并且以相应显示模式(例如,在第一用户界面中)显示已编辑的媒体项。例如,在由图5AH中的接触502-14作出的轻击之后,设备显示媒体项显示用户界面501,如图5AK所示,该媒体项显示用户界面包括已修剪的媒体项550。
在一些实施方案中,响应于检测到“完成”按钮的激活(例如,利用轻击手势),设备显示可激活的选项(例如,“修剪原始”、“另存为新剪辑”和“取消”,如图5AI所示)。在一些实施方案中,响应于检测到“修剪原始”选项的激活(例如,利用轻击手势),设备将在编辑用户界面中所做的更改应用于媒体项,保存更改,并且显示相应显示模式下的已编辑的媒体项(例如,参见图5AJ至图5AK)。在一些实施方案中,响应于检测到“另存为新剪辑”选项的激活(例如,利用轻击手势),设备创建新媒体项,该新媒体项包括在编辑用户界面中对原始媒体项所作的更改,保存新媒体项,并且显示相应显示模式下的新媒体项(例如,参见图5AL至图5AM)。
在一些实施方案中,在显示针对相应显示模式的编辑用户界面时,设备检测(620)与开始修剪示能表示的调节对应的输入(例如,检测第二区域中的开始修剪示能表示上的拖动手势);并且,在检测到与开始修剪示能表示的调节对应的输入时,停止在第一区域中以相应显示模式显示媒体项的预览,并且在第一区域中显示图像的表示,该图像对应于开始修剪示能表示在图像序列的表示中的位置。类似地,在检测到与结束修剪示能表示的调节对应的输入时,设备停止在第一区域中以相应显示模式显示媒体项的预览,并且在第一区域中显示图像的表示,该图像对应于结束修剪示能表示在图像序列的表示中的位置。更一般地,当检测到与范围修剪示能表示的调节对应的输入时,设备停止在第一区域中以相应显示模式显示媒体项的预览,并且在第一区域中显示图像的表示,该图像对应于范围修剪示能表示在图像序列的表示中的位置。例如,如图5W至5Z所示,调节开始修剪示能表示516改变了在编辑显示区域523中显示的图像。在调节范围修剪示能表示的同时显示与范围修剪示能表示的位置对应的图像的表示使得易于精确地修剪媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少用户错误的反馈)。
在一些实施方案中,设备检测(622)与开始修剪示能表示的调节对应的输入的结束(例如,检测来自开始修剪示能表示的接触的抬离);并且响应于检测到与开始修剪示能表示的调节对应的输入的结束,在第一区域中以相应显示模式显示媒体项的第二预览,其中第二预览包括图像序列中的图像的小于全部的子集,其中该子集不包括在与开始修剪示能表示的当前位置对应的图像之前出现的图像序列中的图像(例如,参见图5AH)。类似地,响应于检测到结束修剪示能表示上的输入的结束,设备在第一区域中以相应显示模式显示媒体项的第二预览,其中第二预览包括图像序列中的图像的小于全部的子集,其中该子集不包括在与结束修剪示能表示的当前位置对应的图像之后出现的图像序列中的图像。响应于检测到输入的结束(例如,检测到抬离),提供根据媒体项的当前选定的显示模式而定制的更新预览,使得易于查看范围修剪编辑将如何影响当前显示模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少输入数量的反馈)。
在一些实施方案中,修剪媒体项中的图像序列也修剪(624)了媒体项中的对应音频。响应于相同输入来修剪图像和对应音频增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过在操作编辑用户界面/与编辑用户界面交互时减少输入的数量)。
在一些实施方案中,根据确定相应显示模式是循环显示模式,以及响应于检测到第一输入而显示的针对相应显示模式的编辑用户界面是针对循环显示模式的编辑用户界面,设备在针对循环显示模式的编辑用户界面中在第一区域中显示(626)循环的图像序列(例如,参见图5I中的503-2);当在针对循环显示模式的编辑用户界面中在第一区域中显示循环的图像序列时,设备检测开始修剪示能表示上的输入;并且,在检测到开始修剪示能表示上的输入时:设备停止在第一区域中循环图像序列;并且根据开始修剪示能表示上的输入来调节开始修剪示能表示在第二区域中的位置;以及在第一区域中显示图像序列中的图像,该图像对应于开始修剪示能表示在第二区域中的位置。类似地,在检测到结束修剪示能表示上的输入时,设备停止在第一区域中循环图像序列;根据结束修剪示能表示上的输入来调节结束修剪示能表示在第二区域中的位置;以及在第一区域中显示图像序列中的图像,该图像对应于结束修剪示能表示在第二区域中的位置。更一般地,在检测到范围修剪示能表示上的输入时,设备停止在第一区域中循环图像序列;根据范围修剪示能表示上的输入来调节范围修剪示能表示在第二区域中的位置;以及在第一区域中显示图像序列中的图像,该图像对应于范围修剪示能表示在第二区域中的位置。提供媒体项的循环显示模式的动态预览,使得易于查看编辑将如何影响循环显示模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备交互时减少用户错误的反馈)。继而,切换至显示图像的表示,该图像对应于范围修剪示能表示的位置,同时调节该范围修剪示能表示,使得易于精确地修剪媒体项。这还增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少用户错误的反馈)。
在一些实施方案中,设备检测(628)开始修剪示能表示上的输入的结束(例如,检测来自开始修剪示能表示的接触的抬离);以及响应于检测到开始修剪示能表示上的输入的结束,在第一区域中显示循环的图像序列中的图像的小于全部的子集,其中该子集不包括在与开始修剪示能表示的当前位置对应的图像之前出现的图像序列中的图像。类似地,响应于检测到结束修剪示能表示上的输入的结束,设备在第一区域中显示循环的图像序列中的图像的小于全部的子集,其中该子集不包括在与结束修剪示能表示的当前位置对应的图像之后出现的图像序列中的图像。在一些实施方案中,针对循环显示模式的编辑用户界面不包括代表性图像选择示能表示,该代表性图像选择示能表示被配置为经由第二区域中的代表性图像选择示能表示的位置来选择图像序列中的代表性图像。响应于检测到输入的结束(例如,检测到抬离),提供媒体项循环的更新预览,使得易于查看范围修剪编辑将如何影响循环模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少输入数量的反馈)。
在一些实施方案中,根据确定相应显示模式是来回显示模式,以及响应于检测到第一输入而显示的相应编辑用户界面是针对来回显示模式的编辑用户界面,设备在针对来回显示模式的编辑用户界面中在第一区域中显示(630)来回重复播放的图像序列(例如,参见图5N)。当在针对来回显示模式的编辑用户界面中在第一区域中显示来回重复播放的图像序列时,设备检测开始修剪示能表示上的输入;并且,在检测到开始修剪示能表示上的输入时:停止在第一区域中来回播放图像序列;根据开始修剪示能表示上的输入来调节开始修剪示能表示在第二区域中的位置;以及在第一区域中显示图像序列中的图像,该图像对应于开始修剪示能表示在第二区域中的位置。类似地,在检测到结束修剪示能表示上的输入时,设备停止在第一区域中来回播放图像序列;根据结束修剪示能表示上的输入来调节结束修剪示能表示在第二区域中的位置;以及在第一区域中显示图像序列中的图像,该图像对应于结束修剪示能表示在第二区域中的位置。更一般地,在检测到范围修剪示能表示上的输入时,设备停止在第一区域中前后播放图像序列;根据范围修剪示能表示上的输入来调节范围修剪示能表示在第二区域中的位置;以及在第一区域中显示图像序列中的图像,该图像对应于范围修剪示能表示在第二区域中的位置。提供媒体项的来回显示模式的动态预览,使得易于查看编辑将如何影响来回显示模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备交互时减少用户错误的反馈)。继而,切换至显示图像的表示,该图像对应于范围修剪示能表示的位置,同时调节该范围修剪示能表示,使得易于精确地修剪媒体项。这还增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少用户错误的反馈)。
在一些实施方案中,设备检测(632)开始修剪示能表示上的输入的结束(例如,检测来自开始修剪示能表示的接触的抬离);以及响应于检测到开始修剪示能表示上的输入的结束,在第一区域中显示来回播放的图像序列中的图像的小于全部的子集,其中该子集不包括在与开始修剪示能表示的当前位置对应的图像之前出现的图像序列中的图像。类似地,响应于检测到结束修剪示能表示上的输入的结束,设备在第一区域中显示来回播放的图像序列中的图像的小于全部的子集,其中该子集不包括在与结束修剪示能表示的当前位置对应的图像之后出现的图像序列中的图像。在一些实施方案中,针对来回显示模式的编辑用户界面不包括代表性图像选择示能表示,该代表性图像选择示能表示被配置为经由第二区域中的代表性图像选择示能表示的位置来选择图像序列中的代表性图像。响应于检测到输入的结束(例如,检测到抬离),提供来回移动的媒体项的更新预览,使得易于查看范围修剪编辑将如何影响来回显示模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少输入数量的反馈)。
在一些实施方案中,根据确定相应显示模式是合并显示模式,以及响应于检测到第一输入而显示的相应编辑用户界面是针对合并显示模式(例如,长曝光模式、频闪模式或使用媒体项中的图像序列中的多个图像来显示合并图像的其他模式)的编辑用户界面,设备在针对合并显示模式的编辑用户界面中在第一区域中显示(634)(单个)合并图像,其中合并图像包括来自图像序列中的多个图像的同时显示的内容(例如,参见图5T)。当在针对合并显示模式的编辑用户界面中在第一区域中显示合并图像时,设备检测开始修剪示能表示上的输入;并且,在检测到开始修剪示能表示上的输入时:设备停止在第一区域中显示合并图像;根据开始修剪示能表示上的输入来调节开始修剪示能表示在第二区域中的位置;并且在第一区域中显示图像序列中的图像,该图像对应于开始修剪示能表示在第二区域中的位置(例如,参见图5AN至图5AO)。类似地,当检测到结束修剪示能表示上的输入时,设备停止在第一区域中显示合并图像;根据结束修剪示能表示上的输入来调节结束修剪示能表示在第二区域中的位置;以及在第一区域中显示图像序列中的图像,该图像对应于结束修剪示能表示在第二区域中的位置。更一般地,当检测到范围修剪示能表示上的输入时,设备停止在第一区域中显示合并图像;根据范围修剪示能表示上的输入来调节范围修剪示能表示在第二区域中的位置;以及在第一区域中显示图像序列中的图像,该图像对应于范围修剪示能表示在第二区域中的位置。提供媒体项的合并显示模式的预览,使得易于查看编辑将如何影响合并显示模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备交互时减少用户错误的反馈)。继而,切换至显示图像的表示,该图像对应于范围修剪示能表示的位置,同时调节该范围修剪示能表示,使得易于精确地修剪媒体项。这还增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少用户错误的反馈)。
在一些实施方案中,设备检测(636)开始修剪示能表示上的输入的结束(例如,检测来自开始修剪示能表示的接触的抬离);并且响应于检测到开始修剪示能表示上的输入的结束,在第一区域中显示由图像序列中的图像的小于全部的子集制成的(单个)合并图像,其中该子集不包括在与开始修剪示能表示的当前位置对应的图像之前出现的图像序列中的图像(例如,参见图5AO至图5AP)。类似地,响应于检测到结束修剪示能表示上的输入的结束,设备在第一区域中显示由图像序列中的图像的小于全部的子集制成的更新的(单个)合并图像,其中该子集不包括在与结束修剪示能表示的当前位置对应的图像之后出现的图像序列中的图像。响应于检测到输入的结束(例如,检测到抬离),提供合并图像的更新预览,使得易于查看范围修剪编辑将如何影响合并模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少输入数量的反馈)。
在一些实施方案中,媒体项中的图像序列由相机拍摄;图像序列包括代表性图像;图像序列包括在采集代表性图像之后由相机采集的一个或多个图像;并且图像序列包括在采集代表性图像之前由相机采集的一个或多个图像;并且根据确定相应显示模式是生动照片显示模式,设备在第二区域中显示(638)被配置为经由第二区域中的代表性图像选择示能表示的位置来选择图像序列中的代表性图像的代表性图像选择示能表示(例如,图5V中的区域521中的代表性图像选择示能表示520)。提供用于调节媒体项的代表性图像的示能表示增强了设备的可操作性并且使得编辑用户界面更有效。
在一些实施方案中,根据确定相应显示模式是生动照片显示模式,以及响应于检测到第一输入而显示的相应编辑用户界面是针对生动照片显示模式的编辑用户界面,设备在针对生动照片显示模式的编辑用户界面中在第一区域中显示(640)图像序列的代表性图像;当在针对生动照片显示模式的编辑用户界面中在第一区域中显示代表性图像时,检测开始修剪示能表示上的输入;并且,在检测到开始修剪示能表示上的输入时:停止在第一区域中显示代表性图像;根据开始修剪示能表示上的输入来调节开始修剪示能表示在第二区域中的位置;并且在第一区域中显示图像序列中的图像,该图像对应于开始修剪示能表示在第二区域中的位置(例如,参见图5W至图5AA)。类似地,在检测到结束修剪示能表示上的输入时,设备停止在第一区域中显示代表性图像;根据结束修剪示能表示上的输入来调节结束修剪示能表示在第二区域中的位置;并且在第一区域中显示图像序列中的图像,该图像对应于结束修剪示能表示在第二区域中的位置(例如,参见图5BB至图5D)。更一般地,在检测到范围修剪示能表示上的输入时,设备停止在第一区域中显示代表性图像;根据范围修剪示能表示上的输入来调节范围修剪示能表示在第二区域中的位置;以及在第一区域中显示图像序列中的图像,该图像对应于范围修剪示能表示在第二区域中的位置。提供媒体项的生动照片显示模式的预览,使得易于查看编辑将如何影响生动照片显示模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备交互时减少用户错误的反馈)。继而,切换至显示图像的表示,该图像对应于范围修剪示能表示的位置,同时调节该范围修剪示能表示,使得易于精确地修剪媒体项。这还增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少用户错误的反馈)。
在一些实施方案中,设备检测(642)开始修剪示能表示上的输入的结束(例如,检测来自开始修剪示能表示的接触的抬离);并且响应于检测到开始修剪示能表示上的输入的结束,在第一区域中显示代表性图像(例如,图5Z至图5AA)。类似地,响应于检测到结束修剪示能表示上的输入的结束,设备显示代表性图像。响应于检测到输入的结束(例如,检测到抬离),提供媒体项在生动照片显示模式下的更新预览,使得易于查看范围修剪编辑将如何影响生动照片显示模式下的媒体项。这增强了设备的可操作性并且使得编辑用户界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作编辑用户界面/与编辑用户界面交互时减少输入数量的反馈)。
在一些实施方案中,在显示针对生动照片显示模式的编辑用户界面时,设备检测(644)指向相应范围修剪示能表示(例如,开始修剪示能表示或结束修剪示能表示)的输入,其中:该输入在相应范围修剪示能表示处于起始位置时开始;该输入具有相应的量值(例如,检测到由接触(或光标)作出的拖动手势,该拖动手势在开始修剪示能表示上开始并且包括沿滑块的移动分量,该滑块包括图像序列中的多个图像的缩小比例表示);并且响应于检测到指向相应范围修剪示能表示的输入:根据确定输入的相应量值对应于相应范围修剪示能表示以第一量的移动,设备将相应范围修剪示能表示以第一量移动(无需移动代表性图像选择示能表示),该第一量小于相应范围修剪示能表示的起始位置和代表性图像选择示能表示之间的距离;以及根据确定输入的相应量值对应于相应范围修剪示能表示以第二量的移动,设备将相应范围修剪示能表示以第二量移动,并且还移动代表性图像选择示能表示(例如,参见图5X至图5Y和图5AA),该第二量大于相应范围修剪示能表示的起始位置和代表性图像选择示能表示之间的距离。在一些实施方案中,设备根据接触(在拖动手势中)沿滑块的移动的分量来沿滑块移动开始修剪示能表示。在一些实施方案中,一旦开始修剪示能表示在当前代表性图像的表示处、上方或旁边,接触沿滑块的继续移动将继续移动开始修剪示能表示,并且还将媒体项中的当前代表性图像更改为与开始修剪示能表示的当前位置对应的图像。以此方式移动范围修剪示能表示允许同时更改媒体项的范围和具有单个输入的媒体项的代表性图像,这减少了执行这些操作所需的输入的数量,并且使得编辑用户界面更有效。在一些实施方案中,开始修剪示能表示不能移动超过与图像序列中的当前代表性图像对应的第二区域中的表示。在一些实施方案中,一旦开始修剪示能表示在当前代表性图像的表示处、上方或旁边,接触沿滑块的继续移动将不继续移动开始修剪示能表示,并且将不更改媒体项中的当前代表性图像。以此方式移动范围修剪示能表示增强了设备的可操作性,并且使得用户设备界面更有效(例如,通过防止用户用范围修剪示能表示意外地更改代表性图像)。类似地,在一些实施方案中,设备根据接触(在拖动手势中)沿滑块的移动的分量来沿滑块移动结束修剪示能表示。在一些实施方案中,一旦结束修剪示能表示在当前代表性图像的表示处、上方或旁边,接触沿滑块的继续移动将继续移动结束修剪示能表示,并且还将媒体项中的当前代表性图像更改为与结束修剪示能表示的当前位置对应的图像。在一些实施方案中,结束修剪示能表示不能移动超过与媒体项中的当前代表性图像对应的第二区域中的表示。在一些实施方案中,一旦结束修剪示能表示在当前代表性图像的表示处、上方或旁边,接触沿滑块的继续移动将不继续移动结束修剪示能表示,并且将不更改媒体项中的当前代表性图像。
在一些实施方案中,当检测到指向代表性图像选择示能表示的输入时,当第二区域中的代表性图像选择示能表示的位置不对应于媒体项的当前代表性图像的表示时,设备在第二区域中显示(646)针对媒体项的当前代表性图像的指示符(例如,图5AB中的点542被显示相邻于媒体项中的当前代表性图像的缩小比例表示)。在一些实施方案中,当初始显示编辑用户界面时,代表性图像选择示能表示在与媒体项的代表性图像的表示对应的位置处显示,并且不显示点,如图5W所示。在一些实施方案中,当代表性图像选择示能表示移动离开与媒体项的代表性图像的表示对应的位置时(例如,响应于代表性图像选择示能表示上的拖动手势),点在与媒体项的代表性图像的表示对应的位置处或其附近显示,如图5AQ至图5AV所示。在一些实施方案中,如果代表性图像选择示能表示移动离开其初始位置,则显示指示符,并且如果该代表性图像选择示能表示被移动回到初始位置,则停止显示指示符。以此方式显示媒体项的当前代表性图像的指示符向用户提供了改善的视觉反馈,并且如果用户决定不更改当前代表性图像,则帮助用户返回到当前代表性图像。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,当检测到指向代表性图像选择示能表示的输入时,根据确定代表性图像选择示能表示在与媒体项的当前代表性图像的表示对应的位置的预先确定的距离(大于零)内,设备将代表性图像选择示能表示对齐(648)到与媒体项的当前代表性图像的表示对应的位置(例如,参见图5AW至图5AX)。如果用户决定不更改当前代表性图像,则以这种方式对齐代表性图像选择示能表示帮助用户返回到当前代表性图像。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,电子设备具有一个或多个触觉输出发生器,并且当代表性图像选择示能表示对齐至与媒体项的当前代表性图像的表示对应的位置时,设备生成(650)触觉输出(例如,参见图5AX中的触觉响应527)。以此方式提供触觉反馈增强设备的可操作性并且使得用户设备界面更有效(例如,通过提醒用户代表性图像选择示能表示已返回到与当前代表性图像的表示对应的位置,从而帮助用户在操作设备/与设备进行交互时实现预期结果并减少用户错误)。
在一些实施方案中,在显示针对相应显示模式的编辑用户界面时,设备检测(652)用于显示编辑用户界面选项的输入;响应于检测到用于显示编辑用户界面选项的输入,显示多个编辑显示模式示能表示,包括第一编辑显示模式示能表示;检测第一编辑显示模式示能表示上的输入;以及响应于检测到第一编辑显示模式示能表示上的输入,将编辑用户界面从针对相应显示模式的编辑用户界面更改为与第一编辑显示模式示能表示对应的显示模式的编辑用户界面。例如,激活(例如,利用轻击手势)显示模式指示符图标512(图5AY)使得显示菜单528(图5AZ),该菜单包括媒体项的编辑显示模式选项。继而,激活(例如,利用轻击手势)编辑显示模式选项529-1(图5AZ)使得针对生动照片显示模式的编辑用户界面(图5AZ)更改为针对循环显示模式的编辑用户界面(图5BA)。提供在针对媒体项的不同显示模式的编辑用户界面之间容易更改的能力增强了设备的可操作性并且使得用户设备界面更有效(例如,通过帮助用户导航至与媒体项的给定显示模式对应的编辑模式,使得用户可以预览编辑对该显示模式的影响)。
在一些实施方案中,具有显示器和触敏表面的电子设备在显示器上的第一用户界面中显示来自媒体项的一个或多个图像,所述一个或多个图像对应于相应显示模式下的一系列图像,相应显示模式为针对图像序列的多个用户可选显示模式中的一个(例如,生动照片显示模式、循环显示模式、长曝光显示模式、来回显示模式、电影显示模式、频闪效果显示模式或用于显示用户所选择的图像序列的其他显示模式)(例如,参见图5U)。在显示来自媒体项的所述一个或多个图像时,设备检测第一输入(例如,由编辑示能表示上的接触作出的轻击手势)(例如,参见图5U的编辑控件504-d处的轻击502-9)。响应于检测到第一输入,设备显示媒体项的编辑用户界面(例如,参见图5V)。媒体项的编辑用户界面被配置为更改哪些图像包括在媒体项内(例如,将图像序列修剪为图像序列的小于全部的子集)。针对媒体项的编辑用户界面显示了包括媒体项的表示的第一(预定义)区域,该媒体项包括来自图像序列中的多个图像的内容(例如,通过随时间推移播放图像序列或通过将多个图像合并到单个图像中)(例如,参见图5V中的编辑显示区域523)。在一些实施方案中,第一区域一次显示图像序列中的图像,其中当显示相应图像时,该相应图像填充第一区域。与第一区域一起,媒体项的编辑用户界面还同时显示不同于第一区域的第二(预定义)区域,该第二(预定义)区域包括图像序列中的图像的表示(例如,任选地包括图像序列中的多个图像的缩小比列表示的滑块)(例如,参见图5V中的区域521)和用于选择图像序列中的不同图像(例如,开始图像、结束图像和/或代表性图像)作为媒体项的参考点的多个编辑示能表示,所述多个编辑示能表示包括:用户可调节的开始修剪示能表示(例如,开始手柄516,图5V),其经由第二区域中的开始修剪示能表示的位置来界定图像序列的子集中的开始图像;以及用户可调节的结束修剪示能表示(例如,结束手柄518,图5V),其经由第二区域中的结束修剪示能表示的位置来界定图像序列的子集中的结束图像。在一些实施方案中,媒体项的编辑用户界面同时显示多个图像调节示能表示,其中,当其在被激活时提供对图像调节功能(例如,裁切、旋转、过滤、点亮、标记、魔杖、取消、保存/完成和/或其他图像编辑功能)的访问(例如,图5V中的示能表示505-a至示能表示505-h)。当显示针对相应显示模式的编辑用户界面时,设备检测与所述多个编辑示能表示的相应编辑示能表示的调节对应的第二输入(例如,检测调节开始修剪示能表示或结束修剪示能表示在第二区域中的位置的拖动手势)(例如,参见图5W至图5X)。响应于检测到第二输入,设备停止在第一区域中显示包括来自图像序列中的多个图像的内容的媒体项的表示,并且在第一区域中显示图像的表示,该图像对应于图像序列的表示中的相应编辑示能表示的位置(例如,参见图5W至图5X)。
应当理解,对图6A-6F中的操作进行描述的具体次序仅仅是示例性的,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法700、800、900和1000)所描述的其他过程的细节同样以类似的方式适用于上文相对于图6A至图6F所描述的方法600。例如,上文参考方法600所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画任选地具有本文参考本文所述的其他方法(例如,方法700、800、900和1000)所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画的特征中的一个或多个。为了简明起见,此处不再重复这些细节。
图7A至图7D是根据一些实施方案的用于导航至具有多个显示模式的媒体项并针对该媒体项选择显示模式的方法的流程图。方法700在具有显示器、触敏表面和任选的一个或多个传感器的电子设备(例如,图3中的设备300或图1A中的便携式多功能设备100)处执行以检测与触敏表面的接触强度。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。方法700中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
如下所述,方法700提供了导航至具有多个显示模式的媒体项并针对该媒体项选择显示模式的直观方式。该方法减少了当在媒体项的多个显示模式之间导航时来自用户的输入的数量、程度和/或性质,从而创建更有效的人机界面。对于电池驱动电子设备,使得用户能够更快且更有效地在媒体项的多个显示模式之间导航,从而节省了电力并增加了电池充电之间的时间。
该设备在显示器上的第一用户界面中显示(702)来自媒体项的一个或多个图像,所述一个或多个图像对应于第一显示模式下的一系列图像,其中,第一显示模式为与图像序列对应的媒体项的多个用户可选显示模式中的一个(例如,生动照片显示模式、循环显示模式、长曝光显示模式、来回显示模式、电影显示模式、频闪效果显示模式或用于显示用户所选择的媒体项的其他显示模式)(例如,参见图5BF)。
在一些实施方案中,在第一用户界面中以第一放大率显示(704)来自媒体项的一个或多个图像;并且在显示模式选择用户界面中以小于第一放大率的第二放大率显示媒体项的相应表示(例如,参见图5BF和图5BH)。在显示模式选择用户界面中以低于第一用户界面(例如,媒体项回放界面)中的媒体项的放大率显示媒体项的表示允许在显示模式选择用户界面中同时显示和选择多个表示,同时还允许更易于查看第一用户界面中的(较大)媒体项。这增强了设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,对应(706)于图像序列的媒体项是媒体项的集合(例如,媒体库、文件夹、相册或相机胶卷)中的第一媒体项;媒体项集合按基于预先确定的标准(例如,创建的日期/时间、上一次编辑的日期/时间、集合中的媒体项的名称、大小等)的次序布置;一个或多个先前媒体项按该次序在第一媒体项之前;一个或多个后续媒体项按该次序在第一媒体项之后;电子设备响应于检测到第二方向上的轻扫(例如,向左)而将第一媒体项的显示替换为集合中的后续媒体项的显示;并且该电子设备响应于检测到不同于第二方向的第三方向上的轻扫(例如,向右)而将第一媒体项的显示替换为集合中的先前媒体项的显示;使用轻扫手势(例如,向左和向右)提供了在媒体项的集合中的媒体项之间进行导航的有效输入,如本文参考方法800进一步所述的。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在以第一显示模式显示来自媒体项的一个或多个图像时,设备检测(708)第一输入(例如,检测图像序列中的当前显示的图像上的接触处的轻扫手势)(例如,参见图5BG)。
在一些实施方案中,第一输入是(710)第一方向上的轻扫(例如,接触处的向上轻扫手势)(例如,图5BG中的向上轻扫560-2)。轻扫手势(例如,向上轻扫手势)提供有效的直观输入,以从第一用户界面(例如,媒体项回放界面)导航至显示模式选择用户界面,从而避免使UI与附加显示的控件混乱,其增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈),从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
响应于检测到第一输入,设备在显示器上显示(712)显示模式选择用户界面(例如,被配置为选择与图像序列对应的媒体项的显示模式的用户界面),其中:显示模式选择用户界面同时显示媒体项的多个表示,包括与不同于第一显示模式的第二显示模式对应的媒体项的第二表示(例如,参见图5BH中的显示模式选择用户界面511)。在一些实施方案中,对于媒体项的给定表示,指示对应显示模式(或另一显示模式标识符)的文本被显示为与给定表示相邻。
在一些实施方案中,媒体项的所述多个表示包括(714)对应于第一显示模式的媒体项的第一表示(例如,图5BH中的针对“生动”显示模式的“生动”指示符540-1)。在一些实施方案中,媒体项的相应表示对应于针对媒体项的所述多个用户可选显示模式中的相应显示模式。在一些实施方案中,对于媒体项的给定表示,指示对应显示模式(或另一显示模式标识符)的文本被显示为与给定表示相邻。在显示模式选择用户界面中显示与当前正被显示于第一用户界面中的模式对应的媒体项的表示有助于为导航提供背景并提供返回到第一用户界面的路径,其中媒体项以相同模式显示。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,基于对图像序列中的图像的分析和多个不同候选显示模式的预先确定的要求来选择(716)响应于检测到第一输入而显示的媒体项的所述多个表示(例如,如果设备确定媒体项中的图像序列满足循环表示标准,则设备仅显示/建议循环表示)。自动选择媒体项的表示以在显示模式选择用户界面中显示,其中给定表示对应于媒体项的特定显示模式,帮助用户导航至媒体项的更好的显示模式。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过仅自动地显示用户可能感兴趣的媒体项的显示模式选项的表示)。
在一些实施方案中,媒体项的所述多个用户可选显示模式包括(718)生动照片显示模式,该生动照片显示模式被配置为响应于检测到图像序列中的代表性图像上的输入(例如,包括超过强度阈值的接触强度的增加的下一图像输入或按压输入)而回放媒体项中的图像序列(例如,参见图5BH)。在一些实施方案中,响应于检测到输入来回放图像序列包括从图像序列中间的当前所显示的图像(例如,代表性图像)开始。在一些实施方案中,响应于检测到输入来回放图像序列包括交叉渐变到图像序列中的先前(例如,按时间顺序的第一)图像并从第一图像回放。在一些实施方案中,响应于检测到输入来回放图像序列包括开始从当前显示的图像播放,然后交叉渐变到第一图像并通过从第一图像起的图像序列播放。
在一些实施方案中,针对媒体项的所述多个用户可选显示模式包括(720)循环显示模式,该循环显示模式被配置为以循环的方式(例如,从序列的开始到结束顺序地显示图像,然后再次从序列的开始处开始)(重复地)显示媒体项中的图像序列(例如,图5BH中的针对“循环”显示模式的“循环”指示符540-2)。
在一些实施方案中,媒体项的所述多个用户可选显示模式包括(722)来回显示模式,该来回显示模式被配置为显示媒体项中来回重复地播放(例如,顺序地将图像从序列的开始向前显示到序列的结束,然后从序列的结束处开始向后播放到序列的开始)的图像序列(例如,图5BH中的针对“来回”显示模式的“来回”指示符540-3)。
在一些实施方案中,媒体项的所述多个用户可选显示模式包括(724)合并图像显示模式,该合并图像显示模式被配置为显示包括来自图像序列中的多个图像的内容的单个合并图像(例如,图5BH中的针对“合并”显示模式的“合并”指示符540-4)。
在一些实施方案中,单个合并图像包括在图像序列中的多个图像中的相同位置处出现的同一对象的内容,这些图像被合并在一起以模糊在不同图像之间运动的特征并模拟在图像捕获期间长曝光时间的效果。
在一些实施方案中,单个合并图像包括在图像序列中的多个图像中的不同位置处出现的同一对象的内容,并且强调该对象在所述多个图像中的不同位置以模拟用频闪灯多次曝光的效果,使得移动对象在合并图像中多次出现。
在一些实施方案中,当处于合并显示模式(例如,长曝光显示模式)时,检测在生动照片显示模式下启动回放的相同输入(例如,轻扫、包括超过强度阈值的接触强度的增大的按压输入,或对所显示的合并图像的长时间按压)将从合并图像交叉渐变到媒体项中的图像序列的回放,然后交叉渐变回到合并图像中。
在一些实施方案中,针对媒体项的所述多个用户可选显示模式包括(726)电影显示模式,该电影显示模式被配置为响应于检测到图像序列的表示上的轻击输入(例如,而不是检测到轻扫、长按压或按压输入)而回放媒体项中的图像序列,其中回放在图像序列中的最早图像处开始。在一些实施方案中,针对电影显示模式的编辑用户界面包括使得媒体项仅被保存为视频文件(例如,GIF、MOV、MP4、WMV或AVI文件)的控件,而不是作为同时包含静态图像(例如,JPEG)和视频(例如,MOV)的媒体项(例如,图5BK中的针对“电影”显示模式的“电影”指示符540-6)。
在一些实施方案中,在显示模式选择用户界面中的媒体项的相应表示以对应显示模式显示(728)媒体项的预览,其中相应表示在显示模式选择用户界面中以小于对应显示模式下的媒体项的第一放大率的第二放大率被显示(例如,参见图5BH)。例如,媒体项的与循环显示模式对应的第一表示以第二缩小放大率显示了循环媒体项中的图像序列。例如,与来回显示模式对应的第二表示以第二缩小放大率显示了来回重复播放的图像序列。例如,对应于长曝光显示模式的第三表示以第二缩小放大率将图像序列显示为单个合并图像。例如,对应于频闪显示模式的第四表示以第二缩小放大率将图像序列的子集显示为单个合并图像。在一些实施方案中,对应显示模式的这些预览以第二放大率被同时显示(例如,作为一组缩略图,具有应用于每个缩略图的特定显示模式的预览)。在显示模式选择用户界面中显示作为对应显示模式的预览的媒体项的缩小比例表示为导航提供背景。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,在显示模式选择用户界面中,媒体项的所述多个表示是(730)可滚动的(例如,参见图5BJ至图5BK)。在一些实施方案中,媒体项的表示被成行显示并且被配置为响应于检测到沿行的拖动或轻扫手势而水平滚动。在一些实施方案中,媒体项的表示被成列显示并且被配置为响应于检测到沿列的拖动或轻扫手势而竖直滚动。在显示模式选择用户界面中具有媒体项的可滚动表示使得用户在具有小显示器的设备上看到附加的显示模式导航选项。这增强了设备的可操作性并且使得用户设备界面更有效(例如,在具有小显示器的设备上)。
在一些实施方案中,响应于检测到第一输入,显示模式选择用户界面同时显示(732)在第一放大率下的第一显示模式下的来自媒体项的一个或多个图像的小于全部的一部分,以及在小于第一放大率的第二放大率下的图像序列的所述多个表示(例如,参见图5BH)。在显示模式选择用户界面中以第一放大率按第一显示模式显示媒体项的一部分(例如,底部部分)提供用于从显示模式选择用户界面导航回到第一用户界面的背景(例如,使用向下轻扫手势返回到第一用户界面)。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果的反馈)。
在一些实施方案中,显示模式选择用户界面显示(734)媒体项的地理位置信息(例如,参见图5BM)。在一些实施方案中,显示模式选择用户界面显示与媒体项中的图像序列相关联的附加信息,诸如关于图像序列中的人的信息(例如,基于人的面部识别)、显示图像序列在哪里拍摄的位置的地图、在同一位置处或附近拍摄的其他照片的链接、在同一时间或相近时间拍摄(例如,在同一天拍摄)的其他照片的链接,和/或其他相关内容。在一些实施方案中,显示模式选择用户界面包括与媒体项相关联的附加信息(例如,与媒体项的位置对应的地图、包含媒体项的照片的集合、出现在媒体项中的图像中的人、显示相关图像的选项、显示来自同一天的图像的选项等),在显示模式选择用户界面中显示媒体项的此类信息提供了媒体项的背景以及提供了与媒体项相关的附加信息的快速导航路径。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供对与媒体项相关的附加信息的快速访问)。
当在显示器上显示显示模式选择用户界面时,设备检测(736)媒体项的所述多个表示中的第二表示上的输入(例如,图5BH中所示的“循环”指示符540-2处的轻击560-4)。
响应于检测到媒体项的所述多个表示中的第二表示上的输入,设备针对与媒体项的所述多个表示中的第二表示对应的媒体项选择(738)所述多个用户可选显示模式中的第二显示模式。在一些实施方案中,媒体的第二表示在视觉上与其他表示区分(例如,通过突出显示、放置边框等)以指示与第二表示对应的显示模式被选择(例如,图5BJ中的显示模式选择指示符541)。
在一些实施方案中,设备在显示器上的第一用户界面中显示(740)第一显示模式的指示符(例如,显示图5BH中的“生动”指示符540-1、图5BH中的“循环”指示符540-2、图5BH中的“长曝光”指示符540-3或图5BH中的“来回”指示符540-4)。在第一用户界面中显示第一显示模式的指示符有助于为导航提供背景。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,响应于检测到媒体项的所述多个表示中的第二表示上的输入,设备停止(742)显示显示模式选择用户界面;并且以(所选择的)第二显示模式显示(例如,在显示器上的第一用户界面中)来自媒体项的一个或多个图像,(所选择的)第二显示模式对应于媒体项的所述多个表示中的第二表示(例如,参见图5BH至图5BI)。选择特定显示模式、退出显示模式选择用户界面,并且响应于媒体项的给定表示上的单个输入(例如,给定表示上的轻击手势)而显示所选显示模式下的媒体项减少了执行这些操作所需的输入的数量并且使得导航更有效。
在一些实施方案中,响应于检测到媒体项的所述多个表示中的第二表示上的输入,设备显示(744)(例如,在显示器上的第一用户界面中)与媒体项的所述多个表示中的第二表示对应的(所选择的)第二显示模式的指示符(例如,在图5BH中显示“循环”指示符540-2)。显示所选择的显示模式的指示符有助于为导航提供背景。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,在针对该媒体项选择与该媒体项的所述多个表示中的第二表示对应的所述多个用户可选显示模式中的第二显示模式之后,在选择与第二表示对应的第二显示模式的情况下,设备检测(746)第二输入(例如,“完成”图标上的轻击手势、第二表示上的双击手势540-2或图5BO中所示的轻击560-14),或用于退出显示模式选择用户界面的其他输入);以及响应于检测到第二输入:停止显示显示模式选择用户界面;并且以(所选择的)第二显示模式显示(例如,在显示器上的第一用户界面中)来自媒体项的一个或多个图像,(所选择的)第二显示模式对应于媒体项的所述多个表示中的第二表示。在一些实施方案中,响应于检测到第二输入,设备还显示与图像序列的所述多个表示中的第二表示对应的已选择的显示模式的指示符。在选择期望的显示模式以离开显示模式选择用户界面之后要求另一输入减少了远离显示模式选择用户界面的无意导航。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,当在显示器上的第一用户界面中以第一显示模式显示来自媒体项的所述一个或多个图像时,根据(自动)确定针对媒体项的第二显示模式满足推荐标准,设备显示(748)从第一显示模式切换到第二显示模式的建议(例如,包括用于访问显示模式选择用户界面的指令)。自动建议针对媒体项的另选显示模式有助于用户导航至针对媒体项的更好的显示模式。这增强了设备的可操作性并且使得用户设备界面更有效。
应当理解,对图7A-图7D中的操作进行描述的具体次序仅仅是示例,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法600、800、900和1000)所描述的其他过程的细节同样以类似的方式适用于上文相对于图7A至图7D所描述的方法700。例如,上文参考方法700所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画任选地具有本文参考本文所述的其他方法(例如,方法600、800、900和1000)所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画的特征中的一个或多个。为了简明起见,此处不再重复这些细节。
图8A至图8F是根据一些实施方案的用于更改针对与图像序列对应的媒体项的代表性图像的方法的流程图。方法800在具有显示器、触敏表面和任选的一个或多个传感器的电子设备(例如,图3中的设备300或图1A中的便携式多功能设备100)处执行以检测与触敏表面的接触强度。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。方法800中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
如下所述,方法800提供了一种直观的方式来更改与图像序列对应的媒体项的代表性图像。该方法减少了当更改媒体项的代表性图像时来自用户的输入的数量、程度和/或性质,从而创建更有效的人机界面。对于电池驱动电子设备,使得用户能够更快且更有效地更改媒体项的代表性图像,从而节省了电力并增加了电池充电之间的时间。
设备在显示器上的第一用户界面中显示(802)与图像序列对应的媒体项的表示,该媒体项包括来自图像序列的代表性图像(例如,显示来自图像序列的代表性图像)(例如,参见图5BS)。在一些实施方案中,媒体项包括响应于在第一显示模式(例如,生动照片显示模式)下对快门按钮的单个激活(诸如虚拟快门按钮上的轻击、物理快门按钮上的点击或虚拟快门按钮或物理快门按钮上的长按压输入)而捕获的图像。
当显示与第一显示模式下的图像序列对应的媒体项的表示时,设备检测(804)第一输入(例如,由编辑示能表示上的接触作出的轻击手势)(例如,参见图5BT)。
响应于检测到第一输入,设备在显示器上以第一显示模式显示(806)针对媒体项的编辑用户界面(例如,参见图5BU)。在一些实施方案中,编辑用户界面被配置为将在生动照片显示模式下显示的媒体项中的图像序列修剪为图像序列的小于全部的子集,并且编辑界面被配置为针对生动照片显示模式下的媒体项选择新的代表性图像。编辑用户界面同时显示:第一(预定义)区域(例如,图5BU中所示的编辑显示区域523),该第一(预定义)区域被配置为以第一放大率顺序地显示图像序列中的图像。在一些实施方案中,第一区域一次显示图像序列中的图像,其中当显示相应图像时,该相应图像填充第一区域。编辑用户界面同时显示:不同于第一区域的第二(预定义)区域(例如,图5BU中所示的区域521),该第二区域包括小于第一放大率的第二放大率下的图像序列中的图像的表示(例如,在包括媒体项的图像序列中的多个图像的缩小比例表示的滑块中);用户可调节的代表性图像选择示能表示(例如,关键图像框520,图5BU),该用户可调节的代表性图像选择示能表示被配置为经由第二区域中的代表性图像选择示能表示的一部分来选择图像序列中的新代表性图像;多个范围修剪示能表示,其包括:用户可调节的开始修剪示能表示(例如,开始手柄516,图5BU),其指示用于通过图像序列回放的第一边界(例如,开始修剪示能表示经由第二区域中的开始修剪示能表示的位置界定图像序列的子集中的开始图像);以及用户可调节的结束修剪示能表示(例如,结束手柄518,图5BU),其指示用于通过图像序列回放的第二边界(例如,结束修剪示能表示经由第二区域中的结束修剪示能表示的位置界定图像序列的子集中的结束图像)。
在一些实施方案中,媒体项中的图像序列由相机(例如,作为电子设备的一部分的相机或与电子设备分开的相机)拍摄(808);图像序列包括在采集代表性图像之后由相机采集的一个或多个图像;并且图像序列包括在采集代表性图像之前由相机采集的一个或多个图像。
在显示编辑用户界面时,设备检测(810)指向代表性图像选择示能表示的第二输入(例如,检测由接触(或光标)作出的拖动手势,该拖动手势在代表性图像选择示能表示上开始并且包括沿滑块的移动分量,该滑块包括图像序列中的多个图像的缩小比例表示)(例如,由图5BV中所示的接触570-4作出的拖动)。
在检测到指向代表性图像选择示能表示的第二输入时:设备根据第二输入移动(812)第二区域中的代表性图像选择示能表示(例如,根据接触(在拖动手势中)沿滑块的移动分量将代表性图像选择示能表示沿滑块移动);显示第二区域中的图像的视觉上强调的表示,该图像对应于第二区域中的代表性图像选择示能表示的当前位置(例如,利用代表性图像选择示能表示围绕图像的表示、在第二区域中放大图像相对于滑块中的其他表示的表示,并且/或者更改在代表性图像选择示能表示内显示的图像(因为代表性图像选择示能表示沿着滑块中的图像序列中的图像的表示移动);以及在第一区域中显示来自图像序列的图像,该图像对应于第二区域中的代表性图像选择示能表示的当前位置。(例如,与第二区域中的代表性图像选择示能表示的当前位置对应的第二区域中的图像的表示被突出显示,同时,对应图像在第一区域中以更高的放大率被显示)(例如,参见图5BW至图5BX)。
在一些实施方案中,当代表性图像选择示能表示的位置在第二区域中移动时,与第二区域中的代表性图像选择示能表示的当前位置对应的第二区域中的图像的表示,和与代表性图像选择示能表示的当前位置对应的第一区域中的图像更新(814)(例如,参见图5BW至图5BX)。当代表性图像选择示能表示的位置移动时,提供第一区域中的图像和第二区域中的表示的同时更新提供视觉反馈,该视觉反馈有助于选择新代表性图像。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果的反馈以选择新代表性图像)。
在一些实施方案中,设备检测(816)第二输入的结束,(例如,检测提供第二输入的接触的抬离);以及响应于检测到第二输入的结束,设备显示代表性图像确认示能表示(例如,响应于检测到图5BZ中的接触570-4的抬离而在图5CA中显示“制作关键照片(代表性图像)”)。在一些实施方案中,代表性图像确认示能表示在第二输入结束时与代表性图像选择示能表示的位置相邻显示。在一些实施方案中,即使在第二输入结束之后,代表性图像选择示能表示仍保持在响应于第二输入而移动到的位置(例如,直到检测到另一输入或直到经过预先确定的时间量之后)。在输入结束时显示代表性图像确认示能表示提供有助于在选择新代表性图像期间指导用户的视觉反馈。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果的反馈以选择新代表性图像以及在操作设备/与设备进行交互时减少用户错误)。
在一些实施方案中,在显示代表性图像确认示能表示时,设备检测(818)指向代表性图像确认示能表示的输入(例如,检测代表性图像确认示能表示或针对代表性图像确认示能表示的隐藏命中区域上的轻击手势);以及响应于检测到指向代表性图像确认示能表示的输入,将媒体项中的代表性图像更新为与第二区域中的代表性图像选择示能表示的当前位置对应的图像。例如,图5CB中“制作关键照片”上的轻击手势570-6确认对在第一区域中显示的图像的选择,该图像对应于代表性图像选择示能表示的当前位置作为针对媒体项的更新的代表性图像。在临时选择针对媒体项的新代表性图像之后要求确认输入减少了对新代表性图像的无意或不需要的选择。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,在显示代表性图像确认示能表示时,设备检测(820)不指向代表性图像确认示能表示的输入(例如,检测在编辑用户界面中远离代表性图像确认示能表示的位置处或针对代表性图像确认示能表示的隐藏命中区域处的轻击手势);以及响应于检测到不指向代表性图像确认示能表示的输入,放弃将媒体项中的代表性图像更新为与第二区域中的代表性图像选择示能表示的当前位置对应的图像。例如,远离图5CD中的“制作关键照片”的轻击手势570-8取消对在第一区域中显示的图像的选择,该图像对应于代表性图像选择示能表示的当前位置作为针对媒体项的更新的代表性图像。因此,在一些实施方案中,设备在显示代表性图像确认示能表示时检测输入,并且响应于检测到输入,设备根据确定输入指向代表性图像确认示能表示,将媒体项中的代表性图像更新为与第二区域中的代表性图像选择示能表示的当前位置对应的图像。并且根据确定输入不指向代表性图像确认示能表示,设备放弃将媒体项中的代表性图像更新为与第二区域中的代表性图像选择示能表示的当前位置对应的图像。如上所述,在临时选择针对媒体项的新代表性图像之后要求确认输入减少了对新代表性图像的无意或不需要的选择。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,响应于检测到不指向代表性图像确认示能表示的输入:设备停止(822)显示代表性图像确认示能表示,并且将第二区域中的代表性图像选择示能表示的位置移动到(或邻近)代表性图像的表示(例如,在检测到第二输入之前为代表性图像的媒体项中的图像)(例如,参见图5CD至图5CE)。当未确认新代表性图像的选择时,设备自动撤销对用户界面的用于显示新代表性图像的临时选择的更改,减少用户所需的输入数量,从而创建更有效的人机界面。
在一些实施方案中,在显示编辑用户界面时,设备检测(824)指向相应范围修剪示能表示(例如,开始修剪示能表示或结束修剪示能表示)的第三输入,其中:第三输入在相应范围修剪示能表示处于起始位置的情况下开始;并且第三输入具有相应的量值(例如,检测到由接触(或光标)作出的拖动手势,该拖动手势在开始修剪示能表示上开始并且包括沿滑块的移动分量,该滑块包括图像序列中的多个图像的缩小比例表示);并且响应于检测到指向相应范围修剪示能表示的第三输入:根据确定第三输入的相应量值对应于相应范围修剪示能表示以第一量的移动,将相应范围修剪示能表示以第一量移动,该第一量小于相应范围修剪示能表示的起始位置和代表性图像选择示能表示之间的距离;以及根据确定第三输入的相应量值对应于相应范围修剪示能表示以第二量的移动,将相应范围修剪示能表示移动到邻近代表性图像选择示能表示,该第二量大于相应范围修剪示能表示的起始位置和代表性图像选择示能表示之间的距离(例如,参见图5CH至图5CJ)。
在一些实施方案中,设备根据接触(在拖动手势中)沿滑块的移动的分量来沿滑块移动开始修剪示能表示。在一些实施方案中,一旦开始修剪示能表示在当前代表性图像的表示处、上方或旁边,接触沿滑块的继续移动将继续移动开始修剪示能表示,并且还将媒体项中的当前代表性图像更改为与开始修剪示能表示的当前位置对应的图像(例如,参见图5Y、图5AB和图5AC)。以此方式移动范围修剪示能表示允许同时更改媒体项的范围和具有单个输入的媒体项的代表性图像,这减少了执行这些操作所需的输入的数量,并且使得编辑用户界面更有效。
在一些实施方案中,开始修剪示能表示不能移动超过与图像序列中的当前代表性图像对应的第二区域中的表示。在一些实施方案中,一旦开始修剪示能表示在当前代表性图像的表示处、上方或旁边,接触沿滑块的继续移动将不继续移动开始修剪示能表示,并且将不更改媒体项中的当前代表性图像。以此方式移动范围修剪示能表示增强了设备的可操作性,并且使得用户设备界面更有效(例如,通过防止用户用范围修剪示能表示意外地更改代表性图像)。
类似地,在一些实施方案中,设备根据接触(在拖动手势中)沿滑块的移动的分量来沿滑块移动结束修剪示能表示。在一些实施方案中,一旦结束修剪示能表示在当前代表性图像的表示处、上方或旁边,接触沿滑块的继续移动将继续移动结束修剪示能表示,并且还将媒体项中的当前代表性图像更改为与结束修剪示能表示的当前位置对应的图像。
在一些实施方案中,结束修剪示能表示不能移动超过与媒体项中的当前代表性图像对应的第二区域中的表示。在一些实施方案中,一旦结束修剪示能表示在当前代表性图像的表示处、上方或旁边,接触沿滑块的继续移动将不继续移动结束修剪示能表示,并且将不更改媒体项中的当前代表性图像。
在一些实施方案中,当检测到指向代表性图像选择示能表示的第二输入的情况下,设备在第二区域中显示(826)针对媒体项的当前代表性图像的指示符(例如,图5CD中的点542被显示相邻于媒体项中的当前代表性图像的缩小比例表示)。显示媒体项的当前代表性图像的指示符向用户提供了改善的视觉反馈,并且如果用户决定不更改当前代表性图像,则帮助用户返回到当前代表性图像。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,在检测到指向代表性图像选择示能表示的第二输入的情况下,当代表性图像选择示能表示处于与媒体项的代表性图像的表示对应的位置时,设备放弃在第二区域中显示(828)针对媒体项的当前代表性图像的指示符(例如,参见图5CK至图5CL)。在一些实施方案中,当初始显示编辑用户界面时,代表性图像选择示能表示在与媒体项的代表性图像的表示对应的位置处显示,并且不显示点,如图5BU所示。在一些实施方案中,当代表性图像选择示能表示移动离开与媒体项的代表性图像的表示对应的位置时(例如,响应于代表性图像选择示能表示上的拖动手势),点在与媒体项的代表性图像的表示对应的位置处或其附近显示,如图5BY至图5CA所示。在一些实施方案中,如果代表性图像选择示能表示移动离开其初始位置,则显示指示符,并且如果该代表性图像选择示能表示被移动回到初始位置,则停止显示指示符。以此方式显示媒体项的当前代表性图像的指示符向用户提供了改善的视觉反馈,并且如果用户决定不更改当前代表性图像,则帮助用户返回到当前代表性图像。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,响应于检测到指向代表性图像确认示能表示的输入,设备在第二区域中显示(830)针对图像序列的原始代表性图像的指示符(例如,图5BY中的点542在媒体项的原始代表性图像的缩小比例表示附近显示)。在一些实施方案中,在媒体项的代表性图像已被更改之后,指示符在第二区域中在媒体项的原始代表性图像的缩小比例表示处或附近显示。在一些实施方案中,原始代表性图像的指示符与当前代表性图像的指示符同时显示(例如,如果当前代表性图像不同于原始代表性图像,则代表性图像选择示能表示被显示为远离当前代表性图像的位置或原始代表性图像的位置,如图5CF中的点542和点543所示)。显示媒体项的原始代表性图像的指示符向用户提供了改善的视觉反馈,并且有助于用户返回到原始代表性图像。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,电子设备具有一个或多个触觉输出发生器,并且在检测到指向代表性图像选择示能表示的第二输入的情况下,当代表性图像选择示能表示移动越过与媒体项的代表性图像的表示对应的位置时,设备生成(832)触觉输出(例如,参见图5CL中的触觉响应527)。在一些实施方案中,当代表性图像选择示能表示超过媒体项的原始代表性图像的缩小比例表示时,设备生成触觉输出。在一些实施方案中,当代表性图像选择示能表示以低于阈值速度的速度移动经过原始代表性图像的位置时生成触觉输出,并且当代表性图像选择示能表示以高于阈值速度的速度移动经过原始代表性图像的位置时不生成触觉输出(例如,参见图5CL和图5CM)。以此方式提供触觉反馈增强设备的可操作性并且使得用户设备界面更有效(例如,通过提醒用户代表性图像选择示能表示已返回到与原始代表性图像的表示对应的位置,从而帮助用户在操作设备/与设备进行交互时实现预期结果并减少用户错误)。
在一些实施方案中,电子设备具有一个或多个触觉输出发生器,并且在更新图像序列中的代表性图像之后,当在编辑用户界面中并且检测到指向代表性图像选择示能表示的输入时,当代表性图像选择示能表示移动越过与媒体项的更新的代表性图像的表示对应的位置时,设备生成(834)触觉输出(例如,参见图5CI)。在一些实施方案中,当代表性图像选择示能表示超过媒体项的当前代表性图像的缩小比例表示时,设备生成触觉输出。在一些实施方案中,当代表性图像选择示能表示以低于阈值速度的速度移动经过当前代表性图像的位置时生成触觉输出,并且当代表性图像选择示能表示以高于阈值速度的速度移动经过当前代表性图像的位置时不生成触觉输出。以此方式提供触觉反馈增强设备的可操作性并且使得用户设备界面更有效(例如,通过提醒用户代表性图像选择示能表示已返回到与更新的代表性图像的表示对应的位置,从而帮助用户在操作设备/与设备进行交互时实现预期结果并减少用户错误)。
在一些实施方案中,电子设备具有一个或多个触觉输出发生器,并且当在编辑用户界面中并且检测到指向相应范围修剪示能表示的输入时,当相应范围修剪示能表示被移动到与媒体项的代表性图像的表示对应的位置时,设备生成(836)触觉输出(例如,图5CL)。在一些实施方案中,当开始修剪示能表示超过媒体项的当前代表性图像的缩小比例表示时,设备生成触觉输出。类似地,在一些实施方案中,当结束修剪示能表示超过媒体项的当前代表性图像的缩小比例表示时,设备生成触觉输出。在一些实施方案中,当设备接收到与将相应范围修剪示能表示移动到或超过媒体项的代表性图像的表示的位置的请求对应的输入时,设备会生成触觉输出。以此方式提供触觉反馈增强设备的可操作性并且使得用户设备界面更有效(例如,通过提醒用户范围修剪示能表示已移动到与媒体项的代表性图像的表示对应的位置,从而帮助用户在操作设备/与设备进行交互时实现预期结果并减少用户错误)。
在一些实施方案中,设备检测(838)与将代表性图像选择示能表示移动到超出范围修剪示能表示的位置的请求对应的输入;并且响应于检测到与移动代表性图像选择示能表示的请求对应的输入,移动范围修剪示能表示(例如,移动到与代表性图像选择示能表示相同的位置或与代表性图像选择示能表示相邻的位置)(例如,参见图5CJ至图5CK)。以此方式移动代表性图像选择示能表示允许同时更改媒体项的范围和具有单个输入的媒体项的代表性图像,这减少了执行这些操作所需的输入的数量,并且使得编辑用户界面更有效。
在一些实施方案中,设备检测(840)与将代表性图像选择示能表示移动到超出范围修剪示能表示的位置的请求对应的输入;响应于检测到与移动代表性图像选择示能表示的请求对应的输入:根据确定范围修剪示能表示不在图像序列的结束处,移动范围修剪示能表示(例如,移动到与代表性图像选择示能表示相同的位置);并且根据确定范围修剪示能表示在图像序列的结束处,放弃移动范围修剪示能表示(例如,参见图5CJ至图5CK)。以此方式移动代表性图像选择示能表示允许同时更改媒体项的范围和具有单个输入的媒体项的代表性图像,这减少了执行这些操作所需的输入的数量,并且使得编辑用户界面更有效。
在一些实施方案中,设备检测(842)与将代表性图像选择示能表示相对于范围修剪示能表示移动的请求对应的输入;响应于检测到与将代表性图像选择示能表示相对于范围修剪示能表示移动的请求对应的输入:根据确定与将代表性图像选择示能表示相对于范围修剪示能表示移动的请求对应的输入是将范围修剪示能表示移动到超出代表性图像选择示能表示的位置的请求(例如,在范围修剪示能表示上开始并且在代表性图像选择示能表示之上移动的拖动输入),设备移动与代表性图像选择示能表示相邻的范围修剪示能表示并生成触觉输出(例如,图5CI);并且根据确定与将代表性图像选择示能表示相对于范围修剪示能表示移动的请求对应的输入是将代表性图像选择示能表示移动到超出范围修剪示能表示的位置的请求(例如,在代表性图像选择示能表示上开始并且在范围修剪示能表示之上移动的拖动输入),设备将代表性图像选择示能表示移动到邻近范围修剪示能表示而不生成触觉输出(例如,图5CJ至图5CK)。以此方式提供触觉反馈增强设备的可操作性并且使得用户设备界面更有效(例如,通过在触觉反馈将帮助用户的某些情况下提供触觉反馈,但在触觉反馈可能提供过多反馈或可能混淆用户的其他情况下则不提供触觉反馈,从而帮助用户在操作设备/与设备进行交互时实现预期结果并减少用户错误)。
在一些实施方案中,设备检测(844)与编辑图像序列的请求对应的输入(例如,更改媒体项中的图像序列的起点、终点或代表性图像);响应于检测到与编辑图像序列的请求对应的输入:根据确定与编辑图像序列的请求对应的输入是将代表性图像选择示能表示移动到邻近或超出当前代表性图像的表示的请求(例如,在代表性图像选择示能表示上开始并且移动邻近或经过滑块中的媒体项的当前代表性图像的缩小比例表示的拖动输入),移动代表性图像选择示能表示(例如,邻近范围修剪示能表示)并且基于输入的移动速度是否高于相应速度阈值,有条件地生成触觉输出(例如,如果当移动经过或邻近当前代表性图像的缩小比例表示时,拖动输入的速度高于相应速度阈值,则设备生成对应的触觉输出;并且如果当移动经过或邻近当前代表性图像的缩小比例表示时,拖动输入的速度低于相应速度阈值,则设备放弃生成对应的触觉输出,反之亦然)(例如,图5CM至图5CN);并且根据确定与编辑图像序列的请求对应的输入是将范围修剪示能表示移动到超出当前代表性图像的表示的位置的请求(例如,在范围修剪示能表示上开始并且移动邻近或经过滑块中的媒体项的当前代表性图像的缩小比例表示(诸如代表性图像选择示能表示)的拖动输入),移动范围修剪示能表示(例如,邻近代表性图像选择示能表示)并且在不考虑输入的移动速度的情况下生成触觉输出(例如,无论拖动输入是高于还是低于移动速度阈值,都生成触觉输出)(例如,参见图5CH)。以此方式提供触觉反馈增强设备的可操作性并且使得用户设备界面更有效(例如,通过在触觉反馈将帮助用户的某些情况下提供触觉反馈,但在触觉反馈可能提供过多反馈或可能混淆用户的其他情况下则不提供触觉反馈,从而帮助用户在操作设备/与设备进行交互时实现预期结果并减少用户错误)。
应当理解,对图8A至图8F中的操作进行描述的特定顺序仅仅是示例性的,并非旨在表明所述顺序是可以执行这些操作的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法600、700、900和1000)所描述的其他过程的细节同样以类似的方式适用于上文相对于图8A至图8F所描述的方法800。例如,上文参考方法800所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画任选地具有本文参考本文所述的其他方法(例如,方法600、700、900和1000)所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画的特征中的一个或多个。为了简明起见,此处不再重复这些细节。
图9A至图9I是根据一些实施方案的用于导航通过媒体项的集合的方法的流程图,其中媒体项具有多个用户可选显示模式。方法900在具有显示器、触敏表面和任选的一个或多个传感器的电子设备(例如,图3中的设备300或图1A中的便携式多功能设备100)处执行以检测与触敏表面的接触强度。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。方法900中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
如下所述,方法900提供了导航通过媒体项的集合的直观方式,其中媒体项具有多个用户可选显示模式。该方法为此类导航创建了更有效的人机界面。对于电池驱动的电子设备,使得用户能够更有效地导航通过此类媒体项的集合,从而节省了功率并增加了电池充电之间的时间。
设备在显示器上的第一用户界面中显示(902)与多个用户可选显示模式中的第一显示模式(例如,生动照片显示模式)下的图像(例如,响应于快门按钮的单个激活(诸如虚拟快门按钮上的轻击、物理快门按钮的点击或在虚拟或物理快门按钮上的长按压输入)而捕获的图像)序列对应的第一媒体项的表示,其中:第一媒体项是媒体项的集合的一部分(例如,在媒体库、文件夹、相册或相机胶卷中);媒体项集合按基于预先确定的标准(例如,创建的日期/时间、上一次编辑的日期/时间、集合中的媒体项的名称、大小等)的次序布置;一个或多个先前媒体项按该次序在第一媒体项之前;并且一个或多个后续媒体项按该次序在第一媒体项之后(例如,参见图5CN)。
在一些实施方案中,针对相应媒体项的所述多个用户可选显示模式包括生动照片显示模式。如果相应媒体项处于生动照片显示模式,则在检测到使得相应媒体项被显示在显示器上的触摸输入的情况下,电子设备显示相应媒体项中的图像序列的代表性图像。响应于检测到使得相应媒体项被显示在显示器上的触摸输入的结束(例如,检测到触摸输入中的接触的抬离),设备从代表性图像开始回放相应媒体项中的图像序列中的图像,然后交叉渐变到图像序列中的开始图像并且从开始图像开始播放图像序列,然后重新显示代表性图像。在一些实施方案中,当后续媒体项滑动到显示器上时(在检测到触摸输入的结束之后),第二图像序列继续从相应图像回放。以这种方式回放生动照片显示模式下的后续(或先前)媒体项,使得后续(或先前)媒体项在导航期间“生动”,其向用户指示后续(或先前)媒体项处于生动照片显示模式。这帮助用户更有效地以他们所选择的显示模式浏览和查看集合中的媒体项。
在一些实施方案中,针对相应媒体项的所述多个用户可选显示模式包括(904)来回显示模式,该来回显示模式被配置为显示相应媒体项中的来回重复播放的图像序列(例如,参见图5CT)。当相应媒体项处于来回显示模式时,在检测到使得相应媒体项被显示在显示器上的触摸输入(例如,使得相应媒体项滚动到显示器上的轻扫/拖动手势)的情况下,相应媒体中的图像序列开始来回播放;并且在使得相应媒体项被显示在显示器上的触摸输入结束之后(例如,在检测到正提供轻扫/拖动手势的接触的抬离之后),相应媒体中的图像序列来回重复播放。在一些实施方案中,触摸输入将相应媒体项滚动到显示器上,并且当该触摸输入已将四分之一、三分之一、二分之一或一些其他预定义量滚动到显示器上时,相应媒体项开始来回播放。在一些实施方案中,当后续媒体项滑动到显示器上时(在检测到触摸输入的结束之前或之后),第二图像序列继续来回播放。以这种方式回放来回显示模式下的后续(或先前)媒体项,使得后续(或先前)媒体项开始在导航期间来回移动,其向用户指示后续(或先前)媒体项处于来回显示模式。这帮助用户更有效地以他们所选择的显示模式浏览和查看集合中的媒体项。
在一些实施方案中,针对相应媒体项的所述多个用户可选显示模式包括(906)合并图像显示模式,该合并图像显示模式被配置为显示包括来自相应媒体项中的图像序列中的多个图像的同时显示的内容的单个合并图像(例如,参见图5CV)。当相应媒体项处于合并图像显示模式时,在检测到使得相应媒体项被显示在显示器上的触摸输入(例如,使得相应媒体项滚动到显示器上的轻扫/拖动手势)的情况下,电子设备显示单个合并图像。响应于检测到使得相应媒体项被显示在显示器上的触摸输入的结束(例如,检测到轻扫/拖动手势中的接触的抬离),电子设备回放相应媒体项中的图像序列中的多个图像(例如,从单个合并图像交叉渐变到图像序列中的相应图像,然后通过从相应图像起的图像序列播放,其中相应图像是下述图像之一:相应媒体项中的图像序列中的开始图像、相应媒体项中的图像序列中的代表性图像,或相应媒体项中的图像序列中的结束图像),然后重新显示单个合并图像。在一些实施方案中,在后续媒体项滑动到显示器上的情况下(在检测到触摸输入的结束之后),第二图像序列继续回放。在一些实施方案中,回放图像序列中的图像包括在图像序列中的开始图像处开始回放图像序列中的图像;然后通过全部或部分(例如,四分之一、二分之一或四分之三)图像序列播放;然后重新显示已合并的图像。在导航期间以这种方式回放合并显示模式下的后续(或先前)媒体项向用户指示了后续(或先前)媒体项处于合并显示模式。这帮助用户更有效地以他们所选择的显示模式浏览和查看集合中的媒体项。
在一些实施方案中,媒体项的集合包括仅包含单个静态图像的媒体项。对于此类媒体项,仅单个静态图像响应于检测到使得媒体项被显示在显示器上的触摸输入(例如,先前媒体项上的轻扫手势或集合导航控件中的静态图像的缩小比例表示上的轻击手势)而被显示。
在一些实施方案中,针对相应媒体项的所述多个用户可选显示模式包括电影显示模式。如果相应媒体项处于电影显示模式,则在检测到使得相应媒体项被显示在显示器上的触摸输入的情况下,电子设备显示相应媒体项中的图像序列的代表性图像。响应于检测到使得相应媒体项被显示在显示器上的触摸输入的结束(例如,检测到触摸输入中的接触的抬离),不回放媒体项。当处于电影显示模式时,媒体项上的轻击手势使得媒体被以电影模式回放,其中回放从媒体项目中的图像序列中的最早图像开始。在一些实施方案中,播放示能表示被显示在媒体项的表示上或附近,以指示在轻击输入时将触发媒体项的回放。
在一些实施方案中,当使用指向集合导航控件的输入导航至一个或多个媒体项时,所述一个或多个媒体项在导航期间不被回放。
在显示第一媒体项的表示的情况下(例如,显示来自第一媒体项中的图像序列的代表性图像),设备检测(908)包括在触敏表面上的沿相应方向的移动的触摸输入(例如,由接触作出的轻扫手势)(例如,参见图5CO)。
响应于检测到触摸输入:根据确定该移动是沿第一方向(例如,向左)的移动,并且对应于第二图像序列的后续媒体项被指定为以第一显示模式(例如,生动照片显示模式)显示,设备以第一显示模式显示(910)后续媒体项,包括以基于第一显示模式确定的方式显示来自第二图像序列中的多个图像的内容(例如,参见图5CP);并且根据确定该移动是沿第一方向(例如,向左)的移动,并且后续媒体项被指定为以不同于第一显示模式的第二显示模式(例如,循环显示模式)来显示,以第二显示模式显示后续媒体项包括以基于第二显示模式确定的方式显示来自第二图像序列中的多个图像的内容(例如,参见图5CS)。
在一些实施方案中,第一显示模式是(912)生动照片显示模式;并且以第一显示模式显示后续媒体项包括:在检测到触摸输入的情况下显示来自第二图像序列的相应图像的至少一部分(例如,参见图5CP)。在一些实施方案中,相应图像是第二图像序列中的第一图像。在一些实施方案中,相应图像是第二图像序列中的最后图像。在一些实施方案中,相应图像是在第二图像序列中的代表性图像之前出现的图像。在一些实施方案中,相应图像是在第二图像序列中的代表性图像之后出现的图像。在一些实施方案中,相应图像是代表性图像。以第一显示模式显示后续媒体项还包括:检测触摸输入的结束;以及(例如,检测正提供触摸输入的接触的抬离);以及响应于检测到触摸输入的结束,从相应图像开始回放第二图像序列中的图像。在一些实施方案中,回放第二图像序列中的图像包括:在第二图像序列中的开始图像处开始回放第二图像序列中的图像,以及通过从开始图像直至代表性图像的第二图像序列播放。在一些实施方案中,回放第二图像序列中的图像包括:在相应图像处开始回放第二图像序列中的图像,然后交叉渐变到第二图像序列中的开始图像,并且通过从开始图像起的第二图像序列播放,然后显示代表性图像。
在一些实施方案中,第二显示模式是(914)循环显示模式;以第二显示模式显示后续媒体项包括:在检测到触摸输入的至少一部分的情况下显示循环的第二图像序列(例如,触摸输入将后续媒体项的部分或全部滚动到显示器上,并且后续媒体项在其将四分之一、三分之一、二分之一或一些其他预定义量滚动到显示器上时开始循环);并且在检测到触摸输入的结束(例如,检测到正提供触摸输入的接触的抬离)之后继续显示循环的第二图像序列(例如,参见图5CS)。
在一些实施方案中,相应媒体项的所述多个用户可选显示模式包括(916)循环显示模式,该循环显示模式被配置为以循环的方式(重复地)显示相应媒体项中的图像序列(例如,从序列的开始到结束顺序地显示图像,然后再次从序列的开始处开始);如果相应媒体项处于循环显示模式,在检测到使得相应媒体项被显示在显示器上的触摸输入(例如,使得相应媒体项滚动到显示器上的轻扫/拖动手势)的情况下,相应媒体中的图像序列开始循环;并且在使得相应媒体项被显示在显示器上的触摸输入结束之后(例如,在检测到正提供轻扫/拖动手势的接触的抬离之后),相应媒体项中的图像序列继续循环(例如,参见图5CS)。在一些实施方案中,如果相应媒体项处于循环显示模式,则触摸输入将相应媒体项滚动到显示器上,并且当相应媒体项在其将四分之一、三分之一、二分之一或一些其他预定义量滚动到显示器上时开始循环。在一些实施方案中,当后续媒体项滑动到显示器上(在检测到触摸输入结束之前或之后)时,第二图像序列继续循环,以这种方式回放循环显示模式下的后续(或先前)媒体项,使得后续(或先前)媒体项在导航期间开始循环,其向用户指示了后续(或先前)媒体项处于循环显示模式。这帮助用户更有效地以他们所选择的显示模式浏览和查看集合中的媒体项。
在一些实施方案中,响应于检测到触摸输入:根据确定该移动是沿与第一方向相反的第二方向(例如,向右)的移动,并且对应于第三图像序列的先前媒体项被指定为以第一显示模式(例如,生动照片显示模式)显示,设备以第一显示模式显示(916)先前媒体项,包括以基于第一显示模式确定的方式显示来自第三图像序列中的多个图像的内容;并且根据确定该移动是沿第二方向(例如,向右)的移动,并且先前媒体项被指定为以不同于第一显示模式的第二显示模式(例如,循环显示模式)来显示,以第二显示模式显示先前媒体项包括以基于第二显示模式确定的方式显示来自第三图像序列中的多个图像的内容(例如,参见图5CU)。
在一些实施方案中,响应于检测到触摸输入:根据确定该移动是沿第一方向(例如,向左)的移动,并且后续媒体项被指定为以不同于第一显示模式和第二显示模式的第三显示模式(例如,来回显示模式或合并显示模式)来显示,设备以第三显示模式显示(918)后续媒体项,包括以基于第三显示模式确定的方式显示来自第二图像序列中的多个图像的内容;并且根据确定该移动是沿第二方向(例如,向右)的移动,并且先前媒体项被指定为以第三显示模式(例如,来回显示模式或合并显示模式)来显示,以第三显示模式显示先前媒体项包括以基于第三显示模式确定的方式显示来自第三图像序列中的多个图像的内容(例如,参见图5CU和图5CW)。
在一些实施方案中,响应于检测到触摸输入:根据确定该移动是沿第一方向(例如,向左)的移动,并且后续媒体项被指定为以不同于第一显示模式、第二显示模式和第三显示模式的第四显示模式(例如,合并显示模式或来回显示模式)来显示,设备以第四显示模式显示(520)后续媒体项,包括以基于第四显示模式确定的方式显示来自第二图像序列中的多个图像的内容;并且根据确定该移动是沿第二方向(例如,向右)的移动,并且先前媒体项被指定为以第四显示模式(例如,合并显示模式或来回显示模式)来显示,以第四显示模式显示先前媒体项包括以基于第四显示模式确定的方式显示来自第三图像序列中的多个图像的内容(例如,参见图5CV)。
在一些实施方案中,响应于检测到触摸输入,根据确定该移动是沿不同于第一方向的第三方向(例如,向上)的移动,设备显示(922)用户界面(例如,显示模式选择用户界面),该用户界面包括:关于第一媒体项的附加信息,和被配置为针对第一媒体项选择不同显示模式的一个或多个显示模式选择示能表示(例如,第一媒体项的多个可激活的缩小比例表示),其中给定的显示模式选择示能表示示出了针对第一媒体项的对应用户可选显示模式)。在一些实施方案中,用户界面为显示模式选择用户界面,该显示模式选择用户界面被配置为使用户选择针对与图像序列对应的媒体项的多个用户可选显示模式(例如,生动照片显示模式、循环显示模式、长曝光显示模式、来回显示模式、电影显示模式、频闪效果显示模式或用于显示用户所选择的图像序列的另一显示模式)中的一个(例如,参见图5BG至图5BH)。在一些实施方案中,在第一媒体项处于第一显示模式的情况下,选择对应于第二显示模式的显示模式选择示能表示将第一媒体项的显示模式从第一显示模式切换至第二显示模式。参考方法700更详细地描述了显示模式选择示能表示的示例。以这种方式显示显示模式选择示能表示提供了导航至具有多个显示模式的媒体项并针对该媒体项选择显示模式的直观方式。在显示模式选择用户界面中显示针对媒体项的附加信息为媒体项提供背景并提供与媒体项相关的附加信息的快速导航路径。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供对与媒体项相关的附加信息的快速访问)。
在一些实施方案中,响应于检测到触摸输入,根据确定该移动是沿不同于第一方向的第四方向(例如,向下)的移动,设备显示(924)用户界面,该用户界面同时显示集合中的多个媒体项的表示(例如,显示针对集合中的多个媒体项的代表性图像的静态缩略图),所述多个媒体项的表示包括第一媒体项、一个或多个先前媒体项和/或一个或多个后续媒体项的表示(例如,媒体项的集合在图5B中示出)。响应于沿第四方向(例如,向下)的触摸输入切换至媒体项的集合(例如,媒体项的一系列缩略图)的该不同视图,其中缩略图是来自媒体项的静态图像(例如,代表性图像和/或合并图像),有助于更快速地导航至集合中的其他媒体项。
在一些实施方案中,在第一用户界面中以第一放大率显示第一媒体项的表示,并且设备在第一用户界面中同时显示(926)第一媒体项的表示和集合导航控件(例如,图5DA中的媒体项集合区域510),该集合导航控件被配置为导航通过媒体项的集合(例如,基于控件上的轻击或轻扫输入切换媒体项的哪种表示在预览区域中显示),其中:该集合导航控件包括集合中的媒体项的较小表示(例如,包括以小于第一放大率的第二放大率显示的多个媒体项的缩小比例表示的滑块、条或区域);该集合导航控件包括第一媒体项的第一较小表示(例如,以第二放大率显示的第一媒体项的表示)(例如,来自第一媒体项的单个代表性图像)。设备检测对应于第一媒体项的输入(例如,以第一放大率显示的第一媒体项的表示上的输入诸如轻击、长按压或深按压,或在集合导航控件中显示的第一媒体项的较小表示上的输入诸如轻击、长按压或深按压),并且响应于检测到对应于第一媒体项的输入(在集合导航控件中显示的第一媒体项的第一较小表示上的轻击),在集合导航控件中显示第一媒体项的扩展表示(例如,在集合导航控件中显示来自第一媒体项中的图像序列的代表性图像和附加图像)(例如,图5DB中的扩展表示551)。在一些实施方案中,以第一放大率显示的第一媒体项的表示上的输入(例如,轻击或深按压)还以针对第一媒体项的当前所选择的显示模式(例如,生动照片显示模式)回放第一媒体项。以此方式在集合导航控件中显示第一媒体项的扩展表示向用户提供可经由集合导航控件回放第一媒体项的视觉反馈。这种视觉反馈增强了设备的可操作性,并且使得用户设备界面更有效。
在一些实施方案中,响应于检测到对应于第一媒体项的输入,设备在集合导航控件中显示(928)第一媒体项的扩展表示中的滚动指示符(例如,播放头、滚动条、回放位置指示符或其他滚动指示符,诸如图5DB中的滚动器544)。在一些实施方案中,滚动指示符被显示在与图像序列中的代表性图像对应的位置处。设备检测指向集合导航控件的一部分的输入(例如,检测由在滚动指示符上开始的接触作出的拖动手势,该拖动手势具有沿着第一媒体项的扩展表示的移动分量,或者检测在集合导航控件上开始的拖动手势);在检测到指向集合导航控件的该部分的输入(例如,指向滚动指示符的输入或指向集合导航控件的输入)的情况下:根据指向集合导航控件的该部分的输入,设备更改集合导航控件中第一媒体项的扩展表示与滚动指示符的相对位置(例如,根据沿着第一媒体项的扩展表示的输入处的接触的移动分量,移动第一媒体项的扩展表示中的回放滚动指示符,或者移动第一媒体项的扩展表示,同时将回放滚动指示符保持在显示器上的固定位置处);并且设备以第一放大率显示针对第一媒体项的图像序列中的图像,该图像对应于集合导航控件中的第一媒体项的扩展表示中的滚动指示符的当前位置(例如,参见图5DB至图5DE)。在一些实施方案中,当集合导航控件中第一媒体项的扩展表示与滚动指示符的相对位置更改时,图像序列的图像更改以对应于集合导航控件中的第一媒体项的扩展表示内的滚动指示符的位置。在一些实施方案中,当图像序列的扩展表示将移动超出滚动指示符所占据的位置时,滚动指示符相反被拖行,并且当输入结束时,图像序列的扩展表示回弹。以这种方式与集合导航控件中的第一媒体项的扩展表示进行交互为用户提供了对第一媒体项中的图像的查看的精确控制。这种精确控制增强了设备的可操作性,并且使得用户设备界面更有效。
在一些实施方案中,在检测到指向集合导航控件的该部分(例如,滚动指示符或第一媒体项的扩展表示)的输入的情况下:根据确定滚动指示符在与第一媒体项的图像序列的代表性图像的表示对应的位置的预先确定的距离(大于零)内,设备对齐(930)到与第一媒体项的图像序列的代表性图像的表示对应的位置处(例如,滚动指示符或集合导航控件)(例如,参见图5DE)。此对齐有助于用户在媒体项的滚动期间返回到代表性图像。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,电子设备具有(932)一个或多个触觉输出发生器,并且该设备在检测到指向集合导航控件的该部分(例如,滚动指示符或第一媒体项的扩展表示)的输入的情况下:根据确定滚动指示符在与第一媒体项的图像序列的代表性图像的表示对应的位置的预先确定的距离(大于零)内:对齐到与第一媒体项的图像序列的代表性图像的表示对应的位置处(例如,滚动指示符或集合导航控件),并且当滚动指示符对齐到该位置时生成触觉输出(例如,参见图5DE)。在对齐期间提供触觉反馈增强设备的可操作性并且使得用户设备界面更有效(例如,通过提醒用户滚动指示符或集合导航控件已对齐到与代表性图像的表示对应的位置,从而帮助用户在操作设备/与设备交互时实现预期结果并减少用户错误)。
在一些实施方案中,电子设备具有(934)一个或多个触觉输出发生器,指向集合导航控件的该部分的输入包括将滚动指示符带到与第一媒体项的图像序列的代表性图像对应的第一媒体项的扩展表示的该部分的预定义的距离(大于零)内的移动,并且设备在检测到指向集合导航控件的该部分(例如,滚动指示符或第一媒体项的扩展表示)的输入的情况下:根据确定该移动满足对齐标准,其中该对齐标准包括要求当滚动指示符在与第一媒体项的图像序列的代表性图像对应的第一媒体项的扩展表示的该部分的预定义的距离(大于零)内时,第一媒体项的扩展表示和滚动指示符之间的相对移动小于预定义的速度,为满足该对齐标准,对集合导航控件进行更新使得滚动指示符处于与第一媒体项的图像序列的代表性图像的表示对应的第一媒体项的扩展表示的该部分(例如,将滚动指示符对齐到与第一媒体项的图像序列的代表性图像对应的第一媒体项的扩展表示的该部分,或者将与第一媒体项的图像序列的代表性图像对应的第一媒体项的扩展表示对齐到该部分的滚动指示符),并且生成对应触觉输出;以及(例如,如果当朝向第一媒体项的当前代表性图像的缩小比例表示移动时,拖动输入的速度低于相应速度阈值,则该设备生成对应的触觉输出,并且如果当朝向第一媒体项的当前代表性图像的缩小比例表示移动时,拖动输入的速度高于相应速度阈值,则该设备放弃生成对应的触觉输出,反之亦然)根据确定该移动不满足对齐标准,更新集合导航控件使得滚动指示符处于基于该移动而选择的相对于第一媒体项的扩展表示的位置,而不生成相应的触觉输出(例如,移动第一媒体项的扩展表示而不对齐到滚动指示符,或者移动滚动指示符而不对齐到第一媒体项的扩展表示)。以此方式提供触觉反馈增强设备的可操作性并且使得用户设备界面更有效(例如,通过在触觉反馈将帮助用户的某些情况下提供触觉反馈,但在触觉反馈可能提供过多反馈或可能混淆用户的其他情况下则不提供触觉反馈,从而帮助用户在操作设备/与设备进行交互时实现预期结果并减少用户错误)。
在一些实施方案中,当在集合导航控件中显示第一媒体项的扩展表示中的滚动指示符时,设备检测(936)导航至集合中的另一媒体项的输入(例如,以第一放大率检测第一媒体项的表示上的轻扫手势(例如,参见图5DF)或者检测集合导航控件中的另一媒体项上的轻击手势,或者检测集合导航控件上的轻扫手势);并且响应于检测到导航至集合中的另一媒体项的输入,停止在集合导航控件中显示第一媒体项的扩展表示(并且在集合导航控件中显示第一媒体项的先前(原始)表示(诸如来自第一媒体项的单个代表性图像)(例如,参见图5DF至图5DG)。停止在集合导航控件中显示第一媒体项的扩展表示向用户提供了该设备已导航至另一媒体项的视觉反馈。这种视觉反馈增强了设备的可操作性,并且使得用户设备界面更有效(例如,通过向用户提供导航背景)。
在一些实施方案中,当在集合导航控件中显示第一媒体项的扩展表示中的滚动指示符时:根据确定滚动指示符位于远离与第一媒体项的图像序列的代表性图像的表示对应的位置,设备显示(938)第一媒体项的图像序列的代表性图像的指示符(例如,点,诸如图5DD中的点542);并且根据确定滚动指示符位于与第一媒体项的图像序列的代表性图像的表示对应的位置处,放弃显示第一媒体项的图像序列的代表性图像的指示符。在一些实施方案中,集合导航控件在第一媒体项的当前代表性图像旁边显示点或其他指示符,并且当滚动指示符位于第一媒体项的当前代表性图像处时,该点消失。以此方式显示媒体项的代表性图像的指示符向用户提供了改善的视觉反馈并且有助于用户在媒体项的滚动期间返回到代表性图像。这增强了设备的可操作性并且使得用户设备界面更有效(例如,通过提供帮助用户确定哪些输入将产生用户预期的结果并且在操作设备/与设备进行交互时减少用户错误的反馈)。
在一些实施方案中,当以第一显示模式显示第一媒体项的表示时,第一用户界面同时显示(940):第一(预定义)区域,该第一(预定义)区域被配置为以第一放大率顺序地显示第一媒体项中的图像序列中的图像(例如,参见图5DH)。在一些实施方案中,第一区域一次显示图像序列中的图像,其中当显示相应图像时,该相应图像填充第一区域。第一用户界面同时显示:不同于第一区域的第二(预定义)区域,第二(预定义)区域包括小于第一放大率的第二放大率下的媒体项集合中的媒体项的表示(例如,在包括多个媒体项的缩小比例表示的滑块中),并且设备:同时显示第一区域中的来自第一媒体项的图像序列的代表性图像,以及第二区域中的来自第一媒体项的图像序列的代表性图像的表示;在同时显示第一区域中的来自第一媒体项的图像序列的代表性图像和第二区域中的来自第一媒体项的图像序列的代表性图像的表示的情况下,检测输入(例如,检测由来自图5DH中的第一区域中的图像序列的代表性图像上的接触580-26作出的按压手势);并且响应于检测到输入:在第一区域中以第一显示模式回放第一媒体项的图像序列,并且在第二区域中显示第一媒体项的代表性图像的表示、第一媒体项的图像序列中的附加图像的表示,以及显示正被显示在第一区域中的图像序列中的当前回放位置的滚动指示符。在一些实施方案中,在第一区域中的图像序列的回放期间,第二区域的一部分(其仅在回放之前显示第一媒体项中的图像序列的代表性图像的表示)扩展(例如,水平地)以同时显示第一媒体项中的图像序列中的附加图像的表示,以及显示在第一区域中所显示的图像序列中的当前位置的滚动指示符,如图5DH至图5DJ所示。以此方式在集合导航控件中显示第一媒体项的扩展表示向用户提供了关于第一区域中所显示的图像序列中的当前位置的视觉反馈。这种视觉反馈通过向用户提供导航背景增强了设备的可操作性,并且使得用户设备界面更有效。
在一些实施方案中,滚动指示符初始显示(942)在第二区域中的第一媒体项的代表性图像的表示的位置处(例如,参见图5DI)。将滚动指示符初始显示在代表性图像的表示的位置处向用户提供了关于第一区域中所显示的图像序列中的当前位置的视觉反馈。这种视觉反馈通过向用户提供导航背景增强了设备的可操作性,并且使得用户设备界面更有效。
应当理解,对图9A至图9I中的操作进行描述的特定顺序仅仅是示例性的,并非旨在表明所述顺序是可以执行这些操作的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法600、700、800和1000)所描述的其他过程的细节同样以类似的方式适用于上文相对于图9A至图9I所描述的方法900。例如,上文参考方法900所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画任选地具有本文参考本文所述的其他方法(例如,方法600、700、800和1000)所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画的特征中的一个或多个。为了简明起见,此处不再重复这些细节。
图10A至图10C是根据一些实施方案的用于显示媒体项的动态表示与媒体项的静态表示之间的对应关系的方法的流程图,其中媒体项具有多个用户可选显示模式。方法1000在具有显示器、触敏表面和任选的一个或多个传感器的电子设备(例如,图3中的设备300或图1A中的便携式多功能设备100)处执行以检测与触敏表面的接触强度。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。方法1000中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
如下所述,方法1000提供了媒体项的动态表示(例如,媒体项中的图像序列的动态回放)与该媒体项的静态表示(例如,来自媒体项中的图像序列的代表性图像或合并图像)之间的对应关系的直观方式,其中该媒体项具有多个用户可选显示模式。该方法创建了用于以用户所选择的显示模式来导航和查看集合中的媒体项的更有效的人机界面。对于电池驱动电子设备,使得用户能够更有效地以其所选择的显示模式来导航和查看媒体项,从而节省了电力并增加了电池充电之间的时间。
设备在显示器上的第一用户界面中以多个用户可选显示模式中的相应显示模式(例如,生动照片显示模式)显示(1002)与图像序列对应的第一媒体项的第一表示(例如,响应于快门按钮的单个激活(诸如虚拟快门按钮上的轻击、物理快门按钮的点击或在虚拟或物理快门按钮上的长按压输入)而捕获的图像)(例如,参见图5DK)。在一些实施方案中,第一表示是当用户正在查看第一媒体项但不与第一媒体项进行交互(例如,不执行按压输入或轻扫输入或使用编辑用户界面来编辑第一媒体项)时所显示的媒体项的表示。
在显示器上以相应显示模式显示第一媒体项的第一表示时,设备在与第一媒体项的表示对应的位置处检测(1004)触敏表面上的触摸输入(例如,参见图5DL)。
响应于检测到触摸输入,并且当该触摸输入继续在触敏表面上与第一媒体项的表示对应的位置处被检测到时:根据确定触摸输入满足基于该触摸的相应属性的量值的表示更改标准,以及第一媒体项的相应显示模式处于一定显示模式,在该显示模式中第一媒体项的第一表示是第一媒体项的随时间变化(例如,自动地,没有用户输入)的动态表示(例如,循环或来回的),设备将媒体项的第一表示的显示替换(1006)为第一媒体项的不随时间变化的静态表示(例如,图像序列的代表性图像);并且根据确定触摸输入不满足表示更改标准,将第一媒体项的第一表示的显示保持为动态表示(例如,参见图5DM)。
在一些实施方案中,触摸的相应属性是(1008)该触摸的强度,并且表示更改标准包括要求该触摸的特征强度增大到高于相应阈值以满足表示更改标准(例如,参见图5DM)。使用触摸输入的强度从媒体项的动态表示的显示切换至媒体项的静态表示的显示为媒体项的显示提供了附加控制选项而不需要附加显示的控件,这增强了设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,触摸的相应属性是(1010)该触摸的持续时间,并且表示更改标准包括要求该触摸在预先确定的时间量内移动不超过预先确定的量以满足表示更改标准。使用触摸输入的持续时间从媒体项的动态表示的显示切换至媒体项的静态表示的显示为媒体项的显示提供了附加的控制件选项而不需要附加显示的控件,这增强了设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,响应于检测到触摸输入,根据确定触摸输入满足表示更改标准并且第一媒体项的相应显示模式处于第二显示模式,在第二显示模式中第一媒体项的第一表示是第一媒体项的不随时间变化的静态表示(例如,生动照片的代表性图像或长曝光的合并图像),设备将媒体项的第一表示的显示替换(1012)为第一媒体项的随时间变化(例如,自动地,没有用户输入)的动态表示(例如,通过从图像序列的开始处开始或从图像序列的代表性图像开始的媒体项序列播放)(例如,参见图5DP至图5DQ)。
在一些实施方案中,第一媒体项的第一表示是(1014)第一媒体项的动态表示;第一媒体项的动态表示包括从图像序列的开始处到图像序列的结束处播放图像序列,然后在图像序列的开始处重新开始;以及(例如,从代表性图像开始或从图像序列中的开始图像开始),第一媒体项的静态表示是来自图像序列的代表性图像(例如,参见图5DK至图5DM)。显示循环媒体项和相同媒体项的代表性图像之间的对应关系有助于用户更有效地以其所选择的显示模式浏览和查看集合中的媒体项,从而增强设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,第一媒体项的第一表示是(1016)第一媒体项的动态表示;第一媒体项的动态表示包括从图像序列的开始处到图像序列的结束处播放图像序列,然后从图像序列的结束处到图像序列的开始处播放图像序列;以及(例如,从代表性图像开始或从图像序列中的开始图像开始),第一媒体项的静态表示是来自图像序列的代表性图像(例如,参见图5DT至图5DU)。显示来回播放的媒体项和相同媒体项的代表性图像之间的对应关系有助于用户更有效地以其所选择的显示模式浏览和查看集合中的媒体项,从而增强设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,第一媒体项的第一表示是(1018)第一媒体项的静态表示;第一媒体项的静态表示是来自图像序列的代表性图像;并且第一媒体项的动态表示包括播放图像序列(例如,从代表性图像开始或从图像序列中的开始图像开始)(例如,参见图5DV至图5DW)。显示媒体项的静态代表性图像和相同媒体项的动态回放之间的对应关系有助于用户更有效地以其所选择的显示模式浏览和查看集合中的媒体项,从而增强设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,第一媒体项的第一表示是(1020)第一媒体项的静态表示;第一媒体项的静态表示是包括来自图像序列中的两个或更多个图像的同时显示的内容的图像;并且第一媒体项的动态表示包括通过图像序列(例如,从代表性图像开始或从图像序列中的开始图像开始)播放(例如,图5DP至图5DQ)。显示媒体项的静态合并图像和相同媒体项的图像序列的动态回放之间的对应关系有助于用户更有效地以其所选择的显示模式浏览和查看集合中的媒体项,从而增强设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,如上参考方法600和800所述,可经由编辑用户界面来设置媒体项的图像序列的代表性图像。在一些实施方案中,如上参考方法600和800所述,可经由编辑用户界面来设置媒体项的图像序列的开始图像和/或编辑图像。
在一些实施方案中,当触摸输入满足表示更改标准并且媒体项的静态表示的显示被替换为第一媒体项的动态表示的显示时:当在显示器上显示第一媒体项的动态表示时,设备检测(1022)触摸输入的结束(例如,触摸从触敏表面的抬离);并且响应于检测到触摸输入的结束,将媒体项的动态表示的显示替换为第一媒体项的静态表示的显示(例如,只要触摸输入保持在显示器上,就保持从静态表示到动态表示的转变)(例如,参见图5DQ和图5DR)。当检测到触摸输入的结束时,从媒体项的动态表示的显示切换回到媒体项的静态表示的显示使得一个触摸输入能够将沿两个方向显示的内容从动态切换到静态以及从静态切换回到动态,从而增强设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,当触摸输入满足表示更改标准并且媒体项的静态表示的显示被替换为第一媒体项的动态表示的显示时:当在显示器上显示第一媒体项的动态表示时,设备检测(1024)触摸输入的强度的降低;以及响应于检测到触摸输入的强度的降低:根据确定输入的强度的降低低于相应强度阈值,将媒体项的动态表示的显示替换为第一媒体项的静态表示的显示;以及(例如,只要触摸输入保持在显示器上,就保持从静态表示到动态表示的转变),根据确定输入的强度的降低不低于相应强度阈值,保持媒体项的动态表示的显示(例如,参见图5DQ和图5DS)。当检测到触摸输入的强度的降低时,从媒体项的动态表示的显示切换回到媒体项的静态表示的显示使得一个触摸输入能够将沿两个方向显示的内容从动态切换到静态以及从静态切换回到动态,从而增强设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,当触摸输入满足表示更改标准并且媒体项的动态表示的显示被替换为第一媒体项的静态表示的显示时:当显示第一媒体项的静态表示时,设备检测(1026)触摸输入的结束(例如,触摸从触敏表面的抬离);并且响应于检测到触摸输入的结束,将媒体项的静态表示的显示替换为第一媒体项的动态表示的显示(例如,只要触摸输入保持在显示器上,就保持从动态表示到静态表示的转变)(例如,参见图5DM至图5DN)。当检测到触摸输入的结束时,从媒体项的静态表示的显示切换回到媒体项的动态表示的显示使得一个触摸输入能够将沿两个方向显示的内容从静态切换到动态以及从动态切换回到静态,从而增强设备的可操作性并且使得用户设备界面更有效。
在一些实施方案中,当触摸输入满足表示更改标准并且媒体项的动态表示的显示被替换为第一媒体项的静态表示的显示时:当显示第一媒体项的动态表示时,设备检测(1028)触摸输入的强度的降低;以及响应于检测到触摸输入的强度的降低:根据确定输入的强度的降低低于相应强度阈值,将媒体项的静态表示的显示替换为第一媒体项的动态表示的显示;以及(例如,只要触摸输入保持在显示器上,就保持从静态表示到动态表示的转变),根据确定输入的强度的降低不低于相应强度阈值,保持媒体项的静态表示的显示(例如,参见图5DM和图5DO)。当检测到触摸输入的强度的降低时,从媒体项的静态表示的显示切换回到媒体项的动态表示的显示使得一个触摸输入能够将沿两个方向显示的内容从静态切换到动态以及从动态切换回到静态,从而增强设备的可操作性并且使得用户设备界面更有效。
应当理解,对图10A至图10C中的操作进行描述的特定次序仅仅是示例性的,并非旨在表明所述顺序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法600、700、800和900)所描述的其他过程的细节同样以类似的方式适用于上文相对于图10A-图10C所描述的方法1000。例如,上文参考方法1000所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画任选地具有本文参考本文所述的其他方法(例如,方法600、700、800和900)所描述的接触、手势、用户界面对象、范围修剪示能表示、显示模式、媒体项、代表性图像选择示能表示、触觉输出和动画的特征中的一个或多个。为了简明起见,此处不再重复这些细节。
上文参考图6A至图6F、图7A至图7D、图8A至图8F和图9A至图9I所述的操作任选地由图1A至图1B中所描绘的部件来实现。例如,操作任选地由事件分类器170、事件识别器180和事件处理程序190来实现。事件分类器170中的事件监视器171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息传送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序所显示的内容。类似地,本领域的技术人员会清楚地知道基于在图1A至图1B中所描绘的部件可如何实现其他过程。
出于解释的目的,前面的描述是通过参考具体实施方案来描述的。然而,上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择和描述实施方案是为了最佳地阐明本发明的原理及其实际应用,以便由此使得本领域的其他技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施方案。

Claims (35)

1.一种方法(700),包括:
在具有显示器和触敏表面的电子设备处:
在所述显示器上的第一用户界面中以第一显示模式显示(702)来自与图像序列对应的媒体项的一个或多个图像,其中:
所述第一显示模式是针对与所述图像序列对应的所述媒体项的多个用户可选显示模式中的一个;
针对所述媒体项的所述多个用户可选显示模式包括以下显示模式中的一个或多个:循环显示模式,所述循环显示模式被配置为以循环的方式显示所述媒体项中的所述图像序列;来回显示模式,所述来回显示模式被配置为显示所述媒体项中的来回重复播放的所述图像序列;以及合并图像显示模式,所述合并图像显示模式被配置为显示包括来自所述图像序列中的多个图像的内容的单个合并图像;
在以所述第一显示模式显示来自所述媒体项的所述一个或多个图像时,检测(708)第一输入;
响应于检测到所述第一输入,在所述显示器上显示(712)显示模式选择用户界面,其中:
所述显示模式选择用户界面同时显示所述媒体项的多个表示,包括与不同于所述第一显示模式的第二显示模式对应的所述媒体项的第二表示;
当在所述显示器上显示所述显示模式选择用户界面时,检测(736)所述媒体项的所述多个表示中的所述第二表示上的输入;以及,
响应于检测到所述媒体项的所述多个表示中的所述第二表示上的所述输入,针对所述媒体项选择(738)与所述媒体项的所述多个表示中的所述第二表示对应的所述多个用户可选显示模式中的所述第二显示模式。
2.根据权利要求1所述的方法,其中:
在所述第一用户界面中以第一放大率显示来自所述媒体项的所述一个或多个图像;以及
在所述显示模式选择用户界面中以小于所述第一放大率的第二放大率显示所述媒体项的相应表示。
3.根据权利要求1至2中任一项所述的方法,其中所述媒体项的所述多个表示包括与所述第一显示模式对应的所述媒体项的第一表示。
4.根据权利要求1至3中任一项所述的方法,其中响应于检测到所述第一输入而显示的所述媒体项的所述多个表示是基于对所述图像序列中的所述图像和多个不同候选显示模式的预先确定的需求的分析来选择的。
5.根据权利要求1至4中任一项所述的方法,其中所述第一输入是第一方向上的轻扫。
6.根据权利要求1至5中任一项所述的方法,其中:
对应于所述图像序列的所述媒体项是媒体项的集合中的第一媒体项;
所述媒体项的集合按基于预先确定的标准的次序布置;
一个或多个先前媒体项按所述次序在所述第一媒体项之前;
一个或多个后续媒体项按所述次序在所述第一媒体项之后;
所述电子设备响应于检测到第二方向上的轻扫而将所述第一媒体项的显示替换为所述媒体项的集合中的后续媒体项的显示;以及
所述电子设备响应于检测到不同于所述第二方向的第三方向上的轻扫而将所述第一媒体项的显示替换为所述媒体项的集合中的先前媒体项的显示。
7.根据权利要求1至6中任一项所述的方法,包括在所述显示器上的所述第一用户界面中显示所述第一显示模式的指示符。
8.根据权利要求1至7中任一项所述的方法,其中针对所述媒体项的所述多个用户可选显示模式包括生动照片显示模式,所述生动照片显示模式被配置为响应于检测到所述图像序列中的代表性图像上的输入来回放所述媒体项中的所述图像序列。
9.根据权利要求1至8中任一项所述的方法,其中针对所述媒体项的所述多个用户可选显示模式包括电影显示模式,所述电影显示模式被配置为响应于检测到所述图像序列的表示上的轻击输入来回放所述媒体项中的所述图像序列,其中回放是从所述图像序列中的最早图像开始的。
10.根据权利要求1至9中任一项所述的方法,其中在所述显示模式选择用户界面中的所述媒体项的相应表示以对应显示模式显示所述媒体项的预览,其中所述相应表示在所述显示模式选择用户界面中以小于所述对应显示模式下的所述媒体项的第一放大率的第二放大率显示。
11.根据权利要求1至10中任一项所述的方法,其中,在所述显示模式选择用户界面中,所述媒体项的所述多个表示是可滚动的。
12.根据权利要求1至11中任一项所述的方法,其中,响应于检测到所述第一输入,所述显示模式选择用户界面同时显示
在第一放大率下的所述第一显示模式下的来自所述媒体项的所述一个或多个图像的小于全部的一部分,以及
在小于所述第一放大率的第二放大率下的所述图像序列的所述多个表示。
13.根据权利要求1至12中任一项所述的方法,其中所述显示模式选择用户界面显示针对所述媒体项的地理位置信息。
14.根据权利要求1至13中任一项所述的方法,包括:
响应于检测到在所述媒体项的所述多个表示中的所述第二表示上的所述输入:
停止显示所述显示模式选择用户界面;以及
以所述第二显示模式显示来自所述媒体项的一个或多个图像,所述第二显示模式对应于所述媒体项的所述多个表示中的所述第二表示。
15.根据权利要求14所述的方法,包括:
响应于检测到在所述媒体项的所述多个表示中的所述第二表示上的所述输入:
显示所述第二显示模式的指示符,所述第二显示模式对应于所述媒体项的所述多个表示中的所述第二表示。
16.根据权利要求1至13中任一项所述的方法,包括:
在针对所述媒体项选择与所述媒体项的所述多个表示中的所述第二表示对应的所述多个用户可选显示模式中的所述第二显示模式之后,在选择与所述第二表示对应的所述第二显示模式的情况下,检测第二输入;以及,响应于检测到所述第二输入:
停止显示所述显示模式选择用户界面;以及
以所述第二显示模式显示来自所述媒体项的所述一个或多个图像,所述第二显示模式对应于所述媒体项的所述多个表示中的所述第二表示。
17.根据权利要求1至16中任一项所述的方法,包括:
当在所述显示器上的所述第一用户界面中以所述第一显示模式显示来自所述媒体项的所述一个或多个图像时,根据确定针对所述媒体项的第二显示模式满足推荐标准,显示从所述第一显示模式切换到所述第二显示模式的建议。
18.一种存储一个或多个程序的计算机可读存储介质,所述一个或多个程序包括指令,所述指令当由具有显示器和触敏表面的电子设备执行时,使得所述设备执行权利要求1至17所述的方法中的任一种方法。
19.一种电子设备,包括:
显示器;
触敏表面;
用于在所述显示器上的第一用户界面中以第一显示模式显示(702)来自与图像序列对应的媒体项的一个或多个图像的装置,其中:
所述第一显示模式是针对与所述图像序列对应的所述媒体项的多个用户可选显示模式中的一个;
针对所述媒体项的所述多个用户可选显示模式包括以下显示模式中的一个或多个:循环显示模式,所述循环显示模式被配置为以循环的方式显示所述媒体项中的所述图像序列;来回显示模式,所述来回显示模式被配置为显示所述媒体项中的来回重复播放的所述图像序列;以及合并图像显示模式,所述合并图像显示模式被配置为显示包括来自所述图像序列中的多个图像的内容的单个合并图像;
用于当以所述第一显示模式显示来自所述媒体项的所述一个或多个图像时,检测(708)第一输入的装置;
响应于检测到所述第一输入,用于在所述显示器上显示(712)显示模式选择用户界面的装置,其中:
所述显示模式选择用户界面同时显示所述媒体项的多个表示,包括与不同于所述第一显示模式的第二显示模式对应的所述媒体项的第二表示;用于当在所述显示器上显示所述显示模式选择用户界面时,检测(736)所述媒体项的所述多个表示中的所述第二表示上的输入的装置;以及,
响应于检测到所述媒体项的所述多个表示中的所述第二表示上的所述输入,用于针对所述媒体项选择(738)与所述媒体项的所述多个表示中的所述第二表示对应的所述多个用户可选显示模式中的所述第二显示模式的装置。
20.根据权利要求19所述的电子设备,其中:
在所述第一用户界面中以第一放大率显示来自所述媒体项的所述一个或多个图像;以及
在所述显示模式选择用户界面中以小于所述第一放大率的第二放大率显示所述媒体项的相应表示。
21.根据权利要求19至20中任一项所述的电子设备,其中所述媒体项的所述多个表示包括与所述第一显示模式对应的所述媒体项的第一表示。
22.根据权利要求19至21中任一项所述的电子设备,其中响应于检测到所述第一输入而显示的所述媒体项的所述多个表示是基于对所述图像序列中的所述图像和多个不同候选显示模式的预先确定的需求的分析来选择的。
23.根据权利要求19至22中任一项所述的电子设备,其中所述第一输入是第一方向上的轻扫。
24.根据权利要求19至23中任一项所述的电子设备,其中:
对应于所述图像序列的所述媒体项是媒体项的集合中的第一媒体项;
所述媒体项的集合按基于预先确定的标准的次序布置;
一个或多个先前媒体项按所述次序在所述第一媒体项之前;
一个或多个后续媒体项按所述次序在所述第一媒体项之后;
所述电子设备响应于检测到第二方向上的轻扫而将所述第一媒体项的显示替换为所述媒体项的集合中的后续媒体项的显示;以及
所述电子设备响应于检测到不同于所述第二方向的第三方向上的轻扫而将所述第一媒体项的显示替换为所述媒体项的集合中的先前媒体项的显示。
25.根据权利要求19至24中任一项所述的电子设备,包括用于在所述显示器上的所述第一用户界面中显示所述第一显示模式的指示符的装置。
26.根据权利要求19至25中任一项所述的电子设备,其中针对所述媒体项的所述多个用户可选显示模式包括生动照片显示模式,所述生动照片显示模式被配置为响应于检测到所述图像序列中的代表性图像上的输入来回放所述媒体项中的所述图像序列。
27.根据权利要求19至26中任一项所述的电子设备,其中针对所述媒体项的所述多个用户可选显示模式包括电影显示模式,所述电影显示模式被配置为响应于检测到所述图像序列的表示上的轻击输入来回放所述媒体项中的所述图像序列,其中回放是从所述图像序列中的最早图像开始的。
28.根据权利要求19至27中任一项所述的电子设备,其中在所述显示模式选择用户界面中的所述媒体项的相应表示以对应显示模式显示所述媒体项的预览,其中所述相应表示在所述显示模式选择用户界面中以小于所述对应显示模式下的所述媒体项的第一放大率的第二放大率显示。
29.根据权利要求19至28中任一项所述的电子设备,其中,在所述显示模式选择用户界面中,所述媒体项的所述多个表示是可滚动的。
30.根据权利要求19至29中任一项所述的电子设备,其中,响应于检测到所述第一输入,所述显示模式选择用户界面同时显示
在第一放大率下的所述第一显示模式下的来自所述媒体项的所述一个或多个图像的小于全部的一部分,以及
在小于所述第一放大率的第二放大率下的所述图像序列的所述多个表示。
31.根据权利要求19至30中任一项所述的电子设备,其中所述显示模式选择用户界面显示针对所述媒体项的地理位置信息。
32.根据权利要求19至31中任一项所述的电子设备,包括:
响应于检测到在所述媒体项的所述多个表示中的所述第二表示上的所述输入,用于:
停止显示所述显示模式选择用户界面;以及
以所述第二显示模式显示来自所述媒体项的一个或多个图像的装置,所述第二显示模式对应于所述媒体项的所述多个表示中的所述第二表示。
33.根据权利要求32所述的电子设备,包括:
响应于检测到在所述媒体项的所述多个表示中的所述第二表示上的所述输入,用于:
显示所述第二显示模式的指示符的装置,所述第二显示模式对应于所述媒体项的所述多个表示中的所述第二表示。
34.根据权利要求19至31中任一项所述的电子设备,包括:
用于在针对所述媒体项选择与所述媒体项的所述多个表示中的所述第二表示对应的所述多个用户可选显示模式中的所述第二显示模式之后,在选择与所述第二表示对应的所述第二显示模式的情况下,检测第二输入的装置;以及,响应于检测到所述第二输入,用于:
停止显示所述显示模式选择用户界面;以及
以所述第二显示模式显示来自所述媒体项的所述一个或多个图像的装置,所述第二显示模式对应于所述媒体项的所述多个表示中的所述第二表示。
35.根据权利要求19至34中任一项所述的电子设备,包括:
使能够当在所述显示器上的所述第一用户界面中以所述第一显示模式显示来自所述媒体项的所述一个或多个图像时,根据确定针对所述媒体项的第二显示模式满足推荐标准,用于显示从所述第一显示模式切换到所述第二显示模式的建议的装置。
CN201910893846.5A 2017-05-16 2018-05-02 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面 Pending CN110618756A (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201762507214P 2017-05-16 2017-05-16
US62/507,214 2017-05-16
DKPA201770370A DK179932B1 (en) 2017-05-16 2017-05-24 DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR NAVIGATING, DISPLAYING, AND EDITING MEDIA ITEMS WITH MULTIPLE DISPLAY MODES
DKPA201770370 2017-05-24
US15/845,589 2017-12-18
US15/845,589 US10877628B2 (en) 2017-05-16 2017-12-18 Devices, methods, and graphical user interfaces for navigating, displaying, and editing media items with multiple display modes
CN201880015192.XA CN110383229B (zh) 2017-05-16 2018-05-02 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201880015192.XA Division CN110383229B (zh) 2017-05-16 2018-05-02 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面

Publications (1)

Publication Number Publication Date
CN110618756A true CN110618756A (zh) 2019-12-27

Family

ID=64274577

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201880015192.XA Active CN110383229B (zh) 2017-05-16 2018-05-02 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面
CN201910893846.5A Pending CN110618756A (zh) 2017-05-16 2018-05-02 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201880015192.XA Active CN110383229B (zh) 2017-05-16 2018-05-02 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面

Country Status (5)

Country Link
EP (2) EP3549006B1 (zh)
KR (1) KR102140078B1 (zh)
CN (2) CN110383229B (zh)
AU (3) AU2018270746C1 (zh)
WO (1) WO2018213000A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114697749A (zh) * 2020-12-28 2022-07-01 北京小米移动软件有限公司 视频剪辑方法、装置,存储介质及电子设备

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114143720B (zh) * 2021-11-29 2023-09-29 深圳万兴软件有限公司 一种更改ios设备定位信息的方法、装置及其相关组件
CN116777490B (zh) * 2023-08-18 2023-11-03 厦门澜天电子科技有限公司 一种基于智慧导示标识的动态指示智能管理系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5404316A (en) * 1992-08-03 1995-04-04 Spectra Group Ltd., Inc. Desktop digital video processing system
US20130332836A1 (en) * 2012-06-08 2013-12-12 Eunhyung Cho Video editing method and digital device therefor
US20160357400A1 (en) * 2015-06-07 2016-12-08 Apple Inc. Devices and Methods for Capturing and Interacting with Enhanced Digital Images

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9473614B2 (en) * 2011-08-12 2016-10-18 Htc Corporation Systems and methods for incorporating a control connected media frame
US9471200B2 (en) * 2013-03-15 2016-10-18 Apple Inc. Device, method, and graphical user interface for organizing and presenting a collection of media items
KR20140127131A (ko) * 2013-04-24 2014-11-03 삼성전자주식회사 영상 출력 방법 및 그 방법을 처리하는 전자장치
US9232188B2 (en) * 2014-06-04 2016-01-05 Apple Inc. Dynamic transition from video messaging to video communication
US10871868B2 (en) * 2015-06-05 2020-12-22 Apple Inc. Synchronized content scrubber
US9860451B2 (en) * 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
KR20160146281A (ko) * 2015-06-12 2016-12-21 삼성전자주식회사 전자 장치 및 전자 장치에서 이미지 표시 방법
CN109901765B (zh) * 2015-10-06 2022-06-21 佳能株式会社 电子设备及其控制方法
CN105824694A (zh) * 2016-03-09 2016-08-03 百度在线网络技术(北京)有限公司 应用的资源的调整方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5404316A (en) * 1992-08-03 1995-04-04 Spectra Group Ltd., Inc. Desktop digital video processing system
US20130332836A1 (en) * 2012-06-08 2013-12-12 Eunhyung Cho Video editing method and digital device therefor
US20160357400A1 (en) * 2015-06-07 2016-12-08 Apple Inc. Devices and Methods for Capturing and Interacting with Enhanced Digital Images

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114697749A (zh) * 2020-12-28 2022-07-01 北京小米移动软件有限公司 视频剪辑方法、装置,存储介质及电子设备

Also Published As

Publication number Publication date
EP3549006B1 (en) 2021-07-28
KR102140078B1 (ko) 2020-07-31
AU2020201629B2 (en) 2021-05-06
KR20190128739A (ko) 2019-11-18
AU2020201629A1 (en) 2020-03-19
AU2018270746A1 (en) 2019-10-31
AU2021212001A1 (en) 2021-08-26
CN110383229A (zh) 2019-10-25
EP3885884A1 (en) 2021-09-29
WO2018213000A1 (en) 2018-11-22
AU2018270746B2 (en) 2019-12-12
AU2021212001B2 (en) 2023-03-02
CN110383229B (zh) 2023-06-02
AU2018270746C1 (en) 2020-07-02
EP3549006A1 (en) 2019-10-09

Similar Documents

Publication Publication Date Title
AU2023202756B2 (en) Devices, methods, and graphical user interfaces for navigating, displaying, and editing media items with multiple display modes
KR102543095B1 (ko) 증강 현실을 사용하여 측정하기 위한 디바이스들 및 방법들
CN115494956A (zh) 用于用户界面的触觉反馈
CN110554829A (zh) 用于与应用切换用户界面进行交互的设备和方法
AU2021212001B2 (en) Devices, methods, and graphical user interfaces for navigating, displaying, and editing media items with multiple display modes
CN110622111B (zh) 用于用户界面的触觉反馈
CN110673728B (zh) 用于触觉混合的设备、方法和图形用户界面

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination