CN105103154A - 用于组织和呈现媒体项目的集合的设备、方法和图形用户界面 - Google Patents

用于组织和呈现媒体项目的集合的设备、方法和图形用户界面 Download PDF

Info

Publication number
CN105103154A
CN105103154A CN201480015420.5A CN201480015420A CN105103154A CN 105103154 A CN105103154 A CN 105103154A CN 201480015420 A CN201480015420 A CN 201480015420A CN 105103154 A CN105103154 A CN 105103154A
Authority
CN
China
Prior art keywords
media item
event
display
mda
particle size
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480015420.5A
Other languages
English (en)
Other versions
CN105103154B (zh
Inventor
R·R·德林杰
G·N·克里斯蒂
J·泰蒂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Priority to CN201910116065.5A priority Critical patent/CN110046272B/zh
Publication of CN105103154A publication Critical patent/CN105103154A/zh
Application granted granted Critical
Publication of CN105103154B publication Critical patent/CN105103154B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)
  • Stored Programmes (AREA)

Abstract

本发明公开了一种具有显示器、任选地具有触敏表面的电子设备,所述电子设备获得媒体项目的集合。在一些实施例中,所述设备基于顺序相邻的项目的属性之间的比较来确定所述集合中的一个或多个模式,并将所述集合划分成包括多个多项目事件的多个事件。在一些实施例中,所述设备接收对显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求,并响应于所述第一请求,显示所述项目的第一多个表示。所述设备接收对显示根据与多个详细粒度级对应的相应总览粒度级来组织的所述集合的第二部分的第二请求,并响应于所述第二请求显示所述项目的第二多个表示。

Description

用于组织和呈现媒体项目的集合的设备、方法和图形用户界面
技术领域
本文整体涉及具有触敏表面的电子设备,包括但不限于组织媒体项目的集合的具有触敏表面的电子设备。
背景技术
触敏表面作为计算机和其它电子计算设备的输入设备的使用在近年来显著增长。示例性触敏表面包括触摸板和触摸屏显示器。此类表面广泛地用于操纵显示器上的用户界面对象。
示例性操纵包括调整一个或多个图像的位置和/或尺寸或查看与图像相册相关联的图像。示例性用户界面对象包括数字图像、视频、文本、图标、控制元件诸如按钮和其它图形。在一些情况下,用户将需要对以下各项中的用户界面对象执行此类操纵:文件管理程序(例如,来自AppleInc.(Cupertino,California)的Finder);图像管理应用程序(例如,来自AppleInc.(Cupertino,California)的Aperture或iPhoto);数字内容(例如,视频和音乐)管理应用程序(例如,来自AppleInc.(Cupertino,California)的iTunes);绘图应用程序;呈现应用程序(例如,来自AppleInc.(Cupertino,California)的Keynote);文字处理应用程序(例如,来自AppleInc.(Cupertino,California)的Pages);网站创建应用程序(例如,来自AppleInc.(Cupertino,California)的iWeb);盘编辑应用程序(例如,来自AppleInc.(Cupertino,California)的iDVD);或电子表格应用程序(例如,来自AppleInc.(Cupertino,California)的Numbers)。
但是,用于执行这些操纵的方法是麻烦且低效的。例如,利用一系列基于鼠标的输入来选择一个或多个用户界面对象并对选择的用户界面对象执行一种或多种动作会单调乏味,并给用户造成显著的认识负担。此外,这些方法花费比所需时间长的时间,从而浪费能量。这后一考虑在电池驱动的设备中是特别重要的。
发明内容
因此,需要有电子设备具有更快、更高效的方法和界面来组织并呈现媒体项目的集合。此类方法和界面任选地补充或替换用于组织和呈现媒体项目的集合的常规方法。此类方法和界面减小了对用户所造成的认知负担并产生了更有效的人机界面。对于电池驱动的设备,此类方法和界面节省了功率并增加了两次电池充电之间的间隔。
通过所公开的设备减少或消除了与用于具有触敏表面的电子设备的用户界面相关联的上述缺陷和其它问题。在一些实施例中,该设备是台式计算机。在一些实施例中,设备是便携式的(例如,笔记本电脑、平板电脑或手持设备)。在一些实施例中,设备具有触控板。在一些实施例中,该设备具有触敏显示器(又称为“触摸屏”或“触摸屏显示器”)。在一些实施例中,设备具有图形用户界面(GUI)、一个或多个处理器、存储器、和存储在存储器中的用于执行多个功能的一个或多个模块、程序或指令集。在一些实施例中,用户主要通过触敏表面上的手指接触和手势来与GUI进行交互。在一些实施例中,这些功能任选地包括图像编辑、画图、呈现、文字处理、网页创建、盘编辑、电子表格制作、玩游戏、接打电话、视频会议、收发电子邮件、即时消息通信、健身支持、数字摄影、数字视频记录、网络浏览、数字音乐播放、和/或数字视频播放。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其它计算机程序产品中。
根据一些实施例,在具有显示器、存储器和一个或多个处理器的电子设备处执行一种方法。该方法包括:获得媒体项目的集合,其中媒体项目是根据与该媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序排序的;并至少部分地基于媒体项目的集合中顺序相邻的媒体项目的属性之间的比较来确定媒体项目的集合中的一个或多个模式。该方法还包括将媒体项目的集合划分成包括多个多项目事件的多个事件,其中:每个多项目事件包括具有对应的事件时间范围内的时间指示符的多个媒体项目;并且根据媒体项目的集合中确定的一个或多个模式来选择针对多项目事件的事件时间范围。
根据一些实施例,电子设备包括显示单元,该显示单元被配置为显示图形用户界面;和耦接至显示单元的处理单元。该处理单元被配置为获得媒体项目的集合,其中根据与媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序对所述媒体项目排序。处理单元还被配置为:至少部分地基于媒体项目的集合中顺序相邻的媒体项目的属性之间的比较来确定媒体项目的集合中的一个或多个模式;并将媒体项目的集合划分成包括多个多项目事件的多个事件,其中:每个多项目事件包括具有在对应的事件时间范围内的时间指示符的多个媒体项目;并且根据媒体项目的集合中确定的一个或多个模式来选择针对多项目事件的事件时间范围。
根据一些实施例,在具有显示器、触敏表面、存储器和一个或多个处理器的电子设备处执行一种方法。该方法还包括获得媒体项目的集合,其中该媒体项目被组织成粒度级的层次结构,所述层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级。该方法还包括:接收对显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求;并响应于第一请求,显示媒体项目的第一多个表示,其中:第一多个表示以详细粒度尺寸来显示;并且第一多个表示彼此间隔详细粒度距离。该方法还包括:接收对显示根据与多个详细粒度级对应的相应总览粒度级来组织的所述集合的第二部分的第二请求;并响应于第二请求,显示媒体项目的第二多个表示,其中:第二多个表示以小于详细粒度尺寸的总览粒度尺寸来显示;并且第二多个表示彼此间隔小于详细粒度距离的总览粒度距离。
根据一些实施例,一种电子设备包括被配置为显示图形用户界面的显示单元;被配置为接收接触的触敏表面单元;和耦接至显示单元和触敏表面单元的处理单元。该处理单元还被配置为获得媒体项目的集合,其中所述媒体项目被组织成粒度级的层次结构,所述层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级。该处理单元还被配置为:接收对在显示单元上显示根据第一详细粒度级来组织的集合的第一部分的第一请求;并响应于第一请求,使能显示媒体项目的第一多个表示,其中:第一多个表示以详细粒度尺寸来显示;并且第一多个表示彼此间隔详细粒度距离。该处理单元还被配置为:接收对在显示单元上显示根据与多个详细粒度级的相应总览粒度级来组织的集合的第二部分的第二请求;并响应于第二请求,使能显示媒体项目的第二多个表示,其中:第二多个表示以小于详细粒度尺寸的总览粒度尺寸来显示;并且第二多个表示彼此间隔小于详细粒度距离的总览粒度距离。
根据一些实施例,一种电子设备包括显示器,任选地具有触敏表面、一个或多个处理器、存储器和一个或多个程序;所述一个或多个程序被存储在存储器中并被配置为由一个或多个处理器执行,并且所述一个或多个程序包括用于执行上述方法中的任一方法的操作的指令。根据一些实施例,一种具有显示器、任选地具有触敏表面、存储器、和用于执行存储在存储器中的一个或多个程序的一个或多个处理器的电子设备上的图形用户界面包括在上述方法的任一种方法中显示的元素中的一个或多个,这些元素响应于输入而被更新,如上述方法中的任一种方法中所述。根据一些实施例,计算机可读存储介质已将指令存储在其中,该指令当由具有显示器和任选的触敏表面的电子设备执行时,使得该设备执行上述任何方法的操作。根据一些实施例,电子设备包括:显示器、任选的触敏表面;和用于执行上述方法中的任一种方法的操作的装置。根据一些实施例,一种在具有显示器和任选的触敏表面的电子设备中使用的信息处理设备,包括用于执行上述方法中的任一种方法的操作的装置。
因此,具有显示器和触敏表面的电子设备具有更快、更有效的方法和界面以组织和呈现媒体项目的集合,从而提高此类设备的有效性、效率和用户满意度。此类方法和界面可补充或替换用于组织和呈现媒体项目的集合的常规方法。
附图说明
为了更好地理解本发明的各种所描述的实施例,应该结合以下附图参考下面的实施例的说明,在附图中,类似的附图标号在所有附图中指示对应的部分。
图1A是示出根据一些实施例的具有触敏显示器的便携式多功能设备的框图。
图1B是示出根据一些实施例的用于事件处理的示例性部件的框图。
图2示出了根据一些实施例的具有触摸屏的便携式多功能设备。
图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施例的在便携式多功能设备上用于应用程序菜单的示例性用户界面。
图4B示出了根据一些实施例的用于具有与显示器分开的触敏表面的多功能设备的示例性用户界面。
图5A-5S示出了根据一些实施例的用于组织和呈现媒体项目的集合的示例性用户界面。
图6A-6E为流程图,示出了根据一些实施例将媒体项目的集合划分成多个多项目事件的方法。
图7A-7D为流程图,示出了根据一些实施例将媒体项目的集合组织成粒度级的层次结构的方法。
图8为根据一些实施例的电子设备的功能框图。
图9为根据一些实施例的电子设备的功能框图。
具体实施方式
许多电子设备具有组织多个图像的图形用户界面。例如,根据相应图像的捕获日期来组织多个图像。下文所述的设备通过如下方式改善了这些方法:获得媒体项目的集合,根据与媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序对媒体项目排序。该设备至少部分地基于媒体项目的集合中顺序相邻的媒体项目的属性(例如,元数据,包括时间、日期、位置、海拔、速度、网络连接、天气、生物测定、面部识别等)之间的比较来确定媒体项目的集合中的一个或多个模式,并将媒体项目的集合划分成包括多个多项目事件的多个事件。
在一些实施例中,该设备获得被组织成粒度级的层次结构的媒体项目的集合,所述层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级。该设备接收对显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求,并响应于第一请求显示媒体项目的第一多个表示。该设备还接收对显示根据与多个详细粒度级对应的相应总览粒度级来组织的所述集合的第二部分的第二请求,并响应于第二请求显示媒体项目的第二多个表示。
下面,图1A-1B、图2和图3提供了对示例性设备的描述。图4A-4B和图5A-5S示出了用于组织和呈现媒体项目的集合的示例性用户界面。图6A-6E为流程图,示出了将媒体项目的集合划分成多个多项目事件的方法。图7A-7D为流程图,示出了将媒体项目的集合组织成粒度级的层次结构的方法。图5A-5S中的用户界面用于示出图6A-6E和7A-7D中的过程。
示例性设备
现在将详细地参考实施例,这些实施例的实例在附图中被示出。在下面的详细描述中示出了许多具体细节,以便提供对各种所描述的实施例的充分理解。但是,对本领域的普通技术人员将显而易见的是,各种所描述的实施例可以在没有这些具体细节的情况下被实践。在其它情况下,没有详细地描述众所周知的方法、过程、部件、电路、和网络,从而不会不必要地使实施例的方面晦涩难懂。
还将理解的是,虽然术语“第一”、“第二”等在本文中在一些实施例中用来描述各种元素,但是这些元素不应受到这些术语限制。这些术语只是用来将一元件素与另一元素区分开。例如,第一接触可以被命名为第二接触,并且类似地,第二接触可以被命名为第一接触,而不脱离各种所描述的实施例的范围。第一接触和第二接触均为接触,但它们不是同一个接触。
在本文中对各种所描述的实施例的描述中所使用的术语只是为了描述特定实施例的目的,而并非旨在进行限制。如在对各种所描述的实施例中的描述和所附权利要求书中所使用的那样,单数形式“一个”、“一种”和“该”旨在也包括复数形式,除非上下文明确地另外指出。还将理解的是,本文中所使用的术语“和/或”是指并且涵盖相关联地列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”和/或“包含”当在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元素和/或部件,但是并不排除存在或添加一个或多个其它特征、整数、步骤、操作、元素、部件和/或其分组。
根据上下文,如本文所用,术语“如果”任选地被解释为意为“当……时”或“在……时”或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为意思是“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
描述了电子设备、用于此类设备的用户界面和用于使用此类设备的相关联过程的实施例。在一些实施例中,该设备是还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携式多功能设备的示例性实施例包括但不限于来自AppleInc(Cupertino,California)的、iPod设备。任选地使用其它便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触控板)的膝上型计算机或平板电脑。还应当理解的是,在一些实施例中,该设备不是便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触控板)的台式计算机。
在下面的讨论中,描述了一种包括显示器和触敏表面的电子设备。然而应当理解,电子设备任选地包括一个或多个其它物理用户接口设备,诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持多种应用程序,诸如以下中的一种或多种:画图应用程序、呈现应用程序、文字处理应用程序、网页创建应用程序、盘编辑应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、锻炼支持应用程序、相片管理应用程序、数字相机应用程序、数字视频摄像机应用程序、网络浏览应用程序、数字音乐播放器应用程序、和/或数字视频播放器应用程序。
在设备上执行的各种应用程序任选地使用至少一个共用的物理用户接口设备,诸如触敏表面。触敏表面的一种或多种功能以及显示在设备上的对应信息任选地从一种应用程序调整和/或变化至下一种应用程序和/或在相应的应用程序内被调整和/或变化。这样,设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在关注具有触敏显示器的便携式设备的实施例。图1A是示出根据一些实施例的具有触敏显示器112的便携式多功能设备100的框图。触敏显示器112有时为了方便被叫做“触摸屏”,并且有时被称为或被叫做触敏显示器系统。设备100包括存储器102(任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其它输入或控制设备116、和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100(例如,触敏表面,诸如设备100的触敏显示器系统112)上的接触的强度的一个或多个强度传感器165。设备100任选地包括用于在设备100上生成触觉输出(例如,在触敏表面诸如设备100的触敏显示器系统112或设备300的触摸板355上生成触觉输出)的一个或多个触觉输出发生器167。这些部件任选地通过一根或多根通信总线或信号线103通信。
如在本说明书和权利要求书中所使用,术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如,手指接触)的力或压力(每单位面积的力),或是指触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围,该值范围包括至少四个不同的值并且更典型地包括上百个不同值(例如,至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的各个点处的力。在一些实施例中,来自多个力传感器的力测量被合并(例如,加权平均数)以确定接触的估计的力。类似地,触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地,在触敏表面上检测到的接触面积的大小和/或其变化、邻近接触的触敏表面的电容和/或其变化、和/或邻近接触的触敏表面的电阻和/或其变化任选地用作触敏表面上的接触的力或压力的替代物。在一些具体实施中,接触力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如,强度阈值是以对应于替代物测量的单位来描述)。在一些具体实施中,接触力或压力的替代物测量被转换成估计的力或压力,并且估计的力或压力用于确定是否已经超过强度阈值(例如,强度阈值是以压力的单位测量的压力阈值)。
如本说明书和权利要求书中所使用,术语“触觉输出”是指将由用户通过用户的触摸感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户的手部的其它部分)接触的情况下,通过物理位移生成的触觉输出将由用户解读为触感,该触感对应于所感知到的设备或设备部件的物理特性上的变化。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解读为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如,触敏表面的移动任选地由用户解读为或感测为触敏表面的“粗糙度”,即使在触敏表面的光滑度无变化时。虽然此类由用户对触摸的解读将受到用户的个体化感官知觉限制,但是有许多触摸的感官知觉是大多数用户共有的。因此,当触觉输出被描述为对应于用户的特定感官知觉(例如,“按下点击”、“松开点击”、“粗糙度”)时,除非另外陈述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移将会生成典型(或普通)用户的所描述的感官知觉。
应当理解,设备100只是一种便携式多功能设备的一个示例,并且设备100任选地具有比所示出的更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件以硬件、软件、或硬件与软件两者的组合来实现,包括一个或多个信号处理和/或专用集成电路。
存储器102任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备、或其它非易失性固态存储器设备。设备100的其它部件诸如CPU120和外围设备接口118对存储器102的访问任选地由存储器控制器122来控制。
外围设备接口118可被用来将设备的输入和输出外围设备耦接至CPU120和存储器102。该一个或多个处理器120运行或执行存储在存储器102中的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。
在一些实施例中,外围设备接口118、CPU120、和存储器控制器122任选地被实现在单个芯片诸如芯片104上。在一些其它实施例中,它们任选地被实现在单独的芯片上。
RF(射频)电路108接收和发送也被叫做电磁信号的RF信号。射频电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络及其它通信设备通信。RF电路108任选地包括用于执行这些功能的众所周知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信与网络以及其它设备通信,网络诸如是互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。无线通信任选地使用多种通信标准、协议和技术中的任何一种,包括但不限于全球移动通信系统(GSM)、增强数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE802.11b、IEEE802.11g和/或IEEE802.11n)、互联网协议语音技术(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理现场协议(XMPP)、用于即时消息和现场利用扩展的会话发起协议(SIMPLE)、即时消息和到场服务(IMPS))、和/或短消息服务(SMS)、或者其它任何适当的通信协议,包括在本文档提交日期还未开发出的通信协议。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人耳可听见的声波。音频电路110还接收由麦克风113从声波转换来的电信号。音频电路110将电信号转换为音频数据,并将音频数据传输到外围设备接口118以进行处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施例中,音频电路110还包括耳麦插孔(例如,图2中的212)。耳麦插孔提供音频电路110与可移除的音频输入/输出外围设备之间的接口,该外围设备诸如仅输出的耳机或者具有输出(例如,单耳或双耳耳机)和输入(例如,麦克风)二者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备,诸如触摸屏112和其它输入控制设备116,耦接至外围设备接口118。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161、和用于其它输入或控制设备的一个或多个输入控制器160。该一个或多个输入控制器160从其它输入控制设备116接收电信号/发送电信号到其它输入控制设备116。其它输入控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击式转盘等等。在一些替代实施例中,一个或多个输入控制器160任选地耦接至以下中的任一个(或无):键盘、红外线端口、USB端口和指针设备诸如鼠标。一个或多个按钮(例如,图2中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的向上/向下按钮。一个或多个按钮任选地包括下压按钮(例如,图2中的206)。
触敏显示器112提供设备与用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或向触摸屏112发送电信号。触摸屏112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频和它们的任何组合(统称为“图形”)。在一些实施例中,一些视觉输出或全部的视觉输出对应于用户界面对象。
触摸屏112具有基于触觉和/或触觉接触的从用户接受输入的触敏表面、传感器或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断),并且将所检测到的接触转换为与显示在触摸屏112上的用户界面对象(例如,一个或多个软按键、图标、网页或图像)的交互。在示例性实施例中,触摸屏112与用户之间的接触点对应于用户的手指。
触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术,但是在其它实施例中使用其它显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其它接近传感器阵列或用于确定与触摸屏112的一个或多个接触点的其它元件来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在一示例性实施例中,使用投射式互电容感测技术,诸如从AppleInc.(Cupertino,California)的、iPod发现的技术。
触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施例中,触摸屏具有约160dpi的视频分辨率。用户任选地使用任何合适的物体或附加物诸如触笔、手指等等,与触摸屏112接触。在一些实施例中,用户界面被设计用来主要与基于手指的接触和手势一起工作,由于手指在触摸屏上的接触面积较大,因此这可能不如基于触笔的输入那样精确。在一些实施例中,设备将基于手指的粗略输入翻译为精确的指针/光标位置或命令以执行用户所期望的动作。
在一些实施例中,除了触摸屏之外,设备100任选地包括用于激活或去激活特定功能的触控板(未示出)。在一些实施例中,触摸板是设备的触敏区域,该触敏区域与触摸屏不同,其不显示视觉输出。触控板任选地是与触摸屏112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电力状态指示器(例如,发光二极管(LED))和任何其它与便携式设备中电力的生成、管理和分配相关联的部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出了耦接至I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜投射的光,并且将光转换为表示图像的数据。结合成像模块143(也叫做相机模块),光学传感器164任选地捕获静态图像或视频。在一些实施例中,光学传感器位于设备100的后部上,与设备前部上的触摸屏显示器112相背对,使得触摸屏显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施例中,另一光学传感器位于设备的前部上,使得用户在触摸屏显示器上观看其它视频会议参与者的同时,任选地获得该用户的图像以用于视频会议。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出耦接至I/O子系统106中的强度传感器控制器159的接触强度传感器。接触强度传感器165任选地包括一个或多个压阻应变计、电容式力传感器、电力传感器、压电力传感器、光学力传感器、电容式触敏表面或其它强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施例中,至少一个接触强度传感器与触敏表面(例如,触敏显示器系统112)并置排列或邻近。在一些实施例中,至少一个接触强度传感器位于设备100的后部上,与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个接近传感器166。图1A示出了耦接至外围设备接口118的接近传感器166。另选地,接近传感器166耦接至I/O子系统106中的输入控制器160。在一些实施例中,当多功能设备被置于用户的耳朵附近时(例如,当用户正在进行电话呼叫时),接近传感器关闭并且禁用触摸屏112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出耦接至I/O子系统106中的触觉反馈控制器161的触觉输出发生器。触觉输出发生器167任选地包括:一个或多个电声设备,诸如扬声器或其它音频部件;和/或将能量转换成线性运动的机电设备,诸如电机、螺线管、电活性聚合物、压电致动器、静电致动器或其它触觉输出生成部件(例如,将电信号转换成设备上的触觉输出的部件)。接触强度传感器165从触觉反馈模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100的用户感测到的触觉输出。在一些实施例中,至少一个触觉输出发生器与触敏表面(例如,触敏显示器系统112)并置排列或邻近,并且任选地通过竖直地(例如,向设备100的表面内/外)或侧向地(例如,在与设备100的表面相同的平面中前后地)移动触敏表面来生成触觉输出。在一些实施例中,至少一个触觉输出发生器传感器位于设备100的后部上,与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个加速度计168。图1A示出了耦接至外围设备接口118的加速度计168。另选地,加速度计168任选地耦接至I/O子系统106中的输入控制器160。在一些实施例中,信息基于对从该一个或多个加速度计所接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图被显示。设备100除了加速度计168之外任选地还包括磁力仪(未示出)和GPS(或GLONASS或其它全球导航系统)接收器(未示出),以用于获得关于设备100的位置和取向(例如,纵向或横向)的信息。
在一些实施例中,存储在存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135以及应用程序(或指令集)136。此外,在一些实施例中,存储器102存储设备/全局内部状态157,如图1A和图3中所示。设备/全局内部状态157包括以下中的一种或多种:活动应用程序状态,指示哪些应用程序(如果有的话)当前在活动;显示器状态,指示什么应用、视图或其他信息占据触摸屏显示器112的各个区域;传感器状态,包括从设备的各个传感器和输入控制设备116获得的信息;以及关于设备的位置和/或姿态的位置信息。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OSX、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电力管理等)的各种软件部件和/或驱动器,并且有利于各种硬件和软件部件之间的通信。
通信模块128有利于通过一个或多个外部端口124来与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件部件。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接至其它设备或者间接地通过网络(例如,因特网、无线LAN等)耦接。在一些实施例中,外部端口是与iPod(AppleInc.的商标)设备上所使用的30针连接器相同的或类似的和/或与其兼容的多针(例如,30针)连接器。
接触/运行模块130任选地检测与触摸屏112(结合显示控制器156)和其它触敏设备(例如,触控板或物理点击式转盘)的接触。接触/运动模块130包括各种软件部件以用于执行与接触的检测相关的各种操作,诸如确定是否已经发生了接触(例如,检测手指按下事件)、确定接触的强度(例如,接触的力或压力,或接触的力或压力的替代物)、确定是否存在接触的移动并且在整个触敏表面上跟踪该移动(例如,检测一个或多个手指拖动事件)、以及确定接触是否已经停止(例如,检测手指抬起事件或者接触中断)。接触/移动模块130从触敏表面接收接触数据。确定由一系列接触数据来表示的接触点的移动,任选地包括确定接触点的速率(量值)、速度(量值和方向)、和/或加速度(量值和/或方向的改变)。这些操作任选地被应用于单个接触(例如,一个手指接触)或被应用于多个同时接触(例如,“多触摸”/多个手指接触)。在一些实施例中,接触/运动模块130和显示控制器156检测触控板上的接触。
在一些实施例中,接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已经由用户执行(例如,确定用户是否已经“点击”图标)。在一些实施例中,根据软件参数来确定强度阈值的至少一个子集(例如,强度阈值不是由特定物理致动器的激活阈值来确定,并且可在不改变设备100的物理硬件的情况下被调整)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏的鼠标“点击”阈值可被设定成预定义的阈值的大范围中的任一个。此外,在一些具体实施中,向设备的用户提供用于调整强度阈值组中的一个或多个阈值(例如,通过调整各个强度阈值和/或通过利用对“强度”参数的系统级点击一次调整多个强度阈值)的软件设置。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同接触图案(例如,所检测到的接触的不同运动、计时和/或强度)。因此,任选地通过检测具体接触图案来检测手势。例如,检测单指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。又如,在触敏表面上检测到手指轻扫手势包括检测到手指按下事件、然后检测到一个或多个手指拖动事件、并且随后检测到手指抬起(抬离)事件。
图形模块132包括用于在触摸屏112或其它显示器上渲染和显示图形的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其它视觉特性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等等。
在一些实施例中,图形模块132存储要使用的表示图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收待显示的指定图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其它图形属性数据,然后生成屏幕图像数据来输出给显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件部件,这些指令由触觉输出发生器167使用,以响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如,联系人137、电子邮件140、IM141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置,并且提供该信息以在各种应用程序中使用(例如,提供给电话138以用于基于位置的拨号、提供给相机143作为照片/视频元数据、以及提供给提供基于位置的服务的应用程序,诸如天气桌面小程序、本地黄页桌面小程序、和地图/导航桌面小程序)。
应用程序136任选地包括以下模块(或指令集)或者其子集或超集:
·联系人模块137(有时叫做通讯录或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健身支持模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·浏览器模块147;
·日历模块148;
·桌面小程序模块149,任选地包括以下中的一种或多种:天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5和由用户获取的其他桌面小程序以及用户创建的桌面小程序149-6;
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150;
·搜索模块151;
·视频和音乐播放器模块152,任选地由视频播放器模块和音乐播放器模块构成;
·便笺模块153;
·地图模块154;和/或
·在线视频模块155。
任选地被存储在存储器102中的其它应用程序136的实例包括其它文字处理应用程序、其它图像编辑应用程序、画图应用程序、呈现应用程序、JAVA启用的应用程序、加密、数字权益管理、声音识别、和声音复制。
结合触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,联系人模块137任选地用于管理地址簿或联系人列表(例如,存储于存储器102或存储器370中联系人模块137的应用程序内部状态192中),包括:向地址簿中添加一个或多个姓名;从地址簿中删除一个或多个姓名;将一个或多个电话号码、电子邮件地址、物理地址或其他信息与姓名相关联;将图像与姓名相关联;对姓名分类并排序;提供电话号码或电子邮件地址以发起和/或促成电话138进行通信、视频会议139、电子邮件140或IM141;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,电话模块138任选地被用于输入对应于电话号码的字符序列、访问通讯录137中的一个或多个电话号码、修改已经输入的电话号码、拨打相应的电话号码、进行会话以及当会话完成时断开或挂断。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包括根据用户指令发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,即时消息模块141包括用于输入对应于即时消息的字符序列、修改先前输入的字符、传输相应即时消息(例如,使用短消息服务(SMS)或多媒体消息服务(MMS)协议以用于基于电话的即时消息或者使用XMPP、SIMPLE、或IMPS以用于基于互联网的即时消息)、接收即时消息以及查看所接收的即时消息的可执行指令。在一些实施例中,所传输和/或接收的即时消息任选地包括图形、相片、音频文件、视频文件、和/或MMS和/或增强消息服务(EMS)中所支持的其它附接件。如本文所用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS发送的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE、或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块145,健身支持模块142包括可执行指令,以创建健身(例如,带有时间、距离和/或卡路里燃烧目标);与健身传感器(运动设备)通信;接收健身传感器数据;校准用于监测健身的传感器;为健身选择并播放音乐;以及显示、存储和发送健身数据。
结合触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、和图像管理模块144,相机模块143包括用于捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特性、或从存储器102删除静态图像或视频的可执行指令。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、和相机模块143,图像管理模块144包括用于排列、修改(例如,编辑)、或以其它方式操控、加标签、删除、呈现(例如,在数字幻灯片或相册中)、以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、和文本输入模块134,浏览器模块147包括用于根据用户指令浏览因特网(包括搜索、链接到、接收、和显示网页或其部分、以及链接到网页的附件和其它文件)的可执行指令。
结合射频电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括可执行指令以根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、和浏览器模块147,桌面小程序模块149是任选地由用户下载和使用的微型应用程序(例如,天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、和字典桌面小程序149-5)或由用户创建的微型应用程序(例如,用户创建的桌面小程序149-6)。在一些实施例中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施例中,桌面小程序包括可扩展标记语言(XML)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序创建器模块150任选地被用户用来创建桌面小程序(例如,将网页的用户指定部分转到桌面小程序中)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包括根据用户指令来搜索匹配一个或多个搜索条件(例如,一个或多个用户指定的搜索词)的存储器102中的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其它声音文件的可执行指令,以及用于显示、呈现或以其它方式回放视频(例如,在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施例中,设备100任选地包括MP3播放器,诸如iPod(AppleInc.的商标)的功能性。
结合触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,记事本模块153包括根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、和浏览器模块147,地图模块154任选地用于根据用户指令接收、显示、修改、和存储地图以及与地图相关联的数据(例如,驾车路线;特定位置处或附近感兴趣的商店或其他兴趣点的数据;和其他基于位置的数据)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括指令,该指令允许用户访问、浏览、接收(例如,通过流媒体和/或下载)、回放(例如在经由外部端口124所连接的触摸屏上或外部显示器上)、发送具有至特定的在线视频的链接的电子邮件,以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施例中,即时消息模块141而不是电子邮件客户端模块140用于发送通往特定在线视频的链接。
上文指出的模块中的每个模块和应用程序对应于用于执行上述一种或多种功能以及在本申请中所描述的方法(例如,本文中所描述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(即,指令集)不必被实现为分开的软件程序、过程或模块,因此这些模块的各种子组任选地在各种实施例中被组合或以其它方式重新布置。在一些实施例中,存储器102任选地存储上述模块和数据结构的子组。此外,存储器102任选地存储上面未描述的另外的模块和数据结构。
在一些实施例中,设备100是该设备上的预定义的一组功能的操作被唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触控板作为用于设备100的操作的主要输入控制设备,任选地减少设备100上的物理输入控制设备(诸如下压按钮、拨号盘等等)的数量。
唯一地通过触摸屏和/或触控板执行的该预定义的一组功能任选地包括在用户界面之间的导航。在一些实施例中,触控板在被用户触摸时将设备100从显示在设备100上的任何用户界面导航到主菜单、主菜单或根菜单。在此类实施例中,使用触控板来实现“菜单按钮”。在一些其它实施例中,菜单按钮是物理下压按钮或者其它物理输入控制设备,而不是触控板。
图1B是示出根据一些实施例的用于事件处理的示例性部件的框图。在一些实施例中,存储器102(图1A中)或存储器370(图3)包括事件分类器170(例如,在操作系统126中)和相应的应用程序136-1(例如,前述应用程序137-13、155、380-390中的任何应用程序)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施例中,应用程序136-1包括应用程序内部状态192,该应用程序内部状态192指示当应用程序是活动的或正在执行时显示在触敏显示器112上的当前应用程序视图。在一些实施例中,设备/全局内部状态157被事件分类器170用来确定哪个(哪些)应用程序当前是活动的,并且应用程序内部状态192被事件分类器170用来确定要将事件信息递送到的应用程序视图191。
在一些实施例中,应用程序内部状态192包括附加的信息,例如以下中的一种或多种:当应用程序136-1恢复执行时将被使用的恢复信息、指示正通过应用程序136-1显示的信息或准备好用于通过应用程序136-1显示的信息的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列、以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如,作为多点触摸手势的一部分,触敏显示器112上的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器(诸如接近传感器166)、加速度计168和/或麦克风113(通过音频电路110)所接收的信息。外围设备接口118从I/O子系统106所接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施例中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在其他实施例中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施例中,事件分类器170还包括点击命中确定模块172和/或活动事件识别器确定模块173。
当触敏显示器112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已经在一个或多个视图内的什么地方发生的软件过程。视图由用户在显示器上可以看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图,本文中有时也称为应用程序视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应的应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如,在其中检测到触摸的最低水平视图任选地被叫做命中视图,并且被识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,该初始触摸始于基于触摸的手势。
命中视图确定模块172接收与基于接触的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时,命中视图确定模块172将命中视图识别为该分级结构中应当处理该子事件的最低视图。在大多数情况下,命中视图是在其中发生发起子事件(即形成事件或潜在事件的子事件序列中的第一个子事件)的最低水平视图。一旦命中视图被命中视图确定模块所识别,命中视图通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定在视图分级结构内的哪些视图应接收特定的子事件序列。在一些实施例中,活动事件识别器确定模块173确定仅命中视图应当接收特定的子事件序列。在其他实施例中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图,并且因此确定所有活跃参与的视图应接收特定子事件序列。在其它实施例中,即使触摸子事件完全被局限到与一特定视图相关联的区域,分级结构中更高的视图将仍然保持为主动参与的视图。
事件分配器模块174将事件信息调度到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施例中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施例中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器模块182检索。
在一些实施例中,操作系统126包括事件分类器170。或者,应用程序136-1包括事件分类器170。在其他实施例中,事件分类器170是独立的模块,或者是存储在存储器102中的另一模块(诸如接触/移动模块130)的一部分。
在一些实施例中,应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191,其中每一个都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常,相应的应用程序视图191包括多个事件识别器180。在其它实施例中,事件识别器180中的一个或多个事件识别器是独立模块的一部份,独立模块诸如是用户界面工具包(未示出)或应用程序136-1从中继承方法和其它特性的更高水平对象。在一些实施例中,相应的事件处理程序190包括以下中的一种或多种:数据更新器176、对象更新器177、GUI更新器178和/或从事件分类器170接收的事件数据。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用程序内部状态192。另选地,应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序190。另外,在一些实施例中,数据更新器176、对象更新器177和GUI更新器178中的一个或多个被包括在相应的应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施例中,事件识别器180还至少包括如下的子集:元数据183和时间递送指令188(其任选地包括子事件传递指令)。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件的信息,例如,接触或接触运动。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速率和方向。在一些实施例中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向趋向,反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,以及基于比较结果,确定事件或子事件,或确定或更新该事件或子事件的状态。在一些实施例中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其它。在一些实施例中,事件187中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个实例中,事件1(187-1)的定义是在被显示对象上的双击。例如,该双击包括在被显示对象上预定时长的第一触摸(触摸开始)、预定时长的第一抬起(触摸结束)、在被显示对象上预定时长的第二触摸(触摸开始)以及预定时长的第二抬起(触摸结束)。在另一实例中,事件2(187-2)的定义是在被显示对象上的拖动。例如,该拖动包括在该被显示对象上的预先确定时长的触摸(或接触)、该触摸在触敏显示器112上的移动、以及该触摸的抬起(触摸结束)。在一些实施例中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施例中,事件定义187包括用于相应的用户界面对象的事件的定义。在一些实施例中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在应用程序视图(其中在触摸显示器112上显示三个用户界面对象)中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试,以确定这三个用户界面对象中哪一个与触摸(子事件)相关联。如果每个所显示的对象与相应的事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施例中,相应事件187的定义还包括延迟动作,该延迟动作延迟事件信息的传递,直到已经确定子事件序列是否确实对应于事件识别器的事件类型之后。
在其不理会基于触摸的手势的后续子事件之后,当相应事件识别器180确定子事件串不与事件定义186中的任何事件匹配,则该相应事件识别器180进入事件不可能、事件失败或事件结束状态。在这种情况下,对于命中视图保持活动的其它事件识别器(如果有的话)继续跟踪和处理正在进行的基于触摸的手势的子事件。
在一些实施例中,相应事件识别器180包括具有指示事件传递系统应该如何执行对活跃参与的事件识别器的子事件传递的能配置的属性、标记和/或列表的元数据183。在一些实施例中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的能配置的属性、标志和/或列表。在一些实施例中,元数据183包括指示子事件是否被递送到视图或程序化分级结构中的变化的水平的可配置的属性、标记和/或列表。
在一些实施例中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施例中,相应事件识别器180将与该事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应的命中视图。在一些实施例中,事件识别器180抛出与所识别的事件相关联的标记,并且与该标记相关联的事件处理程序190接到该标记并执行预定义的过程。
在一些实施例中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件串相关联的事件处理程序或者递送到主动参与的视图。与子事件串或与主动参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施例中,数据更新器176创建和更新在应用程序136-1中所使用的数据。例如,数据更新器176对联系人模块137中使用的电话号码进行更新,或者对视频播放器模块145中使用的视频文件进行存储。在一些实施例中,对象更新器177创建和更新在应用程序136-1中所使用的对象。例如,对象更新器176创建一个新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息,并且将显示信息发送到图形模块132用以显示在触敏显示器上。
在一些实施例中,一个或多个事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对数据更新器176、对象更新器177和GUI更新器178的访问权限。在一些实施例中,数据更新器176、对象更新器177和GUI更新器178被包括在相应的应用程序136-1或应用程序视图191的单个模块中。在其他实施例中,它们被包括在两个或更多个软件模块中。
应当理解,上述关于触敏显示器上的用户触摸的事件处理的讨论还适用于利用输入设备操作多功能设备100的其它形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,任选地利用鼠标移动和鼠标按钮按压,任选结合单次或多次键盘按压或保持;触摸板上的接触运动,例如轻击、拖动、滚动等;触笔输入;设备的运动;口头指令;检测到的眼睛运动;生物测定输入;和/或其任意组合,作为对应于子事件的输入,定义要识别的事件。
图2根据一些实施例示出了具有触摸屏112的一种便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在本实施例中,以及在下文中介绍的其它实施例中,用户能够通过例如用一根或多根手指202(在附图中没有按比例绘制)或者用一个或多个触笔203(在附图中没有按比例绘制)在图形上作出手势来选择这些图形中的一个或多个。在一些实施例中,当用户中断与一个或多个图形的接触会发生对一个或多个图形的选择。在一些实施例中,手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已经与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,不经意地与图形接触不会选择图形。例如,当对应于选择的手势是轻击时,在应用程序图标之上扫动的轻扫手势任选地不会选择相应的应用程序。
设备100任选地还包括一个或多个物理按钮,诸如“返回”按钮或菜单按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。另选地,在一些实施例中,菜单按钮被实现为显示在触摸屏112上的GUI中的软键。
在一个实施例中,设备100包括触摸屏112、菜单按钮204、用于对设备开关机和锁定设备进行供电的下压按钮206、用户身份模块(SIM)卡槽210、耳麦插孔212、对接/充电外部端口124和一个或多个音量调节按钮208。下压按钮206任选地用于通过按下按钮并将按钮保持在按下状态预定义时段来对设备加电/断电;通过按下按钮并在预定义时段过去之前释放按钮来锁定设备;和/或解锁设备或发起解锁过程。在另选的实施例中,设备100还通过麦克风113接受用于激活或解除激活某些功能的言语输入。设备100还任选地包括用于检测触摸屏112上的接触的强度的一个或多个接触强度传感器165,和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施例中,设备300是膝上型计算机、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如,家用或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其它通信接口360、存储器370和用于使这些部件互连的一根或多根通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时叫做芯片组)。设备300包括输入/输出(I/O)接口330,其包括显示器340,该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其它指向设备)350和触控板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如,类似于以上参考图1A所述的触觉输出发生器167)、传感器359(例如,光学传感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图1A所述的接触强度传感器165的接触强度传感器)。存储器370包括高速随机存取存储器,诸如DRAM、SRAM、DDRRAM或其它随机存取固态存储器设备,并且任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其它非易失性固态存储设备。存储器370任选地包括远离CPU310定位的一个或多个存储设备。在一些实施例中,存储器370存储与便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块、和数据结构,或它们的子组。此外,存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加的程序、模块、和数据结构。例如,设备300的存储器370任选地存储画图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中上述所识别的元件中的每一个元件任选地存储在一个或多个先前提到的存储器设备中。上述所识别的模块中的每个模块对应于用于执行上述功能的一组指令。上述所识别的模块或程序(即,指令集)不必被实现为单独的软件程序、过程或模块,并且因此这些模块的各种子组任选地在各种实施例中被组合或以其它方式重新布置。在一些实施例中,存储器370任选地存储上述模块和数据结构的子组。此外,存储器370任选地存储上面未描述的另外的模块和数据结构。
现在将注意力转到任选地在便携式多功能设备100上实现的用户界面(“UI”)的实施例。
图4A根据一些实施例示出了便携式多功能设备100上的用于应用程序菜单的一种示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施例中,用户界面400包括以下元素或者其子集或超集:
·无线通信(诸如蜂窝信号和Wi-Fi信号)的信号强度指示器402;
·时间404;
·蓝牙指示器405;
·电池状态指示器406;
·具有常用应用程序图标的托盘408,图标诸如:
○电话模块138的标记“电话”的图标416,该图标416任选地包括未接来电或语音留言的数量的指示器414;
○电子邮件客户端模块140的标记“邮件”的图标418,该图标418任选地包括未读电子邮件的数量的指示器410;
○浏览器模块147的标记“浏览器”的图标420;和
○视频和音乐播放器模块152(也叫做iPod(AppleInc.的商标)模块152)的标记“iPod”的图标422;以及
·其它应用程序的图标,图标诸如:
○IM模块141的标记“文本”的图标424;
○日历模块148的标记“日历”的图标426;
○图像管理模块144的标记“照片”的图标428;
○相机模块143的标记“相机”的图标430;
○标记“在线视频”的在线视频模块155的图标432;
○股市桌面小程序149-2的标记“股市”的图标434;
○地图模块154的标记“地图”的图标436;
○天气桌面小程序149-1的标记“天气”的图标438;
○闹钟桌面小程序149-4的标记“时钟”的图标440;
○标记“健身支持”的健身支持模块142的图标442;
○标记“记事本”的记事本模块153的图标444;和
○设置应用程序或模块的图标446,该图标446提供对设备100及其各种应用程序136的设置的访问;
应当指出的是,图4A中示出的图标标签仅仅是示例性的。例如,视频和音乐播放器模块152的图标422被标记“音乐”或“音乐播放器”。其它标签任选地用于各种应用程序图标。在一些实施例中,相应的应用程序图标的标签包括对应于该相应的应用程序图标的应用程序的名称。在一些实施例中,特定应用程序图标的标签不同于对应于该特定应用程序图标的应用程序的名称。
图4B示出了具有与显示器450(例如,触摸屏显示器112)分开的触敏表面451(例如,图3中的平板或触控板355)的设备(例如,图3中的设备300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如,传感器357中的一个或多个),和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器359。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出随后的实例中的一些,但是在一些实施例中,设备检测与显示器分开的触敏表面上的输入,如图4B中所示。在一些实施例中,触敏表面(例如,图4B中的451)具有主轴(例如,图4B中的452),其对应于显示器(例如,450)上的主轴(例如,图4B中的453)。根据这些实施例,设备检测在对应于显示器上的相应位置的位置(例如,在图4B中,460对应于468并且462对应于470)处与触敏表面451的接触(例如,图4B中的460和462)。这样,在触敏表面(例如,图4B中的451)与多功能设备的显示器(图4B中的450)分开时,由设备在触敏表面上检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操纵显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其它用户界面。
此外,虽然主要是参考手指输入(例如,手指接触、手指轻击手势、手指轻扫手势)来给出下面的示例,但是应当理解的是,在一些实施例中,这些手指输入中的一个或多个由来自另一输入设备的输入(例如,基于鼠标的输入或触笔输入)替代。例如,轻扫手势任选地由鼠标点击(例如,而不是接触)、之后是光标沿着轻扫的路径的移动(例如,而不是接触的移动)替代。又如,轻击手势任选地由光标位于轻击手势的位置之上时的鼠标点击(例如,而不是对接触的检测、之后是终止检测接触)替代。类似地,当同时检测到多个用户输入时,应当理解的是,多个电脑鼠标任选地被同时使用,或一个鼠标和多个手指接触任选地被同时使用。
如本文所用,术语“焦点选择器”是指指示用户正与之交互的用户界面的当前部分的输入元件。在包括光标或其它位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素(例如,按钮、窗口、滑块或其它用户界面元素)上方时在触敏表面(例如,图3中的触控板355或图4B中的触敏表面451)上检测到输入(例如,按压输入)时,该特定用户界面元素根据检测到的输入被调整。在包括实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如,图1A中的触敏显示器系统112或图4A中的触摸屏112)的一些具体实施中,在触摸屏上所检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元件)的位置处检测到输入(例如,通过接触的按压输入)时,根据所检测到的输入来调整该特定用户界面元素。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据用户界面不同区域之间的焦点运动而运动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制的以便传达用户预期的与用户界面的交互(例如,通过向设备指示用户界面的、用户期望与其进行交互的元件)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触控板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示:用户预期激活相应按钮(而不是设备的显示器上示出的其它用户界面元素)。
用户界面和相关联的过程
现在将注意力转到可在具有显示器和触敏表面的电子设备(诸如设备300或便携式多功能设备100)上实现的用户界面(“UI”)及相关联的过程的实施例。
图5A-5S示出了根据一些实施例的用于组织和呈现媒体项目的集合的示例性用户界面。这些附图中的用户界面被用于阐示下面介绍的过程,包括图6A-6E和7A-7D中的过程。
图5A示出了显示从媒体项目的集合获得的多个媒体项目的便携式多功能设备100。图5A示出了事件视图503内的多个可选择的多项目事件502a、502b、502c、502d。在一些实施例中,该设备通过确定媒体项目的集合中的一个或多个模式,并识别媒体项目的集合中的过渡点,自动将媒体项目的集合分到多项目事件中,其中过渡点对应于媒体项目的集合的模式变化。在一些实施例中,过渡点基于顺序相邻的媒体项目之间的元数据(例如,时间、日期、位置、海拔、速度、网络连接、天气、生物测定、面部识别等)变化。图5A进一步示出了月份示能表示512,其使得设备能够响应于示能表示512上的轻击手势而显示月份视图513(下文参考图5H更详细描述)。
在图5A中,多个事件中的每个事件都包括关联的事件标题506(例如,星期日早午餐506a,夏威夷假期506b,新年前夜聚会506c和全国自驾游506d)、事件位置508(例如,SanJose508a和Oahu,Kauai,Maui508b)以及相应事件内的一个或多个媒体项目(例如,510a、510b、510c、510d)的表示。在一些实施例中,该设备被配置为根据与相应事件内的媒体项目相关联的元数据为相应事件自动填充事件标题和事件位置。图5A示出了在详细粒度级下显示事件内的媒体项目的一个或多个表示。在一些实施例中,媒体项目的相应表示包括与照片相关联的缩略图或与视频相关联的照片或静止或gif图像。在一些实施例中,事件位置被截断(例如,事件位置508d),由此显示少于与事件相关联的所有事件位置。例如,从事件位置字段508截取频繁访问的事件位置有利于唯一或较少访问的事件位置。图5A进一步示出了在触摸屏112上检测到扫动或拖动手势,包括从位置514a到位置514b的运动接触514。
图5B示出了响应于图5A中检测到拖动手势,向上滚动事件视图503(例如,滚动的量对应于接触514的运动速度和/或量)。在图5B中,显示事件502e(例如,与MyFirstRodeoinSalinas相关)且不再显示事件502a。图5B进一步示出了在与触摸屏112上的事件502b相关的媒体项目510b的一个或多个表示中检测相应表示上方的利用接触516做出的轻击手势。
图5C示出了响应于检测到包括图5B中的接触的轻击手势,显示题为“HawaiiVacation”的事件502b。在一些实施例中,媒体项目的表示上的轻击手势导致设备显示媒体项目的放大表示,而对应于事件标头位置处的轻击手势(例如,表示510b上方的白色空间)导致显示事件(或一个或多个子事件)的表示。图5C示出了事件502b内的多个子事件518a、518b、518c。在一些实施例中,设备基于与事件中的媒体项目相关联的元数据,自动地将事件内的项目分成子事件。子事件对应于在HawaiiVacation元事件期间在不同位置(例如,Oahu507a,Kauai507b和Maui507c),和不同日期(例如,509a,509b,509c)捕获的媒体项目。图5C进一步示出了在触摸屏112上的相应表示522上方检测到接触520。在图5C中,该设备检测到拖动手势,其包括接触520从位置520a到位置520b的移动。响应于检测到接触520的移动,设备将与子事件518c相关联的媒体项目511c的一个或多个表示内的相应表示522移动到与子事件518b相关联的媒体项目511b的一个或多个表示。图5C示出了在详细粒度级下显示子事件内的媒体项目(例如,511a,511b,511c)的一个或多个表示。
图5D示出了响应于检测到图5C中接触520的拖动手势,与子事件518b相关联的媒体项目511b的一个或多个表示内的相应表示522。图5D进一步示出了在触摸屏112上的子事件518b内的事件标题507b(例如,Kauai)上方接触524的按压和保持手势。在一些实施例中,响应于轻击手势(例如,在少于预定义时间阈值,诸如0.05秒、0.1秒、0.2秒、0.5秒或1.0秒或某个其他合理时间量内检测到接触),该设备显示子事件的扩展表示,响应于检测到按压和保持手势(例如,在超过预定义时间阈值,诸如0.05秒、0.1秒、0.2秒、0.5秒或1.0秒或某个其他合理时间量内检测到接触),该设备显示用户界面以用于编辑子事件的标题。
图5E示出了响应于检测到图5D中接触524的按压和保持手势,显示编辑子事件详情窗口525。在一些实施例中,该设备被配置为根据与事件或子事件内的项目相关联的元数据为相应子事件自动填充子事件标题和子事件日期。在图5E中,编辑子事件详情窗口525包括子事件标题字段526和利用针对子事件518b的当前子事件日期填充的子事件日期字段528。在一些实施例中,使用户能够利用文本或语音输入编辑子事件标题字段526和子事件日期字段528。图5E进一步示出了经由文本输入530编辑子事件标题字段526,以将子事件标题507b从Kauai重新命名为GrandBeachHotelKauai。
图5F示出了响应于图5E中的文本输入530,显示GrandBeachHotelKauai作为子事件518b的事件标题507b。图5F进一步示出了在触摸屏112上检测与接触532和534的朝向彼此的运动对应的捏指手势。
图5G示出了响应于检测到图5F中捏指手势,显示事件视图503。在一些实施例中,使设备能够通过检测捏指或取消捏指手势(例如,对应于图5F中接触532和534运动的捏指手势或对应于图5O中接触582和584的运动的取消捏指手势)或任选地,通过检测到带有三次或多次接触的水平轻扫手势,在视图(例如,事件视图503,月份视图513(图5H),季节视图551(图5I)和年份视图561(图5J))之间切换。在一些实施例中,类似地使设备能够通过检测到与相应视图对应的示能表示(例如,图5F中的事件示能表示504,图5G中的月份示能表示512,图5H中的季节示能表示550,和图5I中的年份示能表示560)上方的轻击手势来在视图之间切换。图5G还示出了在触摸屏112上检测到与接触536和538的朝向彼此的运动对应的捏指手势。
图5H示出了响应于图5G中检测到捏指手势,显示月份视图513。图5H示出了月份视图513内的多个可选择多项目月份540a、540b、540c、540d。在图5H中,月份的每个表示包括月份标题(例如,542a,542b,542c,542d)、位置指示符(例如,544a,544b,544c,544d)以及相应月份内的媒体项目的一个或多个表示(例如,545a,545b,545c,545d)。在图5H中,在详细粒度级下显示了该月份内的媒体项目的一个或多个表示。图5H还示出了季节示能表示550,其使得设备能够响应于示能表示550上的轻击手势来显示季节视图551(下文结合图5I更详细描述),以及事件示能表示504,其使得设备能够响应于示能表示504上的轻击手势显示事件视图503(上文参考图5A-5B和5G更详细示出)。图5H还示出了在触摸屏112上检测到与接触546和548的朝向彼此的运动对应的捏指手势。
图5I示出了响应于图5H中检测到捏指手势,显示季节视图551。图5I示出了季节视图551内的多个可选择多项目季节552a、552b、552c、552d。在图5H中,季节的每个表示包括季节标题(例如,553a,553b,553c,553d)、位置指示符(例如,554a,554b,554c,554d)以及相应季节内的媒体项目的一个或多个表示(例如,555a,555b,555c,555d)。在图5I中,在详细粒度级下显示该季节内的媒体项目的一个或多个表示。图5I还示出了年份示能表示560,其使得设备能够响应于示能表示560上方的轻击手势来显示年份视图561(下文结合图5J更详细描述);以及月份示能表示512,其使得设备能够响应于示能表示512上的轻击手势来显示月份视图513(上文参考图5H更详细描述)。图5I还示出了在触摸屏112上检测到与接触556和558的朝向彼此的运动对应的捏指手势。
图5J示出了响应于检测到图5I中的捏指手势,显示年份视图561。图5J示出了多个年份562a,562b,562c和针对年份的一个或多个位置指示符(例如,564a,564b)。一个或多个位置指示符包括与对应年份内的项目相关联的一个或多个位置(例如,位置指示符564a包括巴塞罗那、伊维萨岛、巴黎、米可挪斯岛、布达佩斯和2011年内的其他19个地方)。在图5J中,多个年份还包括在总览粒度级下显示的媒体项目的多个表示(例如,566a、566b、566c)。图5J还示出了在触摸屏112上的媒体项目566a的多个表示中检测到媒体项目的相应表示上方的接触568的轻击手势。
图5K示出了响应于检测到图5J中的接触568的轻击手势,继续显示媒体项目566a的多个表示。
图5L示出了在触摸屏112上的媒体项目566a的多个表示中检测到对应于媒体项目的第一相应表示(例如,在其上方或附近)的在位置570a处的接触570的按压和保持手势。图5L还示出了响应于检测到对应于相应表示的在位置570a处的接触570的按压和保持手势,停止显示第一相应表示并显示媒体项目的放大表示(或预览)572。在一些实施例中,根据确定在相应表示上方或附近保持接触超过预定量时间(例如,0.05秒、0.1秒、0.2秒、0.5秒或1.0秒或某个其他合理量的时间),检测按压和保持手势,在预定量时间过去之前,不显示相应表示的放大表示。在一些实施例中,前述相应表示是第一相应表示。在一些实施例中,在年份视图中,在执行按压和保持手势的同时,该设备选择从接触稍微偏移的媒体项目的表示(例如,对应于接触的焦点选择器从接触稍微偏移),使得用户能够看到当前选择/放大的媒体项目的表示阵列中的媒体项目的表示的位置(例如,使得位置不会被用户的手指弄模糊)。
图5M示出了停止显示对应于第一相应表示(例如,图5L中所示)的放大表示,并重新显示第一相应表示569。图5M还示出,显示对应于与第一相应表示相邻但不同的第二相应表示的放大表示,并响应于在触摸屏112上检测到位置570b处的对应于第二相应表示(例如,在上方或附近)的接触570而停止显示第二相应表示。
图5N示出了响应于图5L中检测到接触570从位置570a抬离,在照片视图578中显示对应于第一相应表示的相应媒体项目576(例如,完整尺寸的图像)。在图5N中,显示与相应媒体项目576相关联的多项目事件502n,并显示对应于与按顺序编号的媒体项目内的相应媒体项目576相关联的编号的指示符580,该按顺序编号的媒体项目与事件502n相关。在图5N中还显示针对事件502n的事件标题506n(例如沙漠之旅)和事件位置508n(例如,墓石)。图5N还示出了年份示能表示560,其使得设备能够响应于示能表示560上方的轻击手势来显示年份视图561(上文结合图5J-5L更详细描述);以及事件示能表示504,其使得设备能够响应于示能表示504上的轻击手势来显示事件视图503(上文参考图5A-5B和5G更详细示出)。
图5O示出了在年份视图561中的同时,在触摸屏112上检测到与接触582和584的彼此远离的运动对应的取消捏指手势。
图5P示出了响应于图5O中检测到取消捏指手势,显示季节视图551。图5N还示出了在触摸屏112上检测到与接触586和588的彼此远离的运动对应的取消捏指手势。
图5Q示出了响应于图5N中检测到取消捏指手势,显示月份视图513。图5Q还示出了在触摸屏112上检测到与可选择的多项目月份分组540c相关联的示能表示591c上方的接触590的轻击手势。在一些实施例中,仅有与分组(例如,示能表示591a、591b、591c、591d)相关联的示能表示是可选择的。在一些其他实施例中,与分组相关联的整个描述框或区域是可选择的。例如,在一些实施例中,对应于月份540c的描述框589内的整个区域是可选择的。
图5R示出了响应于在图5Q中检测到轻击手势而显示与示能表示591c相关联的月份540c(例如,2013年1月)。在图5R中,显示发生于月份540c(例如,2013年1月)中的多个事件502c、502f(例如,标题分别为新年前夜聚会506c和Suzanne的生日聚会506f)。在图5R中还显示与对应事件502c、502f相关联的媒体项目(例如,510c和510f)的一个或多个表示。图5R进一步示出了在触摸屏112上检测到与事件502c相关联的媒体项目510c的一个或多个表示内的相应表示上方的接触594的轻击手势。
图5S示出了响应于图5R中检测到轻击手势,在照片视图578中显示对应于相应表示的相应媒体项目598(例如,完整尺寸的图像)。在图5S中,显示与相应媒体项目576相关联的多项目事件502c,并显示对应于与事件502c内的相应项目598相关联的编号的指示符580。在图5S中还示出了针对事件502c的事件标题506c(例如新年前夜聚会)和事件位置508c(例如,旧金山)。
因此,在一些实施例中,跨越两个月或两年的事件显示在针对两个月和/或两年的事件组中(例如,新年前夜聚会事件与十二月的事件和一月的事件分到一组)。在一些实施例中,即使将事件与多个不同事件组分组到一起,在年份视图(例如,图5K中所示的视图)中也不重复来自该事件的图像。例如,图5K中2012年中的最会一行表示将包括与来自新年前夜聚会12月31日的图像对应的表示,而2013年的第一行表示将包括与来自新年前夜聚会1月1日的图像对应的表示。
图6A-图6E为流程图,示出了根据一些实施例的将媒体项目的集合划分成多个多项目事件的方法600。方法600是在具有显示器和触敏表面的电子设备(例如,设备300,图3;或便携式多功能设备100,图1A)处执行的。在一些实施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在一些实施例中,显示器与触敏表面是分开的。方法600中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
如下所述,该方法600提供了将媒体项目的集合划分成多个多项目事件的直观方式。当将媒体项目的集合划分成多个多项目事件时,该方法减少了用户的认知负担,从而生成了一种更高效的人机界面。对于电池驱动的电子设备,使用户能够更快更高效地将媒体项目的集合划分成多个多项目事件,节省了电力并增加了电池充电之间的时间。
该设备获得(602)媒体项目的集合(例如,图像和/或视频的“库”),其中根据与媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序对媒体项目排序。
该设备至少部分地基于媒体项目的集合中顺序相邻的媒体项目(例如,按照时间顺序)的属性之间的比较来确定(604)媒体项目的集合中的一个或多个模式。例如,图5A示出了该设备显示与顺序相邻的媒体项目的集合中的对应媒体项目组相关的多个相应事件(例如,502a,502b,502c,502d)。该设备通过基于顺序相邻的媒体项目的属性之间的比较来识别一个或多个模式来将媒体项目的集合(或集合的一部分)划分成组(或相应的事件502)。
该设备将媒体项目的集合划分(606)成包括多个多项目事件的多个事件(例如,将媒体项目的集合自动划分成多个事件而无需用户介入),其中:每个多项目事件包括(608)具有在对应的事件时间范围内的时间指示符的多个媒体项目;并且根据媒体项目的集合中确定的一个或多个模式选择针对多项目事件的事件时间范围。例如,图5A示出了该设备在触摸屏112上的事件视图503内显示多个多项目事件502a,502b,502c,502d。在图5A中,多项目事件中的每个多项目事件包括多个媒体项目(例如,媒体项目510a,510b,510c,510d的一个或多个表示)。此外,在本实例中,根据在集合中确定的模式来选择针对多项目事件的时间范围(例如,标题为新年前夜聚会的事件506c对应于在2012年12月31日和2013年1月1日之间的晚上捕获的媒体项目,标题为全国自驾游的事件506d对应于在2013年2月从旧金山到纽约市一星期的驾车旅游期间拍摄的媒体项目)。
在一些实施例中,针对多个多项目事件的事件时间范围(612)不重叠(例如,存在在事件过渡点处划分的图像序列,从而生成一组不重叠的事件)。例如,图5B示出了多个不重叠的多项目事件502b,502c,502d,502e。在图5B中,每个事件都涵盖不同的媒体项目序列,在两个事件之间没有共享的媒体项目。
在一些实施例中,该设备通过如下方式将媒体项目的集合划分成多个事件:确定(614)媒体项目的集合中的模式,其指示相应事件发生在包括相应的日期过渡边界(例如,一天结束的边界,例如午夜,一周结束的边界,例如星期天午夜,一月结束的边界,例如一月最后一天的午夜,或一年结束的边界,例如12月31日午夜)内的时间段内;并划分(616)媒体项目的集合,以包括时间指示符在相应日期过渡边界之前的一个或多个项目,以及时间指示符在相应日期过渡边界之后的一个或多个项目(例如,12月/1月假期被示为单个事件,或者星期六晚上/星期天早上的聚会被示为单个事件)。因此,在一些实施例中,日期过渡边界不是事件边界的绝对指示符,并且在其他模式指示连续事件通过相应的日期过渡边界继续进行时,那么忽略相应的日期过渡边界以确定事件的开始/结束。例如,图5B示出了标题为新年前夜聚会的事件502c,其包括来自2012年12月31日和2013年1月1日的媒体项目。
在一些实施例中,该设备通过识别(618)媒体项目的集合中的多个过渡点来将媒体项目的集合划分成多个事件。而且,过渡点的中的一个或多个过渡点各自对应于(620)在过渡点处发生的与媒体项目的集合对应的相应数据模式的相应变化(而不是日期过渡边界)。
在一些实施例中,与相应媒体项目对应的相应数据模式的相应变化基于(622)以下中的一种或多种:相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间的时间量(624);相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的物理位置(626)的变化(例如,经由照片或视频的地理标签检测);相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的海拔(628)的变化(例如,利用集成到设备中的气压计检测);相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的速度(630)的变化(例如,经由加速度计或位置跟踪历史,例如GPS检测);相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的网络连接(632)的变化;相应媒体项目的捕获时间和在时间顺序上顺次相邻媒体项目的捕获时间之间的天气(634)变化(例如,从天气应用程序记录);相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间用户(636)生理指标(例如,心率、体温、EKG模式)的变化;与时间顺序中的相应媒体项目之前的第一多个媒体项目相关联(或在其中(例如,经由面部识别、元数据标签或网络连接标识符)识别)的个体和与时间顺序中的相应媒体项目之后的第二多个媒体项目相关联(或在其中(例如,经由面部识别、元数据标签或网络连接标识符)识别)的个体(638)之间的差异;以及时间顺序中的相应媒体项目之前的第一多个媒体项目的捕获时间之间的位置随时间的变化率(640)和时间顺序中的相应媒体项目之后的第二多个媒体项目的捕获时间之间的位置随时间的变化率之间的差异。
在第一实例中,与第一多个媒体项目相关联的元数据指示2013年2月14日的捕获时间,并且与第二多个媒体项目相关联的元数据(按顺序与第一多个媒体项目相邻)指示2013年3月1日的捕获时间。因此,在本实例中,该设备基于捕获时间之间的时间量来识别第一多个媒体项目和第二多个媒体项目之间的过渡点,并将第一多个媒体项目和第二多个媒体项目划分成独立事件。
在另一个实例中,与第一多个媒体项目相关联的元数据指示对应的多个媒体项目是在夏威夷捕获的(例如,基于GPS数据或地理标签),并且与事件中第二多个媒体项目(按顺序与第一多个媒体项目相邻)相关联的元数据指示对应的多个媒体项目是在旧金山捕获的。因此,在本实例中,该设备基于检测到的物理位置的变化来识别第一多个媒体项目和第二多个媒体项目之间的过渡点,并将第一多个媒体项目和第二多个媒体项目划分成独立事件(例如,夏威夷度假事件和BaytoBreakers事件)。
在另一个实例中,与第一多个媒体项目相关联的元数据指示对应的多个媒体项目是在10000英尺上方捕获的(例如,基于气压计),并且与第二多个媒体项目(按顺序与第一多个媒体项目相邻)相关联的元数据指示对应的多个媒体项目是在海平面之下捕获的。因此,在本实例中,该设备基于检测到的海拔的变化来识别第一多个媒体项目和第二多个媒体项目之间的过渡点,并将第一多个媒体项目和第二多个媒体项目划分成独立事件(例如,MountWhitneyHiking事件和SaltonSeaDrive事件)。
在另一个实例中,与第一多个媒体项目相关联的元数据指示对应的多个媒体项目是在超过60英里每小时的运动时捕获的(例如,基于加速度计数据),并且与第二多个媒体项目(按顺序与第一多个媒体项目相邻)相关联的元数据指示对应的多个媒体项目是在快于15英里每小时的运动时捕获的。因此,在本实例中,该设备基于检测到的速度的变化来识别第一多个媒体项目和第二多个媒体项目之间的过渡点,并将第一多个媒体项目和第二多个媒体项目划分成独立事件(例如,PerformanceDrivingRoadTest事件和HorsebackRiding事件)。
在另一个实例中,与第一多个媒体项目相关联的元数据指示对应的多个媒体项目是在德国捕获的(例如,基于检测到的电信网络连接),并且与第二多个媒体项目(按顺序与第一多个相邻)相关联的元数据指示对应的多个媒体项目是在奥地利捕获的(例如,基于检测到的电信网络连接)。因此,在本实例中,该设备基于检测到的网络连接的变化来识别第一多个媒体项目和第二多个媒体项目之间的过渡点,并将第一多个媒体项目和第二多个媒体项目划分成独立事件(例如,MunichDayPhotos事件和SalzburgEveningConcert事件)。
在另一个实例中,与第一多个媒体项目相关联的元数据指示对应的第一多个媒体项目是在零上70度的晴天捕获的(例如,基于来自天气应用程序的数据),并且与第二多个媒体项目(按顺序与第一多个媒体项目相邻)相关联的元数据指示对应的第二多个媒体项目是在零下20度的低温雪天捕获的。因此,在本实例中,该设备基于天气的变化来识别第一多个媒体项目和第二多个媒体项目之间的过渡点,并将第一多个媒体项目和第二多个媒体项目划分成独立事件(例如,CoronadoBeach事件和SnowbirdSnowboarding事件)。
在另一个实例中,与第一多个媒体项目相关联的元数据指示对应的多个媒体项目是在用户心率低于每分钟60次跳动时捕获的(例如,基于检测到的心率数据),并且与第二多个媒体项目(按顺序与第一多个媒体项目相邻)相关联的元数据指示对应的多个媒体项目是在用户心率超过每分钟100次跳动时捕获的。因此,在本实例中,该设备基于用户生理指标的变化来识别第一多个媒体项目和第二多个媒体项目之间的过渡点,并将第一多个媒体项目和第二多个媒体项目划分成独立事件(例如,GoldenGateYoga事件和Skydiving事件)。
对于基于与第一多个媒体项目和第二多个媒体项目相关联的个体之间的差异来识别过渡点,例如,如果第一组照片包括具有第一组人的不同子组的很多照片,并且第二组照片包括具有与第一组人显著不同的第二组人的不同子组的很多照片,那么设备将确定第一组人的照片(和时间上接近那些照片的其他照片)对应于第一事件,并且第二组人的照片(和时间上接近那些照片的其他照片)对应于与第一事件不同的第二事件。
对于基于位置随时间的变化的速率的差异来识别过渡点,例如,如果一组照片指示用户正在以每天300英里驾车(例如,来自连续几天或同一天的照片具有相距300英里或更多的地理坐标),那么用户可能在旅行路上;并且如果一组照片随后指示用户相对静止(例如,来自连续几天的照片具有在50英里半径内的地理坐标),那么用户可能已经结束了路上的旅行,并且道路旅行将被识别为起始时间和停止时间由用户每天旅行的距离变化识别的事件,该每天旅行的距离变化由用户的照片的地理标签信息指示。
在一些实施例中,在将媒体项目的集合划分成(642)多个事件之后,该设备至少部分地基于媒体项目的集合中的一个或多个模式,将一组包括两个或更多个多项目事件的连续事件划分成(644)相应的基于模式的事件组,其中:基于模式的事件组是根据媒体项目的集合中的与基于模式的事件组对应的第一模式的变化从其他基于模式的事件组划分(646)的;并且基于模式的事件组内的相应多项目事件是根据媒体项目的集合中的第二模式的变化从其他基于模式的事件组中的事件划分(648)的,其中第二模式的变化不与对应于(例如,不打破)基于模式的事件组的第一模式的变化对应。
对于第一模式,例如,用户的照片库包括照片序列,其指示用户已去夏威夷旅行(例如,基于针对用户照片库中的照片的地理标签信息,该照片库包括在夏威夷之外地方的一组照片,接着是一组在夏威夷的照片)。例如,图5A示出了与第一模式相关联的标题为HawaiiVacation的事件502b。对于第二模式,例如,用户的照片库包括照片序列,其指示用户在夏威夷时从Kauai去Maui旅行(例如,基于针对用户照片库的照片的地理标签信息,该照片库包括在Kauai的一组照片,接着是一组在Maui的照片)。例如,图5C示出了与HawaiiVacation相关的事件502b内的多个子事件518(例如,与Oahu相关的子事件、与Kauai相关的子事件以及与Maui相关的子事件)。
在一些实施例中,在将媒体项目的集合划分(642)成多个事件之后,该设备将包括两个或更多个多项目事件的一组连续事件分组(650)成多个基于日期的事件组(例如,基于内容的事件被分入基于日期的事件组,例如按照“月份”、“季节”和/或“年份”对事件分组),其包括:包括(652)第一组事件的第一基于日期的事件组,第一组事件包括具有在第一日期范围内的时间指示符的项目;和包括第二组事件的第二基于日期的事件组,第二组事件包括具有在第二日期范围内的时间指示符的项目。在一些实施例中,第二日期范围不和第一日期范围重叠。例如,图5H示出了月份视图513,其包括多个可选择的基于日期的事件组(例如,月份540a,540b,540c,540d)。例如,将事件502b(图5A中所示)分组到月份540b中,将事件502c(图5A中所示)分组到月份540b和540c中,并将事件502d(图5A中所示)分组到月份540d中。例如,图5I示出了季节视图551,其包括多个可选择的基于日期的事件组(例如,季节552a,552b,552c,552d)。例如,图5J示出了年份视图561,其包括多个可选择的基于日期的事件组(例如,年份562a,562b,562c)。
而且,在一些实施例中,相应的事件包括(654)具有在第一日期范围中的时间指示符的一个或多个项目,和具有在第二日期范围中的时间指示符的一个或多个项目;并且相应的事件包括在第一基于日期的事件组和第二基于日期的事件中的两者中。例如,来自标题为新年前夜聚会(图5A所示)的事件502c的照片(或媒体项目)包括来自2012年12月31日和2013年1月1日的照片,出现于与2012年12月相关的月份分组540b和与2013年1月相关的540c(图5H中所示)中,与2012-2013年冬季相关的季节组552c(图5I所示)中,以及与2012年相关的年份组562b和与2013年相关的年份组562c(图5J中所示)中。在一些实施例中,为用户提供对事件重命名和/或对基于模式的事件组重命名的选项,但不提供对基于日期的事件组重命名的选项。例如,图5D-5E示出了用户经由文本输入530来编辑与子事件518b相关联的子事件标题507b。类似地,例如,使用户能够编辑与图5A中的事件502对应的事件标题506和事件位置508。
在一些实施例中,该设备:接收(656)对显示媒体项目的集合的相应部分的请求;并响应于对显示媒体项目的集合的相应部分的该请求,在显示器上显示(658)与该媒体项目的集合的相应部分对应的多个事件的表示。例如,图5A示出了设备显示由用户指定的日期范围(例如,2012年12月-2013年1月)内的事件(例如,520a,502b,502c,502d)。例如,图5Q示出设备以用户选择的粒度级(例如,月份视图513)来显示用户经由图5P中的取消捏指手势选择的日期(例如,2012-2013冬季月份)附近的月份540a,540b,540c,540d。例如,用户的捏指或取消捏指手势(例如,在显示图5H中的月份视图513时与接触532和534的移动对应的捏指手势导致显示图5I中的季节视图551,或者在显示图5O中的年份视图561时与接触582和584的移动对应的取消捏指手势导致显示图5P中的季节视图551)选择粒度级以用于显示事件。例如,竖直滚动手势(例如,包括竖直拖动或轻扫手势)选择事件以在粒度级内显示(例如,图5A中接触514的竖直拖动手势导致观看到图5B中的不同多个事件)。在一些实施例中,粒度级对应于所显示的一排事件或事件组(例如,由事件分组的项目、由基于模式的事件组分组的项目、由包括月份、季节或年份的基于日期的事件组分组的项目)。
在一些实施例中,多个事件中的相应多个事件中的相应表示(660)包括:相应事件的标识符(662)(例如,针对相应事件的用户选择的、设备产生的或默认产生的标题);相应事件中项目的位置(664)的列表;以及与相应事件中的项目对应的一个或多个图像(例如,事件中照片的缩略图)。例如,图5A示出事件视图503内的多个多项目事件502(例如,事件502a,502b,502c,502d)(有时将每个都称为相应事件的相应表示)。在图5A中,多个事件中的每个事件包括关联的事件标题或标识符506(例如,星期日早午餐506a,夏威夷假期506b,新年前夜聚会506c和全国自驾游506d)、一个或多个事件位置(这里有时称为位置标识符)的列表508(例如,与事件502b相关的SanJose508a,和与事件502b相关的Oahu,Kauai,Maui508b)以及媒体项目510(例如,510a、510b、510c、510d)的一个或多个表示。在一些实施例中,媒体项目的相应表示包括与照片相关联的缩略图或与视频相关联的照片或静止图像或gif图像。
在一些实施例中,位置列表包括(666)根据相应事件中的位置模式(任选地,媒体集合中的位置模式)选择的相应事件中的项目的位置的子集。在一些实施例中,选择位置使其为相应事件中最独特或感兴趣的位置,相应事件包括用户频繁访问的位置(例如,在照片库中有几幅照片在该位置处的位置)和/或在相应事件中有大批时间上连续的照片的位置。例如,图5I示出了季节组552a,其带有对应的位置指示符554a,包括Yosemite、SantaCruz和两个其他位置。在本实例中,在位置指示符554a中显示了频繁访问的位置(例如,Yosemite,SantaCruz),并且在位置指示符554a(例如,作为“其他两个位置”而包括的指示符)中未显示或截取了频繁访问的位置(例如,对应于用户工作地点和家的Sunnyvale和PaloAlto),以便强调在通过媒体导航时对用户而言最有特色或感兴趣的位置。
在一些实施例中,选择与相应事件中的项目对应的一个或多个图像,以便(670)表示与位置列表中的位置相关联的图像。在一些实施例中,该设备仅显示事件中项目的位置的子集,并且该设备选择照片的缩略图以在事件的表示中显示,使得该缩略图是以位置的子集中的位置之一作为地理标签的照片的缩略图(例如,相比于以位置之一作为地理标签的照片德缩略图,较少包括或不包括不以位置之一作为地理标签的照片的缩略图)。在一些实施例中,位置的子集中的位置是被确定为用户最感兴趣的位置(例如,频繁访问的位置的照片或来自大批照片的照片),因此与那些位置相关联的照片更可能是用户感兴趣的(例如,代表事件组中重要事件的照片)。例如,图5B示出了与标题为CrossCountryRoad的事件502d相关的一个或多个图像510d。在本实例中,一个或多个图像510d包括与位置列表508d中显示的位置(例如,Reno,SaltLakeCity和Cheyenne)相关联的图像。
在一些实施例中,多个事件的表示包括(672)第一事件的第一表示,其包括第一多个代表性图像,并且多个事件的表示包括第二事件的第二表示,其包括第二多个代表性图像。例如,在图5C中,相应子事件518中的每个相应子事件包括对应于该相应子事件的媒体项目的多个表示(例如,511a,511b,511c)(有时称为表示图像)。
而且,在一些实施例中,设备接收(674)对将相应代表性图像从第一多个代表性图像移动到第二多个代表性图像的请求(例如,从相应图像到第二事件的第二表示的触摸和拖动手势);并且响应于接收到移动代表性图像的请求,设备从第一事件向第二事件移动(676)对应于相应代表性图像的项目。在一些实施例中,响应于接收到请求,从第一事件的第一表示向第二事件的第二表示移动相应的代表性图像。在图5C中,例如,该设备检测接触520从位置520a到位置520b的拖动手势,并且响应于检测到该拖动手势,设备将与子事件518c相关联的媒体项目511c的多个表示内的相应的表示522移动到与子事件518b相关联的媒体项目511b的相应多个表示。例如,图5D示出设备响应于图5C中的拖动手势,显示与子事件518b相关联的媒体项目511b的多个表示内的相应的表示522。
应当理解,对图6A-6E中已经进行描述的操作的特定顺序仅仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。此外,应当指出的是,本文中参考本文所描述的其它方法(例如,方法700)所描述的其它过程的细节同样以类似的方式适用于以上参考图6A-6E所述的方法600。例如,上文参考方法600描述的联系人、粒度级、媒体项目、媒体项目的表示、事件、事件组和其他用户界面元素任选地具有本文结合本文所述的其他方法(例如方法700)所述的联系人、粒度级、媒体项目、媒体项目的表示、事件、事件组和其他用户界面元素的一种或多种特性。为了简明起见,这些细节在这里不再重复。
图7A-7D为流程图,其示出了根据一些实施例的将媒体项目的集合组织成粒度级的层次结构的方法700。方法700是在具有显示器和触敏表面的电子设备(例如,设备300,图3;或便携式多功能设备100,图1A)处执行的。在一些实施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在一些实施例中,显示器与触敏表面是分开的。方法700中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
如下所述,该方法700提供了将媒体项目的集合组织成粒度级的层次结构的直观方式。在将媒体项目的集合组织成粒度级的层次结构时,该方法减少了用户的认知负担,从而生成了一种更高效的人机界面。对于电池驱动的电子设备,使用户能够更快更高效地将媒体项目的集合组织成粒度级的层次结构,节省了电力并增加了电池充电之间的时间。
该设备获得(702)媒体项目的集合(例如,图像和/或视频的“库”),其中媒体项目被组织成粒度级的层次结构,所述层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级。例如,粒度级的层次结构包括在详细粒度级下显示的事件视图503(图5A中所示)、在详细粒度级下显示的月份视图513(图5H中所示)、在详细粒度级下显示的季节视图551(图5I中所示)以及在总览粒度级下显示的年份视图561(图5J中所示)。
设备接收(704)对显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求。例如,图5A示出了在事件视图503中显示的媒体项目的集合的第一部分,其中多个多项目事件502是根据第一详细粒度级来组织的。
在一些实施例中,第一详细粒度级对应于(706)第一时间尺度(例如月份)。例如,图5H示出了设备在具有对应于月份时间尺度的多个月份分1组540的月份视图513中显示媒体项目的集合的一部分。
响应于第一请求,设备显示(708)媒体项目的第一多个表示。例如,图5H示出了设备针对月份分组540显示媒体项目(例如545a,545b,545c,545d)的多个表示。在一些实施例中,相应表示是与照片或视频相关联的缩略图。
第一多个表示以详细粒度尺寸来显示(710)。例如,在图5H中,媒体项目(例如,545a,545b,545c,545d)的相应多个表示以详细粒度尺寸来显示。类似地,在图5A中,例如,媒体项目(例如,510a,510b,510c,510d)的相应多个表示以详细粒度尺寸来显示。同样,在图5I中,例如,媒体项目(例如,555a,555b,555c,555d)的相应多个表示以详细粒度尺寸来显示。
在一些实施例中,详细粒度尺寸大于(712)最小对象选择尺寸(例如,44×44点/像素)。例如,图5R示出设备检测到在与事件502c相关的媒体项目510c的多个表示内的相应表示596上方的接触594的轻击手势。在图5R中,媒体项目510c的相应多个表示中的表示以详细粒度尺寸来显示,并且媒体项目510c的相应多个表示中的表示是可选择的(例如,每个表示的尺寸等于或大于44×44点/像素)。
第一多个表示彼此间隔(714)开详细粒度距离。例如,在图5H中,媒体项目(例如545a,545b,545c,545d)的相应多个表示中的表示与相邻表示间隔开详细粒度距离。类似地,在图5A中,例如,媒体项目(例如510a,510b,510c,510d)的相应多个表示中的表示与相邻表示间隔开详细粒度距离。同样,在图5I中,例如,媒体项目(例如555a,555b,555c,555d)的相应多个表示中的表示与相邻表示间隔开详细粒度距离。
在一些实施例中,详细粒度距离大于(716)对象选择裕度(例如,使得用户能够容易区分并选择不同图像缩略图的间距)。
在一些实施例中,对应于第一详细粒度级的媒体项目的第一多个表示中的媒体项目的第一表示包括(718)对应于第一时间范围中的项目的子集的图像。例如,图5I示出了对应于与由季节组552a(例如2012年夏季)指定的第一时间范围相关的媒体项目的媒体项目555a的第一多个表示。例如,图5I还示出了对应于与由季节组552b(例如2012年秋季)指定的第二时间范围相关的媒体项目的媒体项目555b的第二多个表示。
在一些实施例中,将对应于第一详细粒度级的第一多个表示分组(720)成第一多个组,并且第一多个表示中的不同组的表示分开至少第一距离(例如,粒度级之间的组描述或事件标题)。例如,图5Q示出了在与月份分组540c相关的第一组表示和与月份组540b相关的第二组表示545b之间的描述框589,该描述框589对应于包括月份标题542c(例如2013年1月)和位置指示符544c(例如旧金山)的月份组540c。在本实例中,描述框589的高度是第一距离。
设备接收(722)对显示根据与多个详细粒度级对应的相应总览粒度级来组织的集合的第二部分的第二请求。例如,图5J示出了在年份视图661中显示的媒体项目的集合的第二部分,其中多个年分组562是根据总览粒度级来组织的。例如,图5J进一步示出了针对不同年份562显示的媒体项目(例如,566a,566b,566c)的相应多个表示,其中媒体项目的相应多个表示包括对应于多个详细粒度级的媒体项目(例如,566b包括来自2012年的月份和季节的媒体项目)。
在一些实施例中,总览粒度级对应于(724)大于第二时间尺度的第三时间尺度(例如年份)。例如,图5J示出设备在具有对应于年份时间尺度的多个年份分组562的年份视图661中显示媒体项目的集合的一部分。
响应于第二请求,设备显示(726)媒体项目的第二多个表示。例如,图5J示出设备针对对应的年份分组562显示媒体项目(例如566a,566b,566c)的相应多个表示。
第二多个表示以小于详细粒度尺寸的总览粒度尺寸来显示(728)的。在图5J中,例如,媒体项目(例如,566a,566b,566c,566d)的相应多个表示以总览粒度尺寸来显示。例如,媒体项目566a(图5J中所示)的相应多个表示中的相应表示的总览粒度尺寸小于媒体项目555a(图5I中所示)或545a(图5H中所示)或510a(图5A中所示)的相应多个表示中的相应表示的详细粒度尺寸。
在一些实施例中,总览粒度尺寸小于(730)最小对象选择尺寸。例如,图5J示出设备检测在媒体项目566a的多个表示中的媒体项目的相应表示上方的接触568的轻击手势。例如,图5K示出了响应于在图5J中检测到轻击手势,设备继续显示媒体项目566a的多个表示。在图5J-5K中,媒体项目566a的相应多个表示中的相应表示是以总览粒度尺寸来显示,并且媒体项目566c的多个表示中的相应表示不是可选择的(例如,每个相应表示小于44×44点/像素)。如图5J-5K中所示,相应表示不受相应表示上方的接触568的轻击手势的影响。
第二多个表示彼此间隔(732)开小于详细粒度距离的总览粒度距离。在图5J中,例如,媒体项目(例如566a,566b,566c)的相应多个表示中的表示与相邻表示间隔开总览粒度距离。例如,媒体项目566a(图5J中所示)的相应多个表示中的相应表示之间的总览粒度距离小于媒体项目555a(图5I中所示)或545a(图5H中所示)或510a(图5A中所示)的相应多个表示中的相应表示之间的详细粒度距离。在一些实施例中,总览粒度距离对于人眼而言是感知不到的或是不存在的。
在一些实施例中,总览粒度距离小于(734)对象选择裕度。在一些实施例中,总览粒度间距为零,并且总览粒度中的表示是彼此相邻的(例如,如图5J所示)。
在一些实施例中,对应于总览粒度级的媒体项目的第二多个表示中的媒体项目的第二表示包括(736):与第一时间范围中的项目的子集对应的图像;和第一时间范围中的从包括在媒体项目的第一表示中的图像省略的一个或多个图像。因此,在一些实施例中,设备在显示事件(例如,在事件视图503中)或事件组(例如,在月份视图513或季节551)的表示时,省略照片的缩略图,但然后在显示包括该事件的一年期间内(例如,在年份视图661中)拍摄的照片总览时显示省略的照片的缩略图。
在一些实施例中,将对应于总览粒度级的第二多个表示分组(738)成多个组,并且第二多个表示中的不同组的表示分开小于第一距离的第二距离(例如,在不同年份之间没有白色空间)。例如,图5J示出对应于年份分组562a的第一组表示与对应于年份分组562b的第二组表示566b分开小于第一距离(例如,图5Q中的描述框589)的第二距离(例如,线或边界567)。
在一些实施例中,设备接收(740)对显示根据与第一详细粒度级不同的第二详细粒度级(例如,事件组粒度级而非事件粒度级,月份粒度级而非事件组粒度级,或季节粒度级而非月份粒度级)组织的集合的第三部分的第三请求。例如,图5I示出设备响应于检测到图5H中的捏指手势,根据第二详细粒度级(例如,季节粒度级)显示季节视图541,其中设备根据图5H中的第一详细粒度级(例如,月份粒度级)显示月份视图513。
在一些实施例中,第二详细粒度级对应于(742)比第一时间尺度大的第二时间尺度(例如,多月时间尺度,例如三个月的“季节”)。例如,图5I示出设备在与多月或季节时间尺度对应的第二详细粒度级下显示季节视图541。相反,例如,图5H示出设备在与单月时间尺度对应的第一详细粒度级下显示月份视图513。
在一些实施例中,响应于第三请求,设备显示(744)媒体项目的第三多个表示。例如,图5I示出设备显示具有多个季节552a、552b、552c、552d的季节视图551,其中针对对应的季节显示媒体项目555a、555b、555c、555d的对应多个表示。
在一些实施例中,第三多个表示以详细粒度尺寸来显示(746)。如上所述,例如,图5I示出了针对对应季节552的媒体项目(例如,555a,555b,555c,555d)的多个表示以详细粒度尺寸来显示。在一些实施例中,第三多个表示彼此间隔(748)开详细粒度距离。如上所述,在图5I中,例如,媒体项目(例如555a,555b,555c,555d)的相应多个表示中的表示与相邻表示间隔开详细粒度距离。
在一些实施例中,设备检测(750)触敏表面上与相应媒体项目的相应表示对应的位置处的轻击输入。例如,图5R示出设备检测到与事件502c相关联的媒体项目510c的多个表示内的相应表示596上方的接触594的轻击手势。例如,图5J还示出了设备检测到媒体项目566a的多个表示中的媒体项目的相应表示上方的接触568的轻击手势。
在一些实施例中,响应于(752)检测到轻击输入,设备根据确定相应表示显示在以详细粒度尺寸来显示的多个表示中,以相应媒体项目的显示替换(754)多个表示的显示。根据确定图5R中媒体项目510c的多个表示中的相应表示596以详细粒度尺寸来显示,例如,图5S示出,设备响应于在图5R中检测到接触594的轻击手势,显示照片视图578中对应于相应表示596的相应媒体项目598(例如,完整尺寸的图像)。
在一些实施例中,响应于检测到轻击输入,设备根据确定相应表示显示在以总览粒度尺寸来显示的多个表示中(例如,未显示相应的媒体项目),继续显示多个表示。根据确定图5J中媒体项目566a的多个表示中的媒体项目的相应表示是以总览粒度尺寸来显示的,例如,图5K示出设备响应于在图5J中检测到接触568的轻击手势,继续显示多个表示566a(并放弃显示对应于相应表示的相应媒体项目)。
在一些实施例中,在以总览粒度尺寸来显示媒体项目的第二多个表示时,设备检测(758)在触敏表面上的与媒体项目的第二多个表示中的第一媒体项目的第一表示对应的位置处的接触(例如,超过预先确定量的时间,诸如0.05秒、0.1秒、0.2秒、0.5秒或每个其他合理的时间段)。例如,图5L示出设备检测到在以总览粒度尺寸来显示的媒体项目566a的多个表示中的媒体项目的第一相应表示上方的接触570的按压保持手势。
在一些实施例中,响应于检测到(760)该接触,设备显示(762)第一媒体项目的放大表示(例如,同时继续显示媒体项目的第二多个表示中的其他表示)。例如,图5L示出响应于检测到第一相应表示上方的超过预先确定的时间量(例如,0.05秒、0.1秒、0.2秒、0.5秒或某个其他合理时间段)的接触570,设备显示第一相应表示的放大表示(或预览)572。
在一些实施例中,响应于检测(760)到接触,设备还停止(764)显示第一媒体项目的第一表示。例如,图5L还示出响应于在第一相应表示上方检测到超过预先确定的时间量的接触570,设备停止显示媒体项目566a的多个表示中的第一相应表示。
在一些实施例中,在显示第一媒体项目的放大表示的同时,该设备:检测到(766)接触从触敏表面的抬离;响应于检测到接触从触敏表面的抬离,以相应媒体项目的显示替换(768)多个表示的显示。例如,图5N示出响应于图5L中检测到接触570从位置570a的抬离,设备在照片视图578中显示对应于第一相应表示的相应媒体项目576(例如,完整尺寸的图像)。例如,图5N还示出设备在照片视图578中显示相应媒体项目576来替代图5L中的年份视图661。
在一些实施例中,在显示第一媒体项目的放大表示的同时,设备检测到(770)接触移动到触敏表面上与媒体项目的第二多个表示中的第二媒体项目的第二表示对应的位置。例如,图5M示出了设备检测到接触570(从图5J中的位置570a)移动到媒体项目566a的多个表示中的媒体项目的第二相应表示上方的位置570b。在一些实施例中,响应于检测到接触的移动,该设备:停止(772)显示第一媒体项目的放大表示;重新显示第一媒体项目的第一表示;显示第二媒体项目的放大表示(例如,同时继续显示媒体项目的第二多个表示中的其他表示);以及停止显示第二媒体项目的第二表示。响应于检测到接触570从位置570a移动到570b,例如,图5M示出设备停止显示放大表示572并重新显示媒体项目566a的多个表示中的第一表示569。响应于检测到接触570从位置570a移动到570b,例如,图5M还示出设备显示对应于第二相应表示的放大表示574,并停止显示媒体项目566a的多个表示中的第二相应表示。在一些实施例中,第二相应表示与媒体项目566a的多个表示中的第一相应表示相邻且与该第一相应表示不同。在本实例中,第一表示和第二表示是与标题为DesertTrip(如图5N中所示)的事件相关的图像序列中的顺序相邻的图像。
应当理解,对图7A-7D中已经进行描述的操作的特定顺序仅仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。此外,应当指出的是,本文中参考本文所述的其它方法(例如,方法600)所描述的其它过程的细节同样以类似的方式适用于以上参考图7A-7D所述的方法700。例如,上文参考方法700描述的联系人、粒度级、媒体项目、媒体项目的表示、事件、事件组和其他用户界面元素任选地具有本文结合本文所述的其他方法(例如方法600)所述的联系人、粒度级、媒体项目、媒体项目的表示、事件、事件组和其他用户界面元素的一种或多种特性。为了简明起见,这些细节在这里不再重复。
根据一些实施例,图8示出了根据各种所述实施例的原理进行配置的电子设备800的功能框图。该设备的功能性框图任选地由执行各种所描述的实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的技术人员应当理解,图8中所述的功能框图任选地被组合或被分离为子框图,以便实现各种所描述的实施例的原理。因此,本文的描述任选地支持本文所述的功能框图的任何可能的组合或分离或其他定义。
如图8中所示,电子设备800包括:被配置为显示图形用户界面的显示单元802;任选地,被配置为接收接触的触敏表面单元804;以及耦接至显示单元802和任选地耦接至触敏表面单元804的处理单元806。在一些实施例中,处理单元806包括获得单元808、确定单元810、划分单元812、分组单元814、接收单元816、显示使能单元818、移动单元820和识别单元822。
处理单元806被配置为:(例如,利用获得单元808)获得媒体项目的集合,其中该媒体项目是根据与媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序排序的;并(例如,利用确定单元810)至少部分地基于媒体项目的集合中顺序相邻的媒体项目的属性之间的比较来确定媒体项目的集合中的一个或多个模式。处理单元806还被配置为(例如,利用划分单元812)将媒体项目的集合划分成包括多个多项目事件的多个事件,其中:每个多项目事件包括具有在对应的事件时间范围内的时间指示符的多个媒体项目;并且根据媒体项目的集合中确定的一个或多个模式来选择针对多项目事件的事件时间范围。
在一些实施例中,针对多个多项目事件的事件时间范围不重叠。
在一些实施例中,将媒体项目的集合划分成多个事件包括:(例如,利用确定单元810)确定媒体项目的集合中的模式,该模式指示在包括相应日期过渡界限的时间段内发生的相应事件;以及(例如,利用划分单元812)划分媒体项目的集合,以便包括具有在相应日期过渡界限之前的时间指示符的一个或多个项目,以及具有在相应日期过渡界限之后的时间指示符的一个或多个项目。
在一些实施例中,将媒体项目的集合划分成多个事件包括(例如,利用识别单元822)识别媒体项目的集合中的多个过渡点;并且该过渡点中的一个或多个过渡点各自对应于在过渡点处发生的与媒体项目的集合对应的相应数据模式的相应变化。
在一些实施例中,对应于相应媒体项目的相应数据模式的相应变化基于以下中的一者或多者:相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间的时间量;相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的物理位置的变化;相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的海拔的变化;相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的速度的变化;相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的网络连接的变化;相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间的天气的变化;相应媒体项目的捕获时间和时间顺序中顺序相邻的媒体项目的捕获时间之间的用户生理指标的变化;与时间顺序中的相应媒体项目之前的第一多个媒体项目相关联(或在其中(例如,经由面部识别、元数据标签或网络连接标识符)识别)的个体和与时间顺序中的相应媒体项目之后的第二多个媒体项目相关联的个体之间的差异;以及时间顺序中的相应媒体项目之前的第一多个媒体项目的捕获时间之间的位置随时间的变化率以及时间顺序中的相应媒体项目之后的第二多个媒体项目的捕获时间之间的位置随时间的变化率之间的差异。
在一些实施例中,处理单元806还被配置为:在将媒体项目的集合划分成多个事件之后,(例如,利用分组单元814)至少部分地基于媒体项目的集合中的一个或多个模式将包括两个或更多个多项目事件的一组连续事件分成相应的基于模式的事件组,其中:基于模式的事件组根据与基于模式的事件组对应的媒体项目的集合中的第一模式的变化从其他基于模式的事件组划分;并且基于模式的事件组内的相应多项目事件根据媒体项目的集合中的第二模式的变化从基于模式的事件组中的其他事件划分,其中第二模式的变化不对应于与基于模式的事件组对应的第一模式的变化。
在一些实施例中,处理单元806还被配置为:在将媒体项目的集合划分成多个事件之后,(例如,利用分组单元814)将包括两个或更多个多项目事件的一组连续事件分成多个基于日期的事件组,其包括:包括第一组事件的第一基于日期的事件组,该第一组事件包括具有第一日期范围内的时间指示符的项目;包括第二组事件的第二基于日期的事件组,该第二组事件包括具有在第二日期范围内的时间指示符的项目;并且相应的事件包括具有在第一日期范围中的时间指示符的一个或多个项目,以及具有在第二日期范围中的时间指示符的一个或多个项目;并且相应的事件包括在第一基于日期的事件组和第二基于日期的事件组两者中。
在一些实施例中,处理单元806进一步被配置为:接收(例如,利用接收单元816)对使能显示媒体项目的集合的相应部分的请求;并响应于对显示媒体项目的集合的相应部分的该请求,使能(例如,利用显示使能单元818)在显示单元802上显示对应于该媒体项目的集合的相应部分的多个事件的表示。
在一些实施例中,多个事件中的相应事件的相应表示包括:相应事件的标识符;相应事件中的项目的位置的列表;以及与相应事件中的项目对应的一个或多个图像。
在一些实施例中,位置的列表包括根据相应事件中的位置模式选择的相应事件中的项目的位置的子集。
在一些实施例中,选择与相应事件中的项目对应的一个或多个图像,以便表示与位置的列表中的位置相关联的图像。
在一些实施例中,多个事件的表示包括第一事件的第一表示,其包括第一代表性图像;多个事件的表示包括第二事件的表示,其包括第二多个代表性图像;并且处理单元806进一步被配置为:(例如,利用接收单元816)接收对从第一多个代表性图像向第二多个代表性图像移动相应代表性图像的请求;以及响应于接收到对移动相应代表性图像的请求,(例如,利用移动单元820)从第一事件向第二事件移动对应于相应代表性图像的项目。
以上参考图6A-6E所述的操作任选地由图1A-1B或图8中所描绘的部件来实现。例如,获得操作602、确定操作604、划分操作606以及分组操作644和650任选地由事件分类器170、事件识别器180和事件处理程序190来实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并确定触敏表面上的第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178以更新由应用程序所显示的内容。类似地,本领域技术人员将清楚地知道基于在图1A-1B中所示的部件可如何实现其它过程。
根据一些实施例,图9示出了根据各种所述实施例的原理进行配置的电子设备900的功能框图。该设备的功能性框图任选地由执行各种所描述的实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的技术人员应当理解,图9中所述的功能性框图任选地被组合或被分离为子框图,以便实现各种所描述的实施例的原理。因此,本文的描述任选地支持本文所述的功能框图的任何可能的组合或分离或其他定义。
如图9中所示,电子设备900包括:被配置为显示图形用户界面的显示单元902;被配置为接收接触的触敏表面单元904;以及耦接至显示单元902和触敏表面单元904的处理单元906。在一些实施例中,处理单元906包括获得单元908、接收单元910、显示使能单元912、检测单元914和确定单元916。
处理单元906被配置为(例如,利用获得单元908)获得媒体项目的集合,其中媒体项目被组织成粒度级的层次结构,所述粒度级的层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级。处理单元906还被配置为:(例如,利用接收单元910)接收对使能显示根据第一详细粒度级来组织的集合的第一部分的第一请求;并响应于第一请求,使能显示(例如,利用显示使能单元912)媒体项目的第一多个表示,其中:第一多个表示以详细粒度尺寸来显示在显示单元902上;并且第一多个表示彼此间隔详细粒度距离。处理单元906还被配置为:(例如,利用接收单元910)接收对使能显示根据与多个详细粒度级对应的相应总览粒度级来组织的集合的第二部分的第二请求;并响应于第二请求,使能显示(例如,利用显示使能单元912)媒体项目的第二多个表示,其中:第二多个表示以小于详细粒度尺寸的总览粒度尺寸来显示在显示单元902上;并且第二多个表示彼此间隔小于详细粒度距离的总览粒度距离。
在一些实施例中,处理单元906还被配置为:(例如,利用接收单元910)接收对使能显示根据与第一详细粒度级不同的第二详细粒度级来组织的集合的第三部分的第三请求;并响应于第三请求,使能显示(例如,利用显示使能单元912)媒体项目的第三多个表示,其中:第三多个表示以详细粒度尺寸来显示在显示单元902上;并且第三多个表示彼此间隔详细粒度距离。
在一些实施例中,第一详细粒度级对应于第一时间尺度;第二详细粒度级对应于大于第一时间尺度的第二时间尺度;并且总览粒度级对应于大于第二时间尺度的第三时间尺度。
在一些实施例中,与第一详细粒度级对应的媒体项目的第一多个表示中的媒体项目的第一表示包括:与第一时间范围中的项目的子集对应的图像;并且与总览粒度级对应的媒体项目的第二多个表示中的媒体项目的第二表示包括:与第一时间范围中的项目的子集对应的图像;以及从包括在媒体项目的第一表示中的图像省略的第一时间范围中的项目的一个或多个图像。
在一些实施例中,详细粒度距离大于对象选择裕度;并且总览粒度距离小于对象选择裕度。
在一些实施例中,详细粒度尺寸大于最小对象选择尺寸;并且总览粒度尺寸小于对象选择尺寸。
在一些实施例中,处理单元906还被配置为:(例如,利用检测单元914)检测触敏表面单元904上与相应媒体项目的相应表示对应的位置处的轻击输入;并响应于检测到轻击输入:根据确定(例如,利用确定单元916)相应表示显示在以详细粒度尺寸来显示的多个表示中,利用相应媒体项目的显示(例如,利用显示使能单元912)替换多个表示的显示;并根据确定(例如,利用确定单元916)相应表示显示在以总览粒度尺寸来显示的多个表示中,继续显示(例如,利用显示使能单元912)多个表示。
在一些实施例中,处理单元906还被配置为:在以总览粒度尺寸来显示媒体项目的第二多个表示时,检测(例如,利用检测单元914)触敏表面单元904上的与媒体项目的第二多个表示中的第一媒体项目的第一表示对应的位置处的接触;并响应于检测到接触,使能显示(例如,利用显示使能单元912)第一媒体项目的放大表示。
在一些实施例中,处理单元906被进一步配置为响应于检测到接触,停止显示(例如,利用显示使能单元912)第一媒体项目的第一表示。
在一些实施例中,处理单元906还被配置为:在显示第一媒体项目的放大表示的同时,检测到(例如,利用检测单元914)接触从触敏表面单元904的抬离;响应于检测到接触从触敏表面单元904的抬离,以相应媒体项目的显示(例如,利用显示使能单元912)替换(768)多个表示的显示。
在一些实施例中,处理单元906被进一步配置为:在显示第一媒体项目的放大表示的同时,检测到(例如,利用检测单元914)接触移动到触敏表面单元904上的与媒体项目的第二多个表示中的第二媒体的第二表示对应的位置;响应于检测到接触的移动:停止显示(例如,利用显示使能单元912)第一媒体项目的放大表示;使能重新显示(例如,利用显示使能单元912)第一媒体项目的第一表示;使能显示(例如,利用显示使能单元912)第二媒体项目的放大表示;以及停止显示(例如,利用显示使能单元912)第二媒体项目的第二表示。
在一些实施例中,对应于第一详细粒度级的第一多个表示被分成多个组,并且第一多个表示中的不同组的表示被至少分开第一距离;并且对应于总览粒度级的第二多个表示被分成多个组,并且第二多个表示中的不同组的表示被分开小于第一距离的第二距离。
上述信息处理方法中的操作任选地通过运行信息处理设备中的一个或多个功能模块来实现,该信息处理设备诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图7A-7D所述的操作任选地由图1A-1B或图9中所描绘的部件来实现。例如,获得操作702;接收操作704、722和740;显示使能操作708、726和744;以及检测操作750和758任选地由事件分类器170、事件识别器180和事件处理程序190来实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并确定触敏表面上的第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序所显示的内容。类似地,本领域技术人员会清楚地知道基于在图1A-1B中所示的部件可如何实现其它过程。
出于解释的目的,前面的描述是通过参考具体实施例来进行描述的。然而,上述的示例性讨论并非意图是详尽的,也并非意图将本发明限制到所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择和描述实施例以便最佳地阐明本发明的原理及其实际应用,以由此使本领域的其它技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施例。

Claims (68)

1.一种方法,包括:
在具有显示器、存储器和一个或多个处理器的电子设备处:
获得媒体项目的集合,其中根据与所述媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序对所述媒体项目排序;
至少部分地基于所述媒体项目的集合中顺序相邻的媒体项目的属性之间的比较来确定所述媒体项目的集合中的一个或多个模式;以及
将所述媒体项目的集合划分成包括多个多项目事件的多个事件,其中:
每个多项目事件包括具有在对应的事件时间范围内的时间指示符的多个所述媒体项目;以及
根据在所述媒体项目的集合中确定的所述一个或多个模式来选择针对多项目事件的所述事件时间范围。
2.根据权利要求1所述的方法,其中针对所述多个多项目事件的所述事件时间范围不重叠。
3.根据权利要求1所述的方法,其中将所述媒体项目的集合划分成多个事件包括:
确定所述媒体项目的集合中的模式,所述模式指示在包括相应日期过渡界限的时间段内发生的相应事件;以及
划分所述媒体项目的集合,以便包括具有在相应日期过渡界限之前的时间指示符的一个或多个项目,和具有在相应日期过渡界限之后的时间指示符的一个或多个项目。
4.根据权利要求1至2中任一项所述的方法,其中:
将所述媒体项目的集合划分成多个事件包括识别所述媒体项目的集合中的多个过渡点;并且
所述过渡点中的一个或多个过渡点各自对应于在所述过渡点处发生的与所述媒体项目的集合对应的相应数据模式的相应变化。
5.根据权利要求4所述的方法,其中与相应媒体项目对应的所述相应数据模式的所述相应变化基于以下中的一者或多者:
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间的时间量;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的物理位置的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的海拔的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的速度的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的网络连接的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间的天气的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间的用户生理指标的变化;
与所述时间顺序中的所述相应媒体项目之前的第一多个媒体项目相关联的个体和与所述时间顺序中的所述相应媒体项目之后的第二多个媒体项目相关联的个体之间的差异;以及
所述时间顺序中的所述相应媒体项目之前的第一多个媒体项目的捕获时间之间的时间内的位置的变化率与所述时间顺序中的所述相应媒体项目之后的第二多个媒体项目的捕获时间之间的时间内的位置的变化率中的差异。
6.根据权利要求1至5中任一项所述的方法,包括,在将所述媒体项目的集合划分成多个事件之后:
至少部分地基于所述媒体项目的集合中的所述一个或多个模式来将包括所述多项目事件中的两个或更多个多项目事件的一组连续事件分组成相应的基于模式的事件组,其中:
所述基于模式的事件组根据所述媒体项目的集合中的与所述基于模式的事件组对应的第一模式的变化而从其他基于模式的事件组被划分;并且
所述基于模式的事件组内的相应多项目事件根据所述媒体项目的集合中的第二模式的变化而从所述基于模式的事件组中的其他事件被划分,其中所述第二模式的所述变化不对应于与所述基于模式的事件组对应的所述第一模式的变化。
7.根据权利要求1至5中任一项所述的方法,其中:
所述方法包括,在将所述媒体项目的集合划分成多个事件之后,将包括所述多项目事件中的两个或更多个多项目事件的一组连续事件分组成多个基于日期的事件组,所述多个基于日期的事件组包括:
包括第一组事件的第一基于日期的事件组,所述第一组事件包括具有在第一日期范围内的时间指示符的项目;和
包括第二组事件的第二基于日期的事件组,所述第二组事件包括具有在第二日期范围内的时间指示符的项目;并且
相应事件包括具有在所述第一日期范围中的时间指示符的一个或多个项目,和具有在所述第二日期范围中的时间指示符的一个或多个项目;并且
所述相应事件被包括在所述第一基于日期的事件组和所述第二基于日期的事件组两者中。
8.根据权利要求1至7中任一项所述的方法,包括:
接收对显示所述媒体项目的集合的相应部分的请求;以及
响应于对显示所述媒体项目的集合的相应部分的所述请求,在所述显示器上显示与所述媒体项目的集合的所述相应部分对应的多个事件的表示。
9.根据权利要求8所述的方法,其中所述多个事件中的相应事件的相应表示包括:
所述相应事件的标识符;
所述相应事件中的项目的位置列表;和
与所述相应事件中的项目对应的一个或多个图像。
10.根据权利要求9所述的方法,其中所述位置列表包括根据所述相应事件中的位置模式来选择的所述相应事件中的项目的位置的子集。
11.根据权利要求9至10中任一项所述的方法,其中选择与所述相应事件中的项目对应的一个或多个图像,以便表示与所述位置列表中的位置相关联的图像。
12.根据权利要求8至11中任一项所述的方法,其中:
所述多个事件的所述表示包括第一事件的第一表示,所述第一表示包括第一多个代表性图像;
所述多个事件的所述表示包括第二事件的第二表示,所述第二表示包括第二多个代表性图像;并且
所述方法包括:
接收对将相应代表性图像从所述第一多个代表性图像移动到所述第二多个代表性图像的请求;以及
响应于接收到对移动所述相应代表性图像的所述请求,从所述第一事件向所述第二事件移动与所述相应代表性图像对应的项目。
13.一种电子设备,包括:
显示器;
一个或多个处理器;
存储器;和
一个或多个程序,其中所述一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序包括用于以下操作的指令:
获得媒体项目的集合,其中根据与所述媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序对所述媒体项目排序;
至少部分地基于所述媒体项目的集合中的顺序相邻的媒体项目的属性之间的比较来确定所述媒体项目的集合中的一个或多个模式;以及
将所述媒体项目的集合划分成包括多个多项目事件的多个事件,其中:
每个多项目事件包括具有在对应的事件时间范围内的时间指示符的多个所述媒体项目;以及
根据在所述媒体项目的集合中确定的一个或多个模式来选择针对多项目事件的所述事件时间范围。
14.一种存储一个或多个程序的非暂态计算机可读存储介质,所述一个或多个程序包括指令,所述指令当由具有显示器的电子设备的一个或多个处理器执行时,使得所述设备:
获得媒体项目的集合,其中根据与所述媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序对所述媒体项目排序;
至少部分地基于所述媒体项目的集合中顺序相邻的媒体项目的属性之间的比较来确定所述媒体项目的集合中的一个或多个模式;以及
将所述媒体项目的集合划分成包括多个多项目事件的多个事件,其中:
每个多项目事件包括具有在对应的事件时间范围内的时间指示符的多个所述媒体项目;以及
根据在所述媒体项目的集合中确定的所述一个或多个模式来选择针对多项目事件的所述事件时间范围。
15.一种电子设备上的图形用户界面,所述电子设备具有显示器、存储器、和用于执行存储在所述存储器中的一个或多个程序的一个或多个处理器,所述图形用户界面包括:
一个或多个用户界面对象;
其中:
获得媒体项目的集合,其中根据与所述媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序对所述媒体项目排序;
至少部分地基于所述媒体项目的集合中顺序相邻的媒体项目的属性之间的比较来确定所述媒体项目的集合中的一个或多个模式;以及
将所述媒体项目的集合划分成包括多个多项目事件的多个事件,其中:
每个多项目事件包括具有在对应的事件时间范围内的时间指示符的多个所述媒体项目;以及
根据在所述媒体项目的集合中确定的所述一个或多个模式来选择针对多项目事件的所述事件时间范围。
16.一种电子设备,包括:
显示器;和
用于获得媒体项目的集合的装置,其中根据与所述媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序对所述媒体项目排序;
用于至少部分地基于所述媒体项目的集合中顺序相邻的媒体项目的属性之间的比较来确定所述媒体项目的集合中的一个或多个模式的装置;和
用于将所述媒体项目的集合划分成包括多个多项目事件的多个事件的装置,其中:
每个多项目事件包括具有在对应的事件时间范围内的时间指示符的多个所述媒体项目;以及
根据在所述媒体项目的集合中确定的所述一个或多个模式来选择针对多项目事件的所述事件时间范围。
17.一种在具有显示器的电子设备中使用的信息处理设备,所述设备包括:
用于获得媒体项目的集合的装置,其中根据与所述媒体项目中的每个媒体项目相关联的时间指示符来按照时间顺序对所述媒体项目排序;
用于至少部分地基于所述媒体项目的集合中顺序相邻的媒体项目的属性之间的比较来确定所述媒体项目的集合中的一个或多个模式的装置;和
用于将所述媒体项目的集合划分成包括多个多项目事件的多个事件的装置,其中:
每个多项目事件包括具有在对应的事件时间范围内的时间指示符的多个所述媒体项目;以及
根据在所述媒体项目的集合中确定的所述一个或多个模式来选择针对多项目事件的所述事件时间范围。
18.一种电子设备,包括:
显示器
一个或多个处理器;
存储器;和
一个或多个程序,其中所述一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序包括用于执行根据权利要求1至12所述的方法中的任一种方法的指令。
19.一种存储一个或多个程序的非暂态计算机可读存储介质,所述一个或多个程序包括指令,所述指令当由具有显示器的电子设备的一个或多个处理器执行时,使得所述设备执行根据权利要求1至12所述的方法中的任一种方法。
20.一种电子设备上的图形用户界面,所述电子设备具有显示器、存储器、和用于执行存储在所述存储器中的一个或多个程序的一个或多个处理器,所述图形用户界面包括根据权利要求1至12所述的方法中的任一种方法所显示的用户界面。
21.一种电子设备,包括:
显示器;和
用于执行根据权利要求1至12所述的方法中的任一种方法的装置。
22.一种在具有显示器的电子设备中使用的信息处理设备,所述设备包括:
用于执行根据权利要求1至12所述的方法中的任一种方法的装置。
23.一种电子设备,包括:
被配置为显示图形用户界面的显示单元;和
耦接至所述显示单元的处理单元,所述处理单元被配置为:
获得媒体项目的集合,其中根据与所述媒体项目中的每个媒体项目相关联的时间标识符来按照时间顺序对所述媒体项目排序;
至少部分地基于所述媒体项目的集合中顺序相邻的媒体项目的属性之间的比较来确定所述媒体项目的集合中的一个或多个模式;以及
将所述媒体项目的集合划分成包括多个多项目事件的多个事件,其中:
每个多项目事件包括具有在对应的事件时间范围内的时间指示符的多个所述媒体项目;以及
根据在所述媒体项目的集合中确定的所述一个或多个模式来选择针对多项目事件的所述事件时间范围。
24.根据权利要求23所述的电子设备,其中针对所述多个多项目事件的所述事件时间范围不重叠。
25.根据权利要求23所述的电子设备,其中将所述媒体项目的集合划分成多个事件包括:
确定所述媒体项目的集合中的模式,所述模式指示在包括相应日期过渡界限的时间段内发生的相应事件;以及
划分所述媒体项目的集合,以便包括具有在相应日期过渡界限之前的时间指示符的一个或多个项目,和具有在相应日期过渡界限之后的时间指示符的一个或多个项目。
26.根据权利要求23至24中任一项所述的电子设备,其中:
将所述媒体项目的集合划分成多个事件包括识别所述媒体项目的集合中的多个过渡点;并且
所述过渡点中的一个或多个过渡点各自对应于在所述过渡点处发生的与所述媒体项目的集合对应的相应数据模式的相应变化。
27.根据权利要求26所述的电子设备,其中与相应媒体项目对应的所述相应数据模式的所述相应变化基于以下中的一者或多者:
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间的时间量;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的物理位置的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的海拔的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的速度的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间检测到的网络连接的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间的天气的变化;
所述相应媒体项目的捕获时间和所述时间顺序中顺序相邻的媒体项目的捕获时间之间的用户生理指标的变化;
与所述时间顺序中的所述相应媒体项目之前的第一多个媒体项目相关联的个体和与所述时间顺序中的所述相应媒体项目之后的第二多个媒体项目相关联的个体之间的差异;和
所述时间顺序中的所述相应媒体项目之前的第一多个媒体项目的捕获时间之间的时间内的位置的变化率与所述时间顺序中的所述相应媒体项目之后的第二多个媒体项目的捕获时间之间的时间内的位置的变化率中的差异。
28.根据权利要求23至27中任一项所述的电子设备,其中所述处理单元被进一步配置为:
在将所述媒体项目的集合划分成多个事件之后,至少部分地基于所述媒体项目的集合中的所述一个或多个模式来将包括所述多项目事件中的两个或更多个多项目事件的一组连续事件分组成相应的基于模式的事件组,其中:
所述基于模式的事件组根据所述媒体项目的集合中的与所述基于模式的事件组对应的第一模式的变化而从其他基于模式的事件组中被划分;并且
所述基于模式的事件组内的相应多项目事件根据所述媒体项目的集合中的第二模式的变化而从所述基于模式的事件组中的其他事件被划分,其中所述第二模式的所述变化不对应于与所述基于模式的事件组对应的所述第一模式的变化。
29.根据权利要求23至27中任一项所述的电子设备,其中所述处理单元被进一步配置为:
在将所述媒体项目的集合划分成多个事件之后,将包括所述多项目事件中的两个或更多个多项目事件的一组连续事件分组成多个基于日期的事件组,所述多个基于日期的事件组包括:
包括第一组事件的第一基于日期的事件组,所述第一组事件包括具有在第一日期范围内的时间指示符的项目;和
包括第二组事件的第二基于日期的事件组,所述第二组事件包括具有在第二日期范围内的时间指示符的项目;并且
相应事件包括具有在所述第一日期范围中的时间指示符的一个或多个项目,和具有在所述第二日期范围中的时间指示符的一个或多个项目;并且
所述相应事件被包括在所述第一基于日期的事件组和所述第二基于日期的事件组两者中。
30.根据权利要求23至29中任一项所述的电子设备,其中所述处理单元被进一步配置为:
接收对使得能够显示所述媒体项目的集合的相应部分的请求;以及
响应于对显示所述媒体项目的集合的所述相应部分的所述请求,使得能够在所述显示单元上显示与所述媒体项目的集合的所述相应部分对应的多个事件的表示。
31.根据权利要求30所述的电子设备,其中所述多个事件中的相应事件的相应表示包括:
所述相应事件的标识符;
所述相应事件中的项目的位置列表;和
与所述相应事件中的项目对应的一个或多个图像。
32.根据权利要求31所述的电子设备,其中所述位置列表包括根据所述相应事件中的位置模式来选择的所述相应事件中的项目的位置的子集。
33.根据权利要求31至32中任一项所述的电子设备,其中选择与所述相应事件中的项目对应的所述一个或多个图像,以便表示与所述位置列表中的位置相关联的图像。
34.根据权利要求30至33中任一项所述的电子设备,其中:
所述多个事件的所述表示包括第一事件的第一表示,所述第一表示包括第一多个代表性图像;
所述多个事件的所述表示包括第二事件的第二表示,所述第二表示包括第二多个代表性图像;并且
所述处理单元被进一步配置为:
接收对将相应代表性图像从所述第一多个表示图像移动到所述第二多个代表性图像的请求;以及
响应于接收到对移动所述相应代表性图像的所述请求,从所述第一事件向所述第二事件移动与所述相应代表性图像对应的项目。
35.一种方法,包括:
在具有显示器、触敏表面、存储器和一个或多个处理器的电子设备处:
获得媒体项目的集合,其中所述媒体项目被组织成粒度级的层次结构,所述粒度级的层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级;
接收对显示根据第一详细粒度级来组织的集合的第一部分的第一请求;
响应于所述第一请求,显示所述媒体项目的第一多个表示,其中:
所述第一多个表示以详细粒度尺寸来显示;并且
所述第一多个表示彼此间隔开详细粒度距离;
接收对显示根据与多个详细粒度级对应的相应总览粒度级来组织的集合的第二部分的第二请求;以及
响应于所述第二请求,显示所述媒体项目的第二多个表示,其中:
所述第二多个表示以小于所述详细粒度尺寸的总览粒度尺寸来显示;并且
所述第二多个表示彼此间隔开小于所述详细粒度距离的总览粒度距离。
36.根据权利要求35所述的方法,包括:
接收对显示根据与所述第一详细粒度级不同的第二详细粒度级来组织的所述集合的第三部分的第三请求;
响应于所述第三请求,显示所述媒体项目的第三多个表示,其中:
所述第三多个表示以所述详细粒度尺寸来显示;并且
所述第三多个表示彼此间隔开所述详细粒度距离。
37.根据权利要求36所述的方法,其中:
所述第一详细粒度级对应于第一时间尺度;
所述第二详细粒度级对应于大于所述第一时间尺度的第二时间尺度;并且
所述总览粒度级对应于大于所述第二时间尺度的第三时间尺度。
38.根据权利要求35至37中任一项所述的方法,其中:
与所述第一详细粒度级对应的所述媒体项目的所述第一多个表示中的所述媒体项目的第一表示包括与第一时间范围中的项目的子集对应的图像;并且
与所述总览粒度级对应的所述媒体项目的所述第二多个表示中的所述媒体项目的第二表示包括:
与所述第一时间范围中的项目的所述子集对应的图像;和
从被包括在所述媒体项目的所述第一表示中的图像省略的所述第一时间范围中的项目的一个或多个图像。
39.根据权利要求35至38中任一项所述的方法,其中:
所述详细粒度距离大于对象选择裕度;并且
所述总览粒度距离小于所述对象选择裕度。
40.根据权利要求35至39中任一项所述的方法,其中:
所述详细粒度尺寸大于最小对象选择尺寸;并且
所述总览粒度尺寸小于所述最小对象选择尺寸。
41.根据权利要求35至40中任一项所述的方法,包括:
检测所述触敏表面上与相应媒体项目的相应表示对应的位置处的轻击输入;以及
响应于检测到所述轻击输入:
根据确定所述相应表示显示在以所述详细粒度尺寸来显示的多个表示中,利用所述相应媒体项目的显示替换所述多个表示的显示;以及
根据确定所述相应表示显示在以所述总览粒度尺寸来显示的多个表示中,继续显示所述多个表示。
42.根据权利要求35和37至40中任一项所述的方法,包括:
在以所述总览粒度尺寸来显示所述媒体项目的所述第二多个表示的同时,检测到所述触敏表面上与所述媒体项目的所述第二多个表示中的第一媒体项目的第一表示对应的位置处的接触;以及
响应于检测到所述接触:
显示所述第一媒体项目的放大表示。
43.根据权利要求42所述的方法,包括:
响应于检测到所述接触,停止显示所述第一媒体项目的所述第一表示。
44.根据权利要求42至43中任一项所述的方法,包括:
在显示所述第一媒体项目的所述放大表示的同时,检测到所述接触从所述触敏表面的抬离;以及
响应于检测到所述接触从所述触敏表面的抬离,利用所述相应媒体项目的显示替换所述多个表示的显示。
45.根据权利要求43所述的方法,包括:
在显示所述第一媒体项目的所述放大表示的同时,检测到所述接触移动到所述触敏表面上与所述媒体项目的所述第二多个表示中的第二媒体项目的第二表示对应的位置;以及
响应于检测到所述接触的移动:
停止显示所述第一媒体项目的所述放大表示;
重新显示所述第一媒体项目的所述第一表示;
显示所述第二媒体项目的放大表示;以及
停止显示所述第二媒体项目的所述第二表示。
46.根据权利要求35至45中任一项所述的方法,其中:
将与所述第一详细粒度级对应的第一多个表示分成多个组,并且将所述第一多个表示中的不同组的表示分开至少第一距离;以及
将与所述总览粒度级对应的所述第二多个表示分成多个组,并且将所述第二多个表示中的不同组的表示分开小于所述第一距离的第二距离。
47.一种电子设备,包括:
显示器;
触敏表面;
一个或多个处理器;
存储器;和
一个或多个程序,其中所述一个或多个程序被存储在所述存储器中,并且被配置为由所述一个或多个处理器执行,所述一个或多个程序包括用于以下操作的指令:
获得媒体项目的集合,其中所述媒体项目被组织成粒度级的层次结构,所述粒度级的层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级;
接收对显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求;
响应于所述第一请求,显示所述媒体项目的第一多个表示,其中:
所述第一多个表示以详细粒度尺寸来显示;并且
所述第一多个表示彼此间隔开详细粒度距离;
接收对显示根据与多个详细粒度级对应的相应总览粒度级来组织的所述集合的第二部分的第二请求;以及
响应于所述第二请求,显示所述媒体项目的第二多个表示,其中:
所述第二多个表示以小于所述详细粒度尺寸的总览粒度尺寸来显示;并且
所述第二多个表示彼此间隔开小于详细粒度距离的总览粒度距离。
48.一种存储一个或多个程序的非暂态计算机可读存储介质,所述一个或多个程序包括指令,所述指令当由具有显示器和触敏表面的电子设备的一个或多个处理器执行时,使得所述设备:
获得媒体项目的集合,其中所述媒体项目被组织成粒度级的层次结构,所述粒度级的层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级;
接收对显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求;
响应于所述第一请求,显示所述媒体项目的第一多个表示,其中:
所述第一多个表示以详细粒度尺寸来显示;以及
所述第一多个表示彼此间隔开详细粒度距离;
接收对显示根据与多个详细粒度级对应的相应总览粒度级来组织的所述集合的第二部分的第二请求;以及
响应于所述第二请求,显示所述媒体项目的第二多个表示,其中:
所述第二多个表示以小于所述详细粒度尺寸的总览粒度尺寸来显示;以及
所述第二多个表示彼此间隔开小于所述详细粒度距离的总览粒度距离。
49.一种具有显示器、触敏显示表面、存储器、和用于执行存储在所述存储器中的一个或多个程序的一个或多个处理器的电子设备上的图形用户界面,所述图形用户界面包括:
一个或多个界面对象;
其中:
获得媒体项目的集合,其中所述媒体项目被组织成粒度级的层次结构,所述粒度级的层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级;
接收对显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求;
响应于所述第一请求,显示所述媒体项目的第一多个表示,其中:
所述第一多个表示以详细粒度尺寸来显示;并且
所述第一多个表示彼此间隔开详细粒度距离;
接收对显示根据与多个详细粒度级对应的相应总览粒度级来组织的所述集合的第二部分的第二请求;以及
响应于所述第二请求,显示所述媒体项目的第二多个表示,其中:
所述第二多个表示以小于所述详细粒度尺寸的总览粒度尺寸来显示;以及
所述第二多个表示彼此间隔开小于所述详细粒度距离的总览粒度距离。
50.一种电子设备,包括:
显示器;
触敏表面;和
用于获得媒体项目的集合的装置,其中所述媒体项目被组织成粒度级的层次结构,所述粒度级的层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级;
用于接收对显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求的装置;
用于响应于所述第一请求来显示所述媒体项目的第一多个表示的装置,其中:
所述第一多个表示以详细粒度尺寸来显示;并且
所述第一多个表示彼此间隔开详细粒度距离;
用于接收对显示根据与多个详细粒度级对应的相应总览粒度级来组织的所述集合的第二部分的第二请求的装置;以及
用于响应于所述第二请求来显示所述媒体项目的第二多个表示的装置,其中:
所述第二多个表示以小于所述详细粒度尺寸的总览粒度尺寸来显示;并且
所述第二多个表示彼此间隔开小于所述详细粒度距离的总览粒度距离。
51.一种在具有显示器和触敏表面的电子设备中使用的信息处理设备,所述设备包括:
用于获得媒体项目的集合的装置,其中所述媒体项目被组织成粒度级的层次结构,所述粒度级的层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级;
用于接收对显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求的装置;
用于响应于所述第一请求来显示所述媒体项目的第一多个表示的装置,其中:
所述第一多个表示以详细粒度尺寸来显示;以及
所述第一多个表示彼此间隔开详细粒度距离;
用于接收对显示根据与多个详细粒度级对应的相应总览粒度级来组织的所述集合的第二部分的第二请求的装置;以及
用于响应于所述第二请求来显示所述媒体项目的第二多个表示的模块,其中:
所述第二多个表示以小于所述详细粒度尺寸的总览粒度尺寸来显示;并且
所述第二多个表示彼此间隔开小于所述详细粒度距离的总览粒度距离。
52.一种电子设备,包括:
显示器;
触敏表面;
一个或多个处理器;
存储器;和
一个或多个程序,其中所述一个或多个程序被存储在所述存储器中,并且被配置为由所述一个或多个处理器执行,所述一个或多个程序包括:用于执行根据权利要求35至46所述的方法中的任一种方法的指令。
53.一种存储一个或多个程序的非暂态计算机可读存储介质,所述一个或多个程序包括指令,所述指令当由具有显示器和触敏表面的电子设备的一个或多个处理器执行时,使得所述设备执行根据权利要求35至46所述的方法中的任一种方法。
54.一种电子设备上的图形用户界面,所述电子设备具有显示器、触敏表面、存储器、和用于执行存储在所述存储器中的一个或多个程序的一个或多个处理器,所述图形用户界面包括根据权利要求35至46所述的方法中的任一种方法所显示的用户界面。
55.一种电子设备,包括:
显示器;
触敏表面;和
用于执行根据权利要求35至46所述的方法中的任一种方法的装置。
56.一种在具有显示器和触敏表面的电子设备中使用的信息处理设备,所述设备包括:
用于执行根据权利要求35至46所述的方法中的任一种方法的装置。
57.一种电子设备,包括:
被配置为显示图形用户界面的显示单元;
被配置为接收接触的触敏表面单元;和
耦接至所述显示单元和所述触敏表面单元的处理单元,所述处理单元被配置为:
获得媒体项目的集合,其中所述媒体项目被组织成粒度级的层次结构,所述粒度级的层次结构包括一个或多个总览粒度级内的一个或多个详细粒度级;
接收对在所述显示单元上显示根据第一详细粒度级来组织的所述集合的第一部分的第一请求;
响应于所述第一请求,使得能够显示所述媒体项目的第一多个表示,其中:
所述第一多个表示以详细粒度尺寸来显示;并且
所述第一多个表示彼此间隔开详细粒度距离;
接收对在所述显示单元上显示根据与多个详细粒度级对应的相应总览粒度级来组织的所述集合的第二部分的第二请求;以及
响应于所述第二请求,使得能够显示所述媒体项目的第二多个表示,其中:
所述第二多个表示以小于所述详细粒度尺寸的总览粒度尺寸来显示;并且
所述第二多个表示彼此间隔开小于所述详细粒度距离的总览粒度距离。
58.根据权利要求57所述的电子设备,其中所述处理单元被进一步配置为:
接收对在所述显示单元上显示根据与所述第一详细粒度级不同的第二详细粒度级来组织的所述集合的第三部分的第三请求;
响应于所述第三请求,使得能够显示所述媒体项目的第三多个表示,其中:
所述第三多个表示以所述详细粒度尺寸来显示;并且
所述第三多个表示彼此间隔开所述详细粒度距离。
59.根据权利要求58所述的电子设备,其中:
所述第一详细粒度级对应于第一时间尺度;
所述第二详细粒度级对应于大于所述第一时间尺度的第二时间尺度;并且
所述总览粒度级对应于大于所述第二时间尺度的第三时间尺度。
60.根据权利要求57至59中任一项所述的电子设备,其中:
与所述第一详细粒度级对应的所述媒体项目的所述第一多个表示中的所述媒体项目的第一表示包括与第一时间范围中的项目的子集对应的图像;并且
与所述总览粒度级对应的所述媒体项目的所述第二多个表示中的所述媒体项目的第二表示包括:
与所述第一时间范围中的项目的所述子集对应的图像;和
从包括在所述媒体项目的所述第一表示中的图像省略的第一时间范围中的项目的一个或多个图像。
61.根据权利要求57至60中任一项所述的电子设备,其中:
所述详细粒度距离大于对象选择裕度;并且
所述总览粒度距离小于所述对象选择裕度。
62.根据权利要求57至61中任一项所述的电子设备,其中:
所述详细粒度尺寸大于最小对象选择尺寸;并且
所述总览粒度尺寸小于所述最小对象选择尺寸。
63.根据权利要求57至62中任一项所述的电子设备,其中所述处理单元被进一步配置为:
检测所述触敏表面单元上与相应媒体项目的相应表示对应的位置处的轻击输入;以及
响应于检测到所述轻击输入:
根据确定所述相应表示显示在以所述详细粒度尺寸来显示的多个表示中,利用所述相应媒体项目的显示替换所述多个表示的显示;以及
根据确定所述相应表示显示在以所述总览粒度尺寸来显示的多个表示中,继续显示所述多个表示。
64.根据权利要求57和59至62中任一项所述的电子设备,其中所述处理单元被进一步配置为:
在以所述总览粒度尺寸来显示所述媒体项目的所述第二多个表示的同时,检测到所述触敏表面单元上与所述媒体项目的所述第二多个表示中的第一媒体项目的第一表示对应的位置处的接触;以及
响应于检测到所述接触:
使得能够显示所述第一媒体项目的放大表示。
65.根据权利要求64所述的电子设备,其中所述处理单元被进一步配置为:
响应于检测到所述接触,停止显示所述第一媒体项目的所述第一表示。
66.根据权利要求64至65中任一项所述的电子设备,其中所述处理单元被进一步配置为:
在显示所述第一媒体项目的所述放大表示的同时,检测到所述接触从所述触敏表面单元的抬离;以及
响应于检测到所述接触从所述触敏表面单元的抬离,利用所述相应媒体项目的显示替换所述多个表示的显示。
67.根据权利要求65所述的电子设备,其中所述处理单元被进一步配置为:
在显示所述第一媒体项目的所述放大表示的同时,检测到所述接触移动到所述触敏表面单元上与所述媒体项目的所述第二多个表示中的第二媒体项目的第二表示对应的位置;以及
响应于检测到所述接触的移动:
停止显示所述第一媒体项目的所述放大表示;
使得能够重新显示所述第一媒体项目的所述第一表示;
使得能够显示所述第二媒体项目的放大表示;以及
停止显示所述第二媒体项目的所述第二表示。
68.根据权利要求57至67中任一项所述的电子设备,其中:
将与所述第一详细粒度级对应的第一多个表示分成多个组,并且将所述第一多个表示中的不同组的表示分开至少第一距离;以及
将与所述总览粒度级的所述第二多个表示分成多个组,并且将所述第二多个表示中的不同组的表示分开小于所述第一距离的第二距离。
CN201480015420.5A 2013-03-15 2014-02-27 用于组织和呈现媒体项目的集合的设备、方法和图形用户界面 Active CN105103154B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910116065.5A CN110046272B (zh) 2013-03-15 2014-02-27 用于组织和呈现媒体项目的集合的设备、方法和图形用户界面

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361801448P 2013-03-15 2013-03-15
US61/801,448 2013-03-15
US14/183,405 2014-02-18
US14/183,405 US9471200B2 (en) 2013-03-15 2014-02-18 Device, method, and graphical user interface for organizing and presenting a collection of media items
PCT/US2014/018908 WO2014149488A1 (en) 2013-03-15 2014-02-27 Device, method, and graphical user interface for organizing and presenting a collection of media items

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910116065.5A Division CN110046272B (zh) 2013-03-15 2014-02-27 用于组织和呈现媒体项目的集合的设备、方法和图形用户界面

Publications (2)

Publication Number Publication Date
CN105103154A true CN105103154A (zh) 2015-11-25
CN105103154B CN105103154B (zh) 2019-02-19

Family

ID=51534375

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910116065.5A Active CN110046272B (zh) 2013-03-15 2014-02-27 用于组织和呈现媒体项目的集合的设备、方法和图形用户界面
CN201480015420.5A Active CN105103154B (zh) 2013-03-15 2014-02-27 用于组织和呈现媒体项目的集合的设备、方法和图形用户界面

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910116065.5A Active CN110046272B (zh) 2013-03-15 2014-02-27 用于组织和呈现媒体项目的集合的设备、方法和图形用户界面

Country Status (8)

Country Link
US (3) US9471200B2 (zh)
EP (1) EP2973009A1 (zh)
JP (2) JP6133486B2 (zh)
KR (1) KR101774679B1 (zh)
CN (2) CN110046272B (zh)
AU (4) AU2014238116B2 (zh)
HK (1) HK1215093A1 (zh)
WO (1) WO2014149488A1 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109313651A (zh) * 2016-06-12 2019-02-05 苹果公司 用于检索上下文相关媒体内容的用户界面
CN110333859A (zh) * 2019-05-06 2019-10-15 北京字节跳动网络技术有限公司 页面创建方法、装置、电子设备和计算机可读存储介质
CN110383229A (zh) * 2017-05-16 2019-10-25 苹果公司 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面
US10572132B2 (en) 2015-06-05 2020-02-25 Apple Inc. Formatting content for a reduced-size user interface
US10732790B2 (en) 2010-01-06 2020-08-04 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US10904426B2 (en) 2006-09-06 2021-01-26 Apple Inc. Portable electronic device for photo management
CN112527529A (zh) * 2020-12-18 2021-03-19 天津中新智冠信息技术有限公司 消息处理方法、装置、电子设备及存储介质
US11307737B2 (en) 2019-05-06 2022-04-19 Apple Inc. Media browsing user interface with intelligently selected representative media items
US11334209B2 (en) 2016-06-12 2022-05-17 Apple Inc. User interfaces for retrieving contextually relevant media content
US11782575B2 (en) 2018-05-07 2023-10-10 Apple Inc. User interfaces for sharing contextually relevant media content
US11854539B2 (en) 2018-05-07 2023-12-26 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11921978B2 (en) 2017-05-16 2024-03-05 Apple Inc. Devices, methods, and graphical user interfaces for navigating, displaying, and editing media items with multiple display modes

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9310907B2 (en) 2009-09-25 2016-04-12 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
EP3855297A3 (en) 2009-09-22 2021-10-27 Apple Inc. Device method and graphical user interface for manipulating user interface objects
US9552376B2 (en) 2011-06-09 2017-01-24 MemoryWeb, LLC Method and apparatus for managing digital files
JP5747678B2 (ja) * 2011-06-17 2015-07-15 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US9471200B2 (en) 2013-03-15 2016-10-18 Apple Inc. Device, method, and graphical user interface for organizing and presenting a collection of media items
KR102115397B1 (ko) * 2013-04-01 2020-05-26 삼성전자주식회사 휴대 장치 및 휴대 장치의 재생목록 표시 방법
CN104571897A (zh) * 2013-10-24 2015-04-29 富泰华工业(深圳)有限公司 具有动态拼图界面的电子装置及控制方法与系统
JP2015099505A (ja) * 2013-11-19 2015-05-28 キヤノン株式会社 データ処理装置およびデータ処理方法
US20160313910A1 (en) * 2013-11-28 2016-10-27 Samsung Electronics Co., Ltd. Method and device for organizing a plurality of items on an electronic device
US10386993B2 (en) * 2013-12-03 2019-08-20 Autodesk, Inc. Technique for searching and viewing video material
JP6390213B2 (ja) * 2014-06-30 2018-09-19 ブラザー工業株式会社 表示制御装置、表示制御方法及び表示制御プログラム
CN106575230A (zh) 2014-09-02 2017-04-19 苹果公司 用于可变触觉输出的语义框架
US10725614B2 (en) * 2014-11-06 2020-07-28 Dropbox, Inc. Searching digital content
US10681155B1 (en) * 2015-01-13 2020-06-09 Google Llc Presenting user activity timeline in a colloquial style
US10613732B2 (en) 2015-06-07 2020-04-07 Apple Inc. Selecting content items in a user interface display
JP6655906B2 (ja) * 2015-08-07 2020-03-04 キヤノン株式会社 情報処理装置、情報処理方法、およびプログラム
US10474877B2 (en) * 2015-09-22 2019-11-12 Google Llc Automated effects generation for animated content
US11138207B2 (en) 2015-09-22 2021-10-05 Google Llc Integrated dynamic interface for expression-based retrieval of expressive media content
US10380097B1 (en) * 2015-12-17 2019-08-13 Securus Technologies, Inc. Physiological-based detection and tagging in communications data
DK201670595A1 (en) 2016-06-11 2018-01-22 Apple Inc Configuring context-specific user interfaces
US10324973B2 (en) 2016-06-12 2019-06-18 Apple Inc. Knowledge graph metadata network based on notable moments
DK179823B1 (en) * 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
WO2017218194A1 (en) 2016-06-12 2017-12-21 Apple Inc. User interfaces for retrieving contextually relevant media content
DK180122B1 (en) 2016-06-12 2020-05-19 Apple Inc. Devices, methods and graphical user interfaces for providing haptic feedback
US10832221B2 (en) * 2016-07-21 2020-11-10 Microsoft Technology Licensing, Llc Storage and structure of calendars with an infinite set of intentional-time events for calendar applications
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
US10958842B2 (en) * 2016-09-19 2021-03-23 Samsung Electronics Co., Ltd. Method of displaying images in a multi-dimensional mode based on personalized topics
KR102596477B1 (ko) 2016-09-23 2023-11-02 애플 인크. 아바타 생성 및 편집
US20180315414A1 (en) 2017-04-26 2018-11-01 International Business Machines Corporation Adaptive digital assistant and spoken genome
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
USD901524S1 (en) * 2018-03-06 2020-11-10 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
US10792557B1 (en) * 2018-03-16 2020-10-06 Gemiini Educational Systems, Inc. Memory puzzle system
US11243996B2 (en) 2018-05-07 2022-02-08 Apple Inc. Digital asset search user interface
US11086935B2 (en) 2018-05-07 2021-08-10 Apple Inc. Smart updates from historical database changes
US10803135B2 (en) 2018-09-11 2020-10-13 Apple Inc. Techniques for disambiguating clustered occurrence identifiers
US10846343B2 (en) 2018-09-11 2020-11-24 Apple Inc. Techniques for disambiguating clustered location identifiers
US10936178B2 (en) 2019-01-07 2021-03-02 MemoryWeb, LLC Systems and methods for analyzing and organizing digital photos and videos
WO2020227273A1 (en) * 2019-05-06 2020-11-12 Apple Inc. Media browsing user interface with intelligently selected representative media items
DK202070616A1 (en) 2020-02-14 2022-01-14 Apple Inc User interfaces for workout content
US11281371B1 (en) 2020-10-19 2022-03-22 Gopro, Inc. Interface for presenting media collections
US20220382811A1 (en) * 2021-06-01 2022-12-01 Apple Inc. Inclusive Holidays

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6950989B2 (en) * 2000-12-20 2005-09-27 Eastman Kodak Company Timeline-based graphical user interface for efficient image database browsing and retrieval
US7970240B1 (en) * 2001-12-17 2011-06-28 Google Inc. Method and apparatus for archiving and visualizing digital images
JP2004302958A (ja) * 2003-03-31 2004-10-28 Kyocera Mita Corp 情報入力装置及び画像形成装置
US20040268393A1 (en) * 2003-05-08 2004-12-30 Hunleth Frank A. Control framework with a zoomable graphical user interface for organizing, selecting and launching media items
JP4389161B2 (ja) * 2004-04-12 2009-12-24 ソニー株式会社 表示装置及び表示方法
CN1764262A (zh) * 2004-10-20 2006-04-26 奥林巴斯株式会社 图像管理装置、照相机和图像管理装置的显示方法
JP2006195804A (ja) * 2005-01-14 2006-07-27 Konica Minolta Photo Imaging Inc 表示制御プログラム及び制御装置
US20060168542A1 (en) * 2005-01-25 2006-07-27 Microsoft Corporation Space efficient lists for thumbnails
US7725837B2 (en) * 2005-03-31 2010-05-25 Microsoft Corporation Digital image browser
JP4757527B2 (ja) * 2005-04-25 2011-08-24 ソニー エリクソン モバイル コミュニケーションズ, エービー 表示制御装置、表示制御方法、携帯端末装置及び表示制御プログラム
KR20070059313A (ko) * 2005-12-06 2007-06-12 삼성전자주식회사 애플리케이션 스케일링 기능을 갖는 멀티미디어 시스템 및애플리케이션 스케일링 방법과 그 방법을 수행하는프로그램이 기록된 기록매체
US7668867B2 (en) * 2006-03-17 2010-02-23 Microsoft Corporation Array-based discovery of media items
US9507778B2 (en) * 2006-05-19 2016-11-29 Yahoo! Inc. Summarization of media object collections
CN101356493A (zh) * 2006-09-06 2009-01-28 苹果公司 用于照片管理的便携式电子装置
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US7779358B1 (en) * 2006-11-30 2010-08-17 Adobe Systems Incorporated Intelligent content organization based on time gap analysis
JP2008146453A (ja) * 2006-12-12 2008-06-26 Sony Corp 映像信号出力装置、操作入力処理方法
US8276098B2 (en) 2006-12-22 2012-09-25 Apple Inc. Interactive image thumbnails
JP5034661B2 (ja) * 2007-05-07 2012-09-26 ソニー株式会社 画像管理装置、画像表示装置、撮像装置、および、これらにおける処理方法ならびに当該方法をコンピュータに実行させるプログラム
US9619143B2 (en) 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
WO2009086194A2 (en) * 2007-12-19 2009-07-09 Nevins David C Apparatus, system, and method for organizing information by time and place
AU2007249153B2 (en) * 2007-12-20 2010-08-26 Canon Kabushiki Kaisha A method of browsing media items using thumbnails
US8150098B2 (en) 2007-12-20 2012-04-03 Eastman Kodak Company Grouping images by location
JP4973585B2 (ja) * 2008-04-24 2012-07-11 株式会社ニコン 画像のグループ化装置、およびカメラ
JP2008226282A (ja) * 2008-06-26 2008-09-25 Sony Corp 表示装置、電子機器及び表示方法
CN102187359B (zh) * 2008-10-14 2014-03-26 惠普发展公司,有限责任合伙企业 使用标签的动态内容分类
KR20100044341A (ko) 2008-10-22 2010-04-30 엘지전자 주식회사 이동 단말기 및 이를 이용한 스케쥴러 제공 방법
EP2207342B1 (en) * 2009-01-07 2017-12-06 LG Electronics Inc. Mobile terminal and camera image control method thereof
KR20100115547A (ko) * 2009-04-20 2010-10-28 에스케이 텔레콤주식회사 컨텐츠 주밍 방법과 그를 위한 터치 스크린 단말기 및 컴퓨터로 읽을 수 있는 기록매체
US9383916B2 (en) 2009-09-30 2016-07-05 Microsoft Technology Licensing, Llc Dynamic image presentation
US20110099199A1 (en) * 2009-10-27 2011-04-28 Thijs Stalenhoef Method and System of Detecting Events in Image Collections
US8793611B2 (en) 2010-01-06 2014-07-29 Apple Inc. Device, method, and graphical user interface for manipulating selectable user interface objects
US20110163972A1 (en) * 2010-01-06 2011-07-07 Freddy Allen Anzures Device, Method, and Graphical User Interface for Interacting with a Digital Photo Frame
US8957866B2 (en) * 2010-03-24 2015-02-17 Microsoft Corporation Multi-axis navigation
US20110246882A1 (en) * 2010-03-30 2011-10-06 Microsoft Corporation Visual entertainment timeline
CN101894147A (zh) * 2010-06-29 2010-11-24 深圳桑菲消费通信有限公司 一种电子相册聚类管理的方法
KR101694154B1 (ko) 2010-06-29 2017-01-09 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
JP2012014519A (ja) * 2010-07-01 2012-01-19 Canon Inc 表示制御装置
US8634662B2 (en) 2010-08-25 2014-01-21 Apple Inc. Detecting recurring events in consumer image collections
US8584015B2 (en) * 2010-10-19 2013-11-12 Apple Inc. Presenting media content items using geographical data
JP5699595B2 (ja) * 2010-12-24 2015-04-15 株式会社ニコン 画像処理装置、画像分類プログラム、及び、画像表示プログラム
US20130022282A1 (en) * 2011-07-19 2013-01-24 Fuji Xerox Co., Ltd. Methods for clustering collections of geo-tagged photographs
US20150026159A1 (en) * 2012-03-05 2015-01-22 Evresearch Ltd Digital Resource Set Integration Methods, Interfaces and Outputs
JP5435068B2 (ja) * 2012-04-27 2014-03-05 ソニー株式会社 ファイル管理装置および画像表示装置
US9471200B2 (en) 2013-03-15 2016-10-18 Apple Inc. Device, method, and graphical user interface for organizing and presenting a collection of media items
KR102290419B1 (ko) * 2015-01-13 2021-08-18 삼성전자주식회사 디지털 컨텐츠의 시각적 내용 분석을 통해 포토 스토리를 생성하는 방법 및 장치

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10904426B2 (en) 2006-09-06 2021-01-26 Apple Inc. Portable electronic device for photo management
US11601584B2 (en) 2006-09-06 2023-03-07 Apple Inc. Portable electronic device for photo management
US11592959B2 (en) 2010-01-06 2023-02-28 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US11099712B2 (en) 2010-01-06 2021-08-24 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US10732790B2 (en) 2010-01-06 2020-08-04 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US10572132B2 (en) 2015-06-05 2020-02-25 Apple Inc. Formatting content for a reduced-size user interface
US11334209B2 (en) 2016-06-12 2022-05-17 Apple Inc. User interfaces for retrieving contextually relevant media content
CN109684491B (zh) * 2016-06-12 2020-10-23 苹果公司 用于检索上下文相关媒体内容的用户界面
US11941223B2 (en) 2016-06-12 2024-03-26 Apple Inc. User interfaces for retrieving contextually relevant media content
US10891013B2 (en) 2016-06-12 2021-01-12 Apple Inc. User interfaces for retrieving contextually relevant media content
CN109313651A (zh) * 2016-06-12 2019-02-05 苹果公司 用于检索上下文相关媒体内容的用户界面
CN109684491A (zh) * 2016-06-12 2019-04-26 苹果公司 用于检索上下文相关媒体内容的用户界面
US11681408B2 (en) 2016-06-12 2023-06-20 Apple Inc. User interfaces for retrieving contextually relevant media content
CN110383229A (zh) * 2017-05-16 2019-10-25 苹果公司 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面
US11921978B2 (en) 2017-05-16 2024-03-05 Apple Inc. Devices, methods, and graphical user interfaces for navigating, displaying, and editing media items with multiple display modes
CN110383229B (zh) * 2017-05-16 2023-06-02 苹果公司 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面
US11782575B2 (en) 2018-05-07 2023-10-10 Apple Inc. User interfaces for sharing contextually relevant media content
US11900923B2 (en) 2018-05-07 2024-02-13 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11854539B2 (en) 2018-05-07 2023-12-26 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11307737B2 (en) 2019-05-06 2022-04-19 Apple Inc. Media browsing user interface with intelligently selected representative media items
CN110333859B (zh) * 2019-05-06 2023-05-30 北京字节跳动网络技术有限公司 页面创建方法、装置、电子设备和计算机可读存储介质
US11625153B2 (en) 2019-05-06 2023-04-11 Apple Inc. Media browsing user interface with intelligently selected representative media items
CN110333859A (zh) * 2019-05-06 2019-10-15 北京字节跳动网络技术有限公司 页面创建方法、装置、电子设备和计算机可读存储介质
US11947778B2 (en) 2019-05-06 2024-04-02 Apple Inc. Media browsing user interface with intelligently selected representative media items
CN112527529A (zh) * 2020-12-18 2021-03-19 天津中新智冠信息技术有限公司 消息处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
US20220171508A1 (en) 2022-06-02
KR101774679B1 (ko) 2017-09-04
EP2973009A1 (en) 2016-01-20
AU2017203287A1 (en) 2017-06-08
HK1215093A1 (zh) 2016-08-12
AU2019203932B2 (en) 2020-10-22
JP2017168113A (ja) 2017-09-21
AU2019203932A1 (en) 2019-06-27
KR20150131257A (ko) 2015-11-24
US20140282011A1 (en) 2014-09-18
JP6133486B2 (ja) 2017-05-24
CN105103154B (zh) 2019-02-19
CN110046272A (zh) 2019-07-23
US11954302B2 (en) 2024-04-09
AU2014238116B2 (en) 2017-02-23
JP2016519798A (ja) 2016-07-07
JP6469163B2 (ja) 2019-02-13
US9471200B2 (en) 2016-10-18
US20170031548A1 (en) 2017-02-02
AU2014238116A1 (en) 2015-09-24
WO2014149488A1 (en) 2014-09-25
CN110046272B (zh) 2024-01-02
AU2021200174A1 (en) 2021-03-18

Similar Documents

Publication Publication Date Title
CN105103154A (zh) 用于组织和呈现媒体项目的集合的设备、方法和图形用户界面
CN205608689U (zh) 电子设备以及用于与用户界面元件交互的装置
CN104487929B (zh) 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
CN105264479B (zh) 用于对用户界面分级结构进行导航的设备、方法和图形用户界面
CN110308853B (zh) 用于移动用户界面对象的设备、方法和图形用户界面
CN103052935B (zh) 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口
CN104885050B (zh) 用于确定是滚动还是选择内容的设备、方法和图形用户界面
CN105264476A (zh) 用于提供导航和搜索功能的装置、方法和图形用户界面
CN105955520A (zh) 用于控制媒体呈现的设备和方法
CN106415722A (zh) 音乐正在播放用户界面
CN105144067A (zh) 用于调节控件的外观的设备、方法和图形用户界面
CN103186343A (zh) 用于调整内容查看和文本输入接口的大小的装置、方法和图形用户接口
CN105283840A (zh) 用于同步两个或更多个显示器的设备、方法和图形用户界面
CN104903834A (zh) 用于在触摸输入到显示输出关系之间过渡的设备、方法和图形用户界面
CN103218148A (zh) 用于配置与用户接口的受约束的交互的装置、方法和图形用户接口
CN104487930A (zh) 用于移动和放置用户界面对象的设备、方法和图形用户界面
CN106126047B (zh) 用于显示和使用菜单的设备、方法和图形用户界面

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1215093

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant