CN105264477B - 用于移动用户界面对象的设备、方法和图形用户界面 - Google Patents

用于移动用户界面对象的设备、方法和图形用户界面 Download PDF

Info

Publication number
CN105264477B
CN105264477B CN201480032749.2A CN201480032749A CN105264477B CN 105264477 B CN105264477 B CN 105264477B CN 201480032749 A CN201480032749 A CN 201480032749A CN 105264477 B CN105264477 B CN 105264477B
Authority
CN
China
Prior art keywords
contact
unit
movement
content
content element
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480032749.2A
Other languages
English (en)
Other versions
CN105264477A (zh
Inventor
N·赞贝蒂
C·G·卡鲁纳穆尼
I·乔德里
C·P·福斯
E·M·比斯托拉斯
K·S·麦康伯
K·W·劳恩比勒
L·S·布劳顿
A·弗雷德林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Priority to CN201910579739.5A priority Critical patent/CN110308853B/zh
Publication of CN105264477A publication Critical patent/CN105264477A/zh
Application granted granted Critical
Publication of CN105264477B publication Critical patent/CN105264477B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • G06F3/04855Interaction with scrollbars
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus

Abstract

一种具有显示器和触敏表面的电子设备显示具有多个内容单元的用户界面,其中沿用户界面中的第一轴布置内容单元,并且相应内容单元与对应元数据相关联。该设备检测触敏表面上的接触并检测该接触的第一移动。响应于检测到该接触的第一移动,该设备根据第一移动而垂直于用户界面中的第一轴移动第一组一个或多个内容单元,并且针对第一组内容单元中的一个或多个相应内容单元,该设备显示与刚检测到接触的第一移动之前未显示的相应内容单元相邻的相应内容单元的元数据。

Description

用于移动用户界面对象的设备、方法和图形用户界面
技术领域
本发明整体涉及具有触敏表面的电子设备,包括但不限于具有检测用于移动用户界面对象的输入的触敏表面的电子设备。
背景技术
近年来,将触敏表面用作计算机和其他电子计算设备的输入设备已显著增多。示例性触敏表面包括触摸板和触摸屏显示器。此类表面广泛用于操控在计算机或其他电子计算设备上显示的用户界面对象。
示例性用户界面对象包括数字图像、视频、文本、图标、控制元件诸如按钮和其他图形。但是,用于操控用户界面对象的方法是麻烦且低效的。例如,使用一系列基于鼠标的输入来选择一个或多个用户界面内容单元并移动所选择的用户界面内容单元任务繁重,并且给用户带来显著的认知负担。此外,这些方法花费比所需时间更长的时间,从而浪费能量。这后一考虑在电池驱动的设备中是特别重要的。此外,连续显示与用户界面中显示的用户界面内容单元相关联的元数据效率不高,并且可能分散用户注意力,这降低了用户使用设备时的效率。
发明内容
因此,电子设备需要具有更快、更有效的方法和界面以用于移动用户界面对象。此类方法和界面任选地补充或替代用于移动用户界面对象的常规方法。此类方法和界面减小对用户所造成的认知负担并产生更有效的人机界面。对于电池驱动的设备,此类方法和界面节省了功率并增加了电池充电之间的间隔。
通过所公开的设备减少或消除了与用于具有触敏表面的电子设备的用户界面相关联的上述缺陷和其他问题。在一些实施例中,设备是台式计算机。在一些实施例中,设备是便携式的(例如,笔记本电脑、平板电脑或手持设备)。在一些实施例中,设备具有触摸板。在一些实施例中,设备具有触敏显示器(也被称为“触摸屏”或“触摸屏显示器”)。在一些实施例中,设备具有图形用户界面(GUI)、一个或多个处理器、存储器、以及存储在存储器中以用于执行多个功能的一个或多个模块、程序或指令集。在一些实施例中,用户主要通过触敏表面上的手指接触和手势来与GUI进行交互。在一些实施例中,这些功能任选地包括图像编辑、绘图、展示、文字处理、网页创建、盘编辑、电子表格制作、玩游戏、接打电话、视频会议、收发电子邮件、即时消息通信、健身支持、数字摄影、数字视频记录、网络浏览、数字音乐播放、和/或数字视频播放。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。
根据一些实施例,一种方法是在具有显示器和触敏表面的电子设备处执行的。该方法包括:在显示器上显示具有喜爱的导航轴的用户界面。该方法还包括,在显示器上显示用户界面时,检测触敏表面上的接触,并检测接触在触敏表面上的第一移动,其中接触的第一移动包括:第一移动在沿喜爱的导航轴的方向上的第一分量,以及第一移动在不同于喜爱的导航轴的方向上的第二分量。该方法还包括,响应于检测到接触的第一移动:根据确定第一移动满足方向锁定终止标准,根据第一移动的第一分量和第一移动的第二分量来在二维中移动用户界面的一个或多个用户界面对象;根据确定第一移动不满足方向锁定终止标准,根据第一移动的第一分量来沿喜爱的导航轴在一维中移动用户界面的一个或多个用户界面对象。
根据一些实施例,一种电子设备包括被配置为显示带有喜爱的导航轴的用户界面的显示单元;被配置为接收用户接触的触敏表面单元;以及耦接到显示单元和触敏表面单元的处理单元。处理单元被配置为检测触敏表面单元上的接触并检测接触在触敏表面单元上的第一移动,其中接触的第一移动包括:第一移动在沿喜爱的导航轴的方向上的第一分量,以及第一移动在与喜爱的导航轴不同的方向上的第二分量。处理单元被进一步配置为,响应于检测到接触的第一移动,根据确定第一移动满足方向锁定终止标准,根据第一移动的第一分量和第一移动的第二分量来在二维中移动用户界面的一个或多个用户界面对象;根据确定第一移动不满足方向锁定终止标准,根据第一移动的第一分量来沿喜爱的导航轴在一维中移动用户界面的一个或多个用户界面对象。
根据一些实施例,一种方法是在具有显示器和触敏表面的电子设备处执行的。该方法包括:显示具有多个内容单元的用户界面,其中沿用户界面中的第一轴布置多个内容单元,并且相应内容单元与对应元数据相关联。该方法还包括检测触敏表面上的接触并检测接触的第一移动。该方法还包括,响应于检测到接触的第一移动,根据该第一移动,垂直于用户界面中的第一轴移动第一组一个或多个内容单元,并且对于第一组内容单元中的一个或多个相应内容单元,显示与就在检测到接触的第一移动之前未显示的相应内容单元相邻的相应内容单元的元数据。
根据一些实施例,一种电子设备包括被配置为显示用户界面的显示单元,该用户界面具有沿用户界面中的第一轴布置的多个内容单元,其中相应内容单元与对应元数据相关联;被配置为接收用户接触的触敏表面单元;以及耦接到显示单元和触敏表面单元的处理单元。该处理单元被配置为检测触敏表面单元上的接触并检测接触的第一移动。该处理单元还被配置为,响应于检测到接触的第一移动,根据第一移动,垂直于用户界面中的第一轴移动第一组一个或多个内容单元,并且对于第一组内容单元中的一个或多个相应内容单元,显示与就在检测到接触的第一移动之前未显示的相应内容单元相邻的相应内容单元的元数据。
根据一些实施例,电子设备包括显示器、触敏表面、一个或多个处理器、存储器、和一个或多个程序;一个或多个程序被存储在存储器中并被配置为由一个或多个处理器执行,并且一个或多个程序包括用于执行上述方法中的任何一种方法的操作的指令。根据一些实施例,一种电子设备上的图形用户界面包括在上述方法中的任何一种方法中显示的一个或多个元件,该电子设备具有显示器、触敏表面、存储器、和用于执行存储在存储器中的一个或多个程序的一个或多个处理器,所述一个或多个元件响应于输入而被更新,如上述方法中的任何一种方法所述的。根据一些实施例,计算机可读存储介质已将指令存储在其中,该指令在由具有显示器、触敏表面的电子设备执行时使得该设备执行上述方法中的任何一种方法的操作。根据一些实施例,电子设备包括:显示器、触敏表面和用于执行上述方法中的任何一种方法的操作的装置。根据一些实施例,在具有显示器和触敏表面的电子设备中使用的信息处理设备包括用于执行上述方法中的任何一种方法的操作的装置。
因此,具有显示器、触敏表面的电子设备具有更快、更有效的方法和界面以用于移动用户界面对象,从而提高此类设备的有效性、效率和用户满意度。此类方法和界面可补充或替代用于移动用户界面对象的常规方法。
附图说明
为了更好地理解各种所述的实施例,应该结合以下附图参考下面的具体实施方式,在附图中,类似的附图标号在所有附图中指示对应的部分。
图1A是示出了根据一些实施例具有触敏显示器的便携式多功能设备的框图。
图1B是示出了根据一些实施例用于事件处理的示例性部件的框图。
图2示出了根据一些实施例具有触摸屏的便携式多功能设备。
图3是根据一些实施例具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施例便携式多功能设备上的用于应用菜单的一种示例性用户界面。
图4B示出了根据一些实施例用于具有与显示器分开的触敏表面的多功能设备的一种示例性用户界面。
图5A-图5Q示出了根据一些实施例用于在一维或二维中导航内容的示例性用户界面。
图6A-图6R示出了根据一些实施例用于提供与所显示内容单元相关联的元数据的示例性用户界面。
图6S-图6T示出了根据一些实施例在用户界面中导航时,用户输入和内容单元移动之间的示例性关系的图示。
图7A-图7C是示出了根据一些实施例在一维或二维中导航内容的方法的流程图。
图8A-图8C是示出了根据一些实施例提供与所显示内容单元相关联的元数据的方法的流程图。
图9-图10是根据一些实施例的电子设备的功能框图。
具体实施方式
很多电子设备具有图形用户界面,该图形用户界面包括大量的内容单元,诸如电子消息、照片、音频文件、视频文件、文本、超级链接、图标、控制元件和/或其视觉表示。这些内容单元中的很多具有相关联的元数据(例如,时间和/或日期戳、文件大小、作者标识、状态标识和安全设置),它们可以为用户提供信息。为了简化用户与包含大量内容单元的用户界面的交互,电子设备可以在任何一个时间在显示器上仅显示所有内容单元的子集和/或关联的元数据。用户可能需要访问给定用户界面内包含的内容单元和/或相关联的元数据,但那时它们并未被显示。
用于访问附加内容单元和/或与所显示内容单元相关联的元数据的一些方法需要在菜单系统中导航的一系列用户输入。例如,对于这些方法而言,用户可能需要选择用户界面对象以显示菜单。显示的菜单可以包括或不包括用于访问附加内容单元和/或与所显示内容单元相关联的元数据的菜单选项。当显示的菜单不包括期望的菜单选项时,用户需要在多个菜单和/或子菜单中搜索以找到具有正确菜单选项的菜单。在显示具有期望菜单选项的菜单之后,用户需要选择该菜单选项以发起对期望内容获得访问权。另选地,电子设备可以默认地连续显示大量的内容单元和/或与所显示内容单元相关联的元数据。这使得显示器凌乱不堪,并可能分散用户注意力,降低了用户使用设备时的效率。
在下文描述的实施例中,通过提供一种用户界面实现了用于访问图形用户界面中存在,但未显示的附加内容单元的改进方法,该用户界面允许利用触敏表面上简单的用户接触对预定义导航方向解锁(例如,在存在喜爱的导航轴时,但响应于在不同于所喜爱的导航轴的方向上导航,一些附加的、不常访问的信息诸如元数据是可用的)。在下文描述的其他实施例中,通过提供一种用户界面实现了用于访问与所显示内容单元相关联的元数据的改进方法,该用户界面在检测到触敏表面上与传统导航输入相关的简单用户输入时显露隐藏的元数据。这些方法使访问附加用户界面内容单元和/或与所显示内容单元相关联的元数据的过程流畅而不使用户界面显示凌乱。
下面,图1A-图1B、图2和图3提供了对示例性设备的描述。图4A-图4B和图5A-图5Q示出了用于在一维或二维中导航内容的示例性用户界面。图4A-图4B和6A-图6R示出了用于提供与所显示内容单元相关联的元数据的示例性用户界面。图6S-图6T示出了在用户界面中导航内容时,用户输入和内容单元移动之间的示例性关系的图示。图7A-图7C是示出了在一维或二维中导航内容的方法的流程图。图8A-图8C是示出了提供与所显示内容单元相关联的元数据的方法的流程图。图5A-图5Q中的用户界面用于示出图7A-图7C中的过程。图6A-图6R中的用户界面用于示出图8A-图8C中的过程。
示例性设备
现在将详细地参考实施例,这些实施例的实例在附图中被示出。在下面的详细描述中示出了许多具体细节,以便提供对各种所描述的实施例的充分理解。但是,对本领域的普通技术人员将显而易见的是,各种所描述的实施例可以在没有这些具体细节的情况下被实践。在其他情况下,没有详细地描述众所周知的方法、过程、部件、电路、和网络,从而不会不必要地使实施例的方面晦涩难懂。
还应当理解,虽然术语“第一”、“第二”等在本文中在一些实施例中用来描述各种元素,但是这些元素不应受到这些术语限制。这些术语只是用来将一个元素与另一个元素区分开。例如,第一接触可以被命名为第二接触,并且类似地,第二接触可以被命名为第一接触,而不背离各种所描述的实施例的范围。第一接触和第二接触均为接触,但它们不是同一个接触。
在本文中对各种所描述的实施例的描述中所使用的术语只是为了描述特定实施例的目的,而并非旨在进行限制。如在对各种所描述的实施例中的描述和所附权利要求书中所使用的那样,单数形式“一个”、“一种”和“该”旨在也包括复数形式,除非上下文明确地另外指出。还应当理解,本文中所使用的术语“和/或”是指并且涵盖相关联地列出的项目中的一个或多个项目的任何和全部可能的组合。还应当理解,术语“包括”和/或“包含”当在本说明书中使用时是指定存在所陈述的特征、整体、步骤、操作、元件和/或部件,但是并不排除存在或添加一个或多个其他特征、整体、步骤、操作、元件、部件和/或其分组。
如本文所用,根据上下文,术语“如果”任选地被解释为意思是“当……时”或“在……时”或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为意思是“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
描述了电子设备、用于此类设备的用户界面和用于使用此类设备的相关联过程的实施例。在一些实施例中,该设备是还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携式多功能设备的示例性实施例包括但不限于来自AppleInc.(Cupertino,California)的iPod设备。任选地使用其他便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型计算机或平板电脑。还应当理解,在一些实施例中,设备不是便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触摸板)的台式计算机。
在下面的论述中,描述了一种包括显示器和触敏表面的电子设备。然而应当理解,电子设备任选地包括一个或多个其他物理用户界面设备,诸如物理键盘、鼠标和/或操纵杆。
设备通常支持多种应用,诸如以下各项中的一者或多者:绘图应用、展示应用、文字处理应用、网页创建应用、盘编辑应用、电子表格应用、游戏应用、电话应用、视频会议应用、电子邮件应用、即时消息应用、健身支持应用、照片管理应用、数字相机应用、数字摄像机应用、网络浏览应用、数字音乐播放器应用、和/或数字视频播放器应用。
在设备上执行的各种应用任选地使用至少一个共用的物理用户界面设备,诸如触敏表面。触敏表面的一种或多种功能以及显示在设备上的对应信息任选地从一种应用调整和/或变化至下一种应用和/或在相应应用内被调整和/或变化。这样,设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用。
现在关注具有触敏显示器的便携式设备的实施例。图lA是示出了根据一些实施例具有触敏显示器112的便携式多功能设备100的框图。触敏显示器112有时为了方便被称做“触摸屏”,并且有时可被称为或被叫做触敏显示系统。设备100包括存储器102(任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入或控制设备116、和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100上的接触的强度的一个或多个强度传感器165(例如,触敏表面,诸如设备100的触敏显示系统112)。设备100任选地包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如,在触敏表面诸如设备100的触敏显示系统112或设备300的触摸板355上生成触觉输出)。这些部件任选地通过一根或多根通信总线或信号线103通信。
如在本说明书和权利要求书中所使用,术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如,手指接触)的力或压力(每单位面积的力),或是指触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围,该值范围包括至少四个不同值并且更典型地包括上百个不同值(例如,至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或与触敏表面相邻的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些实施例中,来自多个力传感器的力测量值被合并(例如,加权平均数)以确定估计的接触的力。类似地,触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地,在触敏表面上所检测到的接触面积的大小和/或其变化、邻近接触的触敏表面的电容和/或其变化、和/或邻近接触的触敏表面的电阻和/或其变化任选地用作触敏表面上的接触的力或压力的替代物。在一些实施例中,接触力或压力的替代物测量值直接用于确定是否已经超过强度阈值(例如,强度阈值是以对应于替代物测量值的单位来描述的)。在一些实施例中,接触力或压力的替代物测量值被转换成估计的力或压力,并且估计的力或压力用于确定是否已经超过强度阈值(例如,强度阈值是以压力的单位测量的压力阈值)。
如本说明书和权利要求书中所使用,术语“触觉输出”是指将由用户通过用户的触摸感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户的手的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解读为触感,该触感对应于所感知到的设备或设备部件的物理特性上的变化。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解读为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如,触敏表面的移动任选地由用户解读为或感测为触敏表面的“粗糙度”,即使在触敏表面的光滑度无变化时。虽然此类由用户对触摸的解读将受到用户的个体化感官知觉限制,但是有许多触摸的感官知觉是大多数用户共有的。因此,当触觉输出被描述为对应于用户的特定感官知觉(例如,“松开点击”、“按下点击”、“粗糙度”)时,除非另外陈述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移将生成典型(或普通)用户的所描述的感官知觉。
应当理解,设备100只是一种便携式多功能设备的一个示例,并且设备100任选地具有比所示出的更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件以硬件、软件、或硬件与软件两者的组合来实现,包括一个或多个信号处理和/或专用集成电路。
存储器102任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。设备100的其他部件(诸如CPU 120和外围设备接口118)对存储器102的访问任选地由存储器控制器122来控制。
外围设备接口118可被用于将设备的输入外围设备和输出外围设备耦接到CPU120和存储器102。该一个或多个处理器120运行或执行存储在存储器102中的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。
在一些实施例中,外围设备接口118、CPU 120、和存储器控制器122任选地被实现在单个芯片诸如芯片104上。在一些其他实施例中,它们任选地被实现在独立的芯片上。
RF(射频)电路108接收和发送也被称为电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的众所周知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信与网络以及其他设备通信,网络诸如是互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。无线通信任选地使用多种通信标准、协议和技术中的任何一种,包括但不限于全球移动通信系统(GSM)、增强数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE 802.11a、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)、互联网协议语音技术(VoiP)、Wi-MAX、电子邮件的协议(例如,互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理现场协议(XMPP)、用于即时消息和现场利用扩展的会话发起协议(SIMPLE)、即时消息和现场服务(IMPS))和/或短消息服务(SMS)、或者其他任何适当的通信协议,包括在本文档提交日期还未开发出的通信协议。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人可听到的声波。音频电路110还接收由麦克风113根据声波转换的电信号。音频电路110将电信号转换为音频数据,并将音频数据传输到外围设备接口118以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施例中,音频电路110还包括耳麦插孔(例如,图2中的212)。耳麦插孔提供音频电路110和可移除的音频输入/输出外围设备之间的接口,该外围设备诸如仅输出的耳机或者具有输出(例如,单耳耳机或双耳耳机)和输入(例如,麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触摸屏112和其他输入控制设备116耦接到外围设备接口118。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161、和用于其他输入或控制设备的一个或多个输入控制器160。一个或多个输入控制器160从其他输入或控制设备116接收电信号/发送电信号到其他输入或控制设备116。其他输入控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮等等。在一些另选的实施例中,一个或多个输入控制器160任选地耦接到(或不耦接到)以下各项中的任一者:键盘、红外端口、USB端口、和指向设备诸如鼠标。一个或多个按钮(例如,图2中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的向上/向下按钮。一个或多个按钮任选地包括下压按钮(例如,图2中的206)。
触敏显示器112提供设备与用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或将电信号发送至触摸屏112。触摸屏112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频和它们的任何组合(统称为“图形”)。在一些实施例中,一些视觉输出或全部的视觉输出对应于用户界面对象。
触摸屏112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断),并且将所检测到的接触转换为与显示在触摸屏112上的用户界面对象(例如,一个或多个软键、图标、网页或图像)的交互。在一个示例性实施例中,触摸屏112和用户之间的接触点对应于用户的手指。
触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术,但是在其他实施例中使用其他显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触摸屏112接触的一个或多个点的其他元件来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在一个示例性实施例中,使用投射式互电容感测技术,诸如从Apple Inc.(Cupertino,California)的iPod发现的技术。
触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施例中,触摸屏具有约160dpi的视频分辨率。用户任选地使用任何合适的物体或附加物诸如触笔、手指等等来与触摸屏112接触。在一些实施例中,用户界面被设计用于主要与基于手指的接触和手势工作,由于手指在触摸屏上的接触区域较大,因此这可能不如基于触笔的输入精确。在一些实施例中,设备将基于手指的粗略输入翻译为精确的指针/光标位置或命令以执行用户所期望的动作。
在一些实施例中,除了触摸屏之外,设备100任选地包括用于激活或去激活特定功能的触摸板(未示出)。在一些实施例中,触摸板是设备的触敏区域,该触敏区域与触摸屏不同,其不显示视觉输出。触摸板任选地是与触摸屏112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电力状态指示器(例如,发光二极管(LED))和任何其他与便携式设备中电力的生成、管理和分配相关联的部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出了耦接到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜而投射的光,并且将光转换为表示图像的数据。结合成像模块143(也叫做相机模块),光学传感器164任选地捕获静态图像或视频。在一些实施例中,光学传感器位于设备100的后部上,与设备前部上的触摸屏显示器112相背对,使得触摸屏显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施例中,另一光学传感器位于设备的前部上,使得用户在触摸屏显示器上观看其他视频会议参与者的同时,任选地获得该用户的图像以用于视频会议。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了耦接到I/O子系统106中的强度传感器控制器159的接触强度传感器。接触强度传感器165任选地包括一个或多个压阻应变计、电容式力传感器、电力传感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施例中,至少一个接触强度传感器与触敏表面(例如,触敏显示系统112)并置排列或邻近。在一些实施例中,至少一个接触强度传感器位于设备100的后部上,与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个接近传感器166。图1A示出了耦接到外围设备接口118的接近传感器166。另选地,接近传感器166耦接到I/O子系统106中的输入控制器160。在一些实施例中,当多功能设备被置于用户的耳朵附近时(例如,当用户正在进行电话呼叫时),接近传感器关闭并且禁用触摸屏112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了耦接到I/O子系统106中的触觉反馈控制器161的触觉输出发生器。触觉输出发生器167任选地包括:一个或多个电声设备,诸如扬声器或其他音频部件;和/或将能量转换成线性运动的机电设备,诸如马达、螺线管、电活性聚合物、压电致动器、静电致动器或其他触觉输出生成部件(例如,将电信号转换成设备上的触觉输出的部件)。接触强度传感器165从触觉反馈模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100的用户感测到的触觉输出。在一些实施例中,至少一个触觉输出发生器与触敏表面(例如,触敏显示系统112)并置排列或邻近,并且任选地通过竖直地(例如,向设备100的表面之内/之外)或侧向地(例如,在与设备100的表面相同的平面中前后地)移动触敏表面来生成触觉输出。在一些实施例中,至少一个触觉输出发生器传感器位于设备100的后部上,与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个加速度计168。图1A示出了耦接到外围设备接口118的加速度计168。另选地,加速度计168任选地耦接到I/O子系统106中的输入控制器160。在一些实施例中,信息基于对从该一个或多个加速度计所接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图被显示。设备100任选地除了一个或多个加速度计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系统)接收器(未示出),以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息。
在一些实施例中,存储在存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135以及应用(或指令集)136。此外,在一些实施例中,存储器102存储设备/全局内部状态157,如图1A和图3中所示。设备/全局内部状态157包括以下各项中的一者或多者:活动应用状态,该活动应用状态指示哪些应用(如果有的话)当前是活动的;显示状态,该显示状态指示什么应用、视图或其他信息占据触摸屏显示器112的各个区域;传感器状态,该传感器状态包括从设备的各个传感器和输入控制设备116获得的信息;和关于设备位置和/或姿态的位置信息。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电力管理等)的各种软件部件和/或驱动器,并且有利于各种硬件部件和软件部件之间的通信。
通信模块128有利于通过一个或多个外部端口124与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件部件。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备或者间接地通过网络(例如,互联网、无线LAN等)进行耦接。在一些实施例中,外部端口是与iPod(Apple Inc.的商标)设备上所使用的30针连接器相同的或类似的和/或与其兼容的多针(例如,30针)连接器。
接触/运动模块130任选地检测与触摸屏112(结合显示控制器156)和其他触敏设备(例如,触摸板或物理点击轮)的接触。接触/运动模块130包括各种软件部件以用于执行与接触检测相关的各种操作,诸如确定是否已经发生了接触(例如,检测手指按下事件)、确定接触强度(例如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪在触敏表面上的移动(例如,检测一个或多个手指拖动事件),以及确定接触是否已经停止(例如,检测手指抬起事件或者接触中断)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)、和/或加速度(量值和/或方向的改变),接触点的移动由一系列接触数据来表示。这些操作任选地被应用于单点接触(例如,单指接触)或者多点同时接触(例如,“多点触摸”/多个手指接触)。在一些实施例中,接触/运动模块130和显示控制器156检测触摸板上的接触。
在一些实施例中,接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已经由用户执行(例如,确定用户是否已经“点击”图标)。在一些实施例中,根据软件参数来确定至少强度阈值的一个子集(例如,强度阈值不是由特定物理致动器的激活阈值来确定的,并且可在不改变设备100的物理硬件的情况下被调整)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏的鼠标“点击”阈值可被设定成预定义的阈值的大范围中的任一个。另外,在一些具体实施中,向设备的用户提供用于调整强度阈组值中的一个或多个(例如,通过调整各个强度阈值和/或通过利用对“强度”参数的系统级点击一次调整多个强度阈值)的软件设置。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同接触图案(例如,所检测到的接触的不同运动、计时和/或强度)。因此,任选地通过检测具体接触图案来检测手势。例如,检测单指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。又如,在触敏表面上检测到手指轻扫手势包括检测到手指按下事件,然后检测到一个或多个手指拖动事件,并且随后检测到手指抬起(抬离)事件。
图形模块132包括用于在触摸屏112或其他显示器上呈现和显示图形的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉特性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等等。
在一些实施例中,图形模块132存储待使用的表示图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用等接收指定待显示的图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其他图形属性数据,然后生成屏幕图像数据以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件部件,这些指令由一个或多个触觉输出发生器167使用,以响应于用户与设备100的交互来在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用)中输入文本的软键盘。
GPS模块135确定设备的位置,并且提供该信息以在各种应用中使用(例如,提供给电话138以用于基于位置的拨号、提供给相机143作为照片/视频元数据、以及提供给提供基于位置的服务的应用,诸如天气桌面小程序、本地黄页桌面小程序、和地图/导航桌面小程序)。
应用136任选地包括以下模块(或指令集)或者其子集或超集:
·联系人模块137(有时叫做通讯录或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健身支持模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·浏览器模块147;
·日历模块148;
·桌面小程序模块149,其任选地包括以下各项中的一者或多者:天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5、和由用户获取的其他桌面小程序以及用户创建的桌面小程序149-6;
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150;
·搜索模块151;
·视频和音乐播放器模块152,任选地由视频播放器模块和音乐播放器模块构成;
·记事本模块153;
·地图模块154;和/或
·在线视频模块155。
任选地被存储在存储器102中的其他应用136的示例包括其他文字处理应用、其他图像编辑应用、绘图应用、呈现应用、启用JAVA的应用、加密、数字权限管理、语音识别、和语音复制。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,联系人模块137任选地被用于管理通讯录或联系人列表(例如存储在存储器102或存储器370中的联系人模块137的应用内部状态192中),包括:将一个或多个姓名添加到通讯录;从通讯录删除一个或多个姓名;使一个或多个电话号码、一个或多个电子邮件地址、一个或多个物理地址或其他信息与姓名相关联;使图像与姓名相关联;对姓名分类和排序;提供电话号码或电子邮件地址以发起和/或促进通过电话138、视频会议139、电子邮件140、或IM141的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,电话模块138任选地被用于输入对应于电话号码的字符序列、访问通讯录137中的一个或多个电话号码、修改已经输入的电话号码、拨打相应的电话号码、进行会话以及当会话结束时断开或挂断。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包括用于根据用户指令发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,即时消息模块141包括用于以下操作的可执行指令:输入与即时消息对应的字符序列、修改先前输入的字符、传输相应即时消息(例如,使用短消息服务(SMS)或多媒体消息服务(MMS)协议以用于基于电话的即时消息或者使用XMPP、SIMPLE、或IMPS以用于基于互联网的即时消息)、接收即时消息以及查看所接收的即时消息。在一些实施例中,所传输和/或接收的即时消息任选地包括图形、照片、音频文件、视频文件和/或MMS和/或增强消息服务(EMS)中所支持的其他附件。如本文所用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS发送的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE、或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154、和音乐播放器模块146,健身支持模块142包括用于以下操作的可执行指令:创建健身(例如具有时间、距离、和/或卡路里消耗目标);与健身传感器(运动设备)进行通信;接收健身传感器数据;校准用于监测健身的传感器;针对健身选择和播放音乐;以及显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、和图像管理模块144,相机模块143包括用于以下操作的可执行指令:捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特性、或从存储器102删除静态图像或视频。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、和相机模块143,图像管理模块144包括用于排列、修改(例如,编辑)、或以其他方式操控、标记、删除、呈现(例如,在数字幻灯片或相册中)、以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、和文本输入模块134,浏览器模块147包括用于根据用户指令浏览互联网(包括搜索、链接到、接收、和显示网页或其部分、以及链接到网页的附件和其他文件)的可执行指令。
结合射频电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括用于根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、和浏览器模块147,桌面小程序模块149是任选地由用户下载和使用的微型应用(例如,天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、和词典桌面小程序149-5)或由用户创建的微型应用(例如,用户创建的桌面小程序149-6)。在一些实施例中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施例中,桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序创建器模块150任选地被用户用来创建桌面小程序(例如,将网页的用户指定部分转变为桌面小程序)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包括用于根据用户指令来搜索存储器102中的匹配一个或多个搜索条件(例如,一个或多个用户指定的搜索词)的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令,以及用于显示、呈现或以其他方式回放视频(例如,在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施例中,设备100任选地包括MP3播放器,诸如iPod(Apple Inc.的商标)的功能性。
结合触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,记事本模块153包括用于根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、和浏览器模块147,地图模块154任选地被用于根据用户指令接收、显示、修改、和存储地图以及与地图相关联的数据(例如,驾车路线;关于特定位置处或附近的商店和其他兴趣点的数据;和其他基于位置的数据)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括指令,该指令允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、回放(例如在触摸屏上或在经由外部端口124所连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件,以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施例中,即时消息模块141而不是电子邮件客户端模块140被用于发送至特定的在线视频的链接。
上述每个模块和应用对应于用于执行上述一个或多个功能以及在本专利申请中所描述的方法(例如,本文所述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(即指令集)不必被实现为分开的软件程序、过程或模块,因此这些模块的各个子集任选地在各个实施例中被组合或以其他方式重新布置。在一些实施例中,存储器102任选地存储上述模块和数据结构的子集。此外,存储器102任选地存储上面未描述的附加模块和数据结构。
在一些实施例中,设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触摸板作为用于设备100的操作的主要输入控制设备,任选地减少设备100上的物理输入控制设备(诸如下压按钮、拨号盘等等)的数量。
唯一地通过触摸屏和/或触摸板执行的该预定义的一组功能任选地包括用户界面之间的导航。在一些实施例中,触摸板在被用户触摸时将设备100从显示在设备100上的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施例中,使用触摸板来实现“菜单按钮”。在一些其他实施例中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触摸板。
图1B是示出了根据一些实施例用于事件处理的示例性部件的框图。在一些实施例中,存储器102(图1A中)或存储器370(图3)包括事件分类器170(例如,在操作系统126中)以及相应的应用136-1(例如,前述应用137-13、155、380-390中的任何应用)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用136-1和应用136-1的应用视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施例中,应用136-1包括应用内部状态192,该应用内部状态192指示当应用是活动的或正在执行时显示在触敏显示器112上的一个或多个当前应用视图。在一些实施例中,设备/全局内部状态157被事件分类器170用来确定哪个(哪些)应用当前是活动的,并且应用内部状态192被事件分类器170用来确定要将事件信息递送到的应用视图191。
在一些实施例中,应用内部状态192包括附加信息,诸如以下各项中的一者或多者:当应用136-1恢复执行时将被使用的恢复信息、指示正被应用136-1显示的信息或准备好由应用136-1显示的信息的用户界面状态信息、用于使得用户能够返回到应用136-1的先前状态或视图的状态队列、以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如,作为触敏显示器112上的多点触摸手势的一部分的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器(诸如接近传感器166)、一个或多个加速度计168和/或麦克风113(通过音频电路110)所接收的信息。外围设备接口118从I/O子系统106所接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施例中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在其他实施例中,外围设备接口118仅当存在重要事件(例如,接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施例中,事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户能在显示器上看到的控件和其他元件构成。
与应用相关联的用户界面的另一个方面是一组视图,本文中有时也称为应用视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用的)应用视图任选地对应于在应用的程序化或视图分级结构内的程序化水平。例如,最低水平视图(其中检测到触摸)任选地被叫做命中视图,并且被识别为正确输入的事件集任选地至少部分地基于始于基于触摸的手势的初始触摸的命中视图来确定。
命中视图确定模块172接收与基于接触的手势的子事件相关的信息。当应用具有以分级结构组织的多个视图时,命中视图确定模块172将命中视图识别为该分级结构中的应当处理该子事件的最低视图。在大多数情况下,命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别,命中视图通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定在视图分级结构内的哪个视图或哪些视图应接收特定的子事件序列。在一些实施例中,活动事件识别器确定模块173确定仅命中视图应当接收特定的子事件序列。在其他实施例中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是积极参与的视图,并且因此确定所有积极参与的视图应接收特定的子事件序列。在其他实施例中,即使触摸子事件完全被局限到与一歌特定视图相关联的区域,但是分级结构中更高的视图将仍然保持为积极参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施例中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施例中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器模块182进行检索。
在一些实施例中,操作系统126包括事件分类器170。作为另外一种选择,应用136-1包括事件分类器170。在另一个实施例中,事件分类器170是独立的模块,或者是存储在存储器102中的另一个模块(诸如接触/运动模块130)的一部分。
在一些实施例中,应用136-1包括多个事件处理程序190和一个或多个应用视图191,其中每个应用视图包括用于处理发生在应用的用户界面的相应视图内的触摸事件的指令。应用136-1的每个应用视图191包括一个或多个事件识别器180。通常,相应应用视图191包括多个事件识别器180。在其他实施例中,事件识别器180中的一个或多个事件识别器是独立模块的一部分,该独立模块诸如用户界面工具包(未示出)或应用136-1从中继承方法和其他属性的更高水平的对象。在一些实施例中,相应事件处理程序190包括以下各项中的一者或多者:数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170所接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用内部状态192。作为另外一种选择,应用视图191中的一个或多个应用视图包括一个或多个相应的事件处理程序190。另外,在一些实施例中,数据更新器176、对象更新器177和GUI更新器178中的一者或多者被包括在相应的应用视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施例中,事件识别器180还至少包括以下各项的子集:元数据183和事件递送指令188(其任选地包括子事件递送指令)。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件的信息,例如触摸或触摸移动。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速度和方向。在一些实施例中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向取向,反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,基于所述比较,确定事件或子事件,或确定或更新事件或子事件的状态。在一些实施例中,事件比较器184包括事件定义186。事件定义186包含事件(例如,预定义的子事件序列)的定义,例如事件1(187-1)、事件2(187-2)以及其他事件。在一些实施例中,事件187中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个实例中,事件1(187-1)的定义是在被显示的对象上的双击。例如,双击包括被显示对象上的预先确定时长的第一触摸(触摸开始)、预先确定时长的第一抬离(触摸结束)、被显示对象上的预先确定时长的第二触摸(触摸开始)以及预先确定时长的第二抬离(触摸结束)。在另一个实例中,事件2(187-2)的定义是被显示对象上的拖动。例如,拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器112上的移动、以及触摸的抬离(触摸结束)。在一些实施例中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施例中,事件定义187包括用于相应用户界面对象的事件的定义。在一些实施例中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在其中在触敏显示器112上显示三个用户界面对象的应用视图中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试以确定这三个用户界面对象中的哪个用户界面对象与该触摸(子事件)相关联。如果每个所显示的对象与相应的事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施例中,相应事件187的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列是否确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件系列不与事件定义186中的任何事件匹配时,该相应事件识别器180进入事件不可能、事件失败或事件结束状态,在此之后不理会基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪和处理持续的基于触摸的手势的子事件。
在一些实施例中,相应事件识别器180包括具有指示事件递送系统应该如何执行对积极参与的事件识别器的子事件递送的可配置的属性、标记和/或列表的元数据183。在一些实施例中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置的属性、标志和/或列表。在一些实施例中,元数据183包括指示子事件是否被递送到视图或程序化分级结构中的变化的级别的可配置的属性、标记和/或列表。
在一些实施例中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施例中,相应事件识别器180将与该事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施例中,事件识别器180抛出与所识别的事件相关联的标记,并且与该标记相关联的事件处理程序190获取该标记并执行预定义的过程。
在一些实施例中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件系列相关联的事件处理程序或者递送到积极参与的视图。与子事件系列或与积极参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施例中,数据更新器176创建和更新在应用136-1中使用的数据。例如,数据更新器176对联系人模块137中所使用的电话号码进行更新,或者对视频播放器模块145中所使用的视频文件进行存储。在一些实施例中,对象更新器177创建和更新在应用136-1中使用的对象。例如,对象更新器176创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息,并将其发送到图形模块132以用于显示在触敏显示器上。
在一些实施例中,一个或多个事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对数据更新器176、对象更新器177和GUI更新器178的访问权限。在一些实施例中,数据更新器176、对象更新器177和GUI更新器178被包括在相应应用136-1或应用视图191的单个模块中。在其他实施例中,它们被包括在两个或更多个软件模块中。
应当理解,上述关于触敏显示器上的用户触摸的事件处理的论述还适用于利用输入设备操作多功能设备100的其他形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,鼠标移动和鼠标按钮按压,任选结合单次或多次键盘按压或保持、触摸板上的接触移动,诸如轻击、拖动、滚动等、触笔输入、设备的移动、口头指令、检测到的眼睛运动、生物特征输入;和/或它们的任意组合被任选地用于作为对应于子事件的输入,该输入定义要识别的事件。
图2示出了根据一些实施例具有触摸屏112的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在该实施例中,以及在下文中介绍的其他实施例中,用户能够通过例如用一根或多根手指202(在附图中没有按比例绘制)或者用一个或多个触笔203(在附图中没有按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施例中,当用户中断与一个或多个图形的接触会发生对一个或多个图形的选择。在一些实施例中,手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已经与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,与图形的不经意接触不会选择图形。例如,当与选择对应的手势是轻击时,在应用图标之上扫过的轻扫手势任选地不会选择对应的应用。
设备100任选地还包括一个或多个物理按钮,诸如“home”或菜单按钮204。如前所述,菜单按钮204任选地用于导航到在设备100上被任选地执行的一组应用中的任何应用136。另选地,在一些实施例中,菜单按钮被实现为显示在触摸屏112上的GUI中的软键。
在一个实施例中,设备100包括触摸屏112、菜单按钮204、用于对设备开关机以及锁定设备进行供电的下压按钮206、用户身份模块(SIM)卡槽210、耳麦插孔212、对接/充电外部端口124和一个或多个音量调节按钮208。下压按钮206任选地被用于通过按下该按钮并在预定义的时间间隔内将该按钮保持在按下状态来对设备开关机;通过按下该按钮并在经过预定义的时间间隔之前释放该按钮来锁定设备;和/或对设备解锁或发起解锁过程。在另选的实施例中,设备100还通过麦克风113接受用于激活或去激活某些功能的言语输入。设备100还任选地包括用于检测触摸屏112上的接触的强度的一个或多个接触强度传感器165,和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施例中,设备300是膝上型电脑、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如,家用或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于使这些部件互连的一条或多条通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时叫做芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330,该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触摸板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如,类似于以上参考图1A所述的触觉输出发生器167)、传感器359(例如,光学传感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图1A所述的接触强度传感器165的接触强度传感器)。存储器370包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备,并且任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离CPU 310定位的一个或多个存储设备。在一些实施例中,存储器370存储与便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块、和数据结构,或它们的子集。此外,存储器370任选地存储不存在于便携式多功能设备100的存储器102中的附加程序、模块、和数据结构。例如,设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中上述所识别的元件中的每个元件任选地存储在一个或多个先前提到的存储器设备中。上述模块中的每个模块对应于用于执行上述功能的指令集。上述所识别的模块或程序(即,指令集)不必被实现为单独的软件程序、过程或模块,并且因此这些模块的各个子集任选地在各个实施例中被组合或以其他方式重新布置。在一些实施例中,存储器370任选地存储上述模块和数据结构的子集。此外,存储器370任选地存储上面未描述的附加模块和数据结构。
现在将注意力转到任选地在便携式多功能设备100上实现的用户界面(“UI”)的实施例。
图4A示出了根据一些实施例在便携式多功能设备100上用于应用菜单的示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施例中,用户界面400包括以下元件或者它们的子集或超集:
·一个或多个无线通信(诸如蜂窝信号和Wi-Fi信号)的一个或多个信号强度指示器402;
·时间404;
·蓝牙指示器405;
·电池状态指示器406;
·具有常用应用图标的托盘408,常用应用图标诸如:
○电话模块138的标记“电话”的图标416,该图标416任选地包括未接来电或语音留言的数量的指示器414;
○电子邮件客户端模块140的标记“邮件”的图标418,该图标418任选地包括未读电子邮件的数量的指示器410;
○浏览器模块147的标记“浏览器”的图标420;以及
○视频和音乐播放器模块152(也叫做iPod(Apple Inc.的商标)模块152)的标记“iPod”的图标422;以及
·其他应用的图标,诸如:
○IM模块141的标记“文本”的图标424;
○日历模块148的标记“日历”的图标426;
○图像管理模块144的标记“照片”的图标428;
○相机模块143的标记“相机”的图标430;
○在线视频模块155的标记“在线视频”的图标432;
○股市桌面小程序149-2的标记“股市”的图标434;
○地图模块154的标记“地图”的图标436;
○天气桌面小程序149-1的标记“天气”的图标438;
○闹钟桌面小程序149-4的标记“时钟”的图标440;
○健身支持模块142的标记“健身支持”的图标442;
○记事本模块153的标记“记事本”的图标444;以及
○设置应用或模块的图标446,该图标446提供对设备100及其各种应用136的设置的访问。
应当指出的是,图4A中示出的图标标记仅仅是示例性的。例如,视频和音乐播放器模块152的图标422被标记“音乐”或“音乐播放器”。其他标记任选地用于各种应用图标。在一些实施例中,相应应用图标的标记包括对应于该相应应用图标的应用的名称。在一些实施例中,特定应用图标的标记不同于与该特定应用图标对应的应用的名称。
图4B示出了具有与显示器450(例如,触摸屏显示器112)分开的触敏表面451(例如,图3中的平板或触摸板355)的设备(例如,图3中的设备300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如,传感器357中的一个或多个),和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器359。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出随后的示例中的一些,但是在一些实施例中,设备检测与显示器分开的触敏表面上的输入,如图4B中所示。在一些实施例中,触敏表面(例如,图4B中的451)具有与显示器(例如,450)上的主轴(例如,图4B中的453)对应的主轴(例如,图4B中的452)。根据这些实施例,设备检测在与显示器上的相应位置对应的位置(例如,在图4B中,460对应于468并且462对应于470)处与触敏表面451的接触(例如,图4B中的460和462)。这样,在触敏表面(例如,图4B中的451)与多功能设备的显示器(图4B中的450)分开时,由设备在触敏表面上检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操控显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界面。
另外,虽然主要是参考手指输入(例如,手指接触、手指轻击手势、手指轻扫手势)来给出下面的示例,但是应当理解,在一些实施例中,这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如,基于鼠标的输入或触笔输入)替代。例如,轻扫手势任选地由鼠标点击(例如,而不是接触)、之后是光标沿轻扫的路径的移动(例如,而不是接触的移动)来替代。又如,轻击手势任选地由光标位于轻击手势的位置之上时的鼠标点击(例如,而不是对接触的检测、之后是停止对接触的检测)来替代。类似地,当同时检测到多个用户输入时,应当理解的是,多个电脑鼠标任选地被同时使用,或一个鼠标和多个手指接触任选地被同时使用。
如本文所用,术语“焦点选择器”是指指示用户正与之交互的用户界面的当前部分的输入元件。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元件(例如,按钮、窗口、滑块或其他用户界面元件)上方时在触敏表面(例如,图3中的触摸板355或图4B中的触敏表面451)上检测到输入(例如,按压输入)时,该特定用户界面元件根据检测到的输入被调整。在包括实现与触摸屏显示器上的用户界面元件的直接交互的触摸屏显示器(例如,图1A中的触敏显示系统112或图4A中的触摸屏112)的一些具体实施中,在触摸屏上所检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元件(例如,按钮、窗口、滑块或其他用户界面元件)的位置处检测到输入(例如,通过接触的按压输入)时,该特定用户界面元件根据检测到的输入被调整。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据用户界面不同区域之间的焦点运动而运动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制的以便传达用户预期的与用户界面的交互(例如,通过向设备指示用户界面的用户期望与其进行交互的元件)的用户界面元件(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触摸板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户想要激活相应按钮(而不是设备的显示器上示出的其他用户界面元件)。
用户界面和相关联的过程
现在将注意力转到可在具有显示器和触敏表面的电子设备(诸如设备300或便携式多功能设备100)上实现的用户界面(“UI”)及相关联的过程的实施例。
图5A-图5Q示出了根据一些实施例用于在一维或二维中对内容进行导航的示例性用户界面。这些附图中的用户界面被用于例示下述过程,包括图7A-图7C中的过程。
图5A-图5Q示出了显示用户界面500的多功能设备100,用户界面包括电子消息502、504、506、508、510、512、514和516。用户界面100具有平行于多功能设备100的长边而取向的主(或喜爱的)导航轴,以及垂直于主导航轴的副导航轴。在一些实施例中,在纵向取向(例如,以长轴作为垂直轴)上使用设备时,设备的长轴是主轴,短轴是副轴,因为用户通常会对上下滚动消息以阅读会话内容最感兴趣,对查看与消息相关联的诸如消息时间的元数据通常不那么感兴趣,因此有利的是,使上下滚动消息比向侧面移动以显露出元数据更容易。用户界面500显示任何一个时间处的触摸屏112上的电子消息的子集。可以通过沿主轴滚动电子界面来访问附加电子消息。在一些实施例中,用户界面500包括默认状态,在默认状态中锁定了沿副轴导航(例如,用户能够上下滚动以显露出附加电子消息,但未提供左右滚动的选项)。在满足预先确定的方向锁定终止标准时,用户解除轴滚动锁定,允许沿副滚动轴导航。
图5A-图5Q示出了用户提供手势输入的各个实施例,手势输入包括触摸屏112上的接触(例如,接触520、530、540、550、560和/或570)的移动(例如,移动522、532、542、552、562、572和/或582),该移动具有平行于主滚动轴的第一分量(例如,矢量524、634、544、554、564、574和/或584),垂直于主滚动轴的第二分量(例如,矢量526、536、546、556、566和/或576),以及相对于主滚动轴的对应矢量角(例如,角528、538、548、558、568、578和/或588)。响应于检测到该手势,多功能设备100将电子消息(例如,消息502、504、506、508、510、512、514和/或516)滚动与移动的第一分量矢量大小对应的量。在手势输入满足预先确定的方向锁定终止标准时,多功能设备100还将电子消息滚动与移动的第二分量矢量大小对应的量。
在图5B-图5E和图5H-图5M中,方向锁定终止标准包括在相对于手势输入的主滚动轴的矢量角(例如,角528、538、558、568、578和/或588)大于预先确定的阈值角527(例如,对于预定义的运动单位,诸如接触移动10、20、30、40或50个像素,或者在预定义的时间单位内,诸如接触移动时间为0.05、0.1、0.2、0.3、0.4或0.5秒)时满足的标准。例如,在图5B-图5C中,多功能设备100检测到包括接触520从图5B中触摸屏112上的位置520-a到图5C中触摸屏112上的位置520-b的移动522的手势,移动522包括第一分量矢量524、第二分量矢量526和矢量角528。作为响应,多功能设备100沿主滚动轴将电子消息从触摸屏112的顶部向下滚动与移动的第一分量矢量大小对应的量(例如,在图5B中消息508显示于触摸屏112的顶部,向着图5C中触摸屏112的底部滚动)。多功能设备100不沿副滚动轴滚动电子消息,因为矢量角528小于预先确定的阈值角527。相反,在图5D-图5E中,在多功能设备100检测到包括接触530从图5D中的触摸屏112上的位置530-a到图5E中触摸屏112上的位置530-b的移动532的手势时(移动532包括第一分量矢量534、第二分量矢量536和矢量角538),沿副滚动轴滚动电子消息,因为矢量角538大于预先确定的阈值角527(例如,将位于图5D中触摸屏112左侧的消息510滚动到图5E中触摸屏112的右侧)。
在图5F-图5G和图5N-图5Q中,方向锁定终止标准包括在距触摸屏112右边缘超过预先确定的距离处开始移动(例如,移动542)时满足的标准(例如,向虚线529左侧发起接触的移动)。例如,在图5F-图5G中,多功能设备100检测到包括接触540从图5F中触摸屏112上的位置540-a发起的到图5G中触摸屏112上的位置540-b的的移动542的手势,移动522包括第一分量矢量544、第二分量矢量546和矢量角548。作为响应,多功能设备100沿主滚动轴将电子消息从触摸屏112的顶部向下滚动与移动的第一分量矢量大小对应的量(例如,在图5F中消息508显示于触摸屏112的顶部,向图5G中触摸屏112的底部滚动)。多功能设备100不沿副滚动轴滚动电子消息,因为是从距触摸屏112右边缘少于预先确定的距离处发起移动的(例如,向虚线529的右侧发起移动)。相反,在图5N-图5O中,在多功能设备100检测到包括接触590从图5N中的触摸屏112上的位置590-a到图5O中触摸屏112上的位置590-b的移动592的手势时(移动592包括第一分量矢量594、第二分量矢量596和矢量角598),沿副滚动轴滚动电子消息,因为是距触摸屏112右边缘超过预先确定的距离处发起移动的(例如,向虚线529左侧发起移动)。
在图5N-图5Q中,选择与方向锁定终止标准对应的标准(例如虚线529)的距屏幕右边缘的预先确定的距离,使得在满足标准时,移动开始的位置和屏幕边缘之间的距离足以在沿副滚动轴的消息的移动腾出的触摸屏上的区域中完全显示附加信息(例如,元数据)。例如,在图5N-图5O中,多功能设备100检测到包括接触590从图5N中触摸屏112上的位置590-a到图5O中触摸屏112上的位置590-b的移动592的手势,移动592包括第一分量矢量594、第二分量矢量596和矢量角598。作为响应,多功能设备沿主滚动轴(例如,滚动与第一分量矢量594大小对应的量)和副滚动轴(例如,滚动与第二分量矢量596大小对应的量)滚动消息,并显示元数据501、503、505、507和509,因为沿副滚动轴移动消息对应于第二分量矢量596大小的量足以允许在消息左侧显示元数据。相反,在图5P-图5Q中,接触511的移动513不足以解除轴方向锁定,因为位置511-a和屏幕右边缘之间的距离不足以允许显示关联的元数据。
在图5H-图5J中,多功能设备100重新检查以确定在接触550的第一移动552不满足该标准之后,接触550的第二移动562是否满足方向锁定终止标准,该方向锁定终止标准包括在相对于手势输入的主滚动轴的矢量角大于预先确定阈值角527时满足的标准。例如,多功能设备100检测到包括接触550从图5H中触摸屏112上的位置550-a到图5I中触摸屏112上的位置550-b的移动552的手势,移动552包括第一分量矢量554、第二分量矢量556和矢量角558。作为响应,多功能设备100沿主滚动轴将电子消息从触摸屏112的顶部向下滚动与移动的第一分量矢量554大小对应的量(例如,在图5H中消息508显示于触摸屏112的顶部,向图5I中触摸屏112的底部滚动)。多功能设备100不沿副滚动轴滚动电子消息,因为矢量角558小于预先确定的阈值角527。多功能设备100然后检测接触550从图5I中触摸屏112上的位置550-b到图5J中触摸屏112上的位置550-c的第二移动562,移动562包括第一分量矢量564、第二分量矢量566和矢量角568。作为响应,多功能设备100沿主滚动轴将电子消息从触摸屏112顶部向下移动对应于移动的第一分量矢量564大小的量,并沿副滚动轴移动对应于第二分量矢量566大小的量,因为矢量角568大于预先确定的阈值角527(例如,将位于图5I中触摸屏112右侧的消息508滚动到图5J中触摸屏112的左侧)。
在图5K-图5M中,在检测到满足方向锁定终止标准的移动之后,对整个手势解除方向锁定,该方向锁定终止标准包括在相对于手势输入的主滚动轴的矢量角大于预先确定的阈值角527时满足的标准。例如,多功能设备100检测到包括接触570从图5K中触摸屏112上的位置570-a到图5L中触摸屏112上的位置570-b的移动572的手势,移动572包括第一分量矢量574、第二分量矢量576和矢量角578。
作为响应,多功能设备沿主滚动轴(例如,滚动与第一分量矢量574的大小对应的量)和副滚动轴(滚动与第二分量矢量576的大小对应的量)二者滚动消息,因为确定移动572的矢量角578大于预先确定的阈值角527解除了轴方向锁定。多功能设备100然后检测接触570从图5L中触摸屏112上的位置570-b到图5M中触摸屏112上的位置570-c的第二移动582,移动582包括第一分量矢量584、第二分量矢量586和矢量角588。作为响应,尽管接触570的第二移动582不满足方向锁定终止标准(例如,移动582的矢量角588小于预先确定的阈值角527),多功能设备100沿主滚动轴(例如,滚动与第一分量矢量586的大小对应的量)和副滚动轴(例如,滚动与第二分量矢量586的大小对应的量)二者滚动电子消息,因为检测到接触570的第一移动572先前已解除轴方向锁定。
图6A-图6R示出了根据一些实施例用于提供与所显示内容单元相关联的元数据的示例性用户界面。这些附图中的用户界面被用于例示下述过程,包括图8A-图8C中的过程。
图6A-图6R示出了显示用户界面600的多功能设备100,用户界面600包括分别具有关联元数据620-1、620-2和620-3的所接收电子消息604-1、604-2、602-3以及分别具有关联元数据621-1、621-2、621-3、621-4和621-5的所发送电子消息602-1、602-2、602-3、602-4和602-5。在触摸屏112左侧上的第一区域中显示所接收消息604,而在触摸屏112右侧上的第二区域中显示所发送消息602。用户界面100具有平行于多功能设备100的长边取向的主导航轴(例如,喜爱的导航轴),以及垂直于主导航轴的副导航轴。在一些实施例中,在纵向取向(例如,以长轴作为垂直轴)上使用设备时,设备的长轴是主轴且短轴是副轴,因为用户将通常对上下滚动消息来阅读会话内容最感兴趣,并且将通常对查看与消息相关联的元数据诸如消息时间不那么感兴趣,并因此使上下滚动消息比向侧面移动以显露出元数据更容易是有利的。用户界面600显示了在任何一个时间触摸屏112上的电子消息的子集。在一些实施例中,用户界面600包括默认状态,其中不显示与相应电子消息相关联的元数据。在执行包括手势移动的手势时,在移动具有垂直于主滚动轴的分量的情况下(例如,触摸屏上的左侧和/或右侧),用户可在一个或多个电子消息上滑动,从而显露出关联元数据。
图6A-图6I示出了用户提供手势输入的各种实施例,手势输入包括触摸屏112上的接触(例如,接触606和/或622)的移动(例如,移动608和/或624),该移动具有平行于主滚动轴的第一分量(例如,矢量610和/或626),垂直于主滚动轴的第二分量(例如,矢量612和/或628),以及相对于主滚动轴的对应矢量角(例如,角614和/或630)。响应于检测到该手势,多功能设备100沿副滚动轴将所接收消息604滚动与移动的第二分量矢量的大小对应的量,在显示器上先前被相应所接收消息占据的位置处显露出元数据。
在图6B-图6C中,仅针对所接收消息604显示元数据。相反,在图系列6B和6D中,在所接收消息604被滑出之后,显示所接收消息604和所发送消息602二者的元数据。在一些实施例中,响应于检测到接触606的移动,沿触摸屏的一个边缘(例如,右边缘)将所接收消息与所发送消息对准。在一些实施例中,在将所接收消息与所发送消息对准之后,所接收消息不响应于接触606沿副滚动轴的附加移动而进一步向右移动(例如,所接收消息被配置为在与触摸屏112左侧对准和与触摸屏112右侧对准之间滑动,但设备将不会滚动所接收消息离开触摸屏112的右侧)。在图6E-图6F中,进一步沿主滚动轴(例如,垂直地)将所有电子消息(例如,所接收消息604和所发送消息602)滚动与移动的第一分量矢量(例如,矢量626)的大小对应的量。因此,访问了一开始未在触摸屏112上显示的附加消息,同时显露出关于消息的元数据。在图6G-图6H中,多功能设备100检测到位置622-b处接触622的抬离,并作为响应,将所接收消息604从触摸屏112的右侧向回移动到触摸屏112的右侧,以掩盖先前显示的元数据(例如,分别将所接收消息604-1和604-2从图6G中显示器的右侧移动636和638到图6H中显示器的左侧导致多功能设备在图6H中停止显示元数据620-1和620-2)。在图6I中,在从顶部面板中的位置604-2-a向底部面板中的位置604-2-b滚动所接收消息604-2时,在触摸屏112上连续显露出元数据620-2。
图6J-图6M示出了根据沿主滚动轴的梯度对所接收消息604着色/加色调的各种实施例。在图6J中,根据消息的时效(例如,更新的消息604-3比更旧的消息604-1着色/色调更深)或消息在触摸屏112上的位置来对所接收消息604进行着色/加色调。在一些实施例中,消息的颜色随着它们的时效(例如,随着当前时间与发送或接收消息的时间之间的间隔增大)而逐渐变化,使得静止的消息将逐渐随时间改变颜色(例如,从深蓝色褪色成浅蓝色)。在一些实施例中,消息的颜色是由映射到消息用户界面的消息显示区的预先确定的梯度来确定的,从而在消息显示区域中改变位置时,消息颜色变化(例如,不考虑消息的时效)。在图6J-图6K中,在用户沿主滚动轴滚动消息时(例如,在触摸屏112上上下滚动),调节所接收消息604的着色/色调(例如,在从图6J中的触摸屏112中部向图6K中的触摸屏112底部滚动消息604-2时,其着色/色调变得更暗)。在图6L-图6M中,随着设备前后倾斜,消息的着色/色调梯度变化。例如,在图6L中,在相对竖立拿着多功能设备的情况下(例如,与地面成70度角),从触摸屏112的顶部到底部,颜色/色调梯度变得越来越暗。在使多功能设备向回倾斜时,如在图6M中所示,在相对水平拿着设备的情况下(例如,与地面成30度角),从触摸屏112的顶部到底部,颜色/色调梯度变得越来越淡。在一些实施例中,在倾斜设备时,梯度逐渐偏移,使得在倾斜设备时,消息的颜色平稳变化。
图6N-图6R示出了各种实施例,其中在响应于初始接触的第一移动将所接收消息604从触摸屏112左侧滚动到触摸屏112右侧之后,多功能设备100检测到初始接触的第二移动。作为响应,该设备沿主滚动轴在触摸屏112上将消息(例如,所接收消息604和所发送消息602)上下滚动与平行于主滚动轴的第二移动的第一分量的大小对应的量。在图6N-图6O中,所显示的消息以相同的移动速率滚动。在图6P-图6R中,所接收消息604-2由接触662的移动664直接操控,而所发送消息602-4和所接收消息604-3滞后,生成图6Q中的间隙672和674。在图6Q中接触662的移动结束之后(但任选地,在触摸屏112上仍然检测到接触662时),所发送消息602-4和所接收消息604-3在触摸屏112上赶上所接收消息604-2。在图6S中,在接触662结束移动之后赶上时,所发送消息602-4和所接收消息604-3继续以相同速度行进。在图6T中,在接触662结束移动之后赶上时,所发送消息602-4和所接收消息604-3减慢速度,如同它们接近时失去惯性一样。尽管已经参考触摸屏112左侧的消息向右移动以显露出触摸屏112左侧上显示的元数据(例如,响应于触摸屏112上接触的移动的向右分量)描述了以上实例,但在一些实施例中,以类似方式向左移动触摸屏112右侧上的消息,以显露出触摸屏112右侧上显示的元数据(例如,响应于触摸屏112上接触的移动的向左分量)。
图7A-图7C是示出了根据一些实施例在一维或二维中导航内容的方法700的流程图。方法700是在具有显示器和触敏表面的电子设备(例如,设备300,图3;或便携式多功能设备100,图1A)上执行的。在一些实施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在一些实施例中,显示器与触敏表面是分开的。方法700中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
如下所述,方法700提供了一种直观的方式来在一维或二维中导航内容。该方法减少了用户当在一维或二维中导航内容时的认知负担,从而创建更有效的人机界面。对于电池驱动的电子设备,使得用户能够更快且更有效地在一维或二维中导航内容节省了功率并且增加了电池充电之间的间隔。
在一些实施例中,电子设备(例如,图5A-图5Q中具有显示器和触敏表面的多功能设备100)在显示器上显示具有喜爱的导航轴(例如,图5A-图5Q中的主滚动轴)的用户界面(例如,图5A-图5Q中的用户界面500)(702)。在一些实施例中,喜爱的导航轴是优选导航轴或默认导航轴,即用户访问的信息(例如,图5A-图5Q中的电子消息502、504、506、508、510、512、514和/或516和/或图5O中的元数据501、503、505、507和/或509)布置所沿的主轴,并且因此,设备使得沿喜爱的导航轴滚动更容易,以使用户使用用户界面实现其主要目的(例如,在电子消息会话、一组照片或转向方向(turn by turn direction)列表中滚动)更容易更方便。
在显示器(例如触摸屏112)上显示用户界面(例如,用户界面500)时,设备检测触敏表面上的接触(例如,图5A-图5Q中的接触520、530、540、550、570、590和/或511)(706),并且设备检测触敏表面上的接触的第一移动(例如,图5A-图5Q中的移动522、532、542、552、572、592和/或513),其中接触的第一移动包括(708):第一移动在沿喜爱的导航轴的方向上的第一分量(例如,图5A-图5Q中的第一矢量分量524、534、544、554、574、594和/或515)(710),以及第一移动在不同于(例如,垂直于)喜爱的导航轴的方向上的第二分量(例如,图5A-图5Q中的第二矢量分量526、536、546、556、576、596和/或517)(712)。
响应于检测到接触(例如,图5A-图5Q中的接触520、530、540、550、570、590和/或511)的第一移动(例如,图5A-图5Q中的移动522、532、542、552、572、592和/或513)(714):根据第一移动符合方向锁定终止标准的确定,该设备根据第一移动的第一分量(例如,图5A-图5Q中的第一矢量分量524、534、544、554、574、594和/或515)和第一移动的第二分量(例如,图5A-图5Q中的第二矢量分量526、536、546、556、576、596和/或517)在二维中移动用户界面的一个或多个用户界面对象(例如,图5A-图5Q中的电子消息502、504、506、508、510、512、514和/或516和/或图5O中的元数据501、503、505、507和/或509)(例如,横向平移或滚动用户界面)(716)。
响应于检测到接触(例如,图5A-图5Q中的接触520、530、540、550、570、590和/或511)的第一移动(例如,图5A-图5Q中的移动522、532、542、552、572、592和/或513)(714):根据第一移动不符合方向锁定终止标准的确定,该设备根据第一移动的第一分量(例如,图5A-图5Q中的第一矢量分量524、534、544、554、574、594和/或515)沿喜爱的导航轴在一维中移动用户界面的一个或多个用户界面对象(例如,图5A-图5Q中的电子消息502、504、506、508、510、512、514和/或516和/或图5O中的元数据501、503、505、507和/或509)(例如,横向平移或滚动用户界面)(718)。在一些实施例中,根据第一移动的第一分量移动(例如,滚动)一个或多个用户界面对象,而忽略第一移动的第二分量。
在一些实施例中,方向锁定终止标准包括在角度(例如,接触的第一移动和喜爱的导航轴之间的矢量角(例如,图5A-图5Q中的矢量角528、538、548、558、568、578、588、598和/或519))大于预先确定的角度(例如,角度527),例如10、20、30、40、50、60、70或80度时满足的标准(720)。在一些实施例中,在第一移动包括接触以70度角从喜爱的导航轴移动超过预定义距离(例如,20个像素)时满足方向锁定终止标准。在一些实施例中,相同的方向锁定终止标准应用于同一连续检测到的接触的第二移动和其他稍晚相应移动,直到满足方向锁定终止标准。
在一些实施例中,方向锁定终止标准包括在距触敏表面的相应边缘超过预先确定的距离(例如,图5F-图5G和/或图5N-图5Q中的虚线529和触摸屏幕112的右边缘之间的距离)处开始第一移动(例如,分别为图5F、图5N和图5P中的移动542、592和/或513)时满足的标准(722)。在一些实施例中,除非第一移动包括接触从触敏表面上距触敏表面的左边缘超过预先确定的距离的位置开始的移动,否则不满足方向锁定终止标准。例如,预先确定的距离为X个像素(例如,X=100,X=200,或X=300等),其中触敏表面是触摸屏显示器,并且显示器上的用户界面对象被配置为移动以显露出X个像素宽的区域,显示关于用户界面对象的附加信息。在一些实施例中,相同的方向锁定终止标准应用于同一连续检测到的接触的第二移动和其他稍晚相应移动,直到满足方向锁定终止标准。
在一些实施例中,用户界面包括一个或多个用户界面对象(例如,图5N-图5Q中的电子消息502、504、506、508、510、512、514和/或516),该一个或多个用户界面对象被配置为一旦设备检测到满足方向锁定终止标准的接触(例如,图5N-图5O中的接触592)的移动,就在垂直于喜爱的导航轴的第一方向上移动,以显示一个或多个用户界面对象的附加信息(例如,图5O中的元数据501、503、505、507和/或509),并且接触的移动(例如,图5N中的移动592)对应于用户界面对象在第一方向上的移动(724)。例如,对于具有触摸屏显示器的设备,触摸屏显示器的相应边缘是一旦结束方向锁定模式一个或多个用户界面对象就被配置为朝向其移动的边缘。
在一些实施例中,一个或多个用户界面对象(例如,图5N-图5Q中的电子消息502、504、506、508、510、512、514和/或516)垂直于喜爱的导航轴的移动的量与接触朝向触敏表面的相应边缘的移动的量(例如,图5O中的第二矢量分量596)成比例(726)。例如,在接触的移动和一个或多个用户界面对象的移动之间的比例在触摸屏显示器(例如,触摸屏显示器112)上为1:1时,利用直接操控来移动一个或多个用户界面对象。预先确定的距离是如下距离,该距离被选择成使得从触敏表面上距触敏表面的相应边缘小于预先确定的距离的点朝向触敏表面的相应边缘的移动将不足以在显示器上完全显示一个或多个用户界面对象的附加信息。例如,如果需要水平移动100个像素以显示附加信息,且接触从其当前位置移动到触敏表面的边缘会导致一个或多个用户界面对象水平移动90个像素,那么设备保持方向锁定模式,并放弃在第一方向上水平移动一个或多个用户界面对象,因为不会完全显示附加信息。
在一些实施例中,在确定第一移动(例如,图5H中的移动552)不满足方向锁定终止标准之后,并继续检测到触敏表面上的接触(例如,图5H-图5J中的接触550)时(728):设备检测触敏表面上的接触(例如,图5H-图5J中的接触550)的第二移动(例如,图5I中的移动562),其中接触的第二移动包括:第二移动在沿喜爱的导航轴的方向上的第一分量(例如,图5I中的第一矢量分量564),以及第二移动在不同于(例如,垂直于)喜爱的导航轴的方向上的第二分量(例如,第二矢量分量566)(730)。
在一些实施例中,响应于检测到接触(例如图5H-图5J中的接触550)的第二移动(例如图5I中的移动562)(732),根据第二移动满足方向锁定终止标准的确定,设备根据第二移动的第一分量(例如,图5I中的第一矢量分量574)和第二移动的第二分量(例如,第二矢量分量576)在二维中移动用户界面的一个或多个用户界面对象(例如,图5H-图5J中的电子消息502、504、506、508、510、512、514和/或516)(例如,横向平移或滚动用户界面)(734)。例如,如果接触的第一移动未解除根据喜爱的导航轴在一维中滚动用户界面的方向锁定模式,那么响应于检测到后续输入,该设备检查后续输入是否结束方向锁定模式。
在一些实施例中,响应于检测到接触(例如图5H-图5J中的接触550)的第二移动(例如图5I中的移动562)(732),根据第二移动不满足方向锁定终止标准的确定,设备根据第二移动的第一分量沿喜爱的导航轴在一维中移动用户界面的一个或多个用户界面对象(例如,横向平移或滚动用户界面)(736)。在一些实施例中,根据第二移动的第一分量移动(例如,滚动)一个或多个用户界面对象而忽略第二移动的第二分量。因此,在一些实施例中,方向锁定标准适用于不仅仅触敏表面上的接触的初始移动。
在一些实施例中,在确定第一移动(例如,图5K中的移动572)满足方向锁定终止标准之后,并继续检测到触敏表面(例如,触敏表面112)上的接触(例如,图5K-图5M中的接触570)时(738):设备检测触敏表面上的接触的第三移动(例如,图5L中的移动582),其中接触的第三移动包括:第三移动在沿喜爱的导航轴的方向上的第一分量(例如,第一矢量分量584),以及第三移动在不同于(例如,垂直于)喜爱的导航轴的方向上的第二分量(例如,第二矢量分量586)(740)。
在一些实施例中,响应于检测到接触的第三移动,设备根据第三移动(例如,图5K-图5M中的移动582)移动用户界面的一个或多个用户界面对象(例如,图5K-图5M中的电子消息502、504、506、508、510、512、514和/或516)(例如,横向平移或滚动用户界面),而不考虑第三移动(是否)满足方向锁定终止标准(742)。例如,如果接触(例如,图5K-图5M中的接触570)的第一移动(例如,图5K中的移动572)解除了根据喜爱的导航轴在一维中滚动用户界面的方向锁定模式,那么响应于检测到同一连续或不中断接触(例如,图5K-图5M中的接触570)进行的后续输入(例如,图5L中的移动582),则该设备不需要检查后续输入是否结束方向锁定模式。然而,在一些实施例中,在接触结束时,该设备返回方向锁定模式,并将方向锁定终止标准应用于在触敏表面上检测到的新接触。
应当理解,对图7A-图7C中的操作进行描述的特定顺序仅仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,相对于本文所述的其他方法(例如,方法800)所述的其他过程的细节同样以类似的方式适用于以上相对于图7A-图7C所述的方法700。例如,以上参考方法700所述的接触、手势、轴和用户界面对象任选地具有本文参考本文所述的其他方法(例如,方法800)所述的接触、手势、轴和用户界面对象的特性中的一个或多个特性。为了简明起见,这些详情在这里不再重复。
图8A-图8C是示出了提供与所显示内容单元相关联的元数据的方法800的流程图。方法800是在具有显示器和触敏表面的电子设备(例如,设备300,图3;或便携式多功能设备100,图1A)上执行的。在一些实施例中,显示器是触摸屏显示器,并且触敏表面在显示器上。在一些实施例中,显示器与触敏表面是分开的。方法800中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
如下所述,方法800提供了一种直观的方式来提供与显示内容单元相关联的元数据。该方法减少了用户当提供与显示内容单元相关联的元数据时的认知负担,从而创建一个更有效的人机界面。对于电池驱动的电子设备,使得用户能够更快且更有效地提供与显示内容单元相关联的元数据节省了功率并且增加了电池充电之间的间隔。
在一些实施例中,一种具有显示器(例如,图6A-图6R中的触摸屏112)和触敏表面(例如,图6A-图6R中的触摸屏112)的电子设备(例如,图6A-图6R中的多功能设备100)显示具有多个内容单元(例如,用户界面对象,其为包括以下中的一者或多者的内容的表示或对应于该内容:电子消息诸如即时消息、短消息服务(SMS)消息或电子邮件)的用户界面(例如,图6A-图6R中的用户界面600)(802)。沿用户界面中的第一轴(例如,垂直轴)布置多个内容单元(例如,图6A-图6R中的所发送电子消息602-1、602-2、602-3、602-4和/或602-5和/或图6A-图6R中的所接收电子消息604-1、604-2和/或604-3)(804)。
在一些实施例中,第一组内容单元具有基于颜色梯度确定的颜色,该颜色梯度沿第一轴(例如,主滚动轴)从第一颜色(例如,图6J中所接收消息604-3的暗色调)变化到第二颜色(例如,图6J中所接收消息604-1的淡色调)(806)。例如,将颜色梯度映射到显示器,并遮蔽消息以显露出颜色梯度,使得在消息在显示器上向下移动时,消息的颜色逐渐从第一颜色变为第二颜色,显示器上不同位置的消息具有不同的背景颜色或颜色梯度。例如,在图6J-图6K中,沿主滚动轴根据颜色梯度对所接收电子消息加色调,使得更近接收的消息(例如,在图6J中对所接收消息604-3加重色调)比更早接收的消息(例如,图6J中对所接收消息604-1加淡色调)更暗。在一些实施例中,在文本泡在时间上回溯时,其着色或色调会变淡(例如,使得用户可基于着色和/或色调相对确定多久以前接收/发送的文本)。在一些实施例中,最近的泡(例如内容单元)比更早的泡更暗(例如,在图6J中,所接收消息604-3比所接收消息604-1和604-2更暗)。在一些实施例中,颜色可以随着时间衰减以指明时效(例如,无论之后是否形成附加内容单元,内容单元的着色和/或色调都可以随时间减弱)。
在一些实施例中,该设备(例如多功能设备100)(例如,基于来自加速度计、陀螺仪或可以从其确定设备取向的其他传感器的测量)检测设备的取向变化(808)。在一些实施例中,取向变化是设备间距的变化(例如,绕设备显示器的水平轴旋转)。例如,一开始如图6L中所示,以70度角(例如,相对于水平面)拿着设备,并根据倾斜运动652倾斜回到图6M中所示的30度角(例如,相对于水平面)。
在一些实施例中,响应于检测到设备的取向变化,该设备根据设备的取向变化调节梯度(810)。(例如,切换第一颜色和第二颜色,或者将第一颜色和/或第二颜色变成不同颜色。)在一些实施例中,该梯度随时间连续变化,使得在旋转设备时内容单元似乎具有闪烁的效果(例如,随着所显示对象的观察角变化,所显示对象的颜色会变化)。例如,如图6L所示,在用户界面600上显示所接收消息604,其颜色/色调梯度沿主滚动轴根据相应消息的位置从深到淡变化(例如,在触摸屏112底部显示的所接收消息604-3色调深,并且在触摸屏112顶部显示的所接收消息604-1色调浅)。响应于检测到倾斜运动652,多功能设备100改变图6M中的消息色调,使得在显示器底部显示的所接收消息色调淡,并且在显示器顶部显示的所接收消息色调重。
相应的内容单元(例如,图6A-图6R中的所发送消息602和/或所接收消息804)与对应的元数据(例如,图6C-图6D和6I中的日期和时间元数据和/或图6F-图6G和图6N-图6R中的消息状态)相关联(812)。在一些实施例中,一开始不在显示器上显示对应的元数据(例如,在检测到符合元数据显示标准的输入之前,一开始不在显示器上显示元数据),例如,响应于检测到包括接触606在触摸屏112上的移动608的用户输入,多功能设备100在图6C中的触摸屏112上显示图6B中未显示的日期和时间元数据620-2和620-3。
在一些实施例中,针对相应内容单元的元数据包括以下中的一者或多者:对应于相应内容单元的时间(例如,发送或接收电子消息的时间)、对应于相应内容单元的日期(例如,发送或接收电子消息的日期)、对应于相应内容单元的读取状态(例如,电子消息是否已经被用户或接收人阅读)、相应内容单元的大小(例如,照片大小)、对应于相应内容单元的距离(例如,转向方向的两个步骤之间的距离,其中两个步骤由相应内容单元表示)、相应内容单元的作者(例如,电子消息的发送者)、相应内容单元的持续时间(例如,视频或音频文件的长度)、相应内容单元的安全设置(例如,针对文件的授权用户的列表)、以及相应内容单元的隐私状态(例如,针对文件的授权查看者的列表)(814)。
在一些实施例中,多个内容单元是电子消息(例如,图6A-图6R中的所发送消息602和/或所接收消息604),相应内容单元是相应电子消息(例如,图6C中的所接收消息604-2),并且针对相应电子消息的元数据包括发送或接收电子消息的时间(例如,图6C中的1876年3月17日2:58)(816)。
在一些实施例中,所述多个内容单元是数字照片的表示(例如,数字照片诸如缩略图像的尺寸减小表示),相应内容单元是相应数字照片的表示,并且用于相应数字照片的表示的元数据包括指示用于捕获相应数字照片的相机设置的图像捕获数据(818)。
在一些实施例中,多个内容单元是转向方向中的步骤,相应内容单元是转向方向中的相应步骤,并且针对相应步骤的元数据包括对完成相应步骤将花费的时间的估计(820)。
该设备(例如,多功能设备100)检测触敏表面(例如,触摸屏112)上的接触(例如,分别为图6B、图6E和图6J中的接触606、622和/或642)(822),并检测接触的第一移动(例如,分别为图6B、图6E和图6J中的移动608、624和/或644)(824),并且响应于检测到接触的第一移动(826),该设备根据第一移动(例如,根据接触的与垂直于用户界面中的第一轴的移动对应的移动的第一分量,例如分别在图6C和图6F中的第一矢量分量610和626)垂直于用户界面(例如用户界面600)中的第一轴(例如,主滚动轴)移动第一组一个或多个内容单元(例如,图6C和6F中的所接收消息604)(828)。
在一些实施例中,第一组内容单元的相应内容单元(例如,图6I中的所接收消息604-2)对应于相应的元数据(例如,图6I中的时间和日期戳620-2),并且垂直于第一轴移动第一组内容单元(例如,将所接收消息604-2从图6I的顶部面板中的位置604-2-a移动640到图6I的底部面板中的位置604-2-d)包括显露出先前被相应内容单元占据的位置处的相应元数据(例如,在先前被所接收消息604-2占据的触摸屏112上的位置602-2-a处连续显露出时间和日期戳620-2)(830)。在一些实施例中(例如,没有该组内容单元的垂直移动),将对应于相应内容单元的元数据显示为在它们垂直于第一轴移动时从对应的内容单元“下方”显露出来(例如,消息604-2似乎在图6I中沿z方向覆盖了时间和日期戳620-2)。在一些实施例中,在背景上显示相应的内容单元,并偏移背景以显露出背景“下方”的元数据。
在一些实施例中,多个内容单元(例如,图6A-图6R中的所发送消息602和所接收消息604)包括在显示器(例如,触摸屏112)上显示的第二组一个或多个内容单元(例如,所发送消息602)(832)。垂直于第一轴(例如,主滚动轴)移动第一组内容单元(例如,图6C和图6F中的所接收消息604)包括垂直于第一轴移动第一组内容单元(例如,所接收消息604)而不移动第二组内容单元(例如,所发送消息602)。
在一些实施例中,响应于检测到接触的第一移动(例如,接触606从图6B中的位置606-a移动608到图6D中的位置606-b),设备显示第二组内容单元中的一个或多个内容单元的元数据(例如,图6D中针对所发送消息602的时间和日期戳621)以及第一组内容单元中的一个或多个内容单元的元数据(例如,图6D中针对所接收消息604的时间和日期戳620)(834)。
在一些实施例中,在刚检测到接触的第一移动之前(例如,如图6A中所示),在显示器的第一区域内布置(836)第一组内容单元中的一个或多个内容单元(例如,在图6A中的触摸屏112的左侧上显示所接收消息604),并在垂直于第一轴的方向上偏移第一区域的显示器的第二区域内布置第二组内容单元中的一个或多个内容单元(例如,在图6A中触摸屏112的右侧上显示所发送消息602)。在检测到接触的第一移动(例如,接触606从图6B中的触摸屏112上的位置606-a移动608到图6C中触摸屏112上的位置606-b)之后,在显示器的第二区域内布置第一组内容单元和第二组内容单元中的一个或多个内容单元(例如,在图6C-图6D中触摸屏112的右侧上,在显示器上先前被第一组内容单元占据的区域中,显示所接收消息604和所发送消息602),并在显示器的第一区域内显示所显示内容单元的元数据(例如,在图6C-图6D中触摸屏112的左侧上显示日期和时间戳620和621)(838)。
在一些实施例中,用户界面(例如,用户界面600)包括第一用户和第二用户之间的会话中的多个消息(例如,图6A-图6R中来自第一用户的所接收消息604,以及来自第二用户的所发送消息602),并且在用户界面中垂直于第一轴(例如主滚动轴)移动的第一组内容单元包括由第一用户发送的消息(例如,图6A-图6R中的所接收消息604),并且不包括由第二用户发送的消息(例如,图6A-图6R中的所发送消息602)(840)。例如,第二用户的消息(例如图6A-图6R中的所发送消息602)不会响应于检测到接触的第一移动而在用户界面中垂直于第一轴移动。在一些实施例中,第二用户的消息(例如,图6A-图6R中的所发送消息602)保持静止,而第一用户的消息(例如,图6A-图6R中的所接收消息604)垂直于第一轴移动。
响应于检测到接触的第一移动(826),针对第一组内容单元中的一个或多个相应内容单元(例如,图6C中的所接收消息604-2),设备(例如,多功能设备100)显示与刚检测到接触的第一移动之前未显示的相应内容单元(例如,图6C中的与所接收消息604-2相邻显示的时间和日期戳620-2)(例如,在检测到图6B中接触606的移动608之前未显示的时间和日期戳620-2)相邻的相应内容单元的元数据(例如,图6C中的时间和日期戳620-2)(842)。在一些实施例中,响应于检测到接触的第一移动,针对该组内容单元中的每个内容单元显示对应的元数据(例如,针对图6D中触摸屏112上显示的每个消息602和604显示时间和日期戳620和621)。因此,在一些实施例中,响应于检测到接触的第一移动,在显示器上显示先前未显示的元数据。
在一些实施例中,响应于检测到接触的第一移动(例如,包括接触622的第一分量矢量626、第二分量矢量628和矢量角630从图6E中的位置622-a到图6F中的位置622-b的移动624)(826),该设备根据第一移动(例如,根据接触的与在平行于用户界面中的第一轴的方向上的移动对应的移动的第二分量,例如移动与第一分量矢量626的大小对应的量),平行于用户界面中的第一轴(例如,沿主滚动轴,在触摸屏112上“向下”)移动该组一个或多个内容单元(例如,图6F中的所接收消息604和所发送消息602)(844)。
在一些实施例中,在显示相应内容单元(例如,图6F-图6H中的所接收消息604)的元数据(例如,图6F-图6G中的读取状态620)时,该设备检测接触的抬离(例如,图6G中触摸屏112上位置606-b处接触606的抬离)(846)。响应于检测到接触的抬离,该设备停止显示相应内容单元(例如,所接收消息604)的元数据(例如,在图6H中,不在触摸屏112上显示读取状态620)(848)。例如,该设备将内容单元滑回到针对相应内容单元的元数据上方(例如,所接收消息604-1和604-2从图6G中的触摸屏112右侧移动636和638到图6H中触摸屏112的左侧)。在一些实施例中,响应于检测到接触的抬离,停止显示响应于检测到接触的第一移动而显示的元数据。
在一些实施例中,该设备(例如多功能设备100)检测触敏表面(例如,触摸屏112)上的接触的第二移动(例如,接触654从图6N中的位置654-b移动656到图6O中的位置654-c),其中第二移动包括与平行于第一轴的移动对应的移动的相应分量(例如,第一分量矢量658)(850)。响应于检测到接触的第二移动(例如,图6N中接触654的移动656)(852),设备确定触敏表面上的接触的移动的相应分量的大小(例如,确定图6N中第一分量矢量658的大小)(854)。在一些实施例中(例如,在触摸屏显示器上检测到接触且第二方向是触摸屏显示器上的垂直方向时),移动的相应分量是触摸屏显示器上的接触的移动的垂直分量。该设备然后平行于第一轴(例如,沿主滚动轴从图6N中触摸屏112的底部向图6O中触摸屏112的顶部)将多个内容单元(例如,图6N中的消息)中的第一内容单元(例如,图6N中的所接收消息604-2)移动与接触的移动的相应分量的大小(例如,第一分量矢量658的大小)成比例的第一量(856)。在一些实施例中,比例移动为1:1比例(例如,该设备使得用户能够通过在相应表示上放置接触并在触摸屏显示器上向上移动接触来直接操控相应内容单元)。在一些实施例中,根据接触的移动的相应分量,整个用户界面上下滚动(或包括内容单元的用户界面的内容显示区域)。
在一些实施例中,响应于检测到接触的第二移动(例如,接触662从图6P中的位置662-b移动664到图6P中的位置662-c)(852),在移动第一内容单元(例如,所接收消息604-2)时,该设备沿第一轴(例如,沿主滚动轴“向上”)将与第一内容单元相邻的第二内容单元(例如,所发送消息602-4)移动小于第一量的第二量(例如,所发送消息602-4从图6P中触摸屏112的底部到图6Q中触摸屏112的中部的移动小于所接收消息604-2从图6P中触摸屏112的底部到图6Q中触摸屏112的顶部的移动)(858)。在一些实施例中,该设备沿第一轴(例如,主滚动轴)将与第二内容单元相邻的第三内容单元(例如,图6P-图6R中的所接收消息604-3)移动小于第二量的第三量(例如,所接收消息604-3从图6P中触摸屏112的底部以下到图6Q中触摸屏112的底部的移动小于所发送消息602-4从图6P中触摸屏112的底部到图6Q中触摸屏112的中部的移动)(860)。
在一些实施例中,在移动第一内容单元时,与触敏表面上的接触的移动成比例地移动第二内容单元和第三内容单元,其中内容单元的移动与接触的移动的比例小于1:1(例如0.9:1或0.8:1)。在一些实施例中,在运动方向上“跟随”第一内容单元的内容单元移动比例减小的量,而在运动方向上“超前于”第一内容单元的内容单元以1:1比例的量移动(例如,“超前于”第一内容单元的内容单元被第一内容单元“推动”,而“跟随”第一内容单元的内容单元以递减的比例常数落后于第一内容单元,使得距第一内容单元更远的“跟随”内容单元比距第一内容单元更近的“跟随”内容单元移动地更慢)。在一些实施例中,在运动方向上“超前于”第一内容单元的内容单元以递增比例的量移动(例如,1.1:1或1.2:1),使得距第一内容单元更远的“超前”内容单元比距第一内容单元更近的“超前”内容单元移动更快。在一些实施例中,在接触移动时,内容单元离开得越来越远,并且在接触停止移动之后,内容单元变得靠近在一起(例如,离第一内容单元更远的内容单元继续以某种惯性移动,以便移得距第一内容单元更近)。例如,在检测到图6Q中位置662-c处的接触662抬离时,所接收消息604-2停止移动,但滞后的内容单元602-4和604-3继续分别根据移动680和682移动,直到它们到达图6R中与所接收消息604-2相邻的位置。在一些实施例中,如果接触662在位置662-c停止移动,而不是停止被检测到(例如,在接触662静止或基本静止时),执行与图6O-图6R中所示类似的操作。
在一些实施例中,响应于检测到接触的第二移动,第一内容单元、第二内容单元和第三内容单元全部在显示器上最终移动相同的量(例如,在第二移动结束之后预先确定量的时间),然而,在第二移动期间,第一内容单元、第二内容单元和第三内容单元以不同速率移动。例如,在第二移动之后,设备检测到接触从触敏表面的抬离,并且在接触抬离的时候,第一内容单元移动得比第二内容单元更远,并且第二内容单元移动得比第三内容单元更远;然而,在第一内容单元停止移动之后,第二内容单元和第三内容单元继续移动,使得在短时间之后(例如,在检测到接触的抬离之后0.05、0.1、0.2、0.5或1秒),第一内容单元、第二内容单元和第三内容单元在显示器上响应于检测到接触的第二移动,移动了相同的量。
应当理解,对图8A-图8C中的操作进行描述的特定顺序仅仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,相对于本文所述的其他方法(例如,方法700)所述的其他过程的细节同样以类似的方式适用于以上相对于图8A-图8C所述的方法800。例如,以上参考方法800所述的接触、手势、轴和用户界面对象任选地具有本文参考本文所述的其他方法(例如,方法700)所述的接触、手势、轴和用户界面对象的特性中的一个或多个特性。为了简明起见,这些详情在这里不再重复。
根据一些实施例,图9示出了根据各种所述实施例的原理进行配置的电子设备900的功能框图。该设备的功能块任选地由贯彻各种所描述的实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的技术人员应当理解,图9中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施例的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图9中所示,电子设备900包括显示单元902,其被配置为显示带有喜爱的导航轴的用户界面;触敏表面单元904,其被配置为接收用户接触;以及处理单元906,其被耦接到显示单元902和触敏表面单元904。在一些实施例中,处理单元906包括显示启用单元908、检测单元910、确定单元912和移动单元914。
处理单元被配置为检测触敏表面单元904上的接触(例如,利用检测单元910)并检测触敏表面单元904上的接触(例如,利用检测单元910)的第一移动,其中接触的第一移动包括:第一移动在沿喜爱的导航轴的方向上的第一分量;以及第一移动在不同于喜爱的导航轴的方向上的第二分量。处理单元904还被配置为,响应于检测到接触的第一移动:根据第一移动满足方向锁定终止标准的确定,(例如,利用移动单元914)根据第一移动的第一分量和第一移动的第二分量在二维中移动用户界面的一个或多个用户界面对象;并且根据第一移动不满足方向锁定终止标准的确定,(例如,利用移动单元914)根据第一移动的第一分量沿喜爱的导航轴在一维中移动用户界面的一个或多个用户界面对象。
在一些实施例中,处理单元906被进一步配置为在确定第一移动不满足方向锁定终止标准之后,且在继续检测到触敏表面单元上的接触时,(例如,利用检测单元910)检测触敏表面单元上的接触的第二移动,其中接触的第二移动包括第二移动在沿喜爱的导航轴的方向上的第一分量,以及第二移动在不同于喜爱的导航轴的方向上的第二分量。处理单元904还被配置为,响应于检测到接触的第二移动:根据第二移动满足方向锁定终止标准的确定,(例如,利用移动单元914)根据第二移动的第一分量和第二移动的第二分量在二维中移动用户界面的一个或多个用户界面对象;并且根据第二移动不满足方向锁定终止标准的确定,(例如,利用移动单元914)根据第二移动的第一分量沿喜爱的导航轴在一维中移动用户界面的一个或多个用户界面对象。
在一些实施例中,处理单元906被进一步配置为在确定第一移动满足方向锁定终止标准之后,且在继续检测到触敏表面单元上的接触时,(例如,利用检测单元910)检测触敏表面单元904上的接触的第三移动,其中接触的第三移动包括第三移动在沿喜爱的导航轴的方向上的第一分量,以及第三移动在不同于喜爱的导航轴的方向上的第二分量。处理单元906还被配置为,响应于检测到接触的第三移动,(例如,利用移动单元914)根据第三移动来移动用户界面的一个或多个用户界面对象,而不考虑第三移动是否满足方向锁定终止标准。
在一些实施例中,方向锁定终止标准包括在接触的第一移动和喜爱的导航轴之间的角度大于预先确定的角度时满足的标准。
在一些实施例中,方向锁定终止标准包括在第一移动距触敏表面单元904的相应边缘超过预先确定的距离开始时满足的标准。
在一些实施例中,用户界面包括一个或多个用户界面对象,该一个或多个用户界面对象被配置为一旦设备900(例如,利用检测单元910)检测到满足方向锁定终止标准的接触的移动,就在垂直于喜爱的导航轴的第一方向上移动,以便显示一个或多个用户界面对象的附加信息,并且接触的朝向相应边缘的移动对应于用户界面对象在第一方向上的移动。
在一些实施例中,一个或多个用户界面对象垂直于喜爱的导航轴的移动的量与接触朝向触敏表面单元904的相应边缘的移动的量成比例,并且预先确定的距离是如下距离,该距离被选择成使得从触敏表面单元904上距触敏表面单元904的相应边缘小于预先确定的距离的点朝向触敏表面单元904的相应边缘的移动将不足以在显示单元902上完全显示一个或多个用户界面对象的附加信息。
根据一些实施例,图10示出了根据各种所述实施例的原理进行配置的电子设备1000的功能框图。该设备的功能块任选地由贯彻各种所描述的实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的技术人员应当理解,图10中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施例的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图10中所示,电子设备1000包括被配置为显示用户界面的显示单元1002、被配置为接收用户接触的触敏表面单元1004,任选的被配置为检测电子设备1000的取向变化的取向感测单元1006,以及耦接到显示单元1002、触敏表面单元1004和任选的取向感测单元1006的处理单元1008,该用户界面具有沿用户界面中的第一轴布置的多个内容单元,其中相应内容单元与对应元数据相关联。在一些实施例中,处理单元1008包括显示启用单元1010、检测单元1012、确定单元1014、移动单元1016、停止单元1018和调节单元1020。
处理单元1008被配置为:使得能够(例如,利用显示启用单元1010)显示具有沿用户界面中的第一轴布置的多个内容单元的用户界面,其中相应内容单元与对应元数据相关联。处理单元1008还被配置为(例如,利用检测单元1012)检测触敏表面单元1004上的接触,并(例如,利用检测单元1012)检测接触的第一移动。处理单元1008被进一步配置为响应于检测到接触的第一移动,(例如,使用移动单元1016)根据第一移动,垂直于用户界面中的第一轴移动第一组一个或多个内容单元,并且针对第一组内容单元中的一个或多个相应内容单元,(例如,利用显示启用单元1010)显示与刚检测到接触的第一移动之前未显示的相应内容单元相邻的相应内容单元的元数据。
在一些实施例中,处理单元1008被进一步配置为响应于检测到接触的第一移动,(例如,利用移动单元1016)根据第一移动,平行于用户界面中的第一轴移动该组一个或多个内容单元。
在一些实施例中,第一组内容单元的相应内容单元对应于相应元数据,并且垂直于第一轴移动第一组内容单元包括在先前被相应内容单元占据的位置处显露出相应元数据。
在一些实施例中,多个内容单元包括在显示单元1002上显示的第二组一个或多个内容单元,并且垂直于第一轴移动第一组内容单元包括垂直于第一轴移动第一组内容单元而不移动第二组内容单元。
在一些实施例中,处理单元被进一步配置为响应于检测到接触的第一移动,(例如,利用显示启用单元1010)显示第二组内容单元中的一个或多个内容单元以及第一组内容单元中的一个或多个内容单元的元数据。
在一些实施例中,在刚检测到接触的第一移动之前,在显示单元1002的第一区域内布置第一组内容单元中的一个或多个内容单元,并在垂直于第一轴的方向上偏移第一区域的显示单元1002的第二区域内布置第二组内容单元中的一个或多个内容单元。在检测到接触的第一移动之后,在显示单元1002的第二区域内布置第一组内容单元和第二组内容单元中的一个或多个内容单元,并在显示单元1002的第一区域内显示所显示内容单元的元数据。
在一些实施例中,处理单元被进一步配置为,在显示相应内容单元的元数据时,(例如,利用检测单元1012)检测接触的抬离,并响应于检测到接触的抬离,(例如,利用停止单元1018)停止显示相应内容单元的元数据。
在一些实施例中,针对相应内容单元的元数据包括以下中的一者或多者:对应于相应内容单元的时间;对应于相应内容单元的日期;对应于相应内容单元的读取状态;相应内容单元的大小;对应于相应内容单元的距离;相应内容单元的作者;相应内容单元的持续时间;相应内容单元的安全设置;以及相应内容单元的隐私状态。
在一些实施例中,多个内容单元是电子消息,相应内容单元是相应电子消息,并且针对相应电子消息的元数据包括发送或接收电子消息的时间。
在一些实施例中,用户界面包括第一用户和第二用户之间的会话中的多个消息,并且垂直于用户界面中的第一轴移动的第一组内容单元包括由第一用户发送的消息,并且不包括由第二用户发送的消息。
在一些实施例中,所述多个内容单元是数字照片的表示,相应内容单元是相应数字照片的表示,并且用于相应数字照片的表示的元数据包括指示用于捕获相应数字照片的相机设置的图像捕获数据。
在一些实施例中,多个内容单元是转向方向中的步骤,相应内容单元是转向方向中的相应步骤,并且针对相应步骤的元数据包括对完成相应步骤将花费的时间的估计。
在一些实施例中,第一组内容单元具有基于颜色梯度确定的颜色,颜色梯度沿第一轴从第一颜色变化到第二颜色,并且处理单元1008被进一步配置为:(例如,利用取向感测单元1006和检测单元1012)检测设备的取向变化,并响应于检测到设备的取向变化,(例如,利用调节单元1020)根据设备的取向变化调节梯度。
在一些实施例中,处理单元1008被进一步配置为(例如,利用检测单元1012)检测触敏表面单元1004上的接触的第二移动,其中第二移动包括与平行于第一轴的移动对应的移动的相应分量。处理单元还被配置为,响应于检测到接触的第二移动:(例如,利用确定单元1014)确定触敏表面单元1004上的接触的移动的相应分量的大小,并(例如,利用移动单元1016)平行于第一轴将多个内容单元中的第一内容单元移动与接触的移动的相应分量的大小成比例的第一量。
在一些实施例中,处理单元1008被进一步配置为响应于检测到接触的第二移动,在移动第一内容单元时,(例如,利用移动单元1016)沿第一轴将与第一内容单元相邻的第二内容单元移动比第一量小的第二量,并(例如,利用移动单元1016)沿第一轴将与第二内容单元相邻的第三内容单元移动比第二量小的第三量。
上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或多个功能模块来实现,该信息处理设备诸如为通用处理器(例如,如以上相对于图IA和图3所描述)或特定于应用的芯片。
以上参考图7A-图7C和图8A-图8C所述的操作任选地由图1A-图1B、图9或图10中所示的部件来实施。例如,检测操作706、708、718、730、740、808、822、824、846和850,移动操作716、718、734、736、742、828、844、856、858和860,更改操作810,显示操作834和842,停止操作848,以及确定操作854任选地由事件分类器170、事件识别器180和事件处理程序190来实施。事件分类器170中的事件监视器171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用136-1。应用136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用所显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A-图1B中所示的部件可如何实现其他过程。
为了解释的目的,前面的描述是通过参考具体实施例来进行描述的。然而,上面的示例性的论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择和描述实施例是为了最佳地阐明本发明的原理及其实际应用,以便由此使得本领域的其他技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施例。

Claims (21)

1.一种用于移动内容单元和显示元数据的方法,包括:
在具有触敏表面(451)和显示器(450)的电子设备(100)处显示具有多个内容单元的用户界面,其中:
所述多个内容单元沿所述用户界面中的第一滚动轴布置;并且
相应内容单元与对应元数据相关联;
检测所述触敏表面(451)上的单点接触并检测所述单点接触的第一移动;以及
响应于检测到所述单点接触的所述第一移动:
根据所述单点接触的所述第一移动,垂直于所述用户界面中的所述第一滚动轴移动第一组两个或两个以上所述内容单元,其中所述第一组内容单元包括第一内容单元和第二内容单元;以及
针对所述第一组内容单元中的两个或两个以上相应内容单元,显示与刚检测到所述单点接触的所述第一移动之前未显示的所述相应内容单元相邻的所述相应内容单元的元数据,包括在所述显示器上同时显示:
与所述第一内容单元相邻、用于所述第一内容单元的第一元数据;以及
与所述第二内容单元相邻、不同于所述第一元数据的第二元数据。
2.根据权利要求1所述的方法,其中:
所述多个内容单元包括在所述显示器上显示的第二组一个或多个内容单元;并且
垂直于所述第一滚动轴移动所述第一组内容单元包括垂直于所述第一滚动轴移动所述第一组内容单元而不移动所述第二组内容单元。
3.根据权利要求2所述的方法,其中:
在刚检测到所述单点接触的所述第一移动之前:
在所述显示器(450)的第一区域内布置所述第一组内容单元中的一个或多个内容单元;并且
在垂直于所述第一滚动轴的方向上偏移所述第一区域的所述显示器(450)的第二区域内布置所述第二组内容单元中的一个或多个内容单元;并且
在检测到所述单点接触的所述第一移动之后:
在所述显示器(450)的所述第二区域内布置所述第一组内容单元和所述第二组内容单元中的一个或多个内容单元;并且
在所述显示器(450)的所述第一区域内显示所显示内容单元的元数据。
4.根据权利要求1-3中任一项所述的方法,包括:
在显示所述相应内容单元的所述元数据时,检测所述单点接触的抬离;以及
响应于检测到所述单点接触的抬离,停止显示所述相应内容单元的所述元数据。
5.根据权利要求1-3中任一项所述的方法,其中:
所述用户界面包括第一用户和第二用户之间的会话中的多个消息;并且
垂直于所述用户界面中的所述第一滚动轴移动的所述第一组内容单元包括由所述第一用户发送的消息、并且不包括由所述第二用户发送的消息。
6.根据权利要求1-3中任一项所述的方法,其中:
所述第一组内容单元具有基于颜色梯度确定的颜色,所述颜色梯度沿所述第一滚动轴从第一颜色变化到第二颜色;并且
所述方法包括:
检测所述设备(100)的取向变化;以及
响应于检测到所述设备(100)的所述取向变化,根据所述设备(100)的所述取向变化调节所述梯度。
7.根据权利要求1-3中任一项所述的方法,包括:
检测所述触敏表面(451)上的单点接触的第二移动,其中所述第二移动包括与平行于所述第一滚动轴的移动对应的移动的相应分量;以及
响应于检测到所述单点接触的所述第二移动:
确定所述触敏表面(451)上的所述单点接触的移动的所述相应分量的大小;
平行于所述第一滚动轴将所述多个内容单元中的第一内容单元移动与所述单点接触的移动的所述相应分量的所述大小成比例的第一量;
在移动所述第一内容单元时,沿所述第一滚动轴将与所述第一内容单元相邻的第二内容单元移动小于所述第一量的第二量;
以及
沿所述第一滚动轴将与所述第二内容单元相邻的第三内容单元移动小于所述第二量的第三量。
8.一种用于移动内容单元和显示元数据的设备,包括:
用于在具有触敏表面(451)和显示器(450)的电子设备(100)处显示具有多个内容单元的用户界面的装置,其中:
所述多个内容单元沿所述用户界面中的第一滚动轴布置;并且相应内容单元与对应元数据相关联;
用于检测所述触敏表面(451)上的单点接触并检测所述单点接触的第一移动的装置;以及
用于响应于检测到所述单点接触的所述第一移动而进行如下操作的装置:
根据所述单点接触的所述第一移动,垂直于所述用户界面中的所述第一滚动轴移动第一组两个或两个以上所述内容单元,其中所述第一组内容单元包括第一内容单元和第二内容单元;以及
针对所述第一组内容单元中的两个或两个以上相应内容单元,显示与刚检测到所述单点接触的所述第一移动之前未显示的所述相应内容单元相邻的所述相应内容单元的元数据,包括在所述显示器上同时显示:
与所述第一内容单元相邻、用于所述第一内容单元的第一元数据;以及
与所述第二内容单元相邻、不同于所述第一元数据的第二元数据。
9.根据权利要求8所述的设备,其中:
所述多个内容单元包括在所述显示器上显示的第二组一个或多个内容单元;并且
垂直于所述第一滚动轴移动所述第一组内容单元包括垂直于所述第一滚动轴移动所述第一组内容单元而不移动所述第二组内容单元。
10.根据权利要求9所述的设备,其中:
在刚检测到所述单点接触的所述第一移动之前:
在所述显示器(450)的第一区域内布置所述第一组内容单元中的一个或多个内容单元;并且
在垂直于所述第一滚动轴的方向上偏移所述第一区域的所述显示器(450)的第二区域内布置所述第二组内容单元中的一个或多个内容单元;并且
在检测到所述单点接触的所述第一移动之后:
在所述显示器(450)的所述第二区域内布置所述第一组内容单元和所述第二组内容单元中的一个或多个内容单元;并且
在所述显示器(450)的所述第一区域内显示所显示内容单元的元数据。
11.根据权利要求8-10中任一项所述的设备,包括:
用于在显示所述相应内容单元的所述元数据时检测所述单点接触的抬离的装置;和
用于响应于检测到所述单点接触的抬离而停止显示所述相应内容单元的所述元数据的装置。
12.根据权利要求8-10中任一项所述的设备,其中:
所述用户界面包括第一用户和第二用户之间的会话中的多个消息;并且
垂直于所述用户界面中的所述第一滚动轴移动的所述第一组内容单元包括由所述第一用户发送的消息、并且不包括由所述第二用户发送的消息。
13.根据权利要求8-10中任一项所述的设备,其中:
所述第一组内容单元具有基于颜色梯度确定的颜色,所述颜色梯度沿所述第一滚动轴从第一颜色变化到第二颜色;并且
所述设备包括:
用于检测所述设备(100)的取向变化的装置;和
用于响应于检测到所述设备(100)的所述取向变化而根据所述设备(100)的所述取向变化来调节所述梯度的装置。
14.根据权利要求8-10中任一项所述的设备,包括:
用于检测所述触敏表面(451)上单点接触的第二移动的装置,其中所述第二移动包括与平行于所述第一滚动轴的移动对应的移动的相应分量;和
用于响应于检测到所述单点接触的所述第二移动包括以下装置的装置:
用于确定所述触敏表面(451)上所述单点接触的移动的所述相应分量的大小的装置;
用于平行于所述第一滚动轴将所述多个内容单元中的第一内容单元移动与所述单点接触的移动的所述相应分量的所述大小成比例的第一量的装置;
用于在移动所述第一内容单元时而沿所述第一滚动轴将与所述第一内容单元相邻的第二内容单元移动小于所述第一量的第二量的装置;和
用于沿所述第一滚动轴将与所述第二内容单元相邻的第三内容单元移动小于所述第二量的第三量的装置。
15.一种电子设备,包括:
显示单元(450),所述显示单元被配置为显示用户界面,所述用户界面具有沿所述用户界面中的第一滚动轴布置的多个内容单元,其中相应内容单元与对应元数据相关联;
触敏表面单元(451),所述触敏表面单元(451)被配置为接收用户接触;以及
处理单元,所述处理单元耦接到所述显示单元和所述触敏表面单元,所述处理单元被配置为:
检测所述触敏表面单元(451)上的单点接触并检测所述单点接触的第一移动;以及
响应于检测到所述单点接触的所述第一移动:
根据所述单点接触的所述第一移动,垂直于所述用户界面中的所述第一滚动轴移动第一组一两个或两个以上所述内容单元,其中所述第一组内容单元包括第一内容单元和第二内容单元;以及
针对所述第一组内容单元中的两个或两个以上相应内容单元,显示与刚检测到所述单点接触的所述第一移动之前未显示的所述相应内容单元相邻的所述相应内容单元的元数据,包括在所述显示器上同时显示:
与所述第一内容单元相邻、用于所述第一内容单元的第一元数据;以及
与所述第二内容单元相邻、不同于所述第一元数据的第二元数据。
16.根据权利要求15所述的电子设备,其中:
所述多个内容单元包括所述显示单元上显示的第二组一个或多个内容单元;并且
垂直于所述第一滚动轴移动所述第一组内容单元包括垂直于所述第一滚动轴移动所述第一组内容单元而不移动所述第二组内容单元。
17.根据权利要求16所述的电子设备,其中:
在刚检测到所述单点接触的所述第一移动之前:
在所述显示单元(450)的第一区域内布置所述第一组内容单元中的一个或多个内容单元;并且
在垂直于所述第一滚动轴的方向上偏移所述第一区域的所述显示单元(450)的第二区域内布置所述第二组内容单元中的一个或多个内容单元;并且
在检测到所述单点接触的所述第一移动之后:
在所述显示单元(450)的所述第二区域内布置所述第一组内容单元和所述第二组内容单元中的一个或多个内容单元;并且
在所述显示单元(450)的所述第一区域内显示所显示内容单元的元数据。
18.根据权利要求15-17中任一项所述的电子设备,其中所述处理单元被进一步配置为:
在显示所述相应内容单元的所述元数据时,检测所述单点接触的抬离;以及
响应于检测到所述单点接触的抬离,停止显示所述相应内容单元的所述元数据。
19.根据权利要求15-17中任一项所述的电子设备,其中:
所述用户界面包括第一用户和第二用户之间会话中的多个消息;
并且
垂直于所述用户界面中的所述第一滚动轴移动的所述第一组内容单元包括由所述第一用户发送的消息,并且不包括由所述第二用户发送的消息。
20.根据权利要求15-17中任一项所述的电子设备,其中:
所述第一组内容单元具有基于颜色梯度确定的颜色,所述颜色梯度沿所述第一滚动轴从第一颜色变化到第二颜色;并且
所述处理单元被进一步配置为:
检测所述设备(100)的取向变化;以及
响应于检测到所述设备(100)的所述取向变化,根据所述设备(100)的所述取向变化调节所述梯度。
21.根据权利要求15-17中任一项所述的电子设备,其中所述处理单元被进一步配置为:
检测所述触敏表面单元(451)上的单点接触的第二移动,其中所述第二移动包括与平行于所述第一滚动轴的移动对应的移动的相应分量;以及
响应于检测到所述单点接触的所述第二移动:
确定所述触敏表面单元(451)上的所述单点接触的移动的所述相应分量的大小;
平行于所述第一滚动轴将所述多个内容单元中的第一内容单元移动与所述单点接触的移动的所述相应分量的所述大小成比例的第一量;
在移动所述第一内容单元时,沿所述第一滚动轴将与所述第一内容单元相邻的第二内容单元移动小于所述第一量的第二量;以及
沿所述第一滚动轴将与所述第二内容单元相邻的第三内容单元移动小于所述第二量的第三量。
CN201480032749.2A 2013-06-09 2014-05-21 用于移动用户界面对象的设备、方法和图形用户界面 Active CN105264477B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910579739.5A CN110308853B (zh) 2013-06-09 2014-05-21 用于移动用户界面对象的设备、方法和图形用户界面

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361832956P 2013-06-09 2013-06-09
US61/832,956 2013-06-09
PCT/US2014/038943 WO2014200676A2 (en) 2013-06-09 2014-05-21 Device, method, and graphical user interface for moving user interface objects

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910579739.5A Division CN110308853B (zh) 2013-06-09 2014-05-21 用于移动用户界面对象的设备、方法和图形用户界面

Publications (2)

Publication Number Publication Date
CN105264477A CN105264477A (zh) 2016-01-20
CN105264477B true CN105264477B (zh) 2019-07-05

Family

ID=51063786

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910579739.5A Active CN110308853B (zh) 2013-06-09 2014-05-21 用于移动用户界面对象的设备、方法和图形用户界面
CN201480032749.2A Active CN105264477B (zh) 2013-06-09 2014-05-21 用于移动用户界面对象的设备、方法和图形用户界面

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910579739.5A Active CN110308853B (zh) 2013-06-09 2014-05-21 用于移动用户界面对象的设备、方法和图形用户界面

Country Status (8)

Country Link
US (3) US11334238B2 (zh)
EP (2) EP3008566B1 (zh)
JP (2) JP6031635B2 (zh)
KR (2) KR101921039B1 (zh)
CN (2) CN110308853B (zh)
AU (2) AU2014278636B2 (zh)
HK (2) HK1219151A1 (zh)
WO (1) WO2014200676A2 (zh)

Families Citing this family (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10345996B2 (en) * 2008-10-22 2019-07-09 Merge Healthcare Solutions Inc. User interface systems and methods
US10768785B2 (en) 2008-10-22 2020-09-08 Merge Healthcare Solutions Inc. Pressure sensitive manipulation of medical image data
US20100100849A1 (en) 2008-10-22 2010-04-22 Dr Systems, Inc. User interface systems and methods
KR101601040B1 (ko) * 2009-05-19 2016-03-09 삼성전자주식회사 휴대 단말기의 화면 표시 방법 및 이를 지원하는 휴대 단말기
US8797350B2 (en) 2010-12-20 2014-08-05 Dr Systems, Inc. Dynamic customizable human-computer interaction behavior
US11089134B1 (en) 2011-12-19 2021-08-10 Majen Tech, LLC System, method, and computer program product for coordination among multiple devices
US10776103B2 (en) 2011-12-19 2020-09-15 Majen Tech, LLC System, method, and computer program product for coordination among multiple devices
US10057400B1 (en) 2012-11-02 2018-08-21 Majen Tech, LLC Lock screen interface for a mobile device apparatus
US10051103B1 (en) 2013-01-10 2018-08-14 Majen Tech, LLC Screen interface for a mobile device apparatus
US11431834B1 (en) 2013-01-10 2022-08-30 Majen Tech, LLC Screen interface for a mobile device apparatus
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
WO2014200676A2 (en) 2013-06-09 2014-12-18 Apple Inc. Device, method, and graphical user interface for moving user interface objects
US10282083B2 (en) 2013-06-09 2019-05-07 Apple Inc. Device, method, and graphical user interface for transitioning between user interfaces
US9712577B2 (en) 2013-06-09 2017-07-18 Apple Inc. Device, method, and graphical user interface for sharing content from a respective application
USD737319S1 (en) 2013-06-09 2015-08-25 Apple Inc. Display screen or portion thereof with graphical user interface
US9477393B2 (en) 2013-06-09 2016-10-25 Apple Inc. Device, method, and graphical user interface for displaying application status information
US10120541B2 (en) 2013-06-09 2018-11-06 Apple Inc. Device, method, and graphical user interface for sharing content from a respective application
USD742894S1 (en) 2013-06-10 2015-11-10 Apple Inc. Display screen or portion thereof with graphical user interface
USD739867S1 (en) * 2013-09-20 2015-09-29 Viggle Inc. Display screen or portion thereof with animated graphical user interface
US20160239176A1 (en) * 2013-10-22 2016-08-18 Realitygate (Pty) Ltd Dynamic Modification of Content Presentation Based on Attributes of Received Input
USD751117S1 (en) 2014-02-07 2016-03-08 Apple Inc. Display screen or portion thereof with animated graphical user interface
US10313506B2 (en) 2014-05-30 2019-06-04 Apple Inc. Wellness aggregator
EP3882753A1 (en) 2014-06-24 2021-09-22 Apple Inc. Application menu for video system
US9430142B2 (en) * 2014-07-17 2016-08-30 Facebook, Inc. Touch-based gesture recognition and application navigation
TWD178887S (zh) 2014-09-01 2016-10-11 蘋果公司 顯示螢幕之圖形使用者介面之部分
USD771092S1 (en) * 2014-09-01 2016-11-08 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD762693S1 (en) 2014-09-03 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
EP3998762A1 (en) * 2015-02-02 2022-05-18 Apple Inc. Device, method, and graphical user interface for establishing a relationship and connection between two devices
USD775185S1 (en) 2015-03-06 2016-12-27 Apple Inc. Display screen or portion thereof with graphical user interface
US9542037B2 (en) * 2015-03-08 2017-01-10 Apple Inc. Device, method, and user interface for processing intensity of touch contacts
US10275116B2 (en) 2015-06-07 2019-04-30 Apple Inc. Browser with docked tabs
USD884003S1 (en) 2015-07-29 2020-05-12 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US20170180782A1 (en) * 2015-12-21 2017-06-22 Le Holdings (Beijing) Co., Ltd. Method and electronic device for displaying chat messages in live broadcasting application
KR20170082392A (ko) * 2016-01-06 2017-07-14 삼성전자주식회사 압력 센서를 이용한 사용자 인터페이스 제공 장치와 이의 화면 구성 방법
USD819647S1 (en) * 2016-05-13 2018-06-05 Google Llc Display screen or portion thereof with a transitional graphical user interface
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
US10873786B2 (en) 2016-06-12 2020-12-22 Apple Inc. Recording and broadcasting application visual output
USD803238S1 (en) 2016-06-12 2017-11-21 Apple Inc. Display screen or portion thereof with graphical user interface
US11816325B2 (en) 2016-06-12 2023-11-14 Apple Inc. Application shortcuts for carplay
CN114675774A (zh) * 2016-09-23 2022-06-28 苹果公司 用于对文本进行注释的设备、方法和图形用户界面
CN111694486B (zh) * 2017-05-16 2023-08-22 苹果公司 用于在用户界面之间导航的设备、方法和图形用户界面
JP6725073B2 (ja) * 2017-05-25 2020-07-15 京セラドキュメントソリューションズ株式会社 情報処理装置及びデータ表示方法
WO2018236601A1 (en) * 2017-06-19 2018-12-27 Get Attached, Inc. EXPLORING DIGITAL MEDIA BASED ON AUTOMATIC DIGITAL MEDIA INTERACTION CONTEXT AND FEEDBACK INTERACTION
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
USD893512S1 (en) 2018-09-10 2020-08-18 Apple Inc. Electronic device with graphical user interface
USD901525S1 (en) 2018-09-11 2020-11-10 Apple Inc. Electronic device with animated graphical user interface
USD956087S1 (en) * 2019-04-23 2022-06-28 Bottomline Technologies, Inc Display screen or portion thereof with a payment transaction graphical user interface
US11863700B2 (en) 2019-05-06 2024-01-02 Apple Inc. Providing user interfaces based on use contexts and managing playback of media
USD910068S1 (en) 2019-05-28 2021-02-09 Apple Inc. Display screen or portion thereof with graphical user interface
USD907053S1 (en) 2019-05-31 2021-01-05 Apple Inc. Electronic device with animated graphical user interface
USD916917S1 (en) * 2019-06-28 2021-04-20 Square, Inc. Display screen or portion thereof having a graphical user interface
USD949889S1 (en) * 2019-12-30 2022-04-26 Twitter, Inc. Display screen with graphical user interface for a social media application
USD971257S1 (en) * 2020-01-26 2022-11-29 Visualize K.K. Display screen with graphical user interface
US11303600B1 (en) * 2020-05-07 2022-04-12 Meta Platforms, Inc. Displaying text conversations with contextual images
USD937289S1 (en) * 2020-07-24 2021-11-30 Salesforce.Com, Inc. Display screen or portion thereof with graphical user interface
USD937290S1 (en) * 2020-07-24 2021-11-30 Salesforce.Com, Inc. Display screen or portion thereof with graphical user interface
USD937291S1 (en) * 2020-07-24 2021-11-30 Salesforce.Com, Inc. Display screen or portion thereof with graphical user interface
USD937288S1 (en) * 2020-07-24 2021-11-30 Salesforce.Com, Inc. Display screen or portion thereof with graphical user interface
USD947888S1 (en) * 2020-07-24 2022-04-05 Salesforce.Com, Inc. Display screen or portion thereof with animated graphical user interface
USD948556S1 (en) * 2020-07-24 2022-04-12 Salesforce.Com, Inc. Display screen or portion thereof with animated graphical user interface
USD1012095S1 (en) * 2020-10-26 2024-01-23 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
KR20220125441A (ko) * 2021-03-05 2022-09-14 삼성전자주식회사 콘텐츠 재생 방법 및 이를 지원하는 전자 장치
EP4323992A1 (en) 2021-05-15 2024-02-21 Apple Inc. User interfaces for group workouts
CN113300940B (zh) * 2021-05-19 2023-06-23 百果园技术(新加坡)有限公司 消息显示方法、装置、终端设备及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101681248A (zh) * 2007-06-27 2010-03-24 微软公司 中心锁定列表

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2237486B (en) * 1989-10-25 1994-02-16 Apple Computer Method and apparatus for controlling computer displays by using a two dimensional scroll palette
US6720863B2 (en) * 2001-08-16 2004-04-13 Wildseed Ltd. Mobile electronic communication device with lights to indicate received messages
US7730012B2 (en) * 2004-06-25 2010-06-01 Apple Inc. Methods and systems for managing data
US7890889B2 (en) * 2004-09-27 2011-02-15 Nokia Corporation User-interface application for media file management
US8527907B2 (en) * 2006-07-31 2013-09-03 Adobe Systems Incorporated Screen relayout
US8570278B2 (en) * 2006-10-26 2013-10-29 Apple Inc. Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US7903115B2 (en) * 2007-01-07 2011-03-08 Apple Inc. Animations
US20080168402A1 (en) * 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US8689132B2 (en) * 2007-01-07 2014-04-01 Apple Inc. Portable electronic device, method, and graphical user interface for displaying electronic documents and lists
US7844915B2 (en) * 2007-01-07 2010-11-30 Apple Inc. Application programming interfaces for scrolling operations
US9772751B2 (en) * 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
JP2010009534A (ja) 2008-06-30 2010-01-14 Fujitsu Ltd 電子装置及び表示方法
JP5099707B2 (ja) * 2008-10-27 2012-12-19 シャープ株式会社 携帯情報端末およびその制御方法
US8610673B2 (en) * 2008-12-03 2013-12-17 Microsoft Corporation Manipulation of list on a multi-touch display
JP5216618B2 (ja) 2009-02-04 2013-06-19 株式会社ゼンリンデータコム 画像表示装置、画像表示方法、およびコンピュータプログラム
US8255830B2 (en) * 2009-03-16 2012-08-28 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
KR101148335B1 (ko) 2009-07-23 2012-05-21 삼성전기주식회사 실리콘 반도체를 이용한 광전자 증배관 및 그 구조 셀
US8457604B2 (en) 2009-11-17 2013-06-04 Hewlett-Packard Development Company, L.P. Apparatus and method for sharing content on a mobile device
US8473860B2 (en) 2010-02-12 2013-06-25 Microsoft Corporation Multi-layer user interface with flexible parallel and orthogonal movement
US9417787B2 (en) * 2010-02-12 2016-08-16 Microsoft Technology Licensing, Llc Distortion effects to indicate location in a movable data collection
KR101719989B1 (ko) 2010-10-14 2017-03-27 엘지전자 주식회사 전자 장치 및 메뉴를 구성하기 위한 인터페이스 방법
CN103384873A (zh) * 2010-12-22 2013-11-06 汤姆逊许可公司 用于生成媒体收集的方法
US8291349B1 (en) * 2011-01-19 2012-10-16 Google Inc. Gesture-based metadata display
US9552015B2 (en) 2011-01-24 2017-01-24 Apple Inc. Device, method, and graphical user interface for navigating through an electronic document
US9134899B2 (en) * 2011-03-14 2015-09-15 Microsoft Technology Licensing, Llc Touch gesture indicating a scroll on a touch-sensitive display in a single direction
JP5799628B2 (ja) * 2011-07-15 2015-10-28 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US9256361B2 (en) * 2011-08-03 2016-02-09 Ebay Inc. Control of search results with multipoint pinch gestures
JP5553812B2 (ja) * 2011-10-26 2014-07-16 株式会社ソニー・コンピュータエンタテインメント スクロール制御装置、端末装置およびスクロール制御方法
US9143601B2 (en) 2011-11-09 2015-09-22 Microsoft Technology Licensing, Llc Event-based media grouping, playback, and sharing
US20130125061A1 (en) 2011-11-11 2013-05-16 Jongwoo LEE Efficient Navigation Of Hierarchical Data Displayed In A Graphical User Interface
JP5907713B2 (ja) * 2011-12-08 2016-04-26 シャープ株式会社 表示装置、情報端末装置、表示方法、プログラム、および記録媒体
JP5796786B2 (ja) * 2012-12-05 2015-10-21 日本電気株式会社 端末装置およびプログラム
JP2014197267A (ja) * 2013-03-29 2014-10-16 ブラザー工業株式会社 画像表示装置、画像表示方法及び画像表示プログラム
US10120541B2 (en) 2013-06-09 2018-11-06 Apple Inc. Device, method, and graphical user interface for sharing content from a respective application
US9712577B2 (en) 2013-06-09 2017-07-18 Apple Inc. Device, method, and graphical user interface for sharing content from a respective application
US10282083B2 (en) 2013-06-09 2019-05-07 Apple Inc. Device, method, and graphical user interface for transitioning between user interfaces
WO2014200676A2 (en) 2013-06-09 2014-12-18 Apple Inc. Device, method, and graphical user interface for moving user interface objects
US9477393B2 (en) 2013-06-09 2016-10-25 Apple Inc. Device, method, and graphical user interface for displaying application status information
DK179448B1 (da) 2014-01-23 2018-10-11 Apple Inc. Systems, Devices and Methods for Dynamically Providing User Interface Controls at a Touch-Sensitive Secondary Display.

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101681248A (zh) * 2007-06-27 2010-03-24 微软公司 中心锁定列表

Also Published As

Publication number Publication date
AU2014278636A8 (en) 2016-01-07
EP3008566A2 (en) 2016-04-20
JP6031635B2 (ja) 2016-11-24
EP3438807A1 (en) 2019-02-06
CN110308853A (zh) 2019-10-08
JP6328725B2 (ja) 2018-05-23
JP2016526236A (ja) 2016-09-01
CN110308853B (zh) 2022-07-15
AU2017272222A1 (en) 2018-01-04
AU2014278636A1 (en) 2015-12-24
KR20180078351A (ko) 2018-07-09
KR101875832B1 (ko) 2018-08-02
CN105264477A (zh) 2016-01-20
US11893233B2 (en) 2024-02-06
EP3008566B1 (en) 2018-10-24
JP2017079070A (ja) 2017-04-27
US20220155951A1 (en) 2022-05-19
US20140362056A1 (en) 2014-12-11
US11334238B2 (en) 2022-05-17
KR20160013209A (ko) 2016-02-03
KR101921039B1 (ko) 2018-11-21
US20200073547A1 (en) 2020-03-05
WO2014200676A3 (en) 2015-04-16
AU2014278636B2 (en) 2017-09-07
AU2017272222B2 (en) 2019-05-16
EP3438807B1 (en) 2020-09-23
WO2014200676A2 (en) 2014-12-18
US11301129B2 (en) 2022-04-12
HK1219151A1 (zh) 2017-03-24
HK1223172A1 (zh) 2017-07-21

Similar Documents

Publication Publication Date Title
CN105264477B (zh) 用于移动用户界面对象的设备、方法和图形用户界面
CN107797658B (zh) 用于触觉混合的设备、方法和图形用户界面
CN106605196B (zh) 远程相机用户界面
CN105283840B (zh) 用于同步两个或更多个显示器的设备、方法和图形用户界面
US10942639B2 (en) Accelerated scrolling
CN105144057B (zh) 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
CN105264479B (zh) 用于对用户界面分级结构进行导航的设备、方法和图形用户界面
CN104487927B (zh) 用于选择用户界面对象的设备、方法和图形用户界面
CN105144037B (zh) 用于输入字符的设备、方法和图形用户界面
CN105144067B (zh) 用于调节控件的外观的设备、方法和图形用户界面
CN104471521B (zh) 用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面
KR101451042B1 (ko) 객체들의 전후 위치를 재정렬하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스
CN107491258A (zh) 用于在分屏模式下操纵窗口的设备、方法和图形用户界面
CN109844711A (zh) 用于向设备上显示的内容加注释的统一注释层的设备、方法和图形用户界面
CN106662978A (zh) 用于改善设备的单手操作的用户界面
CN108845748A (zh) 用于针对多接触手势而放弃生成触觉输出的设备、方法和图形用户界面
CN107683470A (zh) 用于web浏览器的音频控制
CN109791465A (zh) 用于对文本进行注释的设备、方法和图形用户界面
CN107797656B (zh) 用于触觉混合的设备、方法和图形用户界面
CN107787478A (zh) 在用户界面显示器中选择内容项
CN106126047B (zh) 用于显示和使用菜单的设备、方法和图形用户界面
CN109416599A (zh) 用于基于调整的输入参数来处理触摸输入的设备和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1219151

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant