CN110554829A - 用于与应用切换用户界面进行交互的设备和方法 - Google Patents
用于与应用切换用户界面进行交互的设备和方法 Download PDFInfo
- Publication number
- CN110554829A CN110554829A CN201811165503.9A CN201811165503A CN110554829A CN 110554829 A CN110554829 A CN 110554829A CN 201811165503 A CN201811165503 A CN 201811165503A CN 110554829 A CN110554829 A CN 110554829A
- Authority
- CN
- China
- Prior art keywords
- application
- user interface
- contact
- touch
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 88
- 230000033001 locomotion Effects 0.000 claims abstract description 154
- 230000004044 response Effects 0.000 claims abstract description 84
- 238000003860 storage Methods 0.000 claims description 15
- 210000003811 finger Anatomy 0.000 description 35
- 238000004891 communication Methods 0.000 description 26
- 238000001514 detection method Methods 0.000 description 21
- 230000008569 process Effects 0.000 description 20
- 230000002093 peripheral effect Effects 0.000 description 19
- 230000003287 optical effect Effects 0.000 description 18
- 230000000007 visual effect Effects 0.000 description 18
- 230000006870 function Effects 0.000 description 15
- 230000007423 decrease Effects 0.000 description 13
- 238000012545 processing Methods 0.000 description 13
- 241000699666 Mus <mouse, genus> Species 0.000 description 12
- 238000007726 management method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 230000003993 interaction Effects 0.000 description 9
- 230000008859 change Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 8
- 238000009499 grossing Methods 0.000 description 7
- 238000006073 displacement reaction Methods 0.000 description 6
- 230000003213 activating effect Effects 0.000 description 5
- 230000008447 perception Effects 0.000 description 5
- 230000001960 triggered effect Effects 0.000 description 5
- 241001422033 Thestylus Species 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 3
- 230000004913 activation Effects 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 3
- 230000000977 initiatory effect Effects 0.000 description 3
- 230000035807 sensation Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 230000001149 cognitive effect Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 230000001934 delay Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 241000699670 Mus sp. Species 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000000881 depressing effect Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 229920000642 polymer Polymers 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Input From Keyboards Or The Like (AREA)
Abstract
本发明题为“用于与应用切换用户界面进行交互的设备和方法”。一种电子设备显示应用切换用户界面。在显示应用切换用户界面时,该设备检测接触作出的触摸手势。响应于该触摸手势:如果该触摸手势包括该接触在第一方向上的移动并且开始于对应于与相应应用对应的应用表示的位置处,则设备关闭相应应用;并且如果该触摸手势包括该接触在第一方向上的移动并且开始于与应用切换用户界面中在相应应用的表示外部的预定义区域对应的位置处,则该设备停止显示应用切换用户界面并显示应用启动用户界面。
Description
技术领域
本发明总体涉及具有触敏表面的电子设备,包括但不限于具有提供应用切换用户界面的触敏表面的电子设备,并且更具体地,涉及用于与应用切换用户界面进行交互的设备和方法。
背景技术
触敏表面作为计算机和其他电子计算设备的输入设备的使用在近年来显著增长。示例性触敏表面包括触控板和触摸屏显示器。此类表面被广泛地用于选择、启动和管理软件应用。
对于便携式电子设备而言,用于管理多个最近使用的应用的现有方法繁冗且效率低下。例如,具有小屏幕的便携式设备(例如智能电话和其他袖珍型设备)通常每次显示单个应用。利用此类设备,用户可能难以查看和管理多个最近使用的应用。这种情况对用户造成了显著的认知负担。此外,用于管理最近使用的应用的现有方法花费的时间比所需时间长,从而浪费精力。这后一考虑在电池驱动的设备中是特别重要的。
发明内容
因此,计算设备需要更快、更高效的方法和界面用于管理最近使用的应用。此类方法和界面可补充或替换用于管理最近使用的应用的常规方法。此类方法和界面减少对用户所造成的认知负担,并且产生更有效的人机界面。对于电池驱动的计算设备,此类方法和界面节省功率,并且增大电池充电之间的时间间隔。
应用切换用户界面显示例如根据每个应用的最后一次使用的相对新近度布置的多个最近使用的应用的表示。与应用切换用户界面交互的现有方法非常有限,例如,用户只能选择应用来显示该应用或从应用切换用户界面移除应用,或关闭应用切换用户界面以返回到最后显示的用户界面。所公开的电子设备减少或消除了与使用常规应用切换用户界面管理最近使用的应用相关联的上述缺陷和其他问题。
在一些实施方案中,该设备包括台式计算机。在一些实施方案中,该设备是便携式的(例如,笔记本电脑、平板电脑或手持设备)。在一些实施方案中,该设备包括个人电子设备(例如,可穿戴电子设备,诸如手表)。在一些实施方案中,该设备具有显示生成部件和一个或多个输入设备(和/或与之通信)。在一些实施方案中,该设备具有触控板(和/或与之通信)。在一些实施方案中,该设备具有触敏显示器(也称为“触摸屏”或“触摸屏显示器”)(和/或与之通信)。在一些实施方案中,该设备具有图形用户界面(GUI)、一个或多个处理器、存储器和一个或多个模块、被存储在存储器中以用于执行多个功能的程序或指令集。在一些实施方案中,用户部分地通过触笔和/或手指接触以及触敏表面上的手势来与GUI进行交互。在一些实施方案中,这些功能任选地包括玩游戏、图像编辑、绘图、演示、文字处理、电子表格制作、接打电话、视频会议、收发电子邮件、即时消息通信、健身支持、数字摄影、数字视频录制、网页浏览、数字音乐播放、记笔记和/或数字视频播放。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。
根据一些实施方案,在具有触敏显示器的电子设备处执行一种方法。该方法包括在显示器上显示应用。该方法进一步包括,在显示器上显示应用时,检测与显示应用切换用户界面的请求对应的输入;以及响应于检测到与显示应用切换用户界面的请求对应的输入,显示包括多个最近使用的应用的表示的应用切换用户界面,该多个表示包括与第一应用对应的第一应用表示和与第二应用对应的第二应用表示。该方法还包括:在显示应用切换用户界面时,在触敏表面上检测由接触作出的触摸手势;以及响应于检测到触摸手势:根据确定触摸手势包括所述接触在第一方向上的移动并且在与第一应用表示对应的位置处开始来关闭第一应用;根据确定触摸手势包括接触在第一方向上的移动并且在与第二应用表示对应的位置处开始来关闭第二应用;以及根据确定触摸手势包括接触在第一方向上的移动并且在与应用切换用户界面中的位于第一应用表示和第二应用表示外部的预定义区域对应的位置处开始来停止显示应用切换用户界面,并显示与应用切换用户界面不同的应用启动用户界面。
根据一些实施方案,电子设备包括显示器、可选的触敏表面、用于检测与触敏表面的接触的强度的一个或多个可选的传感器、一个或多个处理器、存储器以及一个或多个程序。一个或多个程序被存储于存储器中并且被配置为由一个或多个处理器执行。一个或多个程序包括用于执行本文所述方法中的任一方法的操作的指令。根据一些实施方案,计算机可读存储介质已在其中存储有指令,该指令当由具有显示器、可选的触敏表面和用于检测与触敏表面的接触的强度的一个或多个可选传感器的电子设备执行时,使得该设备执行本文所述方法中任一方法的操作。根据一些实施方案,在包括存储器和用于执行存储在存储器中的一个或多个程序的一个或多个处理器的电子设备上的图形用户界面包括在本文所述方法中任一方法中显示的元素中的一个或多个元素,这些元素响应于输入而被更新,如在本文所述方法中任一方法中所述。根据一些实施方案,电子设备包括显示器,可选的触敏表面,用于检测与触敏表面的接触的强度的一个或多个可选传感器,以及用于执行本文所述方法中任一方法的操作的装置。根据一些实施方案,一种在包括显示器、可选的触敏表面和用于检测与触敏表面的接触的强度的一个或多个可选传感器的电子设备中使用的信息处理装置包括用于执行本文所述方法中任一方法的操作的装置。
因此,为电子设备提供更快更高效的方法和界面以用于集成视频与用户界面导航,由此提高此类设备的有效性、效率和用户满意度。此类方法和界面可补充或替换用于集成视频与用户界面导航的常规方法。
附图说明
为了更好地理解各种所述实施方案,应结合以下附图参考下面的具体实施方式,其中类似的附图标号在所有附图中指示对应的部分。
图1A是示出了根据一些实施方案具有触敏显示器的便携式多功能设备的框图。
图1B是示出了根据一些实施方案用于事件处理的示例部件的框图。
图2示出了根据一些实施方案具有触摸屏的便携式多功能设备。
图3是根据一些实施方案具有显示器和触敏表面的示例多功能设备的框图。
图4A示出了根据一些实施方案用于便携式多功能设备上的应用的菜单的示例用户界面。
图4B示出了根据一些实施方案用于具有与显示器分开的触敏表面的多功能设备的示例用户界面。
图4C-4E示出了根据一些实施方案的动态强度阈值的实施例。
图5A-5Z示出了根据一些实施方案用于集成应用切换用户界面的示例用户界面。
图6A-6D是示出了根据一些实施方案与应用切换用户界面交互的方法的流程图。
具体实施方式
本文所述的方法、设备和GUI通过多种方式改善应用切换用户界面的交互和功能。
在一些实施方案中,当显示应用切换用户界面时,在设备的触敏表面上检测到的由接触作出的轻扫手势使得设备根据轻扫手势的各种特征(例如,轻扫手势的方向、接触的移动速度和/或距离和/或轻扫手势的开始和/或结束位置)执行不同的操作。具体地,在一些实施方案中,从与应用切换用户界面中的相应应用的表示对应的位置开始的向上轻扫手势使得设备关闭相应的应用,而从不被应用切换用户界面中的任何应用的表示占用的位置开始的向上轻扫使得设备导航到应用启动用户界面(例如,主屏幕用户界面)。此外,在一些实施方案中,在应用切换用户界面上检测到的侧向轻扫手势(例如,接触的移动对应于横跨一个或多个应用的一个或多个表示的移动)使得设备在应用切换用户界面中的应用的表示中滚动。在一些实施方案中,在触敏表面上与应用切换用户界面中的相应应用的表示对应的位置处的向下轻扫手势使得设备在默认模式(例如,全屏模式)中显示相应的应用(例如,当向下轻扫手势满足第一标准时)或在增强可达性模式中显示相应应用(例如,在显示器上向下偏移)(例如,当向下轻扫手势满足第二标准时)。
在下面,图1A-1B、图2和图3提供对示例设备的描述。图5A-5Z示出了用于与应用切换用户界面进行交互的示例用户界面。图6A-6D是示出了应用切换用户界面的方法的流程图。图5A-5Z中的用户界面用于示出图6A-6D中的过程。
示例设备
现在将详细地参考实施方案,这些实施方案的示例在附图中示出。下面的详细描述中示出许多具体细节,以便提供对各种所描述的实施方案的充分理解。但是,对本领域的普通技术人员将显而易见的是,各种所描述的实施方案可在没有这些具体细节的情况下被实践。在其他情况下,没有详细地描述众所周知的方法、过程、部件、电路和网络,从而不会不必要地使实施方案的各个方面晦涩难懂。
还将理解的是,虽然在一些情况下,术语“第一”、“第二”等在本文中用于描述各种元素,但是这些元素不应受到这些术语限制。这些术语只是用于将一个元素与另一元素区分开。例如,第一接触可被命名为第二接触,并且类似地,第二接触可被命名为第一接触,而不脱离各种所描述的实施方案的范围。第一接触和第二接触均为接触,但它们不是同一个接触,除非上下文另外明确指示。
在本文中对各种所述实施方案的描述中所使用的术语只是为了描述特定实施方案的目的,而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样,单数形式“一个”和“该”旨在也包括复数形式,除非上下文另外明确地指示。还将理解的是,本文中所使用的术语“和/或”是指并且涵盖相关联的所列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元素和/或部件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元素、部件和/或其分组。
如本文中所使用,根据上下文,术语“如果”任选地被解释为意思是“当......时”或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定......”或“如果检测到[所陈述的条件或事件]”任选地被解释为是指“在确定......时”或“响应于确定......”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关过程的实施方案。在一些实施方案中,该设备为还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自AppleInc.(Cupertino,California)的iPod 和设备。其他便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触控板)的膝上型计算机或平板电脑可被任选地使用。还应当理解,在一些实施方案中,该设备并非便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触控板)的台式计算机。
在下面的论述中,描述了一种包括显示器和触敏表面的电子设备。然而,应当理解,该电子设备任选地包括一个或多个其他物理用户界面设备,诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用,诸如以下应用中的一个或多个:记事本应用、绘图应用、演示应用、文字处理应用、网站创建应用、盘编辑应用、电子表格应用、游戏应用、电话应用、视频会议应用、电子邮件应用、即时消息应用、健身支持应用、照片管理应用、数字相机应用、数字摄像机应用、Web浏览应用、数字音乐播放器应用、和/或数字视频播放器应用。
在设备上执行的各种应用任选地使用至少一个通用物理用户界面设备,诸如触敏表面。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地被调整和/或在不同应用之间变化和/或在相应应用内被调整。这样,设备的通用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用。
现在将注意力转到具有触敏显示器的便携式设备的实施方案。图1A是示出了根据一些实施方案具有触敏显示器系统112的便携式多功能设备100的框图。触敏显示器系统112有时为了方便而被叫做“触摸屏”,并且有时被简称为触敏显示器。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入或控制设备116以及外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100(例如,触敏表面,诸如设备100的触敏显示器系统112)上的接触的强度的一个或多个强度传感器165。设备100任选地包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如,在触敏表面诸如设备100的触敏显示器系统112或设备300的触控板355上生成触觉输出)。这些部件任选地通过一根或多根通信总线或信号线103通信。
应当理解,设备100仅仅是便携式多功能设备的一个示例,并且设备100任选地具有比所示出的部件更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件在硬件、软件、固件或它们的组合(包括一个或多个信号处理电路和/或专用集成电路)中实施。
存储器102任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备或其他非易失性固态存储器设备。设备100的其他部件(诸如一个或多个CPU 120和外围设备接口118)对存储器102的访问任选地由存储器控制器122来控制。
外围设备接口118可用于将设备的输入外围设备和输出外围设备耦接到存储器102和一个或多个CPU 120。一个或多个处理器120运行或执行存储器102中所存储的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。
在一些实施方案中,外围设备接口118、一个或多个CPU 120和存储器控制器122任选地在单个芯片诸如芯片104上实现。在一些其他实施方案中,它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被叫做电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信与网络诸如互联网(也被称为万维网(WWW))、内联网和/或无线网络诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN)以及其他设备进行通信。该无线通信任选地使用多种通信标准、协议和技术中的任一者,包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE 802.11a、IEEE802.11ac、IEEE 802.11ax、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)、互联网协议语音技术(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS))、和/或短消息服务(SMS),或者任何其他适当的通信协议,包括在本文档提交日期还未开发出的通信协议。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人类可听到的声波。音频电路110还接收由麦克风113根据声波转换的电信号。音频电路110将电信号转换为音频数据,并将音频数据传输到外围设备接口118以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中,音频电路110还包括耳麦插孔(例如,图2中的212)。耳麦插孔提供音频电路110和可移除的音频输入/输出外围设备之间的接口,诸如仅输出的耳机或者具有输出(例如,单耳耳机或双耳耳机)和输入(例如,麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触敏显示器系统112和其他输入或控制设备116与外围设备接口118耦接。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161和用于其他输入或控制设备的一个或多个输入控制器160。该一个或多个输入控制器160从其他输入或控制设备116接收电信号/将电信号发送到其他输入或控制设备。其他输入或控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮等。在一些另选的实施方案中,一个或多个输入控制器160任选地耦接至以下各项中的任一者(或不耦接至以下各项中的任一者):键盘、红外线端口、USB端口、触笔、和/或指针设备诸如鼠标。一个或多个按钮(例如,图2中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的向上/向下按钮。一个或多个按钮任选地包括下压按钮(例如,图2中的206)。
触敏显示器系统112提供设备与用户之间的输入接口和输出接口。显示控制器156从触敏显示器系统112接收电信号和/或将电信号发送至触敏显示器系统112。触敏显示器系统112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频以及它们的任何组合(统称为“图形”)。在一些实施方案中,一些视觉输出中的一些或全部对应于用户界面对象。如本文所用,术语“示能表示”是指用户交互式图形用户界面对象(例如,被配置为对被引向图形用户界面对象的输入进行响应的图形用户界面对象)。用户交互式图形用户界面对象的示例包括但不限于按钮、滑块、图标、可选择菜单项、开关、超链接或其他用户界面控件。
触敏显示器系统112具有基于触觉和/或触感接触接受来自用户的输入的触敏表面、传感器或传感器组。触敏显示器系统112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触敏显示器系统112上的接触(和该接触的任何移动或中断),并且将检测到的接触转换为与被显示在触敏显示器系统112上的用户界面对象(例如,一个或多个软键、图标、网页或图像)的交互。在一些实施方案中,在触敏显示器系统112和用户之间的接触点对应于用户的手指或触笔。
触敏显示器系统112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术,或LED(发光二极管)技术,但是在其他实施方案中使用其他显示技术。触敏显示器系统112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术,包括但不限于电容性的、电阻性的、红外线的和表面声波技术,以及其他接近传感器阵列或用于确定与触敏显示器系统112接触的一个或多个点的其他元素来检测接触及其任何移动或中断。在一些实施方案中,使用投射式互电容感测技术,诸如从Apple Inc.(Cupertino,California)的iPod和中发现的技术。
触敏显示器系统112任选地具有超过100dpi的视频分辨率。在一些实施方案中,触摸屏视频分辨率超过400dpi(例如,500dpi、800dpi或更大)。用户任选地使用任何合适的物体或附加物诸如触笔、手指等来与触敏显示器系统112接触。在一些实施方案中,将用户界面设计成与基于手指的接触和手势一起工作,由于手指在触摸屏上的接触区域较大,因此这可能不如基于触笔的输入精确。在一些实施方案中,设备将基于手指的粗略输入转化为精确的指针/光标位置或命令以用于执行用户所期望的动作。
在一些实施方案中,除了触摸屏之外,设备100任选地包括用于激活或去激活特定功能的触控板。在一些实施方案中,触控板是设备的触敏区域,与触摸屏不同,该触敏区域不显示视觉输出。触控板任选地是与触敏显示器系统112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电源状态指示器(例如,发光二极管(LED))以及与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出与I/O子系统106中的光学传感器控制器158耦接的光学传感器。一个或多个光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。一个或多个光学传感器164从环境接收通过一个或多个透镜投射的光,并且将光转换为表示图像的数据。结合成像模块143(也被叫做相机模块),一个或多个光学传感器164任选地捕获静态图像和/或视频。在一些实施方案中,光学传感器位于设备100的与设备前部上的触敏显示器系统112相背对的后部上,使得触摸屏能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中,另一光学传感器位于设备的前部上,从而获取该用户的图像(例如,用于自拍、用于在用户在触摸屏上观看其他视频会议参与者时进行视频会议等等)。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了与I/O子系统106中的强度传感器控制器159耦接的接触强度传感器。一个或多个接触强度传感器165任选地包括一个或多个压阻应变仪、电容式力传感器、电气式力传感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。一个或多个接触强度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施方案中,至少一个接触强度传感器与触敏表面(例如,触敏显示器系统112)并置排列或邻近。在一些实施方案中,至少一个接触强度传感器位于与位于设备100的前部上的触敏显示器系统112相背对的设备100的后部上。
设备100任选地还包括一个或多个接近传感器166。图1A示出了与外围设备接口118耦接的接近传感器166。另选地,接近传感器166与I/O子系统106中的输入控制器160耦接。在一些实施方案中,当多功能设备被置于用户耳朵附近时(例如,用户正在打电话时),接近传感器关闭并禁用触敏显示器系统112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了与I/O子系统106中的触觉反馈控制器161耦接的触觉输出发生器。在一些实施方案中,一个或多个触觉输出发生器167包括一个或多个电声设备诸如扬声器或其他音频部件;和/或用于将能量转换成线性运动的机电设备诸如电机、螺线管、电活性聚合器、压电致动器、静电致动器或其他触觉输出生成部件(例如,用于将电信号转换成设备上的触觉输出的部件)。一个或多个触觉输出发生器167从触觉反馈模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,触敏显示器系统112)并置排列或邻近,并且任选地通过竖直地(例如,向设备100的表面之内/之外)或侧向地(例如,在与设备100的表面相同的平面中前后地)移动触敏表面来生成触觉输出。在一些实施方案中,至少一个触觉输出发生器传感器位于与位于设备100的前部上的触敏显示器系统112相背对的设备100的后部上。
设备100任选地还包括一个或多个加速度计168。图1A示出与外围设备接口118耦接的加速度计168。另选地,加速度计168任选地与I/O子系统106中的输入控制器160耦接。在一些实施方案中,基于对从一个或多个加速度计接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图显示信息。除了一个或多个加速度计168之外,设备100任选地还包括磁力仪和GPS(或GLONASS或其他全球导航系统)接收器,以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息。
在一些实施方案中,存储于存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、触觉反馈模块(或指令集)133、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135,以及应用(或指令集)136。此外,在一些实施方案中,存储器102存储设备/全局内部状态157,如图在1A和图3中所示。设备/全局内部状态157包括以下中的一者或多者:活动应用状态,其指示哪些应用(如果有的话)当前是活动的;显示状态,其指示什么应用、视图或其他信息占据触敏显示器系统112的各个区域;传感器状态,其包括从设备的各个传感器和其他输入或控制设备116获取的信息;以及关于设备的位置和/或姿态的位置和/或方位信息。
操作系统126(例如,iOS、Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电源管理等)的各种软件部件和/或驱动器,并且有利于各种硬件部件和软件部件之间的通信。
通信模块128有利于通过一个或多个外部端口124来与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件部件。外部端口124(例如,通用串行总线(USB)、FIREWIRE等)适于直接耦接到其他设备或间接地经由网络(例如,互联网、无线LAN等)耦接。在一些实施方案中,外部端口是与Apple Inc.(Cupertino,California)的一些iPod和设备中所使用的30针连接器相同或类似和/或兼容的多针(例如,30针)连接器。在一些实施方案中,外部端口是与Apple Inc.(Cupertino,California)的一些iPod和设备中所使用的Lightning连接器相同或类似和/或兼容的Lightning连接器。
接触/运动模块130任选地检测与触敏显示器系统112(结合显示控制器156)和其他触敏设备(例如,触控板或物理点击轮)的接触。接触/运动模块130包括各种软件部件以用于执行与对(例如通过手指或触笔)进行的接触的检测相关的各种操作,诸如确定是否已发生接触(例如,检测手指按下事件)、确定接触的强度(例如,接触的力或压力,或者用于接触的力或压力的代替物)、确定是否存在接触的移动并跟踪跨触敏表面的移动(例如,检测一个或多个手指拖动事件),以及确定接触是否已停止(例如,检测手指抬起事件或者接触断开)。接触/运动模块130从触敏表面接收接触数据。确定由一系列接触数据表示的接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变)。这些操作任选地应用于单点接触(例如,单指接触或触笔接触)或者多点同时接触(例如,“多点触摸”/多指接触)。在一些实施方案中,接触/运动模块130和显示控制器156检测触控板上的接触。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触模式(例如,所检测到的接触的不同运动、计时和/或强度)。因此,任选地通过检测特定接触模式来检测手势。例如,检测手指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。又如,检测触敏表面上的手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且随后检测手指抬起(抬离)事件。类似地,通过检测触笔的特定接触图案来任选地检测触笔的轻击、轻扫、拖动和其他手势。
在一些实施方案中,检测手指轻击手势取决于检测手指按下事件与手指抬起事件之间的时间长度,但是与检测手指按下事件与手指抬起事件之间的手指接触强度无关。在一些实施方案中,根据确定手指按下事件与手指抬起事件之间的时间长度小于预先确定的值(例如,小于0.1、0.2、0.3、0.4或0.5秒)而检测到轻击手势,与轻击期间手指接触的强度是否达到给定的强度阈值(大于标称接触检测强度阈值)诸如轻按压或深按压强度阈值无关。因此,手指轻击手势可以满足特定输入标准,该特定输入标准不要求接触的特征强度满足给定强度阈值以使得特定输入标准被满足。为清楚起见,轻击手势中的手指接触通常需要满足标称接触检测强度阈值以使得手指按下事件被检测到,低于该标称接触检测强度阈值时,不会检测到接触。类似的分析适用于通过触笔或其他接触来检测轻击手势。在设备能够检测在触敏表面上方悬停的手指或触笔接触的情况下,标称接触检测强度阈值任选地不与手指或触笔与触敏表面之间的物理接触对应。
同样的概念以类似方式适用于其他类型的手势。例如,可基于满足与手势中包括的接触的强度无关或者不要求执行手势的一个或多个接触达到强度阈值以便被识别的标准来任选地检测轻扫手势、捏合手势、展开手势和/或长按压手势。例如,轻扫手势基于一个或多个接触的移动的量来检测;捏合手势基于两个或更多个接触朝向彼此的移动来检测;展开手势基于两个或更多个接触背离彼此的移动来检测;长按压手势基于触敏表面上具有少于阈值移动量的接触的持续时间来检测。因此,关于特定手势识别标准不要求一个或多个接触的强度满足相应的强度阈值以满足特定手势识别标准的陈述意味着特定手势识别标准能够在手势中的一个或多个接触未达到相应的强度阈值时被满足,并且还能够在手势中的一个或多个接触确实达到或超过相应的强度阈值的情况下被满足。在一些实施方案中,基于确定在预定义时间段内检测到手指按下事件和手指抬起事件来检测轻击手势,而不考虑在预定义时间段期间接触是高于还是低于相应的强度阈值,并且基于确定接触移动大于预定义量值来检测轻扫手势,即使在接触移动结束时接触高于相应的强度阈值。即使在对手势的检测受到执行手势的接触的强度的影响的具体实施中(例如,当接触的强度高于强度阈值时,设备更快地检测到长按压,或者当接触的强度更高时,设备会延迟对轻击输入的检测),只要在接触未达到特定强度阈值的情况下可以满足识别手势的标准,则对这些手势的检测也不会要求接触达到特定强度阈值(例如,即使识别手势所需的时间量发生变化)。
在某些情况下,接触强度阈值、持续时间阈值和移动阈值以各种不同组合进行组合,以便创建启发式算法来区分针对相同输入元素或区域的两个或更多个不同手势,使得与相同输入元素的多个不同交互能够提供更丰富的用户交互和响应的集合。关于一组特定手势识别标准不要求一个或多个接触的强度满足相应的强度阈值以便满足特定手势识别标准的陈述不排除对其他强度相关手势识别标准进行同时评估,以识别具有当手势包括具有高于相应强度阈值的强度的接触时被满足的标准的其他手势。例如,在某些情况下,针对第一手势的第一手势识别标准(其不要求一个或多个接触的强度满足相应的强度阈值以满足第一手势识别标准)与针对第二手势的第二手势识别标准(其取决于达到相应强度阈值的一个或多个接触)竞争。在此类竞争中,如果针对第二手势的第二手势识别标准首先得到满足,则手势任选地不被识别为满足针对第一手势的第一手势识别标准。例如,如果在接触移动预定义的移动量之前该接触达到相应的强度阈值,则检测到深按压手势而不是轻扫手势。相反,如果在接触达到相应的强度阈值之前该接触移动预定义的移动量,则检测到轻扫手势而不是深按压手势。即使在这种情况下,针对第一手势的第一手势识别标准仍然不要求一个或多个接触的强度满足相应的强度阈值以满足第一手势识别标准,因为如果接触保持低于相应的强度阈值直到手势结束(例如,具有不会增大到高于相应强度阈值的强度的接触的轻扫手势),手势将被第一手势识别标准识别为轻扫手势。因此,不要求一个或多个接触的强度满足相应的强度阈值以满足特定手势识别标准的特定手势识别标准将会:(A)在某些情况下,忽略相对于强度阈值的接触的强度(例如,对于轻击手势而言)和/或(B)在某些情况下,如果在特定手势识别标准识别与输入对应的手势之前(例如,针对与深按压手势竞争的用于识别的长按压手势而言)一组竞争的强度相关手势识别标准(例如,对于深按压手势而言)将该输入识别为与强度相关手势对应,则不能满足特定手势识别标准(例如,对于长按压手势而言),从这个意义上来讲,仍然取决于相对于强度阈值的接触的强度。
图形模块132包括用于在触敏显示器系统112或其他显示器上渲染和显示图形的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等。
在一些实施方案中,图形模块132存储待使用的表示图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用等接收用于指定待显示图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其他图形属性数据,并且随后生成屏幕图像数据以输出至显示控制器156。
触觉反馈模块133包括用于生成指令(例如,由触觉反馈控制器161使用的指令)的各种软件部件,以响应于用户与设备100的交互而使用一个或多个触觉输出发生器167在设备100上的一个或多个位置处生成触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用)中输入文本的软键盘。
GPS模块135确定设备的位置并提供该信息以在各种应用中使用(例如,提供至电话138以用于基于位置的拨号,提供至相机143作为图片/视频元数据,以及提供至提供基于位置的服务诸如天气桌面小程序、当地黄页桌面小程序和地图/导航桌面小程序的应用)。
应用136任选地包括以下模块(或指令集)或者它们的子集或超集:
·联系人模块137(有时称为地址簿或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健身支持模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·浏览器模块147;
·日历模块148;
·桌面小程序模块149,其任选地包括以下各项中的一者或多者:天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、字典桌面小程序149-5和由用户获得的其他桌面小程序,以及用户创建的桌面小程序149-6;
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150;
·搜索模块151;
·视频和音乐播放器模块152,任选地由视频播放器模块和音乐播放器模块构成;
·记事本模块153;
·地图模块154;和/或
·在线视频模块155。
任选地存储在存储器102中的其他应用136的示例包括其他文字处理应用、其他图像编辑应用、绘图应用、演示应用、支持JAVA的应用、加密、数字权限管理、语音识别和语音复制。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,联系人模块137包括用于管理地址簿或联系人列表(例如,存储在存储器102或存储器370中的联系人模块137的应用内部状态192中)的可执行指令,包括:添加一个或多个姓名到地址簿;从地址簿删除一个或多个姓名;将一个或多个电话号码、一个或多个电子邮件地址、一个或多个物理地址或其他信息与姓名相关联;将图像与姓名相关联;对姓名进行分类和排序;提供电话号码和/或电子邮件地址来发起和/或促进通过电话138、视频会议139、电子邮件140或IM 141的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电话模块138包括用于输入与电话号码对应的字符序列、访问地址簿137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话,以及当会话完成时断开或挂断的可执行指令。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示器系统112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包括根据用户指令来发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,即时消息模块141包括用于执行以下操作的可执行指令:输入与即时消息对应的字符序列、修改先前输入的字符、传输相应即时消息(例如,使用针对基于电话的即时消息的短消息服务(SMS)或多媒体消息服务(MMS)协议或者使用针对基于互联网的即时消息的XMPP、SIMPLE、Apple推送通知服务(APN)或IMPS)、接收即时消息,以及查看所接收的即时消息。在一些实施方案中,所传输和/或接收的即时消息任选地包括图形、照片、音频文件、视频文件、和/或MMS和/或增强消息服务(EMS)中所支持的其他附件。如本文所用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS发送的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE、APN或IMPS发送的消息)两者。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154以及视频和音乐播放器模块152,健身支持模块142包括用于创建健身(例如,具有时间、距离和/或卡路里燃烧目标)的可执行指令;与(体育设备和智能手表中的)健身传感器通信;接收健身传感器数据;校准用于监视健身的传感器;为健身选择和播放音乐;以及显示、存储和传输健身数据。
结合触敏显示器系统112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144,相机模块143包括用于执行以下操作的可执行指令:捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特征、和/或从存储器102删除静态图像或视频。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134和相机模块143,图像管理模块144包括用于排列、修改(例如,编辑)或以其他方式操控、标记、删除、演示(例如,在数字幻灯片或相册中),以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,浏览器模块147包括根据用户指令来浏览互联网(包括搜索、链接到、接收和显示网页或其部分以及链接到网页的附件和其他文件)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括用于根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序模块149是任选地由用户下载和使用的微型应用(例如,天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和字典桌面小程序149-5)或由用户创建的微型应用(例如,用户创建的桌面小程序149-6)。在一些实施方案中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中,桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序创建器模块150包括用于创建桌面小程序(例如,将网页的用户指定部分转到桌面小程序中)的可执行指令。
结合触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包括用于根据用户指令来搜索存储器102中的与一个或多个搜索条件(例如,一个或多个用户指定的搜索词)匹配的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令,以及用于(例如,在触敏显示器系统112上或在经由外部端口124无线连接的外部显示器上)显示、演示或以其他方式回放视频的可执行指令。在一些实施方案中,设备100任选地包括MP3播放器诸如iPod(Apple Inc.的商标)的功能。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,记事本模块153包括用于根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154包括用于根据用户指令来接收、显示、修改和存储地图以及与地图相关联的数据(例如,行驶方向;关于特定位置处或附近的商店和其他兴趣点的数据;以及其他基于位置的数据)的可执行指令。
结合触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、(例如在触摸屏112上或在无线连接的或经由外部端口124连接的外部显示器上)回放、发送具有至特定在线视频的链接的电子邮件,以及以其他方式管理一种或多种文件格式诸如H.264的在线视频的可执行指令。在一些实施方案中,使用即时消息模块141而不是电子邮件客户端模块140来发送指向特定在线视频的链接。
上述所识别的每个模块和应用对应于用于执行上述一种或多种功能以及在本申请中所描述的方法(例如,本文中所描述的计算机实现的方法和其他信息处理方法)的可执行指令集。这些模块(即,指令集)不必实现为独立的软件程序、过程或模块,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。在一些实施方案中,存储器102任选地存储上述模块和数据结构的子集。此外,存储器102任选地存储上面未描述的附加模块和数据结构。
在一些实施方案中,设备100是该设备上的预定义的功能集的操作唯一地通过触摸屏和/或触控板来执行的设备。通过使用触摸屏和/或触控板作为用于操作设备100的主要输入控制设备,设备100上的物理输入控制设备(诸如下压按钮、拨盘等等)的数量被任选地减少。
唯一地通过触摸屏和/或触控板来执行的预定义的功能集任选地包括用户界面之间的导航。在一些实施方案中,触控板在被用户触摸时将设备100从显示在设备100上的任何用户界面导航到主菜单、主屏幕菜单或根菜单。在此类实施方案中,使用触控板来实现“菜单按钮”。在一些其他实施方案中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触控板。
图1B是示出了根据一些实施方案用于事件处理的示例部件的框图。在一些实施方案中,存储器102(图1A中)或370(图3)包括事件分类器170(例如,在操作系统126中)和相应的应用136-1(例如,前述应用136、137-155、380-390中的任一个应用)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用136-1和应用136-1的应用视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中,应用136-1包括应用内部状态192,该应用内部状态指示当应用是活动的或正在执行时在触敏显示器系统112上显示的一个或多个当前应用视图。在一些实施方案中,设备/全局内部状态157被事件分类器170用于确定哪个(哪些)应用当前是活动的,并且应用内部状态192被事件分类器170用于确定要将事件信息递送到的应用视图191。
在一些实施方案中,应用内部状态192包括附加信息,诸如以下各项中的一者或多者:当应用136-1恢复执行时将被使用的恢复信息、指示正被应用136-1显示的信息或准备用于被应用136-1显示的信息的用户界面状态信息、用于使得用户能够返回到应用136-1的前一状态或视图的状态队列,以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如,作为多点触摸手势的一部分的触敏显示器系统112上的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器诸如接近传感器166、一个或多个加速度计168和/或麦克风113(通过音频电路110)接收的信息。外围设备接口118从I/O子系统106所接收的信息包括来自触敏显示器系统112或触敏表面的信息。
在一些实施方案中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在其他实施方案中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中,事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器系统112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已在一个或多个视图内发生的地点的软件过程。视图由用户能够在显示器上看到的控件和其他元素构成。
与应用相关联的用户界面的另一方面是一组视图,本文中有时也称为应用视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用的)应用视图任选地对应于在应用的程序化或视图分级结构内的程序化水平。例如,在其中检测到触摸的最低水平视图任选地被称为命中视图,并且被识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,该初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用具有以分级结构组织的多个视图时,命中视图确定模块172将命中视图识别为应当对子事件进行处理的分级结构中的最低视图。在大多数情况下,命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别,命中视图便通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块173确定仅命中视图应当接收特定子事件序列。在其他实施方案中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图,并因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施方案中,即使触摸子事件完全被局限到与一个特定视图相关联的区域,分级结构中的较高视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施方案中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施方案中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器模块182进行检索。
在一些实施方案中,操作系统126包括事件分类器170。另选地,应用136-1包括事件分类器170。在其他实施方案中,事件分类器170是独立模块,或者是存储在存储器102中的另一个模块诸如,接触/运动模块130的一部分。
在一些实施方案中,应用136-1包括多个事件处理程序190和一个或多个应用视图191,每个应用视图包括用于处理发生在应用的用户界面的相应视图内的触摸事件的指令。应用136-1的每个应用视图191包括一个或多个事件识别器180。通常,相应应用视图191包括多个事件识别器180。在其他实施方案中,事件识别器180中的一个或多个事件识别器是独立模块的一部分,诸如用户界面工具包或供应用136-1从中继承方法和其他属性的更高层级的对象。在一些实施方案中,相应事件处理程序190包括以下各项中的一者或多者:数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用内部状态192。另选地,应用视图191中的一个或多个应用视图包括一个或多个相应事件处理程序190。另外,在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178中的一者或多者被包括在相应应用视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施方案中,事件识别器180还包括元数据183和事件递送指令188(其任选地包括子事件递送指令)的至少一个子集。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速度和方向。在一些实施方案中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向取向,或反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,并且基于该比较来确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施方案中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其他事件。在一些实施方案中,事件187中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个实施例中,针对事件1(187-1)的定义是被显示对象上的双击。例如,双击包括被显示对象上的预先确定时长的第一触摸(触摸开始)、预先确定时长的第一抬起(触摸结束)、被显示对象上的预先确定时长的第二触摸(触摸开始)以及预先确定时长的第二抬起(触摸结束)。在另一个实施例中,针对事件2(187-2)的定义是被显示对象上的拖动。例如,拖动包括被显示对象上的预先确定时长的触摸(或接触)、跨触敏显示器系统112的触摸的移动,以及触摸的抬离(触摸结束)。在一些实施方案中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中,事件定义187包括对用于相应用户界面对象的事件的定义。在一些实施方案中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在触敏显示器系统112上显示三个用户界面对象的应用视图中,当在触敏显示器系统112上检测到触摸时,事件比较器184执行命中测试以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示对象与相应事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中,对相应事件187的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列是否确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件序列不与事件定义186中的任何事件匹配时,该相应事件识别器180进入事件不可能、事件失败或事件结束状态,在此之后不理会基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪并处理持续进行的基于触摸的手势的子事件。
在一些实施方案中,相应事件识别器180包括具有指示事件递送系统应该如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标志和/或列表的元数据183。在一些实施方案中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标志和/或列表。在一些实施方案中,元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施方案中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中,相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中,事件识别器180抛出与所识别的事件相关联的标志,并且与该标志相关联的事件处理程序190获取该标志并执行预定义过程。
在一些实施方案中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件序列相关联的事件处理程序或者递送到活跃参与的视图。与子事件序列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中,数据更新器176创建和更新在应用136-1中使用的数据。例如,数据更新器176对联系人模块137中所使用的电话号码进行更新,或者对视频和音乐播放器模块152中所使用的视频文件进行存储。在一些实施方案中,对象更新器177创建和更新在应用136-1中使用的对象。例如,对象更新器177创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息,并且将显示信息发送到图形模块132以显示在触敏显示器上。
在一些实施方案中,一个或多个事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对数据更新器176、对象更新器177和GUI更新器178的访问权限。在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178被包括在相应应用136-1或应用视图191的单个模块中。在其他实施方案中,它们被包括在两个或更多个软件模块中。
应当理解,关于触敏显示器上的用户触摸的事件处理的上述论述还适用于利用输入设备来操作多功能设备100的其他形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,任选地与单次或多次键盘按下或按住协作的鼠标移动和鼠标按钮按下;触控板上的接触移动,诸如轻击、拖动、滚动等;触笔输入;设备的移动;口头指令;检测到的眼睛移动;生物特征输入;和/或它们的任何组合任选地被用作与限定要识别的事件的子事件对应的输入。
图2示出了根据一些实施方案具有触摸屏(例如,图1A的触敏显示器系统112)的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在这些实施方案中以及在下文中描述的其他实施方案中,用户能够通过例如利用一个或多个手指202(在图中未按比例绘制)或一个或多个触笔203(在图中未按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中,当用户中断与一个或多个图形的接触时,将发生对一个或多个图形的选择。在一些实施方案中,手势任选地包括一个或多个轻击、一个或多个轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,不经意地与图形接触不会选择该图形。例如,当与选择对应的手势是轻击时,在应用图标上方扫动的轻扫手势任选地不会选择对应的应用。
设备100任选地还包括一个或多个物理按钮,诸如“主屏幕”按钮或菜单按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用中的任何应用136。另选地,在一些实施方案中,菜单按钮被实现为被显示在触摸屏显示器上的GUI中的软键。
在一些实施方案中,设备100包括触摸屏显示器、菜单按钮204(有时称为主按钮204)、用于使设备通电/断电和用于锁定设备的下压按钮206、一个或多个音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压下状态持续预定义的时间间隔来对设备进行开机/关机;用于通过压下该按钮并在该预定义的时间间隔过去之前释放该按钮来锁定设备;和/或用于对设备进行解锁或发起解锁过程。在一些实施方案中,设备100还通过麦克风113来接受用于激活或去激活一些功能的语音输入。设备100还任选地包括用于检测触敏显示器系统112上的接触的强度的一个或多个接触强度传感器165和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施方案具有显示器和触敏表面的示例多功能设备的框图。设备300不必是便携式的。在一些实施方案中,设备300是膝上型计算机、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如,家用或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于将这些部件互联的一根或多根通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时叫做芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330,该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触控板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如,类似于以上参考图1A所述的一个或多个触觉输出发生器167)、传感器359(例如,光学传感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图1A所述的一个或多个接触强度传感器165的接触强度传感器)。存储器370包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备;并且任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离一个或多个CPU 310定位的一个或多个存储设备。在一些实施方案中,存储器370存储与便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块和数据结构,或它们的子集。此外,存储器370任选地存储不存在于便携式多功能设备100的存储器102中的附加程序、模块和数据结构。例如,设备300的存储器370任选地存储绘图模块380、演示模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中上述所识别的元素中的每个元素任选地存储在先前提到的存储器设备中的一个或多个存储器设备中。上述所识别的模块中的每个模块对应于用于执行上述功能的指令集。上述所识别的模块或程序(即,指令集)不必被实现为单独的软件程序、过程或模块,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。在一些实施方案中,存储器370任选地存储上述模块和数据结构的子集。此外,存储器370任选地存储上面未描述的附加模块和数据结构。
现在将注意力转到任选地在便携式多功能设备100上实现的用户界面(“UI”)的实施方案。
图4A示出了根据一些实施方案的便携式多功能设备100上的应用菜单的示例用户界面400。类似的用户界面任选地在设备300上实现。在一些实施方案中,用户界面400包括以下元素或者其子集或超集:
·一种或多种无线通信诸如蜂窝信号和Wi-Fi信号的一个或多个信号强度指示器;
·时间;
·蓝牙指示器;
·电池状态指示器;
·具有常用应用图标的托盘408,诸如:
ο电话模块138的被标记为“电话”的图标416,该图标任选地包括未接来电或语音信箱消息的数量的指示器414;
ο电子邮件客户端模块140的被标记为“邮件”的图标418,该图标任选地包括未读电子邮件的数量的指示器410;
ο浏览器模块147的被标记为“浏览器”的图标420;以及
ο视频和音乐播放器模块152的被标记为“音乐”的图标422;以及
·其他应用的图标,诸如:
οIM模块141的被标记为“消息”的图标424;
ο日历模块148的被标记为“日历”的图标426;
ο图像管理模块144的被标记为“照片”的图标428;
ο相机模块143的被标记为“相机”的图标430;
ο在线视频模块155的被标记为“在线视频”的图标432;
ο股市桌面小程序149-2的被标记为“股市”的图标434;
ο地图模块154的被标记为“地图”的图标436;
ο天气桌面小程序149-1的被标记为“天气”的图标438;
ο闹钟桌面小程序149-4的被标记为“时钟”的图标440;
ο健身支持模块142的被标记为“健身支持”的图标442;
ο记事本模块153的被标记为“记事本”的图标444;以及
ο用于设置应用或模块的图标446,该图标提供对设备100及其各种应用136的设置的访问。
应当注意,图4A中示出的图标标签仅仅是示例。例如,其他标签任选地用于各种应用图标。在一些实施方案中,相应应用图标的标签包括与该相应应用图标对应的应用的名称。在一些实施方案中,特定应用图标的标签不同于与该特定应用图标对应的应用的名称。
图4B示出了具有与显示器450分开的触敏表面451(例如,图3中的平板电脑或触控板355)的设备(例如,图3中的设备300)上的示例用户界面。尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出随后的许多实施例,但是在一些实施方案中,设备检测与显示器分开的触敏表面上的输入,如图4B中所示。在一些实施方案中,触敏表面(例如,图4B中的451)具有与显示器(例如,450)上的主轴线(例如,图4B中的453)对应的主轴线(例如,图4B中的452)。根据这些实施方案,设备检测与显示器上相应位置对应的位置处的与触敏表面451的接触(例如,图4B中的460和462)(例如,在图4B中,460对应于468并且462对应于470)。这样,在触敏表面(例如,图4B中的451)与多功能设备的显示器(例如,图4B中的450)分开的时侯,由设备在触敏表面上所检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操纵显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界面。
另外,虽然主要是参考手指输入(例如,手指接触、单指轻击手势、手指轻扫手势等)来给出下面的实施例,但是应当理解,在一些实施方案中,这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如,基于鼠标的输入或触笔输入)替换。例如,轻扫手势任选地由鼠标点击(例如,而不是接触)之后是光标沿着轻扫的路径的移动(例如,而不是接触的移动)来替代。又如,轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如,代替检测接触之后停止检测接触)替代。类似地,当同时检测到多个用户输入时,应当理解,多个计算机鼠标任选地被同时使用,或鼠标和手指接触任选地被同时使用。
如本文所用,术语“焦点选择器”是指用于指示用户正与之进行交互的用户界面的当前部分的输入元素。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如,图3中的触控板355或图4B中的触敏表面451)上检测到输入(例如,按压输入)的情况下,该特定用户界面元素根据所检测到的输入而被调整。在包括使得能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如,图1A中的触敏显示器系统112或图4A中的触摸屏)的一些具体实施中,在触摸屏上检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如,由接触作出的按压输入)时,根据所检测到的输入来调整特定用户界面元素。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据焦点在用户界面的不同区域之间的移动而移动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制的以便递送与用户界面的用户的预期交互(例如,通过向设备指示用户界面的用户期望与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触控板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
如在本说明书和权利要求书中所使用的,术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如,手指接触或触笔接触)的力或压力(每单位面积的力),或是指触敏表面上的接触的力或压力的代替物(代用物)。接触的强度具有值范围,该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如,至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中,来自多个力传感器的力测量被合并(例如,加权平均或者加和),以确定估计的接触力。类似地,触笔的压敏末端任选地用于确定触笔在触敏表面上的压力。另选地,在触敏表面上检测到的接触区域的大小和/或其变化、接触附近的触敏表面的电容和/或其变化和/或接触附近的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中,接触力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如,强度阈值以对应于替代物测量的单位来描述)。在一些具体实施中,将接触力或压力的替代物测量转换为预估力或压力,并且预估力或压力用于确定是否已超过强度阈值(例如,强度阈值是以压力单位测量的压力阈值)。使用接触的强度作为用户输入的属性,从而允许用户访问用户在用于(例如,在触敏显示器上)显示示能表示和/或接收用户输入(例如,经由触敏显示器、触敏表面或物理控件/机械控件诸如旋钮或按钮)的实地面积有限的尺寸更小的设备上本来不能容易地访问的附加设备功能。
在一些实施方案中,接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如,确定用户是否已“点击”图标)。在一些实施方案中,根据软件参数来确定强度阈值的至少一个子集(例如,强度阈值不由特定物理致动器的激活阈值来确定,并且可在不改变设备100的物理硬件的情况下进行调整)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏显示器的鼠标“点击”阈值可被设置为预定义阈值的大范围中的任一个阈值。另外,在一些具体实施中,设备的用户提供有用于调节一组强度阈值中的一个或多个强度阈值(例如,通过调节各个强度阈值和/或通过利用对“强度”参数的系统级点击来一次调节多个强度阈值)的软件设置。
如说明书和权利要求书中所使用的,接触的“特征强度”这一术语是指基于接触的一个或多个强度的接触的特征。在一些实施方案中,特征强度基于多个强度样本。特征强度任选地基于相对于预定义事件(例如,在检测到接触之后,在检测到接触抬离之前,在检测到接触开始移动之前或之后,在检测到接触结束之前,在检测到接触的强度增大之前或之后和/或在检测到接触的强度减小之前或之后)而言在预先确定的时间段(例如,0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间采集的预定义数量的强度样本或一组强度样本。接触的特征强度任选地基于以下各项中的一者或多者:接触强度的最大值、接触强度的均值、接触强度的平均值、接触强度的前10%处的值、接触强度的半最大值、接触强度的90%最大值、通过在预定义时间段内或在预定义时间开始对接触强度进行滤波而生成的值等。在一些实施方案中,在确定特征强度时使用接触的持续时间(例如,当特征强度是接触随时间的强度的平均值时)。在一些实施方案中,将特征强度与一组一个或多个强度阈值进行比较以确定用户是否已执行操作。例如,该组一个或多个强度阈值可包括第一强度阈值和第二强度阈值。在该实施例中,特征强度未超过第一强度阈值的接触导致第一操作,特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作,并且特征强度超过第二强度阈值的接触导致第三操作。在一些实施方案中,特征强度和一个或多个强度阈值之间的比较用于确定是否要执行一个或多个操作(例如,是否执行相应选项或放弃执行相应操作),而不是用于确定执行第一操作还是第二操作。
在一些实施方案中,识别手势的一部分以用于确定特征强度。例如,触敏表面可接收连续轻扫接触,该连续轻扫接触从起始位置过渡并达到结束位置(例如拖动手势),在该结束位置处,接触的强度增大。在该实施例中,接触在结束位置处的特征强度可仅基于连续轻扫接触的一部分,而不是整个轻扫接触(例如,结束位置处的轻扫接触的仅一部分)。在一些实施方案中,可在确定接触的特征强度之前将平滑算法应用于轻扫接触的强度。例如,平滑算法任选地包括以下各项中的一种或多种:未加权滑动平均平滑算法、三角平滑算法、中值滤波器平滑算法和/或指数平滑算法。在一些情况下,这些平滑算法消除了轻扫接触的强度中的窄的尖峰或凹陷,以实现确定特征强度的目的。
本文所述的用户界面图任选地包括各种强度图,这些强度图示出了触敏表面上的接触的相对于一个或多个强度阈值(例如,接触检测强度阈值IT0、轻按压强度阈值ITL、深按压强度阈值ITD(例如,其初始至少高于ITL)和/或一个或多个其他强度阈值(例如,比ITL更低的强度阈值ITH))的当前强度。该强度图通常不是所显示的用户界面的一部分,但是被提供以帮助解释所述图。在一些实施方案中,轻按压强度阈值对应于以下强度:在该强度下设备将执行通常与点击物理鼠标或触控板的按钮相关联的操作。在一些实施方案中,深按压强度阈值对应于以下强度:在该强度下设备将执行与通常与点击物理鼠标或触控板的按钮相关联的操作不同的操作。在一些实施方案中,当检测到特征强度低于轻按压强度阈值(例如,并且高于标称接触检测强度阈值IT0,比标称接触检测强度阈值低的接触不再被检测到)的接触时,设备将根据接触在触敏表面上的移动来移动焦点选择器,而不执行与轻按压强度阈值或深按压强度阈值相关联的操作。一般来讲,除非另有陈述,否则这些强度阈值在不同组的用户界面附图之间是一致的。
在一些实施方案中,设备对由设备所检测到的输入的响应取决于基于输入期间的接触强度的标准。例如,对于一些“轻按压”输入,在输入期间超过第一强度阈值的接触的强度触发第一响应。在一些实施方案中,设备对由设备所检测到的输入的响应取决于包括输入期间的接触强度和基于时间的标准两者的标准。例如,对于一些“深按压”输入,只有在满足第一强度阈值与满足第二强度阈值之间经过延迟时间,在输入期间超过大于轻按压的第一强度阈值的第二强度阈值的接触的强度才触发第二响应。该延迟时间的持续时间通常小于200ms(毫秒)(例如,40ms、100ms或120ms,这取决于第二强度阈值的量值,其中该延迟时间随着第二强度阈值增大而增大)。该延迟时间帮助避免意外地识别深按压输入。又如,对于一些“深按压”输入,在达到第一强度阈值之后将出现敏感度降低的时间段。在该敏感度降低的时间段期间,第二强度阈值增大。第二强度阈值的这种暂时增大还有助于避免意外深按压输入。对于其他深按压输入,对检测到深按压输入的响应不取决于基于时间的标准。
在一些实施方案中,输入强度阈值和/或对应输出中的一者或多者基于一个或多个因素(诸如,用户设置、接触运动、输入定时、应用运行、施加强度的速率、并发输入的数量、用户历史、环境因素(例如,环境噪声)、焦点选择器位置等而变化。示例因素在美国专利申请序列号No.14/399,606和No.14/624,296中有所描述,这些美国专利申请全文以引用方式并入本文。
例如,图4C示出了部分地基于触摸输入476随时间的强度而随时间变化的动态强度阈值480。动态强度阈值480是两个分量的总和:在从触摸输入476被初始被检测到的预定义的延迟时间p1之后随时间衰减的第一分量474、和随时间跟踪触摸输入476的强度的第二分量478。第一分量474的初始高强度阈值减少“深按压”响应的意外触发,同时仍然允许在触摸输入476提供足够强度的情况下进行即时“深按压”响应。第二分量478减少通过触摸输入的逐渐的强度波动而无意触发“深按压”响应。在一些实施方案中,在触摸输入476满足动态强度阈值480时(例如,在图4C中的点481处),触发“深按压”响应。
图4D示出了另一个动态强度阈值486(例如,强度阈值ID)。图4D还示出了两个其他强度阈值:第一强度阈值IH和第二强度阈值IL。在图4D中,尽管触摸输入484在时间p2之前满足第一强度阈值IH和第二强度阈值IL,但是直到在时间482处已经过延迟时间p2才提供响应。同样在图4D中,动态强度阈值486随时间衰减,其中衰减在从时间482(当触发了与第二强度阈值IL相关联的响应时)已经过预定义的延迟时间p1之后的时间488处开始。这种类型的动态强度阈值减少与动态强度阈值ID相关联的响应的意外触发,该响应的触发紧接在触发与较低强度阈值诸如第一强度阈值IH或第二强度阈值IL相关联的响应之后或与其同时触发。
图4E示出了另一个动态强度阈值492(例如,强度阈值ID)。在图4E中,在从触摸输入490被初始检测到时已经过延迟时间p2之后,触发与强度阈值IL相关联的响应。同时,动态强度阈值492在从触摸输入490被初始检测到时已经过预定义的延迟时间p1之后衰减。因此,在触发与强度阈值IL相关联的响应之后降低触摸输入490的强度,接着在不释放触摸输入490的情况下增大触摸输入490的强度可触发与强度阈值ID相关联的响应(例如,在时间494处),即使当触摸输入490的强度低于另一强度阈值(例如,强度阈值IL)时也是如此。
接触的特征强度从低于轻按压强度阈值ITL的强度增大到介于轻按压强度阈值ITL与深按压强度阈值ITD之间的强度有时被称为“轻按压”输入。接触的特征强度从低于深按压强度阈值ITD的强度增大到高于深按压强度阈值ITD的强度有时称为“深按压”输入。接触特征强度从低于接触检测强度阈值IT0的强度增大到介于接触检测强度阈值IT0与轻按压强度阈值ITL之间的强度有时被称为检测到触摸表面上的接触。接触的特征强度从高于接触检测强度阈值IT0的强度减小到低于接触检测强度阈值IT0的强度有时被称为检测到接触从触摸表面抬离。在一些实施方案中,IT0为零。在一些实施方案中,IT0大于零。在一些例示中,阴影圆或椭圆用于表示触敏表面上的接触的强度。在一些例示中,没有阴影的圆或椭圆用于表示触敏表面上的相应接触而不指定相应接触的强度。
在本文中所述的一些实施方案中,响应于检测到包括相应按压输入的手势或响应于检测到利用相应接触(或多个接触)所执行的相应按压输入来执行一个或多个操作,其中至少部分地基于检测到该接触(或多个接触)的强度增大到高于按压输入强度阈值而检测到该相应按压输入。在一些实施方案中,响应于检测到相应接触的强度增大到高于按压输入强度阈值来执行相应操作(例如,在相应按压输入的“向下冲程”上执行相应操作)。在一些实施方案中,按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于按压输入强度阈值,并且响应于检测到相应接触的强度随后减小到低于按压输入阈值来执行相应操作(例如,在相应按压输入的“向上冲程”上执行相应操作)。
在一些实施方案中,设备采用强度滞后以避免有时被称为“抖动”的意外输入,其中设备限定或选择与按压输入强度阈值具有预定义关系的滞后强度阈值(例如,滞后强度阈值比按压输入强度阈值低X个强度单位,或滞后强度阈值是按压输入强度阈值的75%、90%或某个合理比例)。因此,在一些实施方案中,按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于对应于按压输入强度阈值的滞后强度阈值,并且响应于检测到相应接触的强度随后减小到低于滞后强度阈值来执行相应操作(例如,在相应按压输入的“向上冲程”上执行相应操作)。类似地,在一些实施方案中,仅在设备检测到接触强度从等于或低于滞后强度阈值的强度增大到等于或高于按压输入强度阈值的强度并且任选地接触强度随后减小到等于或低于滞后强度的强度时才检测到按压输入,并且响应于检测到按压输入(例如,根据环境,接触强度增大或接触强度减小)来执行相应操作。
为了容易解释,任选地响应于检测到以下情况而触发对响应于与按压输入强度阈值相关联的按压输入或响应于包括按压输入的手势而执行的操作的描述:接触的强度增大到高于按压输入强度阈值、接触的强度从低于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接触的强度减小到低于按压输入强度阈值、或接触的强度减小到低于与按压输入强度阈值对应的滞后强度阈值。另外,在将操作描述为响应于检测到接触的强度减小到低于按压输入强度阈值而执行的实施例中,任选地响应于检测到接触的强度减小到低于对应于并小于按压输入强度阈值的滞后强度阈值来执行操作。如上所述,在一些实施方案中,对这些响应的触发还取决于满足基于时间的标准(例如,在满足第一强度阈值和满足第二强度阈值之间已经过延迟时间)。
如本说明书和权利要求书中所使用的,术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移,或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户手部的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解释为触感,该触感对应于所感知的设备或设备的部件的物理特征的变化。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如,即使在触敏表面的光滑度无变化时,触敏表面的移动也会任选地由用户解释或感测为触敏表面的“粗糙度”。虽然用户对触摸的此类解释将受到用户的个体化感知的限制,但是对触摸的许多感知是大多数用户共有的。因此,当触觉输出被描述为对应于用户的特定感知(例如,“松开点击”、“按下点击”、“粗糙度”)时,除非另外陈述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移将会生成典型(或普通)用户的所述感知。使用触觉输出向用户提供触觉反馈增强了设备的可操作性,并且使用户设备界面更高效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误),从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,触觉输出模式指定触觉输出的特征,诸如触觉输出的幅值、触觉输出的运动波形的形状、触觉输出的频率、和/或触觉输出的持续时间。
当设备(例如经由移动可移动质块以生成触觉输出的一个或多个触觉输出发生器)生成具有不同触觉输出模式的触觉输出时,触觉输出可在握持或触摸设备的用户中产生不同触感。虽然用户的感官基于用户对触觉输出的感知,但大多数用户将能够辨识由设备生成的触觉输出的波形、频率和幅值的变化。因此,波形、频率和幅值可被调节以向用户指示已执行了不同操作。这样,具有被设计、选择和/或安排用于模拟给定环境(例如,包括图形特征和对象的用户界面、具有虚拟边界和虚拟对象的模拟物理环境、具有物理边界和物理对象的真实物理环境、和/或以上任意的组合)中对象的特征(例如大小、材料、重量、刚度、光滑度等);行为(例如振荡、位移、加速、旋转、伸展等);和/或交互(例如碰撞、粘附、排斥、吸引、摩擦等)的触觉输出模式的触觉输出在一些情况下将为用户提供有帮助的反馈,其减少输入错误并提高用户对设备的操作的效率。另外,触觉输出任选地被生成为对应于与模拟的物理特征诸如输入阈值或对象选择无关的反馈。此类触觉输出在一些情况下将为用户提供有帮助的反馈,其减少输入错误并提高用户对设备的操作的效率。
在一些实施方案中,具有合适触觉输出模式的触觉输出充当在用户界面中或在设备中屏幕后面发生感兴趣事件的提示。感兴趣事件的示例包括设备上或用户界面中提供的示能表示(例如真实或虚拟按钮、或拔动式开关)的激活、所请求操作的成功或失败、达到或穿过用户界面中的边界、进入新状态、在对象之间切换输入焦点、激活新模式、达到或穿过输入阈值、检测或识别一种类型的输入或手势等等。在一些实施方案中,提供触觉输出以充当即将发生事件或结果的警告或提示,除非改变方向或中断输入被及时检测到,否则该即将发生的事件或结果将会发生。触觉输出在其他情境中也用于丰富用户体验、改善具有视觉或运动困难或者其他可访问性需要的用户对设备的可访问性、和/或改善用户界面和/或设备的效率和功能性。触觉输出任选地附带有音频输出和/或视觉用户界面改变,这在用户与用户界面和/或设备交互时进一步增强用户的体验,并有利于对关于用户界面和/或设备的状态的信息的更好传输,并且这减少输入错误并提高用户对设备的操作的效率。
用户界面和相关联的过程
现在将注意力转向可在具有显示器、触敏表面、用于生成触觉输出的(可选的)一个或多个触觉输出发生器以及用于检测与触敏表面的接触的强度的(可选的)一个或多个传感器的电子设备诸如便携式多功能设备100或设备300上实现的用户界面(“UI”)和相关联的过程的实施方案。
图5A-5Z示出了根据一些实施方案用于与应用切换用户界面交互的示例用户界面。这些附图中的用户界面用于示出下文描述的过程,包括图6A-6D中的过程。为了便于解释,将参考在具有触敏显示器系统112的设备上执行的操作来讨论实施方案中的一些实施方案。在此类实施方案中,焦点选择器任选地为:相应手指或触笔接触、与手指或触笔接触对应的表示点(例如,相应接触的质心或与相应接触相关联的点),或在触敏显示器系统112上所检测到的两个或更多个接触的质心。然而,响应于当在显示器450上显示附图中示出的用户界面连同焦点选择器时检测到触敏表面451上的接触,任选地在具有显示器450和独立的触敏表面451的设备上执行类似的操作。
图5A-5D示出了根据一些实施方案使得设备从应用的用户界面导航到应用启动用户界面的向上轻扫手势。
在图5A中,设备在默认全屏模式下(例如,用户界面5002占据基本上触摸屏112的全部)显示地图应用的用户界面(例如,用户界面5002)。该设备检测触摸屏112的底部边缘区域中的接触(例如,接触5004)。在检测到接触之前,设备在触摸屏112的底部边缘区域中显示指示器(例如,主屏幕示能表示5006),以指示用于检测边缘轻扫手势的触摸屏112的底部边缘区域的位置。
在图5A-5B中,设备检测接触5004从触摸屏112的底部边缘的向上移动;并且根据接触5004的向上移动,该设备减小地图应用的用户界面5002的尺寸,并且将用户界面5002转换为地图应用的应用表示(例如,包括用户界面5002的快照的卡5010)。卡5010被显示在具有多个可能目的地状态(例如,对应于不同用户界面的目的地状态,诸如应用切换用户界面、应用启动用户界面、前一/下一应用或当前应用的应用用户界面)的导航用户界面中的背景(例如,背景5008(例如,主屏幕用户界面5014的模糊图像(图5D)))上。设备在导航用户界面的背景5008上利用接触5004移动卡5010。根据确定接触5004的移动满足用于导航到应用切换用户界面的标准(例如,接触5004的移动的移动参数超过第一阈值(例如,在向上方向上超过第一阈值距离,或移动之后接着是接触5004暂停)),设备在背景5008上邻近卡5010显示另一卡5012(例如,设置应用的应用表示),以指示用于导航到应用切换用户界面的标准被满足,并且如果此刻检测到接触5004的抬离,设备会导航到应用切换用户界面。当接触5004在触摸屏112上向上移动时,卡5010和5012与接触5004同时向上移动,并且根据卡(或接触)离开触摸屏底部边缘的距离而减小尺寸。卡5012表示在地图应用之前最后打开的应用。
在图5B-5C中,当接触5004继续跨导航用户界面中的背景5008向上移动并拖动卡5010和5012时,设备检测到用于导航到应用启动用户界面(例如,主屏幕用户界面)的标准被满足(例如,接触5004的移动的移动参数超过第二阈值(例如,在向上方向上超过大于第一阈值距离的第二阈值距离,或接触5004的移动速度超过阈值速度))。根据确定用于导航到应用启动用户界面的标准被满足,设备从显示器移除卡5012,仅留下继续在背景5008上与接触5004一起移动的卡5010。当接触5004跨导航用户界面拖动卡5010时,卡5010的尺寸根据其距离触摸屏的底部边缘的距离而变化(例如,随着距边缘的距离增大而缩小)。
在图5C-5D中,设备检测到接触5004的抬离,而卡5010仍然是触摸屏上存在的唯一的卡(例如,在如图5C所示的状态中)(例如,仍然满足用于导航到应用启动用户界面的标准,并且不再满足用于导航到应用切换用户界面的标准)。响应于检测到接触5004的抬离(例如,由图5D中的主屏幕用户界面5014上方的虚线指示接触5004的抬离位置),设备停止显示导航用户界面(例如,在图5C中所示的状态中),并且显示应用启动用户界面(例如,主屏幕用户界面5014)(例如,如图5D所示)。应用启动用户界面显示表示在设备上安装的相应应用的多个应用图标。多个应用图标以预设方式布置(例如,按字母顺序、按类别,或根据用户配置列出)在应用启动用户界面上,而不考虑与该应用图标对应的在该设备上最后使用的(例如,最后显示的或与用户交互的)应用(或它们中的至少一些)的相对新近度。当通过用户输入(例如,轻击输入或双击输入)选择和激活每个应用图标时,使得设备打开(例如,显示)对应于应用图标的应用。
图5E之前的图5B示出,当在导航用户界面处于图5B所示的配置时检测到接触5004的抬离时(例如,由图5E的虚线指示的接触5004的抬离位置),设备导航到应用切换用户界面,而不是应用启动用户界面(例如,主屏幕用户界面5014)。
如图5E所示,应用切换用户界面包括与多个最近使用的应用(例如,打开应用的叠层或具有保持状态的应用)对应的应用表示。该应用表示(例如,对应于地图应用的卡5010,对应于设置应用的卡5012和对应于位置共享应用的卡5016等)以基于最后使用(例如,显示的或通过用户交互)的应用的相对新近度的顺序布置在(例如,叠加在背景5008上的)应用切换用户界面中。例如,最新近使用的应用被置于叠层的顶部,并且最久未使用的应用被置于叠层的底部。如图5E中所示,在应用切换用户界面中,应用的应用表示(例如,卡5010、5012和5016)以重叠的方式显示,以指示它们在最近使用的应用的叠层中的相对顺序。
图5E表示多种场景的起始状态,其中用户以不同方式与应用切换用户界面进行交互。在图5E上示出了若干接触5018、5024和5026,这些接触中的每一者在不同的时间被独立地检测到并且未被同时检测到。接触5018、5024和5026中的每一者都是在不同场景中单独检测到的不同手势的一部分。
图5E-5G示出,接触跨应用切换用户界面的轻扫手势(例如,在应用的应用表示上开始)使得设备在应用切换用户界面中的应用表示中滚动。
在图5E-5G中,设备检测卡5012上的接触5018(在图5E中),检测接触5018朝向触摸屏的右边缘的水平移动(如图5F和图5G中的水平箭头所示),并且检测接触5012在移动之后从触摸屏的抬离(例如,接触5018的抬离位置由图5G中的虚线指示)。响应于接触5018的水平轻扫,设备将卡5010、5012和5016向右移动,以在卡5016下方显露出卡5020(例如,针对天气应用的应用表示),如图5F和图5G所示。
如图5H-5K之前的图5E所示,当在应用表示上检测到向上轻扫手势时,设备关闭与向上轻扫手势开始的应用表示对应的应用。
如图5E所示,在应用切换用户界面中所示的卡5012上检测到接触5018。在图5H中,在接触5018保持基本上静止达阈值量的时间(例如,长按压时间阈值)之后,设备放大卡5012以指示卡5012被选择。在一些实施方案中,设备在检测到卡5012上的接触5018的向下触摸时放大卡5012,而不需要接触首先保持静止达阈值量的时间。
图5I-5J从图5E中所示的状态(例如,根据不需要接触5018的初始触摸保持的实施方案)或图5H中所示的状态(例如,根据需要接触5018的初始触摸保持的实施方案)继续,其中接触5018的向上移动在应用切换用户界面中跨背景5008向上拖动卡5012。如图5I-5J所示,卡5012的尺寸保持恒定,而卡5012被接触5018向上拖动。在一些实施方案中,在向上移动期间卡5012的尺寸与应用切换用户界面中的其他卡的尺寸相同(例如,如果卡5012由于接触5018在图5H中的触摸保持而被放大,则卡5012的尺寸缩小到其初始尺寸)。在一些实施方案中,卡5012在向上移动期间的尺寸为卡5012的放大尺寸(例如如图5H所示)。
在图5J-5K中,设备在接触5018的向上移动结束时检测到接触5018的抬离;以及响应于接触5018的抬离(例如,在图5K中以虚线指示接触5018的抬离位置),根据确定接触已移动超过高于其初始位置的阈值距离,设备停止显示卡5012,并且将卡5010、5016和新显露的卡5020偏移到图5E中所示的配置中。当从应用启动用户界面移除卡5012时,设备关闭对应于卡5012的应用(例如,设置应用)。设备移除关于与应用切换用户界面相关联的设置应用的最后显示状态的所存储的信息,使得下一次显示应用切换用户界面时,卡5012将不被包括在其他最近使用的应用的应用表示的叠层间。
图5L在图5E或图5H之后。图5E和5L(或图5H和图5L)示出,如果接触5018不在其从触摸屏上抬离之前在阈值量时间期间从其起始位置移动超过阈值量(例如,保持基本上静止),该设备将检测到的输入(例如,接触5018在卡5012上的轻击输入)作为切换到与卡5012对应的应用的请求来处理。如图5L所示(例如,由虚线指示接触5018的抬离位置),设备停止显示图5E(或图5H)中所示的应用切换用户界面,以及显示设置应用的最后显示的用户界面(例如,用户界面5022)。换句话讲,在图5A、图5B、图5E和图5L的序列中所示的过程中,用户使用应用切换用户界面从显示地图应用切换到设置应用。
图5M在图5E之后。如图5M-5O之前的图5E所示,当在另一应用表示上检测到向上轻扫手势时,设备关闭与向上轻扫手势开始的应用表示对应的应用。
如图5E所示,在应用切换用户界面中所示的卡5010上检测到接触5024。在图5M中,在接触5024保持基本上静止达阈值量的时间(例如,长按压时间阈值)之后,设备放大卡5010以指示卡5010被选择。在一些实施方案中,设备在检测到卡5010上的接触5024的向下触摸时放大卡5010,而不需要接触首先保持静止达阈值量的时间。
图5N从图5E中所示的状态(例如,根据不需要接触5024的初始触摸保持的实施方案)或图5M中所示的状态(例如,根据需要接触5024的初始触摸保持的实施方案)继续,其中接触5024的向上移动在应用切换用户界面中跨背景5008向上拖动卡5010。如图5N中所示,卡5010的尺寸保持恒定,而卡5010被接触5024向上拖动。在一些实施方案中,在向上移动期间卡5010的尺寸与应用切换用户界面中的其他卡的尺寸相同(例如,如果卡5010由于接触5024在图5M中的触摸保持而被放大,则卡5010的尺寸在其被拖动出叠层之前缩回到其初始尺寸)。在一些实施方案中,卡5010在向上移动期间的尺寸为卡5010的放大尺寸(例如如图5M所示)。
在图5N-5O中,设备在接触5024的向上移动结束时检测到接触5024的抬离;以及响应于接触5024的抬离(例如,在图5O中以虚线表示接触5024的抬离位置),设备停止显示卡5010,并且将卡5012、5016和新显露的卡5020偏移到图5E中所示的配置中。当从应用启动用户界面移除卡5010时,设备关闭对应于卡5010的应用(例如,地图应用)。设备移除关于与应用切换用户界面相关联的地图应用的最后显示状态的所存储的信息,使得下一次显示应用切换用户界面时,卡5010将不被包括在其他最近使用的应用的应用表示的叠层间。
图5P在图5N之后。在图5N和图5P中,接触5024在应用切换用户界面(例如如图5N所示)中从卡的叠层向上拖动卡5010,然后反转移动方向(例如,朝接触5024的初始位置向下移动)。如图5P中所示,在检测到接触5024抬离之后(例如,在图5P中的虚线示出了接触5024的抬离位置),设备将卡5010移动回到应用切换用户界面中的卡的叠层中,并且恢复图5E中的应用切换用户界面的配置。
图5Q在图5E之后。图5E之后的图5Q-5T示出了在任何应用的应用表示外部的应用切换用户界面的一部分(例如,背景5008的未被任何卡遮挡的部分(例如,背景5008的底部部分或顶部部分))中检测向上轻扫手势的过程,且其不在触摸屏的底部边缘部分之内,使得设备从应用切换用户界面导航到应用启动用户界面(例如,主屏幕用户界面5014)。
如图5E和5Q所示,接触5026在应用切换用户界面中的卡叠层下方被初始检测到(例如,接触5026的初始位置由图5Q中的虚线表示),然后在触摸屏上向上移动。响应于接触5026的向上移动,设备改变应用切换用户界面中的应用表示的显示配置。例如,堆叠卡5010、5012和5016彼此移动分开(并且任选地重新调整尺寸),并且如图5Q所示,响应于接触5026的向上移动停止彼此重叠。
图5Q-5R示出,当接触5026继续向上移动时,卡5010、5012和5016与接触5026一起向上移动。当卡5010、5012和5016与接触5026一起向上移动时,卡5010、5012和5016的尺寸根据接触5026的向上移动动态地减小。
在一些实施方案中,虽然接触5026的移动仍然满足用于导航回到应用切换用户界面的标准(例如,当接触5026的移动的移动参数低于阈值时(例如,移动距离低于阈值距离,或在抬离之前移动速度低于阈值速度))(例如,在不满足用于导航到应用启动用户界面的标准时),三个卡5010、5012和5016保持在接触5026下方并排显示,如图5Q-5R所示。
在图5S中,当接触5026的移动满足用于导航到应用启动用户界面(例如,主屏幕用户界面5014)的标准时,设备停止显示卡5016和5010,并且仅显示卡5012,该卡是显示在导航用户界面中的中心卡,以便在此刻检测到接触5026的抬离时指示设备将显示应用启动用户界面。
在图5S-5T中,在满足用于导航到应用启动用户界面的标准时,检测到接触5026的抬离(例如,在图5T中由虚线示出了接触5026的抬离)。响应于检测到接触5026的抬离并根据确定满足用于导航到应用启动用户界面的标准,设备停止显示导航用户界面(例如,如图5S所示),并且显示应用启动用户界面(例如,主屏幕用户界面5014,如图5T所示)。
在一些实施方案中,主屏幕示能表示5006未显示在应用切换用户界面或导航用户界面中,但在显示应用切换用户界面时检测到的向上边缘轻扫手势(例如,从触摸屏的底部边缘区域开始)也使得设备导航到应用启动用户界面,并且任选地还显示图5Q-5S中所示的导航用户界面的动画。这与图5A-5D中所示的导航场景形成对比。例如,图5Q和5R中的导航用户界面不包括应用切换用户界面的表示(例如,在图5Q和图5R中所示的导航用户界面中不存在表示图5E中所示的应用切换用户界面的卡),而是包括表示在触摸屏的底部边缘区域中初始检测到接触(例如,接触5026)时未显示的最近打开的应用的卡。因此,在一些实施方案中,响应于向上边缘轻扫手势:根据确定在手势开始处当前显示的相应用户界面是应用用户界面,设备显示包括相应用户界面的表示的导航用户界面;以及根据确定在手势开始处当前显示的相应用户界面是系统级用户界面(例如,应用切换用户界面或应用启动用户界面),设备显示不包括相应用户界面的表示的导航用户界面。
在图5Q-5T之前的图5E中,视觉反馈根据接触5026的向上和侧向移动而为连续且流畅的。参照用于导航到不同用户界面(例如,应用切换用户界面或应用启动用户界面)的标准连续地评估接触5026的移动,并且提供对应的视觉反馈来指示用户界面导航的当前目标状态(例如,如果接触5026的移动在接触5026抬离之前被反向,则将示出图5S-5Q所示的变化的反转)。
图5U在图5E或5H之后。图5E之后的图5U-5X的序列以及图5U-5V和图5Z的序列示出,根据是否满足用于导航到处于增强可达性模式的应用的标准或是否满足导航到处于默认全屏模式的应用的标准,从应用切换用户界面中的相应应用的应用表示位置开始的向下轻扫手势使得设备以增强可达性模式或默认全屏模式显示相应应用。
首先,图5U和5V之前的图5E(或图5H)的序列示出,在应用切换用户界面中的卡5012上检测到接触5018之后(例如,在图5E(或图5H)中所示的配置中),接触5018的向下移动使得卡5010、5012和5016根据接触5018的向下移动而扩大尺寸。当卡5012随着接触5018的向下移动而继续增大尺寸时,卡5010和5016被推出视图(例如,如图5V所示)。在图5V中,当在背景5008上仅显示卡5012时,满足用于导航到与卡5012对应的处于默认全屏模式的应用的标准(例如,接触5018的向下移动距离大于第一阈值距离并小于第二阈值距离,或者接触5018的向下移动的移动速度小于阈值速度)。如果在图5V中示出的时刻发生接触5018的抬离,设备将以默认全屏模式显示用于设置应用的用户界面5022(例如,如图5Z所示)。
如果在图5V所示的时刻没有发生接触5018的抬离,并且接触5018的向下移动继续(例如,如图5W中所示),以全宽显示的卡5012随着接触5018向下偏移,从而显露出触摸屏上的卡5012上方的背景5008的一部分。在一些实施方案中,上拉选项卡(例如,V形图案5028)的指示被逐渐显露出,以指示用于以增强可达性模式显示应用的标准将很快被满足。
图5W-5X示出,响应于在接触在触摸屏上跨阈值位置之后检测到接触5018的抬离(例如,达到触摸屏的底部边缘区域,如图5X中虚线所示的接触5018的抬离位置所示),设备以增强可达性模式显示用于设置应用的用户界面(例如,用户界面5032)(例如,用户界面5032仅示出用户界面5022的上部分,如同用户界面5022在触摸屏上向下偏移一半一样)。在一些实施方案中,邻近用户界面5032的顶部显示上拉选项卡(例如,具有V形图案指示器的选项卡5030)。以增强可达性模式显示应用的用户界面(例如,如图5X所示)允许用户在将设备拿在手中的同时容易地访问用户界面的顶部(例如,使用拇指)。
图5X-5Z示出了基于在处于增强可达性模式的应用的用户界面(例如,图5X中的用户界面5032)被显示时检测到的输入而返回到以默认全屏模式显示应用的用户界面(例如,图5Z中的用户界面5022)的过程。
在图5X中,在触摸屏上示出了多个接触(例如,接触5034、5036和5038)。这些接触不是同时检测到的接触。它们表示在不同示例场景中单独检测到的接触,这使得以默认全屏模式显示设置应用的用户界面。
在图5X-5Z中,设备检测选项卡5030上的接触5036并检测用于向上拉动选项卡5030并向上拖动设置应用的用户界面的接触5036的移动。在图5Z中,一旦接触5036已移动超过阈值位置或以大于阈值速度抬离(例如,在快拔手势中)(例如,由图5Z中的虚线指示接触5036的抬离位置),设备以默认全屏模式显示设置应用的用户界面5022。
在图5Z之前的图5X中,设备在以增强可达性模式显示的设置应用的用户界面5032上方的背景5008的区域中检测到接触5034的轻击输入(例如,在图5Z中由虚线指示接触5034的抬离位置)。响应于检测到接触5034的轻击输入,设备停止以增强可达性模式显示设置应用,并且以默认全屏模式显示设置应用(如图5Z所示)。
在图5Z之前的图5X中,设备检测从触摸屏的底部边缘区域开始的向上边缘轻扫输入(例如,接触5038的向上移动)(例如,如主屏幕示能表示5006的位置所示)。根据确定向上边缘轻扫输入满足预定义标准(例如,具有高于阈值速度的抬离速度,或高于阈值距离的距触摸屏的底部边缘的移动距离),设备停止以增强可达性模式显示设置应用(例如,如图5X中所示),并以默认全屏模式显示设置应用(例如,如图5Z中所示)。
图6A-6D是示出了根据一些实施方案与应用切换用户界面交互的方法的流程图。尽管将参考触敏显示器(其中组合了触敏表面和显示器)上的输入给出随后的实施例中的一些实施例,但是在一些实施方案中,设备检测与显示器450分开的触敏表面451上的输入,如图4B中所示。
在一些实施方案中,方法6000由电子设备(例如,图1A的便携式多功能设备100)和/或电子设备的一个或多个部件(例如,I/O子系统106、操作系统126等)来执行。在一些实施方案中,方法6000由存储在非暂态计算机可读存储介质并由设备的一个或多个处理器诸如设备100的一个或多个处理器122(图1A)执行的指令来管理。为了便于解释,以下介绍了由设备100执行的方法6000。在一些实施方案中,参考图1A,方法6000的操作至少部分地由操作系统126、通信模块128和/或图形模块132以及触敏显示器(例如触摸屏112)执行或使用。方法6000中的一些操作任选地被组合,并且/或者一些操作的顺序任选地被改变。
如下所述,方法6000(和相关联的接口)提供了在应用切换用户界面中执行操作的直观方式,诸如关闭应用、导航到应用启动用户界面(例如,主屏幕)或导航到不同应用。该方法在应用切换用户界面中执行操作时减少了来自用户的输入的数量、程度和/或性质,从而创建更高效的人机界面。对于电池驱动的电子设备,使得用户能够更快且更有效地执行应用切换用户界面中的操作节省了电力并且增加了电池充电之间的时间间隔。
在方法6000中,设备在显示器上显示(6002)应用(例如,设备显示地图应用的用户界面5002,如图5A中所示)。在显示器上显示应用的同时(例如,与系统级用户界面相反,诸如主屏幕用户界面或应用启动用户界面或控制面板用户界面),设备检测(6004)与用于显示应用切换用户界面的请求对应的输入(例如,从触摸屏的底部边缘开始的接触5004的向上轻扫,如图5A-SB所示)。响应于检测到与用于显示应用切换用户界面的请求对应的输入,设备显示(6006)应用切换用户界面(例如,列出多个最近使用的应用的用户界面,如图5B之后的图5E所示),其包括多个最近使用的应用(例如,设备上最新近使用的应用,诸如在该设备上最新近显示或使用的预先确定数量(例如,2、3、4、5、6)个应用)的表示,包括对应于第一应用的第一应用表示(例如,对应于地图应用的卡5010)和对应于第二应用的第二应用表示(例如,对应于设置应用的卡5012)。在显示应用切换用户界面时,设备检测(6008)触敏表面上的接触(例如,图5B之后的图5E中的接触5018、5024或5026)的触摸手势(例如,接触作出的触摸和拖动手势,包括接触的初始向下触摸以及接触的后续移动以及任选地,接触的抬离)。响应于检测到触摸手势(6010),设备根据各种确定执行一个或多个操作(例如,操作6012、6014、6016、6020、6022、6024、6032、6034和6036)。根据确定触摸手势包括接触(例如接触5018)在第一方向上(例如,触敏表面上对应于跨显示器的垂直向上方向的方向)的移动并且开始于对应于第一应用表示(例如,设置应用)的位置处,设备关闭(6012)第一应用(例如,不考虑在检测到接触在第一方向上的移动之前接触在触敏表面上的持续时间)。这在图5E或图5H之后的图5I-5K中示出,其中在卡5012上检测到接触5018的向上轻扫手势之后,关闭设置应用(例如,从与应用切换用户界面相关联的最近打开的应用列表中移除)。在终止接触5018的向上轻扫手势之后,保持显示其他应用表示应用和应用切换用户界面。根据确定触摸手势包括接触(例如,接触5024)在第一方向上的移动并且开始于对应于第二应用表示(例如,地图应用)的位置处,设备关闭(6014)第二应用(例如,不考虑在检测到接触在第一方向上的移动之前在触敏表面上的持续时间)。在图5E或图5M之后的图5N-5O中示出了这种情况,其中在卡5010上检测到接触5024的向上轻扫手势之后,关闭地图应用(例如,从与应用切换用户界面相关联的最近打开的应用列表中移除)。在终止接触5018的向上轻扫手势之后,保持显示其他应用表示应用和应用切换用户界面。根据确定触摸手势包括接触(例如,接触5026)在第一方向上的移动并且开始于对应与应用切换用户界面中在第一应用表示和第二应用表示外部(例如,下方)的预定义区域对应的位置处(例如,在任何应用表示外部的位置),设备停止(6016)显示应用切换用户界面,并显示与应用切换用户界面(例如,主屏幕用户界面)不同的应用启动用户界面(例如,主屏幕用户界面5014,如图5T所示)。在图5E之后的图5Q-5T中示出了这种情况,其中设备响应于在未被应用切换用户界面中的任何卡覆盖的背景5008上检测到的接触5026的向上轻扫手势(不是向上边缘轻扫手势)而显示主屏幕用户界面5014。在一些实施方案中,应用启动用户界面是主屏幕用户界面,其包括以预先确定的布置方式(例如,与针对应用中的至少一些最后使用应用的相对新近度无关的布置方式)显示的应用图标和/或桌面小程序。在一些实施方案中,应用启动用户界面是包括以预先确定的布置方式显示的应用图标的应用抽屉用户界面。在一些实施方案中,应用图标是在激活时(例如,通过图标上的轻击手势)启动相应应用(例如,使设备打开应用并显示应用的默认启动用户界面)的图标。在一些实施方案中,最近使用的应用是打开的应用。如本说明书和权利要求书中所使用的,术语“打开的应用”是指具有保持状态信息(例如,作为设备/全局内部状态157和/或应用内部状态192的一部分)的软件应用。打开的应用是以下类型的应用中的任一应用:活动应用,其当前显示在显示器112上(或对应的应用视图当前显示在显示器上);后台应用(或后台进程),其当前未显示在显示器112上,但用于对应应用的一个或多个应用进程(例如,指令)正由一个或多个处理器120处理(即,正在运行);暂停的应用,其当前不运行,并且应用被存储在易失性存储器(例如,存储器102的DRAM、SRAM、DDR RAM,或其他易失性随机存取固态存储器设备)中;以及休眠的应用,其未正在运行,并且应用被存储在非易失性存储器(例如,存储器102的一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备、或其他非易失性固态存储设备)中。如本文所用,术语“关闭的应用”是指不具有保持状态信息的软件应用(例如,被关闭应用的状态信息不被存储在设备的存储器中)。因此,关闭应用包括停止和/或移除针对该应用的应用进程以及从设备的存储器移除针对应用的状态信息。一般来讲,当在第一应用中时,打开第二应用并不关闭第一应用。当显示第二应用并且停止显示第一应用时,在为活动应用的第一应用被显示时,该第一应用可变成后台应用、暂停的应用或休眠的应用,但第一应用在其状态信息由该设备保持时仍然是打开的应用。
在一些实施方案中,在检测到触摸手势时:设备确定(6018)已在对应于相应应用表示(例如,如图5E所示的设置应用或地图应用)的位置处初始检测到接触(例如,图5E中的接触5018或接触5024)。响应于确定已在对应于相应应用表示的位置处初始检测到接触而放大相应应用表示。这在图5H和图5M中示出,例如,其中在分别检测到接触5018和5024时,设备分别放大卡5012和5010。放大特定的应用表示向用户提供了视觉反馈,其指示触摸手势中的接触处于将使得电子设备执行与特定应用表示相关联的操作的位置。提供改进的反馈增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
在一些实施方案中,响应于检测到接触(6010)作出的触摸手势,根据确定触摸手势开始于相应应用表示(例如,第一应用表示或第二应用表示)上并且触摸手势结束时(例如,在接触抬离之后或预先确定的超时之后)接触(例如,接触5018)已经从触敏表面上的接触起始位置移动少于阈值量,设备使用针对相应应用(例如,设置应用)的用户界面(例如,全屏用户界面)替换应用切换用户界面的显示。在图5E之后的图5U-5V和图5Z中示出了这一点,其中卡5018上的向下轻扫手势(例如,触摸屏上的未通过阈值位置的短向下轻扫)使得该设备以全屏模式显示设置应用的用户界面5022。图5E之后的图5L中也示出了这种情况,其中接触5018的轻击手势使得设备显示设置应用并且停止显示应用切换用户界面。利用静止手势导航到特定应用,而不是利用移动手势关闭特定应用,提供了可在应用切换用户界面中执行的附加操作。提供附加控件选项而不因附加的显示控件使用户界面混乱增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
在一些实施方案中,在方法6000中,响应于检测到接触作出的触摸手势(6010),根据确定触摸手势包括接触在与第一方向不同(例如,相反)的第二方向上的移动,设备保持(6022)显示应用切换用户界面。在图5E之后的图5F、图5H-5J、图5M-5N、图5Q-5S、图5U-5W中所示的任何过程中,如果接触(例如,接触5018、5024或5026)的移动返回到其起始位置(或在起始位置的阈值距离之内)并随后抬离,则设备将应用切换用户界面的显示恢复到图5E所示的配置。响应于接触沿与第一方向不同的方向移动而保持应用切换用户界面,为用户提供了避免或取消执行当接触在该第一方向上继续移动本该发生的操作的方式。提供附加的控件选项而不因附加的显示控件(例如,撤销或取消图标)使用户界面混乱增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
在一些实施方案中,响应于检测到接触(例如,接触5018)作出的触摸手势,根据确定该触摸手势开始于对应于相应应用表示(例如,卡5012)的位置处并且包括接触在与第一方向不同(例如,相反)的第二方向上(例如,向下)的移动,设备使用针对相应应用的用户界面替换(6024)应用切换用户界面的显示,其中针对相应应用的用户界面在预定义方向上偏移(例如,向下,使得针对相应应用的用户界面的顶部更接近电子设备的底部边缘)。在图5E之后的图5U-5X中示出了这一点,其中接触5018在卡5012上的向下轻扫手势使得设备以增强可达性模式显示设置应用的用户界面(例如,在触摸屏上向下偏移一半)。响应于在一个方向上(例如,向下)移动手势而导航到其用户界面被(例如,向下)偏移的特定应用使得用户更容易利用单手操作(例如,通过针对特定应用用户界面顶部处控件的改进可达性)与特定应用交互,而不是利用在不同方向上(例如,向上)移动手势来关闭特定应用,提供了能够在应用切换用户界面中执行的附加操作。提供附加的控件选项而不因附加的显示控件使用户界面混乱增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
在一些实施方案中,显示在预定义方向上偏移的针对相应应用的用户界面包括(6026)从显示器的预定义部分移除针对相应应用的用户界面(例如,触摸屏的顶部不显示用户界面5022的任何部分,而显示背景5008的一部分,如图5X中所示)。在方法600中,在显示在预定义方向上偏移的针对相应应用的用户界面时,设备在与显示器的预定义部分对应的位置处检测手势(例如,接触5036或5038的拖动手势)(例如,开始于触敏表面上与在针对相应应用的偏移用户界面中显示或与之一起显示的拖动示能表示(诸如图5X中的V形图案5030)对应的位置处的拖动手势)。设备根据手势(例如,随着手势进展逐渐将应用移动回到显示器的预定义部分中)将针对相应应用的用户界面(例如,用户界面5022)偏移回显示器的预定义部分中。这在图5X-5Y中示出(例如,示出了选项卡5030上的向上轻扫手势使得设备退出增强可达性模式)。例如,这还在图5X之后的图5Z中示出(例如,示出了从触摸屏底部边缘开始的向上轻扫手势使得设备退出增强可达性模式)。
在一些实施方案中,响应于在显示针对在预定义方向上偏移的相应应用的用户界面的同时检测到显示器的预定义部分中的轻击手势,设备将针对相应应用的用户界面偏移回显示器的预定义部分。例如,这在图5X之后的图5Z中示出(例如,示出了接触5034的轻击手势使得设备退出增强可达性模式)。响应于另一个手势而将应用的用户界面偏移回其未移位的位置(例如,当应用在显示器上全屏显示时)使得用户能够与用户界面的下部进行交互,该用户界面的下部已偏移离开屏幕,使得用户能够使用单手操作与用户界面的上部交互。提供附加的控件选项而不因附加的显示控件使用户界面混乱增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
在一些实施方案中,响应于检测到触摸手势(6010),根据确定该触摸手势包括接触在不同于(例如,垂直于)第一方向的第三方向上(例如,向左或向右)的移动,设备保持(6028)显示应用切换用户界面并在应用切换用户界面中显示的应用表示中滚动(例如,不考虑检测到接触在第三方向上移动之前接触在触敏表面上的持续时间)。图5E-5G中示出了这种情况,例如,其中接触5018的向右轻扫手势在应用切换用户界面中滚动卡片,从而显露出表示最近使用的应用的卡叠层中更深的新卡。利用第三方向(例如,向右或向左)上的移动手势在应用表示中滚动,而不是利用第一方向(例如向上)的移动手势关闭特定应用,在应用切换用户界面中显示用于选择的附加应用表示。提供附加的控件选项而不因附加的显示控件使用户界面混乱增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
在一些实施方案中,响应于检测到触摸手势(6010),根据确定该触摸手势开始于对应于相应应用表示的位置处并且包括接触的移动,设备根据接触的移动而移动(6030)相应应用表示(例如,如果接触跨显示器向上移动,则在触敏显示器上向上移动应用表示,如果接触跨显示器向下移动,则向下移动应用表示,如果接触跨显示器向左移动,则向左移动应用表示,和/或如果接触跨显示器向右移动,则向右移动应用表示)。例如,这在图5F、图5I、图5N、图5U-5W中示出。根据接触的移动来移动特定的应用表示向用户提供视觉反馈,指示触摸手势将使得电子设备执行与特定应用表示相关联的操作。提供改进的反馈增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
在一些实施方案中,响应于检测到触摸手势(6010):根据确定触摸手势开始于对应于相应应用表示(例如,第一应用表示或第二应用表示)的位置处并且包括接触在第一方向上的移动,设备在第一方向上移动(6032)相应应用表示而不在第一方向上移动其他应用表示(例如,如图5I-5J所示)(例如,相应应用的移动量随着接触在第一方向的移动量增大而增大);以及根据确定触摸手势开始于对应于预定义区域外部位置的位置处并且包括接触在第一方向上的移动,同时在第一方向上移动相应应用表示和一个或多个其他应用表示(例如,如图5Q-5R中所示)(例如,相应应用和一个或多个其他应用表示的移动量随着接触在第一方向上的移动量增大而增大)。在第一方向上仅移动特定的应用表示而不在第一方向上移动其他应用表示向用户提供视觉反馈,从而指示将仅在对应于特定应用表示的应用上执行操作(例如,关闭对应应用而不关闭其他打开的应用)。同时在第一方向上移动多个应用表示向用户提供视觉反馈,指示将执行并非特定应用特有的操作(例如,进入主屏幕用户界面)。提供改进的反馈增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
在一些实施方案中,响应于检测到触摸手势(6010):根据确定触摸手势开始于对应于相应应用表示(例如,第一应用表示或第二应用表示)的位置处并且包括接触在第一方向上的移动,设备根据接触在第一方向上的移动而移动(6034)相应应用表示而不改变相应应用表示的尺寸(例如,如图5I-5J所示,其中卡5012的尺寸在接触5018导致的向上移动期间保持恒定);以及根据确定该触摸手势开始于对应于预定义区域外部位置的位置处并且包括接触在第一方向上的移动,设备根据接触在第一方向上的移动同时移动相应应用表示并改变相应应用表示的尺寸(例如,放大或缩小尺寸)(例如,相应应用表示的尺寸的改变量随着接触在第一方向上的移动量的增大而增大)(例如,如图5O-5R中所示,其中卡5012的尺寸在被接触5026向上拖动时缩小)。在一些实施方案中,设备根据接触在第一方向上的移动同时改变一个或多个其他应用表示的尺寸。例如,如图5Q-5R中所示,卡5010、5012和5016的尺寸在由接触5026的移动导致的卡的向上移动期间发生变化。在第一方向上移动特定的应用表示而不改变其尺寸向用户提供视觉反馈,指示将在对应于特定应用表示的应用上执行操作(例如,关闭对应应用而不关闭其他打开的应用)。在第一方向上移动多个应用表示同时改变其尺寸向用户提供视觉反馈,指示将执行并非特定应用特有的操作(例如,进入主屏幕用户界面)。提供改进的反馈增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
在一些实施方案中,应用切换用户界面包括(6036)多个彼此重叠的应用表示(例如,如图5E所示,卡5010、5012和5016彼此重叠)。在方法6000中,响应于检测到触摸手势(6010):根据确定触摸手势开始于对应于相应应用表示(例如,第一应用表示或第二应用表示)的位置处并且包括接触在第一方向上的移动,设备移动(6038)相应应用表示同时保持多个应用表示的至少一部分的重叠(例如,如图5I-5J所示,其中卡5012在其向上移动期间继续与卡5010和卡5016重叠);以及根据确定触摸手势开始于对应于预定义区域外部位置的位置处并且包括接触在第一方向上的移动,设备移动相应应用表示并移动一个或多个应用表示和/或重新调整一个或多个应用表示的尺寸,以消除多个应用表示之间的重叠(例如,如图5Q-5I中所示,卡5012、5010和5016展开并被重新调整尺寸,并平行向上移动而没有任何重叠)。在第一方向上移动特定的应用表示同时保持其他应用表示中的至少一些应用表示的重叠向用户提供视觉反馈,指示将在对应于特定应用表示的应用上执行操作(例如,关闭对应应用而不关闭其他打开的应用)。移动多个应用表示和/或重新调整多个应用表示的尺寸以消除应用表示之间的重叠向用户提供视觉反馈,指示将执行并非特定应用特有的操作(例如,进入主屏幕用户界面)。提供改进的反馈增强了设备的可操作性并使得用户设备界面更高效(例如,通过帮助用户提供正确的输入,并且减少在操作设备/与设备交互时出现的用户错误)。
应当理解,图6A-6D中已描述的操作的具体顺序仅仅是一个示例,并非旨在表明所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。在一些实施方案中,方法6000的一个或多个操作被组合、补充或替换为本文所述的其他方法的一个或多个操作。
以上参考图6A-6D所述的操作任选地由图1A-1B中所描绘的部件来实施。例如,显示操作6002、6006和6016、检测操作6004和6008,以及关闭操作6012和6014任选地由事件分类器170、事件识别器180和事件处理程序190来实施。事件分类器170中的事件监视器171检测在触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用136-1。应用136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备100的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备100从一个取向到另一个取向的旋转。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用内部状态192。在一些实施方案中,事件处理程序190访问相应的GUI更新器178来更新应用所显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A-1B中所描绘的部件可如何实现其他过程。
出于解释的目的,前面的描述已参考具体实施方案来描述。然而,上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择和描述实施方案是为了最佳地阐明本发明的原理及其实际应用,以便由此使得本领域的其他技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施方案。
Claims (18)
1.一种方法,包括:
在具有触敏表面和显示器的电子设备处:
在所述显示器上显示应用;
在所述显示器上显示所述应用时,检测与用于显示应用切换用户界面的请求对应的输入;
响应于检测到与用于显示所述应用切换用户界面的所述请求对应的所述输入,显示包括多个最近使用的应用的表示的应用切换用户界面,所述多个最近使用的应用的表示包括对应于第一应用的第一应用表示和对应于第二应用的第二应用表示;
在显示所述应用切换用户界面时,在所述触敏表面上检测接触作出的触摸手势;以及,
响应于检测到所述触摸手势:
根据确定所述触摸手势包括所述接触在第一方向上的移动并且开始于对应于所述第一应用表示的位置处,关闭所述第一应用;
根据确定所述触摸手势包括所述接触在所述第一方向上的移动并且开始于对应于所述第二应用表示的位置处,关闭所述第二应用;以及,
根据确定所述触摸手势包括所述接触在所述第一方向上的移动并且开始于与所述应用切换用户界面中在所述第一应用表示和所述第二应用表示外部的预定义区域对应的位置处,停止显示所述应用切换用户界面并显示与所述应用切换用户界面不同的应用启动用户界面。
2.根据权利要求1所述的方法,包括:
在检测到所述触摸手势时:
确定已在对应于相应应用表示的位置处初始检测到所述接触;以及,
响应于确定已在对应于所述相应应用表示的所述位置处初始检测到所述接触,放大所述相应应用表示。
3.根据权利要求1-2中任一项所述的方法,包括:
响应于检测到所述接触作出的所述触摸手势:
根据确定所述触摸手势开始于相应应用表示上并且所述触摸手势结束时所述接触已从所述触敏表面上的所述接触的起始位置移动少于阈值量,使用针对所述相应应用的用户界面替换所述应用切换用户界面的显示。
4.根据权利要求1-3中任一项所述的方法,包括:
响应于检测到所述接触作出的所述触摸手势:
根据确定所述触摸手势包括所述接触在不同于所述第一方向的第二方向上的移动,保持所述应用切换用户界面的显示。
5.根据权利要求1-3中任一项所述的方法,包括:
响应于检测到所述接触作出的所述触摸手势:
根据确定所述触摸手势开始于对应于相应应用表示的位置处并且包括所述接触在与所述第一方向不同的第二方向上的移动,使用针对所述相应应用的所述用户界面替换所述应用切换用户界面的显示,其中针对所述相应应用的所述用户界面在预定义方向上偏移。
6.根据权利要求5所述的方法,其中显示在所述预定义方向上偏移的针对所述相应应用的所述用户界面包括从所述显示器的预定义部分移除针对所述相应应用的所述用户界面,并且所述方法包括:
在显示在所述预定义方向上偏移的针对所述相应应用的所述用户界面时,在与所述显示器的所述预定义部分对应的位置处检测手势;以及
根据所述手势将针对相应应用的所述用户界面偏移回所述显示器的所述预定义部分中。
7.根据权利要求1-6中任一项所述的方法,包括:
响应于检测到所述触摸手势:
根据确定所述触摸手势包括所述接触在不同于所述第一方向的第三方向上的移动,保持所述应用切换用户界面的显示并在所述应用切换用户界面中显示的应用表示中滚动。
8.根据权利要求1-7中任一项所述的方法,包括:
响应于检测到所述触摸手势:
根据确定所述触摸手势开始于对应于相应应用表示的位置处并且包括所述接触的移动,根据所述接触的所述移动来移动所述相应应用表示。
9.根据权利要求1-8中任一项所述的方法,包括:
响应于检测到所述触摸手势:
根据确定所述触摸手势开始于对应于相应应用表示的位置处并且包括所述接触在所述第一方向上的移动,在所述第一方向上移动所述相应应用表示而不在所述第一方向上移动其他应用表示;以及,
根据确定所述触摸手势开始于对应于所述预定义区域外部位置的位置处并且包括所述接触在所述第一方向上的移动,同时在所述第一方向上移动所述相应应用表示和一个或多个其他应用表示。
10.根据权利要求1-9中任一项所述的方法,包括:
响应于检测到所述触摸手势:
根据确定所述触摸手势开始于对应于相应应用表示的位置处并且包括所述接触在所述第一方向上的移动,根据所述接触在所述第一方向上的所述移动来移动所述相应应用表示而不改变所述相应应用表示的尺寸;以及
根据确定所述触摸手势开始于对应于所述预定义区域外部位置的位置处并且包括所述接触在所述第一方向上的移动,根据所述接触在所述第一方向上的所述移动来同时移动所述相应应用表示并改变所述相应应用表示的尺寸。
11.根据权利要求1-10中任一项所述的方法,其中所述应用切换用户界面包括彼此重叠的多个应用表示;并且
所述方法包括:
响应于检测到所述触摸手势:
根据确定所述触摸手势开始于对应于相应应用表示的位置处并且包括所述接触在所述第一方向上的移动,移动所述相应应用表示,同时保持所述多个应用表示的重叠的至少一部分;以及
根据确定所述触摸手势开始于对应于所述预定义区域外部位置的位置处并且包括所述接触在所述第一方向上的移动,移动所述相应应用表示并移动所述应用表示中的一个或多个应用表示和/或重新调整所述应用表示中的一个或多个应用表示的尺寸,以消除所述多个应用表示之间的重叠。
12.一种电子设备,包括:
显示器;
触敏表面;
一个或多个处理器;
存储器;和
一个或多个程序,其中所述一个或多个程序存储在所述存储器中并且被配置为由所述一个或多个处理器执行,所述一个或多个程序包括用于执行以下操作的指令:
在所述显示器上显示应用;
在所述显示器上显示所述应用时,检测与用于显示应用切换用户界面的请求对应的输入;
响应于检测到与用于显示所述应用切换用户界面的所述请求对应的所述输入,显示包括多个最近使用的应用的表示的应用切换用户界面,所述多个最近使用的应用的表示包括对应于第一应用的第一应用表示和对应于第二应用的第二应用表示;
在显示所述应用切换用户界面时,在所述触敏表面上检测接触作出的触摸手势;以及,
响应于检测到所述触摸手势:
根据确定所述触摸手势包括所述接触在第一方向上的移动并且开始于对应于所述第一应用表示的位置处,关闭所述第一应用;
根据确定所述触摸手势包括所述接触在所述第一方向上的移动并且开始于对应于所述第二应用表示的位置处,关闭所述第二应用;以及,
根据确定所述触摸手势包括所述接触在所述第一方向上的移动并且开始于与所述应用切换用户界面中在所述第一应用表示和所述第二应用表示外部的预定义区域对应的位置处,停止显示所述应用切换用户界面并显示与所述应用切换用户界面不同的应用启动用户界面。
13.一种电子设备,包括:
显示器;
触敏表面;和
用于使得在所述显示器上显示应用的装置;
用于在所述显示器上显示所述应用时检测与用于显示应用切换用户界面的请求对应的输入的装置;
响应于检测到与用于显示所述应用切换用户界面的所述请求对应的所述输入而启用的、用于显示包括多个最近使用的应用的表示的应用切换用户界面的装置,所述多个最近使用的应用的表示包括对应于第一应用的第一应用表示和对应于第二应用的第二应用表示;
用于在显示所述应用切换用户界面时在所述触敏表面上检测接触作出的触摸手势的装置;和,
响应于检测到所述触摸手势而被启用的、用于进行以下操作的装置:
根据确定所述触摸手势包括所述接触在第一方向上的移动并且开始于对应于所述第一应用表示的位置处,关闭所述第一应用;
根据确定所述触摸手势包括所述接触在所述第一方向上的移动并且开始于对应于所述第二应用表示的位置处,关闭所述第二应用;以及,
根据确定所述触摸手势包括所述接触在所述第一方向上的移动并且开始于与所述应用切换用户界面中在所述第一应用表示和所述第二应用表示外部的预定义区域对应的位置处,停止显示所述应用切换用户界面并显示与所述应用切换用户界面不同的应用启动用户界面。
14.一种存储一个或多个程序的计算机可读存储介质,所述一个或多个程序包括指令,所述指令当由具有显示器、触敏表面的电子设备执行时,使得所述设备:
在所述显示器上显示应用;
在所述显示器上显示所述应用时,检测与用于显示应用切换用户界面的请求对应的输入;
响应于检测到与用于显示所述应用切换用户界面的所述请求对应的所述输入,显示包括多个最近使用的应用的表示的应用切换用户界面,所述多个最近使用的应用的表示包括对应于第一应用的第一应用表示和对应于第二应用的第二应用表示;
在显示所述应用切换用户界面时,在所述触敏表面上检测接触作出的触摸手势;以及,
响应于检测到所述触摸手势:
根据确定所述触摸手势包括所述接触在第一方向上的移动并且开始于对应于所述第一应用表示的位置处,关闭所述第一应用;
根据确定所述触摸手势包括所述接触在所述第一方向上的移动并且开始于对应于所述第二应用表示的位置处,关闭所述第二应用;以及,
根据确定所述触摸手势包括所述接触在所述第一方向上的移动并且开始于与所述应用切换用户界面中在所述第一应用表示和所述第二应用表示外部的预定义区域对应的位置处,停止显示所述应用切换用户界面并显示与所述应用切换用户界面不同的应用启动用户界面。
15.一种电子设备,包括:
显示器;
触敏表面;
一个或多个处理器;
存储器;和
一个或多个程序,其中所述一个或多个程序存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序包括用于执行权利要求1-11所述的方法中的任一种方法的指令。
16.一种存储一个或多个程序的计算机可读存储介质,所述一个或多个程序包括指令,所述指令当由具有显示器和触敏表面的电子设备执行时,使得所述设备执行权利要求1-11所述的方法中的任一种方法。
17.一种电子设备上的图形用户界面,所述电子设备具有显示器、触敏表面、存储器以及用于执行存储在所述存储器中的一个或多个程序的一个或多个处理器,所述图形用户界面包括根据权利要求1-11所述的方法中的任一种方法所显示的用户界面。
18.一种电子设备,包括:
显示器;
触敏表面;和
用于执行权利要求1-11所述的方法中的任一种方法的装置。
Priority Applications (12)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/US2019/030579 WO2019236225A1 (en) | 2018-06-03 | 2019-05-03 | Devices and methods for interacting with an application switching user interface |
AU2019280205A AU2019280205B2 (en) | 2018-06-03 | 2019-05-03 | Devices and methods for interacting with an application switching user interface |
JP2020556244A JP7009651B2 (ja) | 2018-06-03 | 2019-05-03 | アプリケーション切り替えユーザインタフェースと対話するためのデバイス及び方法 |
KR1020207033673A KR102382459B1 (ko) | 2018-06-03 | 2019-05-03 | 애플리케이션 스위칭 사용자 인터페이스와 상호작용하기 위한 디바이스들 및 방법들 |
KR1020227023063A KR102520121B1 (ko) | 2018-06-03 | 2019-05-03 | 애플리케이션 스위칭 사용자 인터페이스와 상호작용하기 위한 디바이스들 및 방법들 |
EP19724989.9A EP3803560A1 (en) | 2018-06-03 | 2019-05-03 | Devices and methods for interacting with an application switching user interface |
KR1020227010627A KR102419067B1 (ko) | 2018-06-03 | 2019-05-03 | 애플리케이션 스위칭 사용자 인터페이스와 상호작용하기 위한 디바이스들 및 방법들 |
AU2021204178A AU2021204178B2 (en) | 2018-06-03 | 2021-06-21 | Devices and methods for interacting with an application switching user interface |
JP2022003231A JP7383059B2 (ja) | 2018-06-03 | 2022-01-12 | アプリケーション切り替えユーザインタフェースと対話するためのデバイス及び方法 |
AU2022224714A AU2022224714B2 (en) | 2018-06-03 | 2022-08-29 | Devices and methods for interacting with an application switching user interface |
JP2023190160A JP2024012537A (ja) | 2018-06-03 | 2023-11-07 | アプリケーション切り替えユーザインタフェースと対話するためのデバイス及び方法 |
AU2024202667A AU2024202667A1 (en) | 2018-06-03 | 2024-04-24 | Devices and methods for interacting with an application switching user interface |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862679953P | 2018-06-03 | 2018-06-03 | |
US62/679,953 | 2018-06-03 | ||
DKPA201870356A DK180316B1 (en) | 2018-06-03 | 2018-06-11 | Devices and methods for interacting with an application switching user interface |
DKPA201870356 | 2018-06-11 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110554829A true CN110554829A (zh) | 2019-12-10 |
Family
ID=68736178
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811165503.9A Pending CN110554829A (zh) | 2018-06-03 | 2018-09-29 | 用于与应用切换用户界面进行交互的设备和方法 |
Country Status (8)
Country | Link |
---|---|
US (3) | US10635294B2 (zh) |
EP (1) | EP3803560A1 (zh) |
JP (3) | JP7009651B2 (zh) |
KR (3) | KR102382459B1 (zh) |
CN (1) | CN110554829A (zh) |
AU (4) | AU2019280205B2 (zh) |
DK (1) | DK180316B1 (zh) |
WO (1) | WO2019236225A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111263002A (zh) * | 2020-01-19 | 2020-06-09 | 华为技术有限公司 | 一种显示方法和电子设备 |
CN112596883A (zh) * | 2020-12-25 | 2021-04-02 | 深圳市欢太科技有限公司 | 一种应用切换方法、装置、存储介质及电子设备 |
CN113434079A (zh) * | 2021-05-28 | 2021-09-24 | 北京信和时代科技有限公司 | 记事类应用的控制方法、装置、设备及计算机存储介质 |
CN114968031A (zh) * | 2022-06-30 | 2022-08-30 | Vidaa国际控股(荷兰)公司 | 一种任务管理方法及显示设备 |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9417754B2 (en) | 2011-08-05 | 2016-08-16 | P4tents1, LLC | User interface system, method, and computer program product |
USD858561S1 (en) * | 2016-06-17 | 2019-09-03 | Shanghai Yushanzhi Information Technology Company Limited | Display screen of a wearable device with a transitional graphical user interface |
EP3617861A4 (en) * | 2017-06-30 | 2020-05-13 | Huawei Technologies Co., Ltd. | METHOD FOR DISPLAYING A GRAPHIC USER INTERFACE AND ELECTRONIC DEVICE |
US11893228B2 (en) * | 2018-06-03 | 2024-02-06 | Apple Inc. | Devices and methods for interacting with an application switching user interface |
DK180316B1 (en) * | 2018-06-03 | 2020-11-06 | Apple Inc | Devices and methods for interacting with an application switching user interface |
CN110262877B (zh) * | 2019-04-30 | 2022-05-13 | 华为技术有限公司 | 一种卡片处理方法及设备 |
CN112181264A (zh) * | 2019-07-03 | 2021-01-05 | 中兴通讯股份有限公司 | 一种手势识别方法和装置 |
CN118363553A (zh) * | 2019-08-28 | 2024-07-19 | 北京小米移动软件有限公司 | 投屏方法、装置、终端及存储介质 |
US11201962B2 (en) | 2019-10-01 | 2021-12-14 | Microsoft Technology Licensing, Llc | Calling on a multi-display device |
US11416130B2 (en) * | 2019-10-01 | 2022-08-16 | Microsoft Technology Licensing, Llc | Moving applications on multi-screen computing device |
US11561587B2 (en) | 2019-10-01 | 2023-01-24 | Microsoft Technology Licensing, Llc | Camera and flashlight operation in hinged device |
CN113849090B (zh) * | 2020-02-11 | 2022-10-25 | 荣耀终端有限公司 | 卡片显示方法、电子设备及计算机可读存储介质 |
CN111399742B (zh) * | 2020-03-13 | 2024-04-26 | 华为技术有限公司 | 界面切换方法、装置和电子设备 |
CN111580718A (zh) * | 2020-04-30 | 2020-08-25 | 北京字节跳动网络技术有限公司 | 应用程序的页面切换方法、装置、电子设备及存储介质 |
CN113746961A (zh) * | 2020-05-29 | 2021-12-03 | 华为技术有限公司 | 显示控制方法、电子设备和计算机可读存储介质 |
CN114706510A (zh) * | 2020-12-17 | 2022-07-05 | 中国移动通信集团终端有限公司 | 一种应用显示方法、装置、设备及计算机存储介质 |
CN114327179B (zh) * | 2021-11-30 | 2022-12-16 | 荣耀终端有限公司 | 应用启动方法、电子设备及可读存储介质 |
CN116719569B (zh) * | 2022-09-02 | 2024-05-24 | 荣耀终端有限公司 | 启动应用的方法及装置 |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102207825A (zh) * | 2011-05-23 | 2011-10-05 | 昆山富泰科电脑有限公司 | 在便携式多功能设备上进行多应用切换的方法与用户图形界面 |
CN102521034A (zh) * | 2011-12-27 | 2012-06-27 | 惠州Tcl移动通信有限公司 | 一种基于android系统的多任务管理方法及其系统 |
KR20130027017A (ko) * | 2010-04-07 | 2013-03-14 | 애플 인크. | 동시 오픈 소프트웨어 애플리케이션들을 관리하는 제스처 기반 그래픽 사용자 인터페이스 |
JP2013131215A (ja) * | 2011-11-25 | 2013-07-04 | Kyocera Corp | 装置、方法、及びプログラム |
US20130222321A1 (en) * | 2011-06-20 | 2013-08-29 | Alexander Buening | Method And System To Launch And Manage An Application On A Computer System Having A Touch Panel Input Device |
US20140282208A1 (en) * | 2013-03-15 | 2014-09-18 | Apple Inc. | Device, Method, and Graphical User Interface for Managing Concurrently Open Software Applications |
CN105264480A (zh) * | 2013-06-09 | 2016-01-20 | 苹果公司 | 用于在相机界面之间进行切换的设备、方法和图形用户界面 |
CN106445370A (zh) * | 2015-06-07 | 2017-02-22 | 苹果公司 | 用于在用户界面之间导航的设备和方法 |
CN106648434A (zh) * | 2011-12-22 | 2017-05-10 | 优视科技有限公司 | 通过拖拽手势控制应用界面的方法和装置 |
CN106662978A (zh) * | 2014-09-04 | 2017-05-10 | 苹果公司 | 用于改善设备的单手操作的用户界面 |
JP2017102949A (ja) * | 2017-01-20 | 2017-06-08 | ソニー株式会社 | 情報処理装置、情報処理方法、携帯端末、及びプログラム |
CN107229408A (zh) * | 2017-05-24 | 2017-10-03 | 努比亚技术有限公司 | 终端及其输入控制方法、计算机可读存储介质 |
CN107390997A (zh) * | 2017-08-16 | 2017-11-24 | 北京搜狗科技发展有限公司 | 一种应用程序切换方法及装置 |
CN107748647A (zh) * | 2017-09-19 | 2018-03-02 | 刘剑涛 | 一种触控终端操作方法 |
CN107908321A (zh) * | 2017-10-26 | 2018-04-13 | 珠海市魅族科技有限公司 | 终端操作方法及装置、计算机装置及可读存储介质 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8683362B2 (en) | 2008-05-23 | 2014-03-25 | Qualcomm Incorporated | Card metaphor for activities in a computing device |
KR101690786B1 (ko) | 2010-02-12 | 2016-12-28 | 삼성전자주식회사 | 멀티태스킹 수행 장치 및 방법 |
JP2013065291A (ja) * | 2011-08-29 | 2013-04-11 | Kyocera Corp | 装置、方法、及びプログラム |
KR102006470B1 (ko) | 2011-12-28 | 2019-08-02 | 삼성전자 주식회사 | 사용자 디바이스에서 멀티태스킹 운용 방법 및 장치 |
WO2013173838A2 (en) * | 2012-05-18 | 2013-11-21 | Apple Inc. | Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs |
WO2014105279A1 (en) * | 2012-12-29 | 2014-07-03 | Yknots Industries Llc | Device, method, and graphical user interface for switching between user interfaces |
JP6097843B2 (ja) * | 2012-12-29 | 2017-03-15 | アップル インコーポレイテッド | コンテンツをスクロールするか選択するかを判定するためのデバイス、方法、及びグラフィカルユーザインタフェース |
KR102367838B1 (ko) * | 2013-03-15 | 2022-02-24 | 애플 인크. | 동시에 열린 소프트웨어 애플리케이션들을 관리하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스 |
US9477404B2 (en) * | 2013-03-15 | 2016-10-25 | Apple Inc. | Device, method, and graphical user interface for managing concurrently open software applications |
US9898642B2 (en) * | 2013-09-09 | 2018-02-20 | Apple Inc. | Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs |
EP3108342B1 (en) * | 2014-05-30 | 2019-10-23 | Apple Inc. | Transition from use of one device to another |
US9891811B2 (en) | 2015-06-07 | 2018-02-13 | Apple Inc. | Devices and methods for navigating between user interfaces |
DK179412B1 (en) * | 2017-05-12 | 2018-06-06 | Apple Inc | Context-Specific User Interfaces |
US10203866B2 (en) * | 2017-05-16 | 2019-02-12 | Apple Inc. | Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects |
US11036387B2 (en) * | 2017-05-16 | 2021-06-15 | Apple Inc. | Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects |
DK180316B1 (en) | 2018-06-03 | 2020-11-06 | Apple Inc | Devices and methods for interacting with an application switching user interface |
-
2018
- 2018-06-11 DK DKPA201870356A patent/DK180316B1/en not_active IP Right Cessation
- 2018-09-27 US US16/145,085 patent/US10635294B2/en active Active
- 2018-09-29 CN CN201811165503.9A patent/CN110554829A/zh active Pending
-
2019
- 2019-05-03 AU AU2019280205A patent/AU2019280205B2/en active Active
- 2019-05-03 JP JP2020556244A patent/JP7009651B2/ja active Active
- 2019-05-03 KR KR1020207033673A patent/KR102382459B1/ko active IP Right Grant
- 2019-05-03 EP EP19724989.9A patent/EP3803560A1/en active Pending
- 2019-05-03 KR KR1020227023063A patent/KR102520121B1/ko active IP Right Grant
- 2019-05-03 KR KR1020227010627A patent/KR102419067B1/ko active IP Right Grant
- 2019-05-03 WO PCT/US2019/030579 patent/WO2019236225A1/en unknown
-
2020
- 2020-04-27 US US16/859,902 patent/US10976917B2/en active Active
-
2021
- 2021-03-03 US US17/191,594 patent/US11422691B2/en active Active
- 2021-06-21 AU AU2021204178A patent/AU2021204178B2/en active Active
-
2022
- 2022-01-12 JP JP2022003231A patent/JP7383059B2/ja active Active
- 2022-08-29 AU AU2022224714A patent/AU2022224714B2/en active Active
-
2023
- 2023-11-07 JP JP2023190160A patent/JP2024012537A/ja active Pending
-
2024
- 2024-04-24 AU AU2024202667A patent/AU2024202667A1/en active Pending
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20130027017A (ko) * | 2010-04-07 | 2013-03-14 | 애플 인크. | 동시 오픈 소프트웨어 애플리케이션들을 관리하는 제스처 기반 그래픽 사용자 인터페이스 |
CN102207825A (zh) * | 2011-05-23 | 2011-10-05 | 昆山富泰科电脑有限公司 | 在便携式多功能设备上进行多应用切换的方法与用户图形界面 |
US20130222321A1 (en) * | 2011-06-20 | 2013-08-29 | Alexander Buening | Method And System To Launch And Manage An Application On A Computer System Having A Touch Panel Input Device |
JP2013131215A (ja) * | 2011-11-25 | 2013-07-04 | Kyocera Corp | 装置、方法、及びプログラム |
CN106648434A (zh) * | 2011-12-22 | 2017-05-10 | 优视科技有限公司 | 通过拖拽手势控制应用界面的方法和装置 |
CN102521034A (zh) * | 2011-12-27 | 2012-06-27 | 惠州Tcl移动通信有限公司 | 一种基于android系统的多任务管理方法及其系统 |
US20140282208A1 (en) * | 2013-03-15 | 2014-09-18 | Apple Inc. | Device, Method, and Graphical User Interface for Managing Concurrently Open Software Applications |
CN105264480A (zh) * | 2013-06-09 | 2016-01-20 | 苹果公司 | 用于在相机界面之间进行切换的设备、方法和图形用户界面 |
CN106662978A (zh) * | 2014-09-04 | 2017-05-10 | 苹果公司 | 用于改善设备的单手操作的用户界面 |
CN106445370A (zh) * | 2015-06-07 | 2017-02-22 | 苹果公司 | 用于在用户界面之间导航的设备和方法 |
JP2017102949A (ja) * | 2017-01-20 | 2017-06-08 | ソニー株式会社 | 情報処理装置、情報処理方法、携帯端末、及びプログラム |
CN107229408A (zh) * | 2017-05-24 | 2017-10-03 | 努比亚技术有限公司 | 终端及其输入控制方法、计算机可读存储介质 |
CN107390997A (zh) * | 2017-08-16 | 2017-11-24 | 北京搜狗科技发展有限公司 | 一种应用程序切换方法及装置 |
CN107748647A (zh) * | 2017-09-19 | 2018-03-02 | 刘剑涛 | 一种触控终端操作方法 |
CN107908321A (zh) * | 2017-10-26 | 2018-04-13 | 珠海市魅族科技有限公司 | 终端操作方法及装置、计算机装置及可读存储介质 |
Non-Patent Citations (3)
Title |
---|
KUMAR VIMAL 等: ""A memory management scheme for enhancing performance of applications on Android"", 2015 IEEE RECENT ADVANCES IN INTELLIGENT COMPUTATIONAL SYSTEMS (RAICS), 13 June 2016 (2016-06-13) * |
王辉;要晓辉;纪波;阮罕卿;: "基于触摸屏的人机交互技术Move & Touch的研究", 电脑知识与技术, no. 08, 15 March 2011 (2011-03-15) * |
黄文茜;李梅;于佳耕;: "基于用户行为分析的智能终端应用管理优化", 计算机系统应用, no. 10, 15 October 2016 (2016-10-15) * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111263002A (zh) * | 2020-01-19 | 2020-06-09 | 华为技术有限公司 | 一种显示方法和电子设备 |
CN112596883A (zh) * | 2020-12-25 | 2021-04-02 | 深圳市欢太科技有限公司 | 一种应用切换方法、装置、存储介质及电子设备 |
CN112596883B (zh) * | 2020-12-25 | 2023-10-24 | 深圳市欢太科技有限公司 | 一种应用切换方法、装置、存储介质及电子设备 |
CN113434079A (zh) * | 2021-05-28 | 2021-09-24 | 北京信和时代科技有限公司 | 记事类应用的控制方法、装置、设备及计算机存储介质 |
CN114968031A (zh) * | 2022-06-30 | 2022-08-30 | Vidaa国际控股(荷兰)公司 | 一种任务管理方法及显示设备 |
Also Published As
Publication number | Publication date |
---|---|
US20190369830A1 (en) | 2019-12-05 |
KR102382459B1 (ko) | 2022-04-08 |
US20210191588A1 (en) | 2021-06-24 |
AU2022224714B2 (en) | 2024-01-25 |
KR20210002616A (ko) | 2021-01-08 |
US11422691B2 (en) | 2022-08-23 |
JP2021518952A (ja) | 2021-08-05 |
AU2021204178B2 (en) | 2022-08-04 |
JP7383059B2 (ja) | 2023-11-17 |
AU2021204178A1 (en) | 2021-07-15 |
AU2019280205A1 (en) | 2020-10-29 |
JP2022064902A (ja) | 2022-04-26 |
AU2024202667A1 (en) | 2024-05-16 |
DK180316B1 (en) | 2020-11-06 |
KR20220101750A (ko) | 2022-07-19 |
KR20220045074A (ko) | 2022-04-12 |
US10976917B2 (en) | 2021-04-13 |
DK201870356A1 (en) | 2020-01-13 |
EP3803560A1 (en) | 2021-04-14 |
AU2019280205B2 (en) | 2021-07-08 |
AU2022224714A1 (en) | 2022-09-22 |
KR102520121B1 (ko) | 2023-04-10 |
US10635294B2 (en) | 2020-04-28 |
KR102419067B1 (ko) | 2022-07-11 |
WO2019236225A1 (en) | 2019-12-12 |
JP7009651B2 (ja) | 2022-01-25 |
US20200326826A1 (en) | 2020-10-15 |
JP2024012537A (ja) | 2024-01-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7383059B2 (ja) | アプリケーション切り替えユーザインタフェースと対話するためのデバイス及び方法 | |
AU2018253539B2 (en) | Device, method, and graphical user interface for moving and dropping a user interface object | |
CN107257951B (zh) | 用于与控制对象交互同时拖动另一对象的设备、方法和图形用户界面 | |
US20190391658A1 (en) | Device, Method, and Graphical User Interface for Forgoing Generation of Tactile Output for a Multi-Contact Gesture | |
US11966578B2 (en) | Devices and methods for integrating video with user interface navigation | |
US11893228B2 (en) | Devices and methods for interacting with an application switching user interface |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |