CN113157108A - 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 - Google Patents
用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 Download PDFInfo
- Publication number
- CN113157108A CN113157108A CN202110181406.4A CN202110181406A CN113157108A CN 113157108 A CN113157108 A CN 113157108A CN 202110181406 A CN202110181406 A CN 202110181406A CN 113157108 A CN113157108 A CN 113157108A
- Authority
- CN
- China
- Prior art keywords
- display
- touch
- user interface
- user
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 435
- 230000004044 response Effects 0.000 claims abstract description 474
- 230000006870 function Effects 0.000 claims description 592
- 230000015654 memory Effects 0.000 claims description 130
- 230000033001 locomotion Effects 0.000 claims description 68
- 230000009471 action Effects 0.000 claims description 28
- 230000000875 corresponding effect Effects 0.000 description 380
- 230000002093 peripheral effect Effects 0.000 description 206
- 238000012545 processing Methods 0.000 description 133
- 230000007246 mechanism Effects 0.000 description 103
- 238000001514 detection method Methods 0.000 description 74
- 238000010586 diagram Methods 0.000 description 67
- 230000000007 visual effect Effects 0.000 description 67
- 238000004891 communication Methods 0.000 description 63
- 230000001276 controlling effect Effects 0.000 description 56
- 230000003993 interaction Effects 0.000 description 45
- 230000002085 persistent effect Effects 0.000 description 44
- 210000003811 finger Anatomy 0.000 description 39
- 230000008859 change Effects 0.000 description 31
- 230000008569 process Effects 0.000 description 27
- 230000000694 effects Effects 0.000 description 21
- 230000004048 modification Effects 0.000 description 20
- 238000012986 modification Methods 0.000 description 20
- 238000007726 management method Methods 0.000 description 19
- 238000005516 engineering process Methods 0.000 description 18
- 238000009877 rendering Methods 0.000 description 15
- 230000003287 optical effect Effects 0.000 description 14
- 230000007423 decrease Effects 0.000 description 13
- 238000000926 separation method Methods 0.000 description 13
- 239000002699 waste material Substances 0.000 description 10
- 210000003128 head Anatomy 0.000 description 8
- 230000000977 initiatory effect Effects 0.000 description 8
- 238000005259 measurement Methods 0.000 description 8
- 241000593989 Scardinius erythrophthalmus Species 0.000 description 7
- 238000009499 grossing Methods 0.000 description 7
- 230000001965 increasing effect Effects 0.000 description 7
- 238000013507 mapping Methods 0.000 description 7
- 201000005111 ocular hyperemia Diseases 0.000 description 7
- 238000010079 rubber tapping Methods 0.000 description 7
- 230000003213 activating effect Effects 0.000 description 6
- 230000004913 activation Effects 0.000 description 6
- 230000001960 triggered effect Effects 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 5
- 238000006073 displacement reaction Methods 0.000 description 5
- 230000002708 enhancing effect Effects 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 239000000203 mixture Substances 0.000 description 5
- 230000002265 prevention Effects 0.000 description 5
- 230000035945 sensitivity Effects 0.000 description 5
- 230000007704 transition Effects 0.000 description 5
- 241001422033 Thestylus Species 0.000 description 4
- 230000010365 information processing Effects 0.000 description 4
- 239000003550 marker Substances 0.000 description 4
- 238000005065 mining Methods 0.000 description 4
- 230000021317 sensory perception Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 210000004247 hand Anatomy 0.000 description 3
- 238000003672 processing method Methods 0.000 description 3
- 230000002207 retinal effect Effects 0.000 description 3
- 210000003813 thumb Anatomy 0.000 description 3
- 230000001755 vocal effect Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 235000021152 breakfast Nutrition 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 238000005562 fading Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 229920000642 polymer Polymers 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000002441 reversible effect Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 238000010897 surface acoustic wave method Methods 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 241000238558 Eucarida Species 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 229910052799 carbon Inorganic materials 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000001351 cycling effect Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007921 spray Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
- G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
- G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
- G06F3/0233—Character input methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
- G06F1/1647—Details related to the display arrangement, including those related to the mounting of the display in the housing including at least an additional display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0412—Digitisers structurally integrated in a display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04805—Virtual magnifying lens, i.e. window or frame movable on top of displayed information to enlarge it for better reading or selection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Mathematical Physics (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
- Input From Keyboards Or The Like (AREA)
- Digital Computer Display Output (AREA)
Abstract
本公开的实施例涉及一种用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法。示例性方法包括接收打开应用程序的请求,并且作为响应:(i)在主显示器上显示与应用程序相关联的多个用户界面(UI)对象,多个UI对象包括与相关联的内容一起显示的第一UI对象和不与相关联的内容一起显示的其他UI对象;并且(ii)在触敏副显示器上显示代表多个UI对象的一组示能表示。所述方法还包括:通过触敏副显示器检测在从第一示能表示到第二示能表示的方向上的轻扫手势,第一示能表示代表第一UI对象并且第二示能表示代表不同的第二UI对象。响应于检测到轻扫手势,所述方法包括:更新主显示器以显示第二UI对象的相关联内容。
Description
本申请是申请日为2017年07月28日、国家申请号为 201710632979.8、发明名称为“用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法”的中国发明专利申请的分案申请。
技术领域
所公开的实施方案涉及键盘,更具体地,涉及用于经由动态输入和输出(I/O)设备接收输入的改进技术。
背景技术
常规键盘包括用于将信息(例如,字符)输入到计算设备中的任何数量的物理键。通常,用户按压键或以其他方式可移动地致动键,以提供对应于该键的输入。除了提供字符输入之外,键盘可包括与功能输入相关的可移动地致动的键。例如,键盘可包括“撤出”或“esc”键,以允许用户激活撤出或退出功能。在许多键盘中,用于功能输入的一组功能键位于“功能行”中。通常,用于字母数字字符的一组键位于最靠近用户的键盘部分中,并且功能行位于远离用户但与字母数字字符相邻的键盘部分中。键盘还可包括并非上述功能行的部分的功能键。
随着便携式计算设备诸如膝上型计算机的出现和普及,专用键盘所占的面积可能受显示器的对应尺寸的限制。与用于台式计算机的外围键盘相比,作为便携式计算设备的部件的专用键盘可具有更少的键、更小的键或更紧靠在一起的键,以允许便携式计算设备具有较小的整体尺寸。
常规的专用键盘在时间上是静态且固定的,不论显示器上如何变化。此外,显示在屏幕上的软件应用的功能通常通过用户使用鼠标与之交互的工具栏和菜单来访问。这要求用户定期切换模式,并在键盘和鼠标之间移动他/她的手的位置。或者,通过需要记忆和练习的复杂的键组合来访问应用程序的功能。因此,期望提供能够解决常规系统的缺点的I/O设备(以及用于I/O设备的方法)。
发明内容
本文所述的实施方案通过提供动态和空间高效的I/O设备和方法解决了上述缺点。此类设备和方法任选地补充或替代了常规的输入设备和方法。此类设备和方法还减少了用户所需的模式切换量(例如,在键盘和鼠标之间移动双手,并且还将眼睛从键盘移动到显示器),从而减少了激活期望的功能所需的输入数量(例如,减少了选择菜单选项所需的输入数量,如下面更详细地解释)。此类设备和方法还在有限的屏幕上提供了更多的信息(例如,使用触敏副显示器向用户提供更多的信息,并且使用有限的屏幕空间有效地呈现该信息)。此类设备和方法还提供了改进的人机界面,例如通过提供强调效果来使触敏副显示器104上的信息更加可辨,通过提供持续的交互使得指向触敏副显示器或主显示器的来自用户的连续输入引起设备提供随后用于促进来自用户的进一步输入的输出(例如,提供颜色选择器,允许用户快速预览如何在主显示器上呈现信息,通过在触敏副显示器上提供输入,如下所述),以及通过需要较少来自用户的交互来实现期望的结果(例如,允许用户使用单个生物特征输入登录到其设备,如下所述)。由于这些原因以及如下所述的原因,本文所述的设备和方法减少了电力使用并且延长了电子设备的电池寿命。
(A1)根据一些实施方案,在计算系统(例如,计算系统100或系统 200,图1A至图2D)中执行方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104,也称为“触摸屏显示器”)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器被包括为外围输入机构222 (即,独立的显示器)的一部分,或者触敏显示器与另一个设备(诸如,图2C中的触控板108)集成)。该方法包括:在主显示器上显示第一用户界面,该第一用户界面包括一个或多个用户界面元素;识别该一个或多个用户界面元素中在主显示器上聚焦的活动用户界面元素;确定在主显示器上聚焦的该活动用户界面元素是否与由计算系统执行的应用程序相关联;以及根据确定在主显示器上聚焦的该活动用户界面元素与由计算系统执行的应用程序相关联,在触摸屏显示器上显示第二用户界面,包括:(A)对应于应用程序的第一组一个或多个示能表示;以及(B)对应于至少一个系统级功能的至少一个系统级示能表示。
响应于在主显示器上发生的聚焦变化而在触敏副显示器中显示应用程序专用和系统级示能表示为用户提供了可通过触敏副显示器直接获得的可访问示能表示。为用户提供可通过触敏副显示器直接访问的可访问示能表示增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来访问所需功能,只需较少交互而不必浪费时间通过分级菜单进行挖掘以定位所需功能),另外还通过使用户能够更快速更有效地访问所需功能,减少了电力使用并延长了设备的电池寿命。同样,在触敏副显示器上显示应用程序专用示能表示通过提供与当前在主显示器上聚焦的应用程序相关联的示能表示来指示设备的内部状态。
(A2)在A1的方法的一些实施方案中,计算系统还包括:(i)包括主显示器、处理器、存储器和主计算设备通信电路的主计算设备;以及(ii)包括外壳、触摸屏显示器、物理输入机构和用于与主计算设备通信电路通信的输入设备通信电路的输入设备,其中输入设备与主计算设备不同且分开。
(A3)在A1-A2中任一项的方法的一些实施方案中,物理输入机构包括多个物理键。
(A4)在A1-A3中任一项的方法的一些实施方案中,物理输入机构包括触控板。
(A5)在A1-A4中任一项的方法的一些实施方案中,应用程序由处理器在第一用户界面的前台执行。
(A6)在A1-A5中任一项的方法的一些实施方案中,至少一个系统级示能表示被配置为在选择后引起对应于系统级功能的多个系统级示能表示在触摸屏显示器上显示。
(A7)在A1-A3中任一项的方法的一些实施方案中,至少一个系统级示能表示对应于功率控制或撤出控制中的一者。
(A8)在A1-A7中任一项的方法的一些实施方案中,在第二用户界面上显示的至少一个示能表示是多功能示能表示。
(A9)在A8的方法的一些实施方案中,该方法还包括:检测选择多功能示能表示的用户触摸输入;根据确定该用户触摸输入对应于第一类型,执行与多功能示能表示相关联的第一功能;以及根据确定该用户触摸输入对应于不同于第一类型的第二类型,执行与多功能示能表示相关联的第二功能。
(A10)在A1-A9中任一项的方法的一些实施方案中,该方法还包括:根据确定活动用户界面元素不与由计算系统执行的应用程序相关联,在触摸屏显示器上显示第三用户界面,包括:(C)对应于计算系统的操作系统控件的第二组一个或多个示能表示,其中第二组一个或多个示能表示不同于第一组一个或多个示能表示。
(A11)在A10的方法的一些实施方案中,第二组一个或多个示能表示是包括(B)(即对应于至少一个系统级功能的至少一个系统级示能表示)的扩展组操作系统控件。
(A12)在A1-A11中任一项的方法的一些实施方案中,该方法还包括:检测选择第一组示能表示中的一者的用户触摸输入;以及响应于检测到该用户触摸输入,显示对应于应用程序的功能的不同组示能表示,并且保持至少一个系统级示能表示的显示。
(A13)在A12的方法的一些实施方案中,该方法还包括:检测选择至少一个系统级示能表示的随后用户触摸输入;以及响应于检测到该随后用户触摸输入,显示对应于系统级功能的多个系统级示能表示和对应于应用程序的至少一个应用程序级示能表示。
(A14)在A1-A13中任一项的方法的一些实施方案中,该方法还包括:在触摸屏显示器上显示第二用户界面之后,识别一个或多个用户界面元素中在主显示器上聚焦的第二活动用户界面元素;确定该第二活动用户界面元素是否对应于由计算设备执行的不同应用程序;以及根据确定该第二活动用户界面元素对应于不同应用程序,在触摸屏显示器上显示第四用户界面,包括:(D)对应于不同应用程序的第三组一个或多个示能表示;以及(E)对应于至少一个系统级功能的至少一个系统级示能表示。
(A15)在A1-A14中任一项的方法的一些实施方案中,该方法还包括:在识别第二活动用户界面元素之后,确定计算系统是否正在播放媒体项,其中媒体项不与不同应用程序相关联;以及根据确定计算系统正在播放媒体项,在触摸屏显示器上显示用于控制该媒体项的至少一个持续示能表示。
(A16)在A15的方法的一些实施方案中,至少一个持续示能表示显示对应于媒体项的反馈。
(A17)在A1-A16中任一项的方法的一些实施方案中,该方法还包括:检测对应于与复写键的用户输入;以及响应于检测到该用户输入:停止在触摸屏显示器上至少显示第二用户界面的第一组一个或多个示能表示;并且显示第一组默认功能键。
(A18)在A17的方法的一些实施方案中,该方法还包括:在显示第一组默认功能键之后,在基本上平行于触摸屏显示器的主轴的方向上检测触摸屏显示器上的轻扫手势;以及响应于检测到该轻扫手势,显示具有至少一个不同功能键的第二组默认功能键。
(A19)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行A1-A18中的任一方法的指令。
(A20)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行A1-A18中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(A21)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求A1-A18 中的任一方法显示的用户界面。
(A22)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求A1-A18中的任一方法的装置。
(B1)根据一些实施方案,提供了一种输入设备。该输入设备包括:至少部分地包围多个部件的外壳,该多个部件包括:(i)多个物理键(例如,在图1A的键盘106上),其中多个物理键至少包括字母表的每个字母的单独键;(ii)邻近多个物理键设置的触敏副显示器(也称为“触摸屏显示器”);以及(iii)被配置为与邻近输入设备设置的计算设备(例如,计算系统100或200) 进行通信的短程通信电路,其中计算设备包括计算设备显示器、处理器和存储器,并且短程通信电路被配置为:将多个物理键中任一个的键按压和触摸屏显示器上的触摸输入传送到计算设备;并且基于计算设备显示器的当前聚焦,接收用于在触摸屏显示器上改变示能表示的显示的指令。在一些实施方案中,当应用程序在计算设备显示器上聚焦时,触摸屏显示器被配置为显示以下内容:(A)对应于聚焦的应用程序的一个或多个示能表示;以及(B)至少一个系统级示能表示,其中该至少一个系统级示能表示被配置为在选择后引起对应于系统级功能的多个示能表示的显示。
响应于在主显示器上发生的聚焦变化而在触敏副显示器中显示应用程序专用和系统级示能表示为用户提供了可通过触敏副显示器直接获得的可访问示能表示。为用户提供可通过触敏副显示器直接访问的可访问示能表示增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来访问所需功能,只需较少交互而不必浪费时间通过分级菜单进行挖掘以定位所需功能),另外还通过使用户能够更快速更有效地访问所需功能,减少了电力使用并延长了设备的电池寿命。此外,通过基于在主显示器上聚焦的变化来动态地更新在触敏副显示器中显示的示能表示,触敏副显示器能够在有限的屏幕上提供更多的信息,并且有助于确保在用户需要所需选项时为用户提供所需选项(从而减少电力使用并延长电池寿命,因为用户不需要浪费电力和电池寿命来通过分级菜单进行搜索,以定位这些所需选项)。
(B2)在B1的输入设备的一些实施方案中,当应用程序在计算设备显示器上聚焦时,触摸屏显示器被进一步配置为至少显示功率控制示能表示和撤出示能表示中的一者。
(B3)在B1-B2中任一项的输入设备的一些实施方案中,输入设备是键盘。
(B4)在B3的输入设备的一些实施方案中,计算设备是包括键盘的膝上型计算机。
(B5)在B3的输入设备的一些实施方案中,计算设备是台式计算机,并且键盘不同于台式计算机。
(B6)在B1-B5中任一项的输入设备的一些实施方案中,输入设备集成在膝上型计算机中。
(B7)在B1-B6中任一项的输入设备的一些实施方案中,多个物理键包括QWERTY键盘。
(B8)在B1-B7中任一项的输入设备的一些实施方案中,字母表对应于拉丁字母表。
(B9)在B1-B8中任一项的输入设备的一些实施方案中,输入设备包括触控板。
(B10)在B1-B9中任一项的输入设备的一些实施方案中,输入设备具有至少18英寸长的主要尺寸。
(B11)在B1-B10中任一项的输入设备的一些实施方案中,短程通信电路被配置为与计算设备的通信距离小于15英尺。
(B12)在B1-B11中任一项的输入设备的一些实施方案中,短程通信电路对应于到计算设备的有线或无线连接。
(B13)在B1-B12中任一项的输入设备的一些实施方案中,输入设备包括嵌入触摸屏显示器中的指纹传感器。
(C1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104,也称为“触摸屏显示器”)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备(诸如,图2C中的触控板108)集成。该方法包括:在主显示器上显示由计算系统执行的应用程序的第一用户界面;在触摸屏显示器上显示第二用户界面,该第二用户界面包括对应于应用程序的第一组一个或多个示能表示,其中该第一组一个或多个示能表示对应于应用程序的第一部分;检测触摸屏显示器上的轻扫手势;根据确定在第一方向上执行轻扫手势,在触摸屏显示器上显示对应于应用程序的第二组一个或多个示能表示,其中第二组一个或多个示能表示中的至少一个示能表示不同于第一组一个或多个示能表示,并且其中第二组一个或多个示能表示也对应于应用程序的第一部分;以及根据确定在基本上垂直于第一方向的第二方向上执行轻扫手势,在触摸屏显示器上显示对应于应用程序的第三组一个或多个示能表示,其中第三组一个或多个示能表示不同于第二组一个或多个示能表示,并且其中第三组一个或多个示能表示对应于应用程序的第二部分,该第二部分不同于应用程序的第一部分。
允许用户响应于轻扫手势而在触敏副显示器中的应用程序专用示能表示中进行快速导航,为用户提供了一种便捷的方式来滚动通过并经由触敏副显示器快速定位所需功能。为用户提供便捷的方式来滚动通过并经由触敏副显示器快速定位所需功能增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来访问所需功能,只需较少交互而不必浪费时间通过分级菜单进行挖掘以定位所需功能),另外还通过使用户能够更快速更有效地访问所需功能,减少了电力使用并延长了设备的电池寿命。此外,通过响应于副显示器上轻扫手势而动态地更新在触敏副显示器中显示的示能表示,副显示器能够在有限的屏幕上提供更多的信息,并且有助于确保在用户需要所需选项时为用户提供所需选项(从而减少电力使用并延长电池寿命,因为用户不需要浪费电力和电池寿命来通过分级菜单进行搜索,以定位这些所需选项)。
(C2)在C1的方法的一些实施方案中,在检测到轻扫手势之前,第二部分以第一用户界面内的紧凑视图显示在主显示器上,并且该方法包括:根据确定在基本上垂直于第一方向的第二方向上执行轻扫手势,以第一用户界面内的扩展视图在主显示器上显示第二部分。
(C3)在C1的方法的一些实施方案中,由计算系统执行的应用程序的第一用户界面以全屏模式在主显示器上显示,并且在触摸屏显示器上显示的第一组一个或多个示能表示包括对应于全屏模式的控件。
(C4)在C1-C3中任一项的方法的一些实施方案中,第二组一个或多个示能表示和第三组一个或多个示能表示包括对应于至少一个系统级功能的至少一个系统级示能表示。
(C5)在C1-C4中任一项的方法的一些实施方案中,该方法包括:在触摸屏显示器上显示第三组一个或多个示能表示之后:检测选择第一用户界面上的第一部分的用户输入;以及响应于检测到该用户输入:停止在触摸屏显示器上显示第三组一个或多个示能表示,其中第三组一个或多个示能表示对应于应用程序的第二部分;并且显示第二组一个或多个示能表示,其中第二组一个或多个示能表示对应于应用程序的第一部分。
(C6)在C1-C5中任一项的方法的一些实施方案中,第一方向基本上平行于触摸屏显示器的主要尺寸。
(C7)在C1-C5中任一项的方法的一些实施方案中,第一方向基本上垂直于触摸屏显示器的主要尺寸。
(C8)在C1-C7中任一项的方法的一些实施方案中,第一部分是应用程序的菜单、标签、文件夹、工具集或工具栏中的一者,并且第二部分是应用程序的菜单、标签、文件夹、工具集或工具栏中的一者。
(C9)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行C1-C8中的任一方法的指令。
(C10)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行C1-C8中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(C11)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求C1-C8 中的任一方法显示的用户界面。
(C12)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求C1-C8中的任一方法的装置。
(D1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行在全屏模式下保持应用程序的功能的方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘 (例如,图1A中的键盘106)和触敏副显示器(例如,图1A 中的动态功能行104,也称为“触摸屏显示器”)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备(诸如,图2C中的触控板108)集成。该方法包括:以正常模式在主显示器上显示由计算系统执行的应用程序的第一用户界面,该第一用户界面包括与应用程序相关联的第一组一个或多个示能表示;检测用于在主显示器上以全屏模式显示应用程序的第一用户界面的至少一部分的用户输入;以及响应于检测到该用户输入:停止在主显示器上显示与第一用户界面中的应用程序相关联的第一组一个或多个示能表示;以全屏模式在主显示器上显示应用程序的第一用户界面的部分;并且在没有人为干预的情况下在触摸屏显示器上自动地显示用于控制应用程序的第二组一个或多个示能表示,其中第二组一个或多个示能表示对应于第一组一个或多个示能表示。
经由触敏副显示器提供用于控制应用程序的示能表示,同时在主显示器上以全屏模式显示应用程序的一部分,允许用户继续访问可能不再在主显示器上直接显示的功能。允许用户继续访问可能不再在主显示器上直接显示的功能,为用户提供了一种快捷的方式来访问可能已被掩埋在主显示器上的功能,从而增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来访问所需功能,只需较少交互而不必浪费时间通过分级菜单进行挖掘以定位所需功能),另外还通过使用户能够更快速更有效地访问所需功能,减少了电力使用并延长了设备的电池寿命。因此,通过将菜单选项从主显示器转换到触敏副显示器,以确保可以全屏模式呈现(在无障碍的情况下)内容,用户能够维持与设备的交互,并且当转换到全屏模式时其工作流程不会中断。另外,要在查看全屏内容时访问菜单选项,需要较少的交互,因为可能已被掩埋在主显示器上的内容后面的菜单选项呈现在触敏副显示器上,以便于快速访问(不必退出全屏模式,然后四处挖掘寻找菜单选项),从而减少电力使用并延长设备的电池寿命。
(D2)在D1的方法的一些实施方案中,第二组一个或多个示能表示是第一组一个或多个示能表示。
(D3)在D1-D2中任一项的方法的一些实施方案中,第二组一个或多个示能表示包括对应于全屏模式的控件。
(D4)在D1-D3中任一项的方法的一些实施方案中,该方法包括:检测选择在触摸屏显示器上显示的第二组示能表示中的一者的用户触摸输入;以及响应于检测到该用户触摸输入,根据所选择的第二组示能表示中的一者,改变在主显示器上以全屏模式显示的应用程序的第一用户界面的部分。
(D5)在D1-D4中任一项的方法的一些实施方案中,该方法包括:在主显示器上以全屏模式显示应用程序的第一用户界面的部分之后:检测用于退出全屏模式的随后用户输入;以及响应于检测到该随后用户输入:以正常模式在主显示器上显示由计算系统执行的应用程序的第一用户界面,第一用户界面包括与应用程序相关联的第一组一个或多个示能表示;并且保持在触摸屏显示器上显示用于控制应用程序的第二组一个或多个示能表示的至少一个子集,其中第二组一个或多个示能表示对应于第一组一个或多个示能表示。
(D6)在D1-D5中任一项的方法的一些实施方案中,用于在主显示器上以全屏模式显示应用程序的第一用户界面的至少一部分的用户输入是在触摸屏显示器上检测到的触摸输入和在主显示器上的第一用户界面内选择的控件中的至少一者。
(D7)在D1-D6中任一项的方法的一些实施方案中,第二组一个或多个示能表示包括对应于至少一个系统级功能的至少一个系统级示能表示。
(D8)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行D1-D7中的任一方法的指令。
(D9)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行D1-D7中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(D10)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求D1-D7 中的任一方法显示的用户界面。
(D11)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求D1-D7中的任一方法的装置。
(E1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104,也称为“触摸屏显示器”)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备(诸如,图2C中的触控板108)集成。该方法包括:在主显示器上显示由计算系统执行的应用程序的第一用户界面;在触摸屏显示器上显示第二用户界面,第二用户界面包括对应于应用程序的一组一个或多个示能表示;检测通知;以及响应于检测到该通知,在第二用户界面中同时在触摸屏显示器上显示对应于应用程序的该组一个或多个示能表示和所检测到的通知的至少一部分,其中所检测到的通知不在主显示器上显示。
在触敏副显示器上显示所接收的通知允许用户以不中断的方式在主显示器上继续工作,并允许用户经由触敏副显示器与所接收的通知进行交互。允许用户以不中断的方式在主显示器上继续工作并允许用户经由触敏副显示器与所接收的通知进行交互,为用户提供了一种快捷的方式来查看所接收的通知并与之进行交互,从而增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来方便地访问所接收的通知,而不必中断其工作流程来处理所接收的通知)。此外,在触敏副显示器上显示所接收的通知为触敏副显示器上接收的通知提供了强调效果(因为在一些实施方案中,所接收的通知被显示为在触敏副显示器中覆盖其他示能表示),从而确保了所接收的通知是可见的并且易于在触敏副显示器上访问。
(E2)在E1的方法的一些实施方案中,该方法包括:在检测到通知之前,检测选择通知设置的用户输入,以便在触摸屏显示器上显示通知且不在主显示器上显示通知。
(E3)在E1-E2中任一项的方法的一些实施方案中,该方法包括:检测触摸屏显示器上对应于所检测到的通知的部分的用户触摸输入;根据确定该用户触摸输入对应于第一类型,停止在第二用户界面中在触摸屏显示器上显示所检测到的通知的部分;以及根据确定用户触摸输入对应于不同于第一类型的第二类型,执行与所检测到的通知相关联的动作。
(E4)在E1-E3中任一项的方法的一些实施方案中,在触摸屏显示器上显示的通知的部分提示计算系统的用户选择多个选项中的一者用于响应所检测到的通知。
(E5)在E1-E4中任一项的方法的一些实施方案中,在触摸屏显示器上显示的通知的部分包括对所检测到的通知的一个或多个建议响应。
(E6)在E1-E5中任一项的方法的一些实施方案中,通知对应于传入的即时消息、SMS、电子邮件、语音呼叫或视频呼叫中的至少一者。
(E6)在E1-E5中任一项的方法的一些实施方案中,通知对应于由计算系统的处理器执行的应用程序响应于关闭应用程序或执行应用程序内的动作的用户输入而发出的模态警报。
(E7)在E1-E7中任一项的方法的一些实施方案中,该组一个或多个示能表示包括对应于至少一个系统级功能的至少一个系统级示能表示,并且通知对应于选择输入机构的一个或多个部分或者系统级示能表示中的至少一者的用户输入。
(E8)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行E1-E7中的任一方法的指令。
(E9)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行E1-E7中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(E10)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求E1-E7 中的任一方法显示的用户界面。
(E11)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求E1-E7中的任一方法的装置。
(F1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行移动用户界面部分的方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备(诸如,图2C中的触控板108)集成。该方法包括:在主显示器上显示用户界面,该用户界面包括一个或多个用户界面元素;识别该一个或多个用户界面元素中在主显示器上聚焦的活动用户界面元素,其中该活动用户界面元素与由计算系统执行的应用程序相关联;响应于识别该活动用户界面元素,在触摸屏显示器上显示对应于应用程序的一组一个或多个示能表示;检测移动用户界面的相应部分的用户输入;以及响应于检测到该用户输入,并且根据确定用户输入满足预定义的动作标准:停止在主显示器上显示用户界面的相应部分;停止在触摸屏显示器上显示该组一个或多个示能表示的至少一个子集;并且在触摸屏显示器上显示用户界面的相应部分的表示。
允许用户将用户界面部分(例如,菜单、通知等)从主显示器快速移动到触敏副显示器为用户提供了一种方便和定制的方式来访问用户界面部分。为用户提供方便和定制的方式来经由触敏副显示器访问用户界面部分增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来访问用户界面部分,只需较少交互而不必浪费时间寻找之前查看的(可能被掩埋的)用户界面部分),另外还通过使用户能够更快速有效地访问所需用户界面部分,减少了电力使用并延长了设备的电池寿命。此外,响应于用户输入而在触敏副显示器上显示用户界面部分在触敏副显示器处为用户界面部分提供了强调效果(因为在一些实施方案中,相应用户界面部分被显示为在触敏副显示器中覆盖其他示能表示),从而确保了相应用户界面部分是可见的并且易于在触敏副显示器上访问。
(F2)在F1的方法的一些实施方案中,用户界面的相应部分是对应于由计算系统执行的应用程序的菜单。
(F3)在F1-F2中任一项的方法的一些实施方案中,用户界面的相应部分是通知和模态警报中的一者。
(F4)在F1-F3中任一项的方法的一些实施方案中,当用户输入是将用户界面的相应部分拖动到主显示器的预定义位置的拖动手势时,满足预定义的动作标准。
(F5)在F1-F3中任一项的方法的一些实施方案中,当用户输入是对应于将用户界面的相应部分移动到触摸屏显示器的预定义输入时,满足预定义的动作标准。
(F6)在F1-F5中任一项的方法的一些实施方案中,该方法包括:响应于检测到用户输入,并且根据确定该用户输入不满足预定义的动作标准:保持在主显示器上显示用户界面的相应部分;并且保持在触摸屏显示器上显示该组一个或多个示能表示。
(F7)在F1-F6中任一项的方法的一些实施方案中,该组一个或多个示能表示包括对应于至少一个系统级功能的至少一个系统级示能表示,方法包括:在触摸屏显示器上显示用户界面的相应部分的表示之后,保持在触摸屏显示器上显示至少一个系统级示能表示。
(F8)在F1-F7中任一项的方法的一些实施方案中,用户界面的相应部分的表示覆盖在触摸屏显示器上的该组一个或多个示能表示上。
(F9)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行F1-F8中的任一方法的指令。
(F10)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行F1-F8中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(F11)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求F1-F8 中的任一方法显示的用户界面。
(F12)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求F1-F8中的任一方法的装置。
(G1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备 (诸如,图2C中的触控板108)集成。该方法包括:接收打开应用程序的请求。响应于接收到该请求,该方法包括:(i)在主显示器上显示与在计算系统上执行的应用程序相关联的多个用户界面对象(例如,多个用户界面对象对应于Safari中的标签、照片浏览应用程序中的各个照片、视频编辑应用程序中的各个视频帧等),该多个用户界面对象包括与其相关联的内容一起显示的第一用户界面对象和不与其相关联的内容一起显示的其他用户界面对象;以及(ii)在触敏副显示器上显示各自表示 (即,对应于)该多个用户界面对象中的一者的一组示能表示。该方法还包括:通过触敏副显示器检测在从该组示能表示的第一示能表示到该组示能表示的第二示能表示的方向上的轻扫手势。在一些实施方案中,第一示能表示代表第一用户界面对象,并且第二示能表示代表不同于第一用户界面对象的第二用户界面对象。响应于检测到轻扫手势,该方法包括:更新主显示器(例如,在轻扫手势期间)以停止显示第一用户界面对象的相关联内容,并显示第二用户界面对象的相关联内容。
允许用户通过在触敏副显示器处提供输入来在主显示器上的用户界面对象(例如,浏览器标签)中进行快速导航,为用户提供了一种便捷的方式来在用户界面对象中进行快速导航。为用户提供便捷的方式来通过触敏副显示器在用户界面对象中进行快速导航(并减少在用户界面对象中进行导航所需的输入数量,从而需要较少交互来在用户界面对象中进行导航) 增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来在主显示器上的用户界面对象中进行导航),另外还通过使用户能够在主显示器上的用户界面对象中进行更快速有效的导航,减少了电力使用并延长了设备的电池寿命。此外,当用户在触敏显示器上提供输入(例如,轻扫手势)以在主显示器上的用户界面对象中进行导航时,触敏显示器上的每个被接触的示能表示(对应于用户界面对象中的一者)在视觉上可区别于其他示能表示(例如,相应的被接触的示能表示被放大并且边框可被突出显示),从而使得在触敏副显示器上显示的信息对于用户更加可辨。
(G2)在G1的方法的一些实施方案中,该方法包括:检测轻扫手势跨触敏副显示器的连续行进,包括轻扫手势接触代表第三用户界面对象的第三示能表示。响应于检测到轻扫手势接触第三示能表示,该方法包括:更新主显示器以显示第三用户界面对象的相关联内容。
(G3)在G1-G2中任一项的方法的一些实施方案中,该组示能表示中的每个示能表示包括多个用户界面对象中相应用户界面对象的相应相关联内容的表示。
(G4)在G1-G3中任一项的方法的一些实施方案中,该方法包括:在检测到轻扫手势之前,检测第一示能表示上方与触敏副显示器的初始接触。响应于检测到初始接触,该方法包括:增加第一示能表示的放大水平(或显示尺寸)。
(G5)在G1-G4中任一项的方法的一些实施方案中,应用程序是网页浏览应用程序,并且多个用户界面对象各自对应于网页浏览标签。
(G6)在G6的方法的一些实施方案中,该方法包括:检测主显示器上的网页浏览应用程序的URL输入部分处的输入。响应于检测到输入,该方法包括:更新触敏副显示器以包括喜爱的URL的表示。
(G7)在G1-G4中任一项的方法的一些实施方案中,应用程序是照片浏览应用程序,并且多个用户界面对象各自对应于各个照片。
(G8)在G1-G4中任一项的方法的一些实施方案中,应用程序是视频编辑应用程序,并且多个用户界面对象各自对应于相应视频中的各个帧。
(G9)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行G1-G8中的任一方法的指令。
(G10)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行G1-G8中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(G11)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求G1-G8 中的任一方法显示的用户界面。
(G12)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求G1-G8中的任一方法的装置。
(H1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备 (诸如,图2C中的触控板108)集成。该方法包括:接收在计算设备的主显示器上显示的内容内搜索的请求(例如,该请求对应于在显示的网页内容内搜索文本的请求)。响应于接收到该请求,该方法包括:(i)在主显示器上显示响应于搜索的多个搜索结果,并且焦点在多个搜索结果的第一搜索结果上;(ii)在触敏副显示器上显示各自对应于多个搜索结果的相应搜索结果的相应表示。该方法还包括:通过触敏副显示器检测选择相应表示中的表示的触摸输入(例如,轻击或轻扫),该表示对应于多个搜索结果中不同于第一搜索结果的第二搜索结果。响应于检测到输入,该方法包括将主显示器上的焦点改变为第二搜索结果。
允许用户通过在触敏副显示器处提供输入来在主显示器上的搜索结果中进行快速导航,为用户提供了一种便捷的方式来在搜索结果中进行快速导航。为用户提供便捷的方式来通过触敏副显示器在搜索结果中进行快速导航(并减少在搜索结果中进行导航所需的输入数量,从而需要较少的用户交互来快速浏览多个搜索结果)增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来在主显示器上的多个搜索结果中进行导航),另外还通过使用户能够在主显示器上的搜索结果中进行更快速有效的导航,减少了电力使用并延长了设备的电池寿命。此外,当用户在触敏显示器上提供输入(例如,轻扫手势)以在主显示器上的搜索中进行导航时,触敏显示器上的每个被接触的示能表示(对应于搜索结果中的一者)在视觉上可区别于其他示能表示 (例如,相应的被接触的示能表示被放大并且边框可被突出显示),从而使得在触敏副显示器上显示的信息对于用户更加可辨。
(H2)在H1的方法的一些实施方案中,改变焦点包括在主显示器上修改特定搜索结果的视觉特征(例如,以更大的字体大小显示特定搜索结果)。
(H3)在H1-H2中任一项的方法的一些实施方案中,该方法包括:检测在触敏副显示器上跨相应表示中的至少两者移动的手势。响应于检测到该手势,该方法包括:当该轻扫手势跨相应表示中的至少两者移动时,将主显示器上的焦点改变为对应于相应表示中的至少两者的相应搜索结果。
(H4)在H3的方法的一些实施方案中,该方法包括:根据确定手势的速度高于阈值速度,将主显示器上的焦点改变为除了对应于相应表示中的至少两者的相应搜索结果之外的相应搜索结果 (例如,如果高于阈值速度,在除了在轻扫期间接触的那些搜索结果之外的更多搜索结果中进行循环)。
(H5)在H3-H4中任一项的方法的一些实施方案中,手势是轻扫手势。
(H6)在H3-H4中任一项的方法的一些实施方案中,手势是轻弹手势。
(H7)在H1-H6中任一项的方法的一些实施方案中,表示是各自对应于搜索结果中的相应搜索结果的刻度标记。
(H8)在H7的方法的一些实施方案中,刻度标记以对应于主显示器上的搜索结果的排序的顺序在触敏副显示器上的行中显示。
(H9)在H1-H8中任一项的方法的一些实施方案中,在内容内搜索的请求是在内容内定位搜索字符串的请求,并且多个搜索结果各自至少包括搜索字符串。
(H9)在H8的方法的一些实施方案中,显示多个搜索结果包括突出显示多个搜索结果中每一者的搜索字符串。
(H10)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行H1-H9中的任一方法的指令。
(H11)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行H1-H9中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(H12)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求H1-H9 中的任一方法显示的用户界面。
(H13)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求H1-H9中的任一方法的装置。
(I1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备 (诸如,图2C中的触控板108)集成。该方法包括:在主显示器上显示日历应用程序。该方法还包括:接收关于显示与日历应用程序相关联的事件的信息的请求(例如,该请求对应于在主显示器上的日历应用程序内显示的事件的选择)。响应于接收到该请求,该方法包括:(i)在主显示器上显示第一事件的事件详情,该事件详情包括事件的开始时间和结束时间;以及(ii) 在触敏副显示器上显示示能表示,该示能表示(例如,用户界面控件)指示至少包括开始时间和结束时间的时间范围。
允许用户在触敏副显示器上快速轻松地编辑事件详情为用户提供了一种快捷的方式来快速编辑事件详情,而不必执行额外的输入(例如,必须在使用键盘和使用触控板之间来回跳转以修改事件详情)。为用户提供便捷的方式来通过触敏副显示器快速编辑事件详情(并减少编辑事件详情所需的输入数量,从而需要较少交互来实现编辑事件详情的所需结果)增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来快速编辑某些事件详情),另外还通过使用户能够更快速有效地编辑事件详情,减少了电力使用并延长了设备的电池寿命。另外,通过响应于触敏副显示器处的输入而更新主显示器 (例如,以显示更新的事件开始和结束时间),用户能够通过提供修改事件的输入以有效的方式来维持与设备的交互,然后立即看到在主显示器上反映的修改,以便用户能够决定是否提供附加输入。
(I2)在I1的方法的一些实施方案中,该方法包括:通过触敏副显示器检测用户界面控件处修改时间范围的输入。响应于检测到该输入:(i)根据该输入修改事件的开始时间和结束时间中的至少一者;并且(ii)根据该输入在主显示器上显示事件的修改时间范围。
(I3)在I2的方法的一些实施方案中,该方法包括:将具有修改的开始和/或结束时间的事件保存到计算系统的存储器。
(I4)在I1-I3中任一项的方法的一些实施方案中,修改时间范围的输入是按压输入,该按压输入保持与该示能表示接触超过阈值时间量,然后在触敏副显示器上移动该示能表示的至少一部分。
(I5)在I1-I3中任一项的方法的一些实施方案中,修改时间范围的输入是轻扫手势,该轻扫手势跨触敏副显示器移动,并且引起计算系统选择事件的新开始时间和新结束时间,其中新开始时间和新结束时间对应于由开始时间和结束时间覆盖的相同持续时间的时隙。
(I6)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行I1-I5中的任一方法的指令。
(I7)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行I1-I5中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(I8)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求I1-I5中的任一方法显示的用户界面。
(I9)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求I1-I5中的任一方法的装置。
(J1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备 (诸如,图2C中的触控板108)集成。该方法包括:检测计算系统与不同于计算系统的外部设备之间的新连接(例如,连接新的监视器、通过蓝牙或耳机接口连接耳机等)。响应于检测到新的连接,该方法包括:在触敏副显示器上显示对应于通过外部设备可用的功能的多个示能表示。
允许用户通过触敏副显示器有效地利用外部设备为用户提供了一种便捷的方式来访问可能以其他方式被掩埋在菜单中的功能。为用户提供便捷的方式来访问可能以其他方式被掩埋在菜单中的外部设备的功能(并因此减少访问功能所需的输入数量,从而需要较少交互以便使用外部设备)增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来执行外部设备的某一功能),另外还通过使用户能够更快速有效地与外部设备交互,减少了电力使用并延长了设备的电池寿命。通过这种方式,触敏副显示器还传达了有关设备内部状态的信息(通过反映设备与外部设备之间的连接状态,并允许用户轻松与外部设备进行交互)。
(J2)在J1的方法的一些实施方案中,该方法包括:通过触敏副显示器接收对应于通过外部设备可用的第一功能的第一示能表示的选择。响应于接收到该选择,该方法包括:启动第一功能的执行。
(J3)在J1-J2中任一项的方法的一些实施方案中,外部设备是不同于主显示器和触敏显示器的附加显示器。
(J4)在J3的方法的一些实施方案中,多个示能表示包括第一示能表示,当选择该第一示能表示时,引起计算系统通过附加显示器启动显示器镜像功能的执行。
(J5)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行J1-J4中的任一方法的指令。
(J6)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行J1-J4中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(J7)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求J1-J4中的任一方法显示的用户界面。
(J8)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求J1-J4中的任一方法的装置。
(K1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备 (诸如,图2C中的触控板108)集成。该方法包括:在主显示器上显示在计算系统上执行的应用程序的用户界面;检测用户界面内的特定位置处的第一输入。响应于检测到第一输入,该方法包括:在触敏副显示器上显示各自对应于不同字符的一组示能表示。
允许用户通过在触敏副显示器上提供直观的输入来快速轻松地预览字符在主显示器上的应用程序内的外观为用户提供了一种便捷的方式来快速预览字符在应用程序内的外观。为用户提供便捷的方式来快速预览字符在应用程序内的外观增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来快速预览字符的外观,从而需要较少交互来预览这些字符在主显示器上的外观),另外还通过使用户能够更快速有效地预览字符,减少了电力使用并延长了设备的电池寿命。通过这种方式,使用户能够与其设备进行有效且持续的交互,因为允许用户继续预览字符,然后继续提供输入,直到所需的字符被定位。
(K2)在K1的方法的一些实施方案中,该方法包括:通过触敏副显示器检测对应于不同字符中的第一字符的第一示能表示上的第二输入。响应于检测到第二输入,该方法包括:在主显示器上的特定位置处显示第一字符的预览,同时输入保持与第一示能表示接触。
(K3)在K2的方法的一些实施方案中,该方法包括:通过触敏副显示器检测第二输入从第一示能表示到对应于不同字符中的第二字符的第二示能表示的移动。响应于检测到第二输入从第一示能表示到第二示能表示的移动,该方法包括:用第二字符的预览替换第一字符的预览。
(K4)在K1-K3中任一项的方法的一些实施方案中,该方法包括:至少部分地基于包括在用户界面中的文本内容来确定包括在该组示能表示中的示能表示。
(K5)在K4的方法的一些实施方案中,响应于检测到用户已经修改包括在用户界面中的文本内容而进行确定。
(K6)在K1-K5中任一项的方法的一些实施方案中,该方法包括:检测第二输入在与第二示能表示接触时的抬离。响应于检测到抬离,该方法包括:更新用户界面以包括第二用户界面元素。
(K7)在K1-K5中任一项的方法的一些实施方案中,该方法包括:在第二输入与第二示能表示接触的同时检测附加输入。响应于检测到附加输入,该方法包括:更新用户界面以包括第二用户界面元素。
(K8)在K1-K7中任一项的方法的一些实施方案中,该方法包括:当第二输入继续跨触敏副显示器移动时,第二输入接触该组示能表示中的对应示能表示时,显示不同字符中的相应字符的预览。
(K9)在K1-K8中任一项的方法的一些实施方案中,第二字符的预览保持在主显示器上显示,同时输入保持与第二示能表示接触。
(K10)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行K1-K9中的任一方法的指令。
(K11)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行K1-K9中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(K12)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求K1-K9 中的任一方法显示的用户界面。
(K13)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求K1-K9中的任一方法的装置。
(L1)根据一些实施方案,在计算系统(例如,系统100或系统 200,图1A至图2D)中执行方法,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204),以及至少部分地包含物理键盘(例如,图1A中的键盘106)和触敏副显示器(例如,图1A中的动态功能行104)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备 (诸如,图2C中的触控板108)集成。该方法包括:接收打开内容编辑应用程序(用于对文档、图纸、照片等进行排版和编辑的应用程序)的请求。响应于接收到该请求,该方法包括:(i) 在主显示器上显示内容编辑应用程序;以及(ii)在触敏副显示器上显示用于修改至少一个视觉特征的用户界面控件(例如,包括颜色值的滑尺的颜色选择器,用于为内容编辑应用程序中显示的内容选择颜色),该至少一个视觉特征用于在内容编辑应用程序内呈现内容。
因此,为用户提供了一种直观的方式,以通过在触敏副显示器上提供输入来修改用于在主显示器上的内容编辑应用程序中呈现内容的视觉特征。为用户提供直观的方式来通过这种方式修改视觉特征增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来快速预览某些视觉特征在用于在主显示器上呈现内容时的外观),另外还通过使用户能够以更快有效的方式预览视觉特征的变化,减少了电力使用并延长了设备的电池寿命。通过这种方式,使用户能够与其设备进行有效且持续的交互,因为允许用户继续预览视觉特征的修改在主要显示器上的外观,然后继续提供输入,直到视觉特征的所需修被定位。
(L2)在L1的方法的一些实施方案中,该方法包括:通过触敏副显示器检测用户界面控件处选择至少一个视觉特征的第一值的输入。在检测到该输入之后,该方法包括:使用至少一个视觉特征的第一值来在内容编辑应用程序中呈现内容(例如,使用第一值呈现添加到内容编辑应用程序的所有新内容和/或使用第一值呈现当前选择的内容)。
(L3)在L1-L2中任一项的方法的一些实施方案中,用户界面控件包括各自对应于至少一个视觉特征沿着值的滑尺的相应值的相应控件。
(L4)在L3的方法的一些实施方案中,值的滑尺表示不同的颜色色度。
(L5)在L4的方法的一些实施方案中,第一值对应于第一颜色的第一色度,并且该方法包括:根据确定输入满足预定标准(保持接触超过阈值时间量),修改触敏副显示器上的用户界面控件以包括用于选择与第一颜色的第一色度不同的第一颜色的其他色度的选项。
(L6)在L1-L5中任一项的方法的一些实施方案中,该方法包括:在呈现内容之前,接收内容的选择,并且呈现内容包括使用至少一个视觉特征的第一值呈现内容的预览。
(L7)在L6的方法的一些实施方案中,在输入保持与触敏副显示器接触的同时呈现预览。
(L8)在L7的方法的一些实施方案中,该方法包括:响应于检测到输入的抬离,停止显示预览。
(L9)在L8的方法的一些实施方案中,该方法包括:响应于检测到输入的抬离,显示具有至少一个视觉特征的修改值的可编辑内容的部分。
(L10)在另一方面,提供了一种计算系统,该计算系统包括一个或多个处理器、存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和触敏副显示器的第二外壳。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行L1-L9中的任一方法的指令。
(L11)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行L1-L9中的任一方法的指令,该计算系统具有存储器、包括主显示器的第一外壳以及至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳。
(L12)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、包括主显示器的第一外壳、至少部分地包含物理输入机构和不同于主显示器的触敏副显示器的第二外壳,该图形用户界面包括根据权利要求L1-L9 中的任一方法显示的用户界面。
(L13)在另一方面,提供了一种计算设备。该计算设备包括:包括主显示器的第一外壳、至少部分地包含物理键盘和不同于主显示器的触敏副显示器的第二外壳,以及用于执行或引起执行权利要求L1-L9中的任一方法的装置。
(M1)根据一些实施方案,在电子设备(例如,系统100或系统 200,图1A至图2D)中执行方法,该电子设备包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204,也称为“显示器”),以及至少部分地包含物理键盘(例如,图1A 中的键盘106)和触敏副显示器(例如,图1A中的动态功能行 104)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备(诸如,图2C中的触控板108)集成。在一些实施方案中,该电子设备还包括生物特征传感器,该生物特征传感器与触敏副显示器集成或者为与第二外壳内的触敏副显示器相邻定位的单独部件。该方法包括:在设备处于锁定状态时(例如,锁定状态是设备的一个或多个特征被禁用并且对敏感信息的访问或者更改或删除信息的能力被禁止的状态),显示与登录到包括第一用户账户和第二用户账户的多个用户账户相关联的相应登录用户界面。在显示登录用户界面时,该方法包括:接收关于用户的生物特征信息。响应于接收到该生物特征信息,该方法包括:(i)根据确定该生物特征信息与多个用户账户中的第一用户账户的生物特征信息一致,同时第一用户账户在设备上不具有活动会话,在显示器上显示输入第一用户账户的登录凭证的提示;以及(ii)根据确定该生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致,同时第二用户账户在设备上不具有活动会话,在显示器上显示输入第二用户账户的登录凭证的提示。
因此,为用户提供了一种直观的方式,以通过在生物特征传感器上提供单个输入来访问用户专用登录页面。为用户提供直观的方式来通过这种方式访问用户专用登录页面增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在生物特征传感器上的单个输入或手势来快速访问适当的用户专用登录页面,从而需要较少交互来达到用户专用登录页面),另外还通过使用户能够通过单个输入访问登录页面,减少了电力使用并延长了设备的电池寿命。
(M2)在M1的方法的一些实施方案中,该方法包括:响应于接收到生物特征信息:根据确定该生物特征信息与多个用户账户中的第一用户账户的生物特征信息一致,同时第一用户账户在设备上具有活动会话,相对于第一用户账户解锁设备(例如,不需要附加用户输入)。
(M3)在M1-M2中任一项的方法的一些实施方案中,该方法包括:响应于接收到生物特征信息:根据确定该生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致,同时第二用户账户在设备上具有活动会话,相对于第二用户账户解锁设备 (例如,不需要附加用户输入)。
(M4)在M1-M3中任一项的方法的一些实施方案中,该方法包括:响应于接收到生物特征信息:根据确定该生物特征信息与设备的任何用户账户的生物特征信息不一致,将设备保持在锁定状态。
(M5)在M1-M4中任一项的方法的一些实施方案中,登录用户界面包括对应于多个用户账户的多个可选择示能表示。
(M6)在M1-M5中任一项的方法的一些实施方案中,该方法包括:在显示输入第一用户账户的登录凭证的提示时,接收登录凭证的输入。响应于接收到登录凭证的输入,该方法包括:(i)根据确定该登录凭证与第一用户账户的登录凭证一致,相对于第一用户账户解锁设备;以及(ii)根据确定该登录凭证与第一用户账户的登录凭证不一致,将设备保持在锁定状态。
(M7)在M1-M6中任一项的方法的一些实施方案中,该方法包括:在显示输入第二用户账户的登录凭证的提示时,接收登录凭证的输入。响应于接收到登录凭证的输入:(i)根据确定该登录凭证与第二用户账户的登录凭证一致,相对于第一用户账户解锁设备;以及(ii)根据确定该登录凭证与第二用户账户的登录凭证不一致,将设备保持在锁定状态。
(M8)在M1-M7中任一项的方法的一些实施方案中,登录用户界面包括提供生物特征信息的指令。
(M9)在M1-M8中任一项的方法的一些实施方案中,设备包括与生物特征传感器相邻的副显示器(例如,触敏副显示器),并且该方法包括:在设备的显示器上显示登录用户界面时,在副显示器上显示通过生物特征传感器提供生物特征信息的指令。
(M10)在M1-M9中任一项的方法的一些实施方案中,生物特征传感器是指纹传感器。
(M11)在M1-M9中任一项的方法的一些实施方案中,生物特征传感器是面部检测传感器。
(M12)在M1-M9中任一项的方法的一些实施方案中,生物特征传感器是视网膜扫描仪。
(M13)在另一方面,提供了一种电子设备,该电子设备包括一个或多个处理器、存储器、显示器和生物特征传感器。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行M1-M12中的任一方法的指令。
(M14)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行M1-M12中的任一方法的指令,该计算系统具有显示器和生物特征传感器。
(M15)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、显示器和生物特征传感器,该图形用户界面包括根据权利要求M1-M12中的任一方法显示的用户界面。
(M16)在另一方面,提供了一种计算设备。该计算设备包括显示器和生物特征传感器,以及用于执行或引起执行权利要求M1-M12 中的任一方法的装置。
(N1)根据一些实施方案,在电子设备(例如,系统100或系统 200,图1A至图2D)中执行方法,该电子设备包括一个或多个处理器、存储器、包括主显示器的第一外壳(例如,包括显示器102的外壳110或包括显示器102的外壳204,也称为“显示器”),以及至少部分地包含物理键盘(例如,图1A 中的键盘106)和触敏副显示器(例如,图1A中的动态功能行 104)的第二外壳。在一些实施方案中,触敏副显示器与物理键盘分开(例如,触敏副显示器是独立的显示器222,或者触敏显示器与另一个设备(诸如,图2C中的触控板108)集成。在一些实施方案中,该电子设备还包括生物特征传感器,该生物特征传感器与触敏副显示器集成或者为与第二外壳内的触敏副显示器相邻定位的单独部件。该方法包括:在设备登录到第一用户账户时,显示与第一用户账户相关联的用户界面(例如,第一用户账户的主屏幕或桌面)。该设备与包括第一用户账户和第二用户账户的多个用户账户相关联,并且第二用户账户与能够登录到第二用户账户的生物特征信息相关联。在显示与第一用户账户相关联的用户界面时,该方法包括:通过具有集成生物特征传感器的输入元件接收输入。响应于通过具有集成生物特征传感器的输入元件接收到该输入,该方法包括:根据确定该输入满足第二用户切换标准,同时第二用户账户在设备上具有活动会话,其中第二用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致:(i)相对于第二用户账户解锁设备;(ii)相对于第一用户账户锁定设备;以及(iii)用与第二用户账户相关联的用户界面替换与第一账户相关联的用户界面的显示。
因此,为用户提供了一种直观的方式,以通过在生物特征传感器上提供单个输入来访问电子设备上的活动的用户专用会话。为用户提供直观的方式来通过这种方式访问活动的用户专用会话增强了电子设备的可操作性,并且使用户设备界面更有效(例如,通过要求在生物特征传感器上的单个输入或手势来获取对活动会话的立刻访问,从而需要较少交互来切换用户账户并登录到设备),另外还通过使用户能够通过单个输入访问活动会话,减少了电力使用并延长了设备的电池寿命。
(N2)在N1的方法的一些实施方案中,该方法包括:响应于接收到生物特征信息:根据确定该输入满足第二用户切换标准,同时第二用户账户在设备上不具有活动会话,其中第二用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致,在显示器上显示输入第二用户账户的登录凭证的提示。
(N3)在N1-N2中任一项的方法的一些实施方案中,该方法包括:响应于接收到生物特征信息:根据确定该输入满足第三用户切换标准,同时第三用户账户在设备上具有活动会话,其中第三用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第三用户账户的生物特征信息一致:(i)相对于第三用户账户解锁设备;(ii)相对于第一用户账户锁定设备;以及(iii)用与第三用户账户相关联的用户界面替换与第一账户相关联的用户界面的显示。
(N4)在N1-N3中任一项的方法的一些实施方案中,该方法包括:响应于接收到生物特征信息:根据确定该输入满足第三用户切换标准,同时第三用户账户在设备上不具有活动会话,其中第三用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第三用户账户的生物特征信息一致,在显示器上显示输入第三用户账户的登录凭证的提示。
(N5)在N1-N2中任一项的方法的一些实施方案中,输入元件是按钮,并且通过具有集成生物特征传感器的输入元件进行的输入包括通过按钮检测按压输入。
(N6)在N5的方法的一些实施方案中,第二用户切换标准包括按压输入持续小于第一阈值时间量的标准;并且该方法包括:响应于接收到通过具有集成生物特征传感器的输入元件进行的按压输入,根据确定利用按钮进行的该按压输入持续长于第一阈值时间量,将设备置于较低功率模式(例如,低功率模式对应于其中显示器被关闭的电子设备的暂停状态)。
(N7)在N5的方法的一些实施方案中,第二用户切换标准包括按钮按压小于第一阈值时间量的标准;并且该方法包括:响应于接收到通过具有集成生物特征传感器的输入元件进行的输入:(i) 根据确定利用按钮进行的按压输入持续长于第一阈值时间量并小于第二阈值时间量,将设备置于低功率模式(例如,低功率模式对应于其中显示器被关闭的电子设备的睡眠/暂停状态,并且在按压输入结束时便进入该低功率模式);以及(ii)根据确定利用按钮进行的按压输入持续长于第二阈值时间量,显示用于改变设备状态的选项菜单(例如,选项菜单包括关闭、重启、睡眠/暂停选项,当选择这些选项时,分别使设备关闭、重启或睡眠/暂停)。
(N8)在N7的方法的一些实施方案中,该方法包括:响应于接收到通过具有集成生物特征传感器的输入元件进行的输入:根据确定利用按钮进行的按压输入持续长于大于第二阈值时间量的第三阈值时间量,使设备重启。
(N9)在N1-N8中任一项的方法的一些实施方案中,该方法包括:在用与第二用户账户相关联的用户界面替换与第一账户相关联的用户界面的显示之后:在显示与第二用户账户相关联的用户界面时,接收通过具有集成生物特征传感器的输入元件进行的第二输入。响应于接收到通过具有集成生物特征传感器的输入元件进行的第二输入:根据确定该第二输入满足第一用户切换标准,同时第一用户账户在设备上具有活动会话,其中第一用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第一用户账户的生物特征信息一致:(i)相对于第一用户账户解锁设备;(ii)相对于第二用户账户锁定设备;以及(iii)用与第一用户账户相关联的用户界面替换与第二账户相关联的用户界面的显示。
(N10)在另一方面,提供了一种电子设备,该电子设备包括一个或多个处理器、存储器、显示器和生物特征传感器。一个或多个程序存储在存储器中并且被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行或引起执行N1-N9中的任一方法的指令。
(N11)在另一方面,提供了一种存储一个或多个程序的非暂态计算机可读存储介质,该一个或多个程序包括当由计算系统的一个或多个处理器执行时引起计算系统执行或引起执行N1-N9中的任一方法的指令,该计算系统具有显示器和生物特征传感器。
(N12)在又一方面,提供了计算系统上的一种图形用户界面,该计算系统具有一个或多个处理器、存储器、显示器和生物特征传感器,该图形用户界面包括根据权利要求N1-N9中的任一方法显示的用户界面。
(N13)在另一方面,提供了一种计算设备。该计算设备包括显示器和生物特征传感器,以及用于执行或引起执行权利要求N1-N9中的任一方法的装置。
附图说明
为了更好地理解各种所述实施方案,应结合以下附图来参考下面的具体实施方式,其中在整个附图中类似的附图标记是指对应的部件。
图1A是根据一些实施方案的便携式计算系统(例如,膝上型计算机)的说明图。
图1B是根据一些实施方案的图1A中的便携式计算系统的主体部分的说明图。
图2A是根据一些实施方案的台式计算系统的第一具体实施的说明图。
图2B是根据一些实施方案的台式计算系统的第二具体实施的说明图。
图2C是根据一些实施方案的台式计算系统的第三具体实施的说明图。
图2D是根据一些实施方案的台式计算系统的第四具体实施的说明图。
图3A是根据一些实施方案的电子设备的框图。
图3B是根据一些实施方案的用于图3A的事件处理的部件的框图。
图3C至图3E示出了根据一些实施方案的动态强度阈值的示例。
图4是根据一些实施方案的外围电子设备的框图。
图5A至图5E、图6A至图6F、图7A至图7D、图8A至图8H、图 9、图10A至图10H、图11A至图11H、图12A至图12H、图13A至图 13C、图14A至图14E、图15A至图15H、图16A至图16T、图17A至图 17G、图18A至图18I、图19A至图19K、图20A至图20G、图21A至图 21J、图22A至图22C、图23A至图23B、图24A至图24N、图25A至图 25C、图26A至图26E、图27A至图27O、图28A至图28P、图29A至图 29T、图30A至图30F、图31A至图31B、图32A至图32E、图33A至图 33K、图34A至图34C、图35A至图35B、图36A至图36W、图37A至图 37M、图38A至图38J、图39、图40、图41A至图41E、图42A至图42B 以及图43A至图43D示出了根据一些实施方案的用于在触敏副显示器处动态地提供用户界面控件的示例性用户界面。
图44A至图44D是根据一些实施方案的更新动态输入和输出设备的方法的流程图。
图45A至图45C是根据一些实施方案的更新动态输入和输出设备的方法的流程图。
图46A至图46B是根据一些实施方案的在全屏模式下保持应用程序的功能的方法的流程图。
图47A至图47B是根据一些实施方案的在触摸屏显示器上显示通知的方法的流程图。
图48A至图48C是根据一些实施方案的移动用户界面部分的方法的流程图。
图49是根据一些实施方案的通过在触敏副显示器处提供输入来浏览主显示器上的用户界面对象的方法的流程图。
图50是根据一些实施方案的通过在触敏副显示器处提供输入来浏览主显示器上的搜索结果的方法的流程图。
图51是根据一些实施方案的通过在触敏副显示器处提供输入来修改在主显示器上显示的事件的详情的方法的流程图。
图52是根据一些实施方案的在触敏副显示器处呈现有关外部设备的可执行信息的方法的流程图,该外部设备与包括触敏副显示器的计算系统连接。
图53是根据一些实施方案的通过在触敏副显示器处提供输入来预览在主显示器上的应用程序内显示的字符的方法的流程图。
图54是根据一些实施方案的通过在触敏副显示器处提供输入来修改用于在主显示器上的内容编辑应用程序内呈现内容的视觉特征的方法的流程图。
图55至图65示出了根据一些实施方案的电子设备的功能框图。
图66是根据一些实施方案的使用生物特征传感器来实现有效登陆的方法的流程图。
图67是根据一些实施方案的使用生物特征传感器来在登陆的用户账户之间实现快速切换的方法的流程图。
图68至图69示出了根据一些实施方案的电子设备的功能框图。
图70A至图70B是根据一些实施方案的主显示器和触敏副显示器的示意图,该主显示器和触敏副显示器用于说明用于在触敏副显示器处动态地提供控件的用户界面,以与地图应用程序一起使用。图70C至图70D是根据一些实施方案的触敏副显示器的示意图,该触敏副显示器用于说明用于在触敏副显示器处动态地提供控件的用户界面,以与地图应用程序一起使用。
图71A至图71B是根据一些实施方案的主显示器和触敏副显示器的示意图,该主显示器和触敏副显示器用于说明用于在触敏副显示器处动态地提供控件的用户界面,以与视频编辑应用程序一起使用。图71C至图71M 是根据一些实施方案的触敏副显示器的示意图,该触敏副显示器用于说明用于在触敏副显示器处动态地提供控件的用户界面,以与视频编辑应用程序一起使用。
图72A是根据一些实施方案的主显示器和触敏副显示器的示意图,该主显示器和触敏副显示器用于说明用于动态地提供控件的用户界面,以与视频编辑应用程序一起使用。图72B至图72K是根据一些实施方案的触敏副显示器的示意图,该触敏副显示器用于说明用于动态地提供控件的用户界面,以与视频编辑应用程序一起使用。
图73A至图73N是根据一些实施方案的触敏副显示器的示意图,该触敏副显示器用于说明用于动态地提供控件的用户界面,以与视频编辑应用程序一起使用。
图74A至图74H是根据一些实施方案的触敏副显示器的示意图,该触敏副显示器用于说明用于动态地提供控件的用户界面,以与视频编辑应用程序一起使用。
图75是示出根据一些实施方案的示例性字形的示意图,该示例性字形可在触敏副显示器处显示,以与各种视频编辑应用程序一起使用。
具体实施方式
图1A至图1B、图2A至图2D、图3A至图3E以及图4提供了示例设备的描述。图5A至图14E示出了用于更新动态输入和输出设备的示例性用户界面。图44A至图44D是更新动态输入和输出设备的方法600的流程图。图45A至图45C是更新动态输入和输出设备的方法700的流程图。图 46A至图46B是在全屏模式下保持应用程序的功能的方法800的流程图。图47A至图47B是在触摸屏显示器上显示通知的方法900的流程图。图 48A至图48C是移动用户界面部分的方法1000的流程图。图5A至图14E 中的用户界面用于说明图44A至图44D、图45A至图45C、图46A至图 46B、图47A至图47B以及图48A至图48C中的方法和/或过程。
图49至图54以及图66至图67包括利用触敏副显示器来在计算系统处实现有效交互的方法的流程图。图15A至图43D中的用户界面用于说明图49至图54以及图66至图67中的方法和/或过程。
示例性设备和系统
现在将详细地参考实施方案,这些实施方案的示例在附图中示出。下面的详细描述中示出许多具体细节,以便提供对各种所描述的实施方案的充分理解。但是,对本领域的普通技术人员将显而易见的是,各种所描述的实施方案可以在没有这些具体细节的情况下被实践。在其他情况下,没有详细地描述众所周知的方法、过程、部件、电路和网络,以免不必要地使实施方案的各方面晦涩难懂。
还将理解的是,虽然在一些情况下,术语“第一”、“第二”等在本文中用于描述各种元件,但是这些元件不应受到这些术语限制。这些术语只是用于将一个元件与另一元件区分开。例如,第一接触可被命名为第二接触,并且类似地,第二接触可被命名为第一接触,而不脱离各种所描述的实施方案的范围。第一接触和第二接触两者都是接触,但是它们不是同一接触。
在本文中对各种所描述的实施方案的描述中所使用的术语只是为了描述特定实施方案的目的,而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样,单数形式“一个”(“a”、“an”)和“该”旨在也包括复数形式,除非上下文另外明确地指示。还将理解的是,本文中所使用的术语“和/或”是指并且涵盖相关联地列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”(“includes”、“including”、“comprises”和/或“comprising”)在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
如本文中所使用,根据上下文,术语“如果”任选地被解释为意思是“当……时”(“when”或“upon”)或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为意思是“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
图1A是根据一些实施方案的便携式计算系统100的说明图。便携式计算系统100可以是例如膝上型计算机,诸如设备或任何其他便携式计算设备。便携式计算系统100包括:(A)具有主显示器102的显示器部分110(在本文中也称为第一外壳110或外壳110)以及(B)具有部分地包含在同一外壳内的动态功能行104、一组物理(即,可移动地致动的)键106和触控板108的主体部分120(也称为第二外壳120或外壳 120)。显示器部分110通常以机械方式、电方式和通信方式与便携式计算系统100的主体120耦接。例如,便携式计算系统100可包括铰链,允许显示器部分110相对于主体部分120旋转。便携式计算系统100包括一个或多个处理器以及存储由该一个或多个处理器执行的一个或多个程序的存储器,以执行本文所述的实施方案中的任一个。在一些实施方案中,参考图1B更详细地描述的动态功能行104是使用电阻感测、声学感测、电容感测、光学感测、红外感测等来检测用户触摸输入和选择的触摸屏显示器。在一些实施方案中,显示器部分110的主显示器102也是触摸屏显示器。
图1B是根据一些实施方案的便携式计算系统100的主体部分120的说明图。主体部分120包括部分地包含在同一外壳内的一组物理键106(在本文中也称为“物理键106”和“键盘106”)、动态功能行104和触控板 108。在一些实施方案中,作为触摸屏的动态功能行104替换了该组物理键 106的功能行,从而允许减少该组物理键106所占的空间,允许整个主体部分120更小或允许其他部分诸如触控板108更大。在一些实施方案中,动态功能行104相对于该组物理键106的主要尺寸的长度为大约18英寸。为了便于说明,虽然包括图1A中的动态功能行104的触摸屏被称为“行”,但是在一些其他实施方案中,该触摸屏可采取任何其他形式,诸如正方形、圆形、多行、列、多列、多个单独的扇区等。虽然图1A至图1B示出了替换该组物理键106的功能行的动态功能行104,但是在一些其他实施方案中,动态功能行104可另外地和/或另选地替换该组物理键106的数字键盘部分、编辑/功能部分等。
该组物理键106的每个物理键具有至少一个相关联的输入。该输入可以是可打印的字符、不可打印的字符、功能或其他输入。与物理键相关联的输入可通过以拉丁字母、阿拉伯字符、汉语字符或任何其他字母在该键的表面上显示(例如,打印)的字母、字、符号或其他标记来显示。例如,138处指示的特定物理键与字母字符“z”相关联,如该键上显示的字母z所示。又如,标有“命令”的物理键可能与命令功能相关联。例如,根据ISO/IEC 9995、ANSI-INCITS 154-1988、JIS X 6002-1980或其他类似标准,该组物理键106与具有字母数字、数字和/或编辑/功能部分(例如,标准、扩展或压缩)的QWERTY、Dvorak或其他键盘布局相关联。
当用户已经激活键时,对应于与物理键相关联的输入的信号可由便携式计算系统100的处理器(或图2A至图2D中的计算设备202或图2A至图2B中的外围键盘206)接收。在例示性示例中,该组物理键106的每个键包括两个板和一个弹簧。用户可通过按下键(其压缩弹簧)来激活该键。当弹簧被压缩时,两个板可接触,从而允许电流流过连接的板。响应于电流流过连接的板,对应于该键的输入可被提供给处理器。例如,响应于图2C中的外围键盘206的该组键106的激活,对应于激活的键的输入被提供给计算设备202。应当认识到,可使用用于可移动地致动的键的其他系统。
在一些实施方案中,动态功能行104是显示一个或多个用户可选择符号142(在本文中有时也称为“用户界面元素”、“用户界面部件”、“示能表示”、“按钮”或“软键”)的触摸屏显示器(本文中也称为“触敏副显示器”)。例如,动态功能行104替换了典型键盘上的功能行键。用户可通过触摸触摸屏显示器上对应于一个或多个用户可选择符号142中的特定一个的位置来选择一个或多个用户可选择符号142中的该特定一个。例如,用户可通过轻击动态功能行104使得用户的手指在放大镜指示符214 的位置处接触动态功能行104,来选择由放大镜符号144指示的用户可选择符号。在一些实施方案中,轻击接触或轻击手势包括在预定时间量(例如,250ms等)内接触的触下和接触的抬离。在一些实施方案中,使用电阻感测、声学感测、电容感测、光学感测、红外感测等来检测用户触摸输入和选择,从而实现动态功能行104的触摸屏显示器。
当用户选择一个或多个用户可选择符号142中的特定一个时,对应于一个或多个用户可选择符号142中的该特定一个的信号由动态功能行104 产生。例如,当用户在动态功能行104上轻击“esc”时,动态功能行104 将指示对应于撤出功能的用户输入的信号发送到便携式计算系统100的处理器(或图2A至图2D中的计算设备202,或图2A至图2B中的外围键盘 206的处理器,或图2C中的第一输入机构212的处理器,或图2D中的外围输入机构222的处理器)。
在一些实施方案中,当选择一个或多个用户可选择符号142中的特定一个时,动态功能行104将对应于触摸屏显示器上显示一个或多个用户可选择符号142中的该特定一个的位置的信号发送到便携式计算系统100的处理器(或图2A至图2D中的计算设备202,或图2A至图2B中的外围键盘206的处理器,或图2C中的第一输入机构212的处理器,或图2D中的外围输入机构222的处理器)。例如,动态功能行104可根据所选择的一个或多个用户可选择符号142中的特定一个在触摸屏显示器上的位置来发送包括位置值(0至20)的信号。在图1B的例示性示例中,“esc”符号可具有位置值0,放大镜符号144可具有位置值16等。便携式计算系统 100的处理器(或图2A至图2D中的计算设备202,或图2A至图2B中的外围键盘206的处理器,或图2C中的第一输入机构212的处理器,或图 2D中的外围输入机构222的处理器)可接收指示所选择的用户可选择符号的位置值的信号,并使用上下文信息(诸如,在显示器部分110的主显示器102(或图2A至图2D中的外围显示设备204)上显示的当前活动的或具有焦点的图形用户界面元素)来解释该位置值。
一个或多个用户可选择符号142中的每一个用户可选择符号可包括指示符(诸如符号,例如144所示的放大镜符号)、缩写词(例如“esc”)、非缩写词、字符、图像、动画图像、视频等。在一些实施方案中,一个或多个用户可选择符号142中的相应一个用户可选择符号能够接收用户输入。
输入可与一个或多个用户可选择符号142中的每个用户可选择符号相关联。输入可以是功能、字符、数值等。一个或多个用户可选择符号142 中的相应一个用户可选择符号可包括对应于一个或多个用户可选择符号142 中的相应一个用户可选择符号的输入的指示符。例如,在图1B中,缩写词为“esc”的用户可选择符号向用户指示撤出功能与该用户可选择符号相关联。当用户选择用户可选择符号时,可激活与一个或多个用户可选择符号142相关联的功能。例如,当用户选择具有指示符“esc”的用户可选择符号时,可激活撤出功能。根据便携式计算系统100(或图2A至图2D中的计算设备202)的当前状态,该功能的激活可具有不同的效果。例如,当对话框在显示器部分110(或图2A至图2D的外围显示设备204)的主显示器102上打开时,在动态功能行104上激活撤出功能可关闭对话框。又如,当游戏应用程序正由便携式计算系统100的处理器(或图2A至图2D 中的计算设备202)执行时,在动态功能行104上激活撤出功能可暂停游戏。
在一些实施方案中,功能可与可移动地致动的键和/或用户可选择符号的组合相关联。例如,同时致动命令键和“c”键(即,command+c)可与“复制”功能相关联。又如,致动命令键并同时选择具有指示符“esc”的用户可选择符号(即,command+esc)可激活打开特定应用程序(诸如,媒体播放器应用程序)的功能。再如,同时选择两个用户可选择符号 (例如,具有指示符“esc”的用户可选择符号和具有放大镜指示符的用户可选择符号144)可导致功能(诸如,专门的搜索功能)的激活。
在一些实施方案中,动态功能行104的一个或多个用户可选择符号 142的第一子集146可与一组功能相关联,并且动态功能行104的一个或多个用户可选择符号142的第二子集148可与第二组功能相关联。例如,第一子集146中的用户可选择符号可以是总体功能(例如,系统级功能或示能表示),并且第二子集148中的用户可选择符号可以是应用程序专用功能。因此,当焦点从在主显示器102上显示的图形用户界面的第一元素 (例如,对应于互联网浏览器应用程序的第一窗口)转移到图形用户界面的第二元素(例如,对应于电子邮件应用程序的第二窗口)时,第二子集 148中的用户可选择符号发生改变。相比之下,当焦点从图形用户界面的第一元素转移到图形用户界面的第二元素时,第一子集146中的用户可选择符号保持不变。
在一些实施方案中,基于在主显示器102上聚焦的活动用户界面元素显示来确定第二子集148中的用户可选择符号。在一些实施方案中,术语“聚焦”可指当前在前台活跃运行或可由从计算系统的用户接收的输入 (诸如,键按压、鼠标点击、语音命令、手势运动等)控制的用户界面的活动元素(例如,与应用程序相关联的窗口、与应用程序相关联的特定工具栏或菜单、或操作系统)。
在一些实施方案中,对应于总体用户可选择符号的一个或多个用户可选择符号142的第一子集146占据动态功能行104的第一区域(例如,动态功能行104的左半部分),并且一个或多个用户可选择符号142的第二子集148占据动态功能行104的第二区域(例如,动态功能行104的右半部分)。应当认识到,可按其他比例将动态功能行104分配给第一子集146 和第二子集148。在一些实施方案中,当没有应用程序具有焦点时,动态功能行104的第二区域可不包括任何用户可选择符号。在一些实施方案中,动态功能行104包括用户可选择符号的三个或更多个子集。在一些实施方案中,动态功能行104包括未划分子集的单组用户可选择符号。虽然在图 1B中的动态功能行104中示出了单行用户可选择符号,但是应当认识到动态功能行104可包括多行用户可选择符号。
在一些实施方案中,聚焦发生变化会改变在显示器部分110(或图2A 至图2D的外围显示设备204)的主显示器102上显示的图形用户界面的哪个元素是活动的,哪个元素将接收用户输入。可从键盘、鼠标、触控板或其他用户输入设备接收用户输入。另外地和/或另选地,在一些实施方案中,聚焦发生变化会改变在显示器部分110(或图2A至图2D的外围显示设备204)的主显示器102上显示的图形用户界面的前台中显示的元素。
在一些实施方案中,响应于用户输入,例如响应于用户选择在显示器部分110(或图2A至图2D的外围显示设备204)的主显示器102上显示的图形用户界面的元素(例如,不同窗口),或响应于用户选择用户可选择符号(例如,在动态功能行104上显示的示能表示/符号之一),焦点发生变化。用户选择可以是键敲击、鼠标点击、鼠标悬停、command+tab输入等。在一些实施方案中,响应于便携式系统100的操作系统(或图2A至图2D中的计算设备202)的确定结果,焦点发生变化。例如,当用户关闭具有焦点的应用程序窗口时,操作系统可将焦点放在不同的应用程序,诸如在关闭的应用程序窗口之前具有焦点的应用程序。又如,当用户关闭具有焦点的应用程序窗口时,操作系统可将焦点放在对话框,提示用户通过应用程序保存对文档所做的更改。
在一些实施方案中,焦点变化可以是从与应用程序相关联的一个元素到与同一应用程序相关联的另一元素的变化(例如,从电子邮件应用程序的电子邮件撰写窗口到电子邮件应用程序的收件箱列表窗口的变化,或从互联网浏览器应用程序的一个标签转到互联网浏览器应用程序的另一标签的变化)。在一些实施方案中,焦点变化可以是从与一个应用程序相关联的元素到与另一个应用程序相关联的元素的变化(例如,从互联网浏览器窗口到电子邮件应用程序窗口的变化)。此外,在一些实施方案中,焦点变化可以是从与应用程序相关联的元素到与操作系统相关联的元素(诸如,系统对话框、系统设置控制(例如,音量控制)、与文件/文件夹导航应用程序(例如,苹果公司的FINDER应用程序)相关联的窗口)的变化。另外,还可将焦点定向到对话框、文件目录、设置控制(例如,音量控制)或图形用户界面中可向用户呈现其信息和/或可接收其信息的用户输入的任何其他元素。
图2A是根据一些实施方案的台式计算系统200的第一具体实施的说明图。台式计算系统200包括计算设备202、具有主显示器102的外围显示设备204、外围键盘206和外围鼠标208。计算设备202包括一个或多个处理器以及存储由该一个或多个处理器执行的一个或多个程序的存储器。在一些实施方案中,外围显示设备204可与计算设备202诸如设备集成。在一些实施方案中,外围显示设备204的主显示器102是触摸屏显示器。在图2A中,外围显示设备204(在本文中也称为第一外壳204或外壳 204)、外围键盘206和外围鼠标208使用通信协议(诸如,蓝牙、Wi-Fi 等),经由有线连接(诸如,USB或PS/2)或经由无线通信链路通信地耦接到计算设备202。例如,外围键盘206(在本文中也称为第二外壳206或外壳206)距离计算设备202不超过十五英尺(例如,大约三英尺远)。在图2A中,外围键盘206包括至少部分地包含在同一外壳内的动态功能行 104和一组物理键106。在一些实施方案中,动态功能行104(参考图1B 有更详细的描述)是触摸屏显示器。在一些实施方案中,外围键盘206包括一个或多个处理器以及存储可由外围键盘206的该一个或多个处理器执行的一个或多个程序的存储器,以执行本文所述的实施方案中的任一个。在一些实施方案中,外围键盘206将指示用户输入(例如,键敲击和由动态功能行104显示的用户可选择符号/示能表示的选择)的信号中继到计算设备202。
图2B是根据一些实施方案的台式计算系统200的第二具体实施的说明图。在图2B中,台式计算系统200包括计算设备202、具有主显示器102 的外围显示设备204和外围键盘206。在图2B中,外围显示设备204和外围键盘206使用通信协议(诸如,蓝牙、Wi-Fi等),经由有线连接(诸如,USB或PS/2)或经由无线通信链路通信地耦接到计算设备202。在图 2B中,外围键盘206包括至少部分地包含在同一外壳内的动态功能行 104、一组物理键106和触控板108。在一些实施方案中,动态功能行104 (参考图1B有更详细的描述)是触摸屏显示器。在一些实施方案中,外围键盘206包括一个或多个处理器以及存储可由外围键盘206的该一个或多个处理器执行的一个或多个程序的存储器,以执行本文所述的实施方案中的任一个。在一些实施方案中,外围键盘206将指示用户输入(例如,键敲击、与触控板108的用户交互以及由动态功能行104显示的用户可选择符号/示能表示的选择)的信号中继到计算设备202。
图2C是根据一些实施方案的台式计算系统200的第三具体实施的说明图。在图2C中,台式计算系统200包括计算设备202、具有主显示器102 的外围显示设备204、外围键盘206和第一外围输入机构212。在图2C 中,外围显示设备204、外围键盘206和第一外围输入机构212使用通信协议(诸如,蓝牙、Wi-Fi等),经由有线连接(诸如,USB或PS/2)或经由无线通信链路通信地耦接到计算设备202。在图2C中,外围键盘206包括一组物理键106,并且第一外围输入机构212包括至少部分地包含在同一外壳内的动态功能行104和触控板108。在一些实施方案中,动态功能行 104(参考图1B有更详细的描述)是触摸屏显示器。在一些实施方案中,第一外围输入机构212包括一个或多个处理器以及存储可由第一外围输入机构212的该一个或多个处理器执行的一个或多个程序的存储器,以执行本文所述的实施方案中的任一个。在一些实施方案中,第一外围设备输入机构212将指示用户输入(例如,与触控板108的用户交互以及由动态功能行104显示的用户可选择符号/示能表示的用户选择)的信号中继到计算设备202。
图2D是根据一些实施方案的台式计算系统200的第四具体实施的说明图。在图2D中,台式计算系统200包括计算设备202、具有主显示器 102的外围显示设备204、外围键盘206、外围鼠标208和第二外围输入机构222。在图2D中,外围显示设备204、外围键盘206、外围鼠标208和第二外围输入机构222使用通信协议(诸如,蓝牙、Wi-Fi等),经由有线连接(诸如,USB或PS/2)或经由无线通信链路通信地耦接到计算设备 202。在图2A中,外围键盘206包括动态功能行104和一组物理键106。在图2D中,外围键盘206包括一组物理键106,并且第二外围输入机构 222包括至少部分地包含在第二外围输入机构222的外壳内的动态功能行104。在一些实施方案中,动态功能行104(参考图1B有更详细的描述) 是触摸屏显示器。在一些实施方案中,第二外围输入机构222包括一个或多个处理器以及存储可由第二外围输入机构222的该一个或多个处理器执行的一个或多个程序的存储器,以执行本文所述的实施方案中的任一个。在一些实施方案中,第二外围输入机构222将指示用户输入(例如,由动态功能行104显示的用户可选择符号/示能表示的用户选择)的信号中继到计算设备202。
图3A是根据一些实施方案的电子设备300的框图。在一些实施方案中,电子设备300是便携式电子设备,诸如膝上型计算机(例如,图1A中的便携式计算系统100)。在一些实施方案中,电子设备300不是便携式设备,而是台式计算机(例如,图2A至图2D中的台式计算系统200的计算设备202),其与外围显示系统(例如,图2A至图2D中的外围显示设备 204)和任选的外围触敏表面(例如,图2B至图2C中的触控板108和/或触敏显示器(诸如,图2A至图2D中的外围显示设备204和/或图2A至图 2D中的动态功能行104))通信地耦接。
电子设备300通常支持各种应用程序,诸如以下中的一者或多者:绘图应用程序、展示应用程序、文字处理应用程序、网站创建应用程序、盘编辑应用程序、电子表格应用程序、游戏应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、图像管理应用程序、数字相机应用程序、数字视频摄像机应用程序、网页浏览器应用程序和/或媒体播放器应用程序。
在电子设备300上执行的各种应用程序任选地使用至少一个共用物理用户界面设备,诸如触敏表面。触敏表面的一个或多个功能以及由电子设备300显示的对应信息任选地从一个应用程序调整和/或变化到下一个应用程序和/或在应用程序内调整和/或变化。这样,电子设备300的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
电子设备300包括存储器302(其任选地包括一个或多个计算机可读存储介质)、存储器控制器322、一个或多个处理单元(CPU)320、外围设备接口318、RF电路308、音频电路310、扬声器311、麦克风313、输入/ 输出(I/O)子系统306、其他输入或控制设备316以及外部端口324。电子设备300任选地包括显示系统312(例如,图1A中的显示器部分110的主显示器102和/或图1A至图1B中的动态功能行104),其可以是触敏显示器 (在本文中有时也称为“触摸屏”或“触摸屏显示”)。电子设备300任选地包括一个或多个光学传感器364。电子设备300任选地包括用于检测触敏表面(诸如,触敏显示器或触控板)上的接触的强度的一个或多个强度传感器365。电子设备300任选地包括用于在触敏表面(诸如,触敏显示器或触控板(例如,图1A至图1B中的触控板108))上生成触觉输出的一个或多个触觉输出发生器367。这些部件任选地通过一个或多个通信总线或信号线303进行通信。
如在本说明书中所使用的,术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如,手指接触)的力或压力(每单位面积的力),或是指触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围,该值范围包括至少四个不同的值并且更通常包括上百个(例如,至少256个)不同的值。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中,来自多个力传感器的力测量值被合并(例如,加权平均)以确定估计的接触力。类似地,触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地,在触敏表面上检测到的接触区域的大小和/或其变化、接触附近的触敏表面的电容和/或其变化以及/或者接触附近的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中,接触力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如,强度阈值是以对应于替代物测量的单位来描述)。在一些具体实施中,将接触力或压力的替代测量值转换为预估力或压力,并且使用预估力或压力确定是否已超过强度阈值(例如,强度阈值是以压力单位测量的压力阈值)。
如本说明书和权利要求书中所使用的,术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户手部的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解释为触感,该触感与设备或设备的部件的物理特征的所感知的变化对应。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解读为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压 (例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如,即使在触敏表面的光滑度无变化时,触敏表面的移动也会任选地由用户解读或感测为触敏表面的“粗糙度”。虽然由用户对触摸的此类解读将受到用户的个体化感官知觉的限制,但是有许多触摸的感官知觉是大多数用户共有的。因此,当触觉输出被描述为对应于用户的特定感官知觉(例如,“按下点击”、“松开点击”、“粗糙度”)时,除非另外陈述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移将会生成典型(或普通)用户的所述感官知觉。
应当理解,电子设备300仅是一个示例,并且电子设备300任选地具有比所示出的更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图3A中所示的各种部件在硬件、软件、固件或它们的任何组合(包括一个或多个信号处理和/或专用集成电路)中实现。
存储器302任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备或其他非易失性固态存储器设备。电子设备300的其他部件(诸如,CPU 320和外围设备接口318)对存储器302的访问任选地由存储器控制器322来控制。外围设备接口318可用于将输入外围设备和输出外围设备耦接到CPU320和存储器302。一个或多个处理单元320运行或执行存储在存储器302中的各种软件程序和/或指令集,以执行电子设备300的各种功能并处理数据。在一些实施方案中,外围设备接口318、CPU 320和存储器控制器322任选地在单个芯片(诸如芯片304)上实现。在一些其他实施方案中,它们任选地在独立芯片上实现。
RF(射频)电路308接收和发送也被称为电磁信号的RF信号。RF电路308将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络和其他通信设备进行通信。RF电路308任选地包括用于执行这些功能的熟知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路308任选地通过无线通信来与网络和其他设备进行通信,这些网络为诸如互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如,蜂窝电话网络、无线局域网 (LAN)和/或城域网(MAN))。无线通信任选地使用多种通信标准、协议和技术中的任何一种,包括但不限于全球移动通信系统(GSM)、增强数据 GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC- HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)、互联网协议语音技术(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议 (IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理现场协议(XMPP)、用于即时消息和现场利用扩展的会话发起协议(SIMPLE)、即时消息和到场服务(IMPS))、和/或短消息服务(SMS)、或者其他任何适当的通信协议,包括在本文档提交日期还未开发出的通信协议。
音频电路310、扬声器311和麦克风313提供用户和电子设备300之间的音频接口。音频电路310从外围设备接口318接收音频数据,将音频数据转换为电信号,并将电信号发送到扬声器311。扬声器311将电信号转换为人类可听见的声波。音频电路310还接收由麦克风313从声波转换的电信号。音频电路310将电信号转换为音频数据,并且将音频数据传输到外围设备接口318用于处理。音频数据任选地由外围设备接口318检索自和/或传输至存储器302和/或RF电路308。在一些实施方案中,音频电路 310还包括耳麦插孔。耳麦插孔提供音频电路310和可移除的音频输入/输出外围设备(诸如,仅输出的耳机或者具有输出(例如,单耳或双耳耳机)和输入(例如,麦克风)二者的耳麦)之间的接口。
I/O子系统306将电子设备300的输入/输出外围设备(诸如,显示系统312)和其他输入或控制设备316耦接到外围设备接口318。I/O子系统 306任选地包括显示控制器356、光学传感器控制器358、强度传感器控制器359、触觉反馈控制器361和用于其他输入或控制设备的一个或多个其他输入控制器360。该一个或多个其他输入控制器360从其他输入或控制设备 316接收电信号/将电信号发送到其他输入或控制设备316。其他输入或控制设备316任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮等等。在一些替代实施方案中,其他输入控制器360任选地与以下各项中的任一者耦接(或不与以下各项中的任一者耦接):键盘、红外线端口、USB端口和指针设备诸如鼠标。该一个或多个物理按钮任选地包括用于扬声器311和/或麦克风313的音量控制的增大/减小按钮。
显示系统312(例如,图1A中的显示器部分110的主显示器102和/ 或图1A至图1B中的动态功能行104)提供电子设备300和用户之间的输出接口(当该显示系统为触敏显示器时,任选地提供输入接口)。显示控制器356从显示系统312接收电信号和/或将电信号发送到显示系统312。显示系统312向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频和它们的任何组合(统称为“图形”)。在一些实施方案中,部分或全部视觉输出对应于用户界面对象/元素。
在一些实施方案中,显示系统312(例如,图1A中的显示器部分110 的主显示器102和/或图1A至图1B中的动态功能行104)是具有基于触觉接触接收来自用户的输入的触敏表面、传感器或传感器组的触敏显示器。因此,显示系统312和显示控制器356(连同存储器302中的任何相关联的模块和/或指令集)检测显示系统312上的接触(以及该接触的任何移动或中断),并将所检测到的接触转换为与在显示系统312上显示的用户界面对象(例如,一个或多个软键、图标、网页或图像)的交互。在一个示例性实施方案中,显示系统312和用户之间的接触点对应于用户手指下方的区域。
显示系统312(例如,图1A中的显示器部分110的主显示器102和/ 或图1A至图1B中的动态功能行104)任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、LED(发光二极管)技术或OLED (有机发光二极管)技术,但是在其他实施方案中可使用其他显示技术。在一些实施方案中,当显示系统312是触敏显示器时,显示系统312和显示控制器356任选地使用现在已知的或以后将开发出的多种触摸感测技术 (包括但不限于电容性技术、电阻性技术、红外线技术和表面声波技术) 中的任何技术以及其他接近传感器阵列或用于确定与显示系统312的一个或多个接触点的其他元件来检测接触及其任何移动或中断。在一个示例性实施方案中,使用投影式互电容感测技术,诸如从Apple Inc.(Cupertino, California)的和中发现的技术。
显示系统312(例如,图1A中的显示器部分110的主显示器102和/ 或图1A至图1B中的动态功能行104)任选地具有超过400dpi(例如, 500dpi、800dpi或更大)的视频分辨率。在一些实施方案中,显示系统312 是触敏显示器,用户任选地使用触笔、手指等来与该触敏显示器接触。在一些实施方案中,用户界面被设计成主要与基于手指的接触和手势工作。在一些实施方案中,电子设备300将基于手指的粗略输入转化为精确的指针/光标位置或命令,以用于执行用户所期望的动作。
在一些实施方案中,除了显示系统312之外,电子设备300任选地包括用于激活或去激活特定功能的触控板(例如,图1A至图1B中的触控板 108)。在一些实施方案中,触控板是电子设备300的触敏区域,该触敏区域与显示系统312不同,不显示视觉输出。在一些实施方案中,当显示系统312是触敏显示器时,触控板任选地是与显示系统312分开的触敏表面,或由显示系统312形成的触敏表面的延伸部分。
电子设备300还包括用于为各种部件供电的电力系统362。电力系统 362任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC) 等)、再充电系统、电力故障检测电路、功率转换器或逆变器、电力状态指示器(例如,发光二极管(LED))以及与便携式设备中电力的生成、管理和分配相关联的任何其他部件。
电子设备300任选地还包括与I/O子系统306中的光学传感器控制器 358耦接的一个或多个光学传感器364。光学传感器364任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器 364从环境接收通过一个或多个透镜投射的光,并且将光转换为表示图像的数据。结合成像模块343,光学传感器364任选地捕获静态图像或视频。在一些实施方案中,光学传感器位于电子设备300的前部上,使得用户在显示系统312上观看其他视频会议参与者的同时,任选地获得该用户的图像以用于视频会议。
电子设备300任选地还包括与I/O子系统306中的强度传感器控制器 359耦接的一个或多个接触强度传感器365。接触强度传感器365任选地包括一个或多个压阻应变仪、电容式力传感器、电气力传感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器365从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施方案中,至少一个接触强度传感器与触敏表面(例如,图1A至图1B中的触控板108,或显示系统312(当其为触敏显示器时))并置排列或邻近。
电子设备300任选地还包括与I/O子系统306中的触觉反馈控制器361 耦接的一个或多个触觉输出发生器367。触觉输出发生器367任选地包括一个或多个电声设备,诸如扬声器或其他音频部件;和/或将能量转换成线性运动的机电设备,诸如马达、螺线管、电活性聚合器、压电致动器、静电致动器或其他触觉输出生成部件(例如,将电信号转换成设备上的触觉输出的部件)。接触强度传感器365从触觉反馈模块333接收触觉反馈生成指令,并生成能够由电子设备300的用户感测到的触觉输出。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,图1A至图1B中的触控板108,或显示系统312(当其为触敏显示器时))并置排列或邻近,并且任选地通过竖直地(例如,向电子设备300的表面内/外)或侧向地 (例如,在与电子设备300的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。
电子设备300任选地还包括与外围设备接口318耦接的一个或多个接近传感器366。另选地,接近传感器366与I/O子系统306中的其他输入控制器360耦接。电子设备300任选地还包括与外围设备接口318耦接的一个或多个加速度计368。另选地,加速度计368与I/O子系统306中的其他输入控制器360耦接。
在一些实施方案中,存储在存储器302中的软件部件包括操作系统 326、通信模块328(或指令集)、接触/运动模块330(或指令集)、图形模块332(或指令集)、应用程序340(或指令集)和动态功能行模块350 (或指令集)。此外,在一些实施方案中,存储器302存储设备/全局内部状态357(或指令集),如图3A所示。设备/全局内部状态357包括以下各项中的一者或多者:活动应用程序状态,指示哪些应用程序(如果有的话)当前是活动的和/或聚焦的;显示状态,指示哪些应用程序、视图或其他信息占据显示系统312(例如,图1A中的显示器部分110的主显示器 102和/或图1A至图1B中的动态功能行104)和/或外围显示系统(例如,图2A至图2D中的外围显示设备204的主显示器102和/或图2A至图2D 中的动态功能行104)的各个区域;传感器状态,包括从各种传感器和电子设备300的输入或控制设备316获得的信息;以及关于电子设备300的位置和/或姿态的位置信息。
操作系统326(例如,DARWIN、RTXC、LINUX、UNIX、OS X、 WINDOWS或嵌入式操作系统诸如VXWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、功率管理等)的各种软件部件和/或驱动器,并且促进各种硬件部件和软件部件之间的通信。
通信模块328促进通过一个或多个外部端口324和/或RF电路308与其他设备(例如,图2A至图2D中的计算设备202、图2A和图2D中的外围鼠标208、图2A至图2B中的外围键盘206、图2C中的第一外围输入机构212和/或图2D中的第二外围输入机构222)进行通信,并且还包括用于经由RF电路308和/或外部端口324发送/接收数据的各种软件部件。外部端口324(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备或者间接地通过网络(例如,互联网、无线LAN等)进行耦接。在一些实施方案中,外部端口324是与在设备上使用的30针连接器相同或类似的和/或与其兼容的多针(例如,30针)连接器。
当接触/运动模块330任选地检测与显示系统312(当其为触敏显示器时)(结合显示控制器356)和其他触敏设备(例如,触控板或物理点击轮)的接触。接触/运动模块330包括各种软件部件以用于执行与接触检测相关的各种操作,诸如确定是否已经发生了接触(例如,检测手指按下事件)、确定接触强度(例如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪跨触敏表面的移动(例如,检测一个或多个手指拖动事件),以及确定接触是否已经停止(例如,检测手指抬起事件或者接触中断)。接触/运动模块330从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变),所述接触点的移动由一系列接触数据表示。这些操作任选地被应用于单点接触(例如,单指接触)或者多点同时接触(例如,“多点触摸”/多个手指接触)。在一些实施方案中,接触/运动模块330还检测触控板(例如,图1A至图1B中的触控板108)上的接触。
在一些实施方案中,接触/运动模块330使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如,确定用户是否已在示能表示上进行选择或“点击”)。在一些实施方案中,根据软件参数来确定强度阈值的至少一个子集(例如,强度阈值不由特定物理致动器的激活阈值来确定,并且可在不改变电子设备300的物理硬件的情况下调节)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏显示器的鼠标“点击”阈值可被设置为预定义的阈值的大范围中的任一个阈值。另外,在一些具体实施中,向设备的用户提供用于调节该组强度阈值中的一个或多个强度阈值(例如,通过调节各个强度阈值和/或通过对“强度”参数进行系统级点击来一次调节多个强度阈值)的软件设置。
接触/运动模块330任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触模式(例如,所检测到的接触的不同运动、时间和/或强度)。因此,任选地通过检测特定接触图案来检测手势。例如,检测手指轻击接触包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。又如,在触敏表面上检测手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且在一些实施方案中,随后还检测手指抬起(抬离)事件。
图形模块332包括用于在主显示器102(例如,图1A中的显示器部分 110的主显示器102或图2A至图2D中的外围显示设备204的主显示器 102)或其他显示器上呈现和显示图形的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,包括但不限于文本、网页、图标(诸如包括软按键的用户界面对象)、数字图像、视频、动画等。在一些实施方案中,图形模块332存储表示待使用的图形的数据。每个图形任选地被分配有对应的代码。图形模块332从应用程序等接收指定待显示的图形的一个或多个代码,在必要的情况下还接收坐标数据和其他图形属性数据,然后生成屏幕图像数据以输出到显示控制器356。
触觉反馈模块333包括用于生成指令的各种软件部件,该指令由触觉输出发生器367使用,以便响应于用户与电子设备300的交互而在电子设备300上的一个或多个位置处产生触觉输出。
应用程序340任选地包括以下模块(或指令集)或者其子组或超集:
·用于接收、发送、撰写和查看电子邮件的电子邮件客户端模块341 (在本文中有时也称为“邮件应用程序”或“电子邮件应用程序”);
·用于捕获静态图像和/或视频图像的成像模块342;
·用于编辑和查看静态图像和/或视频图像的图像管理模块343(在本文中有时也称为“照片应用程序”);
·用于回放音频和/或视频的媒体播放器模块344(在本文中有时也称为“媒体播放器应用程序”);以及
·用于连接和浏览互联网的网页浏览模块345(在本文中有时也称为“网页浏览器”)。
任选地存储在存储器302中的其他应用程序340的示例包括消息传送和通信应用程序、文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密应用程序、数字版权管理应用程序、语音识别应用程序和语音复制应用程序。
结合RF电路308、显示系统312(例如,图1A中的显示器部分110 的主显示器102和/或图1A至图1B中的动态功能行104)、显示控制器 356、接触模块330和图形模块332中的一者或多者,电子邮件客户端模块 341包括响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块343,电子邮件客户端模块341使得非常容易创建和发送具有由成像模块342拍摄的静态图像或视频图像的电子邮件。
结合显示系统312(例如,图1A中的显示器部分110的主显示器102 和/或图1A至图1B中的动态功能行104)、显示控制器356、光学传感器 364、光学传感器控制器358、接触模块330、图形模块332和图像管理模块343中的一者或多者,成像模块342包括用于捕获静态图像或视频(包括视频流)并将其存储到存储器302中、修改静态图像或视频的特征或从存储器302中删除静态图像或视频的可执行指令。
结合显示系统312(例如,图1A中的显示器部分110的主显示器102 和/或图1A至图1B中的动态功能行104)、显示控制器356、接触模块 330、图形模块332和成像模块342中的一者或多者,图像管理模块343包括用于排列、修改(例如,编辑)或以其他方式操作、标记、删除、呈现(例如,以数字幻灯片放映或相册形式)和存储静态和/或视频图像的可执行指令。
结合显示系统312(例如,图1A中的显示器部分110的主显示器102 和/或图1A至图1B中的动态功能行104)、显示控制器356、接触模块 330、图形模块332、音频电路310、扬声器311、RF电路308和网页浏览模块345中的一者或多者,媒体播放器模块344包括允许用户下载和回放以一种或多种文件(诸如,MP3或AAC文件)格式存储的录制音乐和其他声音文件的可执行指令,以及用于显示、呈现或以其他方式回放视频(例如,在经由外部端口324连接的图1A中的显示器部分110的主显示器102 或图2A至图2B中的外围显示设备204的主显示器102上)的可执行指令。
结合RF电路308、显示系统312(例如,图1A中的显示器部分110 的主显示器102和/或图1A至图1B中的动态功能行104)、显示控制器 356、接触模块330和图形模块332中的一者或多者,网页浏览模块345包括用于根据用户指令(包括搜索、链接、接收和显示网页或其部分,以及链接至网页的附件和其他文件)来浏览互联网的可执行指令。
动态功能行(DFR)模块350包括:焦点确定模块351、DFR确定模块 352和DFR呈现模块353。在一些实施方案中,焦点确定模块351被配置为确定在由显示系统312(例如,图1A中的显示器部分110的主显示器 102)或外围显示系统(例如,图2A至图2D中的外围显示设备204)显示的图形用户界面上聚焦的活动用户界面元素。在一些实施方案中,DFR确定模块352被配置为基于聚焦的活动用户界面元素来确定图形(例如,一组一个或多个示能表示)。在一些实施方案中,DFR呈现模块353被配置为在显示系统312(例如,图1A至图1B中的动态功能行104)上呈现由 DFR确定模块352确定的图形。DFR呈现模块353包括用于在显示系统312(例如,图1A至图1B中的动态功能行104)上呈现和显示图形的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,包括但不限于文本、网页、图标 (诸如,包括软键的用户界面对象)、数字图像、视频、动画等。在一些实施方案中,DFR模块350包括用于以下操作的其他模块:调节动态功能行104的灵敏度;调节由动态功能行104提供的可听和/或触觉反馈;调节由动态功能行104显示的示能表示和信息的设置(例如,大小、亮度、字体、语言等);调节动态功能行104的当前功率模式(例如,正常模式和低功率模式);等等。
在一些实施方案中,动态功能行模块350与允许提供预测/主动/建议内容项(包括预测的接收者、建议的文本完成字符串、主动建议的应用程序等)的部件进行交互。在美国申请序列号15/167,713中更详细地讨论了主动建议内容项,该申请的全部内容据此以引用方式并入。
上述模块和应用程序中的每一个对应于用于执行上述一种或多种功能以及在该申请中所述的方法(例如,本文所述的计算机实现的方法和其他信息处理方法)的可执行指令集。这些模块(即,指令集)不必以独立的软件程序、过程或模块实现,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。在一些实施方案中,存储器302任选地存储上述模块和数据结构的子集。此外,存储器302任选地存储上面未描述的附加的模块和数据结构。
图3B是根据一些实施方案的用于图3A的事件处理的部件的框图。在一些实施方案中,存储器302(图3A)包括事件分类器370(例如,在操作系统326中)和应用程序340-1(例如,上述应用程序341,342,343,344 或345中的任一者)。
事件分类器370接收事件信息并确定要将事件信息递送到的应用程序 340-1和应用程序340-1的应用程序视图391。事件分类器370包括事件监视器371和事件分配器模块374。在一些实施方案中,应用程序340-1包括应用程序内部状态392,其指示当应用程序处于活动状态或正被执行时显示系统312(例如,图1A中的显示器部分110的主显示器102和/或图1A至图1B中的动态功能行104)上显示的当前应用程序视图。在一些实施方案中,设备/全局内部状态357被事件分类器370用于确定哪个(哪些)应用程序当前是活动的或聚焦的,并且应用程序内部状态392被事件分类器370 用于确定要将事件信息递送到的应用程序视图391。
在一些实施方案中,应用程序内部状态392包括附加信息,诸如以下各项中的一者或多者:当应用程序340-1恢复执行时将被使用的恢复信息、指示正被应用程序340-1显示的信息或准备好用于被应用程序340-1显示的信息的用户界面状态信息、用于使得用户能够返回到应用程序340-1 的前一状态或视图的状态队列,以及用户采取的先前动作的重复/撤销队列。
事件监视器371从外围设备接口318接收事件信息。事件信息包括关于子事件(例如,当显示系统312为触敏显示器时,其上作为多点触摸手势的一部分的用户触摸)的信息。外围设备接口318传输其从I/O子系统 306或传感器(诸如接近传感器366、加速度计368和/或麦克风313(通过音频电路310))接收的信息。外围设备接口318从I/O子系统306接收的信息包括来自显示系统312(当其为触敏显示器时)或另一个触敏表面(例如,图1A至图1B中的触控板108)的信息。
在一些实施方案中,事件监视器371以预先确定的间隔将请求发送至外围设备接口318。作为响应,外围设备接口318传输事件信息。在其他实施方案中,外围设备接口318仅当存在显著事件(例如,接收到高于预先确定的噪声阈值和/或超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中,事件分类器370还包括命中视图确定模块372和/ 或活动事件识别器确定模块373。
命中视图确定模块372提供用于在显示系统312显示多于一个视图时确定在一个或多个视图内发生子事件的位置的软件过程,其中视图由用户可在显示器上看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图,在本文中有时也称为应用程序视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(应用程序的)应用程序视图任选地对应于应用程序的程序化或视图分级结构内的程序化水平。例如,在其中检测到触摸的最低水平视图任选地被称为命中视图,并且被认为是正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,该初始触摸开始基于触摸的手势。
命中视图确定模块372接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时,命中视图确定模块372将命中视图识别为应当对子事件进行处理的分级结构中的最低视图。在大多数情况下,命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别,命中视图通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块373确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块373 确定仅命中视图才应接收特定子事件序列。在其他实施方案中,活动事件识别器确定模块373确定包括子事件的物理位置的所有视图都是活跃参与的视图,因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施方案中,即使触摸子事件完全被局限到与一个特定视图相关联的区域,但在分级结构中较高的视图将仍然保持为活跃参与的视图。
事件分配器模块374将事件信息分配到事件识别器(例如,事件识别器380)。在包括活动事件识别器确定模块373的实施方案中,事件分配器模块374将事件信息递送到由活动事件识别器确定模块373确定的事件识别器。在一些实施方案中,事件分配器模块374在事件队列中存储事件信息,该事件信息由相应事件接收器382进行检索。
在一些实施方案中,操作系统326包括事件分类器370。另选地,应用程序340-1包括事件分类器370。在其他实施方案中,事件分类器370是独立模块,或者是存储在存储器302中的另一个模块(诸如,接触/运动模块330)的一部分。
在一些实施方案中,应用程序340-1包括多个事件处理程序390和一个或多个应用程序视图391,其中每个应用程序视图包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序340-1的每个应用程序视图391包括一个或多个事件识别器380。通常,应用程序视图 391包括多个事件识别器380。在其他实施方案中,事件识别器380中的一个或多个是独立模块的一部分,该独立模块为诸如用户界面工具包(未示出)或应用程序340-1从中继承方法和其他属性的较高级别的对象。在一些实施方案中,相应事件处理程序390包括以下各项中的一者或多者:数据更新器376、对象更新器377、GUI更新器378和/或从事件分类器370接收的事件数据379。事件处理程序390任选地利用或调用数据更新器376、对象更新器377或GUI更新器378来更新应用程序内部状态392。另选地,应用程序视图391中的一个或多个应用程序视图包括一个或多个相应事件处理程序390。此外,在一些实施方案中,数据更新器376、对象更新器377和GUI更新器378中的一者或多者包括在应用程序视图391中。
相应的事件识别器380从事件分类器370接收事件信息(例如,事件数据379),并且从事件信息识别事件。事件识别器380包括事件接收器 382和事件比较器384。在一些实施方案中,事件识别器380还包括元数据 383和事件递送指令388(其任选地包括子事件递送指令)的至少一个子集。
事件接收器382来自事件分类器370的事件信息。事件信息包括关于子事件(例如,触摸或触摸移动)的信息。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速率和方向。在一些实施方案中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向取向,或反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器384将事件信息与预定义的事件或子事件定义进行比较,并且基于该比较来确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施方案中,事件比较器384包括事件定义386。事件定义386 包含对事件的定义(例如,预定义的子事件序列),例如事件1(387-1)、事件2(387-2)和其他事件。在一些实施方案中,事件387中的子事件包括例如触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。例如,事件1 (387-1)的定义是在所显示对象上的双击。双击例如包括在所显示对象上的预确定的时长的第一次触摸(触摸开始)、预确定的时长的第一次抬离 (触摸结束)、在所显示对象上的预确定的时长的第二次触摸(触摸开始)以及预确定的时长的第二次抬离(触摸结束)。又如,事件2(387-2) 的定义是在所显示对象上的拖动。拖动例如包括在所显示对象上的预确定的时长的触摸(或接触)、触摸跨显示系统312(当其为触敏显示器时)的移动以及触摸的抬离(触摸结束)。在一些实施方案中,事件还包括用于一个或多个相关联的事件处理程序390的信息。
在一些实施方案中,事件定义387包括对用于相应用户界面对象的事件的定义。在一些实施方案中,事件比较器384执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在应用程序视图(其中在显示系统312(当其为触敏显示器时)上显示三个用户界面对象)中,当在显示系统 312(当其为触敏显示器时)上检测到触摸时,事件比较器384执行命中测试,以确定这三个用户界面对象中哪一个与触摸(子事件)相关联。如果每个所显示对象与相应事件处理程序390相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序390应当被激活。例如,事件比较器384选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中,相应事件387的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到确定子事件序列确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器380确定子事件系列不与事件定义386中的任何事件匹配时,该相应事件识别器380进入事件不可能、事件失败或事件结束状态,在此之后忽略基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪和处理持续的基于触摸的手势的子事件。
在一些实施方案中,相应事件识别器380包括具有指示事件递送系统应该如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表的元数据383。在一些实施方案中,元数据383包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标记和/或列表。在一些实施方案中,元数据383包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标记和/或列表。
在一些实施方案中,当事件的一个或多个特定子事件被识别时,相应事件识别器380激活与事件相关联的事件处理程序390。在一些实施方案中,相应事件识别器380将与该事件相关联的事件信息递送到事件处理程序390。激活事件处理程序390不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中,事件识别器380抛出与所识别的事件相关联的标记,并且与该标记相关联的事件处理程序390获取该标记并执行预定义过程。
在一些实施方案中,事件递送指令388包括在不激活事件处理程序的情况下递送关于子事件的事件信息的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件系列相关联的事件处理程序或递送到活跃参与的视图。与子事件系列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中,数据更新器376创建并更新在应用程序340-1中使用的数据。例如,数据更新器376存储由媒体播放器模块344使用的视频文件。在一些实施方案中,对象更新器377创建和更新由应用程序340-1 使用的对象。例如,对象更新器376创建新用户界面对象或更新用户界面对象的位置。GUI更新器378更新GUI。例如,GUI更新器378准备显示信息并将其发送到图形模块332以在显示系统312(例如,图1A中的显示器部分110的主显示器102和/或图1A至图1B中的动态功能行104)上显示。
在一些实施方案中,事件处理程序390包括数据更新器376、对象更新器377和GUI更新器378或者具有对它们的访问权限。在一些实施方案中,数据更新器376、对象更新器377和GUI更新器378包括在应用程序 340-1或应用程序视图391的单个模块中。在其他实施方案中,它们包括在两个或更多个软件模块中。
应当理解,关于触敏显示器上用户触摸的事件处理的上述讨论还适用于利用输入设备来操作电子设备300的其他形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,任选地与单次或多次键盘按压或保持结合的鼠标移动和鼠标按钮按压;触控板上的接触移动,诸如轻击、拖动、滚动等;触笔输入;设备的移动;口头指令;所检测到的眼睛移动;生物特征输入;和/或其任意组合任选地被用作与定义要识别的事件的子事件对应的输入。
图4示出了根据一些实施方案的外围电子设备400的框图。在一些实施方案中,外围电子设备400是外围输入和输出设备,其至少部分地包含同一外壳内的动态功能行104和物理输入机构(诸如,一组物理键(例如,图2A至图2B中的该组物理键106))和/或触控板(例如,图2B至图2C中的触控板108)。外围电子设备400的示例包括:外围键盘(例如,图2A至图2B中的外围键盘206)、外围触敏表面(例如,图2C中的第一外围输入机构212)或其他外围输入机构(例如,图2D中的第二外围输入机构222)。外围电子设备400与计算设备202(图2A至图2D)通信地耦接。例如,外围电子设备400使用通信协议(诸如,蓝牙、Wi-Fi 等),经由有线连接(诸如,USB或PS/2)或经由无线通信链路与计算设备202通信地耦接。外围电子设备400可依赖于电子设备300(图3A)中的一些部件或过程,或者这些部件或过程中的一些可由外围电子设备400 而不是电子设备300完成、位于外围电子设备400而不是电子设备300中或者由外围电子设备400而不是电子设备300容纳。
在一些实施方案中,外围电子设备400包括一个或多个存储器402 (其任选地包括一个或多个计算机可读存储介质)、存储器控制器422、一个或多个处理单元(CPU)420、外围设备接口418、RF电路408、音频电路 410、扬声器411、麦克风413、输入/输出(I/O)子系统406、其他输入或控制设备416以及外部端口424。外围电子设备400包括触敏显示系统412(例如,图2A至图2D中的动态功能行104)(在本文中有时也称为“触敏显示器”、“触摸屏”或“触摸屏显示器”)。
外围电子设备400任选地包括用于检测触敏表面(诸如,触敏显示系统412或触控板(例如,图2B至图2C中的触控板108))上的接触的强度一个或多个强度传感器465。外围电子设备400任选地包括用于在触敏表面(诸如,触敏显示系统412或触控板(例如,图2B至图2C中的触控板 108))上生成触觉输出的一个或多个触觉输出发生器467。这些部件任选地通过一个或多个通信总线或信号线403进行通信。
存储器402任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备或其他非易失性固态存储器设备。外围电子设备400的其他部件(诸如,CPU 420和外围设备接口418)对存储器402的访问任选地由存储器控制器422来控制。外围设备接口418可用于将CPU 420和存储器402耦接到I/O子系统406和其他电路。一个或多个处理单元420运行或执行存储在存储器402中的各种软件程序和/或指令集,以执行外围电子设备400的各种功能并处理数据。在一些实施方案中,外围设备接口418、CPU 420和存储器控制器 422任选地在单个芯片(诸如芯片404)上实现。在一些其他实施方案中,它们任选地在独立芯片上实现。
RF(射频)电路408接收和发送也被称为电磁信号的RF信号。RF电路408将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络和其他通信设备进行通信。RF电路408任选地包括用于执行这些功能的熟知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。无线通信任选地使用多种通信标准、协议和技术中的任何一种,包括但不限于近场通信(NFC)、蓝牙、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE 802.11b、IEEE 802.11g和/或 IEEE 802.11n)、Wi-MAX或任何其他合适的通信协议,包括在本文档提交日期还未开发出的通信协议。
任选的音频电路410、扬声器411和麦克风413提供用户和外围电子设备400之间的音频接口。音频电路410从外围设备接口418接收音频数据,将音频数据转换为电信号,并将电信号发送到扬声器411。扬声器411 将电信号转换为人类可听见的声波。音频电路410还接收由麦克风413从声波转换的电信号。音频电路410将电信号转换为音频数据,并且将音频数据传输到外围设备接口418用于处理。音频数据任选地由外围设备接口 418检索自和/或传输至存储器402和/或RF电路408。在一些实施方案中,音频电路410还包括耳麦插孔。耳麦插孔提供音频电路410和可移除的音频输入/输出外围设备(诸如,仅输出的耳机或者具有输出(例如,单耳或双耳耳机)和输入(例如,麦克风)二者的耳麦)之间的接口。
I/O子系统406将外围电子设备400的输入/输出外围设备(诸如,触敏显示系统412,例如图2A至图2D中的动态功能行104)耦接到外围设备接口418。I/O子系统406任选地包括显示控制器456、强度传感器控制器459、触觉反馈控制器461和用于其他输入或控制设备416的一个或多个输入控制器460。该一个或多个其他输入控制器460从其他输入或控制设备 416接收电信号/将电信号发送到其他输入或控制设备416。其他输入或控制装置416任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮、一组物理键、触控板等等。
触敏显示系统412(例如,图2A至图2D中的动态功能行104)提供外围电子设备400和用户之间的输入/输出接口。触敏显示器(TSD)控制器 456从触敏显示系统412接收电信号和/或将电信号发送至触敏显示系统 412。触敏显示系统412向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频和它们的任何组合(统称为“图形”)。在一些实施方案中,部分或全部视觉输出对应于用户界面对象/元素。
触敏显示系统412(例如,图2A至图2D中的动态功能行104)包括基于触觉接触接收来自用户的输入的触敏表面、传感器或传感器组。因此,触敏显示系统412和TSD控制器456(连同存储器402中的任何相关联的模块和/或指令集)检测触敏显示系统412上的接触(以及该接触的任何移动或中断),并将所检测到的接触转换为用于选择或控制在触敏显示系统412上显示的用户界面对象(例如,一个或多个软键、图标、网页或图像)的信号。在一个示例性实施方案中,触敏显示系统412和用户之间的接触点对应于与用户手指接触的触敏显示系统412的区域。
触敏显示系统412(例如,图2A至图2D中的动态功能行104)任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、LED (发光二极管)技术或OLED(有机发光二极管)技术,但是在其他实施方案中可使用其他显示技术。触敏显示系统412和TSD控制器456任选地使用现在已知的或以后将开发出的多种触摸感测技术(包括但不限于电容性技术、电阻性技术、红外线技术和表面声波技术)中的任何技术以及其他接近传感器阵列或用于确定与触敏显示器412的一个或多个接触点的其他元件来检测接触及其任何移动或中断。在一个示例性实施方案中,使用投影式互电容感测技术,诸如从Apple Inc.(Cupertino,California)的和中发现的技术。
触敏显示系统412(例如,图2A至图2D中的动态功能行104)任选地具有超过400dpi(例如,500dpi、800dpi或更大)的视频分辨率。在一些实施方案中,用户使用触笔、手指等来与触敏显示系统412接触。在一些实施方案中,用户界面被设计成主要与基于手指的接触和手势工作。
在一些实施方案中,除了触敏显示系统412之外,外围电子设备400 任选地包括触控板(例如,图2B至图2C中的触控板108)。在一些实施方案中,触控板是外围电子设备400的触敏区域,该触敏区域与触敏显示系统412不同,不显示视觉输出。在一些实施方案中,触控板任选地是与触敏显示系统412分开的触敏表面,或由触敏显示系统412形成的触敏表面的延伸部分。
外围电子设备400还包括用于为各种部件供电的电力系统462。电力系统462任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC)等)、再充电系统、电力故障检测电路、功率转换器或逆变器、电力状态指示器(例如,发光二极管(LED))以及与便携式设备中电力的生成、管理和分配相关联的任何其他部件。
外围电子设备400任选地还包括与I/O子系统406中的强度传感器控制器459耦接的一个或多个接触强度传感器465。接触强度传感器465任选地包括一个或多个压阻应变仪、电容式力传感器、电气力传感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器465 从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施方案中,至少一个接触强度传感器与触敏表面(例如,触敏显示系统412和/或图2B至图2C中的触控板108)并置排列或邻近。
外围电子设备400任选地还包括与I/O子系统406中的触觉反馈控制器461耦接的一个或多个触觉输出发生器467。触觉输出发生器467任选地包括一个或多个电声设备,诸如扬声器或其他音频部件;和/或将能量转换成线性运动的机电设备,诸如马达、螺线管、电活性聚合器、压电致动器、静电致动器或其他触觉输出生成部件(例如,将电信号转换成设备上的触觉输出的部件)。接触强度传感器465从触觉反馈模块433接收触觉反馈生成指令,并生成能够由外围电子设备400的用户感测到的触觉输出。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,触敏显示系统412和/或图2B至图2C中的触控板108)并置排列或邻近,并且任选地通过竖直地(例如,向外围电子设备400的表面内/外)或侧向地(例如,在与外围电子设备400的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。
在一些实施方案中,存储在存储器402中的软件部件包括操作系统 426、通信模块428(或指令集)、接触/运动模块430(或指令集)和动态功能行模块450(或指令集)。此外,在一些实施方案中,存储器402存储设备状态457,包括指示哪些视图或其他信息占据触敏显示系统412(例如,图2A至图2D中的动态功能行104)的各个区域的显示状态。
操作系统426包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、功率管理等)的各种软件部件和/或驱动器,并且促进各种硬件部件和软件部件之间的通信。
通信模块428促进通过一个或多个外部端口424和/或RF电路408与其他设备(例如,图2A至图2D中的计算设备202)进行通信,并且还包括用于经由RF电路408和/或外部端口424发送/接收数据的各种软件部件。外部端口424(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备或者间接地通过网络(例如,互联网、无线LAN等)进行耦接。
接触/运动模块430任选地检测与触敏显示系统412和其他触敏设备 (例如,触控板或物理点击轮)的接触。接触/运动模块430包括各种软件部件以用于执行与接触检测相关的各种操作,诸如确定是否已经发生了接触(例如,检测手指按下事件)、确定接触强度(例如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪跨触敏表面的移动(例如,检测一个或多个手指拖动事件),以及确定接触是否已经停止(例如,检测手指抬起事件或者接触中断)。接触/运动模块 430从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变),所述接触点的移动由一系列接触数据表示。这些操作任选地被应用于单点接触(例如,单指接触)或者多点同时接触(例如,“多点触摸”/ 多个手指接触)。在一些实施方案中,接触/运动模块430还检测触控板 (例如,图2B至图2C中的触控板108)上的接触。
在一些实施方案中,接触/运动模块430使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如,确定用户是否已在示能表示上进行选择或“点击”)。在一些实施方案中,根据软件参数来确定强度阈值的至少一个子集(例如,强度阈值不由特定物理致动器的激活阈值来确定,并且可在不改变外围电子设备400的物理硬件的情况下调节)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏显示器的鼠标“点击”阈值可被设置为预定义的阈值的大范围中的任一个阈值。另外,在一些具体实施中,向设备的用户提供用于调节该组强度阈值中的一个或多个强度阈值(例如,通过调节各个强度阈值和/或通过对“强度”参数进行系统级点击来一次调节多个强度阈值)的软件设置。
接触/运动模块430任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触模式(例如,所检测到的接触的不同运动、时间和/或强度)。因此,任选地通过检测特定接触图案来检测手势。例如,检测手指轻击接触包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。又如,在触敏表面上检测手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且在一些实施方案中,随后还检测手指抬起(抬离)事件。
触觉反馈模块433包括用于生成指令的各种软件部件,该指令由一个或多个触觉输出发生器467使用,以便响应于用户与外围电子设备400的交互而在外围电子设备400上的一个或多个位置处产生触觉输出。
动态功能行(DFR)模块450包括:焦点获取模块451、DFR确定模块 452和DFR呈现模块453。在一些实施方案中,焦点获取模块451被配置为获得活动用户界面元素的指示,该活动用户界面元素是显示在来自计算设备202(图2A至图2D)的外围显示设备204(图2A至图2D)的主显示器102上的图形用户界面的当前焦点。在一些实施方案中,DFR确定模块452被配置为基于作为当前焦点的活动用户界面元素来确定图形(例如,一组一个或多个示能表示)。或者,在一些实施方案中,计算设备202 (图2A至图2D)基于聚焦的活动用户界面元素来确定图形(例如,所述一组一个或多个示能表示),并且将所述图形提供给外围电子设备400或其部件(例如,DFR模块450)以用于在触敏显示系统412(例如,图2A 至图2D的动态功能行104)上显示。在一些实施方案中,DFR呈现模块 453被配置为将由DFR确定模块452确定(或由计算设备202提供)的图形呈现在触敏显示系统412(例如,图2A至图2D的动态功能行104) 上。DFR呈现模块453包括用于在触敏显示系统412上呈现图形和使图形显示的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉属性)的部件。在一些实施方案中,DFR模块450包括用于以下操作的模块:调节动态功能行104 的灵敏度;调节由动态功能行104提供的可听和/或触觉反馈;调节由动态功能行104显示的示能表示和信息的设置(例如,大小、亮度、字体、语言等);调节动态功能行104的当前功率模式(例如,正常模式和低功率模式);等等。
在一些实施方案中,存储器402包括事件分类器470(例如,在操作系统426中)。在一些实施方案中,事件分类器470执行与事件分类器370 (图3B)相同的功能,并且包括事件分类器370(图3B)的模块、过程和指令的子集或超集。因此,为了简洁起见,将不会描述事件分类器470。
应当理解,外围电子设备400仅是一个示例,并且外围电子设备400 任选地具有比所示出的更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图4中所示的各种部件在硬件、软件、固件或它们的任何组合(包括一个或多个信号处理和/或专用集成电路)中实施。
每个上述模块对应于用于执行上述一种或多种功能以及本专利申请所述的方法(例如,本文所述的计算机实现的方法和其他信息处理方法)的可执行指令集。这些模块(即,指令集)不必以独立的软件程序、过程或模块实现,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。在一些实施方案中,存储器402任选地存储上述模块和数据结构的子集。此外,存储器402任选地存储上面未描述的附加的模块和数据结构。
如本文所用,术语“焦点选择器”是指用于指示用户正与之进行交互的用户界面的当前部分的输入元素。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素 (例如,按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如,图3中的触控板355或图4中的触敏表面451)上检测到输入(例如,按压输入)的情况下,该特定用户界面元素根据所检测到的输入而被调节。在包括使得能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器的一些具体实施中,在触摸屏上所检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如,通过接触的按压输入)时,根据所检测到的输入来调节该特定用户界面元素。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据用户界面的不同区域之间的焦点移动而移动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制以便传送用户打算的与用户界面的交互(例如,通过向设备指示用户界面的用户打算与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触摸板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
如在本说明书和权利要求书中所使用的,术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如,手指接触或触笔接触)的力或压力(每单位面积的力),或是指触敏表面上的接触的力或压力的替代物 (代用物)。接触的强度具有值范围,该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如,至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中,来自多个力传感器的力测量值被合并(例如,加权平均或者加和)以确定估计的接触的力。类似地,触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地,在触敏表面上检测到的接触区域的大小和/或其变化、接触附近的触敏表面的电容和/或其变化以及/或者接触附近的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中,接触力或压力的替代物测量直接用于确定是否已超过强度阈值(例如,强度阈值是以与替代物测量对应的单位来描述的)。在一些具体实施中,将接触力或压力的替代测量值转换为预估力或压力,并且使用预估力或压力确定是否已超过强度阈值(例如,强度阈值是以压力单位测量的压力阈值)。使用接触的强度作为用户输入的属性,从而允许用户访问用户在用于(例如,在触敏显示器上)显示示能表示和/或接收用户输入(例如,经由触敏显示器、触敏表面或物理控件/机械控件诸如旋钮或按钮)的实地面积有限的尺寸更小的设备上本来不能容易地访问的附加设备功能。
在一些实施方案中,接触/运动模块130使用一组一个或多个强度阈值来确定用户是否已经执行操作(例如,确定用户是否已经“点击”图标)。在一些实施方案中,根据软件参数来确定强度阈值的至少一个子集 (例如,强度阈值不由特定物理致动器的激活阈值来确定,并且可在不改变系统100的物理硬件的情况下调节)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏显示器的鼠标“点击”阈值可被设置为预定义的阈值的大范围中的任一个阈值。另外,在一些具体实施中,向设备的用户提供用于调节一组强度阈值中的一个或多个强度阈值(例如,通过调节各个强度阈值和/或通过利用对“强度”参数的系统级点击一次调节多个强度阈值)的软件设置。
如说明书和权利要求书中所使用的,接触的“特征强度”这一术语是指基于接触的一个或多个强度的接触的特征。在一些实施方案中,特征强度基于多个强度样本。特性强度任选地基于相对于预定义事件(例如,在检测到接触之后,在检测到接触抬起之前,在检测到接触开始移动之前或之后,在检测到接触结束之前,在检测到接触的强度增大之前或之后和/或在检测到接触的强度减小之前或之后)而言在预先确定的时间段(例如, 0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间采集的预定义数量的强度样本或一组强度样本。接触的特性强度任选地基于以下各项中的一者或多者:接触强度的最大值、接触强度的均值、接触强度的平均值、接触强度的前10%处的值、接触强度的半最大值、接触强度的90%最大值等。在一些实施方案中,在确定特性强度时使用接触的持续时间 (例如,在特性强度是接触的强度在时间上的平均值时)。在一些实施方案中,将特性强度与一组一个或多个强度阈值进行比较,以确定用户是否已执行操作。例如,该组一个或多个强度阈值可包括第一强度阈值和第二强度阈值。在本示例中,特征强度未超过第一阈值的接触导致第一操作,特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作,并且特征强度超过第二阈值的接触导致第三操作。在一些实施方案中,使用特征强度和一个或多个强度阈值之间的比较来确定是否要执行一个或多个操作(例如,是否执行相应选项或放弃执行相应操作),而不是用于确定执行第一操作还是第二操作。
在一些实施方案中,识别手势的一部分以用于确定特征强度。例如,触敏表面可接收连续的轻扫接触,该连续的轻扫接触从起始位置过渡并到达结束位置(例如拖动手势),在该结束位置处,接触的强度增加。在该示例中,接触在结束位置处的特征强度可仅基于连续轻扫接触的一部分,而不是整个轻扫接触(例如,仅结束位置处的轻扫接触部分)。在一些实施方案中,可在确定接触的特征强度之前向轻扫手势的强度应用平滑化算法。例如,该平滑化算法任选地包括以下各项中的一者或多者:不加权滑动平均平滑化算法、三角平滑化算法、中值滤波器平滑化算法和/或指数平滑化算法。在一些情况下,这些平滑化算法消除了轻扫接触的强度中的窄的尖峰或凹陷,目的是确定特征强度。
在一些实施方案中,使用一个或多个预定义的强度阈值来确定特定输入是否满足基于强度的标准。例如,一个或多个预定义的强度阈值包括:(i) 接触检测强度阈值IT0,(ii)轻按压强度阈值ITL,(iii)深按压强度阈值ITD (例如,至少最初高于IL),和/或(iv)一个或多个其他强度阈值(例如,低于IL的强度阈值IH)。在一些实施方案中,轻按压强度阈值对应于这样的强度:在该强度下设备将执行通常与点击物理鼠标的按钮或触控板相关联的操作。在一些实施方案中,深按压强度阈值对应于这样的强度:在该强度下设备将执行与通常与点击物理鼠标或触控板的按钮相关联的操作不同的操作。在一些实施方案中,当检测到特征强度低于轻按压强度阈值(例如,并且高于标称接触检测强度阈值IT0,比标称接触检测强度阈值低的接触不再被检测到)的接触时,设备将根据接触在触敏表面上的移动来移动焦点选择器,而不执行与轻按压强度阈值或深按压强度阈值相关联的操作。一般来讲,除非另有陈述,否则这些强度阈值在不同组的用户界面附图之间是一致的。
在一些实施方案中,设备对设备所检测到的输入的响应取决于基于输入期间的接触强度的标准。例如,对于一些“轻按压”输入,在输入期间超过第一强度阈值的接触的强度触发第一响应。在一些实施方案中,设备对由设备所检测到的输入的响应取决于包括输入期间的接触强度和基于时间的标准的标准。例如,对于某些“深按压”输入,在输入期间超过第二强度阈值的接触的强度大于轻按压的第一强度阈值时,只有在满足第一强度阈值和满足第二强度阈值之间经过了延迟时间才会触发第二响应。该延迟时间通常在持续时间内小于200ms(例如,40、100或120ms,具体取决于第二强度阈值的量值,延迟时间随着第二强度阈值的增大而增加)。这个延迟时间帮助避免意外的深按压输入。又如,对于一些“深按压”输入,在达到第一强度阈值之后会出现敏感度降低的时间段。在这个敏感度降低的时间段期间,提高第二强度阈值。第二强度阈值的临时增大也有助于避免意外的深按压输入。对于其他深按压输入,对检测到深按压输入的响应不取决于基于时间的标准。
在一些实施方案中,输入强度阈值中和/或相应输出的一个或多个基于一个或多个因素而改变,诸如用户设置、接触运动、输入定时、应用程序运行、施加强度的速率、并发输入的数量、用户历史、环境因素(例如环境噪声)、焦点选择器位置等。示例性的因素在美国专利申请序列号No. 14/399,606和14/624,296中有所描述,这些美国专利申请全文以引用方式并入本文中。
例如,图3C示出了动态强度阈值480,其部分地基于随时间推移的触摸输入476的强度而随时间变化。动态强度阈值480是两个分量的和,第一分量474在从最初检测到触摸输入476起预定义的延迟时间p1之后随时间衰减;以及第二分量478,其跟踪随时间推移的触摸输入476的强度。第一分量474的初始高强度阈值减少了“深按压”响应的意外触发,同时如果触摸输入476提供足够的强度,仍然允许立即发生“深按压”响应。第二分量478通过触摸输入中的强度逐渐波动来减少“深按压”响应的意外触发。在一些实施方案中,当触摸输入476满足动态强度阈值480(例如,在图3C中的点481处)时,触发“深按压”响应。
图3D示出另一动态强度阈值486(例如,强度阈值ID)。图3D还示出另外两个强度阈值:第一强度阈值IH和第二强度阈值IL。在图3D中,虽然触摸输入484在时间p2之前满足第一强度阈值IH和第二强度阈值IL,但直到在时间482处经过了延迟时间p2之后才会提供响应。同样在图3D 中,动态强度阈值486随时间衰减,该衰减在从时间482经过预定义的延迟时间p1之后的时间488处开始(此时与第二强度阈值IL相关联的响应被触发)。这种类型的动态强度阈值减少了紧接在触发与较低强度阈值(例如第一强度阈值IH或第二强度阈值IL)相关联的响应之后或与此同时意外触发与动态强度阈值ID相关联的响应。
图3E示出又一个动态强度阈值492(例如,强度阈值ID)。在图3E 中,与强度阈值IL相关联的响应在从最初检测到触摸输入490开始经过延迟时间p2之后触发。同时,动态强度阈值492在从最初检测到触摸输入 490开始经过预定义的延迟时间p1之后衰减。因此,在触发与强度阈值IL相关联的响应之后,触摸输入490的强度减小,随后触摸输入490的强度的增大而不释放触摸输入490,这样可以触发与强度阈值ID(例如,在时间 494处)相关联的响应,即使当触摸输入490的强度低于另一个强度阈值例如强度阈值IL时也如此。
接触特征强度从低于轻按压强度阈值ITL的强度增大到介于轻按压强度阈值ITL与深按压强度阈值ITD之间的强度有时被称为“轻按压”输入。接触的特征强度从低于深按压强度阈值ITD的强度增大到高于深按压强度阈值ITD的强度有时被称为“深按压”输入。接触特征强度从低于接触检测强度阈值IT0的强度增大到介于接触检测强度阈值IT0与轻按压强度阈值 ITL之间的强度有时被称为检测到触摸表面上的接触。接触特征强度从高于接触检测强度阈值IT0的强度减小到低于接触检测强度阈值IT0的强度有时被称为检测到接触从触摸表面抬起。在一些实施方案中,IT0为零。在一些实施方案中,IT0大于零。在一些图示中,阴影圆或椭圆用于表示触敏表面上的接触强度。在一些图示中,没有阴影的圆或椭圆用于表示触敏表面上的相应接触而不指定相应接触的强度。
在本文中所述的一些实施方案中,响应于检测到包括相应按压输入的手势或响应于检测到利用相应接触(或多个接触)执行的相应按压输入来执行一个或多个操作,其中至少部分地基于检测到该接触(或多个接触) 的强度增大到高于按压输入强度阈值而检测到相应按压输入。在一些实施方案中,响应于检测到相应接触的强度增大到高于按压输入强度阈值来执行相应操作(例如,在相应按压输入的“向下冲程”上执行相应操作)。在一些实施方案中,按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于按压输入强度阈值,并且响应于检测到相应接触的强度随后减小到低于按压输入阈值来执行相应操作(例如,在相应按压输入的“向上冲程”上执行相应操作)。
在一些实施方案中,设备采用强度滞后以避免有时称为“抖动”的意外输入,其中设备限定或选择与按压输入强度阈值具有预定义关系的滞后强度阈值(例如,滞后强度阈值比按压输入强度阈值低X个强度单位,或滞后强度阈值是按压输入强度阈值的75%、90%或某个合理比例)。因此,在一些实施方案中,按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于对应于按压输入强度阈值的滞后强度阈值,并且响应于检测到相应接触的强度随后减小到低于滞后强度阈值来执行相应操作(例如,在相应按压输入的“向上冲程”上执行相应操作)。类似地,在一些实施方案中,仅在设备检测到接触的强度从等于或低于滞后强度阈值的强度增大到等于或高于按压输入强度阈值的强度并且任选地接触的强度随后减小到等于或低于滞后强度的强度时才检测到按压输入,并且响应于检测到按压输入(例如,根据环境,接触的强度增大或接触的强度减小)来执行相应操作。
为了容易解释,任选地,响应于检测到以下情况而触发对响应于与按压输入强度阈值相关联的按压输入或响应于包括按压输入的手势而执行的操作的描述:接触的强度增大到高于按压输入强度阈值、接触的强度从低于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接触的强度减小到低于按压输入强度阈值、或接触的强度减小到低于与按压输入强度阈值对应的滞后强度阈值。另外,在将操作描述为响应于检测到接触的强度减小到低于按压输入强度阈值而执行的示例中,任选地响应于检测到接触的强度减小到低于对应于并且小于按压输入强度阈值的滞后强度阈值来执行操作。如上所述,在一些实施方案中,这些响应的触发还取决于满足基于时间的标准(例如,在满足第一强度阈值和满足第二强度阈值之间已经经过了延迟时间)。
用户界面和相关联的过程
现在注意到可以由便携式计算系统100(图1A)或台式计算系统200 (图2A至图2D)实现的用户界面(“UI”)和相关联的过程的实施方案。在一些实施方案中,主显示器102在便携式计算系统100的显示器部分110(图1A)中实现。或者,在一些实施方案中,主显示器102在外围显示设备204(图2A至图2D)中实现。在一些实施方案中,动态功能行 104是在便携式计算系统100(图1A至图1B)的主体部分120中实现的触敏显示器。或者,在一些实施方案中,动态功能行104是在外围键盘206 (图2A至图2B)、第一外围输入机构212(图2C)或外围输入机构222 (图2D)中实现的触敏显示器。
图5A至图14E示出了根据一些实施例的用于在动态更新的触摸屏显示器上显示应用程序特定的示能表示的示例性用户界面。这些附图中的用户界面用于说明下面描述的方法和/或过程,包括图44A至图44D、图45A 至图45C、图46A至图46B、图47A至图47B以及图48A至图48C中的方法。本领域普通技术人员将理解,以下用户界面仅仅是示例。此外,本领域普通技术人员将理解,在实践中可以使用附加的示能表示和/或用户界面元素,或者可以使用更少的示能表示和/或用户界面元素。
图5A示出了主显示器102,其显示指示系统(即,操作系统)当前处于聚焦状态的状态托盘502,以及具有多个可执行/可选应用图标的应用程序(应用)托盘514,其包括邮件应用程序图标506(例如,对应于图3A 中的电子邮件客户端模块341)、web浏览器应用程序图标508(例如,对应于图3A中的web浏览模块345)、媒体播放器应用程序图标510(例如,对应于图3A中的媒体播放器模块344)、应用程序A图标512(例如,对应于游戏),以及照片应用程序图标515(例如,对应于图3A中的图像管理模块343)。在一些实施方案中,状态托盘502指示当前在前台运行的应用程序,并且还包括多个菜单(例如,图5A中的文件、编辑、查看、转到、窗口和帮助菜单),每个菜单包括该应用程序的一组相应控件。图5A还示出了主显示器102在对应于应用程序A图标512的位置处显示光标504。在一些实施方案中,光标504由便携式计算系统100(图 1A至图1B)的触控板108、台式计算系统200(图2A和2D)的外围鼠标208、外围键盘206(图2B)的触控板108、第一外围输入机构212(图 2C)的触控板108等控制。
图5A进一步示出了动态功能行104(例如,触敏显示器)基于主显示器102的当前焦点显示多个示能表示(即,由于没有应用程序窗口打开而显示操作系统)。例如,在图5A中,系统/操作系统当前在主显示器102 上聚焦。在图5A中,动态功能行104包括实现为物理和/或软键的持久控件,包括:离开示能表示516,其在(例如经由轻击接触)被激活时调用相应的功能(例如,退出目前在主显示器102上聚焦的应用程序或暂停游戏);和电源控件534,其在(例如,经由轻击接触)被激活时使得在动态功能行104和/或主显示器102上显示模态警报(例如,图14E中的模态警报5308)以注销、重新启动或关闭便携式计算系统100或台式计算系统 200。
在图5A中,动态功能行104还包括多个系统级示能表示,包括:用于调节主显示器102(图1A和图2A至图2B)的亮度的亮度示能表示 518;用于调节所述一组物理键106(图1A至图1B和图2A至图2B,当适用时)的亮度和/或动态功能行104的亮度的亮度示能表示力520;曝光示能表示522,当其(例如经由轻击接触)被激活时,使得在主显示器102 (图1A和图2A至图2B)上显示用于活动应用程序的预览窗口;用于执行本地搜索(例如,用于电子文档)和/或互联网搜索的搜索示能表示 524;发射台示能表示526,当其(例如经由轻击接触)被激活时,使得在主显示器102(图1A和图2A至图2B)上显示默认或用户选择的桌面小程序和工具;通知示能表示528,当其(例如经由轻击接触)被激活时,使得在主显示器102(图1A和图2A至图2B)上显示通知中心,包括最近的消息、通知、日历事件等;用于发起媒体项(例如,歌曲、播客、视频等) 的播放或暂停播放的播放/暂停示能表示530;以及用于调节正在播放的媒体项的音量的音量控制示能表示532。例如,当在亮度示能表示520上检测到轻击时,动态功能行104显示用于调节所述一组物理键106的亮度和/或动态功能行104的亮度的亮度滑块(例如,类似于图6F中的音量滑块 5100)。在一些实施方案中,多个系统级示能表示还包括用于访问与动态功能行104相关联的调节设置的设置示能表示(未示出),诸如符号/图标大小、触摸检测灵敏度、触觉反馈、可听反馈、用于聚焦变化的动画、功率模式等。
图5B示出了主显示器102响应于检测到图5A中利用光标504选择应用程序A图标512而显示应用程序A(例如,幻想RPG游戏)的窗口 536。在图5B中,应用程序A处于主菜单模式(例如,幻想RPG游戏暂停),并且窗口536显示应用程序A的主菜单。应用程序A的窗口536在主显示器102上聚焦。在图5B中,状态托盘502指示应用程序A在前台运行,并且应用程序托盘514还基于应用程序A图标512后面的阴影指示应用程序A在前台运行。在图5B中,应用程序A的窗口536包括左上角的用于关闭窗口536、使窗口536的最大化以及使窗口536最小化的三个可选示能表示(分别从左到右)。
图5B还示出响应于检测到图5A中利用光标504选择应用程序A图标 512,动态功能行104在除了持久控件(即,示能表示516和534)和多个系统级示能表示(即,示能表示518,520,522,524,526,528,530和532)之外还显示示能表示538。当(例如经由轻击接触)被激活时,示能表示538 使得动态功能行104显示对应于应用程序A的第一组示能表示和/或指示符(例如,图5C中的控件组A)。图5B进一步示出了动态功能行104在对应于示能表示538的位置处接收和检测接触540(例如,轻击接触)。
图5C示出了响应于检测到图5B中对示能表示538的选择,动态功能行104显示对应于应用程序A的第一组示能表示和/或指示符(例如,控件组A)以及至少一个系统级示能表示(例如,示能表示542)。在图5C 中,对应于应用程序A(例如,幻想RPG游戏)的第一组示能表示和/或指示符(例如,控件组A)包括与在玩应用程序A时由便携式计算系统100 或台式计算系统200的用户控制的游戏中角色/化身有关的健康指示符543 和威望指示符545。在图5C中,对应于应用程序A的第一组示能表示和/ 或指示符(例如,控件组A)还包括用于控制游戏中角色/化身的控制示能表示546-A、546-B和546-C。当(例如,经由轻击接触)被激活时,示能表示542使得动态功能行104显示多个系统级示能表示(例如,图5A中所示的示能表示518,520,522,524,526,528,530和532)。图5C还示出了动态功能行104接收和检测具有从第一位置548-A移动到第二位置548-B的接触544的向上轻扫手势。
图5D示出了响应于检测到图5C中的向上轻扫手势,动态功能行104 显示对应于应用程序A的第二组示能表示和/或指示符(例如,控件组B) 以及至少一个系统级示能表示(例如,示能表示542)。在图5D中,对应于应用程序A的第二组示能表示和/或指示符(例如,控件组B)包括用于在玩应用程序A时控制由便携式计算系统100或台式计算系统200的用户控制的游戏中角色/化身的控制示能表示546-D、546-E、546-F、546-G、 546-H、546-I、546-J和546-K。图5D还示出了动态功能行104在对应于示能表示542的位置处接收和检测接触552(例如,轻击接触)。
图5E示出响应于检测到图5D中对示能表示542的选择,动态功能行 104显示持久控件(即,示能表示516和534)、多个系统级示能表示 (即,示能表示518,520,522,524,526,528,530和532),以及对应于应用程序A的示能表示538。图5E还示出了主显示器102在对应于媒体播放器应用程序图标510的新位置处显示光标504。
图6A示出了主显示器102响应于检测到图5E中利用光标504选择媒体播放器应用程序图标510而显示媒体播放器应用程序的窗口554。例如,窗口554覆盖在窗口536上。在图6A中,窗口554显示与用户媒体库的音乐子部分相关联的多个专辑。在图6A中,用户媒体库的音乐子部分在主显示器102上聚焦,如由粗体显示的“音乐”和在窗口554中至少部分显示的专辑A至L所示。在图6A中,状态托盘502指示媒体播放器应用程序正在前台运行,并且应用程序托盘514还基于媒体播放器应用程序图标510 背后的阴影指示媒体播放器应用程序正在前台运行。图6A还示出了主显示器102在对应于用户媒体库的播客子部分的位置处显示光标504。
图6A进一步示出了动态功能行104响应于检测到图5E中利用光标 504选择媒体播放器应用程序图标510而显示多个专辑示能表示558(例如,专辑示能表示558-A至558-G)以及至少一个系统级示能表示(例如,示能表示542)。在图6A中,多个专辑示能表示558对应于当前在窗口554中显示的专辑的子集。在一些实施方案中,多个专辑示能表示558 反映了当前在窗口554中显示的专辑。例如,响应于(例如,经由轻击接触)选择专辑示能表示558-D,便携式计算系统100或计算设备200使得音频电路310(图3A)回放专辑D,并且还使得主显示器102在窗口554的“正在播放”区域中显示专辑D。
图6B示出了主显示器102响应于检测到图6A中利用光标504选择播客子部分而在窗口554中显示第一多个播客。在图6B中,窗口554显示与用户媒体库的播客子部分相关联的多个播客。在图6B中,用户媒体库的播客子部分在主显示器102上聚焦,如在菜单中由粗体显示的“播客”和在窗口554中至少部分显示的播客A至L所示。
图6B进一步示出了动态功能行104响应于检测到图6A中利用光标 504选择播客子部分而显示第一多个播客示能表示560(例如,播客示能表示560-A至560-G)以及至少一个系统级示能表示(例如,示能表示 542)。在图6B中,多个播客示能表示560对应于当前在窗口554中显示的播客的子集。例如,响应于(例如,经由轻击接触)选择播客示能表示 560-D,便携式计算系统100或计算设备200使得音频电路310(图3A)回放播客D,并且还使得主显示器102在窗口554的“正在播放”区域中显示播客D。图6B进一步示出了动态功能行104检测具有从第一位置564-A 移动到第二位置564-B的接触562的从右向左轻扫手势。
图6C示出了主显示器102响应于检测到图6B中的从右向左轻扫手势而在窗口554中显示第二多个播客示能表示560(例如,播客示能表示560-E至560-P)。图6C还示出了动态功能行104响应于检测到图6B中的从右向左轻扫手势而显示第二多个播客示能表示560(例如,播客示能表示 560-E至560-K)以及至少一个系统级示能表示(例如,示能表示542)。图6C进一步示出了动态功能行104在对应于播客示能表示560-J的位置处接收和检测接触566(例如,轻击接触)。
图6D示出了主显示器102响应于检测到选择图6C中的播客示能表示 560-J而在窗口554中显示播客J的回放。图6D还示出了主显示器102在对应于邮件应用程序图标506的位置处显示光标504。
图6D进一步示出动态功能行104响应于检测到选择图6C中的播客示能表示560-J而显示持久音量控件568以及回放控件和指示符。在图6D 中,持久音量控件568指示播客J未被静音,并且还显示播客J的均衡器反馈。在图6D中,回放控件包括用于控制播客J的倒回控件571、暂停控件 572和快进控件573。在图6D中,播放指示符包括对应于播客J(例如,封面设计或相关联的图像)的图像574、显示作者和播客J的标题的指示符 576,以及剩余时间指示符578。
图6E示出了主显示器102响应于检测到图6D中利用光标504选择邮件应用程序图标506而显示邮件应用程序的窗口580。例如,窗口580覆盖在窗口554和536上。在图6E中,窗口580显示用户收件箱中的多个电子邮件(例如,电子邮件A至F)的列表和所选电子邮件A的内容。在一些实施方案中,最新或最紧急的电子邮件显示在用户收件箱中的多个电子邮件的列表顶部,并且列表顶部的电子邮件被自动选中。在图6E中,电子邮件A在主显示器102上聚焦,因为电子邮件在多个电子邮件的列表中以粗体显示,并且电子邮件A的内容在窗口580中显示在列表下方。在图6E 中,状态托盘502指示邮件应用程序正在前台运行,并且应用程序托盘514 还基于邮件应用程序图标506背后的阴影指示邮件应用程序正在前台运行。
图6E还示出了动态功能行104响应于在图6D中检测到使用光标504 选择邮件应用程序图标506而显示对应于电子邮件A的多个示能表示(例如,示能表示582,584,586,588,590,592,594,596和598)以及至少一个系统级示能表示(例如,示能表示542)。在图6E中,对应于电子邮件A的多个示能表示包括:示能表示582,当其(例如经由轻击接触)被激活时,刷新收件箱;示能表示584,当其(例如经由轻击接触)被激活时,使得主显示器102显示用于撰写新电子邮件的子窗口(例如,如图7B所示);示能表示586,当其(例如经由轻击接触)被激活时,使得主显示器102显示用于回复电子邮件A的发送者的子窗口;示能表示588,当其(例如经由轻击接触)被激活时,导致主显示器102显示用于回复电子邮件A的所有接收者的子窗口;示能表示590,当其(例如经由轻击接触)被激活时,导致主显示器102显示用于转发电子邮件A的子窗口;示能表示592,当其 (例如经由轻击接触)被激活时,导致电子邮件A被归档到默认邮箱或文件夹;示能表示594,当其(例如经由轻击接触)被激活时,使得电子邮件A被删除;示能表示596,当其(例如经由轻击接触)被激活时,使得动态功能行104显示要应用于电子邮件A(例如,如图7A所示)的用于选择不同标记的一组示能表示,其可选地对应于预先存在的文件夹;以及示能表示598,当其(例如经由轻击接触)被激活时,使得主显示器102或动态功能行104显示用于搜索用户收件箱的搜索对话框。图6E进一步示出了动态功能行104在对应于持久音量控件568的位置处接收和检测接触599(例如,长按压手势)。
图6F示出了动态功能行104响应于在对应于图6E中的持久音量控件 568的位置处检测到长按压手势而显示用于调节播客J的回放音量的音量滑块5100,播客J在图6C中发起。音量滑块5100中的圆圈/拇指可以由便携式计算系统100或台式计算系统200的用户拖动来调节音量。或者,在一些实施方案中,动态功能行104响应于在对应于图6E中的持久音量控件 568的位置处检测到长按压手势而显示用于控制播客J的回放的回放控件 (例如,暂停、快进、快退、下一曲目、上一曲目等),该回放在图6C中发起。在图6F中,音量滑块5100覆盖在对应于电子邮件A的多个示能表示上。图6F还示出了动态功能行104在对应于示能表示596的位置处接收和检测接触5102(例如,轻击接触)。
在其他实施方案中,音量滑块5100被显示在与对应于电子邮件A的多个示能表示不同的区域中。这样,当音量滑块5100被激活时,对应于电子邮件A的多个示能表示(例如,示能表示582,584,586,588,590,592, 594,596和598)以动画方式滚动或收缩以确保有足够的显示空间来显示音量滑块5100。在一些实施方案中,响应于长按压手势将圆圈/拇指显示在使用者手指下方,以允许用户滑动圆圈/拇指,而不必从示能表示上移开接触。
图7A示出了动态功能行104响应于检测到在图6F中选择示能表示 596而显示应用于电子邮件A的用于选择不同标记的一组示能表示5103, 5104,5106,5108和5110,其可选地对应于预先存在的文件夹。在图7A 中,动态功能行104还显示用于停止在动态功能行104上显示所述一组示能表示5103,5104,5106,5108和5110并且在动态功能行104上显示对应于电子邮件A的多个示能表示(例如,如图6E所示)的退出示能表示 5112。图7A还示出了主显示器102在窗口580中对应于电子邮件撰写示能表示的位置处显示光标504。
图7B示出了主显示器102响应于检测到图7A中利用光标504选择电子邮件撰写示能表示而显示用于在窗口580内撰写新电子邮件的子窗口。在图7B中,用于撰写新电子邮件的子窗口在主显示器102上聚焦,因为电子邮件撰写示能表示以较粗线条显示,并且还如围绕用于撰写新电子邮件的子窗口的粗线所示。
图7B还示出了动态功能行104响应于检测到图7A中利用光标504选择电子邮件撰写示能表示而显示对应于撰写新电子邮件的一组示能表示。在图7B中,对应于撰写新电子邮件的所述一组示能表示包括示能表示 5114,当其(例如经由轻击接触)被激活时,使得便携式计算系统100或台式计算系统200发送新撰写的电子邮件;示能表示5116,其用于更改新电子邮件的文本的文本颜色;示能表示5118,其用于加粗显示新电子邮件的选定文本;示能表示5120,其用于斜体显示新电子邮件的选定文本;以及示能表示5122,其用于为新电子邮件的所选文本添加下划线。图7B进一步示出了动态功能行104在对应于持久音量控件568的位置处接收和检测接触5124(例如,轻击接触)。
图7C示出了主显示器102在用于在窗口580内撰写新电子邮件的子窗口中显示新电子邮件正文中文本,以及在位于字符“pl”之后的当前插入位置处显示指示符。
图7C还示出了动态功能行104显示持久音量控件568,该控件指示响应于在对应于图7B中的持久音量控件568的位置处检测到轻击接触而将播客J静音。在图7C中,持久音量控件568即使在图6C中已经发起播放的播客J被静音(即显示播客J仍在播放但被静音)的情况下,也显示播客J 的均衡器反馈。在图7C中,动态功能行104显示预测字词5126,5128和5130,以基于在窗口580内的子窗口中的插入点完成新电子邮件正文中正在键入的以“pl”开头的字词。图7C进一步示出了动态功能行104在对应于预测字词5126(即“planet”)的位置处接收和检测接触5132(例如,轻击接触)。
图7D示出响应于检测到在图7C中选择预测词5126(即,“planet”),主显示器102在子窗口中的新电子邮件的正文中显示字词“planet”,以在窗口580内撰写新电子邮件。图7D还示出了主显示器 102在对应于用于撰写新电子邮件的子窗口的“收件人:”字段的位置处显示光标504。
图8A示出了主显示器102响应于检测到图7D中利用光标504选择“收件人:”字段而显示对应于用户通讯录的菜单5134。在图8A中,菜单5134包括对应于用户通讯录的“所有联系人”组的多个联系人的列表 (例如,预先存在的或自动填充的联系人列表)。在图8A中,用户通讯录的“所有联系人”组在主显示器102上聚焦,如由菜单5134中围绕“所有联系人”组的粗线所示。
图8A还示出了动态功能行104响应于检测到图7D中利用光标504选择“To:”字段而显示对应于用户通讯录的“所有联系人”组的第一多个联系人示能表示5136(例如,联系人示能表示5136-A至5136-F)以及至少一个系统级示能表示(例如,示能表示542)。在图8A中,动态功能行 104还显示退出示能表示5112,当其(例如经由轻击接触)被激活时,使得主显示器102停止在主显示器102上显示菜单5134,并且还使得动态功能行104停止显示第一多个联系人示能表示5136。图8A还示出了动态功能行104检测具有从第一位置5140-A移动到第二位置5140-B(例如,用户从右向左滚动通过“所有联系人”)的接触5138的从右向左轻扫手势。
图8B示出了动态功能行104响应于检测到图8A中的从右向左轻扫手势而显示对应于用户通讯录的“所有联系人”组的第二多个联系人示能表示5136(例如,联系人示能表示5136-E至5136-J)以及至少一个系统级示能表示(例如,示能表示542)。图8B还示出了动态功能行104检测具有从第一位置5144-A移动到第二位置5144-B的接触5142的向上轻扫手势。
图8C示出了主显示器102响应于检测到图8B中的向上轻扫手势而显示对应于用户通讯录的“家庭”组的多个联系人的列表。在图8C中,用户通讯录的“家庭”组在主显示器102上聚焦,如由菜单5134中围绕“家庭”组的粗线所示。
图8C示出了动态功能行104响应于检测到图8B中的向上轻扫手势而显示对应于用户通讯录的“家庭”组的多个联系人示能表示5146(例如,联系人示能表示5146-A至5146-F)以及至少一个系统级示能表示(例如,示能表示542)。图8C进一步示出了动态功能行104在对应于联系人示能表示5146-D的位置处接收和检测接触5148(例如,轻击接触),该联系人示能表示与用户通讯录的“家庭”组内的名为“James H.”的联系人相关联。
图8D示出了主显示器102响应于检测到在图8C中选择联系人示能表示5146-D而在用于在窗口580内撰写新电子邮件的子窗口的“To:”字段中显示“James H.”。图8D还示出了响应于检测到在图8C中选择联系人示能表示5146-D,动态功能行104用对应于撰写新电子邮件的一组示能表示(例如示能表示5114,5116,5118,5120和5122)替换对应于用户通讯录的“家庭”组的多个联系人示能表示5146(例如,联系人示能表示5146-A 至5146-F)的显示。图8D进一步示出了动态功能行104在对应于所述至少一个系统级示能表示542的位置处接收和检测接触5150(例如,轻击接触)。
图8E示出响应于检测到图8D中对示能表示542的选择,动态功能行 104显示持久控件(即,示能表示516和534)、多个系统级示能表示 (即,示能表示518,520,522,524,526,528,530和532),以及对应于邮件应用程序的示能表示5152。图8E还示出了动态功能行104在对应于播放/ 暂停示能表示530的位置处接收和检测接触5154(例如,轻击接触)。例如,响应于检测到对播放/暂停提供530的选择,便携式计算系统100或台式计算系统200暂停回放播客J,该播客是通过关于图6C描述的交互而发起的,并且通过关于图7B的描述被静音。可以通过在图8E中随后选择播放/暂停示能表示530来重新发起播客J的回放。
图8F示出了主显示器102在对应于用于关闭窗口580的退出示能表示的位置处显示光标504。图8G示出了主显示器102响应于检测到图8F中利用光标504选择退出示能表示而显示模态警报5156。在图8G中,模态警报5156在主显示器102上聚焦。在图8G中,显示在主显示器102上的模态警报5156提示用户在关闭窗口580之前保存草稿电子邮件,并且包括“保存”示能表示、“不保存”示能表示和“取消”示能表示。图8G还示出了主显示器102在对应于“取消”示能表示的位置处显示光标504。在动态功能行上显示模态警报提高了效率并提供了更好的用户体验,因为它不需要用户在键盘和屏幕之间移动眼睛,也不需要用户将手从键盘移动到另一个输入设备诸如鼠标。
图8G进一步示出动态功能行104响应于检测到图8F中利用光标504 选择退出示能表示而显示模态警报5156和至少一个系统级示能表示(例如,示能表示542)。在一些实施方案中,模态警报是对应于由便携式计算系统100或台式计算系统200接收的电子邮件、SMS等的通知、与应用程序相关联的警报(例如,作为保存对话框、退出确认对话框,或发送电子邮件确认对话框)等。在图8G中,显示在动态功能行104上的模态警报 5156提示用户在关闭窗口580之前保存草稿电子邮件,并且包括“保存”示能表示5158、“不保存”示能表示5160和“取消”示能表示5162。示能表示5158,5160和5162仅仅是示例,并且其他示能表示可以用于控制或响应模态警报。
图8H示出主显示器102响应于检测到图8G中使用光标504选择“取消”示能表示而停止显示模态警报5156并维持用于撰写新电子邮件的子窗口的显示(如图8F所示)。图8H还示出响应于检测到图8G中使用光标 504选择“取消”示能表示,动态功能行104停止显示模态警报5156并显示持久控件(即,示能表示516和534)、多个系统级示能表示(即,示能表示518,520,522,524,526,528,530和532),以及对应于邮件应用程序的示能表示5152(如图8F所示)。
图9示出了响应于从便携式计算系统100的所述一组物理键106(图 1A至图1B)或从台式计算系统200的外围键盘206的所述一组物理键106 (图2A至图2D)接收到对应于指定物理键组合(例如,alt+tab)的信号,主显示器102显示应用程序选择窗口5164。在图9中,显示在主显示器102上的应用程序选择窗口5164包括:邮件应用程序图标506,当其 (例如,经由光标504的选择)被激活时,使得主显示器102在前台中显示对应于邮件应用程序的窗口580;媒体播放器应用程序图标510,当其 (例如,经由光标504的选择)被激活时,使得主显示器102在前台中显示对应于媒体播放器应用程序的窗口554;以及应用程序A图标512,当其 (例如,经由光标504的选择)被激活时,使得主显示器102在前台中显示对应于应用程序A的窗口536。图9还示出了主显示器102在对应于照片应用程序图标515的位置处显示光标504。
图9进一步示出了响应于从便携式计算系统100的所述一组物理键 106(图1A至图1B)或从台式计算系统200的外围键盘206的所述一组物理键106(图2A至图2D)接收到对应于指定物理键组合(例如,alt+tab) 的信号,动态功能行104显示应用程序选择窗口5164以及至少一个系统级示能表示(例如,示能表示542)。在图9中,显示在动态功能行104上的应用程序选择窗口5164包括:邮件应用程序图标506,当其(例如,经由轻击接触)被激活时,使得主显示器102在前台中显示对应于邮件应用程序的窗口580;媒体播放器应用程序图标510,当其(例如,经由轻击接触)被激活时,使得主显示器102在前台中显示对应于媒体播放器应用程序的窗口554;以及应用程序A图标512,当其(例如,经由轻击接触)被激活时,使得主显示器102在前台中显示对应于应用程序A的窗口536。
图10A示出了主显示器102响应于检测到图9中利用光标504选择照片应用程序图标515而显示照片应用程序的窗口5166。例如,窗口5166覆盖在窗口580,554和536上。在图10A中,窗口5166显示与用户照片库的全部照片子部分相关联的多张照片。在图10A中,用户照片库的全部照片子部分在主显示器102上聚焦,如由粗体显示的“照片”和在窗口5166中至少部分显示的照片A至L所示。在图10A中,状态托盘502指示照片应用程序正在前台运行,并且应用程序托盘514还基于照片应用程序图标515 背后的阴影指示照片应用程序正在前台运行。图10A还示出了主显示器 102在对应于窗口5166内的照片B的位置处显示光标504。
图10A进一步示出了动态功能行104响应于检测到图9中利用光标 504选择照片应用程序图标515而显示对应于用户照片库的全部照片子部分的多个示能表示(例如,示能表示5168,5170和5172)以及至少一个系统级示能表示(例如,示能表示542)。在图10A中,动态功能行104包括:搜索示能表示5168,其用于搜索用户的照片库;幻灯片放映示能表示5170,当其(例如,经由轻击接触)被激活时,以全屏模式发起所选照片或用户照片库的所有照片子部分中的所有照片的幻灯片放映(例如,如图 10C所示);以及滑块示能表示5172,其用于滚动从窗口5166中显示的用户照片库的全部照片子部分显示的照片。
图10B示出了主显示器102响应于检测到图10A中利用光标504选择照片B而在窗口5166中显示所选的照片B。在图10B中,所选的照片B 在主显示器102上聚焦,如窗口5166中围绕照片B的粗线所示。图10B 还示出了主显示器102在对应于幻灯片放映示能表示的位置处显示光标 504。
图10B进一步示出了动态功能行104响应于检测到图10A中利用光标 504选择照片B而显示对应于所选的照片B的一组示能表示。在图10B 中,对应于所选的照片B的所述一组示能表示包括:搜索示能表示5168,其用于搜索用户的照片库;缩放示能表示5174,其用于缩放到所选的照片 B;喜欢示能表示5176,其用于表示喜欢所选的照片B;幻灯片放映示能表示5170,当其(例如,经由轻击接触)被激活时,以全屏模式发起所选照片或用户照片库的全部照片子部分中的所有照片的幻灯片放映(例如,如图10C所示);信息示能表示5178,其用于在动态功能行104和/或主显示器102上显示对应于所选照片B的信息,诸如大小、位置、时间/日期等;编辑示能表示5180,当其(例如经由轻击接触)被激活时,使得动态功能行104显示用于编辑所选的照片B的工具(例如,如图10F所示)和/ 或使得主显示器102显示用于编辑所选的照片B的编辑界面;照片添加示能表示5182,其用于将所选的照片B添加到相簿中;分享示能表示5184,其用于通过一种或多种通信模式(例如,社交媒体网络、SMS、电子邮件等)分享所选的照片B;以及删除示能表示5186,其用于从用户照片库中删除所选的照片B。
图10C示出了响应于检测到图10B中利用光标504选择幻灯片放映示能表示,主显示器102在窗口5188中显示来自用户照片库的全部照片子部分的照片的幻灯片放映。在图10C中,主显示器102以全屏模式显示包含照片B的窗口5188。
图10C还示出响应于检测到图10B中利用光标504选择幻灯片放映示能表示,动态功能行104显示多个缩略图(即缩略图5192-Y、5192-Z、5192-A、5192-B、5192-C、5192-D和5192-E),这些缩略图对应于用户照片库的全部照片子部分中的照片。在图10C中,围绕缩略图5192-B的粗线表示照片B当前被主显示器102显示。在图10C中,动态功能行104还显示暂停示能表示5190,当其(例如,经由轻击接触)被激活时,使得幻灯片放映被暂停并且还使得主显示器102退出全屏模式。图10C进一步示出了动态功能行104在对应于暂停示能表示5190的位置处接收和检测接触 5194(例如,轻击接触)。
图10D示出主显示器102响应于检测到在图10C中对暂停示能表示 5190的选择而在窗口5166内以展开视图显示照片B。在图10D中,所选的照片B的展开视图在主显示器102上聚焦,如窗口5166中围绕照片B 的展开视图的粗线所示。
图10D还示出了动态功能行104响应于检测到在图10C中对暂停示能表示5190的选择而显示对应于照片B的一组示能表示。在图10D中,对应于照片B的所述一组示能表示包括:缩放示能表示5174,当其(例如,经由轻击接触)被激活时,使得动态功能行104和/或主显示器102显示缩放控件,这些缩放控件使便携式计算系统100或台式计算系统200的用户能够放大或缩小照片B;全屏示能表示5194,当其(例如,经由轻击接触)被激活时,使得主显示器102以全屏模式显示照片B;幻灯片放映示能表示5170,当其(例如,经由轻击接触)被激活时,以全屏模式发起所选照片或用户照片库的全部照片子部分中的所有照片的幻灯片放映;信息示能表示5178,其用于在动态功能行104和/或主显示器102上显示对应于所选照片B的信息,诸如大小、位置、时间/日期等;编辑示能表示5180,当其(例如经由轻击接触)被激活时,使得动态功能行104显示用于编辑所选的照片B的工具和/或使得主显示器102显示用于编辑所选的照片B的编辑界面;照片添加示能表示5182,其用于将所选的照片B添加到相簿中;以及分享示能表示5184,其用于通过一种或多种通信模式(例如,社交媒体网络、SMS、电子邮件等)分享所选的照片B。图10D进一步示出了动态功能行104在对应于全屏示能表示5196的位置处接收和检测接触 5196(例如,轻击接触)。
图10E示出主显示器102响应于检测到在图10D中对全屏示能表示 5196的选择而在窗口5200内以全屏模式显示照片B。图10E还示出动态功能行104响应于检测到在图10D中对全屏示能表示5196的选择而显示最小化示能表示5198。当(例如经由轻击接触)被激活时,最小化示能表示 5198使得主显示器102在窗口5166内以展开视图显示照片B(如图10D所示)。图10E进一步示出了动态功能行104在对应于编辑示能表示5180 的位置处接收和检测接触5201(例如,轻击接触)。
图10F示出动态功能行104响应于检测到在图10E中对编辑示能表示 5180的选择而显示一组编辑工具5205。
图10F还示出了响应于检测到在图10E中对编辑示能表示5180的选择,动态功能行104显示具有加粗/粗体轮廓的编辑示能表示5180以及图 10E中显示的所有其他示能表示(例如,缩放示能表示5174、最小化示能表示5198、信息示能表示5178、照片添加示能表示5182和分享示能表示 5184),这些示能表示具有增加的半透明度。
在图10F中,所述一组编辑工具5205包括:旋转工具5202,当其 (例如经由轻击接触)被激活时,使得动态功能行104显示用于顺时针或逆时针旋转窗口5200内的照片B的控件;增强工具5204,当其(例如经由轻击接触)被激活时,使得动态功能行104显示用于增强照片B的控件,诸如向照片B应用滤镜、调节照片B的亮度、调节照片B的饱和度等等;防红眼工具5206,当其(例如经由轻击接触)被激活时,使得动态功能行104显示用于减少照片B中的人的红眼的控件;拉直工具5208,当其 (例如经由轻击接触)被激活时,使得动态功能行104显示用于拉直窗口 5200内的照片B的取向的控件;裁剪工具5210,当其(例如经由轻击接触)被激活时,使得动态功能行104显示用于在窗口5200内裁剪照片B的控件;以及润饰工具5212,当其(例如经由轻击接触)被激活时,使得动态功能行104显示用于润饰照片B的控件,例如消除和喷枪效果。图10F 进一步示出了动态功能行104在对应于拉直工具5208的位置处接收和检测接触5214(例如,轻击接触)。
图10G示出了动态功能行104响应于检测到在图10F中对拉直工具 5208的选择而显示用于拉直窗口5200内的照片B的取向的一组控件 5209。在图10G中,对应于拉直工具2208的所述一组控制件5209包括用于调节窗口5200内的照片B的取向的滑块5210,和完成示能表示5212,当其(例如经由轻击接触)被激活时,使得动态功能行104停止显示所述一组控件5209并且显示所述一组编辑工具5205(如图10F所示)。图10G 还示出了动态功能行104在对应于离开示能表示516的位置处接收和检测接触5216(例如,轻击接触)。
例如,便携式计算系统100或台式计算系统200的用户能够通过在起始于滑块5210上或所述一组控件5209内的位置处执行从左向右的轻扫/拖动手势或从右向左的轻扫/拖动手势来调节窗口5200内的照片B的取向。例如,响应于在动态功能行104上检测到向上的轻扫手势,动态功能行104 显示对应于裁剪工具5210的一组控件。在另一实施例中,响应于在动态功能行104上检测到向下的轻扫手势,动态功能行104显示对应于防红眼工具5206的一组控件。
图10H示出主显示器102响应于检测到在图10G中对离开示能表示 516的选择而在窗口5166内以展开视图显示照片B。图10H示出了动态功能行104响应于检测到在图10G中对离开示能表示516的选择而显示对应于照片B的一组示能表示(如图10D所示)。在图10H中,对应于照片B 的所述一组示能表示包括:缩放示能表示5174,当其(例如,经由轻击接触)被激活时,使得动态功能行104和/或主显示器102显示缩放控件,这些缩放控件使便携式计算系统100或台式计算系统200的用户能够放大或缩小照片B;全屏示能表示5194,当其(例如,经由轻击接触)被激活时,使得主显示器102以全屏模式显示照片B;幻灯片放映示能表示5170,当其(例如,经由轻击接触)被激活时,以全屏模式发起所选照片或用户照片库的全部照片子部分中的所有照片的幻灯片放映;信息示能表示5178,其用于在动态功能行104和/或主显示器102上显示对应于所选照片B的信息,诸如大小、位置、时间/日期等;编辑示能表示5180,当其 (例如经由轻击接触)被激活时,使得动态功能行104显示用于编辑所选的照片B的工具和/或使得主显示器102显示用于编辑所选的照片B的编辑界面;照片添加示能表示5182,其用于将所选的照片B添加到相簿中;以及分享示能表示5184,其用于通过一种或多种通信模式(例如,社交媒体网络、SMS、电子邮件等)分享所选的照片B。
图10H还示出了响应于便携式计算系统100或台式计算系统200对通知5218的接收,动态功能行104显示覆盖在示能表示5178,5180,5182和 5184上的通知5218。在图10H中,通知5218对应于由Suzie S.向便携式计算系统100或台式计算系统200的用户发送的SMS、即时消息等,其中该通知的内容询问“今晚看电影吗?”。图10H进一步示出了动态功能行104 检测具有从通知5128内的第一位置5222-A到第二位置5222-B的接触5220 的从左向右轻扫手势。
图11A示出动态功能行104响应于检测到图10H中的从左向右轻扫手势而停止显示通知5218。图11A还示出了主显示器102在对应于web浏览器应用程序图标508的位置处显示光标504。
图11B示出了主显示器102响应于检测到图11A中利用光标504选择 web浏览器应用程序图标508而显示web浏览器应用程序的窗口5224。例如,窗口5224覆盖在窗口5166上。在图11B中,窗口5224包括用于web 浏览器应用程序的控件,其中包括浏览控件(例如,上一个网页、下一个网页、刷新和添加到收藏夹)、地址栏、搜索栏、显示全部书签示能表示 (例如,类似于一本打开的书)、显示所有打开的标签示能表示(例如,六个方格组成的网格)以及特定书签A、B和C的示能表示。在图11B 中,窗口5224示出了web浏览器应用程序的主界面,包括链接到喜爱的网站或最常访问的网站A至H的多个示能表示5227。在图11B中,应用程序A的窗口5224在主显示器102上聚焦。在图11B中,状态托盘502指示web浏览器应用程序正在前台运行,并且应用程序托盘514还基于web 浏览器应用程序图标508背后的阴影指示web浏览器应用程序正在前台运行。
图11B还示出响应于检测到图11A中利用光标504选择web浏览器应用程序图标508,动态功能行104在除了持久控件(即,示能表示516和 534)和多个系统级示能表示(即,示能表示518,520,522,524,526,528, 530和532)之外还显示示能表示5226。当(例如经由轻击接触)被激活时,示能表示5226使得动态功能行104显示用于web浏览器应用程序的一组控件(例如,如图11C所示的示能表示5230,5232和5238以及地址栏 5234)。图11B进一步示出了动态功能行104在对应于示能表示5226的位置处接收和检测接触5228(例如,轻击接触)。
图11C示出了动态功能行104响应于检测在图11B中对示能表示5226 的选择而显示用于web浏览器应用的一组控件。在图11C中,用于web浏览器应用程序的所述一组控件包括:示能表示5230,其用于在窗口5224内显示web浏览器应用程序在当前显示的网页之前访问的网页;示能表示 5232,其用于在窗口5224内显示web浏览器应用程序在当前显示的网页之后访问的网页;示能表示5238,其用于将web浏览器应用程序当前显示的网页添加到收藏夹列表或书签文件夹;以及地址栏5234,其用于显示web 浏览器应用程序当前显示的网页的URL。在图11C中,地址栏5234还包括用于刷新web浏览器应用程序当前显示的网页的刷新示能表示5236。图 11C还示出了主显示器102在对应于链接到网站A的示能表示5227-A的位置处显示光标504。
图11D示出了主显示器102在检测到图11C中利用光标504选择对应于网站A的示能表示5227-A之后,在窗口5224内显示标签A的界面。在图11D中,标签A的界面在主显示器102上聚焦,如由围绕标签A的粗线和标签A的粗体文本所示。在图11D中,标签A的界面显示网站A的结账网页(例如,与URL:www.website_A.com/checkout相关联)。该结账网页对应于用户的虚拟购物车,其中包括购买的商品A和B。图11D还示出了主显示器102在对应于窗口5224内的购买示能表示的位置处显示光标 504。图11C进一步示出了动态功能行104在地址栏5234中显示网站A的结账网页的URL(例如,www.website_A.com/checkout)。
图11E示出了主显示器102响应于检测到图11D中利用光标504选择购买示能表示而显示重叠在窗口5224上的模态警报5240。在图11E中,在主显示器102上显示的模态警报5240提示便携式计算系统100或台式计算系统200的用户在动态功能行104上提供其指纹,并且还包括取消示能表示5242,当其(例如,经由光标504选择)被激活时,使得取消购买。例如,根据安全设置(例如,默认或用户指定的)来显示模态警报5240,该安全设置需要指纹来验证由便携式计算系统100或台式计算系统200发起的购买。例如,在一些实施方案中,主显示器102和/或动态功能行104 显示模态警报,提示便携式计算系统100或台式计算系统200的用户在登录到便携式计算系统100或台式计算系统200时,当输入密码以访问应用程序或网站时,当输入密码来解密由便携式计算系统100或台式计算系统 200存储的数据时,当从便携式计算系统100或台式计算系统200删除文件夹和/或数据时,当采取其他破坏性动作时等等,在动态功能行104上提供其指纹。
图11E示出了动态功能行104响应于检测到图11D中利用光标504选择购买示能表示而显示模态警报5240。在图11E中,在动态功能行104上显示的模态警报5240提示便携式计算系统100或台式计算系统200的用户在动态功能行104的指纹区域5244中提供其指纹,并且还包括取消示能表示5242,当其(例如,经由轻击接触)被激活时,使得取消购买。在一些实施方案中,动态功能行104被配置为检测动态功能行104的指纹区域 5244内的指纹,其也对应于图5A至图11D中的电源控件534。在一些实施方案中,动态功能行104被配置为检测在其触敏区域内的任何位置处的指纹。图11E进一步示出了动态功能行104在指纹区域5244内接收和检测接触5246(例如,按压并保持手势)。
图11F示出了主显示器102在检测到图11E中的指纹区域5244内的接触5246之后,在窗口5224内显示标签A的界面。在图11F中,标签A的界面显示网站A的收据网页(例如,与URL:www.website_A.com/reciept 相关联),指示在验证了图11E中便携式计算系统100或台式计算系统 200的用户提供的指纹之后,购买完成。
图11F还示出了动态功能行104响应于便携式计算系统100或台式计算系统200接收传入语音呼叫而显示与来自C.Chung的传入语音呼叫相关联的界面5248以及至少一个系统级示能表示(例如,示能表示542)。在图11F中,界面5248包括用于应答来电的第一示能表示5250和用于拒绝来电的第二示能表示5252。图11F进一步示出了动态功能行104在对应于第一示能表示5250的位置处接收和检测接触5254(例如,轻击接触)。例如,在检测到对第一示能表示5250的选择之后,针对该语音呼叫建立 C.Chung与便携式计算系统100或台式计算系统200的用户之间的通信连接(例如VoIP)。
图11G示出了动态功能行104在检测到图11F中对第一示能表示5250 的选择之后,显示与C.Chung和便携式计算系统100或台式计算系统200 的用户之间正在进行的语音呼叫相关联的界面5256以及至少一个系统级示能表示(例如,示能表示542)。在图11G中,界面5256包括用于结束语音呼叫的示能表示5258和语音呼叫总时间的指示符(例如,7分29秒)。在一些实施方案中,在语音呼叫正在进行期间,与主显示器102的焦点相关联的示能表示不会显示在动态功能行104上。在一些实施方案中,在语音呼叫持续了预定义的时间量之后,界面5256以紧凑模式显示,并且与主显示器102的焦点相关联的示能表示可以显示在动态功能行104上。图 11G还示出了动态功能行104在对应于示能表示5258的位置处接收和检测接触5260。
图11H示出了主显示器102在窗口5224内显示标签B的界面,其中标签A、B和C在web浏览器应用程序内打开。在图11H中,标签B的界面示出了网站B的主页(例如,相关联的URL为: www.website_B.com/home)。在图11H中,标签B的界面在主显示器102 上聚焦,如由围绕标签B的粗线以及标签B的粗体文本所示。
图11H还示出了动态功能行104在检测到图11G中对示能表示5258 的选择之后停止显示界面5256。在图11H中,动态功能行104包括地址栏 5234中网站B的主页的URL(例如,www.website_B.com/home)。在图 11H中,动态功能行104还包括:示能表示5262-A,其在(例如经由轻击接触)被激活时,使得主显示器102显示标签A的界面,并且还使动态功能行104在地址栏5234中显示对应于标签B的URL;以及示能表示5262- B,其在(例如经由轻击接触)被激活时,使得主显示器102显示标签C 的界面,并且还使得动态功能行104在地址栏5234中显示对应于标签C的 URL。
图12A示出响应于便携式计算系统100或台式计算系统200对通知 5264的接收,主显示器102显示覆盖在窗口5264上的通知5264。在图 12A中,通知5264对应于由SMAS向便携式计算系统100或台式计算系统 200的用户发送的SMS、即时消息等,其中该通知的内容询问“落地了吗?”图12A示出了主显示器102显示便携式计算系统100或台式计算系统200的用户利用光标504将通知5264拖动到主显示器102右下角的预定位置。例如,便携式计算系统100或台式计算系统200的用户能够使得响应于将相应的菜单、通知、模态警报等从其在主显示器102上的原始位置拖动到预定位置(例如,右下角或另一相似位置)而在动态功能行104上显示相应的菜单、通知、模态警报等。在一些实施方案中,预定位置是以类似的方式操作的多个预定义位置中的一个,其中这多个预定位置是默认位置或用户特定位置。
图12B示出了响应于图12A中便携式计算系统100或台式计算系统 200的用户利用光标504将通知5264拖动到主显示器102右下角的预定义位置,主显示器102停止显示覆盖在窗口5264上的通知5264。图12B还示出了响应于图12A中便携式计算系统100或台式计算系统200的用户利用光标504将通知5264拖动到主显示器102右下角的预定义位置,动态功能行104显示覆盖在示能表示5262-A和5262-B上的通知5264。图12B进一步示出了动态功能行104在通知5264内的位置处接收和检测接触5266 (例如,轻击接触)。
图12C示出响应于在图12B中的通知5264内的位置处检测到接触 5266,动态功能行104显示应答对话框5268。或者,在一些实施方案中,响应于在图12B中的通知5264内的位置处检测到接触5266,打开对应于通知5264的应用程序。在图12C中,应答对话框5268包括对图12A至图 12B中所示的通知5264的内容的多个预测应答。在图12C中,应答对话框 5268包括第一预测应答5270(“是的。”),第二预测应答5272(“没有。”)和第三预测应答5274(“在路上!”)。图12C还示出了动态功能行104在对应于第一预测应答5270的位置处接收和检测接触5276(例如,轻击接触)。例如,响应于对第一预测应答5270的选择,便携式计算系统100或台式计算系统200使得通过与向便携式计算系统100或台式计算系统200的用户发送通知5264的通信模式相同的通信模式(例如, SMS、即时消息等)将第一预测应答5270(“是的。”)发送到MAS。
图12D示出了主显示器102在窗口5224内的对应于显示全部书签示能表示(例如,类似于一本打开的书)的位置处显示光标504。图12E示出了主显示器102响应于检测到图12D中利用光标504选择显示全部书签示能表示而在窗口5224内显示书签侧边栏。在图12E中,书签侧边栏在主显示器102上聚焦,如围绕书签侧边栏的粗线所指示。图12E还示出了便携式计算系统100或台式计算系统200的用户利用光标504将书签侧边栏拖动到主显示器102右下角的预定位置。
图12F示出了响应于图12E中便携式计算系统100或台式计算系统 200的用户利用光标504将书签侧边栏拖动到主显示器102右下角的预定义位置,动态功能行104显示对应于所有预先存在的书签的书签示能表示 5278(例如,书签示能表示5278-A至5278-G)。例如,当所述一组书签示能表示5278中的相应一个(例如经由轻击接触)被激活时,主显示器102在窗口5224中的新标签中显示与所述一组书签示能表示5278中的这相应一个对应的网站。继续讨论该示例,当所述一组书签示能表示5278中的相应一个(例如,经由轻击接触)被激活时,动态功能行104停止显示所述一组书签示能表示5278并且显示用于web浏览器应用程序的一组控件,而且在地址栏5234中显示对应于所述一组书签示能表示5278中的该相应一个的网站的URL(例如,如图12E所示)。在图12F中,动态功能行 104还显示退出示能表示5112,当其(例如经由轻击接触)被激活时,使得动态功能行104停止显示所述一组书签示能表示5278并且显示用于web 浏览器应用程序的所述一组控件,如图12E所示。图12F还示出了主显示器102在对应于用于关闭窗口5224的退出示能表示的位置处显示光标 504。
图12G示出了动态功能行104响应于检测到在图12F中使用光标504 选择退出示能表示而显示覆盖在所述一组书签示能表示5278上的模态警报 5280。在图12G中,模态警报5280提示便携式计算系统100或台式计算系统200的用户确认其打算关闭web浏览器应用程序中所有打开的标签。在图12G中,模态警报5280包括:退出示能表示5282,当其(例如经由轻击接触)被激活时,使得主显示器102停止显示窗口5224;以及取消示能表示5284,当其(例如经由轻击接触)被激活时,解除模态警报5280并且使得主显示器102维持窗口5224的显示。图12G还示出了动态功能行104 在对应于离开示能表示5282的位置处接收和检测接触5286(例如,轻击接触)。
图12H示出了响应于检测到图12G中对退出示能表示5282的选择,主显示器102停止显示窗口5224并且显示照片应用程序的窗口5166。在图 12H中,状态托盘502指示系统/操作系统当前正在主显示器102上聚焦。图12H还示出了主显示器102在对应于窗口5166的位置处显示光标504。图12H进一步示出了响应于检测图12G中对退出示能表示5282的选择并且基于主显示器102的当前焦点(例如,系统/操作系统),动态功能行 104显示持久控件(即,示能表示516和534)以及多个系统级示能表示 (即,示能表示518,520,522,524,526,528,530和532)。
在图13A中,主显示器102的焦点是响应于检测到图12H中利用光标 504选择窗口5166的照片应用程序。更具体地讲,用户照片库的全部照片子部分在主显示器102上聚焦,如由粗体显示的“照片”和在窗口5166中至少部分显示的照片A至L所示。在图13A中,状态托盘502指示照片应用程序正在前台运行,并且应用程序托盘514还基于照片应用程序图标515 背后的阴影指示照片应用程序正在前台运行。图13A还示出了主显示器 102在对应于状态托盘502内的文件菜单的位置处显示光标504。图13A进一步示出了动态功能行104响应于检测到图12H中利用光标504选择窗口 5166而显示对应于用户照片库的全部照片子部分的多个示能表示(例如,示能表示5168,5170和5172)以及至少一个系统级示能表示(例如,示能表示542)。
图13B示出了主显示器102响应于检测到图13A中利用光标504选择文件菜单而显示文件控件菜单5288。在图13B中,文件控件菜单5288在主显示器102上聚焦。在图13B中,文件控件菜单5288包括新建相册控件、新建文件夹控件、新建日历控件、导入控件、导出控件、关闭窗口控件和打印控件。
图13B还示出了动态功能行104响应于检测到在图13A中利用光标 504选择文件菜单而显示第一多个示能表示5290。在图13B中,第一多个示能表示5290对应于由主显示器102显示的文件控件菜单5288中所示的文件控件。例如,当(例如,经由轻击接触)被激活时,示能表示5290-G (例如,对应于关闭窗口文件控件)使得主显示器102停止显示窗口 5166,并且还使得动态功能行104停止显示第一多个示能表示5290。图 13B还示出了动态功能行104接收和检测具有从第一位置5294-A移动到第二位置5294-B的接触5292的向上轻扫手势。
图13C示出了主显示器102响应于检测到图13B中的向上轻扫手势而显示编辑控件菜单5296。例如,主显示器102响应于检测到图13B中在动态功能行上的向下轻扫而显示帮助控件菜单。在图13C中,编辑控件菜单 5296在主显示器102上聚焦。在图13B中,编辑控件菜单5296包括撤销控件、重做控件、剪切控件、复制控件、粘贴控件、选择全部控件、查找控件、字体控件和特殊字符控件。
图13C还示出了动态功能行104响应于检测图13B中的向上轻扫手势而显示第二多个示能表示5298。在图13C中,第二多个示能表示5298对应于由主显示器102显示的编辑控件菜单5296中所示的编辑控件。例如,便携式计算系统100或台式计算系统200的用户能够通过在动态功能行104 上执行从左向右的轻扫手势来查看动态功能行104上的多个示能表示5298 (例如,特殊字符示能表示5289-I)的平衡。
图14A示出响应于从便携式计算系统100的所述一组物理键106(图 1A至图1B)或从台式计算系统200的外围键盘206的所述一组物理键106 (图2A至图2D)接收到对应于用于覆盖动态功能行104显示的当前示能表示的指定物理键(例如,功能键)或指定物理键组合的信号,动态功能行104显示第一多个示能表示5301以及持久控件(例如,示能表示516和534)。在图14A中,动态功能行104显示第一多个示能表示5301(例如,对应于F1至F12)以及用于停止在动态功能行104上显示第一多个示能表示5301的退出示能表示5112。在图14A中,动态功能行104还包括导航辅助5302,其指示第一多个示能表示5301是四组示能表示中的第一组。例如,便携式计算系统100或台式计算系统200的用户能够通过在动态功能行104上执行从左向右或从右向左的轻扫手势来显示出第一多个示能表示5301内的其他示能表示(例如,对应于F13,...)。在一些实施方案中,第一多个示能表示5301包括由计算系统的用户设置的定制符号行或一组最常使用的符号和/或特殊字符。
图14B示出响应于从便携式计算系统100的所述一组物理键106(图 1A至图1B)或从台式计算系统200的外围键盘206的所述一组物理键106 (图2A至图2D)接收到对应于用于覆盖动态功能行104显示的当前示能表示的指定物理键(例如,功能键)或指定物理键组合的第二信号,动态功能行104显示第二多个示能表示5303以及持久控件(例如,示能表示516和534)。或者,在一些实施方案中,响应于检测到图14A中动态功能行104上的向上轻扫手势,动态功能行104显示第二多个示能表示5303。在图14B中,动态功能行104显示第二多个示能表示5301(例如,对应于 1、2、3,...)以及用于停止在动态功能行104上显示第二多个示能表示 5303的退出示能表示量5112。在图14B中,导航辅助5302指示第二多个示能表示5302是四组示能表示中的第二组。例如,便携式计算系统100或台式计算系统200的用户能够通过在动态功能行104上执行从左向右或从右向左的轻扫手势来显示出第二多个示能表示5302内的其他示能表示。
图14C示出响应于从便携式计算系统100的所述一组物理键106(图 1A至图1B)或从台式计算系统200的外围键盘206的所述一组物理键106 (图2A至图2D)接收到对应于用于覆盖动态功能行104显示的当前示能表示的指定物理键(例如,功能键)或指定物理键组合的第三信号,动态功能行104显示第三多个示能表示5304以及持久控件(例如,示能表示516和534)。或者,在一些实施方案中,响应于检测到图14B中动态功能行104上的向上轻扫手势,动态功能行104显示第三多个示能表示5304。在图14C中,动态功能行104显示第三多个示能表示5304(例如,对应于~、!、@、#,…)以及用于停止在动态功能行104上显示第三多个示能表示5304的退出示能表示5112。在图14C中,导航辅助5302指示第三多个示能表示5302是四组示能表示中的第三组。例如,便携式计算系统100或台式计算系统200的用户能够通过在动态功能行104上执行从左向右或从右向左的轻扫手势来显示出第三多个示能表示5304内的其他示能表示。
图14D示出响应于从便携式计算系统100的所述一组物理键106(图 1A至图1B)或从台式计算系统200的外围键盘206的所述一组物理键106 (图2A至图2D)接收到对应于用于覆盖动态功能行104显示的当前示能表示的指定物理键(例如,功能键)或指定物理键组合的第四信号,动态功能行104显示第四多个示能表示5305以及持久控件(例如,示能表示516和534)。或者,在一些实施方案中,响应于检测到图14C中动态功能行104上的向上轻扫手势,动态功能行104显示第四多个示能表示5305。在图14D中,动态功能行104显示第四多个示能表示5305(例如,对应于 [,]、{,},…)以及用于停止在动态功能行104上显示第四多个示能表示 5305的退出示能表示5112。在图14D中,导航辅助5302指示第四多个示能表示5305是四组示能表示中的第四组。例如,便携式计算系统100或台式计算系统200的用户能够通过在动态功能行104上执行从左向右或从右向左的轻扫手势来显示出第四多个示能表示5305内的其他示能表示。图 14D进一步示出了动态功能行104在对应于电源控件534的位置处接收和检测接触5306(例如,轻击接触)。
图14E示出了动态功能行104响应于检测到在图14D中对电源控件 534的选择而显示模态警报5308。例如,模态警报5308覆盖在第四多个功能示能表示5305上。在图14E中,模态警报5308提示便携式计算系统 100或台式计算系统200的用户选择多个选项中的一个,包括:注销示能表示5310,当其(例如经由轻击接触)被激活时,使得便携式计算系统100 或台式计算系统200的当前用户从便携式计算系统100或台式计算系统200 (即图2A至图2D中的计算设备202)注销;重启示能表示5312,当其 (例如经由轻击接触)被激活时,使得便携式计算系统100或台式计算系统200(即图2A至图2D中的计算设备202)重启;断电示能表示5314,当其(例如经由轻击接触)被激活时,使得便携式计算系统100或台式计算系统200(即图2A至图2D中的计算设备202)断电;以及取消示能表示5316,当其(例如经由轻击接触)被激活时,使得动态功能行104停止显示模态警报5308。
在一些实施方案中,动态功能行104(在本文中也称为“触敏辅助显示器104”)被填充有允许用户容易地操纵用来在主显示器102上呈现内容的视觉特征的示能表示。图15A至图15H中示出了一些实施例。具体地讲,图15A示出了用户正在与主显示器102上的绘图应用程序交互。响应于对绘图应用程序内的可编辑部分的选择(例如,用户通过将光标504放置在所显示的人物线条画的头部上并且使用输入设备点击或按压来选择该头部),触敏辅助显示器104被更新为包括编辑选项。如图15A所示,响应于用户选择可编辑绘图对象的一部分,触敏辅助显示器被更新为包括各自对应于可用于所选择的可编辑对象类型的各种编辑功能的示能表示(例如,根据用户是选择图形还是文本内容来显示不同的示能表示,如以下参照图24A至图24N更详细地说明的)。
在一些实施方案中,各自对应于各种编辑功能的示能表示包括:(i)通用编辑示能表示5501,当其被选择时,使得触敏辅助显示器显示通用编辑选项;(ii)高亮样式示能表示5502,当其被选择时,使得触敏辅助显示器开始显示高亮选项;以及(iii)标记示能表示5503,当其被选择时(如图15A 所示),使得触敏辅助显示器开始显示用于修改用来在主显示器102上呈现内容的视觉特征的选项。
在一些实施方案中,响应于对标记示能表示5503的选择,触敏辅助显示器开始显示用于修改视觉特征的选项。在一些实施方案中并且如图15A 所示,这些选项被显示为与标记示能表示5503相邻(例如,在触敏辅助显示器的第一区域中显示各自对应于各种编辑功能的示能表示并且在相邻的第二区域显示选项)。在一些实施方案中,第一区域和第二区域被包括在触敏辅助显示器的应用程序特定部分内,并且其他示能表示被显示在应用程序特定部分的左侧(例如,图15A所示的“esc”示能表示)和右侧(例如,允许修改亮度的示能表示、用于控制计算系统后台中的媒体内容的回放以及音量的示能表示)。
在一些实施方案中,响应于检测到对颜色选择器示能表示的选择(例如,图15A中选择5010-A),使用覆盖显示模式示出了触敏辅助显示器,其中颜色选择选项被呈现为占据触敏辅助显示器104的应用程序特定部分的大部分。如图15B所示,颜色选择对象被呈现在用于修改用来在主显示器上呈现内容的视觉特征(例如,颜色)的用户界面控件5505(也称为颜色选择器5505)中。其他示例性视觉特征包括色彩、色调和不透明度。
在一些实施方案中,如果用户发起按压并保持手势(例如,用户接触用户界面控件5505中所示的特定颜色并且将该接触维持长于阈值量的时间,诸如0.5、1、1.5或2秒),或者如果用户接触特定颜色并且该接触的特征强度满足强度阈值,则触敏辅助显示器中所示的用户界面控件5505被更新为包括对应于该特定颜色的附加选项。例如,响应于在粉红色的表示上的输入5010-B(例如,按压并保持输入或满足强度阈值的输入),用户界面控件被更新为包括可供选择的其他粉红色色调。如图15C至图15D所示,响应于输入5010-B,在触敏辅助显示器内呈现其他粉红色色调以供选择,并且使用该特定颜色呈现主显示器102上的绘图应用程序内的可编辑对象的头部。
在一些实施例中,用户能够在触敏辅助显示器上的其他粉红色色调的整个表示上滑动输入5010-C,并且作为响应,使用每个接触到的粉红色色调来呈现主显示器102上显示的可编辑对象的头部。如图15D所示,用户使用输入5010-C接触不同的粉红色色调,并且作为响应,主显示器102使用不同的粉红色色调来呈现内容。在一些实施方案中,输入5010-A、5010- B和5010-C对应于一个连续输入,并且以这种方式,用户能够快速有效地预览在为特定视觉特征选择各种值之后对象会有怎样的外观。
在一些实施方案中,用户界面控件5505具有至少两个显示模式,其允许针对特定视觉特征在基本和高级修改功能之间进行选择。在一些实施方案中,用户能够通过选择模式切换示能表示5506来在这至少两种显示模式之间来回切换。例如,响应于图15B所示的输入5003,颜色选择器5505 以高级显示模式(与图15B至图15C所示的基本显示模式不同)示出,如图15E所示,并且模式切换示能表示以对应于颜色选择器5505的基本模式的不同显示状态示出。在一些实施方案中,高级显示模式还包括显示允许修改其他视觉特征的用户界面控件(图15F至图15H中分别示出了针对色调、阴影和不透明度的实施例)。在一些实施方案中,用户能够选择相应用户界面控件中的任何一个,然后能够在相应用户界面控件上进行滑动,以使得主显示器102开始呈现所选择的对象将会有怎样的外观的预览。
在一些实施方案中,当用户打开一个新的应用程序(例如,从图15A 至图15D所示的内容编辑应用程序切换)时,触敏辅助显示器104的应用程序特定部分改变为包括不同的示能表示。如图16A至图16M所示,触敏辅助显示器104包括允许用户快速有效地浏览网页内容并且直接从触敏辅助显示器104执行浏览器特定的功能的示能表示。在一些实施方案中,触敏辅助显示器104的应用程序特定部分显示对应于主显示器102上的web 浏览器中所示的标签的标签表示。图16A示出了当web浏览器仅包括单个标签时,触敏辅助显示器104中所示的示例性示能表示。根据确定web浏览器包括不止一个标签,触敏辅助显示器104被更新为包括对应于标签中的每一个的表示(例如,图16B至图16C和图16F至图16L中示出了针对2至10个标签的实施例)。在一些实施方案中,触敏辅助显示器104被配置为显示预定数量的标签(例如,最多15个标签,如图16M所示的实施例所示)的表示。
通过直接在触敏辅助显示器104内提供每个标签的表示,用户能够非常快速地浏览标签(例如,而不是必须使用触控板或使用复杂的键盘输入序列来循环标签)。在一些实施方案中,用户能够在触敏辅助显示器104 上提供允许在主显示器102上显示的每个标签之间快速导航的单一手势。图16C至图16E中示出了使用敏感辅助显示器104中示出的示能表示在网页内容的三个不同标签之间进行这种快速导航的一个实施例。下面参考方法1100和图49提供关于图16A至图16M的附加细节。
在一些实施方案中,触敏辅助显示器中示出的表示显示与主显示器 102上的web浏览器中的对应标签相关联的内容的收缩小/迷你视图(例如,如图12H所示,相应标签的每个表示包括对应标签的网页内容的迷你视图)。在一些实施方案中,还在触敏辅助显示器中针对空白标签(图 16N)、顶部站点标签(图16O)和收藏夹标签(图16P)显示了适当的表示。
在一些实施方案中,用户能够使用在触敏辅助显示器104中示出的示能表示来在主显示器102上显示的喜爱的站点的分级结构中进行导航。例如,图16Q示出了触敏辅助显示器104具有各自对应于一个或多个喜爱的站点的示能表示。响应于这些示能表示中的一个的选择(例如,在图16Q 中,输入5013选择收藏夹的“新闻和媒体”文件夹),主显示器102被更新为如触敏辅助显示器104那样(例如,以包括该文件夹中包括的喜爱的站点的表示,如图16R所示)。
根据确定主显示器102上显示的一个或多个喜爱的站点来自相同的基础域(例如,URL),触敏辅助显示器包括关于这一个或多个喜爱的站点的附加细节。例如,“DesignMilk”和“Dwell”收藏都来自“twitter.com”域,因此,触敏辅助显示器104包括附加细节(例如,除了 TWITTER图标外还包括TWITTER句柄,如图16S所示)。图16S至图 16T还示出了响应于经由主显示器102接收到的输入来更新触敏辅助显示器104。例如,响应于选择URL栏的输入5014和用户在URL栏中键入某些文本,触敏辅助显示器104被更新为包括文本完成选项(例如,“.com”、“.net”、“.org”等,以便在用户键入域名时提供帮助,如图 16T所示)。
图17A至图17G提供了经由触敏辅助显示器104向用户建议内容(例如,填写各种表单元素的内容)和动作(例如,提交付款的动作)的实施例。如图17A所示,当用户正在与包括主显示器102上的表单输入元素的网页交互时,触敏辅助显示器104被更新为包括用于填写表单元素的建议内容。例如,为用户提供了用于自动填写“家庭”或“工作”地址信息的示能表示(图17A)。又如,在填写初始表单元素并导航到支付输入页面之后,触敏辅助显示器104被更新为包括对应于所存储的信用卡详细信息的示能表示(如图17B所示)(在触敏辅助显示器104上选择特定示能表示之后,主显示器102被更新为包括对应于该特定示能表示的所存储的信用卡详细信息)。另一个非限制性实施例是提供用于输入建议的或存储的密码的示能表示(图17F至图17G)。
在一些实施方案中,触敏辅助显示器104还包括用于在用户提供已验证的指纹之后发送支付的示能表示(如图17C至图17E所示)。
在一些实施方案中,触敏辅助显示器104还显示对应于可经由媒体播放器应用程序提供的音频记录、视频记录和屏幕记录功能的示能表示。图 18A至图18I中示出了一些实施例。如图18A所示,响应于用户在主显示器102上打开音频记录对话框,触敏辅助显示器104被更新为包括用于启动音频记录的示能表示5061和用于配置音频选项的可选示能表示5060。
在一些实施方案中,响应于对示能表示5060的选择,触敏辅助显示器 104被更新为包括用于每个可用音频输入的可选选项(例如,用于“内置音频”的选项和用于“NeumannKMS”的另一个选项,如图18B所示)。在一些实施方案中,可选选项在触敏辅助显示器104内以重叠显示模式显示,并且响应于对敏感辅助显示器104左侧所示的“x”图标的选择,退出覆盖显示模式,并且触敏辅助显示器104再次出现,如图18A所示。
现在转到图18C,响应于用户在主显示器102上打开屏幕录制对话框,触敏辅助显示器104被更新为包括用于启动屏幕记录的第一示能表示和用于配置音频选项的可选第二示能表示。响应于检测到对第二示能表示的选择,触敏辅助显示器104被更新为呈现音频选项。在一些实施方案中,响应于检测到对第一示能表示的选择,触敏辅助显示器104被更新为呈现记录选项(包括用于选择要记录的屏幕的选项,如图18E所示),并且在用户从记录选项中进行选择之后,开始屏幕记录,并且主显示器102 被更新为指示屏幕记录已经开始。在其他实施方案中,屏幕记录在选择第一示能表示之后直接开始。
图18F至图18G示出了响应于用户打开视频记录对话框,触敏辅助显示器104中所示的示例性示能表示。在一些实施方案中,用户能够利用这些示能表示来快速地配置记录选项(并且不必在复杂的菜单分级结构中进行导航来定位这些选项),诸如相机选项和音频输入选项(如图18G所示)。
在一些实施方案中,如果用户开始记录音频、视频或屏幕内容,并且用户退出媒体应用程序,则触敏辅助显示器104被更新为包括状态指示符 (诸如正在进行的记录的文件大小)和允许控制正在进行的记录的用户界面控件(图18H)。在一些实施方案中,如果用户开始记录、通过打开 web浏览器应用程序来退出媒体应用程序,然后选择图18H所示的“x”图标(例如,输入5800),那么作为响应,触敏辅助显示器104被更新为包括对应于web浏览器的示能表示,并且在触敏辅助显示器104中提供对应于正在进行的记录的记录状态指示符5801(例如,如图18I所示)。
在一些实施方案中,在触敏辅助显示器104中呈现的控件和/或示能表示还有助于在播放媒体项时提供对有用功能的快速和容易的访问。有用的功能的一些示例包括通过在媒体项中搜索、选择字幕和音频配置选项和/或裁剪媒体项(图19A至图19K中提供了用于执行有用功能的触敏辅助显示器104中示出的示例性用户界面)。
如图19A所示,当主显示器102正在显示媒体项时,触敏辅助显示器 104包括该媒体项的一些部分的表示。在一些实施方案中,用户能够提供输入以便快速在媒体项中进行导航。例如,响应于输入5015-A和输入5015- A在触敏辅助显示器104上基本向右的方向上的移动,主显示器被更新成在媒体项中搜索(例如,从显示对应于图19A中的场景#1A的内容到显示对应于图19B中的场景#4A的内容)。触敏辅助显示器104还根据输入 5015-A的移动在媒体项的一些部分的表示中进行搜索。如图19B所示,根据确定输入5015-A满足基于时间或基于强度的阈值,触敏辅助显示器104 为输入5015-A当前接触的表示中的一个提供放大视图。
在一些实施方案中,媒体项的一些部分的这些表示对应于媒体项的类型。例如,根据确定媒体项为第一类型(例如,存储的视频内容或其他视频内容,其缩略图可用),触敏辅助显示器104包括该媒体项内的特定帧的缩略图表示。根据确定媒体项为第二类型(例如,其缩略图预览不可用的流式视频内容),触敏辅助显示器104不包括缩略图表示(如图16R所示)。根据确定媒体项为第三类型(例如,实时视频内容),触敏辅助显示器104不包括缩略图表示(如图19H所示)。根据确定媒体项为第四类型(例如,只含音频的内容),触敏辅助显示器104包括表示该媒体项的音频图形(例如,如图19I所示)。
在一些实施方案中,根据(例如,经由媒体内容提供商或其他相关联的实体)确定字幕可用,触敏辅助显示器104包括音频配置示能表示5805 (如图19F和19G所示)。响应于检测到对音频配置示能表示5805的选择,触敏辅助显示器被更新以显示该媒体项的可用字幕和音频配置选项 (例如,图19C和19D中示出的实施例)。
在一些实施方案中,上述媒体项也是可编辑的,并且触敏辅助显示器 104包括允许修改该媒体项的用户界面控件(例如,用以裁剪该媒体项,如图19J至图19K所示)。
现在转到图20A至图20G,示出了示例性用户界面,其中使用触敏辅助显示器104来帮助促进更快速输入数据,并且特别地,更快创建提醒 (或其他类型的应用程序的其他对象类型)。在一些实施方案中,响应于用户打开提醒应用程序,触敏辅助显示器104被填充以包括新建对象示能表示,当(例如,使用输入5016,如图20A所示)选择该示能表示时,导致创建新的对象提醒(或其他类型的应用程序的其他新内容项)。
响应于检测到输入5016,触敏辅助显示器104以非活动状态显示新建对象示能表示(即,新建对象示能表示变灰并且不可选择),显示提醒完成示能表示(例如,复选标记图标,当其被选择时,使得与触敏辅助显示器104通信的计算设备将主显示器102上当前选择的提醒标记为完成),提醒详细信息示能表示(例如,包括在一个圆圈内的i,当其被选择时,使得计算设备显示用于编辑与当前选择的提醒相关联的详细信息的选项),以及用于将文本添加到当前选择的提醒的文本输入选项。在一些实施方案中,提醒完成示能表示和提醒详细信息示能表示最初以非活动状态显示,直到用户为当前选择的提醒提供标题为止。如图20C所示,根据确定用户已经提供标题,触敏辅助显示器104以活动可选状态显示新建对象示能表示、提醒完成示能表示和提醒详细信息示能表示。图20C还示出了文本输入选项随用户提供附加文本而改变(例如,至少部分地基于用户先前输入的文本来选择新的文本输入选项)。
响应于在提醒详细信息示能表示处的输入(例如,输入5017),触敏辅助显示器104被填充以包括“添加时间”示能表示和“添加位置”示能表示(图20D),以替代先前显示的文本输入选项。
响应于检测到“添加时间”示能表示处的输入5018,触敏辅助显示器 104被填充以包括用于为主显示器102上当前选择的提醒选择日期和时间的选项。如图20E至图20F所示,当用户修改这些选项时,主显示器102上显示的提醒应用程序的用户界面相应地更新(例如,以反映用户将提醒时间从下午1点修改为下午1点45分)。
在一些实施方案中,响应于日期示能表示(例如,在图20E中显示“6 月25日”)处的手势(例如,与触敏辅助显示器104保持接触超过预定量的时间(例如0.5至1.5秒)的按压并保持手势),触敏辅助显示器被更新为包括允许选择新日期的控件。在一些实施方案中,允许选择新日期的控件出现并从该手势接触到触敏辅助显示器的位置延伸出来。在一些实施方案中,用户随后能够在该控件上滑动手势并选择用于提醒的新日期。在一些实施方案中,与显示该控件相结合,图20E所示的时间滑块被减小到仅显示所选择的时间范围的较小显示尺寸。
响应于检测到“添加位置”示能表示上的输入5019,触敏辅助显示器 104被填充为包括位置选择选项(如图20G所示)。如图20G所示,响应于对其中一个位置选择选项(例如,使用输入5020的“家庭”选项)的选择,主显示器102被相应地更新(例如,以包括对应于所选位置的地址和地图表示)。
在一些实施方案中,触敏辅助显示器104被填充以包括允许访问可经由桌面管理应用程序(例如,FINDER应用程序)提供的功能的示能表示。图21A至图21J示出了在触敏辅助显示器104中示出的示例性示能表示,当所述示能表示被选择时,使得与触敏辅助显示器104通信的计算设备执行各种文件管理功能(包括搜索文件、修改文件名和其他特征、分享、发布或移动文件,以及删除文件)。
在一些实施方案中,当用户最初访问桌面管理应用程序时,触敏辅助显示器104不显示用于该桌面管理应用程序的任何应用程序特定的示能表示,如图21A所示(在其他实施方案中,触敏辅助显示器104可以包括用于访问喜爱的文件夹的选项)。响应于在主显示器102上打开一个新窗口(例如,图21B中的“我的所有文件”窗口),并且在选择新窗口之内显示的文件之前,触敏辅助显示器104被填充以包括用于在各种文件夹、内部磁盘驱动器、可移动/外部磁盘驱动器等中进行导航的示能表示。例如,如图21B所示,触敏辅助显示器104包括用于导航到“iCloud Drive”、“Home”、“应用程序”、“文档”、“桌面”的示能表示,通过执行从右向左的轻扫手势可以显示出额外的示能表示。
在一些实施方案中,响应于对在所显示的新窗口中显示的相应文件的选择(例如,选择“只读文件”,如图21C所示,或选择某些其他文件,如图21D所示),触敏辅助显示器被更新为包括与相应文件交互的选项。在一些实施方案中,根据确定相应文件是只读文件,在触敏辅助显示器104 中呈现的一些选项以非活动显示模式示出(例如,“所选新文件夹”、“添加标签”和“移动到”选项在图21C中变灰)。在一些实施方案中,根据确定相应文件不是只读文件,以活动显示模式呈现所有选项(例如,如图21D所示)。
在一些实施方案中,响应于对选项中的任何一个的选择(例如,响应于输入5021、5022和5023中的任何一个),触敏辅助显示器104被更新。例如:响应于输入5021,触敏辅助显示器104被更新为包括用于标记相应文件的选项(如图21E所示);响应于输入5022,触敏辅助显示器 104被更新为包括用于移动相应文件的选项(如图21F所示);以及响应于输入5023,触敏辅助显示器104被更新为包括用于分享相应文件的选项 (如图21G所示)。
在一些实施方案中(并且如图21G所示),用于共享相应文件的选项包括经由邮件应用程序发送相应文件,经由近程通信协议(例如, AIRDROP)发送相应文件,和/或经由一个或多个社交网络应用程序(例如,TWITTER、FACEBOOK、INSTAGRAM等)发布相应文件。在用户选择图21G所示的分享/发送/发布选项中的一个之后,主显示器102被更新为显示适当的应用程序,并且触敏辅助显示器104被更新为显示较低级别的分享选项。例如,响应于输入5025(图21G),主显示器102被更新为显示适当的应用程序(例如,TWITTER应用程序,包括将被发布的相应文件的表示),并且触敏辅助显示器104被更新为显示用于向该发布添加文本的文本输入选项,以及一个按钮,该按钮当被选择时,发布相应文件和任何添加的文本。
又如,响应于输入5024-A(图21G),触敏辅助显示器104被更新为包括用于选择相应文件应被发送到哪个设备的较低级别的分享选项(例如,如图21I中所示,触敏辅助显示器包括可以将相应文件向其发送的多个附近设备中的每一个的示能表示)。响应于输入5024-B,计算设备发起相应文件的发送,并且触敏辅助显示器104被更新为包括反映发送进度的状态指示器5092(图21J)。
图22A至图22C示出了使用触敏辅助显示器104更快速地访问清空回收站功能的实施例(例如,而不是必须导航到、定位,然后从分级菜单中选择清空回收站功能),这些功能被显示在触敏辅助显示器104上以便使用单个输入进行选择。在一些实施方案中,当在没有选择任何文件的情况下查看“回收站”窗口时,触敏辅助显示器104包括一个示能表示,当该示能表示被选择时,使得计算系统清空整个回收站(例如图22A中的“清空回收站”示能表示)。在一些实施方案中(并且如图22B所示),当在选择了文件的情况下查看“回收站”窗口时,触敏辅助显示器104包括一些示能表示,当所述示能表示被选择时,使得计算系统清空整个回收站 (例如“删除所有”示能表示)、仅删除所选文件(例如“删除选定内容”示能表示),或者从回收站中移除所选文件(例如“放回”示能表示)。图22C示出了触敏辅助显示器104还可以响应于对“删除所有”或“清空回收站”示能表示的选择,显示来自主显示器102上的模态对话框的控件,从而允许用户通过仅在触敏辅助显示器104处提供输入来快速容易地完成清空回收站功能。
在一些实施方案中,在查看回收站窗口或在查看某个其他窗口(例如,“我的所有文件”窗口)时,用户能够通过选择搜索框来开始搜索所有文件。响应于对搜索框的选择,触敏辅助显示器104被更新为包括搜索选项(例如,用于选择应在其中进行搜索的目录或文件夹的选项,如图 23A所示,或用于选择是按“文件名”还是按“所有”进行搜索的选项,如图23B所示)。
在一些实施方案中,触敏辅助显示器104被填充以包括允许快速访问文档编辑功能的示能表示(在图24A至图24N中提供了几个实施例)。
特别地,如图24A所示,响应于用户打开文档编辑应用程序(例如,文字处理应用程序),触敏辅助显示器104被填充以包括用于执行文档编辑功能的一组示能表示。在一些实施方案中,该组示能表示包括第一示能表示5501(例如,通用编辑示能表示5501)、第二示能表示5502(例如,高亮样式示能表示5502)和第三示能表示5503(例如,标记示能表示5503)。在一些实施方案中,第一、第二和第三示能表示中的每一个与在用户输入之后显示的附加示能表示相关联。例如,响应于对第一示能表示 5501的选择,触敏辅助显示器104被更新为包括与第一示能表示相关联的附加示能表示(图24A)。
如图24A所示,与第一示能表示相关联的附加示能表示包括:(i)逆时针旋转示能表示,当其被选择时,使得主显示器102上的选定对象沿逆时针方向旋转90度;(ii)顺时针旋转示能表示,当其被选择时,使得主显示器 102上的所选对象沿顺时针方向旋转90度;(iii)矩形选择工具,当其被选择时,允许在主显示器102上使用矩形选择工具;(iv)可选文本选项示能表示;以及(v)裁剪示能表示,当其被选择时,使得裁剪显示在主显示器102 上的对象的选定部分。图24A还示出了(例如,经由输入5027)从触敏辅助显示器104选择矩形选择工具。
在图24B中,用户已经选择了主显示器102上显示的文档的一部分,并且还(例如,经由输入5028)从触敏辅助显示器104选择高亮样式示能表示5502。响应于对高亮样式示能表示5502的选择,触敏辅助显示器104 被更新为包括与该高亮样式示能表示相关联的附加示能表示,包括用于以各种颜色高亮的五个不同示能表示、下划线示能表示以及删除线示能表示 (图24C)。
图24C还示出了用户(例如,经由输入5029)对标记示能表示5503 的选择,并且作为响应,触敏辅助显示器104被更新为包括与标记示能表示5503相关联的默认示能表示(例如,图19K中所示的默认示能表示与标记示能表示5503相邻)。在一些实施方案中,默认示能表示包括在主显示器102包括图像内容的情况下显示的一个或多个可选示能表示5030。在一些实施方案中,当用户选择主显示器102上的对象时,使用基于当前在主显示器102上选择的对象的类型(例如,图形或文本对象)所选择的附加示能表示来替换默认示能表示。
例如,根据确定当前在主显示器102上选择的对象的类型是第一类型 (例如,是文本对象,诸如图24E所示的“**新文本对象”),那么附加示能表示包括图24E所示的那些示能表示。附加示能表示允许容易且快速地修改用来在主显示器102上呈现所选的对象的视觉特征(例如,如图24F 至图24G所示,用户可以通过简单地调节/滑动颜色选择器的控件来修改颜色特征)。根据确定当前在主显示器102上选择的对象的类型是第二类型 (例如,是绘制的图形对象,诸如图24G所示的红色直线),那么附加示能表示包括图24G所示的那些示能表示。
在一些实施方案中,如果用户尝试退出应用程序(例如,诸如图24H 中的主显示器102上所示的文档编辑应用程序),则触敏辅助显示器104 被更新为包括用于与模态保存对话框进行交互的选项。在一些实施方案中,触敏辅助显示器104还被配置为响应于打印当前显示在主显示器102 上的文档的请求(例如,如图24I所示)来显示打印选项。
图24J至图24K包括响应于修改线条样式的用户请求(例如,图 24J)和响应于修改文本样式的用户请求(例如,图24K)而在触敏辅助显示器104上显示的示例性示能表示。
在一些实施方案中,文档编辑功能可用于标记邮件消息(例如,电子邮件、文本消息等)中包括的对象。图24L至图24N提供了实施例,其中触敏辅助显示器104被填充以包括上面讨论的一些文档编辑功能(特别是与标记示能表示5503相关的功能)。
在一些实施方案中,触敏辅助显示器104被填充以包括用于执行解锁操作的示能表示。例如,图25A示出了请求访问锁定对象(例如,锁定的记事本文件对象)的输入5901。响应于检测到输入5901,触敏辅助显示器 104停止显示文本编辑和文本建议选项(如图25A所示),而是显示一条指示,表明可通过在触敏辅助显示器104上(或其邻近处)提供经授权的指纹来使锁定对象解锁。如图25B所示,触敏感应辅助显示器104包括用于记事本应用程序的图标,以及“使用Touch ID解锁记事本”的指示和指示用户应该在哪里提供指纹的箭头。以这种方式,用户能够通过提供单个输入(经授权的指纹)来使锁定对象解锁,而不必输入可能冗长的密码。
在一些实施方案中,触敏辅助显示器104也被填充以包括用于响应于以下情况而执行解锁功能的指示:(i)用户访问登录屏幕(例如,如图26A 所示)或尝试从登录屏幕或其他地方切换到不同用户(例如,如图26C所示);(ii)用户从锁定的屏幕保护程序退出(例如,如图26B所示);(iii) 用户尝试访问锁定的系统偏好(例如,如图26D所示);和(iv)用户尝试安装新部件(例如,如图26E所示)。
在一些实施方案中,如果计算系统与至少两个用户相关联(例如,计算系统已被配置为具有用于至少两个用户中的每个用户的登录配置文件),则当计算系统最初启动时,显示登录屏幕,该屏幕允许选择是作为所述至少两个用户中的第一个用户还是第二个用户登录。在一些实施方案中,响应于检测到相应用户已经(例如,在触敏辅助显示器104的接受指纹的区域)提供了经授权的指纹,计算系统将该经授权的指纹与第一用户或第二用户中的一个进行匹配,然后使得主显示器102显示特定于匹配用户的新登录屏幕(例如,新登录屏幕要求相应用户输入密码以获得对计算系统的访问权限)。以这种方式,相应用户只需提供指纹,而不必使用触控板或鼠标导航来从登录屏幕中选择至少两个用户中的一个。
在一些实施方案中,提供经授权的指纹使相应用户能够立即获得对计算系统的访问权限。在一些实施方案中,已经执行了初始登录(例如,在初始登录期间,输入密码以获得对计算系统的访问权限),并且计算系统已经在稍后的时间点被锁定。如果用户随后提供经授权的指纹以便在稍后的时间点之后获得访问权限,则根据确定经授权的指纹与计算系统的有效用户匹配,可以允许立即访问计算系统。在一些实施方案中,当计算系统在稍后的时间点被锁定时,至少两个用户在计算系统上具有主动登录会话 (这两个用户中的任一个能够仅提供指纹来重新获得对计算系统的访问权限)。针对以下参考图66和67描述的方法2800和2900提供关于使用生物特征传感器获得访问权限并在计算系统上执行其他功能的附加细节。
在一些实施方案中,触敏辅助显示器104被填充以包括用于在照片 (或其他媒体项)中进行导航、用于修改照片以及用于执行可经由照片编辑或照片浏览应用程序提供的其他功能的示能表示。图27A至图29T中示出了一些实施例。
具体地讲,图27A示出了当用户正在查看与主显示器102上的照片编辑应用程序相关联的多张照片时,触敏辅助显示器104被填充以包括这多张照片中每一张照片的表示(例如,这多张照片中每一张照片的迷你视图5070-B、5071-B等),以及用于与这多张照片进行交互的其他选项(例如,用以将照片中的一张标记为喜欢、用以旋转照片,和/或用以编辑照片)。图27A示出了照片编辑应用程序当前正在显示“照片E”,并且触敏辅助显示器104中的照片E的相应表示(例如,表示5071-B)以更大的格式显示以提供关于照片E是当前显示的照片的指示。
通过在触敏辅助显示器104上提供输入(例如,轻击或轻扫手势),用户能够快速在主显示器102上的多张照片中进行导航。例如,如图27B 所示,用户在触敏辅助显示器104上沿基本上从左向右的方向提供轻扫手势5068,并且作为响应,主显示器102和触敏辅助显示器104根据轻扫手势5068的移动而被更新。当轻扫手势5068行进穿过触敏辅助显示器104时,基于显示在触敏辅助显示器104中的轻扫手势5068接触到哪个表示,主显示器102上显示的照片被更新(如图27B所示)。
图27B还示出了(例如,经由输入5030)对触敏辅助显示器104上的编辑按钮的选择。响应于输入5030,触敏辅助显示器104被更新为包括用于主显示器102上显示的当前所选照片的照片编辑选项(例如,如图27C 所示)。在一些实施方案中,响应于对相应照片编辑选项的选择,触敏辅助显示器104被更新以反映该选择(例如,如图27D针对增强示能表示所示)。
响应于(例如,经由输入5031,如图27E所述)对工具导航示能表示的选择,触敏辅助显示器104被更新为包括附加编辑工具,其中包括“裁剪”、“滤镜”、“调节”、“润饰”和“防红眼”编辑功能。在一些实施方案中,触敏辅助显示器104还包括“x”图标,当该图标被选择时,使得触敏辅助显示器104停止显示覆盖的内容(例如,如图27G所示,响应于对“x”图标的选择,不再显示覆盖的内容)。
回到图27F的讨论,用户能够选择在触敏辅助显示器104上示出的任何附加编辑工具。在一些实施方案中,通过在附加编辑工具中的一个上轻击(例如,使用输入5032,5033,5034,5035和5036中的任何一个)来执行选择。在一些实施方案中,用户可以按压并保持工具导航示能表示上的输入(例如,图27E中的输入5031是按压并保持输入),然后用户将输入5031朝所需的附加编辑工具中的一个滑动(例如,输入5032至5036对应于输入5031的抬离或任何附加按压以指示选择)。图27H至图27K示出了在裁剪工具的输入5032之后可用的示例性控件(在一些实施方案中,这些控件包括用于旋转对象的控件(图27H至图27I)和用于修改对象的纵横比的控件(图27J至图27K))。
现在转到图27L至图27M,触敏辅助显示器104中示出了响应于滤镜工具上的输入5033而可用的示例性控件。对于输入5035和5036,在图 27N(润饰控件)和图27O(防红眼控件)中分别提供了响应于这些输入而显示在触敏辅助显示器104中的示例性控件。
现在转到图28A,其示出了响应于触敏副显示器104中的输入5034显示的示例性调整控件。如图28A所示,调整控件包括用于修改图像的亮度、颜色和对比度(“B&W”)方面的控件。响应于每个输入5039,5040和 5041(分别为图28A、图28B、图28C),触敏副显示器104被更新为包括允许分别修改图像的亮度、颜色和对比度的滑块控件(如图28A至图28C 所示,在触敏副显示器104处修改相应的滑块控件时,更新显示在主显示器102上的照片)。
在一些实施方案中,在触敏副显示器104中修改相应的滑块控制之后,显示使用蓝色突出显示的复选标记,以指示已经使用该修改呈现了显示在主显示器102上的照片。在一些实施方案中,用户能够通过轻击复选标记来容易地恢复修改(例如,响应于对于颜色滑块控件的复选标记处的输入5043,照片E不再使用颜色修改进行呈现,并且不再呈现触敏副显示器104上的蓝色突出显示,如图28F所示)。图28G提供了每个亮度、颜色和对比度滑块控件的各种呈现状态的概览。
图28H至图28L中示出了触敏副显示器104中显示并用于浏览照片的控件的附加示例。特别是:图28H示出了在敏感副显示器104中显示的控件,该控件用于以年/收藏级别导航照片;图28I示出了响应于在年/收藏级别浏览照片时对照片的选择,触敏副显示器104包括附加选项(包括个人收藏图标和旋转图标);图28J示出了浏览各个照片时对个人收藏图标的选择;图28K示出了如果在浏览照片(并且在一些实施方案中,在实时照片的表示处暂驻滑动条之后)时接触了实时照片的表示,则呈现不同的滑动条表示;并且图28L示出了如果在导航照片时接触了视频的表示(并且在一些实施方案中,在视频的表示处暂驻滑动条之后),则呈现另一个不同的滑动条表示,并且设置有播放按钮以允许回放视频。
在一些实施方案中,对于各种类型的视频,显示在触敏副显示器104 中的表示形式以不同方式呈现(例如,图28M中示出了slo-mo视频的示例,并且在图28N中示出了常规视频的示例)。一些实施方案还允许直接从触敏副显示器104裁剪视频(例如,如图28O至图28P所示)。
在一些实施方案中,当在照片应用程序中导航相册标签(例如,如图 29A至图29D所示)时,在照片应用程序中导航共享标签时(例如,如图 29E所示),以及在导航照片应用程序的活动标签时(例如,如图29F至图29J所示),提供显示在触敏副显示器104内的控件。
在一些实施方案中,显示在触敏副显示器104内的控件被提供用于幻灯片放映以及打印通过照片应用程序访问的产品(示例如图29K至图29O 中所示),从而允许用户将文本或照片快速且容易地添加到幻灯片放映,以及添加运送详情并配置打印顺序的排序选项。
在一些实施方案中,当在照片应用程序内搜索照片时,触敏副显示器 104填充了用于选择地图查看选项的控件(例如,帮助缩小对特定位置附近拍摄的照片的搜索,图29P)、用于选择搜索参数的控件(例如,图29Q) 和/或用于拾取照片导入照片应用程序的控件(例如,图29R至图29T)。
在一些实施方案中,触敏副显示器104填充有执行全系统搜索功能的示能表示。图30A至图30F中示出了一些示例。在一些实施方案中,响应于用户输入将文本添加到搜索查询(例如,在图30A和30B之间添加的文本“照片”),触敏副显示器104被更新为包括文本完成选项(如图30B 所示)。在一些实施方案中,触敏副显示器104也被填充以包括除了文本完成选项之外的应用控件示能表示。例如,图30C示出了联系人应用程序的应用程序控制示能表示,图30D和图30E示出了媒体播放应用程序的应用程序控制示能表示,图30F示出了地图应用程序的应用程序控制示能表示。在一些实施方案中,响应于主显示器102上的特定搜索结果的选择来显示应用程序控制示能表示,并且包括可用于与对应于特定搜索结果的内容进行交互的控件。
在一些实施方案中,使用触敏副显示器上的手势激活系统范围的搜索功能。例如,响应于跨触敏副显示器104的基本向下垂直方向的轻扫手势,主显示器显示用于全系统搜索的用户界面(例如,图30A中所示的用户界面)。在一些实施方案中,当主显示器正在显示桌面用户界面(例如,FINDER的页面)时,激活全系统搜索的该手势是可用的。
在一些实施方案中,触敏副显示器104填充有在各种工作区之间进行选择(例如,使用通过一些操作系统可用的任务控制功能)的示能表示。图31A至图31B中示出了一些示例。
在一些实施方案中,触敏副显示器104填充有用于导航在主显示器 102上显示的大量搜索结果的示能表示。图32A至图32E中示出了一些示例(以下参考方法1200和图50提供了附加细节)。
在一些实施方案中,在主显示器102上使用消息应用程序的情况下,触敏副显示器104填充有快速访问功能的示能表示。示例在图33A至图 33K中示出。
如图33A所示,响应于用户在主显示器102上显示的消息应用程序中创建新消息(或响应于用户选择了接收者区域内的消息应用程序中所示的“+”图标),触敏副显示器104被更新为包括用于将预测接收者添加到新消息的示能表示。例如,图33A包括针对第一预测接收者(John Appleseed 的家庭)的第一示能表示和针对第二预测接收者(John Campbell的家庭) 的第二示能表示。响应于从触敏副显示器104选择第一示能表示的输入 5045,更新主显示器102上的消息应用程序中的新消息以显示对应于第一预测接收者的地址。在美国申请序列号15/167,713中更详细地讨论了主动/ 预测的建议,其全部内容以引用方式并入本文。
在一些实施方案中,响应于对新消息(例如,输入5046-A)的文本输入字段的选择,触敏副显示器104开始显示(在图33B的触敏副显示器 104中从左到右示出)(i)麦克风示能表示,当其被选择时使得触敏副显示器 104经由消息应用程序显示用于录音和发送音频的选项(图33G至图 33K);(ii)表情符号示能表示,当其被选择时使得触敏副显示器显示用于选择表情符号以添加到新消息中的选项(图33C至图33D,下面还参考方法1500和图53更详细地描述);(iii)图片拾取器示能表示,当其被选择时使得触敏副显示器提供用于选择一个或多个照片以添加到新消息中的控件 (图33F,并且上面还参考图27A至图27B讨论了示例性图片拾取控件);以及(iv)预测的文本输入选项。
在一些实施方案中,在选择麦克风示能表示之后,触敏副显示器104 被更新为包括当选择时使计算系统开始录制音频的录音示能表示。在一些实施方案中,当正在录制音频时,触敏副显示器104被更新为包括所录制的音频的表示(如图33H所示)。在一些实施方案中,在音频已经完成录制(或用户选择触觉副显示器104中所示的停止录音按钮,图33H)之后,激活发送按钮(如图33I所示)。
在一些实施方案中,在通过输入与麦克风示能表示接触之后,该输入保持与麦克风示能表示接触以开始音频录制(如图33J所示)。在一些实施方案中,为了结束音频录制,用户将接触触敏副显示器的输入移除,并且作为响应,触敏副显示器包括完成的音频录制的表示、取消按钮和主动发送按钮。
在一些实施方案中,响应于对包括在主显示器102上的消息应用程序中显示的特定会话线程中的消息气泡(例如,包括从其他用户接收的内容的消息气泡)的选择,触敏副显示器104被更新为包括用于选择气泡确认的控件(例如,与照片拾取器示能表示相邻的是用于选择气泡确认的示例性控件)。在一些实施方案中,如果所选择的消息气泡对应于所述用户 (即,不是由其他用户)发送的消息,则触敏副显示器104不包括用于选择气泡确认的控件。
在一些实施方案中,如图34A至图34C所示,触敏副显示器104填充有用于控制联系人应用程序的示能表示。在一些实施方案中,响应于打开在主显示器102上显示的联系人应用程序,触敏副显示器104被更为包括用于控制联系人应用程序的以下示能表示(在“esc”示能表示之后从左到右显示):(I)“+”示能表示,当其被选择时使得联系人应用程序启动添加新联系人的过程;(ii)可选的电话呼叫示能表示,当其被选择时发起对当前在主显示器102上的联系人应用程序中选择的联系人的电话呼叫;(iii)可选的视频通话示能表示,当其被选择时,启动对当前在联系人应用程序中选择的联系人的视频呼叫;(iv)可选的即时消息示能表示,当其被选择时使得主显示器102开始显示用于向当前在联系人应用程序中选择的联系人发送消息的消息应用程序;(v)可选的电子邮件示能表示,当其被选择时使得主显示器102开始显示用于向当前在联系人应用程序中选择的联系人撰写电子邮件的电子邮件应用程序;(vi)编辑示能表示,当其被选择时使得触敏副显示器104显示编辑选项,并且使得主显示器102进入允许编辑当前在联系人应用程序中选择的联系人的模式;(vii)共享示能表示,当其被选择时使得触敏副显示器104显示用于共享当前在联系人应用程序中选择的联系人的选项。
在一些实施方案中,根据确定当前选择的联系人(即,在主显示器 102上具有焦点选择器)与允许拨打电话(例如,已存储联系人的电话号码)、发出视频呼叫(例如,已存储联系人适当的用户名或电子邮件)、发送即时消息(例如,已存储联系人适当的用户名或电子邮件)或发送电子邮件(例如,已存储联系人的电子邮件地址)的联系人详细信息相关联,显示可选的电话呼叫、视频呼叫、即时消息和电子邮件每者。在一些实施方案中,如果不满足该确定,则相应的可选示能表示完全不显示或者以非活动状态显示(即,相应的示能表示以灰色的不可选状态显示)。
图34A还示出了编辑示能表示上方的输入5049,并且响应于输入 5049,触敏副显示器104被更新为包括编辑控件,并且主显示器102进入允许编辑联系人的模式(如图34B中所示)。在一些实施方案中,基于在主显示器102上正在编辑的联系人详细信息来选择在触敏副显示器104中示出的编辑控件。例如,根据确定当前正在编辑名称、公司或部门字段(例如,在主显示器102上具有焦点选择器,如图34B中的名称字段所示),触敏副显示器104被更新为包括用于添加新的联系人详细信息(例如,新的电话号码、新的电子邮件地址、新的物理地址和/或新的生日等) 的控件。
又如,根据确定正在编辑电话号码字段(例如,在主显示器102上具有焦点选择器,如图34C所示),触敏副显示器104被更新为包括用于分配标签或移除在主显示器102上选择的电话号码的控件(如图34C所示)。
在一些实施方案中,如图35A至图35B所示,触敏副显示器104填充有用于控制计算器应用程序的示能表示。例如,响应于在主显示器102上打开计算器应用程序,触敏副显示器104被填充以包括用于控制计算器功能的示能表示(这些示能表示的示例在图35A中示出)。在一些实施方案中,触敏副显示器104还提供用于在各种货币之间快速转换的控件(例如,如图35B所示)。
在一些实施方案中,如图36A至图36W所示,触敏副显示器104填充有用于控制日历应用程序和修改与日历应用程序相关联的事件的示能表示。在一些实施方案中,示能表示包括允许导航各种日历视图的示能表示 (例如,图36A至图36D)、允许快速编辑事件详细信息的示能表示(例如,如图36E至图36T所示),以及允许响应待处理事件邀请的示能表示(例如,如图36U至图36W所示)。下面参考方法1300和图51提供关于图36A至图36W的附加细节。
在一些实施方案中,如图37A至图37M所示,触敏副显示器104填充有用于控制邮件应用程序的示能表示。在一些实施方案中,触敏副显示器 104用于有效地改变应用于在主显示器102上具有焦点选择器的电子邮件的标记。如图30A至图37C所示,用户能够在标记示能表示上启动按压和保持手势,并且作为响应,触敏副显示器104被更新以显示具有焦点选择器的电子邮件的标记选项,然后用户在所需标记(例如,紫色标记)上滑动 (按压和保持手势的连续移动)。触敏副显示器104然后被更新以示出已选择的所需标记(图37C)。
在一些实施方案中,响应于选择“移到”选项(在主显示器102或触敏副显示器104上),触敏副显示器104被更新为包括用于将电子邮件移到不同的文件夹或存储库的控件(示例在图37D至图37E中示出)。
在一些实施方案中,当用户正在编辑或撰写电子邮件消息时,触敏副显示器104被更新为包括文本完成的示能表示(图37F中所示的“I”、“The”和“it”选项),编辑所选文本的示能表示(图37G至图37H,图 37G中所示的键盘示能表示用于重新显示文本完成选项,而不是编辑文本的示能表示),选择表情符号的示能表示(图37I)和/或用于选择应用于文本和/或图形内容的颜色的示能表示(例如,图37J至图37K)。
在一些实施方案中,文本完成的示能表示包括字词预测(示例在图 37L中示出)、拼写校正和/或主动建议(示例在图37M中示出)。
在一些实施方案中,触敏副显示器104填充有用于控制电话应用程序的示能表示,如图38A至图38J所示。在一些实施方案中,当用户正在与第一应用程序(例如,网页浏览应用程序)进行交互时,接收到来电(例如,视频呼叫或音频呼叫)。响应于检测到已经接收到来电,计算系统使用与来电相关联的示能表示填充触敏副显示器104。例如,如图38A所示,触敏副显示器104填充有(i)来电人的表示(例如,来电人的照片和来电人想要发起呼叫的指示);(ii)消息示能表示,当其被选择时允许用户使用文本消息来响应来电(例如,通过从触敏副显示器104内选择预定的响应消息,或者通过打开主显示器102上的消息应用程序,使得用户可撰写消息以发送给来电人);(iii)拒绝示能表示,当其被选择时拒绝该来电(响应于检测到该来电已被拒绝,计算系统使触敏副显示器104恢复显示网页浏览应用程序的示能表示,例如,如图38E所示);(iv)接受示能表示,当其被选择时使计算设备接受来电;以及(v)提醒示能表示,当其被选择时使触敏副显示器104显示来电的提醒选项(响应于对提醒示能表示的选择而显示的示例性提醒选项示出于图38B)。
在一些实施方案中,响应于检测到对来电的接受,计算系统使得触敏副显示器104显示来电的状态信息,以及用于结束来电的结束示能表示和用于静音来电的静音示能表示,如图38C和图38D所示)。在一些实施方案中,如果在接收到来电时用户先前正在查看不同的应用程序(例如,上面所讨论的网页浏览应用程序),则触敏副显示器104以覆盖模式显示状态信息(图38C),其中显示允许退出覆盖模式并返回到不同应用程序的控件的“×”示能表示(例如,响应于在图38C中检测到对“×”示能表示的选择,触敏副显示器104恢复显示不同应用程序的控件,如图38E中所示的控件)。
在一些实施方案中,如果在接收到来电时用户正在查看电话应用程序 (例如,FACETIME应用程序),则触敏副显示器104显示如图38D中所示的状态信息,其中显示“esc”,而不是上面所讨论的“×”示能表示。下面关于智能标签按钮提供关于,在触敏副显示器104的最左侧区域(也被称为智能标签按钮的智能标签区域)中显示“×”、“esc”和其他示能表示之间的切换,取决于在主显示器102上正在查看或交互的内容的附加细节。
在一些实施方案中,根据确定来电是音频呼叫,触敏副显示器104然后由视频示能表示填充,当选择该视频示能表示时,向来电人启动开始视频呼叫的请求(视频示能表示的一个示例在图38F中示出)。
在一些实施方案中,如果在上述来电正在进行的同时接收到新呼叫,则触敏副显示器被填充以包括对应于该新呼叫的信息和示能表示(例如,如图38G(当接收新呼叫时显示的示能表示)至图38H(当接受新呼叫时显示的示能表示)所示)。在一些实施方案中,响应于检测到对合并示能表示的选择,两个或多个正在进行的呼叫被合并,并且更新触敏副显示器以反映两个或多个正在进行的呼叫已被合并(例如,如图38I所示,对应于两个或更多个正在进行的呼叫的表示被示出为重叠而不是分开的)。
在一些实施方案中,根据确定呼叫失败已经发生,触敏副显示器104 填充有用于发送消息和/或从失败的呼叫中呼叫另一方的示能表示(例如,如图38J所示)。
在一些实施方案中,触敏副显示器104填充有用于控制活动监测应用程序的示能表示,如图39所示。例如,这些示能表示包括用于在活动监测应用程序的每个标签之间进行切换的示能表示,并且这些示能表示中的每一个示能表示使用与相应的对应标签相关联的当前处理器活动的表示来显示(如图39所示)。
在一些实施方案中,触敏副显示器104填充有用于控制活动日志应用程序的示能表示,如图40所示。
在一些实施方案中,触敏副显示器104填充有用于访问某些功能,同时处于不同引导模式的示能表示(诸如,在与触敏副显示器104上的动态呈现控件不兼容的操作系统中,计算系统启动的模式,图41A至图 41B),用于查看系统偏好(例如,图41C的“全部显示”示能表示),以及用于捕获屏幕截图(例如,响应于预定义的键盘输入序列,诸如“command+shift+4”,(或者响应于用户选择在图35B的触敏副显示器的右侧系统托盘部分中所示的照片图标),触敏副显示器104被填充有用于捕获屏幕截图的控件,图41E)。
在一些实施方案中,触敏副显示器104填充有用于控制或向虚拟助理应用程序提供附加信息的示能表示,如图42A至图42B所示。在一些实施方案中,响应于来自用户的语言命令的接收,计算系统更新触敏副显示器 104。例如,计算系统向触敏副显示器104提供能够使得触敏副显示器104 呈现用于消除特定语言命令的歧义的选项的数据(例如,如图42A至图 42B所示)。
在一些实施方案中,触敏副显示器104填充有用于控制文本输入功能和用于访问一组非英文字符的示能表示,如图43A至图43D所示。在一些实施方案中,当用户正在与消息应用程序、文档编辑应用程序或允许文本输入和编辑的一些其他应用程序进行交互时,可通过触敏副显示器104获得用于访问一组非英文字符的示能表示。
在一些实施方案中,触敏副显示器104包括占据触敏副显示器104最左侧区域的智能标签按钮。在一些实施方案中,智能标签按钮基于用户在主显示器102上观看的内容,以及在某些情况下基于在特定时间点在触敏副显示器104中可用的控件而改变。例如,智能标签按钮可显示“esc” (允许用户退出在主显示器102上示出的当前显示的应用程序)、“×”(允许用户退出覆盖显示模式,并恢复到显示在主显示器102上具有焦点选择器的应用程序的控件)、“取消”(允许用户取消/恢复使用触摸副显示器104上的各种控件进行的改变)、“完成”(允许用户指示他们已经通过触敏副显示器104完成了作出某些改变)和“退出”。
在一些实施方案中,触敏副显示器104与多种显示模式相关联。在一些实施方案中,在触敏副显示器104处提供三个手指(或两个手指)的手势以在多个模式中的每一个模式之间切换。在一些实施方案中,手势以基本水平或基本垂直的方向提供。在一些实施方案中,多种模式包括:(i)自定义模式,其中触敏副显示器104显示由用户自定义的用于自定义模式的示能表示;(ii)当前上下文模式,其中触敏副显示器104显示对应于主显示器和系统级功能的示能表示;以及(iii)系统功能模式,其中触敏副显示器 104仅显示系统功能。
在一些实施方案中,在触敏副显示器104中呈现的示能表示是可自定义的,并且用户能够向触敏副显示器104添加和/或移除示能表示(在一些实施方案中,自定义仅在触敏副显示器104处于上述自定义模式时才可用)。例如,在触敏副显示器104显示在膝上型计算机的键盘上方并且在膝上型计算机的主显示器下方的实施方案中,呈现在主显示器上的示能表示(或包括多个示能表示的菜单)可被拖放到触敏副显示器,然后使用一个连续的手势在触敏副显示器内水平移动。在一些实施方案中,当示能表示在触敏副显示器内随处移动时,触敏副显示器的各个部分(例如,应用程序特定的和系统级区域)被强调/突出显示。
在一些实施方案中,用户能够在计算系统的触控板处提供绘图输入,并且响应于接收到该绘图输入,计算系统使得触敏副显示器104呈现供用户选择的候选形状。
在一些实施方案中,触敏副显示器104的亮度水平至少部分地基于主显示器102的亮度水平,并且至少部分地基于计算系统周围的环境光条件来确定。
现在将注意力转到图70A至图70D。在一些实施方案中,触敏副显示器动态地更新以包括用于与地图应用程序一起使用的各种控件。动态地更新触敏副显示器以包括这些控件有助于通过改进人机界面来提高包括触敏副显示器的电子设备的可操作性。例如,用户能够使用较少的交互来执行操作(即,用户不需要浪费时间搜索所需的菜单选项或示能表示,因为这些在触敏副显示器上动态提供,以便轻松地一键选择)并且用户能够维持与电子设备的交互。
如图70A所示,地图应用程序被呈现在主显示器102上,并且触敏副显示器104被更新为包括对应于地图应用程序的示能表示。例如,触敏副显示器104包括示能表示7001,当其被选择时,使得地图应用程序在主显示器上显示用户当前位置的标识符(例如,在地图上显示的反映用户当前位置的大头针)。在一些实施方案中,触敏副显示器还包括示能表示7002,当其被选择时,使得地图应用程序打开搜索界面。这样,用户不需要使用鼠标、触控板或其他设备来启动搜索界面,而是能够简单地选择示能表示7002来开始搜索地图应用程序,以获得所需地理位置。
在一些实施方案中,响应于示能表示7002处的用户输入,主显示器 102上的地图应用程序被更新为包括用于选择附近的多种类别的位置(例如,附近的餐厅、咖啡店、购物目的地、旅游景点、服务点、娱乐场所、健康服务点和交通相关服务)的示能表示(图70B)。如图70B所示,结合更新地图应用程序以包括用于选择附近的多种类别的位置的这些示能表示,触敏副显示器104动态地更新以包括允许快速选择各种附近多种类别的地点的示能表示。例如,示能表示7003,当其被选择时,使得地图应用程序搜索附近的餐厅;示能表示7004,当其被选择时,使得地图应用程序搜索附近的咖啡店;示能表示7005,当其被选择时,使得地图应用程序搜索附近的购物目的地;示能表示7006,当其被选择时,使得地图应用程序搜索附近的酒店;示能表示7007,当其被选择时,使得地图应用程序搜索附近的金融机构(诸如,银行或ATM);示能表示7008,当其被选择时,使得地图应用程序搜索附近的电影院;示能表示7009,当其被选择时,使得地图应用程序搜索附近的医院;以及示能表示7010,当其被选择时,使得地图应用程序搜索附近的加油站。在一些实施方案中(并且如图70B所示),触敏副显示器104还能够在有限的屏幕上提供更多的信息,例如通过包括可能不适合主显示器102的附加的附近搜索选项(不遮掩其下面显示的地图)。
现在转到图70C,在一些实施方案中,在用户搜索特定地理位置之后,或者在用户在与上述多种类别中的附近感兴趣的地点进行交互之后选择特定地理位置之后,触敏副显示器104被更新为包括示能表示,当这些示能表示被选择时,使得地图应用程序选择将由地图应用程序使用以提供路线信息的交通模式。例如,触敏副显示器可包括用于分别选择驾车、步行或交通运输模式的示能表示7011,7012和7013。
在图70D所示的示例中,用户已经选择了所需地理位置的交通运输方式,并且作为响应,触敏副显示器104被更新为包括允许启用到该地理位置的驾驶方向的示能表示(例如,示能表示7014)。在一些实施方案中,触敏副显示器104也被更新为包括附加示能表示(例如,示能表示7015至 7019),以允许用户在web浏览器中搜索地理位置(例如,示能表示7015)、拨打与该地理位置相关联的电话(例如,示能表示7016)、将该地理位置标记为第一地点(例如,示能表示7017)、查看关于该地理位置的更多信息(例如,示能表示7018)、以及通过许多各种共享平台共享该地理位置(例如,示能表示7019)。在一些实施方案中,所述许多各种共享平台可包括电子邮件、社交媒体(例如,TWITTER、FACEBOOK和其他类似的社交媒体共享平台)、文本消息等。
现在转到图71A至图75,其中示出了显示器(主显示器和触敏副显示器)的示意图,以用于说明在触敏副显示器上动态地提供控件以与各种视频编辑应用程序一起使用。例如,各种视频编辑应用程序可包括FINAL CUT PRO、MOTION、COMPRESSOR和IMOVIE,全部来自加利福尼亚州Cupertino市的APPLE INC.公司。动态地更新触敏副显示器以包括与视频编辑应用程序一起使用的控件,有助于通过改进人机界面来提高包括触敏副显示器的电子设备的可操作性。例如,用户能够使用较少的交互来执行操作(即,用户不需要浪费时间搜索所需的菜单选项或示能表示,因为这些在触敏副显示器上动态提供,以便轻松地一键选择)并且用户能够维持与电子设备的交互。
图71A至图71M是用于说明视频编辑应用程序的示例性用户界面(在所示示例中,视频编辑应用程序是FINAL CUT PRO)的主显示器102和触敏副显示器104的示意图。如图71A所示,主显示器102正在显示视频编辑应用程序的用户界面,其中用户正在与视频项目的时间轴进行交互,并且触敏副显示器104正在显示允许操纵视频时间轴的用户界面控件。具体地讲,触敏副显示器包括在用户界面控件7102内的四个不同行上包括的小矩形表示,其中第一行对应于视频项目的标题部分,第二行对应于视频项目的视频轨道,第三行对应于视频项目的音频轨道,第四行对应于视频项目的音乐轨道。在一些实施方案中,用户可通过拖动第一端7103或第二端 7104来快速操纵视频项目,并且作为响应,主显示器102根据该操作更新 (即,显示对应于视频项目的每行的信息的或多或少的信息,如上所述)。
例如,如图71B所示,响应于用户对端7103和端7104的操作(即,跨触敏副显示器104沿相反方向拖动),主显示器被更新,使得更多的时间轴被显示(如图71B所示)。图71B还示出了用户能够选择向左指示的插入符示能表示7105,以使触敏副显示器104停止显示某些系统级的示能表示(诸如亮度、播放、音量调整和静音示能表示),以及增加在用户界面控件7102内显示的时间轴表示的显示尺寸(例如,如图71B所示,在选择了示能表示7105之后,现在在触敏副显示器104内示出更多的时间轴)。这样,能够在具有有限的可用屏幕空间的显示器上显示更多的信息,即,触敏副显示器104能够通过停止显示系统级示能表示来显示更多的时间轴表示。
在一些实施方案中,触敏副显示器104还可以在用户界面控件7102内包括附加的行。图71C和图71D1中示出了两个示例,其中示出了对应于正在主显示器102上进行编辑的视频项目的附加组件的附加行(例如,诸如视觉转换、可能在视频剪辑上方显示为覆盖的文本、对应于将叠加在彼此之上的声音的其他音频剪辑、已经被拆分的一个音频文件的表示等)。
图71D2至图71M是触敏副显示器104的示意图,其用于示出可显示的用于控制视频编辑应用程序(诸如,FINAL CUT PRO)中可用的某些功能的附加用户界面控件。例如,图71D2示出了可被显示以用于控制与创建新视频项目相关联的功能的示例性用户界面控件,图71E示出了可被显示以用于控制与选择视频项目内的特定剪辑相关联的功能的用户界面控件,图71G示出了可被显示以用于控制与调整视频项目的音量水平相关联的功能的用户界面控件,图71G示出了可被显示以用于控制与选择多个元素 (例如,与视频项目相关联的多个音频轨道或音乐轨道),以及图71H示出了用于控制与视频项目的裁剪组件(例如,音频轨道、视频轨道或音乐轨道)相关联的功能的用户界面控件。
图71I至图71M中还示出了其他示例。例如,图71I示出了可被显示以用于控制与各种编辑工具相关联的功能的示例性用户界面控件,图71J 示出了可被显示以用于控制与调整音量淡入淡出相关联的功能的示例性用户界面控件,图71K示出了可被显示以用于控制与选择多个组件,然后调整这些元素的每个元素的音量淡入淡出相关联的功能的示例性用户界面控件,图71L示出了调整视频项目的时间轴(如上面参考图71A至图71B所讨论的),图71M示出了用于控制与在视频项目中编辑转换相关联的功能的用户界面控件。
关于图71A至图71M中所示的用户界面控件和示能表示的附加细节,本领域普通技术人员将理解和认识,并且这些细节中的一些反映在用户手册中,诸如可从APPLE INC获得的“Final Cut Pro X用户指南”。(已公开并且标题为“final_cut_pro_x-10.1.1-user_guide.pdf”)。美国专利公开号 2012/0210222、2012/0210231、2012/0210228和2014/0253560以及美国专利号8,849,028和7,805,678还提供了关于图71A至图71M中所示的用户界面控件和示能表示的细节和描述,并且这些专利申请中的每一项专利申请的全文以引用方式并入本文。
现在转到图72A至图72K,其中示出了显示器(主显示器和触敏副显示器两者)的示意图,用于示出与视频编辑应用程序相关联的用户界面 (在这些示例中,视频编辑应用程序是MOTION)。如图72A所示,用于视频编辑应用程序的用户界面在主显示器102上显示,并且触敏副显示器 104包括用于控制视频编辑应用程序内可用的功能的用户界面控件(例如,用户能够通过在触敏副显示器104处提供输入来调整与视频项目相关联的图形)。例如,用户能够移动用户界面控件的第一端7202或第二端7204,以快速调整视频项目的一部分(例如,调整在特定时间点将显示哪些图像)。
在一些实施方案中并且如上所述,为了帮助有效地利用触敏副显示器 102上有限的显示屏幕空间,用户能够选择向左的指示插入符以使得触敏副显示器102停止显示系统级示能表示,并且替代地显示更多的特定用户界面控件,诸如图72A的触敏副显示器中所示的时间轴视图。例如,响应于选择插入符示能表示,在触敏副显示器104中显示更多的时间轴视图,如图72K所示。
图72B至图72K是触敏副显示器104的示意图,其用于示出可显示的用于控制视频编辑应用程序(诸如,MOTION)中可用的某些功能的附加用户界面控件。例如,图72B示出了在还没有选择对象时(例如,在主显示器102上最初启动/打开视频编辑应用程序时),用于控制视频编辑应用程序中可用的功能的用户界面控件,图72C1示出了用于控制在主显示器102上的视频编辑应用程序中选择对象之后可用的功能的用户界面控件,图 72C21示出了用于控制在已选择多个对象之后可用的功能的用户界面控件,图72D示出了用于控制可用于调整各种定时选项的功能的用户界面控件,以及图72E和图72F示出了用于选择各种工具选项的用户界面控件 (在一些实施方案中,所示控件被称为字形,并且在图75中还示出了附加字形)。
在图72G至图72J中提供了用于在视频编辑应用程序中编辑文本的示例性用户界面控件。图72G示出了在触敏副显示器104处可用于编辑文本 (例如,诸如与特定视频项目或单个帧相关联的标题)的用户界面控件,图72H示出了用于选择文本外观选项的用户界面控件,图72I示出了用于选择文本大小选项的用户界面控制,图72J示出了用于改变文本字距调整选项的用户界面控件。
关于图72A至图72K中所示的用户界面控件和示能表示的附加细节,本领域普通技术人员将理解和认识,并且这些细节中的一些反映在用户手册中,诸如可从APPLE INC获得的“Motion用户指南”。(已公开并且标题为“motion_5.1.1_ug.pdf”)。美国专利公开号2013/0239057和2009/0226080以及美国专利号9,070,206还提供了关于图72A至图72K中所示的用户界面控件和示能表示的细节和描述,并且这些专利申请中的每一项专利申请的全文以引用方式并入本文。
现在将注意力转到图73A至图73N,其中提供了在触敏副显示器处提供的用户界面控件的图示,用于控制在视频编辑应用程序内可用的功能 (在该附图序列中,示例性视频编辑应用程序是COMPRESSOR)。图 73A示出了在触敏副显示器104处提供的用于添加新COMPRESSOR项目 (即,空批量)的用户界面控件,图73B示出了用于添加新文件、图像序列或环绕声选项的用户界面控件,图73C示出了用于添加新设置的用户界面控件,图73D示出了用于配置新设置的用户界面控件。
图73E至图73I中还示出了其他示例。具体地,图73E示出了用于配置正常批量的用户界面控件,图73F示出了用于控制标记的用户界面控件,图73G示出了用于控制观看者模式的用户界面控件,图73H示出了用于在观看者模式下选择标记的用户界面控件,并且图73I示出了用于控制 iTMS批量项目的用户界面控件。图73J至图73N示出了附加的用户界面控件,包括用于控制iTMS批量处理功能、设置、主动处理选项(即,处理正在进行时在触敏副显示器104处可用的用户界面控件)、活动的暂停选项(即处理暂停时在触敏副显示器104处可用的用户界面控件)和完成的选项(即,完成处理之后在触敏副显示器104处可用的用户界面控件)。
关于图73A至图73N中所示的用户界面控件和示能表示的附加细节,本领域普通技术人员将理解和认识,并且这些细节中的一些反映在用户手册中,诸如可从APPLE INC获得的“Compressor用户指南”(已公开并且标题为“compressor_4.1.2_user_guide.pdf”)。美国专利公开号 2014/0344691还提供了关于图73A-73N所示的用户界面控制和可行性的细节和描述,并且通过引用整体并入本文。
现在注意图74A-74H,其中示出了用于控制各种视频编辑功能的用户界面控制(在该图中,视频编辑应用是IMOVIE)。图74A-74D示出了在触敏次级显示器104处显示的用于分别控制项目创建,项目播放,视频编辑和音量选项的用户界面控制。图74E-74H示出了在触敏次级显示器104 处显示的用于控制各种媒体浏览器功能的用户界面控制。
关于图74A-74H所示的用户界面控制和可承受性的附加细节将被本领域普通技术人员所理解和认可,并且其中的一些细节反映在用户手册中,例如“iMovie'08入门”可从APPLE INC(已公开并且标题为“iMovie_08_Getting_Started.pdf”)。美国专利公开号2012/0210230还提供了关于图74A-74H所示的用户界面控制和可行性的细节和描述,并通过引用整体并入本文。
现在转到图75,其中示出了许多特定于应用的视频编辑字形,其中的每一个都可以在触敏副显示器104处显示。前两行对应于与FINAL CUT PRO相关联的字形,接下来的三行对应于与MOTION关联的字形,下一行显示与COMPRESSOR相关联的字形,最后一行显示与IMOVIE相关联的字形。在一些实施方案中,这些字形被提供在触敏次级显示器处,以允许用户使用触敏副显示器104上的单个输入来访问期望的控制(并且不必浪费时间通过浏览许多层次来浪费时间来搜索该控件菜单)。关于这些字形的附加细节将被本领域普通技术人员所理解和认可,并且这些细节中的一些在上面参考图71A-74H所述的用户手册,专利申请公开和已授权专利中提供。
图44A-44D是更新动态输入和输出设备(例如,包括动态功能行 104,图1A-1B和2A-2D)的方法的流程图,根据一些实施方案方法600在包括处理器,存储器,包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的触敏第二外壳的计算系统上执行) 辅助显示屏与主显示屏不同。可选地,组合方法600中的某些操作和/或可选地改变某些操作的顺序。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A-2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示部分110(此处也称为包括主显示器102的第一外壳110)中实施的主显示器102(图1A)。或者,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A-2D)中实现的主显示器102(图2A-2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A-1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A-1B)和物理键盘(例如,物理键组106,图1A-1B)。或者,在一些实施方案中,第二外壳是台式计算系统200的外围键盘206(图2A-2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A-2B)和物理键盘(例如,物理键组106,图2A-2B)。或者,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,图2C中的动态功能行104)和第二外部输入机构212外壳包括输入机构(例如,图2C中的触摸板108),并且不包括物理键盘。
计算系统在主显示器上显示(602)第一用户界面,第一用户界面包括一个或多个用户界面元素。例如,图5B示出了显示具有指示应用A当前处于焦点的状态盘502的第一用户界面的主显示器102以及具有多个可执行/可选应用图标的应用(应用)托盘514,包括:邮件应用图标506,网页浏览器应用图标508,媒体播放器应用图标510,应用A图标512和照片应用图标515。在图5B中显示在主显示器102上的第一用户界面还包括用于应用A(例如,幻想RPG游戏)的窗口536。在图5B中,例如,窗口536 包括具有多个可用性的应用程序A的主菜单,包括开始新的游戏可用性,继续提供和可选择性。例如,图6A示出了显示具有用于媒体播放器应用的窗口554的第一用户界面的主显示器102。
在一些实施方案中,计算系统还包括(604):(i)包括主显示器、处理器、存储器和主计算设备通信电路的主计算设备;以及(ii)包括外壳、触摸屏显示器、物理输入机构和用于与主计算设备通信电路通信的输入设备通信电路的输入设备,其中输入设备与主计算设备不同且分开。在一些实施方案中,计算系统不是笔记本电脑,例如便携式计算系统100(图1A- 1B),而是计算系统是具有计算设备202的桌面计算系统200(图2A- 2D),外围显示器设备204(其可选地与计算设备202集成)以及具有多个物理键(例如,该组物理键106,图2A-2B)的输入设备(例如,外围键盘206,图2A-2B)邻近触摸屏显示器(例如,动态功能行104,图2A- 2B)。或者,在一些实施方案中,输入设备(例如,图2C中的第一外围输入机构212)包括与触摸屏显示器(例如,动态功能行104)相邻的触摸板或数字键盘(例如,触摸板108,图2C)图2C)。在一些实施方案中,输入设备经由有线连接(例如,USB,PS/2等)或无线连接(例如,计算设备202,图2A-2D)与主计算设备(例如,计算设备202,蓝牙,Wi-Fi 等)。
在一些实施方案中,物理输入机构包括(606)多个物理按键。在图1A- 1B中,便携式计算系统100的主体部分120至少部分地包含与该组物理键 106相邻的触摸屏显示(例如,动态功能行104)。
在一些实施方案中,物理输入机构包括(608)触控板。在图1A-1B中,便携式计算系统100的主体部分120至少部分地包含除了该组物理键106 之外的触摸屏显示(例如,动态功能行104)和触摸板108。
所述计算系统识别(610)在所述主显示器上聚焦的所述一个或多个用户界面元素中的活动用户界面元素。在一些实施方案中,术语“焦点”可以指当前在用户界面中的用户界面的活动元素(例如,与应用程序相关联的窗口,与应用程序相关联的特定工具栏或菜单,或操作系统)前台和主动运行,或者可以通过诸如键按压,鼠标点击,语音命令,手势运动等从计算系统的用户接收的输入来控制。
在一些实施方案中,计算系统或其组件(例如,图3A中的焦点确定模块351)识别显示在主显示器上的第一用户界面的用户界面元素,该用户界面元素处于焦点。在一些实施方案中,焦点的用户界面元素是对应于应用的窗口,对应于在应用的窗口内部或外部的应用的用户界面元素(例如,字段,子窗口,菜单,工具,工具栏,工具集等)或桌面/操作系统相关界面的一部分(例如,音量控制,文件浏览器界面的一部分或控件/设置面板)。在一些实施方案中,活动用户界面元素在主显示器上突出显示或在主显示器上的前台位置显示,以指示其处于焦点。在一些实施方案中,活动用户界面元素的显示特征被改变或强调(例如,彩色文本,粗体文本,粗边框等)以指示其处于焦点。可选地和/或另外,在一些实施方案中,提供视觉和/或听觉提示以指示处于焦点的活动用户界面元素(例如,当焦点改变时播放钟声,在活动用户界面上方显示弹跳星焦点的活动用户界面元素的显示特征与主显示器上显示的第一用户界面的平衡不同)。
在图5B中,例如,应用程序A的窗口536在主显示器102上聚焦。在图5B中,状态托盘502指示应用程序A在前台运行,并且应用程序托盘514还基于应用程序A图标512后面的阴影指示应用程序A在前台运行。在图6A中,例如,在窗口554内显示的用户的媒体库的音乐子部分在主显示器102上聚焦,如由粗体显示的“音乐”和在窗口554内至少部分地显示的相册A至L所示。相反,在图6B中,例如,在窗口554内示出的用户媒体库的播客子部分在主显示器102上聚焦,如粗体显示的“播客”和在窗口554内至少部分地显示的播客A至L所示。在图7B中,例如,用于在窗口580内撰写新电子邮件的子窗口在主显示器102上聚焦,如围绕子窗口的粗线所示。在图8C中,例如,菜单5134内的用户通讯录的“家庭”组标签在主显示器102上聚焦,如菜单5134的围绕“家庭”组标签的粗线所示。在图11H中,例如,窗口5224内的标签B的界面在主显示器102上聚焦,如围绕标签B的粗线和标签B的粗体文本所示。在图 12E中,例如,窗口5224内的书签侧边栏在主显示器102上聚焦,如围绕书签侧边栏的粗线所示。在图13C中,例如,编辑控件5296的菜单在主显示器102上聚焦。
计算系统确定(612)在主显示器上聚焦的活动用户界面元素是否与由计算系统执行的应用程序相关联。在一些实施方案中,活动用户界面元素与应用程序或操作系统相关联。在一些实施方案中,计算系统或者其组件 (例如,DFR确定模块352,图3A)确定用于在动态功能行104上显示的一组示能表示,该确定基于在主显示器102上聚焦的活动用户界面元素,还基于该活动用户界面元素是否与特定应用程序或操作系统相关联。
在一些实施方案中,处理器在第一用户界面的前台执行应用程序 (614)。例如,该应用程序是电子邮件应用程序、文字处理应用程序、演示文稿应用程序、照片编辑应用程序、音乐应用程序、游戏应用程序、电子表格应用程序等中的一者。例如,图5B至图5E示出了由主显示器102显示的第一用户界面,其包括对应于由计算系统在前台执行的应用程序A(例如,幻想RPG游戏)的窗口536。例如,图6A至图6D示出了由主显示器102显示的第一用户界面,其包括对应于由计算系统在前台执行的媒体播放器应用程序的窗口554。例如,图6E至图9示出了由主显示器102 显示的第一用户界面,其包括对应于由计算系统在前台执行的邮件应用程序的窗口580。例如,图10A至图11A示出了由主显示器102显示的第一用户界面,其包括对应于由计算系统在前台执行的照片应用程序的窗口 5166。例如,图11B至图12G示出了由主显示器102显示的第一用户界面,其包括对应于由计算系统在前台执行的web浏览器应用程序的窗口 5224。
根据确定在主显示器上聚焦的活动用户界面元素与由计算系统执行的应用程序相关联,计算系统在触摸屏显示器上显示(616)第二用户界面,包括:(A)对应于该应用程序的第一组一个或多个示能表示;以及(B)对应于至少一个系统级功能的至少一个系统级示能表示。在一些实施方案中,第一组一个或多个示能表示包括用户可选择的符号/图标和/或指示符以及可能或可能不是可选的信息。在一些实施方案中,第一组一个或多个示能表示对应于应用程序的基本控件。在一些实施方案中,与第一组一个或多个示能表示一起显示至少一个系统级示能表示。在一个示例中,在图5A至图14E 中,至少一个系统级示能表示包括永久性示能表示516和534。在另一个示例中,在图5C中,至少一个系统级示能表示包括示能表示542,当其(例如,使用轻击接触)被激活时,致使显示多个系统级示能表示(例如,图 5A中所示的示能表示518,520,522,524,526,528,530和532)。
例如,图11C示出了动态功能行104,响应于在图11B中检测到对示能表示5226的选择,该动态功能行正在显示在主显示器102上聚焦的web 浏览器应用程序的一组基本控件和指示符(例如,示能表示5230,5232和 5238以及地址栏5234),以及至少一个系统级示能表示542。在一些实施方案中,第一组一个或多个示能表示对应于与聚焦的活动用户界面元素相关联的控件。因此,计算系统的用户能够从第一组一个或多个示能表示中选择控件,以提供对应用程序的输入以及控制应用程序的功能,而不会在这种可选控件显示在主显示器上时,使他/她的手远离该组物理按键到另一个输入设备(例如,鼠标)。这种模式切换的减少,例如用户的手在键盘和鼠标之间,以及用户的眼睛在键盘和显示器之间的模式切换,提供了更直观的用户体验和更有效的人机界面。例如,图6E示出了动态功能行 104,响应于在图6D中检测到使用光标504选择邮件应用程序图标506,该动态功能行正在显示对应于在主显示器102上聚焦的电子邮件A(例如,示能表示582,584,586,586,590,592,594,596和598)的多个示能表示。
响应于在主显示器上发生的聚焦变化而在触敏副显示器中显示应用程序特定和系统级示能表示为用户提供了可通过触敏副显示器直接获得的可访问示能表示。为用户提供可通过触敏副显示器直接访问的可访问示能表示增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来访问所需功能,只需较少交互而不必浪费时间通过分级菜单搜翻来定位所需功能),另外还通过使用户能够更快速更有效地访问所需功能,减少了电力使用并延长了设备的电池寿命。同样,在触敏副显示器上显示应用程序特定的示能表示通过提供与当前在主显示器上聚焦的应用程序相关联的示能表示来指示设备的内部状态。
在一些实施方案中,计算系统的用户能够修改或自定义第一组一个或多个示能表示中包括的示能表示。在一些实施方案中,在识别在主显示器 102上聚焦的活动用户界面元素并显示第一组一个或多个示能表示之前,动态功能行104显示由计算系统的用户设置的或设置在软件中的默认界面。例如,默认界面包括多个功能键(例如,F1,F2,F3,…,F12)、股票行情、滚动的运动分数、滚动的天气预报和信息等中的一者。
在一些实施方案中,在第一预定时间段(例如,30秒、60秒、90秒等)显示第一组一个或多个示能表示之后,动态功能行104重新显示由计算系统的用户设置的或设置在软件中的默认界面。在一些实施方案中,在第一预定时间段(例如,30秒、60秒、90秒等)显示第一组一个或多个示能表示之后,动态功能行104关闭,直到由与计算系统相关联的动态功能行或键盘或触控板检测到接触104。在一些实施方案中,在第一预定时间段 (例如,30秒、60秒、90秒等)显示第一组一个或多个示能表示之后,动态功能行104关闭,直到连接到电源(例如,当在电池供电的外围键盘206 中实现动态功能行时,图2A至图2B)。在一些实施方案中,在显示第一组一个或多个示能表示之后,并且在第二预定时间段(例如,30秒、60 秒、90秒等)内未检测到有关第一组一个或多个示能表示的用户输入时,动态功能行104重新显示由计算系统的用户设置或设置在软件中的默认界面。在一些实施方案中,当操作系统聚焦或活动用户界面元素不与在前台运行的应用程序相关联时,动态功能行104重新显示由计算系统的用户设置或设置在软件中的默认界面。
在一些实施方案中,在第一预定时间段(例如,30秒、60秒、90秒等)显示第一组一个或多个示能表示之后,并且当计算系统被设置为低功率模式时,动态功能行104显示有限的一组示能表示,包括例如时间、剩余电池寿命,Wi-Fi信号强度等。例如,有限的一组示能表示由计算系统的用户选择或在软件中设置,并且计算系统的用户能够通过系统设置面板将计算系统设置为低功率模式。
在一些实施方案中,显示在第二用户界面上的至少一个示能表示是 (618)多功能示能表示。在一些实施方案中,响应于检测到在对应于多功能示能表示的位置处执行的不同输入,多功能示能表示能够执行两个或更多个功能/操作。例如,在图6E中由第二用户界面内的动态功能行104显示的永久性音量控件568是多功能示能表示。
在一些实施方案中,计算系统检测(620)选择多功能示能表示的用户触摸输入。根据确定用户触摸输入对应于第一类型,计算系统执行与多功能示能表示相关联的第一功能。根据确定用户触摸输入对应于不同于第一类型的第二类型,计算系统执行与多功能示能表示相关联的第二功能。例如,响应于在对应于多功能示能表示的位置处检测到第一手势(例如,轻击接触)来执行第一功能/操作(例如,将媒体项目静音),响应于在对应于多功能示能表示的位置处检测到第二手势(例如,长按手势)来执行第二功能/操作(例如,显示媒体项目的音量滑块或回放控件)。例如,第一手势类型对应于检测到的利用一个或多个接触(例如,轻击接触)的小于预定时间段(例如,500ms、1s等)的触摸输入,并且第二手势类型对应于检测到的利用一个或多个接触(例如,长按压手势)的大于或等于预定时间段(例如,500ms、1s等)的触摸输入。
例如,图6E示出了动态功能行104在对应于永久性音量控件568的位置处接收和检测接触599(例如,长按压接触)。继续讨论该示例,图6F 示出了动态功能行104响应于在对应于图6E中的永久性音量控件568的位置处检测到长按压手势而显示用于调节播客J的回放音量的音量滑块 5100。另选地,在一些实施方案中,动态功能行104响应于在对应于图6E中的永久性音量控件568的位置处检测到长按压手势而显示用于控制播客J 的回放的回放控件(例如,暂停、快进、快退、下一曲目、上一曲目等),该回放在图6C中发起。例如,图7B示出了动态功能行104在对应于永久性音量控件568的位置处接收和检测接触5124(例如,轻击接触)。继续讨论该示例,图7C示出了显示永久性音量控件568的动态功能行104,该永久性音量控件指示响应于在对应于图7B中的永久性音量控件 568的位置处检测到轻击接触而将播客J静音。
在一些实施方案中,至少一个系统级示能表示被配置(622)为在选择后引起对应于系统级功能的多个系统级示能表示在触摸屏显示器上显示。在一些实施方案中,至少一个系统级示能表示能够访问多个系统级控件/示能表示(诸如音量和亮度控件)以及其他系统级功能。例如,在图5D中,动态功能行104显示对应于应用程序A的第二组示能表示和/或指示符(例如,控件组B)和至少一个系统级示能表示(例如,示能表示542)。在图 5C中,动态功能行104还在对应于示能表示542的位置处检测接触552 (例如,轻击接触)。继续讨论该示例,图5E示出响应于检测到图5D中对示能表示542的选择,动态功能行104显示永久性控件(即,示能表示 516和534)、多个系统级示能表示(即,示能表示518,520,522,524,526,528,530和532),以及对应于应用程序A的示能表示538。
在一些实施方案中,至少一个系统级示能表示对应于(624)电源控件或离开控件中的一者。在一些实施方案中,无论主显示器102的焦点如何,至少一个系统级示能表示包括在动态功能行104上显示的永久性控件(例如,离开示能表示516和电源控件534,图5A至图14E)。当被激活(例如,通过轻击接触)时,离开示能表示516致使执行对应的功能(例如,退出当前在主显示器102上聚焦的应用程序)。当被激活时(例如,通过轻击接触),电源控件534致使在动态功能行104上显示模态警报(例如,模态警报5308,图14E),用于注销、重新启动或关闭计算系统。
在一些实施方案中,计算系统检测(626)选择第一组示能表示中的一者的用户触摸输入,并且响应于检测到用户触摸输入,计算系统:显示对应于应用程序的功能的不同的一组示能表示;并且保持至少一个系统级示能表示的显示。在一些实施方案中,对应于应用程序的第一组一个或多个示能表示包括用于访问与该应用程序相关联的一组工具或功能的单个示能表示。图5B示出响应于检测到图5A中利用光标504选择应用程序A图标 512,动态功能行104在除了永久性控件(即,示能表示516和534)和多个系统级示能表示(即,示能表示518,520,522,524,526,528,530和532) 之外还显示对应于在主显示器102上聚焦的应用程序A的示能表示538。继续讨论该示例,图5C示出了响应于检测到图5B中对示能表示538的选择,动态功能行104显示对应于应用程序A的第一组示能表示和/或指示符 (例如,控件组A)。
在一些实施方案中,计算系统检测(628)选择至少一个系统级示能表示的随后的用户触摸输入;以及响应于检测到该随后的用户触摸输入,计算系统显示对应于系统级功能的多个系统级示能表示和对应于应用程序的至少一个应用程序级示能表示。例如,图5D示出了动态功能行104,该动态功能行正在显示对应于在主显示器102上聚焦的应用程序A的第二组示能表示和/或指示符(例如,控件组B),以及至少一个系统级示能表示(例如,示能表示542)。继续讨论该示例,响应于检测到图5D中对示能表示 542的选择,图5E示出动态功能行104显示永久性控件(即,示能表示 516和534)、多个系统级示能表示(即,示能表示518,520,522,524,526, 528,530和532),以及对应于应用程序A的示能表示538。
在一些实施方案中,在触摸屏显示器上显示第二用户界面之后,计算系统识别(630)在主显示器上聚焦的一个或多个用户界面元素中的第二活动用户界面元素,并且确定该第二活动用户界面元素是否对应于由计算设备执行的不同应用程序。根据确定第二活动用户界面元素对应于不同的应用程序,计算系统在触摸屏显示器上显示第四用户界面,包括:(D)对应于不同应用程序的第三组一个或多个示能表示;以及(E)对应于至少一个系统级功能的至少一个系统级示能表示。例如,图6A示出了动态功能行104,该动态功能行正在显示对应于在主显示器102上聚焦的用户媒体库的子区域的多个相册示能表示558(例如,相册示能表示558-A至558-G),以及至少一个系统级示能表示(例如,示能表示542)。图6A还示出了主显示器 102在对应于用户媒体库的播客子部分的位置处显示光标504。继续讨论该示例,响应于在图6A中检测到使用光标504选择播客子部分,图6B示出了动态功能行104,该动态功能行正在显示对应于现在在主显示器102上聚焦的用户媒体库的播客子区域的第一多个播客示能表示560(例如,播客示能表示560-A至560-G),以及至少一个系统级示能表示(例如,示能表示542)。
在一些实施方案中,计算系统提供指示聚焦的不同用户界面元素的可听提示。在一些实施方案中,主显示器102显示指示聚焦的不同用户界面元素的视觉提示。例如,相对于图6B,主显示器102在窗口554内左侧列中的“播客”文本上方显示星形指示符(未示出),使得窗口554内的“播客”文本在左侧的列内加粗,将窗口554内左侧列中的“播客”文本以不同颜色或相同颜色闪烁,或以其他方式指示播客子部分现在在主显示器102上聚焦。在一些实施方案中,动态功能行104显示转换动画,由此多个相册示能表示558(图6A中所示)被滚动或滑出以便显示第一多个播客示能表示560(图6B中所示)。
在一些实施方案中,在识别出第二活动用户界面元素之后,计算系统确定(632)计算系统是否正在播放媒体(例如,音频或视频)项目,其中该媒体项目不与不同的应用程序相关联,并且根据确定计算系统正在播放该媒体项目,计算系统在触摸屏显示器上显示至少一个永性示能表示以控制该媒体项目(例如,音量和/或回放控件)。在一些实施方案中,所述至少一个示能表示是永久性控件,即使焦点改变或者媒体被静音和/或在后台正在播放,其使得计算系统的用户也能够将该媒体项目从触摸屏显示器静音/ 取消静音。例如,图6D示出了动态功能行104,该动态功能行响应于在图 6C中检测到对播客示能表示560-J的选择而正在显示启动播客J的回放的永久性音量控件568。例如,图7A示出了动态功能行104,该动态功能行即使在应用程序的电子邮件A在主显示器102上聚焦的情况下,也显示永久性音量控件568。
在一些实施方案中,所述至少一个永久性示能表示显示(634)对应于媒体项目(例如,均衡器(EQ)栏、运行时间指示符等)的反馈。例如,图6D 示出了动态功能行104,该动态功能行正在显示具有对应于播客J的回放的均衡器栏的永久性音量控件568。类似地,例如图7C示出了即使将播客J 的回放静音,也显示具有均衡器栏的永久性音量控件568的动态功能行 104。在一些实施方案中,动态功能行104包括不断更新的示能表示,其更新基于正在播放的媒体项目或一些其他实时信息,诸如天气指示符、麦克风捕获指示符或Wi-Fi信号强度指示符。
在一些实施方案中,计算设备检测(636)对应于重写键的用户输入,并且响应于检测到该用户输入,计算系统:停止显示触摸屏显示器上的第二用户界面的至少第一组一个或多个示能表示;并且显示第一组默认功能键。在一些实施方案中,响应于接收到来自输入机构(例如,激活指定物理按键诸如功能键)或来自动态功能行(例如,选择虚拟按键,例如“离开”示能表示516)的信号,检测到对应于重写按键的用户输入。例如,用户致动“fn”按键来关闭由动态功能行104显示的当前示能表示,并显示默认的F1,F2,F3,…,F12行。例如,图14A示出了动态功能行104,该动态功能行响应于接收到对应于指定物理按键(例如,功能键)的用于重写动态功能行104的信号,显示具有示能表示5301(例如,对应于F1,F2,F3,…,F12)的界面5300以及永久性控件(例如,示能表示516和 534),所述信号来自便携式计算系统100的一组物理按键106(图1A至图1B),或来自桌面计算系统200的外围键盘206的一组物理键106(图 2A至图2D)。
在一些实施方案中,响应于检测到对应于重写键的用户输入,动态功能行104显示由计算系统的用户设置或在软件中设置的默认界面。例如,默认界面包括多个功能键(例如,F1,F2,F3,…,F12)、股票行情、滚动的运动分数、滚动的天气预报等中的一者。
在一些实施方案中,在显示第一组默认功能键之后,计算系统在触摸屏显示器上在基本上平行于触摸屏显示器的主要维度的方向上检测(638)手势,并且响应于检测到轻扫手势,显示具有至少一个不同功能键(例如,先前未显示的功能键)的第二组默认功能键。例如,相对于图14A,计算系统的用户能够通过在动态功能行104上执行基本上水平的轻扫手势(例如,从右到左或从左到右的轻扫手势中的一者),在动态功能行104上的界面5300内显示附加功能键(例如,F13,F14,F15,…)。
在一些实施方案中,根据确定活动用户界面元素不与由计算系统执行的应用程序相关联,计算系统在触摸屏显示器上显示(640)第三用户界面,包括:(C)对应于计算系统的操作系统控件的第二组一个或多个示能表示,其中第二组一个或多个示能表示不同于第一组一个或多个示能表示。例如,在图5A中,系统/操作系统当前在主显示器102上聚焦。例如,在主显示器上聚焦的活动用户界面元素与操作系统相关联,诸如音量控件、系统控件(例如,亮度或音量控件)、系统设置、开始菜单、文件浏览器、系统搜索等。图5A示出了正在显示多个系统级示能表示(例如,示能表示 518,520,522,524,526,528,530和532)的动态功能行104,以及永久性示能表示(例如,示能表示516和534)。
在一些实施方案中,第二组一个或多个示能表示是(642)扩展的一组操作系统控件,其包括(B)对应于所述至少一个系统级功能的所述至少一个系统级示能表示。例如,图8E示出了动态功能行104,其响应于在图8D中检测到对示能表示542的选择,显示多个系统级示能表示(例如,扩展的一组操作系统控件,包括示能表示518,520,522,524,526,528,530和532) 以及永久性示能表示(例如,示能表示516和534)。
应当理解,对图44A至图44D中已经进行描述的操作的具体次序仅仅是示例性的,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法700,900 和1000)描述的其他过程的细节同样以类似的方式适用于上文参考图44A 至图44D描述的方法600。
图45A至图45C是根据一些实施方案的更新动态输入和输出设备(例如,包括动态功能行104,图1A至图1B和图2A至图2D)的方法的流程图。方法700在计算系统上执行,该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法700中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
计算系统显示(702)由主计算机系统在主显示器上执行的应用程序的第一用户界面。例如,图8A示出了显示具有对应于用户通讯录的菜单5134 的第一用户界面的主显示器102。在图8A中,菜单5134包括对应于用户通讯录的“所有联系人”组的多个联系人的列表(例如,预先存在或自动填充的联系人列表),其在主显示器102上聚焦,如围绕菜单5134中的“所有联系人”组的粗线所指示。例如,图13B示出了主显示器102,其正在显示具有覆盖在窗口5166上的文件控件5288的菜单的第一用户界面,其中文件控件5288的菜单在主显示器102上聚焦。
计算系统在触摸屏显示器上显示(704)第二用户界面,该第二用户界面包括对应于应用程序的第一组一个或多个示能表示,其中所述第一组一个或多个示能表示对应于应用程序的第一部分。在一些实施方案中,第一组一个或多个示能表示与应用程序的顶部菜单或文件菜单(即,第一部分或子部分)相关联。例如,图8A示出了正在显示第二用户界面的动态功能行 104,该第二用户界面具有对应于在主显示器102上聚焦的用户通讯录的“所有联系人”组的第一多个联系人示能表示5136-A至5136-F(即,第一组示能表示)。例如,图13B示出了正在显示第二用户界面的动态功能行 104,该第二用户界面具有对应于在主显示器102上聚焦的文件控件5288 的菜单的第一多个示能表示5290(即,第一组示能表示)。
计算系统检测(706)触摸屏显示器上的轻扫手势。在第一示例中,图8A 示出了动态功能行104,该动态功能行检测接触5138从第一位置5140-A移动到第二位置5140-B的从右到左的轻扫手势。在另一示例中,图13B示出了动态功能行104,该动态功能行检测接触5292从第一位置5294-A移动到第二位置5294-B的向上轻扫手势。
根据确定在第一方向(例如,水平)上执行轻扫手势,计算系统显示 (708)对应于触摸屏显示器上的应用程序的第二组一个或多个示能表示,其中第二组一个或多个示能表示中的至少一个示能表示不同于第一组一个或多个示能表示,并且其中所述第二组一个或多个示能表示还对应于应用程序的第一部分。在一些实施方案中,响应于检测到第一方向上的轻扫手势,动态功能行显示对应于具有至少一个不同示能表示的应用程序(例如,工具集或菜单)的第一部分的第二组示能表示(例如,工具或项目),与也对应于应用程序的第一部分的第一组示能表示相比,该第二组示能表示与其不同。例如,响应于在图8A中检测到从右到左的轻扫手势,图8B示出了动态功能行104,该动态功能行正在显示对应于用户通讯录的“所有联系人”组的第二多个接触示能表示5136-E至5136-J(即,第二组示能表示)。
在一些实施方案中,第一方向(710)基本上平行于触摸屏显示器的主要尺寸。例如,参考便携式计算系统100(图1A至图1B),第一方向相对于动态功能行104和/或一组物理按键106的主要尺寸基本垂直(例如,竖直)。
在一些实施方案中,第一方向(712)基本上垂直于触摸屏显示器的主要尺寸。例如,参考便携式计算系统100(图1A至图1B),第一方向相对于动态功能行104和/或一组物理按键106的主要尺寸基本平行(例如,水平)。
根据确定轻扫手势在基本上垂直于第一方向(例如,竖直)的第二方向上执行,计算系统显示(714)对应于触摸屏显示器上的应用程序的第三组一个或多个示能表示,其中该第三组一个或多个示能表示与第二组一个或多个示能表示不同,并且其中该第三组一个或多个示能表示对应于应用程序的第二部分,该第二部分不同于应用程序的第一部分。在一些实施方案中,响应于检测到第二方向上的轻扫手势,动态功能行显示对应于应用程序的第二部分(例如,不同的工具集或菜单)的第三组示能表示,其相比与第一组示能表示相关联的应用程序的第一部分是不同的。例如,响应于在图13B中检测到向上的轻扫手势,图13C示出了动态功能行104,该动态功能行正在显示对应于在主显示器102上聚焦的编辑控件5296的菜单的第二多个示能表示5298(即,第三组示能表示)。在一些实施方案中,动态功能行104显示转换动画,由此第一多个示能表示5290(图13B中所示)被滚动或滑出以便显示第二多个播客示能表示598(图13C中所示)。
这样,在一个实施方案中,在动态功能行104上检测到的水平轻扫在组或类别内移动或刷动,并且垂直轻扫改变类别/过滤器。因此,计算系统的用户能够容易地移动导航工具和菜单,而不用将他/她的手从键盘移开到鼠标。这也使得能够更有效地显示信息并且允许更有效的人机交互。
允许用户响应于轻扫手势而在触敏副显示器中的应用程序特定的示能表示中进行快速导航,为用户提供了一种便捷的方式来滚动通过并经由触敏副显示器快速定位所需功能。为用户提供便捷的方式来滚动通过并经由触敏副显示器快速定位所需功能增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来访问所需功能,只需较少交互而不必浪费时间通过分级菜单搜翻来定位所需功能),另外还通过使用户能够更快速更有效地访问所需功能,减少了电力使用并延长了设备的电池寿命。此外,通过响应于副显示器上轻扫手势而动态地更新在触敏副显示器中显示的示能表示,副显示器能够在有限的屏幕上提供更多的信息,并且有助于确保在用户需要所需选项时为用户提供所需选项(从而减少电力使用并延长电池寿命,因为用户不需要浪费电力和电池寿命来通过分级菜单进行搜索,以定位这些所需选项)。
在一些实施方案中,在检测轻扫手势之前,第二部分以第一用户界面内的紧凑视图显示(716)在主显示器上,并且根据确定在基本上垂直于第一方向的第二方向上执行轻扫手势,系统以第一用户界面内的扩展视图在主显示器上显示第二部分。例如,在图13B中,照片应用程序的状态托盘502的第一部分(例如,文件控件5288的菜单)由主显示器102以扩展模式显示,并且照片应用程序的状态托盘502的第二部分(例如,编辑控件 5296的菜单)由主显示器102以紧凑模式显示。继续讨论该示例,响应于在图13B中检测到在第二方向上执行的轻扫手势(例如,利用接触5292的向上轻扫手势),照片应用程序的状态托盘502的第二部分由主显示器102 在图13C中以扩展模式显示,并且照片应用程序的状态托盘502的第一部分由主显示器102以紧凑模式显示。
在另一个示例中,在图8B中,邮件应用程序的菜单5134的第一部分 (例如,菜单5134内的用户通讯录的“所有联系人”组)由主显示器102 以扩展模式显示,邮件应用程序的菜单5134的第二部分(例如,菜单5134 内的用户通讯录的“家庭”组)由主显示器102以紧凑模式显示。继续讨论该示例,响应于在图8B中检测到在第二方向上执行的轻扫手势(例如,利用接触5142的向上轻扫手势),邮件应用程序的菜单5134的第二部分由主显示器102在图8C中以扩展模式显示,并且邮件应用程序的菜单 5134的第一部分由主显示器102以紧凑模式显示。
在一些实施方案中,第一部分是(718)应用程序的菜单、标签、文件夹、工具集或工具栏中的一者,并且第二部分是应用程序的菜单、标签、文件夹、工具集或工具栏中的一者。在图8A至图8C中,例如,邮件应用程序的菜单5134的第一部分对应于菜单5134内的用户通讯录的“所有联系人”组,并且邮件应用程序的菜单5134的第二部分对应于菜单5134内的用户通讯录的“家庭”组。在图13B至图13C中,例如,照片应用程序的状态托盘502的第一部分对应于文件控件5288的菜单,并且照片应用程序的状态托盘502的第二部分对应于编辑控件5296的菜单。
在一些实施方案中,在触摸屏显示器上显示第三组一个或多个示能表示之后,计算系统(720):检测选择第一用户界面上的第一部分的用户输入;并且响应于检测到该用户输入:在触摸屏显示器上停止显示所述第三组一个或多个示能表示,其中所述第三组一个或多个示能表示对应于应用程序的第二部分;并且显示第二组一个或多个示能表示,其中所述第二组一个或多个示能表示对应于应用程序的第一部分。例如,相对于图13C,在动态功能行104上显示对应于在主显示器102上聚焦的编辑控件5296的菜单的第二多个示能表示5298(即,第三组示能表示)之后,主显示器 102将光标504显示在对应于状态托盘502(未示出)内的文件菜单的位置处。继续讨论示例,响应于检测到使用光标504选择状态盘502内的文件菜单,动态功能行104停止显示第二多个示能表示5298(即,第三组示能表示),而是显示文件控件5288的菜单(即,第二组示能表示)。
在一些实施方案中,第二组一个或多个示能表示和第三组一个或多个示能表示包括(722)对应于至少一个系统级功能的至少一个系统级示能表示。例如,在图8B中,动态功能行104显示对应于用户通讯录的“所有联系人”组的第二多个联系人5136-E至5136-J(即第二组示能表示),以及至少一个系统级示能表示(例如,示能表示542)。在图13C中,例如,动态功能行104显示对应于在主显示器102上聚焦的编辑控件5296的菜单的第二多个示能表示5298(即,第三组示能表示),以及至少一个系统级示能表示(例如,示能表示542)。
在一些实施方案中,由计算系统执行的应用程序的第一用户界面以全屏模式在主显示器上显示(724),并且在触摸屏显示器上显示的第一组一个或多个示能表示包括对应于全屏模式的控件。例如,图10G示出了在窗口5200内以全屏幕模式显示照片B的主显示器102,并且还示出了显示用于拉直窗口5200内的照片B的取向的一组控件5209的动态功能行104。例如,响应于在第二方向上检测到轻扫手势(例如,相对于动态功能行104 的主要尺寸垂直),动态功能行104显示对应于裁剪工具5210的一组控件 (例如,如果轻扫手势是向上轻扫手势)或对应于防红眼工具5206的一组控件(例如,如果轻扫手势是向下轻扫手势)。继续讨论该示例,响应于检测到第一方向上的轻扫手势(例如,相对于动态功能行104的主要尺寸水平),动态功能行104调整窗口5200内的照片B的取向。
在另一示例中,相对于图10G,响应于在第二方向上(例如,相对于动态功能行104的主要尺寸垂直)检测到轻扫手势,动态功能行104显示与信息示能表示相关联的一组控件5178(例如,如果轻扫手势是向上轻扫手势)或与照片添加示能表示5182相关联的一组控件(例如,如果轻扫手势是向下轻扫手势)。继续讨论该示例,响应于检测到第一方向上的轻扫手势(例如,相对于动态功能行104的主要尺寸水平),动态功能行104 显示对应于裁剪工具5210的一组控件(例如,如果轻扫手势是从右到左的轻扫手势),或对应于防红眼工具5206的一组控件(例如,如果轻扫手势是从左到右的轻扫手势)。
应当理解,对图45A至图45C中已经进行描述的操作的具体次序仅仅是示例性的,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法600,900 和1000)描述的其他过程的细节同样以类似的方式适用于上文参考图45A 至图45C描述的方法700。
图46A至图46B是根据一些实施方案的在全屏模式下保持应用程序的功能的方法的流程图。方法800在计算系统上执行,该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法800中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
计算系统在主显示器上以正常模式显示(802)由计算系统执行的应用程序的第一用户界面,该第一用户界面至少包括与应用程序相关联的第一组一个或多个示能表示。例如,图10B示出了以正常显示模式显示用于照片应用程序的窗口5166的第一用户界面的主显示器102。在图10B中,窗口 5166内的所选照片B在主显示器102上聚焦,并且窗口5166包括用于执行所选照片B的功能/操作的可选择的示能表示(即,第一组示能表示):搜索、缩放、幻灯片放映、共享以及设置。
计算系统检测(804)用户输入,该用户输入用于在主显示器上以全屏模式显示应用程序的第一用户界面的至少一部分。例如,所检测到的用户输入对应于选择在主显示器102或动态功能行104上显示的全屏视图示能表示或幻灯片放映示能表示。
在一些实施方案中,用于在主显示器上以全屏模式显示应用程序的第一用户界面的至少一部分的用户输入是(806)在触摸屏显示器上检测到的触摸输入和在主显示器上的第一用户界面内选择的控件中的至少一者。在第一示例中,图10B示出了在对应于幻灯片放映示能表示的位置处显示光标 504的主显示器102。在第二示例中,图10D示出了在对应于全屏幕示能表示5196的位置处接收和检测接触5196(例如,轻击接触)的动态功能行 104。
响应于检测到用户输入,计算系统(808):停止在主显示器上的第一用户界面中显示与应用程序相关联的第一组一个或多个示能表示;在主显示器上以全屏模式显示应用程序的第一用户界面的部分;并且在没有人为干预的情况下,在触摸屏显示器上自动显示用于控制应用程序的第二组一个或多个示能表示,其中所述第二组一个或多个示能表示对应于所述第一组一个或多个示能表示。继续讨论上述第一示例,图10C示出了响应于检测到在图10B中使用光标504选择幻灯片放映示能表示,主显示器102在窗口5188中显示来自用户的照片库的所有照片子部分的照片的幻灯片。图 10C还示出响应于检测到在图10B中使用光标504选择幻灯片放映示能表示,动态功能行104显示缩略图5192-Y、5192-Z、5192-A、5192-B、5192- C、5192-D和5192-E(即第二组示能表示)。缩略图5192-Y、5192-Z、 5192-A、5192-B、5192-C、5192-D和5192-E对应于与用户照片库的所有照片子部分相关联的用于幻灯片放映的照片序列。在图10C中,对应于照片 B的示能表示5192-B由动态功能行104突出显示(例如,以粗体文本和粗边框),以指示照片B当前正在主显示器102上聚焦。
继续讨论上述第二示例,响应于检测到在图10D中对全屏示能表示 5196的选择,图10E示出主显示器102在窗口5200内以全屏模式显示照片B。图10F还示出响应于检测到在图10E中对编辑示能表示5180的选择,动态功能行104显示一组编辑工具5205(即,第二组示能表示)。
在另一个示例中,当web浏览器应用程序或对应于web浏览器应用程序的用户界面的一部分在主显示器102上聚焦,并且计算系统检测到进入全屏模式的用户输入时,主显示器102以全屏模式显示当前活动的标签,并且动态功能行104显示对应于web浏览器应用程序内打开的标签的缩略图,以及至少一个系统级示能表示。例如,计算系统的用户能够通过选择对应于动态功能行104上的相应标签的缩略图,在主显示器102上以全屏模式显示相应的标签。
在一些实施方案中,第二组一个或多个示能表示是(810)第一组一个或多个示能表示。例如,第二组示能表示包括与应用程序相关联的第一组示能表示的至少一部分。在另一个示例中,第二组示能表示包括与应用程序相关联的第一组示能表示。在另一个示例中,第二组示能表示和与应用程序相关联的第一组示能表示相同。例如,第二组示能表示包括与由计算系统执行的应用程序相关联的控件,诸如照片编辑控件、游戏控件、幻灯片放映控件和预览、web浏览器的当前打开的网页标签等。
在一些实施方案中,第二组一个或多个示能表示包括(812)对应于全屏模式的控件。例如,图10C示出了动态功能行104,该动态功能行显示对应于与用户照片库的所有照片子部分相关联的用于幻灯片放映的照片序列的缩略图5192-Y、5192-Z、5192-A、5192-B、5192-C、5192-D和5192-E (即,第二组示能表示)。例如,计算系统的用户能够通过选择示能表示 5192中的一者来向前跳到特定照片或向后跳到特定照片。此外,例如,计算系统的用户能够通过在动态功能行104上执行从右到左的轻扫手势向前浏览,或者通过在动态功能行104上执行从左到右的轻扫手势在照片序列中向后浏览。另外,在图10C中,动态功能行104显示暂停示能表示 5190,当其(例如,通过轻击接触)被激活时,使得幻灯片放映被暂停并且还使主显示器102退出全屏模式。
在一些实施方案中,第二组一个或多个示能表示(814)包括对应于至少一个系统级功能的至少一个系统级示能表示。例如,图10C示出了动态功能行104,其显示缩略图5192和暂停示能表示5190,以及至少一个系统级示能表示(例如,示能表示542)和永久性示能表示(例如,示能表示516 和534)。
经由触敏副显示器提供用于控制应用程序的示能表示,同时在主显示器上以全屏模式显示应用程序的一部分,允许用户继续访问可能不再在主显示器上直接显示的功能。允许用户继续访问可能不再在主显示器上直接显示的功能,为用户提供了一种快捷的方式来访问可能已被掩藏在主显示器上的功能,从而增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来访问所需功能,只需较少交互而不必浪费时间通过分级菜单搜翻来定位所需功能),另外还通过使用户能够更快速更有效地访问所需功能,减少了电力使用并延长了设备的电池寿命。因此,通过将菜单选项从主显示器转换到触敏副显示器,以确保可以全屏模式呈现(在无障碍的情况下)内容,用户能够维持与设备的交互,并且当转换到全屏模式时其工作流程不会中断。另外,要在查看全屏内容时访问菜单选项,需要较少的交互,因为可能已被掩藏在主显示器上的内容后面的菜单选项呈现在触敏副显示器上,以便于快速访问(不必退出全屏模式,然后四处搜翻寻找菜单选项),从而减少电力使用并延长设备的电池寿命。
在一些实施方案中,计算系统检测(816)选择触摸屏显示器上显示的第二组示能表示中的一者的用户触摸输入,并且响应于检测到该用户触摸输入,计算系统根据所选择的第二组示能表示中的一个示能表示,改变主显示器上以全屏模式显示的应用程序的第一用户界面的部分。在图10G中,例如,计算系统的用户能够通过在起始于滑块5210或一组控件5209内的位置处,执行从左到右的轻扫/拖动手势或从右到左的轻扫/拖动手势来调整由主显示器102显示的窗口5200内的照片B的取向。
在一些实施方案中,在主显示器上以全屏模式显示用于应用程序的第一用户界面的部分之后,计算系统(818):检测用于退出全屏模式的随后用户输入;以及响应于检测到该随后用户输入:以正常模式在主显示器上显示由计算系统执行的应用程序的第一用户界面,第一用户界面包括与应用程序相关联的第一组一个或多个示能表示;并且保持在触摸屏显示器上显示用于控制应用程序的第二组一个或多个示能表示的至少一个子集,其中第二组一个或多个示能表示对应于第一组一个或多个示能表示。在一个示例中,图10C示出了在对应于暂停示能表示5190的位置处接收和检测接触 5194(例如,轻击接触)的动态功能行104。继续讨论该示例,主显示器 102退出全屏模式,并且图10D示出响应于检测到在图10C中对暂停示能表示5190的选择,主显示器102在窗口5166内以展开视图显示照片B。在另一个示例中,图10G示出了动态功能行104在对应于离开示能表示 516的位置处接收和检测接触5216(例如,轻击接触)。继续讨论该示例,主显示器102退出全屏模式,并且图10H示出响应于检测到在图10G 中对离开示能表示516的选择,主显示器102在窗口5166内以展开视图显示照片B。继续讨论该示例,图10H还示出了动态功能行104保持显示图 10G中所示的第二组示能表示的至少一个子集。
应当理解,对图46A至图46B中已经进行描述的操作的具体次序仅仅是示例性的,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法600,700, 900和1000)描述的其他过程的细节同样以类似的方式适用于上文参考图 46A至图46B描述的方法800。
图47A至图47B是根据一些实施方案的在触摸屏显示器上显示通知的方法的流程图。方法900在计算系统上执行,该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法900中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
计算系统在主显示器上显示(902)由计算系统执行的应用程序的第一用户界面。例如,图12F示出主显示器102显示具有标签B的界面的第一用户界面(例如,对应于www.website_B.com/home)以及窗口5224内的书签侧边栏。在图12F中,书签侧边栏在主显示器102上聚焦,如围绕书签侧边栏的粗线所指示。
计算系统在触摸屏显示器上显示(904)第二用户界面,该第二用户界面包括对应于应用程序的一组一个或多个示能表示。继续讨论上面的示例,图12F示出了动态功能行104,该动态功能行因书签侧边栏在主显示器102 上聚焦,而显示具有对应于所有预先存在的书签的一组书签示能表示5278 的第二用户界面。
在一些实施方案中,在检测到通知之前,计算系统检测(906)选择通知设置的用户输入,以便在触摸屏显示器上显示通知,并且不在主显示器上显示通知。在一些实施方案中,计算系统的用户能够在设置面板内指定是否将所接收到的通知显示在主显示器102和动态功能行104中的一者或多者上。在一些实施方案中,计算系统默认将接收到的通知显示在动态功能行104上,而不是显示在主显示器102上。
计算系统检测(908)通知。在一些实施方案中,通知与应用程序相关联 (例如,图12F中的web浏览器应用程序)。在一些实施方案中,该通知与当前正在前台执行的应用程序或与后台应用程序相关联。例如,通知为以下项目中的一者:模态警报或实时通知,诸如与新接收的电子邮件、即时消息或SMS相关联的警报;与在社交媒体应用程序内的应用程序(诸如邮件或响应)中的新检测到的事件相关联的通知;与由计算系统执行的应用程序相关联的模态警报,诸如保存/退出对话框或其他提示;诸如此类。
响应于检测到通知,计算系统同时在第二用户界面中显示(910)对应于应用程序的一组一个或多个示能表示,并且在触摸屏显示器上显示所检测到的通知的至少一部分,其中所检测到的通知不在主显示屏上显示。例如,在一些实施方案中,基于操作906中讨论的通知设置,在动态功能行 104上显示的第二用户界面上所检测到的通知的至少一部分被覆盖。另外地和/或另选地,在一些实施方案中,在由主显示器102显示的第一用户界面上通知被覆盖。因此,当在主显示器上显示这种可选择的控件时,计算系统的用户能够查看和响应通知,而不用将他/她的手远离一组物理按键移动到另一输入设备(例如,鼠标)。这种模式切换的减少,例如用户的手在键盘和鼠标之间,以及用户的眼睛在键盘和显示器之间的模式切换,提供了更直观的用户体验和更有效的人机界面。
例如,图8G示出了主显示器102和动态功能行104,其响应于检测到图8F中利用光标504选择退出示能表示而显示模态警报5156。在图8G 中,模态警报5156提示用户在关闭窗口580之前保存草稿电子邮件,并且包括“保存”示能表示5158、“不保存”示能表示5160和“取消”示能表示5162。在另一示例中,图9示出了响应于从便携式计算系统100的一组物理按键106(图1A至图1B)或从台式计算系统200的外围键盘206的一组物理按键106(图2A至图2D)接收到对应于指定物理按键组合(例如,alt+tab)的信号,主显示器102和动态功能行104显示应用程序选择窗口5164。在图9中,应用程序选择窗口5164使得计算系统的用户可以在可能在后台的当前运行的应用程序之间进行切换。
在又一个示例中,图10H示出了响应于计算系统接收到通知5218,动态功能行104显示覆盖在示能表示5178,5188,5182和5184上的通知 5218。在图10H中,通知5218对应于由Suzie S.向计算系统的用户发送的 SMS、即时消息等,其中该通知的内容询问“今晚看电影吗?”。在又一示例中,图11E示出了主显示器102和动态功能行104,其响应于检测到在图11D中利用光标504选择购买示能表示而显示模态警报5240。在图11E 中,在动态功能行104上显示的模态警报5240提示计算系统的用户在动态功能行104的指纹区域5244中提供其指纹,并且还包括取消示能表示 5242,当其被激活时(例如,经由轻击接触)致使购买取消。
在另一示例中,图12A示出主显示器102响应于计算系统接收到通知 5264而显示覆盖在窗口5264上的通知5264。在图12A中,通知5264对应于由MAS向计算系统的用户发送的SMS、即时消息等,其中该通知的内容询问“已经落地了吗?”。在又一示例中,图12G示出了动态功能行 104,其响应于检测到在图12F中使用光标504选择退出示能表示而显示覆盖在一组书签示能表示5278上的模态警报5280。在图12G中,模态警报 5280提示计算系统的用户确认其打算关闭web浏览器应用程序中的所有打开的标签。在又一示例中,图14B示出了响应于检测到在图14D中对电源控件534的选择而显示模态警报5308的动态功能行104。在图14E中,模态警报5308提示计算系统的用户从注销示能表示5310、重新启动示能表示5312、关机示能表示5314和取消示能表示5316中的一者选择注销/关机选项。
在触敏副显示器上显示所接收的通知允许用户以不中断的方式在主显示器上继续工作,并允许用户经由触敏副显示器与所接收的通知进行交互。允许用户以不中断的方式在主显示器上继续工作并允许用户经由触敏副显示器与所接收的通知进行交互,为用户提供了一种快捷的方式来查看所接收的通知并与之进行交互,从而增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来方便地访问所接收的通知,而不必中断其工作流程来处理所接收的通知)。此外,在触敏副显示器上显示所接收的通知为触敏副显示器上接收的通知提供了强调效果(因为在一些实施方案中,所接收的通知被显示为在触敏副显示器中覆盖其他示能表示),从而确保了所接收的通知是可见的并且易于在触敏副显示器上访问。
在一些实施方案中,在触摸屏显示器上显示的通知的部分提示(912)计算系统的用户选择多个选项中的一者用于响应所检测到的通知。例如,图 8G中由主显示器102和动态功能行104显示的模态警报5156提示用户在关闭窗口580之前保存草稿电子邮件,并且包括“保存”示能表示5158、“不保存”示能表示5160和“取消”示能表示5162。在另一示例中,在图 12G中由动态功能行104显示的模态警报5280提示计算系统的用户确认其打算关闭web浏览器应用程序中的所有打开的标签。在又一个示例中,由图14E中的动态功能行104显示的模态警报5308提示计算系统的用户从注销示能表示5310、重新启动示能表示5312、关机示能表示5314和取消示能表示5316中的一者选择注销/关机选项。
在一些实施方案中,在触摸屏显示器上显示的通知的部分包括(914)对所检测到的通知的一个或多个建议响应。例如,图12C示出响应于在图 12B中的通知5264内的位置处检测到接触5266,动态功能行104显示响应对话框5268。在图12C中,响应对话框5268包括对图12A至图12B中所示的通知5264的内容的多个预测响应。在图12C中,响应对话框5268包括第一预测响应5270(“是”)、第二预测响应5272(“否”)和第三预测响应5274(“在路上!”)。图12C还示出了动态功能行104在对应于第一预测响应5270的位置处接收和检测接触5276(例如,轻击接触)。例如,响应于对第一预测响应5270的选择,计算系统通过与向计算系统的用户发送通知5264的通信模式相同的通信模式(例如,SMS、即时消息等) 将第一预测响应5270(“是”)发送到MAS。在另一示例中,响应于对第一预测响应5270的选择,计算系统使得第一预测响应5270(“是”)经由 (例如,由用户选择或在软件中设置的)默认通信模式发送到MAS。
在一些实施方案中,该通知对应于(916)传入的即时消息、SMS、电子邮件、语音呼叫或视频呼叫中的至少一者。在图10H中,例如,通知5218 对应于由Suzie S.发送给计算系统的用户的SMS、即时消息等。在另一示例中,在图11F中,界面5248对应于来自C.Cheung的呼进语音呼叫,并且在图11G中,界面5256对应于C.Cheung和计算系统的用户之间的正在进行的语音呼叫。在另一示例中,图12A至图12B中的通知5264对应于 MAS向计算系统的用户发送的SMS、即时消息等。
在一些实施方案中,通知对应于(918)模态警报,该模态警报由计算系统的处理器执行的应用程序响应于关闭应用程序或执行应用程序内的动作的用户输入而发出。在第一示例中,图8G示出了响应于在图8F中检测到使用光标504选择退出示能表示,模态警报5156提示计算系统的用户在关闭窗口580之前保存草稿电子邮件。在第二示例中,图11E示出了响应于在图11D中检测到使用光标504选择购买示能表示,模态警报5240提示计算系统100的用户提供其指纹以验证购买。在第三示例中,图12G示出了响应于检测到在图12F中使用光标504选择退出示能表示,模态警报5280 提示计算系统的用户确认其打算关闭web浏览器应用程序中的所有打开的标签。
在一些实施方案中,一组一个或多个示能表示包括(920)对应于至少一个系统级功能的至少一个系统级示能表示,并且通知对应于选择输入机构的一个或多个部分或系统级示能表示(例如,电源控件示能表示)中的至少一者的用户输入(例如,alt+tab或另一种键盘组合)。在一个示例中,图9示出了响应于从便携式计算系统100的一组物理按键106(图1A至图 1B)或从台式计算系统200的外围键盘206的一组物理按键106(图2A至图2D)接收到对应于指定物理按键组合(例如,alt+tab)的信号,动态功能行104显示应用程序选择窗口5164。在另一示例中,图14E示出了响应于检测到在图14D中对电源控件534的选择而显示模态警报5308的动态功能行104。
在一些实施方案中,计算系统检测(922)对应于所检测到的通知的该部分的触摸屏显示器上的用户触摸输入。根据确定用户触摸输入对应于第一类型(例如,轻扫以关闭),计算系统在第二用户界面中停止在触摸屏显示器上显示所检测到的通知的部分。根据确定用户触摸输入对应于与第一类型不同的第二类型(例如,轻击以执行动作),计算系统执行与所检测到的通知相关联的动作(例如,打开对话框以用于响应新收到的电子邮件、短信或IM;保存文档;退出程序等)。例如,图10H示出了动态功能行104检测接触5220从通知5128内的第一位置5222-A到第二位置5222-B 的从左到右的轻扫手势。继续讨论该示例,图11A示出了响应于在图10H 中检测到从左到右的轻扫手势,动态功能行104停止显示通知5218。在另一个示例中,图10G示出了动态功能行104在通知5264内的位置处接收和检测接触5266(例如,轻击接触)。继续讨论该示例,图12C示出响应于在图12B中的通知5264内的位置处检测到接触5266,动态功能行104显示响应对话框5268。
应当理解,对图47A至图47B中已经进行描述的操作的具体次序仅仅是示例性的,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法600、 700、800和1000)描述的其他过程的细节同样以类似的方式适用于上文参考图47A至图47B描述的方法900。
图48A至图48C是根据一些实施方案的移动用户界面部分的方法的流程图。方法1000在计算系统上执行,该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法1000 中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
计算系统在主显示器上显示(1002)用户界面,该用户界面包括一个或多个用户界面元素。例如,图12A示出了主显示器102在窗口5224内显示标签B的界面和覆盖在窗口5224上的通知5264。在图12A中,标签B的界面示出了网站B的主页(例如,相关联的URL为:www.website_B.com/home)。
计算系统识别(1004)一个或多个用户界面元素中的活动用户界面元素,所述一个或多个用户界面元素在主显示器上聚焦,其中所述活动用户界面元素与由计算系统执行的应用程序相关联。在图12A中,例如,标签B的界面在主显示器102上聚焦,如围绕标签B的粗线和标签B的粗体文本所示。
响应于识别在主显示器上聚焦的活动用户界面元素,计算系统在触摸屏显示器上显示(1006)对应于应用程序的一组一个或多个示能表示。在图 12A中,例如,动态功能行104显示用于网页浏览器应用程序的控件 (即,一组一个或多个示能表示),包括:地址栏5234中的网站B的主页 (例如,www.website_B.com/home),用于在最近浏览的网页之间导航的示能表示5230和5232,用于将当前网页添加到收藏夹或书签列表的示能表示5238,以及用于分别访问标签A和标签C的示能表示5262-A和5262- B。
计算系统检测(1008)用户输入以移动用户界面的相应部分。在一些实施方案中,用户界面的该部分是菜单、工具栏、工具集、通知等。例如,计算系统检测将菜单拖动到主显示器102的底部(或其他用户定义的位置) 的手势,或者通过右键单击动作或其他对应的示能表示将菜单移动到动态功能行104的指令。在一个示例中,图12A示出主显示器102显示计算系统的用户使用光标504将通知5264拖动到主显示器102的右下角的预定义位置。在另一示例中,图12E示出主显示器102显示计算系统的用户使用光标504将书签侧边栏拖动到主显示器102的右下角的预定义位置。
在一些实施方案中,用户界面的相应部分是(1010)对应于由计算系统执行的应用程序的菜单。例如,用户界面的相应部分是用于文字处理应用程序的菜单或工具栏。例如,在图12E中,由光标504拖动的相应用户界面的相应部分是窗口5224内的书签侧边栏。
在一些实施方案中,用户界面的相应部分是(1012)通知或模态警报中的至少一者。例如,在图12A中,由光标504拖动的相应用户界面的相应部分是通知5264。
允许用户将用户界面部分(例如,菜单、通知等)从主显示器快速移动到触敏副显示器为用户提供了一种方便和自定义的方式来访问用户界面部分。为用户提供方便和自定义的方式来经由触敏副显示器访问用户界面部分增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过帮助用户直接通过触敏副显示器来访问用户界面部分,只需较少交互而不必浪费时间寻找之前查看的(可能被掩藏的)用户界面部分),另外还通过使用户能够更快速有效地访问所需用户界面部分,减少了电力使用并延长了设备的电池寿命。此外,响应于用户输入而在触敏副显示器上显示用户界面部分在触敏副显示器处为用户界面部分提供了强调效果(因为在一些实施方案中,相应用户界面部分被显示为在触敏副显示器中覆盖其他示能表示),从而确保了相应用户界面部分是可见的并且易于在触敏副显示器上访问。
响应于检测到用户输入,并且根据确定用户输入满足预定动作标准,计算系统(1014):停止在主显示器上显示用户界面的相应部分;停止在触摸屏显示器上显示一组一个或多个示能表示的至少一个子集;并且在触摸屏显示器上显示用户界面的各个部分的表示。在一个示例中,图12B示出响应于图12A中计算系统的用户使用光标504将通知5264拖动到主显示器 102右下角的预定义位置,主显示器停止显示通知5264,并且动态功能行 104显示覆盖在示能表示5262-A和5262-B上的通知5264。在另一示例中,图12F示出了响应于在图12E中计算系统的用户使用光标504将书签侧边栏拖动到主显示器102右下角的预定义位置,动态功能行104停止显示与图12E中所示的web浏览器应用程序相关联的控件,并显示对应于所有预先存在的书签的一组书签示能表示5278。
在一些实施方案中,当用户输入是将用户界面的相应部分拖动到主显示器的预定义位置的拖动手势时,满足(1016)预定义的动作标准。在一些实施方案中,预定义位置是由计算系统的用户设置或由软件默认设置的多个预定义位置中的一者。在一个示例中,在图12B中,计算系统的用户使用光标504将通知5264拖动到预定义位置(例如,主显示器102的右下角)。在另一示例中,在图12E中,计算系统的用户使用光标504将书签侧边栏拖动到预定义位置(例如,主显示器102的右下角)。
在一些实施方案中,当用户输入是(1018)对应于将用户界面的相应部分移动到触摸屏显示器的预定义输入时,满足预定义的动作标准。例如,主显示器102显示用于文字处理应用程序的窗口,以及覆盖在文字处理应用程序的窗口上的格式工具栏。继续讨论该示例,响应于在格式工具栏上右键单击后选择特定的显示选项,或者当格式工具栏在主显示器102上聚焦时选择特定的显示选项,主显示器102停止显示格式工具栏并且动态功能行显示格式工具栏。
在一些实施方案中,用户界面的相应部分的表示覆盖(1020)在触摸屏显示器上的该组一个或多个示能表示上。例如,图12B示出响应于图12A中计算系统的用户使用光标504将通知5264拖动到主显示器102右下角的预定义位置,动态功能行104显示覆盖在示能表示5262-A和5262-B上的通知5264。
在一些实施方案中,一组一个或多个示能表示包括(1022)对应于至少一个系统级功能的至少一个系统级示能表示,并且在触摸屏显示器上显示用户界面的相应部分的表示之后,计算系统保持在触摸屏显示器上显示至少一个系统级示能表示。在图12B中,例如,动态功能行104显示覆盖在示能表示5262-A和5262-B上的通知5264,以及至少一个系统级示能表示 (例如,示能表示542)和永久性控件(例如,离开示能表示516和电源控件534)。在图12F中,例如,动态功能行104显示一组书签示能表示 5278,以及至少一个系统级示能表示(例如,示能表示542)和永久性控件 (例如,离开示能表示516和电源控件534)。
在一些实施方案中,响应于检测到用户输入,并且根据确定该用户输入不满足预定义的动作标准,计算系统(1024):保持在主显示器上显示用户界面的相应部分;并且保持在触摸屏显示器上显示该组一个或多个示能表示。例如,相对于图12A,如果计算系统的用户使用光标504将通知5264 拖到主显示器102的左下角,则通知5264将显示在主显示器102的左下角,并且动态功能行104将显示通知5264,因为左下角不是预定义位置 (例如,右下角是预定义位置)。
应当理解,对图48A至图48C中已经进行描述的操作的具体次序仅仅是示例性的,并非旨在表明所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文参考本文所述的其他方法(例如,方法600,700, 800和900)描述的其他过程的细节同样以类似的方式适用于上文参考图 48A至图48C描述的方法1000。
图49是描绘根据一些实施方案的通过在触敏副显示器处提供输入来浏览主显示器上的用户界面对象的方法1100的流程图。方法1100在计算系统上执行(1102),该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法1100中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
如下所述,方法1100(和相关联的界面)提供直观的方式来通过在触敏副显示器上提供输入来浏览主显示器上的用户界面对象。方法1100为用户提供了对触敏副显示器上的用户界面控件的快速访问,使得用户不需要将其手指从物理输入机构上的按键上的位置移开,而是可以简单地选择副显示器上的控件,而不必调整手指位置以移动到触控板,然后又将手指位置移回物理输入机构以继续工作。
如图49所示,方法1100包括接收打开应用程序的请求。例如,用户点击Web浏览器应用程序的图标或请求打开已在计算系统上执行的Web浏览器应用程序。在一些实施方案中,用户向计算系统提供打开应用程序的口头指令(例如,发给虚拟助理诸如SIRI的语言命令)。
响应于接收到请求,计算系统在主显示器上显示与在计算系统上执行的应用程序相关联的多个用户界面对象(1106)。例如,多个用户界面对象对应于web浏览应用程序中的标签、照片浏览应用程序中的单个照片、视频编辑应用程序中的视频的单个帧等。
在一些实施方案中,多个用户界面对象包括显示其相关联内容的第一用户界面对象,以及没有显示其相关联内容的其他用户界面对象。例如,如图16C所示,多个用户界面对象对应于浏览器应用程序中的网页浏览标签,并且第一用户界面对象对应于当前在主显示器102上聚焦的标签5052- A。如图16C所示,标签5052-A被显示为具有相关联的网络内容和其他用户界面对象(例如,显示标签5050-A和5051-A而没有其相关联的网络内容)。
响应于接收到该请求,计算系统还在触敏副显示器上显示(1108)每一者表示(即,对应于)多个用户界面对象中的一者的一组示能表示。例如,在图16C中,第一示能表示5052-B对应于第一用户界面对象5052-A。在一些实施方案中,所述一组示能表示在对应于系统级功能的至少一个系统级示能表示之后显示(例如,上面详细讨论了系统级示能表示,如图16C 所示,用于访问亮度、回放和音量控制的系统级示能表示被显示为与触敏副显示器104中的一组示能表示相邻)。
在一些实施方案中,对应于第一标签的一组示能表示中的第一示能表示相比所述一组中的示能表示以更大的显示尺寸显示(例如,第一示能表示5052-B相对于其他示能表示5050-B和5051-B以较大的显示尺寸显示)。在一些实施方案中,相对于第一示能表示5052-B的亮度水平,其他示能表示也以较低的亮度水平显示。
在一些实施方案中,在接收到打开应用程序的请求之前,触敏副显示器在触敏副显示器的应用程序特定区域中包括不同的一组示能表示(诸如,用于访问Finder应用程序中的各种文件夹的示能表示,诸如在图21B 中的触敏副显示器104中所示的示能表示)。
根据方法1100,计算系统通过触敏副显示器检测(1110)在从所述一组示能表示的第一示能表示到所述一组示能表示的第二示能表示的方向上的轻扫手势(例如,5011-A,图16C)。在一些实施方案中,第一示能表示表示第一用户界面对象(例如,第一示能表示5052-B表示第一用户界面对象5052-A),第二示能表示表示与第一用户界面对象不同的第二用户界面对象(例如,第二示能表示5051-B表示第二用户界面对象5051-A)。
响应于检测到轻扫手势,计算系统更新主显示器(例如,在轻扫手势期间)以停止显示第一用户界面对象的相关联内容,并显示第二用户界面对象的相关联内容。例如,如图16D所示,当轻扫手势向第二示能表示 5051-B(例如,输入5011-B,图16D)移动并与其接触时,作为响应,主显示器被更新以包括第二用户界面对象5051-A的相关联的内容。在一些实施方案中,第二示能表示5051-B还在触敏副显示器104上更新以具有较大的显示尺寸和提高的亮度水平。
在一些实施方案中,在触敏副显示器104上显示的相应示能表示上的轻击还可用于(代替轻扫手势或除轻扫手势之外)使得方便导航主显示器上的多个用户界面对象。例如,输入5011-A、输入5011-B和输入5011-C 中的每一者可对应于离散输入,或者可对应于跨触敏副显示器104的连续轻扫手势。
在一些实施方案中,计算系统检测轻扫手势跨触敏副显示器的连续行进,包括轻扫手势接触表示第三用户界面对象的第三示能表示(如图16E 所示,5011-C接触第三示能表示5050-B)。响应于检测到轻扫手势接触第三示能表示,计算系统更新主显示器以显示第三用户界面对象的相关联内容(如图16E所示)。
在一些实施方案中,所述一组示能表示中的每个示能表示包括所述多个用户界面对象中相应用户界面对象的相应相关联内容的表示。例如,示能表示5050-B、示能表示5051-B和示能表示5052-B中的每一者包括主显示器102上显示的对应标签的内容的迷你视图/缩小视图(例如,如图16C 所示)。
允许用户通过在触敏副显示器处提供输入来在主显示器上的用户界面对象(例如,浏览器标签)中进行快速导航,为用户提供了一种便捷的方式来在用户界面对象中进行快速导航。为用户提供便捷的方式来通过触敏副显示器在用户界面对象中进行快速导航(并减少在用户界面对象中进行导航所需的输入数量,从而需要较少交互来在用户界面对象中进行导航) 增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来在主显示器上的用户界面对象中进行导航),另外还通过使用户能够在主显示器上的用户界面对象中进行更快速有效的导航,减少了电力使用并延长了设备的电池寿命。此外,当用户在触敏显示器上提供输入(例如,轻扫手势)以在主显示器上的用户界面对象中进行导航时,触敏显示器上的每个被接触的示能表示(对应于用户界面对象其中之一)在视觉上可区别于其他示能表示(例如,相应的被接触的示能表示被放大并且边框可被突出显示),从而使得在触敏副显示器上显示的信息对于用户更加可辨。
在一些实施方案中,计算系统在检测到轻扫手势之前(或在检测到轻扫手势的移动之前),在第一示能表示上方检测与触敏副显示器的初始接触。响应于检测到初始接触,计算系统增加第一示能表示的放大水平(或显示器尺寸)。在一些实施方案中,根据确定用户已经在对应于相应用户界面对象的相应示能表示处而不是在主显示器102上聚焦的用户界面对象处提供了输入,计算设备增加相应示能表示的放大水平。
在一些实施方案中,应用程序是网页浏览应用程序,并且多个用户界面对象各自对应于网页浏览标签。
在一些实施方案中,计算系统检测主显示器上的网页浏览应用程序的 URL输入部分的输入。响应于检测到输入,计算系统更新触敏副显示器以包括喜爱的URL的表示。图16P中示出了一个示例。
在一些实施方案中,应用程序是照片浏览应用程序,并且多个用户界面对象各自对应于单独的照片(如图27B所示)。在一些实施方案中,所述一组示能表示包括基于每个用户界面对象的内容的类型的不同表示类型。例如,如果一个UI对象对应于实时照片,则显示适当的指示(如图 28K所示)。
在一些实施方案中,应用程序是视频编辑(或视频回放)应用程序,并且多个用户界面对象分别对应于相应视频中的各个帧。在图19A至图 19B中示出了一个示例,其中用户能够提供输入5015-A以快速导航相应视频的各个帧。
应当理解,对图49中已经进行描述的操作的具体次序仅仅是示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。
图50是描绘根据一些实施方案的通过在触敏副显示器处提供输入来浏览主显示器上的搜索结果的方法1200的流程图。方法1200在计算系统上执行(1202),该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法1200中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
如下所述,方法1200(和相关联的界面)提供直观的方式来通过在触敏副显示器上提供输入来浏览和定位主显示器上的搜索结果。方法1200为用户提供了对触敏副显示器上的用于在搜索结果之间进行导航的用户界面控件的快速访问,使得用户不需要将其手指从物理输入机构上的按键上的位置移开,而是可以简单地选择副显示器上的控件,而不必调整手指位置以移动到触控板,然后又将手指位置移回物理输入机构以继续工作。
根据方法1200,计算系统接收(1204)在计算设备的主显示器上显示的内容内搜索的请求。例如,如图32A至图32B所示,该请求对应于对网页上的文本的搜索,如图32C至图32E所示,该请求对应于对文档内文本的搜索。
响应于接收到请求,计算系统在主显示器上显示(1206)响应于搜索的多个搜索结果。在一些实施方案中,在内容内搜索的请求是在内容中定位搜索字符串的请求,并且多个搜索结果各自至少包括搜索字符串(例如,搜索字符串是“the”,如图32A至图32E所示)。在一些实施方案中,显示多个搜索结果包括突出显示多个搜索结果中的每一者的搜索字符串(例如,如图32A至图32E所示,搜索字符串“the”在web浏览器和记事本应用程序用户界面中被突出显示)。
在一些实施方案中,(主显示器102)的焦点在多个搜索结果的第一搜索结果上(例如,如图32A所示,使用不同于用于突出显示其余部分的颜色来突出显示第一搜索结果)。
响应于接收到该请求,计算系统还在触敏副显示器上显示(1208)各自对应于多个搜索结果的相应搜索结果的各自的表示。例如,该表示是刻度标记,其中每者对应于搜索结果的相应搜索结果(如图32A所示)。在一些实施方案中,刻度标记以对应于主显示器上的搜索结果的排序的顺序在触敏副显示器上的行中显示(如图32A所示)。在一些实施方案中,触敏副显示器104还包括指示所选择的搜索结果的当前位置(例如,如图32A所示的“第1条,共29条”)的文本。
根据方法1200,计算系统通过触敏副显示器检测(1210)选择相应表示中的表示的触摸输入(例如,轻击或轻扫),该表示对应于多个搜索结果中不同于第一搜索结果的第二搜索结果。例如,如图32B和图32D所示,触摸输入分别选择第十和第十三表示。
响应于检测到输入,计算系统将主显示器上的焦点(1212)改变为第二搜索结果。例如,如图32B所示,响应于触摸输入选择触敏副显示器中所示的第十三表示,计算系统将主要显示上的焦点改变为第二搜索结果。这样,当用户在触敏副显示器104内进行刷动/轻扫/手势时,能够快速且容易地定位和查找每个搜索结果。
允许用户通过在触敏副显示器处提供输入来在主显示器上的搜索结果中进行快速导航,为用户提供了一种便捷的方式来在搜索结果中进行快速导航。为用户提供便捷的方式来通过触敏副显示器在搜索结果中进行快速导航(并减少在搜索结果中进行导航所需的输入数量,从而需要较少的用户交互来快速浏览多个搜索结果)增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来在主显示器上的多个搜索结果中进行导航),另外还通过使用户能够在主显示器上的搜索结果中进行更快速有效的导航,减少了电力使用并延长了设备的电池寿命。此外,当用户在触敏显示器上提供输入(例如,轻扫手势)以在主显示器上的搜索中进行导航时,触敏显示器上的每个被接触的示能表示(对应于搜索结果其中之一)在视觉上可区别于其他示能表示 (例如,相应的被接触的示能表示被放大并且边框可被突出显示),从而使得在触敏副显示器上显示的信息对于用户更加可辨。
在一些实施方案中,改变焦点包括在主显示器上修改第二搜索结果的视觉特征(例如,用于呈现的视觉特征)(例如,以较大的字体大小显示第二搜索结果或以不同的突出颜色显示第二搜索结果)。
在一些实施方案中,计算系统检测在触敏副显示器上跨各个表示中的至少两个表示移动的手势。响应于检测到手势,当轻扫手势跨相应表示中的至少两个表示移动时,计算系统将主要显示上的焦点改变为对应于相应表示中的至少两个表示的相应搜索结果(例如,当接触跨各个表示中的每一个表示移动时,主显示器被更新以显示适当的搜索结果,从而允许利用单次轻扫手势快速且容易地导航所有搜索结果)。
在一些实施方案中,计算系统根据确定手势的速度高于阈值速度,该计算系统将主显示器上的焦点改变为除了对应于相应表示的至少两个表示之外的相应的搜索结果。例如,如果手势以高于阈值速度的速度行进,则计算系统使得主显示器102除了显示在手势期间接触的那些之外,还循环显示更多的搜索结果。在一些实施方案中,手势是轻扫手势或轻弹手势。
在一些实施方案中(并且如图32C至图32D所示),触敏副显示器 104包括“替换”示能表示,当其被选择时,使得计算系统替换当前所选择的搜索结果或替换主显示器102上显示的所有搜索结果。在一些实施方案中,响应于对“替换”示能表示的选择,计算系统更新触敏副显示器104,以包括用于选择是替换当前所选择的搜索结果还是所有搜索结果的附加选项(如图32E所示)。
应当理解,对图50中已经进行描述的操作的具体次序仅仅是示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对所述操作进行重新排序。
图51是描述根据一些实施方案的通过在触敏副显示器处提供输入来修改在主显示器上显示的事件的详情的方法1300的流程图。方法1300在计算系统上执行(1302),该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法1300中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
如下所述,方法1300(和相关联的界面)提供直观的方式来通过在触敏副显示器上提供输入来修改显示在主显示屏上的事件的详细信息。方法 1300为用户提供了对触敏副显示器上的(用于修改事件详细信息的)用户界面控件的快速访问,使得用户不需要将其手指从物理输入机构上的按键上的位置移开,而是可以简单地选择副显示器上的控件,而不必调整手指位置以移动到触控板(例如,浪费时间导航复杂的菜单分级结构),然后又将手指位置移回物理输入机构以继续工作。
根据方法1300,计算系统在主显示器上显示(1304)日历应用程序(例如,在图36A至图36J中示出日历应用程序的各种用户界面)。在一些实施方案中,触敏副显示器104中可用的控件基于与主显示器上的日历应用程序相关联的当前视图而变化(例如,取决于正在使用日、周、月视图还是年视图在查看日历应用程序,如图36A至图36D所示)。
计算系统接收(1306)显示关于与日历应用程序相关联的事件的信息的请求。响应于接收到请求,计算系统在主显示器上显示(1308)第一事件的事件详细信息,该事件详细信息包括事件的开始时间和结束时间。例如,该请求对应于对主显示器上显示在日历应用程序内的事件的选择(如图36I所示,在主显示器102上的日历应用程序中呈现标记为“早餐”的事件的事件详细信息)。如图36I所示,事件详细信息指示“早餐”事件定在2015 年6月24日上午10点至11点。
响应于接收到该请求,计算系统在触敏副显示器上显示(1310)一个示能表示,该示能表示指示至少包括开始时间和结束时间的时间范围(如图36I 所示,显示示能表示,并且事件的当前开始时间和结束时间以蓝色突出显示)。
在一些实施方案中,计算系统通过触敏副显示器检测修改时间范围的示能表示处的输入。在一些实施方案中,修改时间范围的输入是与示能表示保持接触长于阈值时间量的按压输入,然后跨触敏副显示器的示能表示的至少一部分移动(例如,该按下输入还可以被称为将事件的结束时间移动到下午3点的拖动手势,如图36J所示)。
响应于检测到该输入,计算系统:(i)根据该输入修改事件的开始时间和结束时间中的至少一者;并且(ii)根据该输入在主显示器上显示事件的修改时间范围(例如,如图36J所示,主显示器102被更新以反映事件将在下午3点结束)。
在一些实施方案中,修改时间范围的输入是跨触敏副显示器移动的轻扫手势,并且使计算系统为事件选择新的开始时间和新的结束时间。在一些实施方案中,新的开始和结束时间对应于具有由开始时间和结束时间覆盖的相同持续时间的时隙。例如,计算设备使得触敏副显示器104跳转到与先前的开始时间和结束时间相同的持续时间的下一个可用的时间段,例如,如果现有的开始/结束时间是下午1点至2点,则轻扫可能将新的开始时间和结束时间选择为下午2点至3点。
在一些实施方案中,计算系统将具有修改的开始和/或结束时间的事件保存到计算系统的存储器。
允许用户在触敏副显示器上快速轻松地编辑事件详情为用户提供了一种快捷的方式来快速编辑事件详情,而不必执行额外的输入(例如,必须在使用键盘和使用触控板之间来回跳转以修改事件详情)。为用户提供便捷的方式来通过触敏副显示器快速编辑事件详情(并减少编辑事件详情所需的输入数量,从而需要较少交互来实现编辑事件详情的所需结果)增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来快速编辑某些事件详情),另外还通过使用户能够更快速有效地编辑事件详情,减少了电力使用并延长了设备的电池寿命。另外,通过响应于触敏副显示器处的输入而更新主显示器 (例如,以显示更新的事件开始和结束时间),用户能够通过提供修改事件的输入以有效的方式来维持与设备的交互,然后立即看到在主显示器上反映的修改,以便用户能够决定是否提供附加输入。
应当理解,对图51中已经进行描述的操作的具体次序仅仅是示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对所述操作进行重新排序。
图52是描述根据一些实施方案的在触敏副显示器处呈现有关外部设备的可执行信息的方法1400的流程图,该外部设备与包括触敏副显示器的计算系统连接。方法1400在计算系统上执行(1402),该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法1400中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
如下所述,方法1400(和相关联的界面)提供了一种直观的方式,以便在触敏副显示器处呈现有关与包括触敏副显示器的计算系统连接的外部设备的可执行信息。方法1400为用户提供了对触敏副显示器上的(例如,用于控制外部设备的)用户界面控件的快速访问,使得用户不需要将其手指从物理输入机构上的按键上的位置移开,而是可以简单地选择副显示器上的控件,而不必调整手指位置以移动到触控板(例如,浪费时间导航复杂的菜单层级结构以定位用于控制外部设备的所需功能),然后又将手指位置移回物理输入机构以继续工作。
根据方法1400,计算系统检测(1404)该计算系统与不同于计算系统的外部设备之间的新连接(例如,使用物理电缆连接附加监视器、通过蓝牙或通过耳机插孔连接耳机等)。响应于检测到新的连接,计算系统在触敏副显示器上显示(1406)对应于通过外部设备可用的功能的多个示能表示。
这样,用户可以通过简单地从触敏副显示器中选择一个选项来快速决定如何处理新连接的外部设备。因此,用户不需要中断其当前工作流程,以便决定如何处理新的外部设备(例如,必须导航到菜单,然后选择新的外部设备的一个选项,或者必须重新定位他们的手以便与触控板进行交互)。
在一些实施方案中,计算系统通过触敏副显示器接收对应于通过外部设备可用的第一功能的第一示能表示的选择。响应于接收到该选择,计算设备启动第一功能的性能(例如,计算设备开始向耳机输出音频,或者计算设备开始使用外部监视器显示镜像)。
在一些实施方案中,外部设备是与主显示器和触敏副显示器不同的附加显示器。在一些实施方案中,多个示能表示包括第一示能表示,当选择该第一示能表示时,引起计算系统通过附加显示器启动执行显示器镜像功能。
允许用户通过触敏副显示器有效地利用外部设备为用户提供了一种便捷的方式来访问可能以其他方式被掩埋在菜单中的功能。为用户提供便捷的方式来访问可能以其他方式被掩埋在菜单中的外部设备的功能(并因此减少访问功能所需的输入数量,从而需要较少交互以便使用外部设备)增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来执行外部设备的某一功能),另外还通过使用户能够更快速有效地与外部设备交互,减少了电力使用并延长了设备的电池寿命。这样,触敏副显示器还传达了有关设备内部状态的信息(通过反映设备与外部设备之间的连接状态,并允许用户轻松与外部设备进行交互)。
应当理解,对图52中已经进行描述的操作的具体次序仅仅是示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对所述操作进行重新排序。
图53是描述根据一些实施方案的通过在触敏副显示器处提供输入来预览在主显示器上的应用程序内显示的字符的方法1500的流程图。方法1500 在计算系统上执行(1502),该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构) 的第二外壳,以及与主显示器不同的触敏副显示器。方法1500中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
如下所述,方法1500(和相关联的界面)提供直观的方式来通过在触敏副显示器上提供输入来预览显示在主显示器上的应用程序内的字符。方法1500为用户提供了对触敏副显示器上的(例如,用于轻松预览字符的) 用户界面控件的快速访问,使得用户不需要将其手指从物理输入机构上的按键上的位置移开,而是可以简单地选择副显示器上的控件,而不必调整手指位置以移动到触控板(例如,浪费时间导航复杂的菜单层级结构来定位所需字符),然后又将手指位置移回物理输入机构以继续工作。
根据方法1500,计算系统在主显示器上显示(1504)用于在计算系统上执行的应用程序的用户界面(例如,该用户界面用于消息应用程序,如图 33A所示)。计算系统检测(1506)用户界面内的特定位置处的第一输入(例如,输入5046-A,图32E)。例如,第一输入对应于撰写或编辑文档的请求,开始撰写或编辑文本消息的请求等。在一些实施方案中,第一输入使得计算系统更新所显示的光标的位置,从而将其移动到检测到输入的特定位置。
响应于检测到第一输入,计算系统在触敏副显示器上显示(1506)每一者对应于不同字符的一组示能表示(例如,每一者对应于单个表情符号的一组示能表示,如图33A所示)。
在一些实施方案中,还可以在触敏副显示器处提供第一输入,以便在触敏副显示器中激活一组示能表示的显示(例如,第一输入对应于输入 5046-B,图33B)。
在一些实施方案中,显示应用程序的用户界面包括更新触敏副显示器以包括所述一组示能表示。例如,如果应用程序打开并允许用户开始撰写或编辑文档,则不需要额外的输入来使触敏第二显示器包括一组示能表示。
在一些实施方案中,计算系统至少部分地基于包括在用户界面中的文本内容来确定包括在所述一组示能表示中的示能表示(例如,基于已经被输入的内容、在已经输入特定单词时键入的先前选择的表情符号等,在所述一组示能表示变化中显示表情符号)。在一些实施方案中,响应于检测到用户已经修改了包括在用户界面中的文本内容(例如,当用户键入或删除文本时,在触敏副显示器中显示的建议的表情符号可变化)进行确定。
在一些实施方案中,计算系统通过触敏副显示器检测对应于不同字符的第一字符的第一示能表示(例如,第一示能表示对应于第一表情符号字符)上方的第二输入(例如,输入5047,图33C)。响应于检测到第二输入,计算系统在主显示器上的特定位置处显示第一字符的预览,同时输入保持与第一示能表示接触。例如,如图33C所示,在主显示器102上的用于消息应用程序的用户界面中呈现由输入5047接触的第一表情符号字符的预览。
在一些实施方案中,计算系统还通过触敏副显示器检测第二输入从第一示能表示移动到对应于不同字符的第二字符的第二示能表示(例如,输入5047行进到触敏副显示器上的对应于输入5048的位置,图33D)。响应于检测到第二输入从第一示能表示和第二示能表示的移动,计算系统用第二字符的预览替换第一字符的预览(如图33D所示)。在一些实施方案中,当第二输入继续跨触敏副显示器移动,该第二个输入接触该组示能表示中的相应示能表示时,计算系统显示不同字符的相应字符的预览(例如,主显示器102上的预览被更新,以在触敏副显示器上示出位于输入 5047和输入5048之间的每个表情符号)。
在一些实施方案中,第二字符的预览保持在主显示器上显示,同时第二输入保持与第二示能表示接触。
在一些实施方案中,计算系统在与第二示能表示接触的同时检测第二输入的抬离。响应于检测到抬离,计算系统更新用户界面以包括第二用户界面元素的永久显示(即,不是预览)。
在一些实施方案中,在第二输入与第二示能表示接触的同时,计算系统检测附加输入(例如,在第二输入期间在第二示能表示处更有力的按下)。响应于检测到附加输入,计算系统更新用户界面以包括第二用户界面元素的永久显示(即,不是预览)。
允许用户通过在触敏副显示器上提供直观的输入来快速轻松地预览字符在主显示器上的应用程序内的外观为用户提供了一种便捷的方式来快速预览字符在应用程序内的外观。为用户提供便捷的方式来快速预览字符在应用程序内的外观增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来快速预览字符的外观,从而需要较少交互来预览这些字符在主显示器上的外观),另外还通过使用户能够更快速有效地预览字符,减少了电力使用并延长了设备的电池寿命。这样,使用户能够与其设备进行有效且持续的交互,因为允许用户继续预览字符,然后继续提供输入,直到所需的字符被定位。
在一些实施方案中,上述用于通过触敏副显示器中的轻扫手势进行表情符号预览的功能也用于对显示在应用程序的用户界面中的文本执行其他修改。例如,触敏副显示器可显示颜色选择器(例如,图15B中所示的颜色选项行,下面参考方法1600更详细地描述),并且当用户在颜色选择器内轻扫各种颜色选项时,所选择的文本在主显示器上被动态地修改,以向用户提供针对与轻扫手势结合接触的各种颜色选项中的每一个颜色选项的文本外观的预览。
应当理解,对图53中已经进行描述的操作的具体次序仅仅是示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对所述操作进行重新排序。
图54是描述根据一些实施方案的通过在触敏副显示器处提供输入来修改用于在主显示器上的内容编辑应用程序内呈现内容的视觉特征的方法 1600的流程图。方法1600在计算系统上执行(1602),该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法1600中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
如下所述,方法1600(和相关联的界面)提供了一种直观的方式,以通过在触敏副显示器上提供输入来修改用于在主显示器上的内容编辑应用程序中呈现内容的视觉特征。方法1600为用户提供了对触敏副显示器上的 (用于轻松修改用于在主显示器上呈现内容的视觉特征的)用户界面控件的快速访问,使得用户不需要将其手指从物理输入机构上的按键上的位置移开,而是可以简单地选择副显示器上的控件,而不必调整手指位置以移动到触控板(例如,浪费时间导航复杂的菜单层级结构来定位允许修改视觉特征的所需功能),然后又将手指位置移回物理输入机构以继续工作。
根据方法1600,计算系统接收(1604)打开内容编辑应用程序的请求 (例如,用于撰写和编辑文档、绘图、照片等的应用程序,诸如图15B所示的绘图应用程序)。响应于接收到请求,计算系统在主显示器上显示 (1606)内容编辑应用程序(例如,如图15B所示)。
响应于接收到该请求,计算系统还在触敏副显示器上显示(1608)用于修改至少一个视觉特征的用户界面控件(例如,包括颜色值的滑尺的颜色选择器,用于为内容编辑应用程序中显示的内容选择颜色,诸如图15B中所示的颜色选择器5505),该至少一个视觉特征用于在内容编辑应用程序内呈现内容。在一些实施方案中,以基本显示模式(图15B)示出了颜色选择器5505,并且在其他情况下(或响应于用户在示能表示5506处的用户输入),颜色选择器以高级显示模式显示(如图15E至图15H所示)。在一些实施方案中,(基本显示模式和高级显示模式中的)用户界面控件包括相应的控件,每一者对应于沿着值的滑动尺度的至少一个视觉特征的相应值(例如,图15B的颜色选择器5505中示出的每个颜色块对应于一个颜色值)。
在一些实施方案中,计算系统通过触敏副显示器检测用户界面控件中为至少一个视觉特征选择第一值的输入(例如,输入5010-C选择粉红色色调)。在检测到输入之后,计算系统使用至少一个视觉特征的第一值来在内容编辑应用程序中呈现内容(例如,使用第一值呈现添加到内容编辑应用程序的所有新内容和/或使用第一值呈现当前选择的内容)。例如,如图 15D所示,使用第一个值呈现示例性人物线条画的头部。
在一些实施方案中,在呈现内容之前,计算系统接收对内容的选择 (例如,选择人物线条画的头部的输入,诸如通过光标504接收的输入,图15A)。在一些实施方案中,呈现内容包括使用用于至少一个视觉特征的第一值来呈现内容的预览(例如,对人物线条画的头部的修改是预览)。
在一些实施方案中,值的滑尺表示不同的颜色色度。在一些实施方案中,第一值对应于第一颜色的第一色度,并且方法1600还包括:根据确定输入满足预定标准(保持接触超过阈值时间量或满足基于强度的阈值),修改触敏副显示器上的用户界面控件以包括用于选择与第一颜色的第一色度不同的第一颜色的其他色度的选项。在图15B至图15D中示出了一个示例,其中输入5010保持与触敏副显示器104接触超过阈值时间量,并且作为响应,触敏副显示器呈现用于选择第一颜色的其他色度的选项(例如,粉红色的其他色度)。在一些实施方案中,用户仅需要跨第一颜色的其他色度轻扫输入,以便快速预览这些其他颜色在主显示器102上的显示。
在一些实施方案中,在输入保持与触敏副显示器接触的同时呈现预览。在一些实施方案中,响应于检测到输入的抬离,计算系统停止显示预览,并且替代地显示具有用于至少一个视觉特征的第一值的所选择的内容 (例如,人物线条画的头部以永久性的方式显示,而不仅仅是当输入与触敏副显示器104保持接触时持续的预览)。
在一些实施方案中,计算系统响应于检测到输入的抬离,显示具有至少一个视觉特征的修改值的可编辑内容的部分。
因此,为用户提供了一种直观的方式,以通过在触敏副显示器上提供输入来修改用于在主显示器上的内容编辑应用程序中呈现内容的视觉特征。为用户提供直观的方式来通过这种方式修改视觉特征增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在触敏副显示器上的单个输入或手势来快速预览某些视觉特征在用于在主显示器上呈现内容时的外观),另外还通过使用户能够以更快有效的方式预览视觉特征的变化,减少了电力使用并延长了设备的电池寿命。这样,使用户能够与其设备进行有效且持续的交互,因为允许用户继续预览视觉特征的修改在主要显示器上的外观,然后继续提供输入,直到视觉特征的所需修被定位。
应当理解,对图54中已经进行描述的操作的具体次序仅仅是示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对所述操作进行重新排序。
图66是描绘根据一些实施方案的使用生物特征传感器来实现有效登陆的方法2800的流程图。方法2800在计算系统上执行(2802),该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘 (在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法2800中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
如下所述,方法2800(和相关联的界面)提供直观的方式来使用生物特征传感器来实现有效登录(需要更少的输入的登录,在某些情况下仅需要单个输入来完成登录)。方法2800为用户提供了快速登录其设备的能力,使得用户不必总是键入他们的密码,或者必须导航到用户特定的登录页面(而是用户简单地提供生物特征信息,并且基于该生物特征信息,设备识别用户并允许快速登录)。
根据方法2800,电子设备在设备处于锁定状态时(例如,锁定状态是设备的一个或多个特征被禁用并且对敏感信息的访问或者更改或删除信息的能力被禁止的状态),显示(2804)与登录到包括第一用户账户和第二用户账户的多个用户账户相关联的相应登录用户界面。示例性登录用户界面显示在图26C的主显示器102上。
在一些实施方案中,登录用户界面包括提供生物特征信息的指令(例如,如图26C所示,登录用户界面包括“使用Touch ID登录或切换用户”的指令)。在一些实施方案中,设备包括与生物特征传感器相邻的副显示器(例如,本文所述的触敏副显示器104),并且方法2800包括:在设备的显示器上显示登录用户界面时,在副显示器上显示通过生物特征传感器提供生物特征信息的指令(例如,副显示器104包括文本“使用Touch ID 登录”)。在一些实施方案中,生物特征传感器是指纹传感器。在一些实施方案中,生物特征传感器是面部检测传感器。在一些实施方案中,生物特征传感器是视网膜扫描器。
在显示登录用户界面的同时,电子设备接收(2806)关于用户的生物特征信息。例如,用户在电子设备的预定义区域提供指纹(例如,在与电子设备集成的生物特征传感器处,诸如位于物理键盘上方并与副显示器相邻的生物特征传感器)。在一些实施方案中,生物特征传感器与副显示器集成。
响应于接收到生物特征信息,在第一用户账户和第二用户账户在设备上没有活动会话(例如,设备刚刚启动或用户尚未登录设备)时,电子设备确定该生物特征信息是否与多个用户账户中的第一用户账户或第二用户账户的生物特征信息一致。例如,如图26C所示,用户“Johnny Appleseed”和“Sally”尚未登录,用户“Josh Olson”已登录(如所显示的登录用户界面上的名称Josh Olson附近的以橙色突出显示的复选标记所指示)。
根据确定当第一用户账户在设备上没有活动会话的情况下,生物特征信息与多个用户账户的第一用户账户的生物特征信息一致,设备在显示器上显示(2808)输入第一用户账户的登录凭证的提示。例如,提示包括文本“初始登录时禁用Touch ID,请输入您的密码”(如图26A所示,在接收到来自用户“Johnny Appleseed”的生物特征信息之后)。
根据确定当第二用户账户在设备上没有活动会话的情况下,生物特征信息与多个用户账户的第二用户账户的生物特征信息一致,设备在显示器上显示(2810)输入第二用户账户的登录凭证的提示。例如,提示类似于图 26A所示的提示,但是针对第二用户账户显示(例如,针对用户“Sally”而不是“Johnny Appleseed”,响应于接收到来自用户“Sally”的生物特征信息)。
这样,为用户提供了一种直观的方式,以通过在生物特征传感器上提供单个输入来访问用户专用登录页面。为用户提供直观的方式来通过这种方式访问用户专用登录页面增强了计算系统的可操作性,并且使用户设备界面更有效(例如,通过要求在生物特征传感器上的单个输入或手势来快速访问适当的用户专用登录页面,从而需要较少交互来达到用户专用登录页面),另外还通过使用户能够通过单个输入访问登录页面,减少了电力使用并延长了设备的电池寿命。
在一些实施方案中,电子设备响应于接收到生物特征信息:根据确定该生物特征信息与多个用户账户中的第一用户账户的生物特征信息一致,同时第一用户账户在设备上具有活动会话,相对于第一用户账户解锁设备 (例如,不需要附加用户输入,诸如不需要第一用户账户输入密码)。例如,在设备上具有活动会话时,第二用户账户对应于图26C所示的用户“Josh Olson”。
在一些实施方案中,响应于接收到生物特征信息:根据确定该生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致,同时第二用户账户在设备上具有活动会话,相对于第二用户账户解锁设备(例如,不需要附加用户输入)。例如,其他用户中的一者(诸如,“Sally”)已经登录并且在设备上具有活动会话,因此设备立即解锁,而不需要附加输入。
在一些实施方案中,响应于接收到生物特征信息:根据确定该生物特征信息与设备的任何用户账户的生物特征信息不一致,将设备保持在锁定状态。例如,如果在设备上没有用户账户的一些其他用户尝试提供生物特征信息(诸如,指纹),则设备处于锁定状态(例如,设备继续显示登录用户界面,并且可显示指示所提供的生物特征信息不被识别的消息)。
在一些实施方案中,登录用户界面包括对应于多个用户账户的多个可选择的示能表示(如图26C所示,针对每个用户示出可选择的示能表示)。
在一些实施方案中,设备在显示用于输入第一用户账户的登录凭证 (例如,图26A所示的提示)的提示时,接收登录凭证的输入(例如,在“输入密码”输入框处输入密码);并且响应于接收到登录凭证的输入,设备确定登录凭证是否与第一用户账户的登录凭证一致。
根据确定登录凭证与第一用户账户的登录凭证一致,该设备相对于第一用户账户被解锁。根据确定登录凭证与第一个用户账户的登录凭证不一致,设备保持处于锁定状态。
在一些实施方案中,当显示提示以输入第二用户账户的登录凭证时,设备接收登录凭证的输入(例如,第二用户在图26A中的“输入密码”输入框中输入的密码)。响应于接收到登录凭证的输入,设备确定该登录凭证是否与第二用户账户的登录凭证一致。
根据确定该登录凭证与第二用户账户的登录凭证一致,相对于第一用户账户解锁设备;以及根据确定该登录凭证与第二用户账户的登录凭证不一致,将设备保持在锁定状态。
应当理解,对图66中已经进行描述的操作的具体次序仅仅是示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对所述操作进行重新排序。
图67是描述根据一些实施方案的使用生物特征传感器来在登陆的用户账户之间实现快速切换的方法2900的流程图。方法2900在计算系统上执行(2902),该计算系统包括处理器、存储器、包括主显示器的第一外壳和至少部分地包含物理键盘(在本文中也称为物理输入机构)的第二外壳,以及与主显示器不同的触敏副显示器。方法2900中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
在一些实施方案中,计算系统是便携式计算系统100(图1A)或台式计算系统200(图2A至图2D)。在一些实施方案中,主显示器是在便携式计算系统100(图1A)的显示器部分110(在本文中也称为包括主显示器102的第一外壳110)中实现的主显示器102(图1A)。另选地,在一些实施方案中,主显示器是在外围显示设备204(在本文中也称为包括主显示器102的第一外壳204)(图2A至图2D)中实现的主显示器102(图 2A至图2D)。在一些实施方案中,第二外壳是便携式计算系统100的主体部分120(图1A至图1B),其至少部分地包含触敏副显示器(例如,动态功能行104,图1A至图1B)和物理键盘(例如,物理按键组106,图 1A至图1B)。另选地,在一些实施方案中,第二外壳是台式计算系统200 的外围键盘206(图2A至图2B),其至少部分地包含触敏副显示器(例如,动态功能行104,图2A至图2B)和物理键盘(例如,物理按键组 106,图2A至图2B)。另选地,在一些实施方案中,第二外壳是台式计算系统200的第一外围输入机构212(图2C),其至少部分地包含触敏副显示器(例如,动态功能行104,图2C),并且第二外壳包括输入机构(例如,触控板108,图2C)且不包括物理键盘。
如下所述,方法2900(和相关联的界面)提供直观的方式来使用生物特征传感器来在登陆的用户账户之间实现快速切换。方法2900为用户提供控件和指导,允许用户通过简单地提供生物特征信息(而不必提供密码或导航到切换用户的用户界面)来切换到其用户账户。
根据方法2900,在设备登录到第一用户账户时,电子设备显示(2904) 与第一用户账户相关联的用户界面(例如,第一用户账户的主屏幕或桌面)。该设备与包括第一用户账户和第二用户账户的多个用户账户相关联,并且第二用户账户与能够登录到第二用户账户的生物特征信息相关联。
在显示与第一用户账户相关联的用户界面时,设备通过具有集成生物特征传感器的输入元件接收(2906)输入。例如,第二用户在第一用户账户当前登录时在集成生物特征传感器处提供输入。
响应于通过具有集成生物特征传感器的输入元件接收输入,当第二用户账户在设备上具有活动会话时,设备确定输入是否满足第二用户切换标准。在一些实施方案中,第二用户切换标准包括要求在输入期间使用输入元素检测到的生物特征信息与多个用户账户的第二用户账户的生物特征信息一致。
根据确定在第二用户账户在设备上具有活动会话时,输入满足第二用户切换准则,设备(2908):(i)相对于第二用户账户解锁设备;(ii)相对于第一用户账户锁定设备(例如,注销第一用户账户);以及(iii)用与第二用户账户相关联的用户界面替换与第一账户相关联的用户界面的显示。这样,第二用户能够通过简单地提供单个生物特征输入来获得对设备上的活动会话的访问。
因此,为用户提供了一种直观的方式,以通过在生物特征传感器上提供单个输入来访问电子设备上的活动的用户专用会话。为用户提供直观的方式来通过这种方式访问活动的用户专用会话增强了电子设备的可操作性,并且使用户设备界面更有效(例如,通过要求在生物特征传感器上的单个输入或手势来获取对活动会话的立刻访问,从而需要较少交互来切换用户账户并登录到设备),另外还通过使用户能够通过单个输入访问活动会话,减少了电力使用并延长了设备的电池寿命。
在一些实施方案中,响应于接收到生物特征信息:响应于接收到生物特征信息:根据确定该输入满足第二用户切换标准,同时第二用户账户在设备上不具有活动会话,第二用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致,设备在显示器上显示输入第二用户账户的登录凭证的提示 (例如,图26A示出了一个示例性提示,其中具有文本“初始登录时禁用Touch ID,请输入您的密码”)。
在一些实施方案中,响应于接收到生物特征信息:根据确定该输入满足第三用户切换标准,同时第三用户账户在设备上具有活动会话,其中第三用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第三用户账户的生物特征信息一致,该设备:(i) 相对于第三用户账户解锁设备;(ii)相对于第一用户账户锁定设备;以及(iii) 用与第三用户账户相关联的用户界面替换与第一账户相关联的用户界面的显示。这样,第三用户能够通过简单地提供单个生物特征输入来获得对设备上的活动会话的访问。
在一些实施方案中,响应于接收到生物特征信息:响应于接收到生物特征信息:根据确定该输入满足第三用户切换标准,同时第三用户账户在设备上不具有活动会话,第三用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第三用户账户的生物特征信息一致,在显示器上显示输入第三用户账户的登录凭证的提示(例如,图26A示出了一个示例性提示,其中具有文本“初始登录时禁用 Touch ID,请输入您的密码”)。
在一些实施方案中,第一用户能够通过提供生物特征输入来快速且容易地登录设备。例如,在使用与第二用户账户(或第三用户账户)相关联的用户界面替换与第一账户相关联的用户界面的显示之后,并且在显示与第二用户账户(或第三用户账户)相关联的用户界面的同时,设备通过具有集成生物特征传感器的输入元件接收第二输入。响应于接收到通过具有集成生物特征传感器的输入元件进行的第二输入:根据确定该第二输入满足第一用户切换标准,同时第一用户账户在设备上具有活动会话,第一用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第一用户账户的生物特征信息一致,该设备:(i)相对于第一用户账户解锁设备;(ii)相对于第二用户账户锁定设备;以及(iii)用与第一用户账户相关联的用户界面替换与第二账户相关联的用户界面的显示。这样,第一用户能够提供单个生物特征输入,以便立即恢复使用电子设备(并且不必输入密码或提供任何其他输入来恢复设备的用户)。
在一些实施方案中,输入元件是按钮(例如,包括在触敏副显示器 104上的按钮或位于副显示器104附近的按钮),并且通过具有集成生物特征传感器的输入元件检测输入包括通过按钮检测按压输入。例如,输入是机械按钮的下压输入或强度/压力高于预定强度/压力阈值的按压输入。在一些实施方案中,如果在没有检测到按压输入的情况下检测到了生物特征信息,即使所接收的生物特征信息与不是当前登录的用户账户的用户账户一致,设备也将放弃切换用户。
在一些实施方案中,第二用户切换标准包括按压输入持续小于第一阈值时间量的标准。
在一些实施方案中,响应于接收到通过具有集成生物特征传感器的输入元件进行的输入:根据确定利用按钮进行的按压输入的持续时间比第一阈值时间长,该设备进入低功率模式(例如,该较低功率模式对应于显示器被关闭的暂停状态)。
在一些实施方案中,响应于接收到通过具有集成生物特征传感器的输入元件进行的输入:根据确定利用按钮进行的按压输入持续时间长于第一阈值时间量,并且小于第二阈值时间量,设备进入低功率模式。(例如,低功率模式对应于显示器被关闭的睡眠/暂停状态,并且在按压输入结束时进入低功率模式)。根据确定使用按钮的按压输入持续时间比第二阈值时间长,设备显示用于改变设备状态的选项菜单(例如,菜单选项包括关机、重新启动、睡眠/暂停选项,当其被选择时分别致使设备关机、重新启动或睡眠/暂停)。
在一些实施方案中,响应于接收到通过具有集成生物特征传感器的输入元件进行的输入:根据确定利用按钮进行的按压输入持续长于大于第二阈值时间量的第三阈值时间量,重启设备。
在一些实施方案中,在当前没有登录的用户提供生物特征信息时(例如,将他们的手指放置在设备的生物特征传感器上,诸如可与触敏副显示器104集成的touch ID按钮),基于所存储的该用户的生物特征信息(如果有的话)(例如,先前通过生物特征传感器或Touch ID传感器接收的所存储的指纹信息)来识别用户。在一些实施方案中,在用户按下按钮之前识别用户)。根据确定用户提供的生物特征信息是有效的(例如,其与该用户的所存储的生物特征信息相匹配),则触敏副显示器104被更新以包括提示,用于指示用户“点击切换到[用户名]—>”。在一些实施方案中,该提示中的箭头向用户指示生物特征传感器所在的设备的位置。
在一些实施方案中,提示包括用户特定的文本(例如,[用户名]文本被替换为用户的用户名)。例如,如果检测到Sally的指纹,提示可包含文本“点击切换到Sally—>”,如果检测到Johnny的指纹,则为“点击切换到 Johnny—>”。
在一些实施方案中,如果用户提供的生物特征信息与当前登录的账户相关联,或者生物特征信息未被识别(即,与设备的用户账户不关联),则在触敏副显示器104上不显示提示。
应当理解,对图68中已经进行描述的操作的具体次序仅仅是示例性的,并非意图要表明所描述的次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对所述操作进行重新排序。
根据一些实施方案,图55示出了根据各种所描述的实施方案的原理进行配置的电子设备1700的功能框图。该设备的功能块任选地由进行各种所描述的实施方案的原理的硬件、软件、固件、或其组合来实现。本领域的技术人员应当理解,图55中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,电子设备1700被实现为其组件对应于电子设备300(图3)的便携式计算系统100(图1A至图1B)。本领域的技术人员应当理解电子设备1700如何也可在台式计算系统200(图2A至图2D)内实现。
如图55所示,电子设备1700包括被配置为显示信息的主显示单元 1702(例如,图1A和图2A至图2D的主显示器102)、被配置为接收用户输入的物理输入单元1704、被配置为显示信息的触摸屏显示(TSD)单元 1706(在本文中有时也称为“触摸屏显示器”或“触摸屏”)(例如,图 1A至图1B以及图2A至图2D中的动态功能行104)、被配置为利用一个或多个传感器接收触摸屏显示单元1706上的接触的触敏表面单元1708,以及耦接到主显示单元1702、物理输入单元1704、触摸屏显示单元1706和触敏表面单元1708的处理单元1710。在一些实施方案中,处理单元1710 包括:主显示控制单元1712、触摸屏显示(TSD)控制单元1714、焦点识别单元1716、确定单元1718、输入检测单元1720、输入类型确定单元 1722、执行单元1724以及媒体回放确定单元1726。
处理单元1710被配置为:使得在主显示单元1702上(例如,使用主显示控制单元1712)显示第一用户界面,该第一用户界面包括一个或多个用户界面元素;从在主显示单元1702上聚焦的一个或多个用户界面元素中 (例如,使用焦点识别单元1716)识别活动用户界面元素;并且(例如,使用确定单元1718)确定在主显示单元1702上聚焦的活动用户界面元素是否与由处理单元1710执行的应用程序相关联。根据确定在主显示单元1702 上聚焦的活动用户界面单元与应用程序相关联,处理单元1710被配置为使得(例如,使用触摸屏显示器控制单元1714)在第二触摸屏显示单元1706 上显示用户界面,包括:(A)对应于该应用程序的第一组一个或多个示能表示;以及(B)对应于至少一个系统级功能的至少一个系统级示能表示。
在一些实施方案中,电子设备还包括:(i)主计算单元,其包括主显示单元1702、处理单元1710和第一通信电路单元;以及(ii)集成输入单元,其包括触摸屏显示单元1706、触敏表面单元1708、物理输入单元1704和用于与第一通信电路单元通信的第二通信电路单元,其中集成输入设备与主计算单元是不同的并且分开的。
在一些实施方案中,物理输入单元1704包括多个物理按键。
在一些实施方案中,物理输入单元1704包括触控板。
在一些实施方案中,处理单元1710被配置为在第一用户界面的前台执行应用程序。
在一些实施方案中,至少一个系统级示能表示被配置为在选择后引起对应于系统级功能的多个系统级示能表示在触摸屏显示单元1706上显示。
在一些实施方案中,至少一个系统级示能表示对应于电源控件或离开控件中的一者。
在一些实施方案中,显示在第二用户界面内的触摸屏显示单元1706上的示能表示中的至少一个示能表示是多功能示能表示。
在一些实施方案中,处理单元1710被配置为:(例如,使用输入检测单元1720)在触敏表面单元1708上检测选择多功能示能表示的用户触摸输入;根据(例如,使用输入类型确定单元1722)确定该用户触摸输入对应于第一类型,(例如,使用执行单元1724)执行与多功能示能表示相关联的第一功能;并且根据(例如,使用输入类型确定单元1722)确定用户触摸输入对应于与第一类型不同的第二类型,(例如,使用执行单元1724) 执行与多功能示能表示相关联的第二功能。
在一些实施方案中,根据确定活动用户界面元素不与应用程序相关联,处理单元1710被配置为使得(例如,使用触摸屏显示器控制单元 1714)在第三触摸屏显示单元1706上显示用户界面,包括:(C)对应于电子设备1700的操作系统控件的第二组一个或多个示能表示,其中第二组一个或多个示能表示不同于第一组一个或多个示能表示。
在一些实施方案中,第二组一个或多个示能表示是扩展的一组操作系统控件,其包括(B)对应于所述至少一个系统级功能的所述至少一个系统级示能表示。
在一些实施方案中,处理单元1710被配置为:(例如,使用输入检测单元1720)检测用户触摸输入,该用户触摸输入选择触敏表面单元1708上的第一组示能表示中的一个示能表示;并且响应于检测到该用户触摸输入:(例如,使用触摸屏显示控制单元1714)显示对应于触摸屏显示单元 1706上的应用程序的功能的不同的一组示能表示;并且保持在触摸屏显示单元1706上(例如,使用触摸屏显示控制单元1714)显示至少一个系统级示能表示。
在一些实施方案中,处理单元1710被配置为:(例如,使用输入检测单元1720)检测在触敏表面单元1708上选择至少一个系统级示能表示的随后的用户触摸输入;并且响应于检测到随后的用户触摸输入,使得(例如,使用触摸屏显示控制单元1714)在触摸屏显示单元1706上显示对应于系统级功能的多个系统级示能表示,以及对应于应用程序的至少一个应用程序级示能表示。
在一些实施方案中,处理单元1710被配置为:在触摸屏显示单元 1706上显示第二用户界面之后,(例如,使用焦点识别单元1716)识别在主显示单元1702上聚焦的第二活动用户界面元素;并且(例如,使用确定单元1718)确定第二活动用户界面元素是否对应于由处理单元1710执行的不同的应用程序。根据确定第二活动用户界面元素对应于不同的应用程序,处理单元1710被配置为使得(例如,使用触摸屏显示器控制单元 1714)在第四触摸屏显示单元1706上显示用户界面,包括:(D)对应于不同应用程序的第三组一个或多个示能表示;以及(E)对应于至少一个系统级功能的至少一个系统级示能表示。
在一些实施方案中,处理单元1710被配置为:在(例如,使用焦点识别单元1716)识别第二活动用户界面元素之后,(例如,使用媒体回放确定单元1726)确定电子设备1700是否正在播放媒体项,其中该媒体项不与不同的应用程序相关联;并且根据(例如,使用媒体回放确定单元1726) 确定电子设备1700正在播放媒体项,使得在第四用户界面上(例如,使用触摸屏显示控制单元1714)显示至少一个永久性示能表示,用于控制触摸屏显示单元1706上的媒体项。
在一些实施方案中,至少一个永久性示能表示显示对应于媒体项的反馈。
在一些实施方案中,处理单元1710被配置为:(例如,使用输入检测单元1720)检测对应于重写键的用户输入;并且响应于检测到该用户输入:在触摸屏显示单元1706上(例如,使用触摸屏显示控制单元1714)停止显示第二用户界面的至少第一组一个或多个示能表示;并且(例如,使用触摸屏显示控制单元1714)在触摸屏显示单元1706上停止显示第一组默认功能键。
在一些实施方案中,处理单元1710被配置为:在触摸屏显示单元 1706上显示第一组默认功能键之后,在基本上平行于触摸屏显示单元1706 的长轴的方向上(例如,使用输入检测单元1720)检测触敏表面单元1708 上的手势,并且响应于检测到基本上水平的轻扫手势,使得在触摸屏显示单元1706上(例如,使用触摸屏显示控制单元1714)显示具有至少一个不同功能键的第二组默认功能键。
上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或多个功能模块来实现,该信息处理装置诸如为通用处理器(例如,如以上相对于图3A和图4所描述的)或特定于应用程序的芯片。
以上参考图44A至图44D描述的操作任选地由图3A至图3B或图55 中所示的部件来实现。例如,检测操作626和628任选地由事件分类器 370、事件识别器380和事件处理程序190来实施。事件分类器370中的事件监视器371检测显示系统312(当被实现为触敏显示器时)上的接触,并且事件分配器模块374将事件信息递送到应用程序340-1。应用程序340-1的相应事件识别器380将事件信息与相应事件定义386进行比较,并且确定触敏显示器上的第一位置处的第一接触是否对应于预定义的事件或子事件。当检测到相应预定义的事件或子事件时,事件识别器380激活与该事件或子事件的检测相关联的事件处理程序390。事件处理程序390任选地使用或调用数据更新器376或对象更新器377来更新应用程序内部状态392。在一些实施方案中,事件处理程序390访问相应GUI更新器378,以更新由应用程序显示的内容。类似地,本领域技术人员应当清楚地知道基于在图3A至图3B中所示的部件可如何实现其他过程。
根据一些实施方案,图56示出了根据各种所描述的实施方案的原理进行配置的电子设备1800的功能框图。该设备的功能块任选地由进行各种所描述的实施方案的原理的硬件、软件、固件、或其组合来实现。本领域技术人员应当理解,图56中描述的功能块可选地组合或分离成子块以实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,电子设备 1800被实现为其组件对应于电子设备300(图3)的便携式计算系统100 (图1A-1B)。本领域技术人员将理解电子设备1800如何也可以在台式计算系统200内实现(图2A-2D)。
如图56所示,电子设备1800包括被配置为显示信息的主显示单元 1802(例如,图1A和图2A至图2D的主显示器102)、被配置为接收用户输入的物理输入单元1804、被配置为显示信息的触摸屏显示(TSD)单元 1806(在本文中有时也称为“触摸屏显示器”或“触摸屏”)(例如,图 1A至图1B以及图2A至图2D中的动态功能行104)、被配置为利用一个或多个传感器接收触摸屏显示单元1806上的接触的触敏表面单元1808,以及耦接到主显示单元1802、物理输入单元1804、触摸屏显示单元1806和触敏表面单元1808的处理单元1810。在一些实施方案中,处理单元1810 包括:主显示控制单元1812、触摸屏显示(TSD)控制单元1814、输入检测单元1816和输入类型确定单元1818。
处理单元1810被配置为:引起(例如,利用主显示控制单元1812) 由处理单元1810执行的应用程序的第一用户界面在主显示单元1802上显示;引起(例如,利用触摸屏显示控制单元1814)第二用户界面在触摸屏显示单元1806上显示,该第二用户界面包括对应于应用程序的第一组一个或多个示能表示,其中第一组一个或多个示能表示对应于应用程序的第一部分;以及检测(例如,利用输入检测单元1816)触敏表面单元1808上的轻扫手势。根据确定(例如,利用输入类型确定单元1818)在第一方向 (例如,水平)上执行轻扫手势,处理单元1810被配置为引起(例如,利用触摸屏显示控制单元1814)对应于应用程序的第二组一个或多个示能表示在触摸屏显示单元1806上显示,其中第二组一个或多个示能表示中的至少一个示能表示不同于第一组一个或多个示能表示,并且其中第二组一个或多个示能表示还对应于应用程序的第一部分。根据确定(例如,利用输入类型确定单元1818)在基本上垂直于第一方向的第二方向(例如,垂直)上执行轻扫手势,处理单元1810被配置为引起(例如,利用触摸屏显示控制单元1814)对应于应用程序的第三组一个或多个示能表示在触摸屏显示单元1806上显示,其中第三组一个或多个示能表示不同于第二组一个或多个示能表示,并且其中第三组一个或多个示能表示对应于应用程序的第二部分,该第二部分不同于应用程序的第一部分。
在一些实施方案中,在检测到轻扫手势之前,第二部分以第一用户界面内的紧凑视图在主显示单元1802上显示,并且处理单元1810被配置为根据确定在基本上垂直于第一方向的第二方向上执行轻扫手势,引起(例如,利用主显示控制单元1812)第二部分以第一用户界面内的扩展视图在主显示单元1802上显示。
在一些实施方案中,应用程序的第一用户界面以全屏模式在主显示单元1802上显示,并且在触摸屏显示单元1806上显示的第一组一个或多个示能表示包括对应于全屏模式的控件。
在一些实施方案中,第二组一个或多个示能表示和第三组一个或多个示能表示包括对应于至少一个系统级功能的至少一个系统级示能表示。
在一些实施方案中,在触摸屏显示单元1806上显示第三组一个或多个示能表示之后,处理单元1810被配置为:检测(例如,利用输入检测单元 1816)选择第一用户界面上的第一部分的用户输入;以及响应于检测到该用户输入:停止(例如,利用触摸屏显示控制单元1814)在触摸屏显示单元1806上显示第三组一个或多个示能表示,其中第三组一个或多个示能表示对应于应用程序的第二部分;并且引起(例如,利用触摸屏显示控制单元1814)第二组一个或多个示能表示在触摸屏显示单元1806上显示,其中第二组一个或多个示能表示对应于应用程序的第一部分。
在一些实施方案中,第一方向基本上平行于触摸屏显示单元1806的主要尺寸。
在一些实施方案中,第一方向基本上垂直于触摸屏显示单元1806的主要尺寸。
在一些实施方案中,第一部分是应用程序的菜单、标签、文件夹、工具集或工具栏中的一者,并且第二部分是应用程序的菜单、标签、文件夹、工具集或工具栏中的一者。
以上参考图45A至图45C描述的操作任选地由图3A至图3B或图56 中所示的部件来实现。例如,检测操作710任选地由事件分类器370、事件识别器380和事件处理程序190来实现。事件分类器370中的事件监视器 371检测显示系统312(当被实现为触敏显示器时)上的接触,并且事件分配器模块374将事件信息递送到应用程序340-1。应用程序340-1的相应事件识别器380将事件信息与相应事件定义386进行比较,并且确定触敏显示器上的第一位置处的第一接触是否对应于预定义的事件或子事件。当检测到相应预定义的事件或子事件时,事件识别器380激活与该事件或子事件的检测相关联的事件处理程序390。事件处理程序390任选地使用或调用数据更新器376或对象更新器377来更新应用程序内部状态392。在一些实施方案中,事件处理程序390访问相应GUI更新器378,以更新由应用程序显示的内容。类似地,本领域技术人员应当清楚地知道基于在图3A至图 3B中所示的部件可如何实现其他过程。
根据一些实施方案,图57示出了根据各种所描述的实施方案的原理进行配置的电子设备1900的功能框图。该设备的功能块任选地由进行各种所描述的实施方案的原理的硬件、软件、固件、或其组合来实现。本领域的技术人员应当理解,图57中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,电子设备1900被实现为其组件对应于电子设备300(图3)的便携式计算系统100(图1A至图1B)。本领域的技术人员应当理解电子设备1900如何也可在台式计算系统200(图2A至图2D)内实现。
如图57所示,电子设备1900包括被配置为显示信息的主显示单元 1902(例如,图1A和图2A至图2D的主显示器102)、被配置为接收用户输入的物理输入单元1904、被配置为显示信息的触摸屏显示(TSD)单元 1906(在本文中有时也称为“触摸屏显示器”或“触摸屏”)(例如,图 1A至图1B以及图2A至图2D中的动态功能行104)、被配置为利用一个或多个传感器接收触摸屏显示单元1906上的接触的触敏表面单元1908,以及耦接到主显示单元1902、物理输入单元1904、触摸屏显示单元1906和触敏表面单元1908的处理单元1910。在一些实施方案中,处理单元1910 包括:主显示控制单元1912、触摸屏显示(TSD)控制单元1914、输入检测单元1916和改变单元1918。
处理单元1910被配置为:引起(例如,利用主显示控制单元1912) 由处理单元1910执行的应用程序的第一用户界面以正常模式在主显示单元1902上显示,该第一用户界面包括与应用程序相关联的第一组一个或多个示能表示;并且检测(例如,利用输入检测单元1916)以全屏模式在主显示单元1902上显示应用程序的第一用户界面的至少一部分的用户输入。响应于检测到用户输入,处理单元1910被配置为:停止(例如,利用主显示控制单元1912)在主显示单元1902上显示与第一用户界面中的应用程序相关联的第一组一个或多个示能表示;引起(例如,利用主显示控制单元 1912)应用程序的第一用户界面的部分以全屏模式在主显示单元1902上显示;并且在没有人为干预的情况下引起(例如,利用触摸屏显示控制单元 1914)用于控制应用程序的第二组一个或多个示能表示在触摸屏显示单元 1906上自动地显示,其中第二组一个或多个示能表示对应于第一组一个或多个示能表示。
在一些实施方案中,第二组一个或多个示能表示是第一组一个或多个示能表示。
在一些实施方案中,第二组一个或多个示能表示包括对应于全屏模式的控件。
在一些实施方案中,处理单元1910被配置为检测(例如,利用输入检测单元1916)选择触敏表面单元1908上的第二组示能表示中的一者的用户触摸输入;并且响应于检测到用户触摸输入,处理单元1910被配置为根据所选择的第二组示能表示中的一者来改变(例如,利用改变单元1918)以全屏模式在主显示单元1902上显示的应用程序的第一用户界面的部分。
在一些实施方案中,在主显示单元1902上以全屏模式显示应用程序的第一用户界面的部分之后,处理单元1910被配置为:检测(例如,利用输入检测单元1916)用于退出全屏模式的后续用户输入;并且响应于检测到后续用户输入:引起(例如,利用主显示控制单元1912)由处理单元1910 执行的应用程序的第一用户界面以正常模式在主显示单元1902上显示,该第一用户界面包括与应用程序相关联的第一组一个或多个能力;并且保持 (例如,利用触摸屏显示控制单元1914)用于控制应用程序的第二组一个或多个示能表示的至少一个子集在触摸屏显示单元1906上显示,其中第二组一个或多个示能表示对应于第一组一个或多个示能表示。
在一些实施方案中,用于在主显示单元1902上以全屏模式显示应用程序的第一用户界面的至少一部分的用户输入是在触敏表面单元1908上检测到的触摸输入和在主显示单元1902上的第一用户界面内选择的控件中的至少一者。
在一些实施方案中,第二组一个或多个示能表示包括对应于至少一个系统级功能的至少一个系统级示能表示。
以上参考图46A至图46B描述的操作任选地由图3A至图3B或图57 中所示的部件来实现。例如,检测操作804和816任选地由事件分类器 370、事件识别器380和事件处理程序190来实现。事件分类器370中的事件监视器371检测显示系统312(当被实现为触敏显示器时)上的接触,并且事件分配器模块374将事件信息递送到应用程序340-1。应用程序340-1的相应事件识别器380将事件信息与相应事件定义386进行比较,并且确定触敏显示器上的第一位置处的第一接触是否对应于预定义的事件或子事件。当检测到相应预定义的事件或子事件时,事件识别器380激活与该事件或子事件的检测相关联的事件处理程序390。事件处理程序390任选地使用或调用数据更新器376或对象更新器377来更新应用程序内部状态392。在一些实施方案中,事件处理程序390访问相应GUI更新器378,以更新由应用程序显示的内容。类似地,本领域技术人员应当清楚地知道基于在图3A至图3B中所示的部件可如何实现其他过程。
根据一些实施方案,图58示出了根据各种所描述的实施方案的原理进行配置的电子设备2000的功能框图。该设备的功能块任选地由进行各种所描述的实施方案的原理的硬件、软件、固件、或其组合来实现。本领域的技术人员应当理解,图58中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,电子设备2000被实现为其组件对应于电子设备300(图3)的便携式计算系统100(图1A至图1B)。本领域的技术人员应当理解电子设备2000如何也可在台式计算系统200(图2A至图2D)内实现。
如图58所示,电子设备2000包括被配置为显示信息的主显示单元 2002(例如,图1A和图2A至图2D的主显示器102)、被配置为接收用户输入的物理输入单元2004、被配置为显示信息的触摸屏显示(TSD)单元 2006(在本文中有时也称为“触摸屏显示器”或“触摸屏”)(例如,图 1A至图1B以及图2A至图2D中的动态功能行104)、被配置为利用一个或多个传感器接收触摸屏显示单元2006上的接触的触敏表面单元2008,以及耦接到主显示单元2002、物理输入单元2004、触摸屏显示单元2006和触敏表面单元2008的处理单元2010。在一些实施方案中,处理单元2010 包括:主显示控制单元2012、触摸屏显示(TSD)控制单元2014、通知单元 2016、输入检测单元2018、输入类型确定单元2020和执行单元2022。
处理单元2010被配置为:引起(例如,利用主显示控制单元2012) 由处理单元2010执行的应用程序的第一用户界面在主显示单元2002上显示;引起(例如,利用触摸屏显示控制单元2014)第二用户界面在触摸屏显示单元2006上显示,该第二用户界面包括对应于应用程序的一组一个或多个示能表示;检测通知(利用,通知单元2016);并且响应于检测到通知,引起(例如,利用触摸屏显示控制单元2014)对应于应用程序的该组一个或多个示能表示和所检测到的通知的至少一部分在触摸屏显示单元 2006的第二用户界面中同时显示,其中所检测到的通知不在主显示单元 2002上显示。
在一些实施方案中,在检测到通知之前,处理单元2010被配置为检测 (例如,利用输入检测单元2018)选择通知设置的用户输入,以便在触摸屏显示单元2006上显示通知,而不在主显示单元2002上显示通知。
在一些实施方案中,处理单元2010被配置为检测(例如,利用输入检测单元2018)触敏表面单元2008上对应于所检测到的通知的部分的用户触摸输入。根据确定(例如,利用输入类型确定单元2020)用户触摸输入对应于第一类型(例如,轻扫手势),处理单元2010被配置为停止(例如,利用触摸屏显示控制单元2014)在第二用户界面中显示触摸屏显示单元2006上的所检测到的通知的部分。根据确定(例如,利用输入类型确定单元2020)用户触摸输入对应于不同于第一类型的第二类型(例如,轻击接触),处理单元2010被配置为执行(例如,利用执行单元2022)与所检测到的通知相关联的动作。
在一些实施方案中,在触摸屏显示单元2006上显示的通知的部分提示电子设备2000的用户选择多个选项中的一者用于响应所检测到的通知。
在一些实施方案中,在触摸屏显示单元2006上显示的通知的部分包括对所检测到的通知的一个或多个建议响应。
在一些实施方案中,通知对应于传入的即时消息、SMS、电子邮件、语音呼叫或视频呼叫中的至少一者。
在一些实施方案中,通知对应于由处理单元2010执行的应用程序响应于关闭应用程序或执行应用程序内的动作的用户输入而发出的模态警报。
在一些实施方案中,该组一个或多个示能表示包括对应于至少一个系统级功能的至少一个系统级示能表示,并且通知对应于选择输入机构的一个或多个部分或者系统级示能表示中的至少一者的用户输入。
以上参考图47A至图47B描述的操作任选地由图3A至图3B或图58 中所示的部件来实现。例如,检测操作922任选地由事件分类器370、事件识别器380和事件处理程序190来实现。事件分类器370中的事件监视器 371检测显示系统312(当被实现为触敏显示器时)上的接触,并且事件分配器模块374将事件信息递送到应用程序340-1。应用程序340-1的相应事件识别器380将事件信息与相应事件定义386进行比较,并且确定触敏显示器上的第一位置处的第一接触是否对应于预定义的事件或子事件。当检测到相应预定义的事件或子事件时,事件识别器380激活与该事件或子事件的检测相关联的事件处理程序390。事件处理程序390任选地使用或调用数据更新器376或对象更新器377来更新应用程序内部状态392。在一些实施方案中,事件处理程序390访问相应GUI更新器378,以更新由应用程序显示的内容。类似地,本领域技术人员应当清楚地知道基于在图3A至图 3B中所示的部件可如何实现其他过程。
根据一些实施方案,图59示出了根据各种所描述的实施方案的原理进行配置的电子设备2100的功能框图。该设备的功能块任选地由进行各种所描述的实施方案的原理的硬件、软件、固件、或其组合来实现。本领域的技术人员应当理解,图59中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,电子设备2100被实现为其组件对应于电子设备300(图3)的便携式计算系统100(图1A至图1B)。本领域的技术人员应当理解电子设备2100如何也可在台式计算系统200(图2A至图2D)内实现。
如图59所示,电子设备2100包括被配置为显示信息的主显示单元 2102(例如,图1A和图2A至图2D的主显示器102)、被配置为接收用户输入的物理输入单元2104、被配置为显示信息的触摸屏显示(TSD)单元 2106(在本文中有时也称为“触摸屏显示器”或“触摸屏”)(例如,图1A至图1B以及图2A至图2D中的动态功能行104)、被配置为利用一个或多个传感器接收触摸屏显示单元2106上的接触的触敏表面单元2108,以及耦接到主显示单元2102、物理输入单元2104、触摸屏显示单元2106和触敏表面单元2108的处理单元2110。在一些实施方案中,处理单元2110 包括:主显示控制单元2112、触摸屏显示(TSD)控制单元2114、识别单元 2116、输入检测单元2118和确定单元2120。
处理单元2110被配置为:引起(例如,利用主显示控制单元2112) 用户界面在主显示单元2102上显示,该用户界面包括一个或多个用户界面元素;识别(例如,利用识别单元2116)一个或多个用户界面元素中在主显示单元2102上聚焦的活动用户界面元素,其中该活动用户界面元素与由处理单元2110执行的应用程序相关联;并且响应于识别在主显示单元2102 上聚焦的活动用户界面元素,引起(例如,利用触摸屏显示控制单元 2114)对应于应用程序的一组一个或多个示能表示在触摸屏显示单元2106 上显示。处理单元2110被配置为:检测(例如,利用输入检测单元2118) 移动用户界面的相应部分的用户输入;并且响应于检测到该用户输入,并且根据确定(例如,利用确定单元2120)该用户输入满足预定义的动作标准:停止(例如,利用主显示控制单元2112)在主显示单元2102上显示用户界面的相应部分;停止(例如,利用触摸屏显示控制单元2114)在触摸屏显示单元2106上显示该组一个或多个示能表示的至少一个子集;并且停止(例如,利用触摸屏显示控制单元2114)在触摸屏显示单元2106上显示用户界面的相应部分的表示。
在一些实施方案中,用户界面的相应部分是对应于由处理单元2110执行的应用程序的菜单。
在一些实施方案中,用户界面的相应部分是通知或模态警报中的至少一者。
在一些实施方案中,当用户输入是将用户界面的相应部分拖动到主显示单元2102的预定义位置的拖动手势时,满足预定义的动作标准。
在一些实施方案中,当用户输入是对应于将用户界面的相应部分移动到触摸屏显示单元2106的预定义输入时,满足预定义的动作标准。
在一些实施方案中,响应于检测到该用户输入,并且根据确定(例如,利用确定单元2120)该用户输入不满足预定义的动作标准,处理单元2110被配置为:保持(例如,利用主显示控制单元2112)用户界面的相应部分在主显示单元2102上显示;并且保持(例如,利用触摸屏显示控制单元2114)该组一个或多个示能表示在触摸屏显示单元2106上显示。
在一些实施方案中,该组一个或多个示能表示包括对应于至少一个系统级功能的至少一个系统级示能表示,并且处理单元2110被配置为在触摸屏显示单元2106上显示用户界面的相应部分的表示之后,保持(例如,利用触摸屏显示控制单元2114)该至少一个系统级示能表示在触摸屏显示单元2106上显示。
在一些实施方案中,用户界面的相应部分的表示覆盖在触摸屏显示单元2106上的该组一个或多个示能表示上。
以上参考图48A至图48C描述的操作任选地由图3A至图3B或图59 中所示的部件来实现。例如,检测操作1008任选地由事件分类器370、事件识别器380和事件处理程序190来实现。事件分类器370中的事件监视器371检测显示系统312(当被实现为触敏显示器时)上的接触,并且事件分配器模块374将事件信息递送到应用程序340-1。应用程序340-1的相应事件识别器380将事件信息与相应事件定义386进行比较,并且确定触敏显示器上的第一位置处的第一接触是否对应于预定义的事件或子事件。当检测到相应预定义的事件或子事件时,事件识别器380激活与该事件或子事件的检测相关联的事件处理程序390。事件处理程序390任选地使用或调用数据更新器376或对象更新器377来更新应用程序内部状态392。在一些实施方案中,事件处理程序390访问相应GUI更新器378,以更新由应用程序显示的内容。类似地,本领域技术人员应当清楚地知道基于在图3A至图3B中所示的部件可如何实现其他过程。
根据一些实施方案,图60示出了根据各种所描述的实施方案的原理进行配置的计算系统2200(也称为电子设备2200)的功能框图。该设备的功能块任选地由实施各种所描述的实施方案的原理的硬件、软件、固件或其组合来实现。本领域的技术人员应当理解,图60中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,计算系统2200被实现为便携式计算系统100(图1A)。在一些实施方案中,计算系统2200根据图1A至图2D中所示的任何设备/系统来实现。
如图60所示,计算系统2200包括被配置为显示信息的主显示单元 2202(例如,触敏显示系统112,也称为图1A中的主触摸屏、主触敏显示器和主触摸屏显示器);被配置为接收触敏显示器上的接触、手势和其他用户输入的触敏副显示单元2204;被配置为接收键盘输入的物理键盘单元 2205;以及与显示单元2202、物理键盘单元2205和触敏副显示单元2204 耦接的处理单元2210。在一些实施方案中,主显示单元2202是第一外壳的一部分,并且物理键盘单元2205和触敏副显示单元2204是不同于第一外壳的第二外壳的一部分。在一些实施方案中,处理单元包括请求接收单元 (例如,请求接收单元2212)、显示单元2214(例如,显示单元2214)和检测单元(例如,检测单元2216)。
处理单元被配置为:接收(例如,利用请求接收单元2212)打开应用程序的请求;响应于接收到该请求:(i)在主显示器上显示(例如,结合主显示单元2202利用显示单元2214)与在计算系统上执行的应用程序相关联的多个用户界面对象,该多个用户界面对象包括与其相关联的内容一起显示的第一用户界面对象以及未与其相关联的内容一起显示的其他用户界面对象;并且(ii)在触敏副显示器上显示(例如,结合触敏副显示单元2204利用显示单元2214)各自代表多个用户界面对象中的一者的一组示能表示;通过触敏显示器检测(例如,利用检测单元2216)从该组示能表示的第一示能表示朝向该组示能表示的第二示能表示的方向的轻扫手势,其中第一示能表示代表第一用户界面对象并且第二示能表示代表不同于第一用户界面对象的第二用户界面对象;并且响应于检测到该轻扫手势,更新(例如,利用显示单元2214)主显示器以停止显示第一用户界面对象的相关联内容并显示第二用户界面对象的相关联内容。
在计算系统2200的一些实施方案中,处理单元被进一步配置为:检测 (例如,利用检测单元2216)轻扫手势跨触敏副显示器的连续行进,包括轻扫手势接触代表第三用户界面对象的第三示能表示;并且响应于检测到轻扫手势接触第三示能表示,更新主显示器以显示第三用户界面对象的相关联内容。
在计算系统2200的一些实施方案中,该组示能表示中的每个示能表示包括多个用户界面对象中相应用户界面对象的相应相关联内容的表示。
在计算系统2200的一些实施方案中,处理单元被进一步配置为:在检测到轻扫手势之前,检测(例如,利用检测单元2216)第一示能表示上方与触敏副显示器的初始接触;并且响应于检测到该初始接触,增加(例如,结合触敏副显示器2204利用显示单元2214)第一示能表示的放大水平。
在计算系统2200的一些实施方案中,应用程序是网页浏览应用程序,并且多个用户界面对象各自对应于网页浏览标签。
在计算系统2200的一些实施方案中,处理单元被进一步配置为:检测 (例如,利用检测单元2216)主显示器上的网页浏览应用程序的URL输入部分处的输入;并且响应于检测到该输入,更新(例如,结合触敏副显示单元2204利用显示单元2214)触敏副显示器以包括喜爱的URL的表示。
在计算系统2200的一些实施方案中,应用程序是照片浏览应用程序,并且多个用户界面对象各自对应于各个照片。
在计算系统2200的一些实施方案中,应用程序是视频编辑应用程序,并且多个用户界面对象各自对应于相应视频中的各个帧。
根据一些实施方案,图61示出了根据各种所描述的实施方案的原理进行配置的计算系统2300(也称为电子设备2300)的功能框图。该设备的功能块任选地由实施各种所描述的实施方案的原理的硬件、软件、固件或其组合来实现。本领域的技术人员应当理解,图61中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,计算系统2300被实现为便携式计算系统100(图 1A)。在一些实施方案中,计算系统2300根据图1A至图2D中所示的任何设备/系统来实现。
如图61所示,计算系统2300包括被配置为显示信息的主显示单元 2302(例如,触敏显示系统112,也称为图1A中的主触摸屏、主触敏显示器和主触摸屏显示器);被配置为接收触敏显示器上的接触、手势和其他用户输入的触敏副显示单元2304;被配置为接收键盘输入的物理键盘单元 2305;以及与显示单元2302、物理键盘单元2305和触敏副显示单元2304 耦接的处理单元2310。在一些实施方案中,主显示单元2302是第一外壳的一部分,并且物理键盘单元2305和触敏副显示单元2304是不同于第一外壳的第二外壳的一部分。在一些实施方案中,处理单元包括请求接收单元 (例如,请求接收单元2312)、显示单元2314(例如,显示单元2314)、检测单元(例如,检测单元2316)和焦点改变单元(例如,焦点改变单元2318)。
处理单元被配置为:接收(例如,利用请求接收单元2312)在计算设备的主显示器上显示的内容内搜索的请求;响应于接收到该请求:(i)在主显示器上显示(例如,结合主显示单元2302利用显示单元2314)响应于搜索的多个搜索结果,其中焦点在多个搜索结果的第一搜索结果上;(ii)在触敏副显示器上显示(例如,结合触敏副显示器2304利用显示单元2314)各自对应于多个搜索结果的相应搜索结果的相应表示;通过触敏副显示器检测(例如,利用检测单元2316)选择相应表示中的表示的触摸输入,该表示对应于多个搜索结果中不同于第一搜索结果的第二搜索结果;并且响应于检测到该输入,(例如,结合主显示单元2302利用显示单元2316)将主显示器上的焦点改变为第二搜索结果。
在计算设备2300的一些实施方案中,改变焦点包括在主显示器上修改特定搜索结果的视觉特征。
在计算设备2300的一些实施方案中,处理单元被进一步配置为:检测 (例如,利用检测单元2316)在触敏副显示器上跨相应表示中的至少两者移动的手势;并且响应于检测到该手势,当该轻扫手势跨相应表示中的至少两者移动时,(例如,结合主显示单元2302利用显示单元2316)将主显示器上的焦点改变为对应于相应表示中的至少两者的相应搜索结果。
在计算设备2300的一些实施方案中,处理单元被进一步配置为:根据确定手势的速度高于阈值速度,(例如,结合主显示单元2302利用显示单元2316)将主显示器上的焦点改变为除了对应于相应表示中的至少两者的相应搜索结果之外的相应搜索结果。
在计算设备2300的一些实施方案中,手势是轻扫手势。
在计算设备2300的一些实施方案中,手势是轻弹手势。
在计算设备2300的一些实施方案中,表示是各自对应于搜索结果中的相应搜索结果的刻度标记。
在计算设备2300的一些实施方案中,刻度标记以对应于主显示器上的搜索结果的排序的顺序在触敏副显示器上的行中显示。
在计算设备2300的一些实施方案中,在内容内搜索的请求是在内容内定位搜索字符串的请求,并且多个搜索结果各自至少包括搜索字符串。
在计算设备2300的一些实施方案中,显示多个搜索结果包括突出显示多个搜索结果中每一者的搜索字符串。
根据一些实施方案,图62示出了根据各种所描述的实施方案的原理进行配置的计算系统2400(也称为电子设备2400)的功能框图。该设备的功能块任选地由实施各种所描述的实施方案的原理的硬件、软件、固件或其组合来实现。本领域的技术人员应当理解,图62中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,计算系统2400被实现为便携式计算系统100(图 1A)。在一些实施方案中,计算系统2400根据图1A至图2D中所示的任何设备/系统来实现。
如图62所示,计算系统2400包括被配置为显示信息的主显示单元 2402(例如,触敏显示系统112,也称为图1A中的主触摸屏、主触敏显示器和主触摸屏显示器);被配置为接收触敏显示器上的接触、手势和其他用户输入的触敏副显示单元2404;被配置为接收键盘输入的物理键盘单元 2405;以及与显示单元2402、物理键盘单元2405和触敏副显示单元2404 耦接的处理单元2410。在一些实施方案中,主显示单元2402是第一外壳的一部分,并且物理键盘单元2405和触敏副显示单元2404是不同于第一外壳的第二外壳的一部分。在一些实施方案中,处理单元包括请求接收单元 (例如,请求接收单元2412)、显示单元2414(例如,显示单元2414)、检测单元(例如,检测单元2416)和修改单元(例如,修改单元2418)。
处理单元被配置为:在主显示器上显示(例如,结合主显示单元2402 利用显示单元2414)日历应用程序;接收(例如,利用请求接收单元 2412)显示关于与日历应用程序相关联的事件的信息的请求;并且响应于接收到该请求:(i)在主显示器上显示(例如,结合主显示单元2402利用显示单元2414)第一事件的事件详情,该事件详情包括事件的开始时间和结束时间;并且(ii)在触敏副显示器上显示(例如,结合触敏副显示单元2404 利用显示单元2414)示能表示,该示能表示指示至少包括开始时间和结束时间的时间范围。
在计算系统2400的一些实施方案中,处理单元被进一步配置为:通过触敏副显示器检测(例如,利用检测单元2416)用户界面控件处修改时间范围的输入;并且响应于检测到该输入:(i)根据该输入修改(例如,利用修改单元2418)事件的开始时间和结束时间中的至少一者;并且(ii)根据该输入在主显示器上显示(例如,结合主显示单元2402利用显示单元2414) 事件的修改时间范围。
在计算设备2400的一些实施方案中,处理单元被进一步配置为:将具有修改的开始和/或结束时间的事件保存到计算系统的存储器。
在计算设备2400的一些实施方案中,修改时间范围的输入是按压输入,该按压输入保持与该示能表示接触超过阈值时间量,然后在触敏副显示器上移动该示能表示的至少一部分。
在计算设备2400的一些实施方案中,修改时间范围的输入是轻扫手势,该轻扫手势跨触敏副显示器移动,并且引起计算系统选择事件的新开始时间和新结束时间,其中新开始时间和新结束时间对应于由开始时间和结束时间覆盖的相同持续时间的时隙。
根据一些实施方案,图63示出了根据各种所描述的实施方案的原理进行配置的计算系统2500(也称为电子设备2500)的功能框图。该设备的功能块任选地由实施各种所描述的实施方案的原理的硬件、软件、固件或其组合来实现。本领域的技术人员应当理解,图63中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,计算系统2500被实现为便携式计算系统100(图 1A)。在一些实施方案中,计算系统2500根据图1A至图2D中所示的任何设备/系统来实现。
如图63所示,计算系统2500包括被配置为显示信息的主显示单元 2502(例如,触敏显示系统112,也称为图1A中的主触摸屏、主触敏显示器和主触摸屏显示器);被配置为接收触敏显示器上的接触、手势和其他用户输入的触敏副显示单元2504;被配置为接收键盘输入的物理键盘单元 2505;以及与显示单元2502、物理键盘单元2505和触敏副显示单元2504 耦接的处理单元2510。在一些实施方案中,主显示单元2502是第一外壳的一部分,并且物理键盘单元2505和触敏副显示单元2504是不同于第一外壳的第二外壳的一部分。在一些实施方案中,处理单元包括选择接收单元 (例如,选择接收单元2512)、显示单元2514(例如,显示单元2514)、检测单元(例如,检测单元2516)和性能启动单元(例如,性能启动单元2518)。
处理单元被配置为:检测(例如,利用检测单元2516)计算系统和不同于计算系统的外部设备之间的新连接;并且响应于检测到该新连接,在触敏副显示器上显示(例如,结合触敏副显示单元2504利用显示单元 2514)对应于通过外部设备可用的功能的多个示能表示。
在计算系统2500的一些实施方案中,处理单元被进一步配置为:通过触敏副显示器接收(例如,通过选择接收单元2512)对应于通过外部设备可用的第一功能的第一示能表示的选择;并且响应于接收到该选择,启动 (例如,利用性能启动单元2518)第一功能的执行。
在计算系统2500的一些实施方案中,外部设备是不同于主显示器和触敏副显示器的附加显示器。
在计算系统2500的一些实施方案中,多个示能表示包括第一示能表示,当选择该第一示能表示时,引起计算系统通过附加显示器启动显示器镜像功能的执行。
根据一些实施方案,图64示出了根据各种所描述的实施方案的原理进行配置的计算系统2600(也称为电子设备2600)的功能框图。该设备的功能块任选地由实施各种所描述的实施方案的原理的硬件、软件、固件或其组合来实现。本领域的技术人员应当理解,图64中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,计算系统2600被实现为便携式计算系统100(图 1A)。在一些实施方案中,计算系统2600根据图1A至图2D中所示的任何设备/系统来实现。
如图64所示,计算系统2600包括被配置为显示信息的主显示单元 2602(例如,触敏显示系统112,也称为图1A中的主触摸屏、主触敏显示器和主触摸屏显示器);被配置为接收触敏显示器上的接触、手势和其他用户输入的触敏副显示单元2604;被配置为接收键盘输入的物理键盘单元 2605;以及与显示单元2602、物理键盘单元2605和触敏副显示单元2604 耦接的处理单元2610。在一些实施方案中,主显示单元2602是第一外壳的一部分,并且物理键盘单元2605和触敏副显示单元2604是不同于第一外壳的第二外壳的一部分。在一些实施方案中,处理单元包括显示单元(例如,显示单元2612)、检测单元2614(例如,检测单元2614)和替换单元 (例如,替换单元2616)。
处理单元被配置为:在主显示器上显示(例如,结合主显示单元2602 利用显示单元2612)在计算系统上执行的应用程序的用户界面;检测(例如,利用检测单元2614)用户界面内的特定位置处的第一输入;并且响应于检测到该第一输入,在触敏副显示器上显示(例如,结合触敏副显示单元2604利用显示单元2612)各自对应于不同字符的一组示能表示。
在计算系统2600的一些实施方案中,处理单元被进一步配置为:通过触敏副显示器检测(例如,利用检测单元2614)对应于不同字符中的第一字符的第一示能表示上的第二输入;并且响应于检测到该第二输入,在主显示器上的特定位置处显示(例如,结合主显示单元2602利用显示单元 2612)第一字符的预览,同时输入保持与第一示能表示接触。
在计算系统2600的一些实施方案中,处理单元被进一步配置为:通过触敏副显示器检测(例如,利用检测单元2614)第二输入从第一示能表示到对应于不同字符中的第二字符的第二示能表示的移动;并且响应于检测到第二输入从第一示能表示到第二示能表示的移动,用第二字符的预览替换(例如,利用替换单元2616)第一字符的预览。
在计算系统2600的一些实施方案中,处理单元被进一步配置为:至少部分地基于包括在用户界面中的文本内容来确定包括在该组示能表示中的示能表示。
在计算系统2600的一些实施方案中,响应于检测到用户已经修改包括在用户界面中的文本内容而进行确定。
在计算系统2600的一些实施方案中,处理单元被进一步配置为:检测第二输入在与第二示能表示接触时的抬离,并且响应于检测到该抬离,更新用户界面以包括第二用户界面元素。
在计算系统2600的一些实施方案中,处理单元被进一步配置为:在第二输入与第二示能表示接触的同时检测附加输入,并且响应于检测到该附加输入,更新用户界面以包括第二用户界面元素。
在计算系统2600的一些实施方案中,处理单元被进一步配置为:当第二输入继续跨触敏副显示器移动时,第二输入接触该组示能表示中的对应示能表示时,显示不同字符中的相应字符的预览。
在计算系统2600的一些实施方案中,第二字符的预览保持在主显示器上显示,同时输入保持与第二示能表示接触。
根据一些实施方案,图65示出了根据各种所描述的实施方案的原理进行配置的计算系统2700(也称为电子设备2700)的功能框图。该设备的功能块任选地由实施各种所描述的实施方案的原理的硬件、软件、固件或其组合来实现。本领域的技术人员应当理解,图65中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,计算系统2700被实现为便携式计算系统100(图 1A)。在一些实施方案中,计算系统2700根据图1A至图2D中所示的任何设备/系统来实现。
如图65所示,计算系统2700包括被配置为显示信息的主显示单元 2702(例如,触敏显示系统112,也称为图1A中的主触摸屏、主触敏显示器和主触摸屏显示器);被配置为接收触敏显示器上的接触、手势和其他用户输入的触敏副显示单元2704;被配置为接收键盘输入的物理键盘单元 2705;以及与显示单元2702、物理键盘单元2705和触敏副显示单元2704 耦接的处理单元2710。在一些实施方案中,主显示单元2702是第一外壳的一部分,并且物理键盘单元2705和触敏副显示单元2704是不同于第一外壳的第二外壳的一部分。在一些实施方案中,处理单元包括请求接收单元 (例如,请求接收单元2712)、显示单元2714(例如,显示单元2714)、检测单元(例如,检测单元2716)和内容呈现单元(例如,内容呈现单元2718)。
处理单元被配置为:接收(例如,利用请求接收单元2712)打开内容编辑应用程序的请求;响应于接收到该请求:(i)在主显示器上显示(例如,结合主显示单元2702利用显示单元2714)内容编辑应用程序;并且(ii) 在触敏副显示器上显示(例如,结合触敏副显示单元2704利用显示单元 2714)用于修改至少一个视觉特征的用户界面控件,该至少一个视觉特征用于在内容编辑应用程序内呈现内容。
在计算系统2700的一些实施方案中,处理单元被进一步配置为:通过触敏副显示器检测(例如,利用检测单元2716)用户界面控件处选择至少一个视觉特征的第一值的输入;并且在检测到该输入之后,使用至少一个视觉特征的第一值来在内容编辑应用程序中呈现(例如,利用内容呈现单元2718)内容。
在计算系统2700的一些实施方案中,用户界面控件包括各自对应于至少一个视觉特征沿着值的滑尺的相应值的相应控件。
在计算系统2700的一些实施方案中,值的滑尺表示不同的颜色色度。
在计算系统2700的一些实施方案中,第一值对应于第一颜色的第一色度,并且处理单元被进一步配置为:根据确定输入满足预定标准,修改触敏副显示器上的用户界面控件以包括用于选择与第一颜色的第一色度不同的第一颜色的其他色度的选项。
在计算系统2700的一些实施方案中,处理单元被进一步配置为:在呈现内容之前,接收内容的选择,其中呈现内容包括使用至少一个视觉特征的第一值呈现内容的预览。
在计算系统2700的一些实施方案中,在输入保持与触敏副显示器接触的同时呈现预览。
在计算系统2700的一些实施方案中,处理单元被进一步配置为响应于检测到输入的抬离,停止显示预览。
在计算系统2700的一些实施方案中,处理单元被进一步配置为响应于检测到输入的抬离,显示具有至少一个视觉特征的修改值的可编辑内容的部分。
根据一些实施方案,图68示出了根据各种所描述的实施方案的原理进行配置的计算系统3000(也称为电子设备3000)的功能框图。该设备的功能块任选地由实施各种所描述的实施方案的原理的硬件、软件、固件或其组合来实现。本领域的技术人员应当理解,图68中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,计算系统3000被实现为便携式计算系统100(图 1A)。在一些实施方案中,计算系统3000根据图1A至图2D中所示的任何设备/系统来实现。
如图68所示,计算系统3000包括被配置为显示信息的显示单元3002 (例如,触敏显示系统112,也称为图1A中的主触摸屏、主触敏显示器和主触摸屏显示器);被配置为接收触敏显示器上的接触、手势和其他用户输入的副显示单元3004;被配置为接收来自用户的生物特征输入的生物特征传感器单元3005;以及与显示单元3002、副显示单元3004和生物特征单元3005耦接的处理单元3010。在一些实施方案中,显示单元3002是第一外壳的一部分,并且生物特征传感器单元3005和副显示单元3004是不同于第一外壳的第二外壳的一部分。在一些实施方案中,处理单元包括生物特征信息接收单元(例如,生物信息接收单元3012)、显示单元3014 (例如,显示单元3014)、解锁单元(例如,解锁单元3016)和接收单元(例如,接收单元3018)。
处理单元被配置为:在设备处于锁定状态时,显示(例如,利用显示单元3014)与登录到包括第一用户账户和第二用户账户的多个用户账户相关联的相应登录用户界面;在显示该登录用户界面时,接收(例如,利用生物特征信息接收单元3012)关于用户的生物特征信息;响应于接收到该生物特征信息:(i)根据确定该生物特征信息与多个用户账户中的第一用户账户的生物特征信息一致,同时第一用户账户在设备上不具有活动会话,在显示器上显示(例如,利用显示单元3014)输入第一用户账户的登录凭证的提示;并且(ii)根据确定该生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致,同时第二用户账户在设备上不具有活动会话,在显示器上显示(例如,利用显示单元3014)输入第二用户账户的登录凭证的提示。
在电子设备3000的一些实施方案中,处理单元被进一步配置为响应于接收到该生物特征信息:根据确定该生物特征信息与多个用户账户中的第一用户账户的生物特征信息一致,同时第一用户账户在设备上具有活动会话,相对于第一用户账户解锁(例如,利用解锁单元3016)设备。
在电子设备3000的一些实施方案中,处理单元被进一步配置为响应于接收到该生物特征信息:根据确定该生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致,同时第二用户账户在设备上具有活动会话,相对于第二用户账户解锁(例如,利用解锁单元3016)设备。
在电子设备3000的一些实施方案中,处理单元被进一步配置为响应于接收到该生物特征信息:根据确定该生物特征信息与设备的任何用户账户的生物特征信息不一致,将设备保持在锁定状态。
在电子设备3000的一些实施方案中,登录用户界面包括对应于多个用户账户的多个可选择示能表示。
在电子设备3000的一些实施方案中,处理单元被进一步配置为:在显示输入第一用户账户的登录凭证的提示时,接收(例如,利用接收单元 3018)登录凭证的输入;并且响应于接收到该登录凭证的输入:根据确定该登录凭证与第一用户账户的登录凭证一致,相对于第一用户账户解锁 (例如,利用解锁单元3016)设备;并且根据确定该登录凭证与第一用户账户的登录凭证不一致,将设备保持在锁定状态。
在电子设备3000的一些实施方案中,处理单元被进一步配置为:在显示输入第二用户账户的登录凭证的提示时,接收(例如,利用接收单元 3018)登录凭证的输入;并且响应于接收到该登录凭证的输入:根据确定该登录凭证与第二用户账户的登录凭证一致,相对于第一用户账户解锁 (例如,利用解锁单元3016)设备;并且根据确定该登录凭证与第二用户账户的登录凭证不一致,将设备保持在锁定状态。
在电子设备3000的一些实施方案中,登录用户界面包括提供生物特征信息的指令。
在电子设备3000的一些实施方案中,电子设备包括与生物特征传感器相邻的副显示器;并且处理单元被进一步配置为:在设备的显示器上显示登录用户界面时,在副显示器上显示通过生物特征传感器提供生物特征信息的指令。
在电子设备3000的一些实施方案中,生物特征传感器是指纹传感器。
在电子设备3000的一些实施方案中,生物特征传感器是面部检测传感器。
在电子设备3000的一些实施方案中,生物特征传感器是视网膜扫描仪。
根据一些实施方案,图69示出了根据各种所描述的实施方案的原理进行配置的计算系统3100(也称为电子设备3100)的功能框图。该设备的功能块任选地由实施各种所描述的实施方案的原理的硬件、软件、固件或其组合来实现。本领域的技术人员应当理解,图69中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。为了便于讨论,计算系统3100被实现为便携式计算系统100(图 1A)。在一些实施方案中,计算系统3100根据图1A至图2D中所示的任何设备/系统来实现。
如图69所示,计算系统3100包括被配置为显示信息的显示单元3102 (例如,触敏显示系统112,也称为图1A中的主触摸屏、主触敏显示器和主触摸屏显示器);被配置为接收触敏显示器上的接触、手势和其他用户输入的副显示单元3104;被配置为接收来自用户的生物特征输入的生物特征传感器单元3105;以及与显示单元3102、副显示单元3104和生物特征单元3105耦接的处理单元3110。在一些实施方案中,显示单元3102是第一外壳的一部分,并且生物特征传感器单元3105和副显示单元3104是不同于第一外壳的第二外壳的一部分。在一些实施方案中,处理单元包括生物特征信息接收单元(例如,生物特征信息接收单元3112)、显示单元 3114(例如,显示单元3114)、解锁单元(例如,解锁单元3116)、锁定单元(例如,锁定单元3118)、接收单元(例如,接收单元3120)、低功率模式进入单元(例如,低功率模式进入单元3122)和重启单元(例如,重启单元3124)。
处理单元被配置为:在设备登录到第一用户账户时,显示(例如,利用显示单元3114)与第一用户账户相关联的用户界面。该设备与包括第一用户账户和第二用户账户的多个用户账户相关联,并且第二用户账户与能够登录到第二用户账户的生物特征信息相关联。在显示与第一用户账户相关联的用户界面时,处理单元被配置为通过具有集成生物特征传感器的输入元件接收(例如,利用生物特征信息接收单元3112)输入。响应于通过具有集成生物特征传感器的输入元件接收到该输入,处理单元被配置为:根据确定该输入满足第二用户切换标准,同时第二用户账户在设备上具有活动会话,其中第二用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致:(i)相对于第二用户账户解锁(例如,利用解锁单元3116)设备;(ii) 相对于第一用户账户锁定(例如,利用锁定单元3118)设备;并且(iii)用与第二用户账户相关联的用户界面替换(例如,利用显示单元3114)与第一账户相关联的用户界面的显示。
在电子设备3100的一些实施方案中,处理单元被进一步配置为:响应于接收到生物特征信息:根据确定该输入满足第二用户切换标准,同时第二用户账户在设备上不具有活动会话,其中第二用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第二用户账户的生物特征信息一致,在显示器上显示(例如,利用显示单元 3114)输入第二用户账户的登录凭证的提示。
在电子设备3100的一些实施方案中,处理单元被进一步配置为:响应于接收到该生物特征信息:根据确定该输入满足第三用户切换标准,同时第三用户账户在设备上具有活动会话,其中第三用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第三用户账户的生物特征信息一致:(i)相对于第三用户账户解锁(例如,利用解锁单元3116)设备;(ii)相对于第一用户账户锁定(例如,利用锁定单元3118)设备;并且(iii)用与第三用户账户相关联的用户界面替换(例如,利用显示单元3114)与第一账户相关联的用户界面的显示。
在电子设备3100的一些实施方案中,处理单元被进一步配置为:响应于接收到生物特征信息:根据确定该输入满足第三用户切换标准,同时第三用户账户在设备上不具有活动会话,其中第三用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第三用户账户的生物特征信息一致,在显示器上显示(例如,利用显示单元 3114)输入第三用户账户的登录凭证的提示。
在电子设备3100的一些实施方案中,输入元件是按钮,并且通过具有集成生物特征传感器的输入元件进行的输入包括通过按钮检测按压输入。
在电子设备3100的一些实施方案中,第二用户切换标准包括按压输入持续小于第一阈值时间量的标准;并且处理单元被进一步配置为:响应于接收到通过具有集成生物特征传感器的输入元件进行的按压输入,根据确定利用按钮进行的该按压输入持续长于第一阈值时间量,(例如,利用低功率模式进入单元3122)将设备置于较低功率模式。
在电子设备3100的一些实施方案中,第二用户切换标准包括按钮按压小于第一阈值时间量的标准;并且处理单元被进一步配置为响应于接收到通过具有集成生物特征传感器的输入元件进行的输入:根据确定利用按钮进行的该按压输入持续长于第一阈值时间量并小于第二阈值时间量,将设备置于(例如,利用低功率模式进入单元3122);并且根据确定利用按钮进行的该按压输入持续长于第二阈值时间量,显示(例如,利用显示单元 3114)用于改变设备状态的选项菜单。
在电子设备3100的一些实施方案中,处理单元被进一步配置为响应于接收到通过具有集成生物特征传感器的输入元件进行的输入:根据确定利用按钮进行的该按压输入持续长于大于第二阈值时间量的第三阈值时间量,(例如,利用重启单元3124)使设备重启。
在电子设备3100的一些实施方案中,处理单元被进一步配置为在用与第二用户账户相关联的用户界面替换与第一账户相关联的用户界面的显示之后:在显示与第二用户账户相关联的用户界面时,接收(例如,利用生物特征信息接收单元3112)通过具有集成生物特征传感器的输入元件进行的第二输入;响应于接收到通过具有集成生物特征传感器的输入元件进行的第二输入:根据确定该第二输入满足第一用户切换标准,同时第一用户账户在设备上具有活动会话,其中第一用户切换标准包括要求在利用输入元件进行输入期间检测到的生物特征信息与多个用户账户中的第一用户账户的生物特征信息一致:(i)相对于第一用户账户解锁(例如,利用解锁单元3116)设备;(ii)相对于第二用户账户锁定(例如,利用锁定单元3118) 设备;并且(iii)用与第一用户账户相关联的用户界面替换(例如,利用显示单元3114)与第二账户相关联的用户界面的显示。
出于解释的目的,前面的描述是参考具体实施方案来描述的。然而,上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择和描述实施方案是为了最佳地阐明本发明的原理及其实际应用,以便由此使得本领域的其他技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施方案。
Claims (19)
1.一种将用户界面部分移动到触敏副显示器的方法,所述方法包括:
在包括一个或多个处理器、第一壳体和第二壳体的计算系统处,所述第一壳体包括主显示器,所述第二壳体至少部分地包含(i)物理键盘和(ii)不同于所述主显示器的触敏副显示器:
在所述主显示器上显示用户界面;
检测针对被显示在所述主显示器上的所述用户界面中的用户界面元素的输入,其中所述输入包括移动;以及
响应检测到所述移动:
将所述用户界面元素朝向所述触敏副显示器移动;
停止在所述主显示器上显示所述用户界面元素;以及
在被集成到包含所述物理键盘的所述第二壳体中的所述触敏副显示器上显示先前被显示在所述主显示器上的所述用户界面元素的表示;以及
当所述用户界面元素的所述表示被显示在所述触敏副显示器上的同时,检测将所述用户界面元素的所述表示移动到所述触敏副显示器内的不同位置的输入。
2.根据权利要求1所述的方法,其中当被显示在所述触敏副显示器上的同时,所述用户界面元素的所述表示响应于在所述触敏副显示器上的轻击输入以执行与所述用户界面元素相对应的操作。
3.根据权利要求1所述的方法,其中:
针对所述用户界面元素的所述输入是所述主显示器上的点击输入,并且
在所述触敏副显示器上的所述用户界面元素的所述表示的所述显示是位于所述触敏副显示器上的位置,所述位置基于所述点击输入在所述触敏副显示器上被释放的位置而被确定。
4.根据权利要求1所述的方法,其中先前被显示在所述主显示器上的所述用户界面元素是与应用相对应的菜单。
5.根据权利要求1所述的方法,其中先前被显示在所述主显示器上的所述用户界面元素是通知和模态警报之一。
6.根据权利要求1所述的方法,还包括:
当所述用户界面元素的所述表示被显示在所述触敏副显示器上的同时,检测所述用户界面元素的所述表示上方的输入;以及
响应于检测到所述输入,在所述触敏副显示器内以更大的显示尺寸显示所述用户界面元素的所述表示。
7.根据权利要求1所述的方法,还包括:
当所述用户界面元素的所述表示被显示在所述触敏副显示器上的同时,检测所述用户界面元素的所述表示上方的输入;以及
响应于检测到所述输入,停止在所述触敏副显示器内显示所述用户界面元素的所述表示。
8.根据权利要求1所述的方法,其中所述触敏副显示器包括与至少一个系统级功能相对应的至少一个系统级示能表示,所述方法还包括:
在所述触敏副显示器上显示所述用户界面元素的所述表示之后,在所述触敏副显示器上保持所述至少一个系统级示能表示的显示。
9.根据权利要求1所述的方法,还包括:
在检测到所述输入之前,在所述触敏副显示器上显示与经由所述计算系统可用的功能相对应的一组用户界面元素,
其中在所述触敏副显示器上的所述用户界面元素的所述表示的所述显示包括:停止显示所述一组用户界面元素的至少一个子集。
10.根据权利要求9所述的方法,其中所述用户界面元素的所述表示被覆盖在所述触敏副显示器上的所述一组用户界面元素的所述子集上。
11.根据权利要求1所述的方法,其中所述触敏副显示器小于所述物理键盘。
12.根据权利要求11所述的方法,其中所述触敏副显示器的表面积小于所述物理键盘的表面积。
13.根据权利要求11所述的方法,其中触敏副显示器是沿着所述物理键盘的长度延伸的窄矩形条。
14.根据权利要求11所述的方法,其中所述计算系统是膝上型计算机。
15.根据权利要求1所述的方法,其中停止显示所述用户界面元素的相应部分根据确定所述移动满足预定动作标准而被执行。
16.根据权利要求15所述的方法,其中当所述输入从所述主显示器移动到所述触敏副显示器时,所述预定动作标准被满足。
17.根据权利要求15所述的方法,其中当所述输入移动到所述主显示器上的预定位置时,所述预定动作标准被满足。
18.一种计算设备,包括:
一个或多个处理器;
第一壳体,其包括主显示器;
第二壳体,至少部分地包含(i)物理键盘和(ii)与所述主显示器不同的触敏副显示器;以及
存储器,存储被配置用于由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求1-17的方法或使根据权利要求1-17的方法执行的指令。
19.一种存储可执行指令的非暂态计算机可读存储介质,当所述可执行指令由计算系统的一个或多个处理器执行时,使所述计算系统执行根据权利要求1-17中任一项的方法或使根据权利要求1-17中任一项的方法执行,所述计算系统具有第一壳体和第二壳体,所述第一壳体包括主显示器,所述第二壳体至少部分地包含(i)物理键盘和(ii)不同于所述主显示器的触敏副显示器。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662368988P | 2016-07-29 | 2016-07-29 | |
US62/368,988 | 2016-07-29 | ||
US201662412792P | 2016-10-25 | 2016-10-25 | |
US62/412,792 | 2016-10-25 | ||
CN201710632979.8A CN107665047B (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710632979.8A Division CN107665047B (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113157108A true CN113157108A (zh) | 2021-07-23 |
Family
ID=59380818
Family Applications (5)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710632979.8A Active CN107665047B (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
CN202110182280.2A Pending CN113157111A (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
CN202110181406.4A Pending CN113157108A (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
CN202110181990.3A Pending CN113157110A (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
CN202110181818.8A Pending CN113157109A (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710632979.8A Active CN107665047B (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
CN202110182280.2A Pending CN113157111A (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110181990.3A Pending CN113157110A (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
CN202110181818.8A Pending CN113157109A (zh) | 2016-07-29 | 2017-07-28 | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 |
Country Status (8)
Country | Link |
---|---|
US (4) | US10303289B2 (zh) |
EP (3) | EP4411512A2 (zh) |
JP (4) | JP6700471B2 (zh) |
KR (6) | KR102115714B1 (zh) |
CN (5) | CN107665047B (zh) |
AU (6) | AU2017100879B4 (zh) |
DK (1) | DK179705B1 (zh) |
WO (1) | WO2018022313A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115185910A (zh) * | 2022-06-27 | 2022-10-14 | 无锡蜜蜂数智科技有限公司 | 一种智能标签管理系统及装置 |
Families Citing this family (118)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11089134B1 (en) | 2011-12-19 | 2021-08-10 | Majen Tech, LLC | System, method, and computer program product for coordination among multiple devices |
US10776103B2 (en) | 2011-12-19 | 2020-09-15 | Majen Tech, LLC | System, method, and computer program product for coordination among multiple devices |
US10057400B1 (en) | 2012-11-02 | 2018-08-21 | Majen Tech, LLC | Lock screen interface for a mobile device apparatus |
US11431834B1 (en) | 2013-01-10 | 2022-08-30 | Majen Tech, LLC | Screen interface for a mobile device apparatus |
US10051103B1 (en) | 2013-01-10 | 2018-08-14 | Majen Tech, LLC | Screen interface for a mobile device apparatus |
US11914419B2 (en) | 2014-01-23 | 2024-02-27 | Apple Inc. | Systems and methods for prompting a log-in to an electronic device based on biometric information received from a user |
JP6255109B2 (ja) | 2014-01-23 | 2017-12-27 | アップル インコーポレイテッド | タッチ感知式セカンダリディスプレイにおいてユーザインタフェースコントロールを動的に提供するシステム、プログラム及び方法 |
EP3195096B1 (en) | 2014-08-02 | 2020-08-12 | Apple Inc. | Context-specific user interfaces |
US10452253B2 (en) | 2014-08-15 | 2019-10-22 | Apple Inc. | Weather user interface |
KR102314109B1 (ko) * | 2015-01-05 | 2021-10-18 | 삼성전자주식회사 | 디스플레이 장치 및 디스플레이 방법 |
USD762671S1 (en) * | 2015-03-06 | 2016-08-02 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
WO2016144385A1 (en) | 2015-03-08 | 2016-09-15 | Apple Inc. | Sharing user-configurable graphical constructs |
EP4327731A3 (en) | 2015-08-20 | 2024-05-15 | Apple Inc. | Exercise-based watch face |
USD775649S1 (en) * | 2015-09-08 | 2017-01-03 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
AU2017100879B4 (en) | 2016-07-29 | 2017-09-28 | Apple Inc. | Systems, devices, and methods for dynamically providing user interface controls at touch-sensitive secondary display |
CN114740963B (zh) | 2016-09-23 | 2024-06-28 | 苹果公司 | 观影模式 |
US20210191527A1 (en) * | 2016-10-07 | 2021-06-24 | Hewlett-Packard Development Company, L.P. | Keyboard with secondary display device |
USD815137S1 (en) * | 2016-10-27 | 2018-04-10 | Apple Inc. | Display screen or portion thereof with graphical user interface |
USD927529S1 (en) * | 2019-01-11 | 2021-08-10 | Apple Inc. | Electronic device with pair of display screens or portions thereof each with graphical user interface |
USD900860S1 (en) * | 2016-10-27 | 2020-11-03 | Apple Inc. | Display screen or portion thereof with graphical user interface |
USD815141S1 (en) | 2016-10-27 | 2018-04-10 | Apple Inc. | Display screen or portion thereof with graphical user interface |
USD815140S1 (en) | 2016-10-27 | 2018-04-10 | Apple Inc. | Display screen or portion thereof with graphical user interface |
CA174365S (en) | 2016-10-27 | 2017-11-28 | Apple Inc | Display screen with graphical user interface |
USD817993S1 (en) * | 2016-10-27 | 2018-05-15 | Apple Inc. | Display screen or portion thereof with graphical user interface |
USD817992S1 (en) * | 2016-10-27 | 2018-05-15 | Apple Inc. | Display screen or portion thereof with graphical user interface |
USD820304S1 (en) * | 2016-10-27 | 2018-06-12 | Apple Inc. | Display screen or portion thereof with graphical user interface |
USD943624S1 (en) | 2016-10-27 | 2022-02-15 | Apple Inc. | Electronic device with pair of display screens or portions thereof each with animated graphical user interface |
USD820303S1 (en) | 2016-10-27 | 2018-06-12 | Apple Inc. | Display screen or portion thereof with graphical user interface |
DK179412B1 (en) | 2017-05-12 | 2018-06-06 | Apple Inc | Context-Specific User Interfaces |
DK179555B1 (en) | 2017-05-16 | 2019-02-13 | Apple Inc. | USER INTERFACE FOR A FLASHLIGHT MODE ON AN ELECTRONIC DEVICE |
USD837234S1 (en) | 2017-05-25 | 2019-01-01 | Palantir Technologies Inc. | Display screen or portion thereof with transitional graphical user interface |
USD839913S1 (en) * | 2017-07-05 | 2019-02-05 | Mintz Group, LLC | Display screen or portion thereof with graphical user interface |
US10455779B2 (en) * | 2017-07-24 | 2019-10-29 | Osram Sylvania Inc. | Irradiance-controlled fixture for horticultural applications |
USD874473S1 (en) * | 2017-09-22 | 2020-02-04 | Samsung Electronics Co., Ltd. | Display screen or portion thereof with graphical user interface |
US11176553B2 (en) * | 2017-10-13 | 2021-11-16 | Intensity Analytics Corporation | Method and system providing peer effort-based validation |
USD916718S1 (en) * | 2017-10-30 | 2021-04-20 | Siemens Healthcare Gmbh | Display screen or portion thereof with a graphical user interface |
USD847841S1 (en) | 2017-11-01 | 2019-05-07 | Apple Inc. | Display screen or portion thereof with graphical user interface |
US11134312B2 (en) | 2017-12-14 | 2021-09-28 | Google Llc | Methods, systems, and media for presenting contextual information in connection with media content |
US10585525B2 (en) | 2018-02-12 | 2020-03-10 | International Business Machines Corporation | Adaptive notification modifications for touchscreen interfaces |
EP3557415B1 (en) * | 2018-04-17 | 2024-07-10 | Casio Computer Co., Ltd. | Display control apparatus, program and display controlling method |
US11256548B2 (en) | 2018-05-03 | 2022-02-22 | LGS Innovations LLC | Systems and methods for cloud computing data processing |
USD960177S1 (en) | 2018-05-03 | 2022-08-09 | CACI, Inc.—Federal | Display screen or portion thereof with graphical user interface |
US11327650B2 (en) | 2018-05-07 | 2022-05-10 | Apple Inc. | User interfaces having a collection of complications |
USD858556S1 (en) * | 2018-05-07 | 2019-09-03 | Google Llc | Display screen or portion thereof with an animated graphical interface |
USD859450S1 (en) * | 2018-05-07 | 2019-09-10 | Google Llc | Display screen or portion thereof with an animated graphical interface |
USD896248S1 (en) * | 2018-05-12 | 2020-09-15 | Canva Pty Ltd. | Display screen or portion thereof with an animated graphical user interface |
USD879132S1 (en) * | 2018-06-03 | 2020-03-24 | Apple Inc. | Electronic device with graphical user interface |
USD933672S1 (en) | 2018-06-03 | 2021-10-19 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
USD869491S1 (en) | 2018-06-03 | 2019-12-10 | Apple Inc. | Electronic device with graphical user interface |
US20190392063A1 (en) * | 2018-06-25 | 2019-12-26 | Microsoft Technology Licensing, Llc | Reducing data loss in remote databases |
US10839143B2 (en) * | 2018-06-29 | 2020-11-17 | Dropbox, Inc. | Referential gestures within content items |
USD947206S1 (en) * | 2018-08-15 | 2022-03-29 | Asustek Computer Inc. | Electronic device with animated graphical user interface |
USD951243S1 (en) * | 2018-08-15 | 2022-05-10 | Asustek Computer Inc. | Electronic device with display screen with animated graphical user interface and keyboard |
USD921658S1 (en) * | 2018-08-22 | 2021-06-08 | United Services Automobile Association (Usaa) | Display panel portion with an animated graphical user interface |
USD928187S1 (en) * | 2018-08-23 | 2021-08-17 | United Services Automobile Association (Usaa) | Display panel portion with an animated graphical user interface |
USD891443S1 (en) * | 2018-10-31 | 2020-07-28 | Nutanix, Inc. | Display panel or portion thereof with a transitional graphical user interface |
CN109523456B (zh) * | 2018-10-31 | 2023-04-07 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
USD921018S1 (en) * | 2018-11-21 | 2021-06-01 | General Electric Company | Display screen with animated graphical user interface |
US11294463B2 (en) | 2018-12-03 | 2022-04-05 | Microsoft Technology Licensing, Llc | Augmenting the functionality of user input devices using a digital glove |
US11199901B2 (en) | 2018-12-03 | 2021-12-14 | Microsoft Technology Licensing, Llc | Augmenting the functionality of non-digital objects using a digital glove |
US11314409B2 (en) * | 2018-12-03 | 2022-04-26 | Microsoft Technology Licensing, Llc | Modeless augmentations to a virtual trackpad on a multiple screen computing device |
US10564719B1 (en) | 2018-12-03 | 2020-02-18 | Microsoft Technology Licensing, Llc | Augmenting the functionality of user input devices using a digital glove |
US11137905B2 (en) | 2018-12-03 | 2021-10-05 | Microsoft Technology Licensing, Llc | Modeless augmentations to a virtual trackpad on a multiple screen computing device |
EP3668087A1 (en) * | 2018-12-14 | 2020-06-17 | Carrier Corporation | Video monitoring system workspace |
CN111629319B (zh) * | 2019-02-28 | 2022-05-31 | 中国移动通信有限公司研究院 | 一种位置预测方法及设备 |
US11017746B2 (en) * | 2019-03-29 | 2021-05-25 | Lenovo (Singapore) Pte. Ltd. | Auxiliary display scaling factor |
CN110213437B (zh) * | 2019-05-27 | 2020-10-13 | 维沃移动通信有限公司 | 一种编辑方法及移动终端 |
USD913324S1 (en) | 2019-05-29 | 2021-03-16 | Apple Inc. | Display screen or portion thereof with animated graphical user interface |
USD931298S1 (en) | 2019-05-30 | 2021-09-21 | Apple Inc. | Display screen or portion thereof with graphical user interface |
USD913315S1 (en) * | 2019-05-31 | 2021-03-16 | Apple Inc. | Electronic device with graphical user interface |
CN112015308B (zh) * | 2019-05-31 | 2022-07-15 | 北京小米移动软件有限公司 | 内容展示方法及装置 |
DE102019118965A1 (de) * | 2019-07-12 | 2021-01-14 | Workaround Gmbh | Nebengerät für ein Sensor- und/oder Informationssystem sowie Sensor- und/oder Informationssystem |
WO2021015752A1 (en) | 2019-07-24 | 2021-01-28 | Hewlett-Packard Development Company, L.P. | Keyboard with input modes |
CN110570184B (zh) * | 2019-08-26 | 2022-08-19 | 北京知嘛文化传播有限公司 | 向用户提供产品的系统、方法、装置以及存储介质 |
CN110727380A (zh) * | 2019-08-28 | 2020-01-24 | 华为技术有限公司 | 一种消息提醒方法及电子设备 |
CN115297199A (zh) | 2019-08-30 | 2022-11-04 | 华为技术有限公司 | 一种具有折叠屏的设备的触控方法与折叠屏设备 |
DK180684B1 (en) * | 2019-09-09 | 2021-11-25 | Apple Inc | Techniques for managing display usage |
CN110913067A (zh) * | 2019-11-06 | 2020-03-24 | 维沃移动通信有限公司 | 一种信息发送方法及电子设备 |
USD973676S1 (en) * | 2019-11-27 | 2022-12-27 | GE Precision Healthcare LLC | Display screen with graphical user interface |
CN111324249B (zh) * | 2020-01-21 | 2020-12-01 | 北京达佳互联信息技术有限公司 | 多媒体素材生成方法、装置及存储介质 |
US11413531B2 (en) * | 2020-03-03 | 2022-08-16 | Sony Interactive Entertainment Inc. | Game console application with action card strand |
USD927531S1 (en) | 2020-03-20 | 2021-08-10 | Caterpillar Inc. | Display screen with icon |
CN114174606B (zh) * | 2020-03-26 | 2023-04-18 | 株式会社日立建机Tierra | 工程机械 |
JP7485528B2 (ja) * | 2020-03-27 | 2024-05-16 | 株式会社コロプラ | プログラム |
USD938483S1 (en) * | 2020-04-10 | 2021-12-14 | Slack Technologies, Llc | Display screen or portion thereof with graphical user interface |
DK181103B1 (en) | 2020-05-11 | 2022-12-15 | Apple Inc | User interfaces related to time |
CN115904596B (zh) | 2020-05-11 | 2024-02-02 | 苹果公司 | 用于管理用户界面共享的用户界面 |
GB2597055A (en) * | 2020-07-02 | 2022-01-19 | Coveva Ltd | Dynamic context-specific input device and method |
US11223873B1 (en) | 2020-07-10 | 2022-01-11 | Verizon Patent And Licensing Inc. | Methods and systems for remote streaming of a user-customized user interface |
USD946598S1 (en) | 2020-09-30 | 2022-03-22 | Masimo Corporation | Display screen or portion thereof with graphical user interface |
USD946596S1 (en) | 2020-09-30 | 2022-03-22 | Masimo Corporation | Display screen or portion thereof with graphical user interface |
USD950599S1 (en) * | 2020-09-30 | 2022-05-03 | Masimo Corporation | Display screen or portion thereof with graphical user interface |
USD946597S1 (en) | 2020-09-30 | 2022-03-22 | Masimo Corporation | Display screen or portion thereof with graphical user interface |
US20230305600A1 (en) * | 2020-10-19 | 2023-09-28 | Hewlett-Packard Development Company, L.P. | Electronic devices with touch sensitive surfaces and user input devices |
TWD216941S (zh) * | 2020-11-13 | 2022-02-01 | 大陸商北京安博盛贏教育科技有限責任公司 | 顯示螢幕之具變化外觀之圖形化使用者介面 |
TWD216940S (zh) * | 2020-11-13 | 2022-02-01 | 大陸商北京安博盛贏教育科技有限責任公司 | 顯示螢幕之具變化外觀之圖形化使用者介面 |
US11694590B2 (en) | 2020-12-21 | 2023-07-04 | Apple Inc. | Dynamic user interface with time indicator |
US11720239B2 (en) | 2021-01-07 | 2023-08-08 | Apple Inc. | Techniques for user interfaces related to an event |
CN114655146B (zh) * | 2021-03-26 | 2024-03-26 | 北京新能源汽车股份有限公司 | 一种车辆运输模式控制方法、装置及设备 |
USD954105S1 (en) * | 2021-05-05 | 2022-06-07 | Doom Solutions, LLC | Display screen or portion thereof with a set of icons |
US11921992B2 (en) | 2021-05-14 | 2024-03-05 | Apple Inc. | User interfaces related to time |
US20220391456A1 (en) * | 2021-06-06 | 2022-12-08 | Apple Inc. | Devices, Methods, and Graphical User Interfaces for Interacting with a Web-Browser |
USD1025092S1 (en) * | 2021-08-12 | 2024-04-30 | Lg Display Co., Ltd. | Display panel with graphical user interface |
USD1038157S1 (en) * | 2021-09-29 | 2024-08-06 | Sky Cp Limited | Display screen with graphical user interface |
US20230121241A1 (en) * | 2021-10-20 | 2023-04-20 | Dell Products L.P. | System and method of utilizing a keyboard with a display |
USD1042484S1 (en) * | 2021-12-30 | 2024-09-17 | Amazon Express Travel Related Services Company, Inc. | Display screen, or portion thereof, with a transitional graphical user interface |
US20230236547A1 (en) | 2022-01-24 | 2023-07-27 | Apple Inc. | User interfaces for indicating time |
US20230251766A1 (en) * | 2022-02-04 | 2023-08-10 | Dell Products, L.P. | Application management and navigation in a web-based environment |
CN114546231A (zh) * | 2022-02-24 | 2022-05-27 | 特赞(上海)信息科技有限公司 | 基于浏览器插件的图像数据收集方法、装置及存储介质 |
US11977733B2 (en) | 2022-08-31 | 2024-05-07 | Dell Products L.P. | Information handling system collaborative touchpad dynamic scaling |
US12032759B2 (en) | 2022-08-31 | 2024-07-09 | Dell Products L.P. | Information handling system collaborative touchpad display hardware device coordination |
US11893960B1 (en) * | 2022-08-31 | 2024-02-06 | Dell Products L.P. | Information handling system collaborative touchpad display brightness management |
US11983399B2 (en) | 2022-08-31 | 2024-05-14 | Dell Products L.P. | Information handling system collaborative touchpad gesture activation and management |
US11899923B1 (en) | 2022-08-31 | 2024-02-13 | Dell Products L.P. | Information handling system collaborative touchpad cursor over control icons |
US11842043B1 (en) | 2022-08-31 | 2023-12-12 | Dell Products L.P. | Information handling system collaborative touchpad and multizone touch rejection |
US20240095833A1 (en) * | 2022-09-19 | 2024-03-21 | Gapodox, LLC | Real-Time Equity Monitoring System, Process and Interface |
US20240143117A1 (en) * | 2022-10-28 | 2024-05-02 | Dell Products L.P. | Information handling system keyboard with four dimensional control pad |
JP7432777B1 (ja) | 2023-02-09 | 2024-02-16 | レノボ・シンガポール・プライベート・リミテッド | 情報処理システム、及び制御方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101506867A (zh) * | 2005-06-30 | 2009-08-12 | 微软公司 | 带有输入敏感显示设备的键盘 |
CN103124996A (zh) * | 2010-01-25 | 2013-05-29 | Tivo有限公司 | 多个用户界面设备的同时使用 |
CN103282851A (zh) * | 2010-10-01 | 2013-09-04 | Flex Electronics ID Co.,Ltd. | 多屏幕用户界面的手势控制 |
WO2015112868A1 (en) * | 2014-01-23 | 2015-07-30 | Piyaxyst Dynamics Llc | Virtual computer keyboard |
Family Cites Families (107)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3956745A (en) | 1971-12-16 | 1976-05-11 | The Marconi Company Limited | Programmable keyboard arrangements |
US6396483B1 (en) | 1996-06-28 | 2002-05-28 | Jeffrey H. Hiller | Keyboard incorporating multi-function flat-panel input device and/or display |
JPH10124217A (ja) | 1996-10-16 | 1998-05-15 | Hitachi Electron Service Co Ltd | 入力機能を有する補助出力表示装置 |
US6618806B1 (en) | 1998-04-01 | 2003-09-09 | Saflink Corporation | System and method for authenticating users in a computer network |
US6111527A (en) | 1998-06-18 | 2000-08-29 | Susel; Irving | Expandable keyboard |
JP4672108B2 (ja) | 2000-06-01 | 2011-04-20 | シャープ株式会社 | 情報処理装置およびその制御方法 |
US7730401B2 (en) | 2001-05-16 | 2010-06-01 | Synaptics Incorporated | Touch screen with user interface enhancement |
JP3940276B2 (ja) | 2001-07-12 | 2007-07-04 | 三菱電機株式会社 | 施設管理システム |
JP3892760B2 (ja) | 2002-05-31 | 2007-03-14 | 株式会社東芝 | 情報処理装置 |
US7221330B2 (en) | 2002-12-09 | 2007-05-22 | Nokia Corporation | Folding terminal with slider to fix terminal in a flat unfolded configuration |
US20040239615A1 (en) | 2003-05-27 | 2004-12-02 | International Business Machines Corporation | System and method for providing a computer user with alerts using a lighted mouse pad |
US7805678B1 (en) | 2004-04-16 | 2010-09-28 | Apple Inc. | Editing within single timeline |
US7703036B2 (en) * | 2004-08-16 | 2010-04-20 | Microsoft Corporation | User interface for displaying selectable software functionality controls that are relevant to a selected object |
US8169410B2 (en) * | 2004-10-20 | 2012-05-01 | Nintendo Co., Ltd. | Gesture inputs for a portable display device |
US8207816B2 (en) * | 2005-07-18 | 2012-06-26 | Law Enforcement Intelligent Devices, Llc | Biometric access control system |
JP2007289457A (ja) | 2006-04-26 | 2007-11-08 | Matsushita Electric Ind Co Ltd | 指紋認証装置および指紋認証方法 |
CN101252607A (zh) | 2007-02-25 | 2008-08-27 | 北京三星通信技术研究有限公司 | 带有扩展显示屏的滑盖式手机 |
KR101066736B1 (ko) * | 2007-06-12 | 2011-09-21 | 엘지전자 주식회사 | 휴대용 단말기 |
US8078984B2 (en) | 2007-06-19 | 2011-12-13 | Microsoft Corporation | Virtual keyboard text replication |
KR101369676B1 (ko) * | 2007-07-25 | 2014-03-04 | 엘지전자 주식회사 | 휴대용 컴퓨터의 보조 입출력 장치 및 이를 이용한애플리케이션의 실행 방법 |
US20110047459A1 (en) * | 2007-10-08 | 2011-02-24 | Willem Morkel Van Der Westhuizen | User interface |
US8631358B2 (en) * | 2007-10-10 | 2014-01-14 | Apple Inc. | Variable device graphical user interface |
JP2009169735A (ja) | 2008-01-17 | 2009-07-30 | Sharp Corp | 情報処理表示装置 |
US8776198B2 (en) * | 2008-02-01 | 2014-07-08 | Oracle International Corporation | Techniques for non-unique identity establishment |
US9098647B2 (en) | 2008-03-10 | 2015-08-04 | Apple Inc. | Dynamic viewing of a three dimensional space |
JP5567783B2 (ja) * | 2008-03-27 | 2014-08-06 | オリンパスイメージング株式会社 | 画像表示装置 |
TWI360775B (en) | 2008-04-22 | 2012-03-21 | Htc Corp | Method and apparatus for operating user interface |
US9740293B2 (en) * | 2009-04-02 | 2017-08-22 | Oblong Industries, Inc. | Operating environment with gestural control and multiple client devices, displays, and users |
JP4171770B1 (ja) * | 2008-04-24 | 2008-10-29 | 任天堂株式会社 | オブジェクト表示順変更プログラム及び装置 |
CN103135933B (zh) | 2008-04-29 | 2016-05-11 | 宏达国际电子股份有限公司 | 用户界面的操作方法及装置 |
JP2011018085A (ja) * | 2008-06-19 | 2011-01-27 | Panasonic Corp | 情報処理装置 |
JP2010009534A (ja) * | 2008-06-30 | 2010-01-14 | Fujitsu Ltd | 電子装置及び表示方法 |
CN101382842A (zh) | 2008-08-22 | 2009-03-11 | 合肥工业大学 | 单行按键超小型键盘及其复用键值的切换方法 |
JP2010066918A (ja) | 2008-09-09 | 2010-03-25 | Nec Personal Products Co Ltd | 情報処理装置および表示制御方法 |
US20100088653A1 (en) * | 2008-10-07 | 2010-04-08 | Research In Motion Limited | Portable electronic device and method of controlling same |
JP5526397B2 (ja) | 2008-10-28 | 2014-06-18 | シャープ株式会社 | コンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラム |
JP5278948B2 (ja) | 2008-12-01 | 2013-09-04 | シャープ株式会社 | オブジェクト表示装置、オブジェクト表示方法、およびオブジェクト表示プログラム |
CN101441525B (zh) | 2008-12-13 | 2010-06-02 | 旭丽电子(广州)有限公司 | 电脑键盘 |
US20100265182A1 (en) | 2009-04-20 | 2010-10-21 | Microsoft Corporation | Context-based state change for an adaptive input device |
CN101876879B (zh) | 2009-04-29 | 2012-09-19 | 深圳富泰宏精密工业有限公司 | 双轴式滑动界面应用系统及方法 |
US8417297B2 (en) * | 2009-05-22 | 2013-04-09 | Lg Electronics Inc. | Mobile terminal and method of providing graphic user interface using the same |
US20100302245A1 (en) | 2009-05-30 | 2010-12-02 | Best Charles J L | Providing interactive light controls in a three-dimensional compositing application |
US20100332981A1 (en) | 2009-06-30 | 2010-12-30 | Daniel Lipton | Providing Media Settings Discovery in a Media Processing Application |
CN101727287B (zh) * | 2009-12-29 | 2012-11-14 | 宇龙计算机通信科技(深圳)有限公司 | 一种定制信息的提示方法、系统及移动终端 |
CN105354940A (zh) | 2010-01-26 | 2016-02-24 | 踏途音乐公司 | 具有改进的用户界面的数字点播设备和相关方法 |
US9513801B2 (en) | 2010-04-07 | 2016-12-06 | Apple Inc. | Accessing electronic notifications and settings icons with gestures |
JP2012003508A (ja) | 2010-06-16 | 2012-01-05 | Toshiba Corp | 情報処理装置、方法及びプログラム |
US8248373B2 (en) * | 2010-06-18 | 2012-08-21 | Microsoft Corporation | Contextual control of dynamic input device |
JP5023193B2 (ja) | 2010-06-28 | 2012-09-12 | 株式会社東芝 | 情報処理装置 |
US10324605B2 (en) | 2011-02-16 | 2019-06-18 | Apple Inc. | Media-editing application with novel editing tools |
US8875025B2 (en) | 2010-07-15 | 2014-10-28 | Apple Inc. | Media-editing application with media clips grouping capabilities |
US20120068933A1 (en) | 2010-09-17 | 2012-03-22 | Microsoft Corporation | Interactive keyboard with multiple different key arrangements |
EP2469384A1 (en) * | 2010-12-23 | 2012-06-27 | Research In Motion Limited | Portable electronic device and method of controlling same |
CN102096546A (zh) * | 2010-12-29 | 2011-06-15 | 华为终端有限公司 | 一种操作系统的解锁方法及装置 |
US9369635B1 (en) | 2011-01-07 | 2016-06-14 | Apptopus, Inc. | Director/camera communication system and method for wireless multi-camera video production |
EP3734407A1 (en) * | 2011-02-10 | 2020-11-04 | Samsung Electronics Co., Ltd. | Portable device comprising a touch-screen display, and method for controlling same |
US9997196B2 (en) | 2011-02-16 | 2018-06-12 | Apple Inc. | Retiming media presentations |
US9195321B2 (en) | 2011-03-17 | 2015-11-24 | Intellitact Llc | Input device user interface enhancements |
EP2500807A1 (en) | 2011-03-18 | 2012-09-19 | Research In Motion Limited | Portable electronic device including touch-sensitive display and method of entering text via virtual keyboard |
US8627096B2 (en) * | 2011-07-14 | 2014-01-07 | Sensible Vision, Inc. | System and method for providing secure access to an electronic device using both a screen gesture and facial biometrics |
US8922476B2 (en) * | 2011-08-31 | 2014-12-30 | Lenovo (Singapore) Pte. Ltd. | Information handling devices with touch-based reflective display |
US9645733B2 (en) * | 2011-12-06 | 2017-05-09 | Google Inc. | Mechanism for switching between document viewing windows |
US9400893B2 (en) * | 2011-12-15 | 2016-07-26 | Facebook, Inc. | Multi-user login for shared mobile devices |
RU2601831C2 (ru) * | 2011-12-28 | 2016-11-10 | Нокиа Текнолоджиз Ой | Предоставление открытого экземпляра приложения |
US8849028B2 (en) | 2012-02-06 | 2014-09-30 | Apple Inc. | Color selection tool for selecting a custom color component |
US9131192B2 (en) | 2012-03-06 | 2015-09-08 | Apple Inc. | Unified slider control for modifying multiple image properties |
CN103324423B (zh) * | 2012-03-21 | 2018-11-13 | 北京三星通信技术研究有限公司 | 一种终端及其用户界面显示方法 |
EP2660692A1 (en) | 2012-04-30 | 2013-11-06 | BlackBerry Limited | Configurable touchscreen keyboard |
CN103425914A (zh) * | 2012-05-17 | 2013-12-04 | 宇龙计算机通信科技(深圳)有限公司 | 应用程序的登录方法及通信终端 |
US20130322705A1 (en) * | 2012-05-30 | 2013-12-05 | Google Inc. | Facial and fingerprint authentication |
KR101909030B1 (ko) * | 2012-06-08 | 2018-10-17 | 엘지전자 주식회사 | 비디오 편집 방법 및 이를 위한 디지털 디바이스 |
WO2014037945A1 (en) * | 2012-09-04 | 2014-03-13 | N-Trig Ltd. | Input device for a computing system |
US20190056828A1 (en) * | 2012-09-06 | 2019-02-21 | Google Inc. | User interface transitions |
US9696879B2 (en) * | 2012-09-07 | 2017-07-04 | Google Inc. | Tab scrubbing using navigation gestures |
JP2013037704A (ja) | 2012-09-11 | 2013-02-21 | Fuji Xerox Co Ltd | 利用制限管理装置、方法、プログラム |
KR101453031B1 (ko) * | 2012-09-17 | 2014-10-23 | 크루셜텍 (주) | 지문을 이용한 로그인 방법, 사용자 단말기 및 기록 매체 |
TW201413564A (zh) | 2012-09-20 | 2014-04-01 | Hon Hai Prec Ind Co Ltd | 桌面切換系統及方法 |
US20140096018A1 (en) | 2012-09-28 | 2014-04-03 | Interactive Memories, Inc. | Methods for Recognizing Digital Images of Persons known to a Customer Creating an Image-Based Project through an Electronic Interface |
US9547375B2 (en) * | 2012-10-10 | 2017-01-17 | Microsoft Technology Licensing, Llc | Split virtual keyboard on a mobile computing device |
KR102061881B1 (ko) * | 2012-10-10 | 2020-01-06 | 삼성전자주식회사 | 멀티 디스플레이 장치 및 그 디스플레이 제어 방법 |
KR102063952B1 (ko) * | 2012-10-10 | 2020-01-08 | 삼성전자주식회사 | 멀티 디스플레이 장치 및 멀티 디스플레이 방법 |
WO2014088621A1 (en) | 2012-12-03 | 2014-06-12 | Google, Inc. | System and method for detecting gestures |
CN104903810B (zh) | 2012-12-07 | 2018-12-07 | 优特设备有限公司 | 重新格式化显示数据的包含切口区域的显示表面 |
EP2742869A1 (en) | 2012-12-12 | 2014-06-18 | Samsung Medison Co., Ltd. | Ultrasound apparatus and method of inputting information into the same |
WO2014107513A2 (en) | 2013-01-04 | 2014-07-10 | Johnson Controls Technology Company | Context-based vehicle user interface reconfiguration |
CN103778388B (zh) * | 2013-01-05 | 2016-09-14 | 天津七所精密机电技术有限公司 | 一种安全增强计算机系统 |
US9349206B2 (en) | 2013-03-08 | 2016-05-24 | Apple Inc. | Editing animated objects in video |
CN110837329B (zh) * | 2013-03-15 | 2023-10-24 | 苹果公司 | 用于管理用户界面的方法和电子设备 |
US10114536B2 (en) * | 2013-03-29 | 2018-10-30 | Microsoft Technology Licensing, Llc | Systems and methods for performing actions for users from a locked device |
US9405379B2 (en) * | 2013-06-13 | 2016-08-02 | Microsoft Technology Licensing, Llc | Classification of user input |
KR102147686B1 (ko) | 2013-06-21 | 2020-08-26 | 삼성전자주식회사 | 오브젝트 실행 장치 및 방법 |
KR20150007910A (ko) * | 2013-07-11 | 2015-01-21 | 삼성전자주식회사 | 사용자 인터렉션을 제공하는 사용자 단말 장치 및 그 방법 |
US9898642B2 (en) | 2013-09-09 | 2018-02-20 | Apple Inc. | Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs |
KR102162955B1 (ko) * | 2013-10-31 | 2020-10-08 | 삼성전자 주식회사 | 생체 정보를 이용한 인증 방법 및 이를 지원하는 휴대형 전자장치 |
CN104715178B (zh) * | 2013-12-11 | 2020-04-03 | 深圳富泰宏精密工业有限公司 | 电子装置的解锁系统及方法 |
KR20150069420A (ko) * | 2013-12-13 | 2015-06-23 | 허윤석 | 터치스크린이 장착된 키보드를 이용한 컴퓨터장치의 제어방법 |
US20150193011A1 (en) * | 2014-01-08 | 2015-07-09 | Microsoft Corporation | Determining Input Associated With One-to-Many Key Mappings |
KR20150097137A (ko) * | 2014-02-18 | 2015-08-26 | 이찬석 | 지문 인식 기반 사용자 인증 방법 |
CN104008350B (zh) * | 2014-05-15 | 2017-10-24 | 惠州Tcl移动通信有限公司 | 通过不同解锁方式进入不同用户模式的移动终端及方法 |
US10055567B2 (en) * | 2014-05-30 | 2018-08-21 | Apple Inc. | Proximity unlock and lock operations for electronic devices |
US11237710B2 (en) | 2014-06-30 | 2022-02-01 | Lenovo (Singapore) Pte. Ltd. | Multi-function slide control |
KR102358749B1 (ko) * | 2014-12-26 | 2022-02-07 | 엘지전자 주식회사 | 디지털 디바이스 및 그 제어 방법 |
TW201907279A (zh) * | 2015-09-30 | 2019-02-16 | 美商蘋果公司 | 具有適應性輸入列之鍵盤 |
CN105260125B (zh) * | 2015-11-20 | 2018-09-28 | 上海斐讯数据通信技术有限公司 | 一种具有触摸屏的电子设备及其解锁方法 |
CN105574378A (zh) * | 2015-12-09 | 2016-05-11 | 小米科技有限责任公司 | 终端控制方法及终端控制装置 |
US20170315704A1 (en) | 2016-05-02 | 2017-11-02 | Microsoft Technology Licensing, Llc | Application user interfaces with scrollable color palettes |
AU2017100879B4 (en) | 2016-07-29 | 2017-09-28 | Apple Inc. | Systems, devices, and methods for dynamically providing user interface controls at touch-sensitive secondary display |
-
2017
- 2017-06-28 AU AU2017100879A patent/AU2017100879B4/en active Active
- 2017-07-10 DK DKPA201770561A patent/DK179705B1/da not_active IP Right Cessation
- 2017-07-13 WO PCT/US2017/041959 patent/WO2018022313A1/en unknown
- 2017-07-13 EP EP24183896.0A patent/EP4411512A2/en active Pending
- 2017-07-13 KR KR1020207000325A patent/KR102115714B1/ko active IP Right Grant
- 2017-07-13 AU AU2017302420A patent/AU2017302420B2/en active Active
- 2017-07-13 EP EP17745225.7A patent/EP3465408B1/en active Active
- 2017-07-13 KR KR1020237001774A patent/KR20230014873A/ko active IP Right Grant
- 2017-07-13 KR KR1020207028796A patent/KR102345993B1/ko active IP Right Grant
- 2017-07-13 JP JP2019503292A patent/JP6700471B2/ja active Active
- 2017-07-13 KR KR1020207014317A patent/KR102166223B1/ko active IP Right Grant
- 2017-07-13 KR KR1020197004584A patent/KR102065900B1/ko active IP Right Grant
- 2017-07-13 EP EP20168044.4A patent/EP3699746B1/en active Active
- 2017-07-13 KR KR1020217042875A patent/KR102490421B1/ko active IP Right Grant
- 2017-07-20 US US15/655,707 patent/US10303289B2/en active Active
- 2017-07-28 CN CN201710632979.8A patent/CN107665047B/zh active Active
- 2017-07-28 CN CN202110182280.2A patent/CN113157111A/zh active Pending
- 2017-07-28 CN CN202110181406.4A patent/CN113157108A/zh active Pending
- 2017-07-28 CN CN202110181990.3A patent/CN113157110A/zh active Pending
- 2017-07-28 CN CN202110181818.8A patent/CN113157109A/zh active Pending
-
2019
- 2019-03-21 US US16/361,122 patent/US10642416B2/en active Active
- 2019-03-21 US US16/361,109 patent/US10719167B2/en active Active
- 2019-08-21 AU AU2019219760A patent/AU2019219760B2/en active Active
-
2020
- 2020-04-29 US US16/862,427 patent/US11429145B2/en active Active
- 2020-04-30 JP JP2020080636A patent/JP7174734B2/ja active Active
-
2021
- 2021-10-20 AU AU2021254570A patent/AU2021254570B2/en active Active
-
2022
- 2022-07-29 JP JP2022121971A patent/JP7377319B2/ja active Active
-
2023
- 2023-03-10 AU AU2023201500A patent/AU2023201500B2/en active Active
- 2023-10-20 AU AU2023251543A patent/AU2023251543A1/en active Pending
- 2023-10-27 JP JP2023184930A patent/JP2024020248A/ja active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101506867A (zh) * | 2005-06-30 | 2009-08-12 | 微软公司 | 带有输入敏感显示设备的键盘 |
CN103124996A (zh) * | 2010-01-25 | 2013-05-29 | Tivo有限公司 | 多个用户界面设备的同时使用 |
CN103282851A (zh) * | 2010-10-01 | 2013-09-04 | Flex Electronics ID Co.,Ltd. | 多屏幕用户界面的手势控制 |
WO2015112868A1 (en) * | 2014-01-23 | 2015-07-30 | Piyaxyst Dynamics Llc | Virtual computer keyboard |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115185910A (zh) * | 2022-06-27 | 2022-10-14 | 无锡蜜蜂数智科技有限公司 | 一种智能标签管理系统及装置 |
CN115185910B (zh) * | 2022-06-27 | 2023-10-13 | 无锡蜜蜂数智科技有限公司 | 一种智能标签管理系统及装置 |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107665047B (zh) | 用于在触敏副显示器处动态地提供用户界面控件的系统、设备和方法 | |
US10754603B2 (en) | Systems, devices, and methods for dynamically providing user interface controls at a touch-sensitive secondary display | |
US20220342443A1 (en) | Systems and Methods for Prompting a Log-In to an Electronic Device Based on Biometric Information Received from a User |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |