CN110554827A - 用于在具有触敏显示器且不具有力传感器的电子设备处激活并使用触控板的系统和方法 - Google Patents

用于在具有触敏显示器且不具有力传感器的电子设备处激活并使用触控板的系统和方法 Download PDF

Info

Publication number
CN110554827A
CN110554827A CN201811143385.1A CN201811143385A CN110554827A CN 110554827 A CN110554827 A CN 110554827A CN 201811143385 A CN201811143385 A CN 201811143385A CN 110554827 A CN110554827 A CN 110554827A
Authority
CN
China
Prior art keywords
touch
contact
sensitive display
electronic device
virtual keyboard
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811143385.1A
Other languages
English (en)
Inventor
R·J·马斯登
M·A·鲁伊兹
M·H·韦纳
C·D·芒罗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Priority to EP19732176.3A priority Critical patent/EP3803561A1/en
Priority to PCT/US2019/034827 priority patent/WO2019236399A1/en
Priority to AU2019100594A priority patent/AU2019100594B4/en
Publication of CN110554827A publication Critical patent/CN110554827A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明题为“用于在具有触敏显示器且不具有力传感器的电子设备处激活并使用触控板的系统和方法”。本发明公开了用于在不具有力传感器的触敏设备上激活触控板模式的单指手势。示例性方法包括:在触敏显示器上显示具有空格键和其他键的虚拟键盘。检测所述虚拟键盘上方的第一延长接触,并且根据确定所述第一延长接触在所述其他键的任何所述相应显示表示的上方,将所述第一延长接触解释为键盘输入并且激活对应的扩展键盘功能。所述方法还包括:检测所述虚拟键盘上方的第二延长接触。所述方法还包括:根据确定所述第二延长接触在所述空格键的相应显示表示的上方,将所述第二延长接触解释为模式切换输入,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。

Description

用于在具有触敏显示器且不具有力传感器的电子设备处激活 并使用触控板的系统和方法
技术领域
本文所公开的实施方案整体涉及具有触敏显示器且不具有力传感器的电子设备,并且更具体地讲,涉及用于在具有触敏显示器且不具有力传感器的电子设备处激活并使用触控板的系统和方法。
背景技术
触敏表面作为计算机和其他电子计算设备的输入设备的用途在近年来显著增长。示例性触敏表面包括触控板和触摸屏显示器。此类表面广泛用于通过操纵被呈现在显示器上的电子文档内的光标来查阅和编辑电子文档。这些电子文档在具有查看能力和编辑能力的应用程序(例如,绘图应用程序、呈现应用程序(例如,Apple的KEYNOTE或Microsoft的POWERPOINT)、文字处理应用程序(例如,Apple的PAGES或Microsoft的WORD)、网站创建应用程序、电子表格应用程序(例如,Apple的NUMBERS或Microsoft的EXCEL))内被查看或编辑。
触敏设备上的常规光标操纵方法需要使用力传感器并且/或者需要用户提供多指手势(例如,需要用户使用其两根手指的手势,诸如两指轻击)。对于不包括力传感器的触敏设备,压敏/力敏手势均不可用。另外,此类设备还可具有较小的显示屏区域(例如,这些设备上的显示器通常较小),因此,使用多指手势不仅低效,并且过多地遮挡本就较小的显示屏区域。
如此,期望提供用于激活触控板模式的单指手势,该触控板模式在具有触敏显示器且不具有力传感器的电子设备上使用。
发明内容
因此,存在对用于激活触控板模式的单指手势的需求,该触控板模式在具有触敏显示器且不具有力传感器的电子设备上使用。本文所讨论的单指手势还可在确实包括力传感器的设备上实现,但检测这些单指手势不需要使用可由此类力传感器生成的任何力信号(换句话讲,即使设备确实具有力传感器,也不需要此类力传感器来检测本文所讨论的单指触控板激活手势,例如,尖端部到纹路部的滚动手势以及虚拟键盘的预先确定的模式切换区域(模式切换区域的示例包括空格键或虚拟键盘上在空格键下方的区域)上方的延长接触)。
本文所述的实施方案通过提供允许用户用单指手势激活触控板模式的设备和方法来解决以上缺点,其中触控板模式在具有触敏显示器且不具有力传感器的电子设备上使用。在不包括力传感器的设备上,设计允许切换到触控板模式同时还避免与其他手势产生不必要混淆的单指手势是非常困难的任务。
下文所述的一个示例性单指手势是在虚拟键盘上的空格键上方(或者在虚拟键盘的另一指定区域上方,诸如虚拟键盘上不包括键的底部部分)的延长接触。允许用户提供在空格键上方(或者在虚拟键盘的另一指定区域的上方,诸如虚拟键盘上不包括键的底部部分)的延长接触,然后将电子设备作为触控板来操作,这为用户提供了仅使用单指来快速从键盘输入模式切换到触控板模式的便利方式。在不包括力传感器的电子设备处提供这种交互,使这些设备的可操作性得到了增强,并且使这些设备上的人机界面更加有效(例如,通过允许用户使用简单手势来轻易地切换到触控板模式,而不必将时间浪费在不使用触控板模式而尝试放置光标来激活触控板模式上,或者不必将时间浪费在使用用户输入或菜单选项的复杂序列来激活触控板模式上)。
下文所述的另一示例性单指手势是在虚拟键盘上方的尖端部到纹路部(也称为手指滚动)手势。允许用户在虚拟键盘上方滚动单指,然后将电子设备作为触控板来操作,这为用户提供了仅使用单指来快速地从键盘输入模式切换到触控板模式的便利方式。在不包括力传感器的电子设备处提供这种交互,使这些设备的可操作性得到了增强,并且使这些设备上的人机界面更加有效(例如,通过允许用户使用简单手势来轻易地切换到触控板模式,而不必将时间浪费在不使用触控板模式而尝试放置光标来激活触控板模式上,或者不必将时间浪费在使用用户输入或菜单选项的复杂序列来激活触控板模式上)。
通过提供更有效的人机界面,本文所述的设备和方法还减少了功率使用(例如,因为用户总体上提供更少的输入并且花费更少的时间来执行操纵光标位置的任务)并从而延长了电子设备的电池寿命,并且还以更有效的方式使用有限的计算资源。
(A1)根据一些实施方案,在包括与多个触摸传感器耦接的触敏显示器的电子设备处执行一种方法,其中触敏显示器未与任何力传感器耦接。该方法包括:在触敏显示器上显示虚拟键盘,该虚拟键盘包括空格键和其他键的显示表示。该方法还包括:检测虚拟键盘上方的第一延长接触;以及根据确定第一延长接触在其他键的任何相应显示表示的上方,将延长接触解释为键盘输入并且激活对应的扩展键盘功能。该方法还包括:检测虚拟键盘上方的第二延长接触;以及根据确定第二延长接触在空格键的相应显示表示的上方,将第二延长接触解释为模式切换输入,该模式切换输入使电子设备将触敏显示器的至少一部分作为触控板来操作。
在不包括力传感器的设备上,设计允许切换到触控板模式同时还避免与其他手势产生不必要混淆的单指手势是非常困难的任务。允许用户提供在空格键上方(或者在虚拟键盘的另一指定区域的上方,诸如虚拟键盘上不包括键的底部部分)的延长接触,然后将电子设备作为触控板来操作,这为用户提供了快速地从键盘输入模式切换到触控板模式的便利方式。在不包括力传感器的电子设备处提供这种交互,使这些设备的可操作性得到了增强,并且使这些设备上的人机界面更加有效(例如,通过允许用户使用简单手势来轻易地切换到触控板模式,而不必将时间浪费在不使用触控板模式而尝试放置光标来激活触控板模式上,或者不必将时间浪费在使用用户输入或菜单选项的复杂序列来激活触控板模式上)。
(A2)在根据A1所述的方法的一些实施方案中,该方法还包括:在作为触控板来操作的同时:检测第二延长接触从触敏显示器的抬离;以及响应于检测到第二延长接触的抬离,确定抬离前第二延长接触在触敏显示器上的任何移动是否满足移动参数。
使用移动参数可允许电子设备准确地确定何时继续在触控板模式中操作或者何时退出触控板模式。通过响应于检测到抬离来确定第二延长接触在触敏显示器上的任何移动是否满足移动参数,设备保留计算资源并且仅在立即需要确定时才使用这些计算资源来进行该确定。这样,这些设备的可操作性得到了增强并且这些设备上的人机界面更有效地操作(例如,通过在需要确定前进行确定来避免浪费资源)。
(A3)在根据A2所述的方法的一些实施方案中,该方法还包括:确定抬离前第二延长接触在触敏显示器上的移动不满足移动参数,并且作为响应,停止将触敏显示器的一部分作为触控板来操作。
一旦确定抬离前的移动不满足移动参数,即停止将触敏显示器的一部分作为触控板来操作,这确保仅在用户需要触控板模式时才调用触控板模式。通过确保仅在用户需要触控板模式时才调用触控板模式,设备的可操作性得到了增强并且该设备上的人机界面更有效地操作(例如,通过确保为用户呈现其需要的界面控件以及避免使用户在试图寻找其需要的界面控件上浪费时间)。
(A4)在根据A3所述的方法的一些实施方案中,确定抬离前第二延长接触在触敏显示器上的移动不满足移动参数包括确定抬离前第二延长接触在触敏显示器上移动的距离小于预先确定的距离。
一旦确定抬离前第二延长接触在触敏显示器上移动的距离小于预先确定的距离,即停止将触敏显示器的一部分作为触控板来操作,这确保仅在用户需要触控板模式时才调用触控板模式。如果用户使第二延长接触移动非常短的距离(或者根本未移动),那么这指示用户已将光标放置在期望位置并且不再需要使用触控板模式(或者当接触根本未移动时,这指示用户意外地调用了触控板模式)。通过确保仅在用户需要触控板模式时才调用触控板模式,设备的可操作性得到了增强并且该设备上的人机界面更有效地操作(例如,通过确保为用户呈现其需要的界面控件以及避免使用户在试图寻找其需要的界面控件上浪费时间)。
(A5)在根据A3所述的方法的一些实施方案中,确定抬离前第二延长接触在触敏显示器上的移动不满足移动参数包括确定抬离前第二延长接触在触敏显示器上移动的速度小于预先确定的速度。
一旦确定抬离前第二延长接触在触敏显示器上移动的速度小于预先确定的速度,即停止将触敏显示器的一部分作为触控板来操作,这确保仅在用户需要触控板模式时才调用触控板模式。如果用户以缓慢速度移动第二延长接触,那么这指示用户已将光标放置在期望位置并且不再需要使用触控板模式。通过确保仅在用户需要触控板模式时才调用触控板模式,设备的可操作性得到了增强并且该设备上的人机界面更有效地操作(例如,通过确保为用户呈现其需要的界面控件以及避免使用户在试图寻找其需要的界面控件上浪费时间)。
(A6)在根据A2所述的方法的一些实施方案中,该方法包括:确定抬离前第二延长接触在触敏显示器上的移动满足移动参数,并且作为响应,继续将触敏显示器的一部分作为触控板来操作以保持至少预先确定的时间量。
一旦确定第二延长接触满足移动参数,即继续将触敏显示器的一部分作为触控板来操作,这确保只要用户需要触控板模式即调用触控板模式。如果用户在向下的方向上或者以更快的速度移动第二延长接触,那么这指示用户完成第二延长接触的抬离是为了允许用户重新定位其手指,以便继续移动光标(例如,如果用户在向下的方向上移动,则其可能耗尽空间并且将需要抬离以重新定位其手指,从而继续移动光标)。通过确保只要用户需要触控板模式即调用触控板模式且不需要中断用户对光标的移动,设备的可操作性得到了增强并且该设备上的人机界面更有效地操作(例如,通过确保为用户呈现其需要的界面控件以及避免使用户在试图寻找其需要的界面控件上浪费时间)。
(A7)在根据A1至A6中任一项所述的方法的一些实施方案中,该方法包括:在检测到第二延长接触从触敏显示器的抬离之后,继续将触敏显示器的一部分作为触控板来操作以保持至少预先确定的时间量(例如,0.5秒)。
(A8)在根据A7所述的方法的一些实施方案中,在第二延长接触已与触敏显示器保持接触至少第二预先确定的时间量之后,调用触控板;并且第二预先确定的时间量小于预先确定的时间量。
(A9)在根据A7至A8中任一项所述的方法的一些实施方案中,该方法包括:根据确定在检测到第二延长接触的抬离之后的预先确定的时间量内,在触敏显示器的一部分的上方未检测到输入,停止将触敏显示器的一部分作为触控板来操作。
(A10)在根据A6或A7中任一项所述的方法的一些实施方案中,该方法包括:在将触敏显示器的一部分作为触控板来操作时,检测触敏显示器上的双击输入,在检测到第二延长接触的抬离之后的一定时间量内检测到双击输入;以及,响应于检测到双击输入,选择显示在触敏显示器上的对象。
允许用户执行双击输入来选择对象,这确保在触控板模式中时,用户能够选择对象(例如,文本、图像、多个字词或两者的组合)。通过确保触控板模式允许选择对象,设备的可操作性得到了增强,然后创建了与设备的持续交互。
(A11)在根据A10所述的方法的一些实施方案中,该方法包括:检测双击输入之后的拖动手势,并且作为响应,随拖动手势移动来选择更多对象。
允许用户在双击输入后执行拖动手势来选择更多(或更少)对象,这确保在触控板模式中时,用户能够仅选择对象中其想要选择的那些部分(例如,文本、图像或两者组合的一部分)。通过确保触控板模式允许细粒度地选择对象,设备的可操作性得到了增强,然后创建了与设备的持续交互。
(A12)在根据A1至A11中任一项所述的方法的一些实施方案中,其他键的任何相应显示表示上方的延长接触(或瞬时接触)使对应的扩展键盘功能激活,并且不会使电子设备将触敏显示器的任何部分作为触控板来操作。
(A13)在根据A12所述的方法的一些实施方案中,虚拟键盘显示在触敏显示器的区域中,并且其他键的每个显示表示包括相应的显示符号,并且将触敏显示器的至少一部分作为触控板来操作包括(i)将该区域作为触控板的一部分来操作,以及(ii)停止显示虚拟键盘的显示符号中的至少一些显示符号。
将显示器中用于虚拟键盘的相同区域作为触控板来操作,这允许用户立即开始使用触控板,而不必在调用触控板之后重新安置/重新定位其手指,相反,用户简单地开始根据需要移动其手指,以移动光标和/或选择对象(例如,使用上文所讨论的双击手势和双击并拖动手势)。另外,停止显示虚拟键盘的显示符号中的至少一些为用户提供已调用触控板模式的清楚视觉指示。通过提供这些特征,设备的可操作性得到了增强,然后创建了与设备的持续交互(例如,用户不需要浪费重新定位手指的时间并且将不会对何时调用触控板产生混淆,从而允许与设备的持续交互)。
(A14)在根据A1至A13中任一项所述的方法的一些实施方案中,该方法包括:检测虚拟键盘的一部分的上方的第三延长接触,该虚拟键盘的一部分在空格键的显示表示的下方,其中虚拟键盘的该部分不包括任何其他键;以及根据确定第三延长接触在虚拟键盘的一部分的上方,将第三延长接触解释为模式切换输入,该模式切换输入使电子设备将触敏显示器的至少一部分作为触控板来操作。
(A15)在根据A1至A14中任一项所述的方法的一些实施方案中,在作为触控板来操作时,触敏显示器上至少该部分上方的任何输入控制在触敏显示器的另一部分中显示的光标的移动。
(A16)在根据A1至A15中任一项所述的方法的一些实施方案中,虚拟键盘的其他键中的至少一些键分别与对应的键盘功能相关联并且与对应的扩展键盘功能相关联,所述对应的键盘功能响应于键上方的瞬时接触而激活,所述对应的扩展键盘响应于键上方的延长接触而激活。
(A17)在根据A1至A16中任一项所述的方法的一些实施方案中,第一延长接触和第二延长接触持续至少延长接触检测时间阈值。
(A18)在根据A1至A17中任一项所述的方法的一些实施方案中,与将触敏显示器的一部分的操作调用为触控板相结合来提供触觉反馈。
(A19)在根据A1至A18中任一项所述的方法的一些实施方案中,显示的虚拟键盘不包括功能(fn)键。
(A20)一种存储可执行指令的非暂态计算机可读存储介质,该可执行指令在由具有触敏显示器的电子设备的一个或多个处理器执行时使电子设备执行根据权利要求A1至A19中任一项所述的方法,其中电子设备未与任何力传感器耦接。
(A21)一种电子设备,包括一个或多个处理器;触敏显示器;和存储器,该存储器存储一个或多个程序,该一个或多个程序被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行根据A1至A19中任一项所述的方法的指令,并且电子设备未与任何力传感器耦接。
(A22)一种电子设备,该电子设备具有触敏次级显示器,其中电子设备未与任何力传感器耦接并且电子设备包括:用于执行根据A1至A19中任一项所述方法的装置。
(A23)一种信息处理设备,该信息处理设备在电子设备中使用,所述电子设备包括触敏次级显示器,其中电子设备未与任何力传感器耦接,该信息处理设备包括:用于执行根据A1至A19中任一项所述方法的装置。
(A24)一种用于电子设备的图形用户界面,该电子设备具有一个或多个处理器、存储器以及触敏次级显示器,其中电子设备未与任何力传感器耦接,并且一个或多个处理器执行存储在存储器中的一个或多个程序,该图形用户界面包括根据A1至A19所述的方法中的任一项所显示的用户界面。
(A25)一种电子设备,该电子设备包括触敏显示器,该触敏显示器与多个触摸传感器耦接,其中触敏显示器未与任何力传感器耦接,电子设备还包括存储器以及一个或多个处理器,该一个或多个处理器与多个触摸传感器和触敏显示器耦接,存储器包括可执行指令,该可执行指令在由一个或多个处理器执行时使电子设备执行以下各项:在触敏显示器上显示虚拟键盘,该虚拟键盘包括空格和其他键的显示表示;检测触敏显示器处的延长接触;根据确定延长接触在其他键的任何相应显示表示的上方,将延长接触解释为键盘输入并且激活对应的键盘功能;以及根据确定延长接触在空格键的相应显示表示的上方,将延长接触解释为模式切换输入,该模式切换输入使电子设备将触敏显示器的至少一部分作为触控板来操作。
(A26)在根据A25所述的电子设备的一些实施方案中,可执行指令在由一个或多个处理器执行时还使电子设备执行根据A1至A19中任一项所述的方法。
在另一方面,还提供了用于实现单指滚动/尖端部到纹路部手势的方法、设备以及其他部件。
(B1)根据一些实施方案,在包括与多个触摸传感器耦接的触敏显示器的电子设备处执行一种方法,并且触敏显示器未与任何力传感器耦接。该方法包括:在触敏显示器上显示虚拟键盘;检测来自多个触摸传感器中的至少一个触摸传感器的输出,输出指示与触敏显示器在虚拟键盘的至少一部分的上方的接触,其中接触包括触敏显示器上具有质心的区域;检测来自多个触摸传感器中的至少一个的输出的变化,输出的变化指示接触的区域已扩大并且质心已移动;以及根据检测到的变化,将触敏显示器的至少一部分作为触控板来操作,并且停止操作虚拟键盘。
允许用户在虚拟键盘上方滚动单指,然后将电子设备作为触控板来操作,这为用户提供了仅使用单指来快速地从键盘输入模式切换到触控板模式的便利方式;并且通过监测该区域的扩大以及质心的移动来检测该滚动,这确保手势被准确地检测到并且不与其他类型的手势混淆。在不包括力传感器的电子设备处提供这种交互,使这些设备的可操作性得到了增强,并且使这些设备上的人机界面更加有效(例如,通过允许用户使用简单手势来轻易地切换到触控板模式,而不必将时间浪费在不使用触控板模式而尝试放置光标来激活触控板模式上,或者不必将时间浪费在使用用户输入或菜单选项的复杂序列来激活触控板模式上)。
(B2)在根据B1所述的方法的一些实施方案中,至少部分地基于由多个触摸传感器中的至少一个触摸传感器所寄存的电容信号来检测输出以及输出的变化。
至少部分地基于电容信号来检测输出以及输出的变化有助于确保手势被准确地检测到且不与其他类型的手势混淆,并且使不包括力传感器的设备能够准确地检测到新的手势类型,诸如本文所讨论的滚动/尖端部到纹路部手势。在不包括力传感器的电子设备处提供这种准确检测使这些设备的可操作性得到了增强,并且使这些设备上的人机界面更加有效(例如,通过允许用户使用简单手势来轻易地切换到触控板模式,而不必将时间浪费在不使用触控板模式而尝试放置光标来激活触控板模式上,或者不必将时间浪费在使用用户输入或菜单选项的复杂序列来激活触控板模式上)。
(B3)在根据B1至B2中任一项所述的方法的一些实施方案中,基于以下各项中的一者或多者来检测输出的变化:(i)质心的移动速度;(ii)区域的尺寸变化;(iii)多个触摸传感器中的至少一个触摸传感器的饱和度水平;以及(iv)用户进行相对于触敏显示器的接触的手指的计算角度。
(B4)在根据B1至B2中任一项所述的方法的一些实施方案中,基于质心的移动速度来进一步检测输出的变化。
(B5)在根据B1至B2或者B4中任一项所述的方法的一些实施方案中,基于区域的尺寸变化来进一步检测输出的变化。
(B6)在根据B1至B2或者B4至B5中任一项所述的方法的一些实施方案中,基于多个触摸传感器中的至少一个触摸传感器的饱和度水平来进一步检测输出的变化。
(B7)在根据B1至B2或者B4至B6中任一项所述的方法的一些实施方案中,基于用户进行相对于触敏显示器的接触的手指的计算角度来进一步检测输出的变化。
(B8)在根据B1至B7中任一项所述的方法的一些实施方案中,方法包括:与将触敏显示器的一部分的操作调用为触控板相结合来由电子设备提供触觉反馈。
通过监测上文(在B3至B8中)所讨论的其他数据片来检测输出以及输出的变化有助于确保手势被准确地检测到且不与其他类型的手势混淆,并且使不包括力传感器的设备能够准确地检测到新的手势类型,诸如本文所讨论的滚动/尖端部到纹路部手势。添加对这些其他数据片的监测有助于改善在不包括力传感器的电子设备处检测该新手势的准确性,从而增强这些设备的可操作性,并且使这些设备上的人机界面更加有效(例如,通过确保手势被准确地检测到,用户将不必浪费时间来逆转不期望功能的激活)。
(B9)在根据B1至B8中任一项所述的方法的一些实施方案中,文本在触敏显示器上邻近显示的虚拟键盘的区域中显示,光标在文本内的位置处显示,并且该方法还包括:在继续将触敏显示器的一部分作为触控板来操作的同时:检测来自多个触摸传感器中的至少一个触摸传感器的输出的另外变化,输出的变化指示接触的区域已减小并且质心已移动;以及响应于检测到输出的另外变化,将光标的显示保持在文本内的位置处。
确保光标不会随用户在触敏显示器上方反向滚动其手指而移动(例如,保持其位置),这有助于确保基于用户的意图来准确的放置光标。当用户仅反向滚动其手指时,用户会在其开始移动光标之前这样做。因此,通过在反向滚动期间将光标保持在合适位置中,设备的可操作性得到了增强,并且人机界面更有效地操作(例如,通过确保用户不需要浪费时间来逆转非预期的光标移动)。
(B10)在根据B9所述的方法的一些实施方案中,在检测到另外变化之后以及在继续将触敏显示器的一部分作为触控板来操作时,接触在触敏显示器上的移动使光标移动到文本内的不同位置。
(B11)在根据B9所述的方法的一些实施方案中,该方法包括:在继续将触敏显示器的一部分作为触控板来操作的同时:检测来自多个触摸传感器中的至少一个触摸传感器的输出的又一变化,该又一变化指示接触的区域已扩大并且质心已移动;以及响应于检测到该又一变化,选择文本的至少一部分。
(B12)在根据B11所述的方法的一些实施方案中,该方法包括:检测接触从触敏显示器的抬离,并且作为响应,停止将触敏显示器的一部分作为触控板来操作。
(B13)一种存储可执行指令的非暂态计算机可读存储介质,该可执行指令在由具有触敏显示器的电子设备的一个或多个处理器执行时使电子设备执行根据权利要求B1至B12中任一项所述的方法,其中电子设备未与任何力传感器耦接。
(B14)一种电子设备,包括一个或多个处理器;触敏显示器;和存储器,该存储器存储一个或多个程序,该一个或多个程序被配置为由一个或多个处理器执行,该一个或多个程序包括用于执行根据B1至B12中任一项所述的方法的指令,并且电子设备未与任何力传感器耦接。
(B15)一种具有触敏次级显示器的电子设备,其中电子设备未与任何力传感器耦接,并且电子设备包括:用于执行根据B1至B12中任一项所述方法的装置。
(B16)一种在包括触敏次级显示器的电子设备中使用的信息处理设备,其中电子设备未与任何力传感器耦接,信息处理设备包括:用于执行根据B1至B12中任一项所述方法的装置。
(B17)一种用于电子设备的图形用户界面,该电子设备具有一个或多个处理器、存储器以及触敏次级显示器,其中电子设备未与任何力传感器耦接,并且一个或多个处理器执行存储在存储器中的一个或多个程序,该图形用户界面包括根据B1至B12所述的方法中的任一项所显示的用户界面。
需注意,上述各种实施方案可与本文所述任何其他实施方案相结合。本说明书中描述的特征和优点并不全面,具体来说,根据附图、说明书和权利要求书,许多另外的特征和优点对本领域的普通技术人员将是显而易见的。此外,应当指出,出于可读性和指导性目的,在原则上选择了本说明书中使用的语言,并且可以不这样选择以描绘或界定本发明的主题。
附图说明
为了更好地理解各种所述实施方案,应结合以下附图参考下面的具体实施方式,其中类似的附图标号在所有附图中指示对应的部分。
图1A是根据一些实施方案的带有触敏显示器的计算设备的高级框图。
图1B是根据一些实施方案的用于事件处理的示例性部件的框图。
图2A是根据一些实施方案的具有触摸屏(在本文中也可互换地称为“触敏显示器”)的便携式多功能设备的示意图。
图2B示出了根据一些实施方案的用于具有与显示器分开的触敏表面的多功能设备的示例性用户界面。
图3是根据一些实施方案的用于示出应用程序菜单的用户界面的触摸屏的示意图。
图4是根据一些实施方案的流程图,其示出使用虚拟键盘上方的延长接触来激活触控板模式的方法。
图5A-1至图5K-6示出了根据一些实施方案的使用虚拟键盘上方(例如,在空格键的显示表示上方)的延长接触来激活触控板模式的示例性用户界面。
图6A至图6F是根据一些实施方案的流程图,其示出使用虚拟键盘上方的延长接触来激活触控板模式的方法。
图7是根据一些实施方案的流程图,其示出使用单指滚动手势来激活触控板模式的方法。
图8A-1至图8F示出了根据一些实施方案的使用单指滚动手势来激活触摸板模式的示例性用户界面。
图9A至图9D是根据一些实施方案的流程图,其示出使用单指滚动手势来激活触摸板模式的方法。
具体实施方式
图1A至图1B、图2A至图2B以及图3示出了可在其上实现本文所述的方法和技术的示例性设备和系统。
图5A-1至图5K-6是根据一些实施方案的显示器的示意图,其用于示出使用虚拟键盘上方的延长接触来激活电子设备上的触控板的示例性用户界面,该电子设备具有触敏显示器且不具有力传感器。图4以及图6A至图6F是根据一些实施方案的使用虚拟键盘上方的延长接触来激活电子设备上的触控板的方法的流程图,该电子设备具有触敏显示器且不具有力传感器。图5A-1至图5K-6中的用户界面用于示出图4以及图6A至图6F中的方法和/或过程。
图8A-1至图8F示出了根据一些实施方案的使用单指滚动手势来激活触摸板模式的示例性用户界面。图7以及图9A至图9D是根据一些实施方案的使用单指滚动手势来激活触摸板模式的方法的流程图。图8A-1至图8F中的用户界面用于示出图7以及图9A至图9D中的方法和/或过程。
示例性设备和系统
现在将详细地参考实施方案,这些实施方案的示例在附图中示出。下面的详细描述中示出许多具体细节,以便提供对各种所描述的实施方案的充分理解。但是,对本领域的普通技术人员将显而易见的是,各种所描述的实施方案可以在没有这些具体细节的情况下被实践。在其他情况下,没有详细地描述众所周知的方法、过程、部件、电路和网络,从而不会不必要地使实施方案的各个方面晦涩难懂。
还将理解的是,虽然在一些情况下,术语“第一”、“第二”等在本文中用于描述各种元件,但是这些元件不应受到这些术语限制。这些术语只是用于将一个元件与另一元件区分开。例如,第一接触可被命名为第二接触,并且类似地,第二接触可被命名为第一接触,而不脱离各种所描述的实施方案的范围。第一接触和第二接触两者都是接触,但是它们不是同一接触。
在本文中对各种所述实施方案的描述中所使用的术语只是为了描述特定实施方案的目的,而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样,单数形式“一个”(“a”,“an”)和“该”旨在也包括复数形式,除非上下文另外明确地指示。还将理解的是,本文中所使用的术语“和/或”是指并且涵盖相关联地列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”和/或“包含”在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
如本文中所使用,根据上下文,术语“如果”任选地被解释为意思是“当……时”或“在……时”或“响应于确定”或“响应于检测”。类似地,根据上下文,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为意思是“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文中的公开内容可互换地涉及检测在触敏显示器的特定用户界面元素或特定部分上、特定用户界面元素或特定部分处、特定用户界面元素或特定部分的上方、特定用户界面元素或特定部分的顶部、或基本上在该特定用户界面元素或特定部分内的触摸输入。如本文所使用,在特定用户界面元素“处”检测到的触摸输入还能够在相同用户界面元素“上”、“上方”、“顶部”或“基本上在这个相同用户界面元素内”检测到。在一些实施方案中并且如下更详细地描述,用于检测触摸输入的期望敏感度水平是由电子设备的用户进行配置的(例如,用户可以决定(并且配置要操作的电子设备)触摸输入应当仅在触摸输入完全在用户界面元素内时检测到)。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关过程的实施方案。在一些实施方案中,该设备为还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自AppleInc(Cupertino,California)的IPOD设备。任选地使用其他便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触控板)的膝上型电脑或平板电脑。还应当理解的是,在一些实施方案中,该设备并非便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触控板)的台式计算机。
在下面的讨论中,描述了一种电子设备,该电子设备包括显示器和触敏表面。然而,应当理解,该电子设备任选地包括一个或多个其他物理用户接口设备,诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用程序,诸如以下应用程序中的一个或多个应用程序:绘图应用程序、呈现应用程序、文字处理应用程序、网站创建应用程序、盘编辑应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、健康/健身应用程序、照片管理应用程序、数字相机应用程序、数字摄像机应用程序、web浏览应用程序、数字音乐播放器应用程序、和/或数字视频播放器应用程序。
在设备上执行的各种应用程序任选地使用至少一个通用的物理用户界面设备,诸如触敏表面。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地对于不同应用程序被调整和/或变化,和/或在相应应用程序内被调整和/或变化。这样,设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在关注具有触敏显示器的便携式电子设备的实施方案。图1A是示出根据一些实施方案的具有触敏显示器112的便携式多功能设备100(在本文中也可互换地称为电子设备100或设备100)的框图。触敏显示器112有时为了方便被叫做“触摸屏”,并且有时被称为或被叫做触敏显示器系统。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、控制器120、一个或多个处理单元(CPU)122、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入或控制设备116和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括一个或多个触觉输出发生器167,该一个或多个触觉输出发生器1用于在设备100上生成触觉输出(例如,在触敏表面,诸如设备100的触敏显示器系统112或设备100的触摸板上生成触觉输出)。这些部件任选地通过一个或多个通信总线或信号线103进行通信。
如本说明书和权利要求书中所使用的,术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户手部的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解释为触感,该触感对应于设备或设备的部件的物理特征的所感知的变化。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如,即使在触敏表面的光滑度无变化时,触敏表面的移动也会任选地由用户解释或感测为触敏表面的“粗糙度”。虽然用户对触摸的此类解释将受到用户的个体化感官知觉的限制,但是对触摸的许多感官知觉是大多数用户共有的。因此,当触觉输出被描述为对应于用户的特定感官知觉(例如,“按下点击”、“松开点击”、“粗糙度”)时,除非另外陈述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移将会生成典型(或普通)用户的所述感官知觉。
应当理解,设备100仅仅是便携式多功能设备的一个示例,并且设备100任选地具有比所示出的部件更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件以硬件、软件或软件和硬件的组合来实现,包括一个或多个信号处理和/或专用集成电路。
存储器102任选地包括高速随机存取存储器(例如,DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备),并且任选地还包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备或其他非易失性固态存储器设备。存储器102任选地包括一个或多个存储设备,该一个或多个存储设备远离一个或多个处理器122定位。设备100的其他部件,诸如CPU 122和外围设备接口118,对存储器102的访问任选地由控制器120来控制。
外围设备接口118可用于将设备的输入外围设备和输出外围设备耦接到CPU 122和存储器102。一个或多个处理器122运行或执行存储器102中所存储的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。
在一些实施方案中,外围设备接口118、CPU 122、和控制器120任选地被实现在单个芯片诸如芯片104上。在一些其他实施方案中,它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被称为电磁信号的RF信号。Rf电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络和其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信来与网络和其他设备进行通信,这些网络为诸如互联网(也称为万维网(WWW))、内联网和/或无线网络(诸如,蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。无线通信任选地使用多种通信标准、协议和技术中的任何一种,包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、蓝牙低功耗、无线保真(Wi-Fi)(例如,IEEE 802.11a、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转换为电信号,并且将电信号传输到扬声器111。扬声器111将电信号转换为人类可听到的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据,并且将音频数据传输到外围设备接口118以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中,音频电路110还包括耳麦插孔。耳麦插孔提供音频电路110与可移除的音频输入/输出外围设备之间的接口,该可移除的音频输入/输出外围设备诸如仅输出的耳机或者具有输出(例如,单耳耳机或双耳耳机)和输入(例如,麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触摸屏112和其他输入控制设备116连接到外围设备接口118。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、触觉反馈控制器161以及用于其他输入或控制设备的一个或多个输入控制器160。所述一个或多个输入控制器160从其他输入或控制设备116接收电信号/将电信号发送到所述其他输入或控制设备。其他输入控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击式转盘等。在一些另选实施方案中,一个或多个输入控制器160任选地耦接至以下各项中的任一者(或不耦接至以下各项中的任一者):键盘、红外线端口、USB端口以及指针设备诸如鼠标。该一个或多个按钮可任选地包括用于扬声器111和/或麦克风113的音量控制的增大/减小按钮。一个或多个按钮任选地包括下压按钮。
触敏显示器112提供设备和用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或将电信号发送到该触摸屏。触摸屏112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频和它们的任何组合(统称为“图形”)。在一些实施方案中,一些视觉输出或全部的视觉输出对应于用户界面对象。
触摸屏112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断),并且将所检测到的接触转换为与被显示在触摸屏112上的用户界面对象(例如,一个或多个软键、图标、网页或图像)的交互。在一个示例性实施方案中,触摸屏112和用户之间的接触点对应于用户手指下方的区域。
触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术、或OLED(有机发光二极管)技术,但是在其他实施方案中使用其他显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触摸屏112接触的一个或多个点的其他元件来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在一个示例性实施方案中,使用投射式互电容感测技术,诸如见于Apple Inc.(Cupertino,California)的IPOD中的技术。
触摸屏112任选地具有超过400dpi的视频分辨率。在一些实施方案中,触摸屏112具有至少600dpi的视频分辨率。在其他实施方案中,触摸屏112具有至少1000dpi的视频分辨率。用户任选地使用任何合适的物体或指头诸如触笔或手指等等来与触摸屏112接触。在一些实施方案中,用户界面被设计用于主要与基于手指的接触和手势工作。在一些实施方案中,设备将基于手指的输入转化为精确的指针/光标位置或命令,以用于执行用户所期望的动作。
在一些实施方案中,除了触摸屏之外,设备100任选地包括用于激活或去激活特定功能的触摸板(未示出)。在一些实施方案中,触摸板是设备的触敏区域,与触摸屏不同,该触敏区域不显示视觉输出。触摸板任选地是与触摸屏112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括电力系统162,该电力系统用于为各种部件供电。电力系统162任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电源状态指示器(例如,发光二极管(LED))、和与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出了光学传感器,该光学传感器耦接到I/O子系统106中的光学传感器控制器158。光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜而投射的光,并且将光转换为表示图像的数据。结合成像模块143(也叫做相机模块),光学传感器164任选地捕获静态图像或视频。在一些实施方案中,光学传感器位于设备100的后部上,与设备前部上的触摸屏112相背对,使得触敏显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中,另一光学传感器位于设备的前部上,使得用户在触敏显示器上观看其他视频会议参与者的同时,任选地获得该用户的图像以用于视频会议。
设备100任选地还包括一个或多个接近传感器166。图1A示出了接近传感器166,该接近传感器耦接到外围设备接口118。另选地,接近传感器166耦接到I/O子系统106中的输入控制器160。在一些实施方案中,当多功能设备被置于用户的耳朵附近时(例如,当用户正在进行电话呼叫时),接近传感器关闭并且禁用触摸屏112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了触觉输出发生器,该触觉输出发生器耦接到I/O子系统106中的触觉反馈控制器161。触觉输出发生器167任选地包括一个或多个电声设备,诸如扬声器或其他音频部件;和/或将能量转换成线性运动的机电设备,诸如马达、螺线管、电活性聚合器、压电致动器、静电致动器或其他触觉输出生成部件(例如,将电信号转换成设备上的触觉输出的部件)。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,触敏显示器系统112)并置排列或邻近,并且任选地通过竖直地(例如,向设备100的表面内/外)或侧向地(例如,在与设备100的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。在一些实施方案中,至少一个触觉输出发生器传感器位于设备100的与位于设备100的前部上的触敏显示器112相背对的后部上。
设备100任选地还包括一个或多个加速度计168。图1A示出了加速度计168,该加速度计耦接到外围设备接口118。另选地,加速度计168任选地耦接到I/O子系统106中的输入控制器160。在一些实施方案中,基于对从该一个或多个加速度计所接收的数据的分析来在触敏显示器上以纵向视图或横向视图显示信息。设备100任选地除了加速度计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系统)接收器(未示出),以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息。
在一些实施方案中,存储于存储器102中的软件部件包括操作系统126、主动模块163(任选地包括键盘模块163-1、触控板模块163-2、输入切换模块163-3(例如,键盘到触控板或触控板到键盘)、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135以及应用(或指令集)136中的一种或多种)。此外,在一些实施方案中,存储器102存储设备/全局内部状态157,如图1A中所示。设备/全局内部状态157包括以下中的一者或多者:活动应用状态,其指示哪些应用(如果有的话)当前是活动的;显示状态,其指示什么应用程序、视图或其他信息占据触敏显示器112的各个区域;传感器状态,包括从设备的各个传感器和输入控制设备116获得的信息;以及关于设备的位置和/或姿态(例如,设备的取向)的位置信息。
操作系统126(例如,Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电源管理等)的各种软件组件和/或驱动器,并且有利于各种硬件和软件组件之间的通信。
通信模块128有利于通过一个或多个外部端口124来与其他设备进行通信,并且还包括各种软件部件,该各种软件部件用于处理由RF电路108和/或外部端口124所接收的数据。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备或间接地经由网络(例如,互联网、无线LAN等)耦接。在一些实施方案中,外部端口是与来自APPLE Inc.的IPOD设备的一些实施方案上所使用的30针连接器相同、或类似的和/或与其兼容的多针(例如,30针)连接器。在其他实施方案中,外部端口是与来自APPLE Inc.的LIGHTNING连接器中所使用的8针连接器相同的、或类似的和/或与其兼容的多针(例如,8针)连接器。
接触/运动模块130任选地检测与触摸屏112(结合显示控制器156)和其他触敏设备(例如,触摸板或物理点击式转盘)的接触。接触/运动模块130包括各种软件部件,以用于执行与接触的检测相关的各种操作,诸如确定是否已发生接触(例如,检测手指按下事件)、确定接触是否延长(例如,检测手指按下事件的时间)、确定是否存在接触的移动并在触敏表面上跟踪该移动(例如,检测一个或多个手指拖动事件)以及确定接触是否已停止(例如,检测手指抬起事件、接触中断或手指抬离事件)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变),所述接触点的移动由一系列接触数据表示。这些操作任选地被应用于单个接触(例如,一个手指接触)或多个同时接触(例如,“多触摸”/多个手指接触)。在一些方案中,接触/运动模块130和显示控制器156检测触摸板上的接触。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触模式(例如,所检测到的接触的不同运动、计时和/或强度)。因此,任选地通过检测特定接触模式来检测手势。例如,检测单指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。作为另一个示例,在触敏表面上检测手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且在一些实施方案中,还随后检测手指抬起(抬离)事件。在又一个示例中,在触敏表面上检测手指滚动手势包括检测指尖按下事件,然后检测手指与触敏表面之间的接触区域的持续增大,然后进一步检测与触敏表面的指纹接触。类似地,通过检测触笔的特定接触图案来任选地检测触笔的轻击、轻扫、拖动、滚动以及其他手势。
图形模块132包括用于在触摸屏112或其他显示器上呈现和显示图形的各种已知的软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉特征)的部件。如本文所用,术语“图形”包括可以被显示给用户的任何对象,非限制性地包括文本、网页、图标(诸如包括软按键的用户界面对象)、数字图像、视频、动画等等。
在一些实施方案中,图形模块132存储表示待使用的图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收用于指定待显示的图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其他图形属性数据,并且然后生成屏幕图像数据,以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件部件,该指令由触觉输出发生器167使用,以响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供软键盘,该软键盘用于在各种应用程序(例如,联系人模块137、电子邮件客户端模块140、IM模块141、浏览器模块147和需要文本输入的任何其他应用程序)中输入文本。
GPS模块135确定设备的位置并提供这种信息以在各种应用程序中使用(例如,提供至用于基于位置的拨号的电话138;提供至相机143作为图片/视频元数据;以及提供至提供基于位置的服务诸如天气桌面小程序、当地黄页桌面小程序和地图/导航桌面小程序的应用程序)。
应用程序(“应用”)136任选地包括以下模块(或指令集)或者其子集或超集:
·联系人模块137(有时称为通讯录或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健康模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·浏览器模块147;
·日历模块148;
·桌面小程序模块149,其任选地包括以下各项中的一种或多种:天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5以及由用户获取或创建的其他桌面小程序(149-6);
·搜索模块151;
·视频和音乐播放器模块152,其任选地由视频播放器模块和音乐播放器模块构成;
·记事本模块153;
·地图模块154;和/或
·在线视频模块155。
任选地存储在存储器102中的其他应用程序136的示例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、展示应用程序、网站创建应用程序、盘编辑应用程序、电子表格应用程序、支持JAVA的应用程序、加密、数字权益管理、语音识别、用于制作用户创建的桌面小程序的桌面小程序创建器模块149-6,以及语音复制。
结合触摸屏112、显示控制器156、接触模块130、图形模块132以及文本输入模块134,联系人模块137任选地用于管理通讯录或联系人列表(例如,存储在存储器102或存储器370中的联系人模块137中),包括:将一个或多个姓名添加到通讯录;从地址簿删除姓名;将电话号码、电子邮件地址、物理地址或其他信息与姓名关联;将图像与姓名关联;对姓名进行归类和分类;提供电话号码或电子邮件地址来发起和/或促进通过电话模块138、视频会议模块139、电子邮件客户端模块140或IM模块141的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,电话模块138被任选地用于输入与电话号码对应的字符序列、访问地址簿137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行对话以及当对话完成时断开或挂断。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包括根据用户指令发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,即时消息模块141包括用于输入与即时消息对应的字符序列、修改先前输入的字符、发送相应即时消息(例如,使用针对基于电话的即时消息的短消息服务(SMS)或多媒体消息服务(MMS)协议或者使用针对基于互联网的即时消息的XMPP、SIMPLE、或IMPS)、接收即时消息以及查看所接收的即时消息的可执行指令。在一些实施方案中,所传输和/或接收的即时消息任选地包括图形、照片、音频文件、视频文件和/或MMS和/或增强消息服务(EMS)中所支持的其他附接件。如本文所用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS传输的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE、或IMPS传输的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154、以及视频和音乐播放器模块146,健康模块142包括用于以下操作的可执行指令:创建健身(例如具有时间、距离、和/或卡路里燃烧目标);与健身传感器(运动设备,诸如手表或计步器)进行通信;接收健身传感器数据;校准用于监测健身的传感器;选择健身音乐并进行播放;以及显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132、和图像管理模块144,相机模块143包括用于以下操作的可执行指令:捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特性、或从存储器102删除静态图像或视频。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134和相机模块143,图像管理模块144包括用于以下操作的可执行指令:排列、修改(例如,编辑)、或以其他方式操纵、加标签、删除、呈现(例如,在数字幻灯片或相册中)、以及存储静态图像和/或视频图像。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,浏览器模块147包括根据用户指令浏览互联网(包括搜索、链接到、接收和显示网页或其部分以及链接到网页的附件和其他文件)的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括用于根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序模块149是任选地由用户下载和使用的微型应用程序(例如,天气桌面小程序149-1、股票桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和字典桌面小程序149-5)或由用户创建的微型应用程序(例如,用户创建的桌面小程序149-6)。在一些实施方案中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中,桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序创建者模块(未示出)任选地被用户用来创建桌面小程序(例如,将网页的用户指定部分转到桌面小程序中)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包括用于根据用户指令来搜索存储器102中的匹配一个或多个搜索条件(例如,一个或多个用户指定的搜索词)的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。在一些实施方案中,搜索模块151还包括用于显示搜索入口部分和预测部分的可执行指令。在一些实施方案中,在搜索入口部分处接收到任何用户输入之前,搜索模块151结合主动模块163还用建议或预测的人员、应用程序内的动作、应用程序、附近地点和/或新闻文章的示能表示填充预测部分。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令,以及显示、展示或以其他方式回放视频(例如,在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施方案中,设备100任选地包括MP3播放器,诸如来自APPLE Inc.的IPOD的功能。
结合触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134,记事本模块153包括根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路系统108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135以及浏览器模块147,地图模块154任选地用于根据用户指令接收、显示、修改和存储地图以及与地图相关联的数据(例如,驾车路线;特定位置处或附近的商店和其他兴趣点的数据;和其他基于位置的数据)的可执行指令。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括指令,该指令允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、回放(例如在触摸屏上或在经由外部端口124所连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件,以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施方案中,使用即时消息模块141而不是电子邮件客户端模块140来发送特定在线视频的链接。
如图1A所示,便携式多功能设备100还包括用于执行某些键盘功能和触控板功能并且允许在键盘功能与触控板功能之间切换的其他模块163。其他模块163任选地包括以下模块(或指令集)或者其子集或超集:
·键盘模块163-1,其用于在显示的虚拟键盘处接收用户输入,以及响应于该用户输入确定致动哪种键盘功能(可为键盘功能或扩展键盘功能,这取决于相应输入与触敏显示器接触的时间量);
·触控板模块163-2,其用于在触敏显示器的至少一部分作为触控板来操作时接收用户输入;和
·输入切换模块163-3,其用于检测实现触控板与键盘模式之间的切换的用户输入(例如,下文所讨论的延长接触或下文所讨论的尖端部到纹路部/滚动手势,其中每一个均可实现从键盘到触控板模式的切换)。
上述所识别的模块和应用程序中的每个模块和应用程序对应于用于执行上述一种或多种功能以及在本专利申请中所描述的方法(例如,本文中所描述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(例如,指令集)不必被实现为独立的软件程序、过程或模块,因此这些模块的各种子集任选地在各种实施方案中得以组合或以其他方式重新布置。在一些实施方案中,存储器102任选地存储上文所确定的模块和数据结构的子集。此外,存储器102任选地存储上文未描述的另外的模块和数据结构。
在一些实施方案中,设备100是该设备上的预定义的一组功能的操作被唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触摸板作为用于操作设备100的主要输入控制设备,任选地减少设备100上的物理输入控制设备(例如,下压按钮、拨盘等等)的数量。
唯一地通过触摸屏和/或触摸板来执行的预定义的一组功能任选地包括在用户界面之间的导航。在一些实施方案中,当用户触摸触摸板时,触摸板将设备100从设备100上显示的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施方案中,使用触摸板来实现“菜单按钮”。在一些其他实施方案中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触摸板。
图1B是示出根据一些实施方案的用于事件处理的示例性部件的框图。在一些实施方案中,存储器102(图1A中)包括事件分类器170(例如在操作系统126中)和选自便携式多功能设备100(图1A)的应用程序136之中的相应应用程序136-1(例如,与应用程序136一起存储在存储器102中的前述应用程序中的任一者)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中,应用程序136-1包括应用程序内部状态192,该应用程序内部状态指示当应用程序是活动的或正在执行时被显示在触敏显示器112上的一个或多个当前应用程序视图。在一些实施方案中,设备/全局内部状态157被事件分类器170用于确定哪个(哪些)应用程序当前是活动的,并且应用程序内部状态192被事件分类器170用于确定要将事件信息递送到的应用程序视图191。
在一些实施方案中,应用程序内部状态192包括附加信息,诸如以下各项中的一种或多种:当应用程序136-1恢复执行时待使用的恢复信息、指示正被应用程序136-1显示的信息或准备好用于被应用程序136-1显示的信息的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列,以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如,触敏显示器112上的用户触摸,作为多点触摸手势的一部分)的信息。外围设备接口118传输其从I/O子系统106或传感器诸如接近传感器166、一个或多个加速度计168和/或麦克风113(通过音频电路110)接收的信息。外围设备接口118从I/O子系统106接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施方案中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在其他实施方案中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值的输入并且/或者接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中,事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已在一个或多个视图内的某个位置处发生的软件过程。视图由用户能够在显示器上看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图,本文中有时也称为应用程序视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如,在其中检测到触摸的最低水平视图任选地被称为命中视图,并且被识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,所述初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时,命中视图确定模块172将命中视图识别为应当对子事件进行处理的分级结构中的最低视图。在大多数情况下,命中视图是发起子事件(例如,形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别,命中视图便通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块173确定仅命中视图应接收特定子事件序列。在其他实施方案中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图均为活跃参与的视图,并因此确定所有活跃参与的视图均应接收特定子事件序列。在其他实施方案中,即使触摸子事件完全被局限到与一个特定视图相关联的区域,分级结构中的较高视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施方案中,事件分配器模块174将事件信息递送到事件识别器,该事件识别器由活动事件识别器确定模块173来确定。在一些实施方案中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器182进行检索。
在一些实施方案中,操作系统126包括事件分类器170。另选地,应用程序136-1包括事件分类器170。在又一个实施方案中,事件分类器170是独立模块,或者是存储在存储器102中的另一个模块(诸如,接触/运动模块130)的一部分。
在一些实施方案中,应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191,其中的每一者都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常,相应的应用程序视图191包括多个事件识别器180。在其他实施方案中,事件识别器180中的一个或多个事件识别器是独立模块的一部分,该独立模块为诸如用户界面工具包(未示出)或应用程序136-1从中继承方法和其他属性的较高级别的对象。在一些实施方案中,相应事件处理程序190包括以下各项中的一者或多者:数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用程序内部状态192。另选地,应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序190。另外,在一些实施方案中,数据更新器176、对象更新器177以及GUI更新器178中的一者或多者包括在相应的应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施方案中,事件识别器180还包括以下二者之中的至少一个子集:元数据183和事件传递指令188(其任选地包括子事件递送指令)。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速率和方向。在一些实施方案中,事件包括设备从一个取向旋转到另一个取向(例如,从纵向取向旋转到横向取向,或反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,并且基于该比较来确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施方案中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其他事件。在一些实施方案中,事件187中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个示例中,事件1(187-1)的定义是对被显示对象的双击。例如,双击包括被显示对象上的预先确定时长的第一次触摸(触摸开始)、预先确定时长的第一次抬起(触摸结束)、被显示对象上的预先确定时长的第二次触摸(触摸开始)以及预先确定时长的第二次抬起(触摸结束)。在另一个示例中,事件2(187-2)的定义是对被显示对象的拖动。例如,拖动包括在被显示对象上的预先确定的时长的触摸(或接触)、该触摸在触敏显示器112上的移动、以及该触摸的抬离(触摸结束)。在一些实施方案中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中,事件定义186包括用于相应用户界面对象的事件的定义。在一些实施方案中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在应用程序视图(其中在触敏显示器112上显示三个用户界面对象)中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试,以确定这三个用户界面对象中的哪个用户界面与触摸(子事件)相关联。如果每个被显示对象均与相应事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定应当激活哪个事件处理程序190。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中,相应事件187的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件序列与事件定义186中的任何事件不匹配时,该相应事件识别器180进入事件不可能、事件失败或事件结束状态,在此之后其忽略基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪和处理持续的基于触摸的手势的子事件。
在一些实施方案中,相应事件识别器180包括元数据183,该元数据具有指示事件递送系统应当如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表。在一些实施方案中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标志和/或列表。在一些实施方案中,元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施方案中,当识别事件的一个或多个特定子事件时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中,相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中,事件识别器180抛出与所识别的事件相关联的标记,并且与该标记相关联的事件处理程序190获取该标记并执行预定义的过程。
在一些实施方案中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件序列相关联的事件处理程序或者递送到活跃参与的视图。与子事件序列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中,数据更新器176创建并更新在应用程序136-1中使用的数据。例如,数据更新器176对联系人模块137中所使用的电话号码进行更新,或者对视频或音乐播放器模块145中所使用的视频文件进行存储。在一些实施方案中,对象更新器177创建并更新在应用程序136-1中使用的对象。例如,对象更新器176创建新的用户界面对象或者更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息并将其发送至图形模块132以用于在触敏显示器上进行显示。
在一些实施方案中,事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对它们的访问权限。在一些实施方案中,数据更新器176、对象更新器177以及GUI更新器178被包括在相应的应用程序136-1或应用程序视图191的单个模块中。在其他实施方案中,它们被包括在两个或更多个软件模块中。
应当理解,关于触敏显示器上的用户触摸的事件处理的上述论述还适用于利用输入设备来操作多功能设备100的其他形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,任选地与单次或多次键盘按下或按住协作的鼠标移动和鼠标按钮按下;触摸板上的接触移动,诸如轻击、拖动、滚动等;触笔输入;设备的移动;口头指令;检测到的眼睛移动;生物特征输入;以及/或它们的任何组合任选地被用作对应于限定待识别的事件的子事件的输入。
图2A是根据一些实施方案的具有触敏显示器(例如,触摸屏112)的便携式多功能设备(例如,便携式多功能设备100)的示意图。在该实施方案中,以及在下文中介绍的其他实施方案中,用户可通过例如用一根或多根手指或者用一个或多个触控笔在屏幕上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中,当用户(例如,通过将手指从屏幕抬离)中断与一个或多个图形的接触时,将发生对一个或多个图形的选择。在一些实施方案中,手势任选地包括一次或多次轻击手势(例如,在抬离后对屏幕的一系列触摸)、一次或多次轻扫手势(在沿屏幕表面的手势期间连续接触,例如,从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(例如,从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,不经意地与图形接触不会选择图形。例如,当用于启动应用程序的手势是轻击手势时,在应用程序示能表示(例如,图标)上方扫动的轻扫手势任选地不会启动(例如,打开)相应应用程序。
设备100任选地还包括一个或多个物理按钮,诸如“home”按钮或菜单按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。另选地,在一些实施方案中,菜单按钮被实现为被显示在触摸屏112上的GUI中的软键。
在一个实施方案中,设备100包括触摸屏112、菜单按钮204、用于对设备开关机和锁定设备进行供电的下压按钮206、音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压下状态持续预定义的时间间隔来对设备进行开/关机;通过压下该按钮并在该预定义的时间间隔过去之前释放该按钮来锁定设备;和/或对设备进行解锁或发起解锁过程。在另选的实施方案中,设备100还通过麦克风113来接受用于激活或去激活某些功能的语音输入。设备100还任选地包括用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图2B是用于示出设备(例如,图1A的设备100)上的用户界面的示意图,该设备具有与显示器250(例如,触摸屏112)分开的触敏表面251(例如,平板电脑或触摸板)。在一些实施方案中,触敏表面251包括一个或多个触觉输出发生器257,该一个或多个触觉输出发生器用于为触敏表面251的用户生成触觉输出。
尽管随后将参考触摸屏112(其中组合了触敏表面和显示器)上的输入给出示例中的一些,但是在一些实施方案中,设备检测与显示器分开的触敏表面上的输入,如图2B所示。在一些实施方案中,触敏表面(例如,图2B中的251)具有与显示器(例如,250)上的主轴线(例如,图2B中的253)对应的主轴线(例如,图2B中的252)。根据这些实施方案,设备检测与显示器上相应位置对应的位置处的与触敏表面251的接触(例如,图2B中的260和262)(例如,在图2B中,260对应于268并且262对应于270)。这样,当触敏表面(例如,图2B中的251)与多功能设备的显示器(例如,图2B中的250)分开时,由设备在触敏表面上所检测到的用户输入(例如,接触260和262以及其移动)被该设备用于操纵显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界面。
另外,虽然主要是参考手指输入(例如,手指接触、单指轻击手势、手指轻扫手势)来给出下面的示例,但是应当理解,在一些实施方案中,这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如,基于鼠标的输入或触笔输入)替代。例如,轻扫手势任选地由鼠标点击(例如,而不是接触),之后是光标沿着轻扫的路径的移动(例如,而不是接触的移动)替代。又如,轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如,代替对接触的检测,之后是停止检测接触)替代。类似地,当同时检测到多个用户输入时,应当理解的是,多个计算机鼠标任选地被同时使用,或者鼠标和多个手指接触任选地被同时使用。
如本文所用,术语“焦点选择器”是指用于指示用户正与之进行交互的用户界面的当前部分的输入元件。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如,图2B中的触敏表面251(在一些实施方案中,触敏表面251为触摸板))上检测到输入(例如,按压输入)的情况下,该特定用户界面元素根据所检测到的输入而被调节。在包括能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如,图1A中的触敏显示器系统112或触摸屏112)的一些具体实施中,在触摸屏上所检测到的接触充当“焦点选择器”,使得在触摸屏显示器上于特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如,由接触进行的按压输入)时,该特定用户界面元素根据所检测到的输入而被调节。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据焦点在用户界面的不同区域之间的移动而移动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制的以便传送与用户界面的用户预期的交互(例如,通过向设备指示用户期望与其进行交互的用户界面的元素)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触摸板或触敏显示器)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
图3是根据一些实施方案的触摸屏的示意图,该触摸屏用于示出应用程序的菜单的用户界面。类似的用户界面任选地在设备100(图1A)上实现。在一些实施方案中,显示在触摸屏112上的用户界面包括以下元素、或者其子集或超集:
·一种或多种无线通信(诸如蜂窝信号和Wi-Fi信号)的一个或多个信号强度指示器202;
·时间203;
·蓝牙指示器205;
·电池状态指示器206;
·具有常用应用程序的图标的托盘209,该图标诸如:
○用于电话模块138的被标记为“电话”的图标216,该图标任选地包括未接来电或语音留言的数量的指示器214;
○用于电子邮件客户端模块140的被标记为“邮件”的图标218,该图标任选地包括未读电子邮件的数量的指示器210;
○用于浏览器模块147的被标记为“浏览器”的图标220;以及
○用于视频和音乐播放器模块152(也称为iPod(Apple Inc.的商标)模块152)的被标记为“iPod”的图标222;以及
·其他应用程序的图标,诸如:
○用于IM模块141的被标记为“消息”的图标224;;
○用于日历模块148的被标记为“日历”的图标226;;
○用于图像管理模块144的被标记为“照片”的图标228;;
○用于相机模块143的被标记为“相机”的图标230;;
○用于在线视频模块155的被标记为“在线视频”的图标232;
○用于股市桌面小程序149-2的被标记为“股市”的图标234;;
○用于地图模块154的被标记为“地图”的图标236;;
○用于天气桌面小程序149-1的被标记为“天气”的图标238;;
○用于闹钟桌面小程序149-4的被标记为“时钟”的图标240;;
○用于健康模块142的被标记“健康”的图标242;;
○用于记事本模块153的被标记为“记事本”的图标244;;
○用于设置应用程序或模块的图标246,该图标提供对设备100及其各种应用程序的设置的访问;和
○用于另外的应用程序诸如应用商店、iTunes、语音备忘录和实用程序的其他图标。
应当注意,图2中示出的图标标签仅仅是示例性的。对于各种应用程序图标任选地使用其他标签。例如,健康模块142的图标242另选地被标记为“健身支持”、“锻炼”、“锻炼支持”、“运动”、“运动支持”或“健身”。在一些实施方案中,相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施方案中,特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。
用户界面和相关联的过程
现在将注意力转向可在具有显示器、触敏表面、和任选地用于检测与触敏表面的接触的强度的一个或多个传感器的电子设备诸如便携式多功能设备100上实现的过程和相关联的用户界面(“UI”)的实施方案。
图4是根据一些实施方案的流程图,其示出使用触敏显示器上的虚拟键盘上方的延长接触来激活触控板模式的方法400。方法400在具有触敏显示器(例如,图1A中的触摸屏112)的便携式多功能设备(例如,图1A中的设备100)处执行。如下文所述,方法400不需要便携式多功能设备包括接触强度传感器(例如,力传感器或压力传感器),因此降低了设计和制造便携式多功能设备的成本。该方法对于用户也是直观的,从而在激活触控板模式时减少来自用户的输入的数量、程度和/或性质,并且创建更有效的人机界面。更有效的输入机制也需要更少的计算资源,从而增大该设备的电池寿命。
图5A-1至5K-6示出了根据一些实施方案的使用虚拟键盘上方(例如,虚拟键盘上的空格键上方)的延长接触来激活触控板模式的示例性用户界面。图5A-1至图5K-6中的用户界面用于示出相对于图4以及图6A至图6F所述的过程。图5A-1至图5K-6中的一些还包括示意图,这些示意图示出有助于说明特定的时间依赖性特征的时间推移,并且这些时间推移的表示仅为示例,并且不是在电子设备操作期间在电子设备上显示的事物。
在图5A-1中,当应用程序(例如,记事本应用程序153或消息应用程序141)在文档编辑模式中时,可编辑内容500被显示在内容呈现区域502中。在一些实施方案中,内容呈现区域502中的内容500包括文本(例如,纯文本、非结构化文本、格式化文本或网页中的文本)。在其他实施方案中,内容包括具有或不具有文本的图形。此外,内容可以是可编辑或只读的。除了显示内容之外,当没有选择内容时,设备100可显示电子文档内的光标(例如,光标522),例如以用于文本输入、文本选择和文本操纵。
如图5A-1所示,在文档编辑模式中,显示屏幕上键盘521(例如,也称为虚拟键盘或软键盘),以用于文本输入。用户可通过在虚拟键盘521上进行触摸输入(也称为接触输入)来输入文本。用户还可通过执行另一触摸输入(例如,轻击“完成”按钮504)来确认编辑的完成,以退出文本编辑模式并且停止显示虚拟键盘521。
图5A-1还示出了插入标记(例如,光标522)的显示,其指示设置在虚拟键盘处的输入将指向的当前位置。在一些实施方案中并且如图5A-1所示,键盘521具有多个虚拟键,并且每个键具有描述该键的功能的相应符号。此外,在一些实施方案中,以模拟三维虚拟特征(例如,三维形状、投影等)的方式显示每个键。
在一些实施方案中,应用程序在具有一个或多个触摸传感器(例如,电容传感器)的设备100上运行,以用于测量与触敏显示器的一次或多次接触的接近度、位置或位移或加速度。在一些实施方案中,设备100连续监视触摸屏112上的触摸输入和该触摸输入的连续移动。在一些实施方案中,设备100仅具有触摸传感器,并且不包括用于检测输入的力或压力的其他传感器。
参见图4和图5A-1,在一些实施方案中,设备100在显示电子文档的内容时,还检测(402)设备100的触敏显示器上的接触输入510。可由用户使用例如其手指或者通过使用触笔来进行接触输入。
在一些实施方案中,设备100将虚拟键盘521显示在触摸屏显示器的至少一部分上时,确定(404)是否在与触控板模式的激活相关联的虚拟键盘521的模式切换区域上方检测到接触输入。例如,在检测模式切换区域上方的延长接触(例如,持续至少延长接触持续时间阈值,诸如0.25秒)时,设备100(例如,使用输入切换模式163-3,图1A)将键盘521切换到软触控板(也称为虚拟触控板、屏幕上触控板)。
在一些实施方案中,模式切换区域对应于空格键的显示表示。在一些实施方案中,模式切换区域对应于与扩展键盘功能不相关联的非字符键(例如,语言切换键或麦克风激活键)(例如,非字符键上方的延长接触激活与该键上方的瞬间接触所激活的功能相同的功能)。在一些实施方案中,显示在设备100的触摸屏显示器上并且不同于虚拟键盘的键的UI对象(例如,示能表示或虚拟按钮)被用作模式切换区域。在一些实施方案中,将不包括键的任何显示表示并且可在视觉上不同于虚拟键盘的键的显示表示的区域用作模式切换区域,诸如,虚拟键盘上的空格键与触摸屏显示器的下边缘之间的区域506。在一些实施方案中,当设备100显示非字母数字虚拟键盘诸如表情符号键盘时,设备100可将区域506(或区域506的一部分,诸如邻接触敏显示器的底部边缘的部分)用作模式切换区域。仅为了简化说明和解释,并且不限制本公开的范围,键盘521的空格键的显示表示为图5A-1至图5K-6中的主要示例性模式切换区域。本段中描述为模式切换区域的其他示例可用于取代或补充空格键的示出表示作为模式切换区域的用途(例如,结合下文详细讨论的方法600)。在一些实施方案中,空格键包括显示的符号(例如,“空格”),如图5A-1所示。在一些另选的实施方案中,空格键不包括显示的符号。
在一些实施方案中,在检测(402)接触输入510时,设备100确定接触输入510在对应于字母“e”的虚拟键的上方,其不是用于激活触控板模式的模式切换区域的一部分(404—否)。如图5A-1所示,响应于检测到字母“e”键上的接触输入510,设备100还显示预览区域512,该预览区域从对应键扩展以提供字母“e”的输入预览。
设备100还确定(406)接触输入是否为延长接触。例如,设备100确定接触输入510是否具有长于或等于延长接触持续时间阈值的持续时间。在一些实施方案中,延长接触持续时间阈值被选择为允许设备区分延长接触与瞬时接触的任何合适的时间段,合适的时间段的一个示例为0.25秒。如图5A-1所示,定时器用于示出接触输入510的持续时间。在当前示例中,设备100检测到,接触输入510具有0.03秒的持续时间,自初始接触510开始计。
在一些实施方案中并且如图5A-2所示,根据确定接触输入510不是延长接触(406—否,图4),键盘输入模式保持(410)。例如,由于接触510的持续时间比延长接触持续时间阈值短,接触输入510被确定为瞬时接触(例如,短时间的单击)。在一些实施方案中,键盘输入模式包括:当设备检测到接触输入已在预先确定的时间阈值内停止(例如,手指抬离)时,输入对应于接触输入的内容。例如,如图5A-2所示,接触510在显示器上持续0.03秒之后,设备100确定接触输入510已停止(例如,手指抬离)时,设备100将字母“e”添加到区域502。
在一些实施方案中并且如图5B-1所示,当设备100检测到接触输入(例如,接触输入514)在触敏显示器上的持续时间为0.24秒时,设备100确定接触输入514仍非延长接触,并且因此显示对应触摸键的字母(例如,字母“e”)的预览区域512。当接触输入514的持续时间大于或等于延长接触持续时间阈值(例如,图5B-2中的0.25秒)时,设备100确定接触输入(例如,接触输入514,图5B-2)为延长接触(406—是,图4)。然后,设备100继续确定(408)接触514在其上方接收的键是否与扩展键盘功能相关联。在一些实施方案中,扩展键盘功能包括显示一组重音字母。扩展特征可包括与虚拟键盘上的不同键相关联的任何其他合适的特征。
在一些实施方案中,如图5B-2所示,根据确定键(例如,所述示例中的“e”键)与扩展键盘功能相关联(408—是,图4),设备100显示(414)列出一组与“e”键相关联的重音标记的扩展特征栏526。设备100在键盘输入模式(410)下输入选自扩展特征栏526的重音字母。在一些实施方案中,用户可移动输入514,以选择扩展特征栏526内的某些重音字母。如图5B-3所示,在检测从触敏显示器的抬离(并且不需要用户移动输入514以选择重音字母选项)时,设备100致动“e”键并且停止显示扩展特征栏526(如图5B-3所示)。
在一些实施方案中,如图5C-1所示,根据确定对应于接触输入(例如,接触输入518)的字母不具有相关联的扩展键盘功能(408—否,图4),设备100保持在键盘输入模式中(410),并且不显示该键的任何扩展键盘特征/功能。例如,尽管虚拟键盘上对应于字母“q”的接触输入518持续0.25秒的持续时间,该持续时间等于上文所讨论的示例延长接触持续时间阈值,但设备100仍显示字母“q”的预览区域516,因为字母“q”不与该当前示例中的扩展键盘功能相关联。如图5C-2所示,在检测到接触518从触敏显示器的抬离时,设备将“q”添加到内容呈现区域502。
在一些实施方案中,响应于检测到接触输入(例如,接触输入530,图5D-1),设备100确定接触输入530在虚拟键盘上的模式切换区域的上方(例如,在空格键的显示表示的上方)(404—是,图4)。在一些实施方案中,如图5D-1所示,在检测空格键的显示表示的上方的接触输入530时,设备还突出空格键(例如,通过改变空格键的边缘以使其以加粗的线条出现,或者通过改变空格键的颜色)。
在一些实施方案中,设备100确定(418)模式切换区域上方的接触输入530是否为延长接触。在一些实施方案中,设备100将接触输入530的持续时间(例如,图5D-1中的0.03秒)与延长接触持续时间阈值进行比较,以确定接触输入530是否为延长接触。
在一些实施方案中,如图5D-2所示,设备检测接触530从触敏显示器的抬离。由于图5D-1中的接触输入530的持续时间比延长接触持续时间阈值短,设备100确定接触输入530不是延长接触(418—否,图4)。因此,设备100保持在键盘输入模式(420)下。例如,如图5D-2所示,当设备100确定接触输入530是空格键上的短时间单击时,设备100将空格添加到内容呈现区域502中并且保持在键盘输入模式中。
在一些实施方案中,如图5E-1所示,当设备100检测到接触输入(例如,接触输入532)在空格键上保持了0.24秒且未从触摸屏抬离时,设备100仍确定接触输入532不是延长接触。如图5E-2所示,当接触输入532的持续时间达0.25秒时,0.25秒等于延长接触持续时间阈值,设备100确定接触输入532为延长接触(418—是,图4)。作为响应,设备100(例如,使用输入切换模块163-3,图1A)将输入模式从键盘模式切换到触控板模式(422)。如图5E-2a所示,设备100在进入触控板模式时改变虚拟键盘(例如,停止显示键盘上的符号)。
在一些实施方案中并且如图5E-2a所示,软触控板523仍可包括键边框,但不显示符号,以为用户提供设备已切换到触控板模式的清楚视觉提示。在一些实施方案中并且如图5E-2b所示,软触控板524还去除虚拟键盘上的虚拟键的边框,以更完整地模拟触控板的外观。
此外,在一些实施方案中,图5E-1中的虚拟键盘521的颜色、色调、饱和度、亮度和/或对比度在软触控板523下也发生了改变(例如,变为灰色和半透明),以指示应用程序已进入与键盘输入模式不同的模式(例如,触控板模式)。在触控板模式中,软触控板523不对用于文本输入的接触输入进行响应,而是充当屏幕上触摸板或触控板,以用于移动光标或者以用于选择内容。
在一些实施方案中,如图5E-2a和图5E-2b所示,一旦激活触控板模式,设备100还显示从真实光标522的当前位置偏移的虚影光标525。在一些实施方案中,虚影光标525指示在手指接触的抬离之后光标522将所处的位置。在一些实施方案中,虚影光标525为显示在屏幕上的原始光标522的修改版本(例如,虚影光标525呈灰色,而如图5E-2所示的原始光标522呈黑色)。在一些实施方案中,虚影光标525链接到真实光标522,使得当真实光标522围绕屏幕移动时,虚影光标525也围绕屏幕移动。在一些实施方案中,当用户使真实光标522围绕屏幕移动时,虚影光标525示出与真实光标522最近的偏移位置(例如,向左或向右偏移)。当设备100检测到接触输入532的抬离事件时,真实光标522替换在发生抬离事件时虚影光标525所处的位置处的虚影光标525。
在一些实施方案中,在进入触控板模式(422)之后,设备100检测(423)接触输入的移动。例如,如图5E-3所示,设备100检测接触输入532在触控板523上的移动536。
在一些实施方案中,响应于检测到接触输入532的移动536,设备100确定(424)接触输入532是否满足一个或多个预先确定的移动参数。在一些实施方案中,一个或多个预先确定的移动参数包括预先确定的距离阈值,例如,在触敏显示器上的移动的英寸数。在一些实施方案中,一个或多个预先确定的移动参数包括光标的预先确定的移动速度阈值,例如,在触敏显示器上的5像素/秒的移动速度。
使用这些移动参数允许设备决定何时应该退出触控板模式以及何时应该保持触控板模式,如下文更详细地讨论。
在一些实施方案中,设备100确定接触输入532的移动不满足一个或多个预先确定的移动参数(424—否,图4)。例如,如图5E-3所示,设备100检测到接触输入532在软触控板523上的移动536对应于在触敏显示器上的小于1英寸的移动并且检测到移动的速度小于5像素/秒。因此,图5E-3中接触输入532的移动536不满足预先确定的移动参数。
在一些实施方案中,设备100还继续确定(426)接触输入532的移动536是否为对应于用户意图的精确移动,该用户意图是将光标精确地放置在内容呈现区域502上的特定位置处。在一些实施方案中,设备100确定接触输入532的移动速度是否等于或小于阈值,诸如5像素/秒。如果是,设备100则确定接触输入532的移动536为精确移动(426—是,图4)。例如,设备100确定到,用户旨在通过接触输入532在软触控板523上的移动536来将光标精确地放置在特定位置处(例如,在字词“created”的字母“e”与字母“d”之间)。如图5E-3所示,响应于软触控板上的手指移动536,虚影光标525和实际光标522移动(428)4个字符的位置到达内容呈现区域502中的预期位置。
在一些实施方案中并且如图5E-4所示,响应于在图5E-3中的精确移动536之后检测到抬离事件,设备100立即退出(430)触控板模式,以显示虚拟键盘521。在从软触控板523切换到软键盘521的过程中不存在延迟,因为用户已仔细放置光标,并且不太可能想要再保持在触控板模式中。在一些实施方案中,实际光标522保持在发生抬离事件并且虚影光标525消失时实际光标522所处的位置处。
在一些实施方案中并且如图5F-1所示,在设备100检测到接触538的持续时间比延长接触持续时间阈值(例如,0.25秒)长之后,将接触538确定为延长接触,并且激活触控板模式。设备100确定接触输入538是否是静态的或者接触输入538的移动是否为精确移动(例如,由接触输入引起的光标的移动是否小于预先确定的最小移动阈值(例如,1英寸))。例如,如图5F-2所示,如果未检测到移动,设备100则确定接触输入538不具有精确移动部分(426—否,图4)。例如,在不打算使用软触控板523的情况下,用户可能会因按压空格键持续延长时间段而意外地激活触控板模式。作为响应,设备100锁定(432)实际光标522和虚影光标525,而不引起内容呈现区域502中的任何移动。
在一些实施方案中,如图5F-3所示,响应于检测到接触输入538的抬离,设备100立即退出(434)触控板模式,以显示虚拟键盘521。在从软触控板523切换到软键盘521的过程中不存在延迟。在一些实施方案中,实际光标522保持在发生抬离事件并且虚影光标525消失时实际光标522所处的位置处。
在不同于图5F-3的另选实施方案中,响应于检测到静态接触输入538的抬离事件,设备100保持在触控板模式(例如,也称为触控板粘着模式)中,而不是退出触控板模式。静态接触输入538可用于激活触控板粘着模式,使得在检测到抬离之后,软触控板可保持一定时间段(例如,0.5秒、1秒或2秒等)。
在一些实施方案中并且如图5G-1所示,在设备100检测到空格键上的接触540的持续时间比预先确定的时间阈值(例如,0.25秒)长之后,将接触540确定为延长接触并且激活触控板模式。
在一些实施方案中并且如图5G-2所示,响应于在显示触控板523(例如,在触控板模式422中,图4)后检测到(423)接触输入540的移动,设备100确定(424)接触输入540的移动是否满足一个或多个预先确定的移动参数。在一些实施方案中,一个或多个预先确定的移动参数包括预先确定的移动距离阈值和/或预先确定的移动速度阈值,如上文所讨论。在一些实施方案中,一个或多个预先确定的移动参数包括移动方向参数,该移动方向参数反映移动是否在向下的方向上移动。
例如,如图5G-2所示,设备100确定接触输入540在空格键上的向下移动542满足一个或多个预先确定的移动参数(424—是,图4)。设备100根据移动542来移动(436)内容呈现区域502中的光标,包括实际光标522和虚影光标525。由于屏幕实际使用空间随移动542的进行而所剩不多,在接触540的抬离之后,设备保持在触控板模式中,以给予用户将其手指重新定位在为其提供更多空间来继续移动光标的位置中的机会。
例如,如图5G-3所示,设备100检测到(438)接触输入540的抬离事件。设备100保持(440)在触控板模式中并且保持软触控板523,而不是退出触控板模式。在一些实施方案中,实际光标522和虚影光标525均保持在检测到抬离事件时其相应的位置处。在一些实施方案中,设备100继续检测(442)在自检测到抬离之后的预先确定的时间段内(例如,检测到抬离后的0.5秒内)是否存在第二接触。
在一些实施方案中,设备100在触控板模式中保持预先确定的时间段(例如,也称为触控板粘着模式)。为了说明且不旨在限制,本公开使用0.5秒作为预先确定的时间段。然而,本领域普通技术人员将理解,保持在触控板模式中的此类预先确定的时间段可为任何合适的时间段,诸如1秒、0.75秒或0.5秒。此类预先确定的时间段还可由制造商或设计者预先设定,并且随后由用户使用设备上的设置界面定制。
在一些实施方案中,设备100持续监测自检测到(438)抬离事件之后是否接收到第二接触输入。设备100还跟踪自抬离事件之后的时间段(例如,经过的时间),如图5G-4中的计时器视觉地示出,并且设备在监测另一接触的同时还保持在触控板模式中。
在一些实施方案中并且如图5G-5所示,设备100在预先确定的时间段(例如,图5G-5中的0.5秒)结束前未检测到任何接触输入。也就是说,在自抬离事件之后的0.5秒持续时间中,未检测到第二接触(442—否,图4)。在0.5秒处,设备100退出(444)触控板模式,以显示虚拟键盘521。在一些实施方案中,实际光标522保持在已发生抬离事件并且虚影光标525不再显示时实际光标522所处的位置处。
在一些实施方案中,如图5H-1所示,在设备100检测到模式切换区域上方(例如,空格键上方)的接触548的持续时间比预先确定的时间阈值(例如,0.25秒)长之后,将接触540确定为延长接触,并且激活触控板模式。在一些实施方案中,设备100还响应于触控板模式的激活而提供触觉反馈549,以提醒用户已进入触控板模式。例如,一旦触控板模式激活,则设备100振动,或者设备可提供靠近接触548的局部振动。
在一些实施方案中,如图5H-2所示,设备100检测接触输入548的移动550。在一些实施方案中,根据确定移动550满足移动参数(例如,移动550以大于预先确定的速度阈值的速度进行并且/或者在移动550期间移动的距离大于预先确定的距离阈值),将移动550确定为满足相应的移动参数(424—是,图4)。设备100根据移动550来移动(436)内容呈现区域502中的光标,包括实际光标522和虚影光标525。
在一些实施方案中,如图5H-3所示,设备100检测到(438)接触输入548的抬离事件。设备100保持(440)在触控板模式中,并且软触控板523保持在显示器上。如上文参考图5G-3至图5G-5所讨论,触控板模式保持预先确定的时间段,例如,0.5秒,其中未在显示器上检测到第二接触。
图5I-1还显示,在确定接触输入的移动满足相应的移动参数(424—是,图4)之后,设备保持在触控板模式中。
在一些实施方案中并且如图5I-2所示,如果在触控板模式结束之前(例如,在自抬离事件之后的0.5秒内),设备100检测到第二接触输入544(442—是,图4),设备100继续确定(446)第二接触544的触摸类型。在一些实施方案中,设备100确定接触输入544为(456)单次触摸。作为响应,设备100保持(458)在触控板模式中。
例如,如图5I-3所示,当设备仍在触控板模式中时,设备100检测到接触输入544的移动546。作为响应,实际光标522和虚影光标525根据接触输入544在软触控板523上的移动546在内容呈现区域502中移动。在一些实施方案中并且如图5I-4所示,在检测到接触544从触敏显示器的抬离时,设备100保持在触控板模式中。在一些其他实施方案中,并且如上文参考图4、图5E-3至图5E-4、图5F-2至图5F-3、图5G-2至图5G-5以及图5H-2至图5H-3在步骤424处所讨论,当检测到接触544的抬离时,设备100可确定,接触输入544的移动546是否满足一个或多个移动参数以及其后是否相应地执行功能。在另外一些其他实施方案(未示出)中,在单次触摸544之后检测到抬离事件时,设备100立即退出触控板模式。
图5J-1也从保持在触控板模式中的设备开始(例如,可能已使用延长接触激活了模式并且该接触的移动满足相应的移动参数)。在一些实施方案中并且如图5J-2所示,如果在触控板模式结束之前(例如,在自抬离事件之后的0.5秒内),设备100检测到第二接触输入556-1(442—是,图4),设备100继续确定(446)第二接触556-1的触摸类型。在一些实施方案中,设备100检测(460)触摸屏上的快速双击,以触发(462)文本选择。
例如,在图5J-2中,设备100可检测到接触556-1的持续时间比预先确定的阈值(例如,0.05秒)短,紧随其后便是接触556-1的抬离事件,如图5J-3中的虚线所示。自抬离事件之后,如果设备100在预先确定的阈值(例如,0.05秒)内还检测到第二接触556-2,如图5J-4所示,设备100确定触敏显示器上已接收到快速双击。作为响应,如图5J-4所示,设备100选择内容500的一部分(例如,光标所处位置的字词)并且显示选择562。例如,字词“Liberty”在被选中时被加亮。在一些实施方案中,设备100显示标记诸如“Liberty”的相应两端处的起点对象560和终点对象558,以指示选择562。
在一些实施方案中,如图5J-5所示,当设备100在双击之后检测到抬离事件时,设备100保持在触控板模式中,并且选择562保持在显示器上。在一些其他实施方案(未示出),当设备100在双击之后检测到抬离事件时,设备100立即退出触控板模式而将选择562保持在显示器上。
图5K-1示出了在触控板模式中操作的设备(例如,可能已使用延长接触激活了模式,并且该接触的移动满足相应的移动参数)。在一些实施方案中并且如图5K-2至图5K-4所示,设备100检测到快速双击(例如,图5K-2中的轻击570-1,然后是图5K-3中的抬离,最后是图5K-4中的轻击570-2)。在响应于图5K-4中的快速双击的文本选择562之后,设备100还可检测(464)接触570-2的保持并拖动手势574,如图5K-5所示。作为响应,如图5K-5所示,设备100根据触控板上的移动574来选择(466)更多的对象(例如,区域502中另外的字词)。
在一些实施方案中,如图5K-6所示,当设备100在双击和保持并拖动手势之后检测到抬离事件时,设备100保持在触控板模式中,并且更多文本的选择562保持在触敏显示器上。在一些其他实施方案(未示出),当设备100在双击和保持并拖动事件之后检测到抬离事件时,设备100立即退出触控板模式,但将选择562保持在显示器上。
图6A至图6F是根据一些实施方案的流程图,其示出使用虚拟键盘上方的延长接触来激活触摸板模式的方法600。方法600在具有触敏显示器(例如,图1A中的触摸屏显示器112)的便携式多功能设备(例如,图1A中的设备100)处执行。如下文所述,方法600提供了用于在具有触敏显示器的便携式多功能设备处激活触控板模式的机制。该方法不需要便携式多功能设备包括接触强度传感器(例如,力传感器或压力传感器),因此降低了设计和制造便携式多功能设备的成本。该方法对于用户也是直观的,从而在激活触控板模式时减少来自用户的输入的数量、程度和/或性质,并且创建更有效的人机界面。更有效的输入机制也需要更少的计算资源,从而增大该设备的电池寿命。
转到图6A,方法600在包括与多个触摸传感器耦接的触敏显示器的电子设备处执行(602)。在一些实施方案中,触敏显示器未与任何力传感器耦接。电子设备可能无法直接检测接触强度的变化,因为设备不具有任何力传感器。在一些其他实施方案中,触敏显示器与一个或多个力传感器耦接,但如上文所讨论的单指手势的检测不需要使用可由此类力传感器生成的任何力信号。换句话讲,即使设备包括力传感器,也不需要此类力传感器来检测本文所讨论的单指触控板激活手势,例如,尖端部到纹路部的滚动手势以及在虚拟键盘的预先确定的模式切换区域上方的延长接触。在一些实施方案中,该多个触摸传感器中的触摸传感器为电容触摸传感器。
在执行方法600的过程中,电子设备将虚拟键盘显示(604)在触敏显示器上,虚拟键盘包括空格键和其他键的显示表示。例如,如图5A-1所示,显示的虚拟键盘521包括空格键(在虚拟键盘521的底行中)的显示表示以及许多其他键的显示表示。
电子设备还检测(606)虚拟键盘上方的第一延长接触。延长接触在本文中也称为“长按”,并且包括触敏显示器上方持续至少延长接触检测阈值(例如,0.25秒)的接触。第一延长接触的示例在图5B-1中以延长接触514的方式示出,该延长接触为持续了0.25秒的接触(如图5B-2所示,其中在检测到延长接触持续了0.25秒之后,“e”键盘的对应扩展键盘功能在图5B-2中被激活)。
根据确定第一延长接触在其他键的任何相应显示表示的上方(例如,在图5B-1和图5B-2中的“e”键的表示的上方),电子设备将第一延长接触解释(608)为键盘输入并且激活对应的扩展键盘功能(例如,图5B-2所示的重音选项)。在一些实施方案中,仅在检测到第一延长接触已持续至少延长接触持续时间阈值(例如,0.25秒)时,激活对应的扩展键盘功能。一些其他键可仅与一种键盘功能相关联,或者可与键盘功能(例如,基于瞬时接触激活的功能)和扩展键盘功能(例如,基于延长接触激活的功能)均相关联。在第一延长接触在仅与一种键盘功能相关联的键的上方的情况下,该键盘功能同时为该键的键盘功能和扩展键盘功能(例如,如图5C-1所示,在“q”键上方持续了0.25秒的延长接触518仍使“q”键激活,因为“q”的键盘功能和扩展键盘功能相同)。
接下来,电子设备检测(610)虚拟键盘上方的第二延长接触(例如,不同于第一延长接触的延长接触,诸如图5E-1中所述的延长接触532)。根据确定第二延长接触在空格键的相应显示表示的上方(如图5E-1中的延长接触532所示),设备将第二延长接触解释为(612)模式切换输入,该模式切换输入使电子设备将触敏显示器的至少一部分作为触控板来操作。例如,如图5E-2a所示,在延长接触532已在空格键上方保持至少延长接触持续时间阈值之后,设备将触敏显示器的至少一部分作为触控板来操作。在一些实施方案中,在第二延长接触抬离触敏显示器之前,电子设备将触敏显示器的至少一部分作为触控板来操作,这允许用户激活触控板并且立即以一种流体运动开始使用触控板。在一些实施方案中,触敏显示器的一部分即为触敏显示器的全部。
在不包括力传感器的设备上,设计允许切换到触控板模式同时还避免与其他手势产生不必要混淆的单指手势是非常困难的任务。允许用户提供在空格键上方(或者在虚拟键盘的另一指定区域的上方,诸如虚拟键盘上不包括键的底部部分)的延长接触,然后将电子设备作为触控板来操作,这为用户提供了快速地从键盘输入模式切换到触控板模式的便利方式。在不包括力传感器的电子设备处提供这种交互,使这些设备的可操作性得到了增强,并且使这些设备上的人机界面更加有效(例如,通过允许用户使用简单手势来轻易地切换到触控板模式,而不必将时间浪费在不使用触控板模式而尝试放置光标来激活触控板模式上,或者不必将时间浪费在使用用户输入或菜单选项的复杂序列来激活触控板模式上)。
现转到图6B并且从操作612继续,在将触敏显示器的一部分作为触控板来操作时,设备检测到(614)第二延长接触从触敏显示器的抬离。此类抬离的示例示出在以下附图中:(1)如图5E-4所示,延长接触532已从触敏显示器抬离;(2)如图5F-3所示,延长接触538已从触敏显示器抬离;(3)如图5G-3所示,延长接触540已从触敏显示器抬离;以及(4)如图5H-3所示,延长接触548已从触敏显示器抬离。
响应于检测到第二延长接触的抬离,设备任选地确定(614)抬离前第二延长接触在触敏显示器上的任何移动是否满足移动参数。
使用移动参数可允许电子设备准确地确定何时继续在触控板模式中操作或者何时退出触控板模式。通过响应于检测到抬离来确定第二延长接触在触敏显示器上的任何移动是否满足移动参数,设备保留计算资源并且仅在立即需要确定时才使用这些计算资源来进行该确定。这样,这些设备的可操作性得到了增强并且这些设备上的人机界面更有效地操作(例如,通过在需要确定前进行确定来避免浪费资源)。
在一些实施方案中,设备确定(616)抬离前第二延长接触在触敏显示器上的移动不满足移动参数,并且作为响应,停止(616)将触敏显示器的一部分作为触控板来操作。该行为的示例在图5E-3至图5E-4(抬离前的缓慢移动,诸如比5像素/秒的移动更慢的移动)以及在图5F-2至图5F-3(抬离前未移动或移动的距离很小,诸如小于1英寸的移动)中示出。可在诸如在检测到抬离之后的0.01秒内立即停止。在一些实施方案中,设备还重新显示虚拟键盘,并且再次在键盘输入模式中操作显示虚拟键盘的区域。
一旦确定抬离前的移动不满足移动参数,即停止将触敏显示器的一部分作为触控板来操作,这确保仅在用户需要触控板模式时才调用触控板模式。通过确保仅在用户需要触控板模式时才调用触控板模式,设备的可操作性得到了增强并且该设备上的人机界面更有效地操作(例如,通过确保为用户呈现其需要的界面控件以及避免使用户在试图寻找其需要的界面控件上浪费时间)。
在一些实施方案中,确定抬离前第二延长接触在触敏显示器上的移动不满足移动参数包括确定(618)抬离前第二延长接触在触敏显示器上移动的距离小于预先确定的距离。例如,第二延长接触(例如,延长接触538,图5F-2)根本未移动,这指示触控板模式被意外地调用,因此,用户将优选立即切换到键盘输入模式。在一些实施方案中,设备还重新显示虚拟键盘,并且再次在键盘输入模式中操作显示虚拟键盘的区域(如图5F-3所示)。
一旦确定抬离前第二延长接触在触敏显示器上移动的距离小于预先确定的距离,即停止将触敏显示器的一部分作为触控板来操作,这确保仅在用户需要触控板模式时才调用触控板模式。如果用户使第二延长接触移动非常短的距离(或者根本未移动),那么这指示用户已将光标放置在期望位置并且不再需要使用触控板模式(或者当接触根本未移动时,这指示用户意外地调用了触控板模式)。通过确保仅在用户需要触控板模式时才调用触控板模式,设备的可操作性得到了增强并且该设备上的人机界面更有效地操作(例如,通过确保为用户呈现其需要的界面控件以及避免使用户在试图寻找其需要的界面控件上浪费时间)。
在一些实施方案中,确定抬离前第二延长接触在触敏显示器上的移动不满足移动参数包括确定(620)抬离前第二延长接触在触敏显示器上以小于预先确定的速度(例如,小于5像素/秒的速度或者指示用户精细地放置光标的任何合适的速度)的速度移动。第二延长接触的这类移动可指示用户正将光标移动到特定点并且在其将光标放置在期望位置处之后不再需要触控板。图5E-3示出了一个示例,其中接触532抬离前,其以低速率移动536(这使光标被精细地放置在出现在区域502中的文本内),并且在图5E-4中,退出了触控板模式。
一旦确定抬离前第二延长接触在触敏显示器上移动的速度小于预先确定的速度,即停止将触敏显示器的一部分作为触控板来操作,这确保仅在用户需要触控板模式时才调用触控板模式。如果用户以缓慢速度移动第二延长接触,那么这指示用户已将光标放置在期望位置并且不再需要使用触控板模式。通过确保仅在用户需要触控板模式时才调用触控板模式,设备的可操作性得到了增强并且该设备上的人机界面更有效地操作(例如,通过确保为用户呈现其需要的界面控件以及避免使用户在试图寻找其需要的界面控件上浪费时间)。
设备还可确定(622)抬离前第二延长接触在触敏显示器上的移动满足移动参数(例如,在调用触控板之后以及在抬离之前,第二延长接触在显示器上快速移动,如图5H-2中的延长接触548所示),并且作为响应,设备继续将触敏显示器的一部分作为触控板来操作以保持至少预先确定的时间量(例如,在检测到第二延长接触从触敏显示器的抬离之后的至少5秒内保持)。
一旦确定第二延长接触满足移动参数,则继续将触敏显示器的一部分作为触控板来操作,这确保只要用户需要触控板模式即调用触控板模式。如果用户在向下的方向上或者以更快的速度移动第二延长接触,那么这指示用户完成第二延长接触的抬离是为了允许用户重新定位其手指,以便继续移动光标(例如,如果用户在向下的方向上移动,则其可能耗尽空间并且将需要抬离以重新定位其手指,从而继续移动光标)。通过确保只要用户需要触控板模式即调用触控板模式且不需要中断用户对光标的移动,设备的可操作性得到了增强并且该设备上的人机界面更有效地操作(例如,通过确保为用户呈现其需要的界面控件以及避免使用户在试图寻找其需要的界面控件上浪费时间)。
现在参考图6C(其从图6A的操作612继续),在检测到第二延长接触从触敏显示器的抬离之后,电子设备继续(624)将触敏显示器的一部分作为触控板来操作以保持至少预先确定的时间量。在一些实施方案中,即使在检测到第二延长接触的抬离之后,触控板保持粘着(例如,保持为操作模式),并且未使用移动参数来确定触控板是否应保持粘着。在一些实施方案中,预先确定的时间段等于或小于1秒、等于或小于0.75秒或者等于或小于0.5秒。
在一些实施方案中,在第二延长接触已与触敏显示器保持接触至少第二预先确定的时间量之后,调用(626)触控板;并且第二预先确定的时间量小于预先确定的时间量。例如,第二预先确定的时间量为本文所讨论的延长接触检测时间阈值,诸如0.25秒。然后在一些实施方案中,即使在检测到抬离之后,触控板也因此保持粘着(换句话讲,继续将显示器的一部分作为触控板来操作,保持0.25秒以上),这允许用户重新定位其手指,而不必再次重新激活触控板模式。
在一些实施方案中,根据确定在检测到第二延长接触的抬离之后的预先确定的时间量内,在触敏显示器的一部分的上方未检测到输入,电子设备停止将触敏显示器的一部分作为触控板来操作。这种示例在图5G-5中示出,其中,在自检测到图5G-2中的延长接触540的抬离后已经过预先确定的时间量(例如,5秒)之后,停止将触敏显示器的一部分作为触控板来操作。
图6C中所述的操作630可在操作624/626之后,或者可在操作614之后。在一些实施方案中,在将触敏显示器的一部分作为触控板来操作时,电子设备检测(630)触敏显示器上的双击输入,在检测到第二延长接触的抬离之后的一定时间量(例如,0.25秒或更短)内检测到双击输入;以及,响应于检测到双击输入,设备选择显示在触敏显示器上的对象。例如,对象定位成靠近光标,该光标被显示在触敏显示器的内容区域中(在光标两侧、在光标之下或邻近光标),该内容区域位于触敏显示器上用于显示虚拟键盘的区域之外。选择对象可包括在触敏显示器的内容区域内移动光标,以提供对象已被选择的视觉指示。对象可为字词(或字母数字字符和/或符号的一些其他集合)、图像或文字和图像的组合。示例性双击输入在图5J-2至图5J-4中示出,其中,接收第一次轻击556-1(图5J-2),然后是该轻击的抬离(图5J-3),最后是第二次轻击556-2(图5J-4)。响应于检测到该双击,设备选择显示在区域502中的对象,例如,在图5J-5中,选择字词“Liberty”。
允许用户执行双击输入来选择对象,这确保在触控板模式中时,用户能够选择对象(例如,文本、图像或两者的组合)。通过确保触控板模式允许选择对象,增强了设备的可操作性,然后创建了与设备的持续交互。
在一些实施方案中,在双击输入之后,设备还检测到拖动手势(例如,手势574,图5K-5),并且作为响应,随拖动手势移动,设备选择更多的对象(例如,选择区域502内的更多显示文本)。换句话讲,用户能够在双击输入选择手势后立即执行拖动手势,以便调节待选择对象的数量。允许用户在双击输入后执行拖动手势来选择更多(或更少)对象,这确保在触控板模式中时,用户能够仅选择对象中其想要选择的那些部分(例如,文本、图像或两者组合的一部分)。通过确保触控板模式允许细粒度地选择对象,设备的可操作性得到了增强,然后创建了与设备的持续交互。
现在参考图6D,设备检测(634)虚拟键盘上空格键的显示表示下方的部分的上方的第三延长接触,虚拟键盘的该部分不包括任何其他键(第三延长接触可在第二延长接触之前或者可在第二延长接触之后接收到,并且表示调用触控板的另一种方式)。根据确定第三延长接触在虚拟键盘上在空格键的显示表示的下方并且不用于显示其他键的任何表示的部分的上方,设备将第三延长接触解释为(636)模式切换输入,该模式切换输入使电子设备将触敏显示器的至少一部分作为触控板来操作。在一些实施方案中,虚拟键盘的灰色空间部分也可用于调用触控板模式,诸如空格键之下的区域(换句话讲,这是对将空格键的显示表示用作模式切换区域的替代或补充,另一区域诸如空格键之下的区域可另选地或另外地用作模式切换区域)。在一个示例中,当虚拟键盘在表情符号模式中时,那么,在虚拟键盘上单独表情符号键之下的底部处的延长接触可解释为模式切换输入。
移到图6E,其他键的任何相应显示表示上方的延长接触(或瞬时接触)使(638)对应的扩展键盘功能激活并且不会使电子设备将触敏显示器的任何部分作为触控板来操作。虚拟键盘的其他键中的至少一些键还可分别与响应于键上方的瞬时接触而激活的对应键盘功能和响应于键上方的延长接触而激活的对应扩展键盘功能相关联(640)。例如,如图5B-2所示,“e”键上方的延长接触使“e”键的扩展键盘功能(重音输入选项的显示)激活,并且“e”键上方的瞬时接触(图5A-1)使默认键盘功能激活,诸如寄存“e”键的致动。对于其他键中的某些键,对应的扩展键盘功能以及对应的默认键盘功能可相同,诸如对于如图5C-1至图5C-2所述的“q”键而言。
在一些实施方案中,当虚拟键盘已显示时,并且在将其作为触控板来操作之前,该区域在键盘输入模式中操作,其中,将在虚拟键盘的任何其他键处的用户输入解释为激活键盘功能或扩展键盘功能的键盘输入,这取决于接收到的输入的类型(瞬时接触或延长接触)。在第一延长接触之前和在第一延长接触之后,该区域均保持在键盘输入模式中操作。这样,仅预先指定的模式切换区域上方的延长接触将使触控板激活,诸如空格键上方的延长接触或空格键之下的区域上方的延长接触。
将显示器中用于虚拟键盘的相同区域作为触控板来操作,这允许用户立即开始使用触控板,而不必在调用触控板之后重新安置/重新定位其手指,相反,用户简单地开始根据需要移动其手指,以移动光标和/或选择对象(例如,使用上文所讨论的双击手势和双击并拖动手势)。另外,停止显示虚拟键盘的显示符号中的至少一些显示符号为用户提供已调用触控板模式的清楚视觉指示。通过提供这些特征,设备的可操作性得到了增强,然后创建了与设备的持续交互(例如,用户不需要浪费重新定位手指的时间,并且将不会对何时调用触控板产生混淆,从而允许与设备的持续交互)。
在一些实施方案中,显示的虚拟键盘不包括(642)功能(fn)键,如图5D-1所示。
现转到图6F,虚拟键盘显示(644)在触敏显示器的区域中,并且其他键的每个显示表示包括相应的显示符号,并且将触敏显示器的至少一部分作为触控板来操作包括(i)将该区域作为触控板的一部分来操作,以及(ii)停止显示虚拟键盘的显示符号中的至少一些显示符号。换句话讲,在作为触控板来操作时,现将触敏显示器中先前用于显示虚拟键盘的区域作为触控板来操作(如图5E-2a所示,其中先前用于显示图5E-1中的虚拟键盘的区域现用作触控板的一部分)。在一些实施方案中,设备停止显示虚拟键盘上的所有符号并且可用表示触控板的图像来替换显示的虚拟键盘(图5E-2b中所述)。在一些实施方案中,设备在将触敏显示器的一部分作为触控板来操作时仍可示出键边框,但不显示键盘符号(图5E-2a中所述),并且这样,设备为用户提供了现正将该区域作为触控板来操作的清楚视觉指示。
另外,在将显示器的一部分作为触控板来操作时,触敏显示器上至少该部分上方的任何输入控制(646)在触敏显示器的另一部分中显示的光标的移动。例如,在作为触控板来操作时,在触敏显示器上移动的轻扫手势使显示在触敏显示器上的光标根据轻扫手势的移动而移动。
在一些实施方案中,还与将触敏显示器的一部分的操作调用为触控板相结合来提供触觉反馈(648)。例如,一旦检测到空格键的显示表示上方存在保持至少延长接触持续时间阈值(例如,0.25秒)的延长接触,设备则切换到触控板模式中操作,并且还提供触觉/触知反馈(图5H-1)以指示模式已切换。
尽管在上文中将不具有任何力传感器的设备用作主要说明示例,但方法600中用于激活触控板模式的延长接触还可在确实包括力传感器的设备上实现,但检测这些单指手势不需要使用可由此类力传感器生成的任何力信号(换句话讲,即使设备确实具有力传感器,也不需要此类力传感器来检测单指触控板激活手势,例如,虚拟键盘的预先确定的模式切换区域(模式切换区域的示例包括空格键或虚拟键盘上在空格键下方的区域)上方的延长接触)。另外,尽管在上文中将空格键的显示表示上方的延长接触用作触控板激活手势的主要说明示例,但也可在另一模式切换区域上方接收延长接触,诸如在虚拟键盘上位于空格键的显示表示下方的区域以及虚拟键盘上不包括键的任何显示表示的区域(例如,虚拟键盘上不包括任何键的空白空间)的上方接收延长接触。
应当理解,对图6A至图6F中已经进行描述的操作的具体顺序仅仅是一个示例,并非旨在表明所述顺序是可以执行这些操作的唯一顺序。本领域普通技术人员将想到多种方式来对本文所述的操作进行重新排序,并且/或者将这些操作与参考图4、图7以及图9A至图9D所述的操作以多种方式组合。
图7是根据一些实施方案的流程图,其示出使用包括尖端部到纹路部滚动手势的一个或多个单指手势来激活触控板模式的方法700。方法700在具有触敏显示器(例如,图1A中的触摸屏显示器112)的便携式多功能设备(例如,图1A中的设备100)处执行。如下文所述,方法700提供了用于在具有触敏显示器的便携式多功能设备处激活触控板模式(例如,从键盘模式)的机制。该方法不需要便携式多功能设备包括接触强度传感器(例如,力传感器或压力传感器),因此降低了设计和制造便携式多功能设备的成本。也就是说,在一些实施方案中,该方法仍可用在具有力传感器的设备上。该方法对于用户也是直观的,从而在激活触控板模式时减少来自用户的输入的数量、程度和/或性质,并且创建更有效的人机界面。更有效的输入机制也需要更少的计算资源,从而增大该设备的电池寿命。
图8A-1至图8F示出了根据一些实施方案的使用包括尖端部到纹路部滚动手势的手指手势来激活触控板模式的用户界面的示例。图8A-1至图8F中的用户界面用于示出相对于图7以及图9A至图9D所述的过程。
在图8A-1中,当应用程序(例如,记事本应用程序153或消息应用程序141)在文档编辑模式中时,可编辑内容800被显示在内容呈现区域802中。在一些实施方案中,内容呈现区域802中的内容800包括文本(例如,纯文本、非结构化文本、格式化文本或网页中的文本)。在其他实施方案中,内容包括具有或不具有文本的图形。此外,内容可以是可编辑或只读的。除了显示内容之外,在未选择内容时,设备100可显示电子文档内的光标(例如,光标822),例如以用于文本输入。此外,显示虚拟键盘821以用于文本输入。
在一些实施方案中,设备100具有电容传感器阵列(未示出,但上文相对于图1A有所描述),该电容传感器阵列生成输出信号,该输出信号用于测量与触敏显示器的一次或多次接触的接近度、位置、位移和/或加速度。在一些实施方案中,设备100连续监视触摸屏112上的触摸输入和该触摸输入的连续移动。
在一些实施方案中,在显示电子文档的内容时,设备100检测传感器阵列的输出信号的变化。在一些实施方案中,设备100基于向传感器阵列的一个或多个传感器(例如,电容电极)寄存的信号来确定接触输入的质心。质心用于确定触摸屏上的对应接触输入的位置。在一些实施方案中,质心是接触区域的几何中心。在一些实施方案中,质心是触敏表面上被用户接触或触摸的区域(例如,具有大于预先确定的阈值的测量电容的区域)的几何中心。在一些实施方案中,确定质心在对应于传感器阵列中输出最强信号的一个或多个传感器的位置处(例如,输出最强信号的一个或多个传感器的几何中心)。
在一些实施方案中,设备100通过检测一个或多个参数来确定在触敏显示器上作出的是何种类型的手指手势,该一个或多个参数选自:(1)接触区域的变化、(2)质心的位置的变化、(3)质心的移动速度的变化、(4)多个触摸传感器中的至少一个触摸传感器的饱和度水平的变化,以及(5)用户进行相对于触敏显示器的接触的手指的角度的变化。例如,在用户使其手指在触敏表面上从用户手指的尖端部滚动到用户手指的平坦部分(例如,纹路部或用户指纹所处的位置)时,可能发生这些情况。
参考图7和图8A-1,在一些实施方案中,设备100首先检测键盘812上的接触830-1。基于设备的传感器阵列响应于在传感器阵列上检测到的接触830-1而生成的输出信号,设备100可确定接触830-1对应于用户的指尖(“尖端部”)与触摸屏之间的接触。
在一些实施方案中,如图8A-2所示,接触830-2的输出信号可指示接触区域相比于图8A-1中的接触830-1已增大,并且随用户进一步滚动其手指或者更用力地按压,接触质心的位置已向下移动。在一些实施方案中,从接触830-1到接触830-2,接触区域以及接触质心位置的变化是连续的,即,接触不存在中断(例如,抬离事件)。在一些实施方案中,如图8A-3进一步所监测,接触830-3的输出信号指示接触区域继续增大,并且随用户进一步滚动其手指或者更用力地按压,接触质心继续向下移动。设备100可确定接触830-3对应于用户手指的指纹部分(“纹路部”)与触摸屏之间的接触。
在一些实施方案中,设备100确定已检测到尖端部到纹路部的滚动手势(702),从图8A-1至图8A-3中可看出。响应于检测到尖端部到纹路部的滚动手势,如图8A-3所示,设备100进入(704)触控板模式。例如,触控板823替换键盘821,其中触控板823不显示键上的字母数字字符。在一些实施方案中,触控板823示出每个单独虚拟键的边框,而不示出字母数字字符。在一些其他实施方案中,如图5E-2b所示,触控板去除虚拟键盘上的虚拟键的边框,以提供虚拟键盘已变为触控板模式的视觉指示。在一些实施方案中,一旦激活软触控板模式,设备100还显示从真实光标822的当前位置偏移的虚影光标825,如图8A-3所示。
在一些实施方案中,设备100检测到(705)第二手势(例如,移动、抬离事件或另一滚动手势,诸如反向滚动手势)。设备100继续确定(706)在步骤702处检测到的尖端部到纹路部滚动手势之后的第二手势的手势类型。
在一些实施方案中,设备100检测到纹路部接触830-3在触控板823上移动(712)。例如,如图8A-4所示,基于接触830-3的输出信号,设备100可确定接触830-3的质心的弯曲移动路径834。因此,设备100确定纹路部接触830-3沿相同的弯曲路径移动(834)。作为响应,光标在内容呈现区域802中沿相同的弯曲路径移动(714)。在一些实施方案中,设备100继续检测(715)下一个手势(例如,接触的继续移动、抬离事件或另一滚动手势等)。然后,设备确定(706)在指纹接触和光标在触摸屏上的移动(例如,图8A-4中的移动834)之后的该下一个手势的手势类型。
在一些实施方案中,如图8B所示,设备100在传感器阵列上未检测到输出信号,并且设备100确定(708)已发生纹路部接触830-3的手指抬离事件。作为响应,设备100退出(710)触控板模式,并且键盘821替换触摸屏上的触控板823。
在一些实施方案中,如图8C-1所示,基于设备响应于纹路部接触830-3的输出信号,该纹路部接触在尖端部到纹路部滚动手势(例如,如参考图8A-1至图8A-4所讨论的那些)之后并且未发生任何抬离事件,设备100确定(705)纹路部接触830-3保持在触控板823上。在一些实施方案中,如图8C-2所示,设备响应于接触的输出信号指示接触区域相比于图8C-1中的接触830-3已减小,并且随用户进一步反向滚动其手指(从指纹到指尖)或者更轻地按压,接触质心的位置已向上移动。
在一些实施方案中,如图8C-3进一步所监测,接触830-3的输出信号指示接触区域继续减小,并且随用户进一步反向滚动其手指或者更轻地按压触摸屏,接触质心继续向上移动。设备100可确定接触830-1对应于用户手指的指尖部分(“尖端部”)与触摸屏之间的接触。
在一些实施方案中,在检测到如参考图8C-1至图8C-3所讨论的用户手指在触摸屏上的接触的一个或多个参数(例如,区域大小、速度、质心移动等)的变化之后,设备100确定(716)已检测到纹路部到尖端部的反向滚动手势。作为响应,如图8C-3所示,设备100保持(718)触控板模式。然后,设备100检测到(719)第三手势(例如,抬离事件、接触的移动或另一滚动手势,诸如再滚动手势)。设备100继续确定(720)第三手势的手势类型。
在一些实施方案中,设备100检测到指尖接触830-1在触控板823上移动(726)。例如,如图8C-4所示,基于设备响应于接触830-1的输出信号,设备100检测到(719)接触830-1的质心的弯曲移动路径835。因此,设备100确定指尖接触830-1沿相同的弯曲路径移动(835)。作为响应,光标在内容呈现区域802中沿相同的弯曲路径移动(728)。在一些实施方案中,设备100继续检测(729)下一个手势(例如,接触的继续移动、抬离事件或另一滚动手势等)。然后,设备确定(720)指尖接触在触摸屏上的移动(例如,图8C-4中的移动835)之后的该下一手势的手势类型。
在一些实施方案中,如图8D所示,设备100在传感器阵列上未检测到输出信号,因此确定(722)已发生纹路部接触830-1的手指抬离事件。作为响应,设备100退出(724)触控板模式,并且键盘821替换触摸屏上的触控板823。
在一些实施方案中,如图8E-1所示,基于设备响应于指尖接触830-1的输出信号,该指尖接触在纹路部到尖端部的反向滚动手势(例如,如参考图8C-1至图8C-4所讨论的那些)之后并且未发生任何抬离事件,设备100确定(719)指尖接触830-1保持在触控板823上。在一些实施方案中,如图8E-2所示,设备响应于接触的输出信号指示接触区域相比于图8E-1中的接触830-1已增大,并且随用户进一步再滚动其手指(从指尖到指纹)或者更用力地按压,接触质心的位置已向下移动。
在一些实施方案中,如图8E-3进一步所监测,接触830-3的输出信号指示接触区域继续增大,并且随用户进一步再滚动其手指或者更用力地按压触摸屏,接触质心继续向下移动。设备100可确定接触830-3对应于用户手指的指纹部分(“纹路部”)与触摸屏之间的接触。
在一些实施方案中,在检测到如参考图8E-1至图8E-3所讨论的用户手指在触摸屏上的接触的一个或多个参数(例如,区域大小、速度、质心移动等)的变化之后,设备100确定(730)已检测到尖端部到纹路部的再滚动手势。作为响应,如图8E-3所示,设备100选择(732)触摸屏上的一个或多个对象(例如,文本、图像等)。在一些实施方案中,设备100选择与光标在触摸屏上所处的位置相关联的对象。
然后,设备100检测到(733)第四手势(例如,抬离事件、接触的移动或另一滚动手势等)。设备100继续确定(734)第四手势的类型。
在一些实施方案中,设备100检测到指纹接触830-3在触控板823上移动(740)。例如,如图8E-4所示,基于设备响应于接触830-3的输出信号,设备100可确定接触830-3的质心的弯曲移动路径860。在一些实施方案中,如图8E-4所示,设备100选择(742)显示在内容呈现区域802中的更多对象。例如,如图8E-4所示,所选择的更多文本定位成靠近弯曲路径860在内容呈现区域802中所通过的区域的位置处。
在一些实施方案中,设备100继续检测(743)下一个手势(例如,接触的继续移动、抬离事件或另一滚动手势等)。然后,设备确定(734)指纹接触在触摸屏上的移动(例如,图8E-4中的移动860)之后的该下一手势的手势类型。
在一些实施方案中,如图8F所示,设备100在传感器阵列上未检测到输出信号,因此确定(736)已发生纹路部接触830-3的手指抬离事件。作为响应,设备100退出(738)触控板模式,并且键盘821替换触摸屏上的触控板823。
图9A至图9D是根据一些实施方案的流程图,其示出使用单指滚动手势来激活触摸板模式的方法900。方法900在具有触摸屏显示器(例如,图1A中的触摸屏显示器112)的便携式多功能设备(例如,图1A中的设备100)处执行。如下文所述,方法900提供了用于在具有触摸屏显示器的便携式多功能设备处激活触控板模式的机制。该方法不需要便携式多功能设备包括接触强度传感器(例如,力传感器或压力传感器),因此降低了设计和制造便携式多功能设备的成本。该方法对于用户也是直观的,从而在激活触控板模式时减少来自用户的输入的数量、程度和/或性质,并且创建更有效的人机界面。更有效的输入机制也需要更少的计算资源,从而增大该设备的电池寿命。
如图9A所示,在包括与多个触摸传感器耦接的触敏显示器的电子设备处执行方法900,其中触敏显示器未与任何力传感器耦接。换句话讲,电子设备不能直接检测接触强度的变化,因为设备不具有任何力传感器。在一些实施方案中,该多个触摸传感器中的触摸传感器为电容触摸传感器。同样,在一些实施方案中,力传感器存在于设备中,但不用于执行方法900。
在执行方法900的过程中,设备将虚拟键盘显示(904)在触敏显示器上(例如,如图8A-1所示显示的虚拟键盘821)。设备还检测(906)来自多个触摸传感器中的至少一个触摸传感器的输出,输出指示与触敏显示器在虚拟键盘的至少一部分的上方的接触,其中接触包括触敏显示器上具有质心的区域。该输出的表示示出在图8A-1(在底部右下角)中,其中设备能够获得关于接触区域的信息,并且能够确定该区域的质心。
设备还检测(908)来自多个触摸传感器中的至少一个触摸传感器的输出的变化,输出的变化指示接触的区域已扩大并且质心已移动。例如,设备可正在检测使用户手指接触触敏显示器的不同区域的用户手指的滚动,该不同区域(i)比第一区域大并且(ii)具有与所述质心不同且分开的不同质心,不同质心在用户界面元素的至少一部分的上方。在一些实施方案中,设备监测来自触摸传感器的输出(例如,电容信号),以确定多个参数,包括接触的区域和质心的位置(除此之外,还包括下文更详细地讨论的那些)。这样,设备能够精细地区别不同类型的手势。示例在图8A-1至图8A-3中有所描述,其中用户提供了从图8A-1开始到图8A-3结束的滚动手势,并且这些图中每一者中的触摸传感器输出的表示示出了区域是如何扩大的以及质心是如何移动的。
本发明人已经发现,监测区域的扩大和质心的移动(以及其他输入特征,诸如电容传感器的饱和度、质心的移动速度和/或用户进行相对于触敏显示器的接触的手指的计算角度)均很重要,以便确定已检测到尖端部到纹路部的滚动手势。仅监测这些参数中的一者而不是二者无法有效地识别这些手势,从而给用户造成在不需要触控板模式时可能意外地调用触控板模式的困扰。
根据检测到的变化,设备将触敏显示器的至少一部分作为触控板来操作(910)并停止操作虚拟键盘(例如,使得触敏显示器的该部分的上方的输入控制在触敏显示器的该区域之外的另一区域中显示的光标的移动)。
允许用户在虚拟键盘上方滚动单指,然后将电子设备作为触控板来操作,这为用户提供了仅使用单指来快速地从键盘输入模式切换到触控板模式的便利方式;并且通过监测该区域的扩大以及质心的移动来检测该滚动,这确保手势被准确地检测到并且不与其他类型的手势混淆。在不包括力传感器的电子设备处提供这种交互,使这些设备的可操作性得到了增强,并且使这些设备上的人机界面更加有效(例如,通过允许用户使用简单手势来轻易地切换到触控板模式,而不必将时间浪费在不使用触控板模式而尝试放置光标来激活触控板模式上,或者不必将时间浪费在使用用户输入或菜单选项的复杂序列来激活触控板模式上)。
现转到图9B,在一些实施方案中,文本在触敏显示器上邻近所显示的虚拟键盘的区域中显示,并且光标在文本内的位置处显示。在继续将触敏显示器的一部分作为触控板来操作时,设备任选地检测(912)来自多个触摸传感器中的至少一个触摸传感器的输出的另外变化,输出的另外变化指示接触的区域已减小并且质心已移动(例如,用户手指的反向滚动,如图8C-1至图8C-3所述),并且响应于检测到输出的另外变化,设备保持光标在文本内的位置处的显示(912)(例如,用户可反向滚动以开始移动光标,但该反向滚动将不会使光标四处移动)。如图8C-3所示,在反向滚动手势完成之后,光标在区域802内的位置与其在图8C-1中反向滚动手势开始时的位置相同。
确保光标不会随用户在触敏显示器上方反向滚动其手指而移动(例如,保持其位置),这有助于确保基于用户的意图来准确的放置光标。当用户仅反向滚动其手指时,用户会在其开始移动光标之前这样做。另选地,反向滚动手势(例如,纹路部到尖端部的反向滚动)还可发生在用户移动光标之后,但其中用户未将其手指从触摸屏抬离。因此,通过在反向滚动期间将光标保持在合适位置中,设备的可操作性得到了增强,并且人机界面更有效地操作(例如,通过确保用户不需要浪费时间来逆转非预期的光标移动)。
在一些实施方案中,在检测到另外变化之后以及在继续将触敏显示器的一部分作为触控板来操作时,接触在触敏显示器上的移动使(914)光标移动到文本内的不同位置。例如,如图8C-4所示,接触836-3在触敏显示器112上的移动834引起光标在区域802内的对应移动。
在一些实施方案中,在继续将触敏显示器的一部分作为触控板来操作的同时:电子设备还检测(916)来自多个触摸传感器中的至少一个触摸传感器的输出的又一变化,该又一变化指示接触的区域已扩大并且质心已移动(例如,检测到另一尖端部到纹路部的手势);以及响应于检测到该又一变化,设备选择(916)文本的至少一部分。例如,如图8E-1至图8E-3所示,在设备已经将触敏显示器的一部分作为触控板来操作时,检测到新的滚动手势,并且因此响应于该新的滚动手势,选择区域802内的文本(如图8E-3所示)。
在一些实施方案中,电子设备检测到(918)接触从触敏显示器的抬离,并且作为响应,停止(918)将触敏显示器的一部分作为触控板来操作。例如,如图8F所示,在检测到接触840-3的抬离之后,设备然后停止将触敏显示器的一部分作为触控板来操作(如图8F所示)。
现转到图9C,在一些实施方案中,至少部分地基于由多个触摸传感器中的至少一个触摸传感器所寄存或所测量的电容信号来检测(920)输出以及输出的变化。至少部分地基于电容信号来检测输出以及输出的变化有助于确保手势被准确地检测到且不与其他类型的手势混淆,并且使不包括力传感器的设备能够准确地检测到新的手势类型,诸如本文所讨论的滚动/尖端部到纹路部手势。在不包括力传感器的电子设备处提供这种准确检测使这些设备的可操作性得到了增强,并且使这些设备上的人机界面更加有效(例如,通过允许用户使用简单手势来轻易地切换到触控板模式,而不必将时间浪费在不使用触控板模式而尝试放置光标来激活触控板模式上,或者不必将时间浪费在使用用户输入或菜单选项的复杂序列来激活触控板模式上)。
在一些实施方案中,基于以下各项中的一者或多者检测(922)输出的变化:(i)质心的移动速度;(ii)区域的尺寸变化;(iii)多个触摸传感器中的至少一个触摸传感器的饱和度水平;以及(iv)用户进行相对于触敏显示器的接触的手指的计算角度。
在一些实施方案中,基于质心的移动速度来进一步检测(924)输出的变化。
在一些实施方案中,基于区域的尺寸变化来进一步检测(926)输出的变化。
在一些实施方案中,基于多个触摸传感器中的至少一个触摸传感器的饱和度水平来进一步检测(928)输出的变化。
在一些实施方案中,基于用户进行相对于触敏显示器的接触的手指的计算角度来进一步检测(930)输出的变化。
通过监测上文(相对于操作922至操作930)所讨论的其他数据片来检测输出以及输出的变化有助于确保手势被准确地检测到且不与其他类型的手势混淆,并且使不包括力传感器的设备能够准确地检测到新的手势类型,诸如本文所讨论的滚动/尖端部到纹路部的手势。监测该另外数据有助于改善在不包括力传感器的电子设备处检测该新手势的准确性,从而增强这些设备的可操作性,并且使这些设备上的人机界面更加有效(例如,通过确保手势被准确地检测到,用户将不必浪费时间来逆转不期望功能的激活)。
现转到图9D,在一些实施方案中,结合(例如,与其同时)将触敏显示器的一部分作为触控板来操作,提供触觉/触知反馈。例如,一旦检测到尖端部到纹路部的滚动手势(例如,检测到接触区域的扩大和质心的移动),即在将触敏显示器的一部分切换成触控板来操作的同时,提供触觉/触知反馈。
在一些实施方案中,滚动手势可用于补充或替代上文所讨论的延长接触手势。如此,上文所讨论的关于用于调用触控板模式的延长接触手势(例如,方法600)的特征可用于补充此处所讨论的关于滚动手势的特征。
应当理解,对图9A至图9D中已经进行描述的操作的具体顺序仅仅是一个示例,并非旨在表明所述顺序是可以执行这些操作的唯一顺序。本领域普通技术人员将想到多种方式来对本文所述的操作进行重新排序,并且/或者将这些操作与参考图4、图7以及图6A至图6F所述的操作以多种方式组合。
出于解释的目的,前面的描述是通过参考具体实施方案来描述的。然而,上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择和描述实施方案是为了最佳地阐明本发明的原理及其实际应用,以便由此使得本领域的其他技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施方案。

Claims (55)

1.一种方法,包括:
在电子设备处,所述电子设备包括触敏显示器,所述触敏显示器与多个触摸传感器耦接,其中所述触敏显示器未与任何力传感器耦接:
在所述触敏显示器上显示虚拟键盘,所述虚拟键盘包括空格键和其他键的显示表示;
检测所述虚拟键盘上方的第一延长接触;
根据确定所述第一延长接触在所述其他键的任何所述相应显示表示的上方,将所述第一延长接触解释为键盘输入,并且激活对应的扩展键盘功能;以及
检测所述虚拟键盘上方的第二延长接触;以及
根据确定所述第二延长接触在所述空格键的相应显示表示的上方,将所述第二延长接触解释为模式切换输入,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。
2.根据权利要求1所述的方法,还包括,
在作为所述触控板来操作的同时:
检测所述第二延长接触从所述触敏显示器的抬离;以及
响应于检测到所述第二延长接触的所述抬离,确定所述抬离前所述第二延长接触在所述触敏显示器上的任何移动是否满足移动参数。
3.根据权利要求2所述的方法,还包括:
确定所述抬离前所述第二延长接触在所述触敏显示器上的移动不满足所述移动参数,并且作为响应,停止将所述触敏显示器的所述一部分作为所述触控板来操作。
4.根据权利要求3所述的方法,其中所述确定所述抬离前所述第二延长接触在所述触敏显示器上的移动不满足所述移动参数包括确定所述抬离前所述第二延长接触在所述触敏显示器上移动的距离小于预先确定的距离。
5.根据权利要求3所述的方法,其中所述确定所述抬离前所述第二延长接触在所述触敏显示器上的移动不满足所述移动参数包括确定所述抬离前所述第二延长接触在所述触敏显示器上移动的速度以小于预先确定的速度。
6.根据权利要求2所述的方法,还包括:
确定所述抬离前所述第二延长接触在所述触敏显示器上的移动满足所述移动参数,并且作为响应,继续将所述触敏显示器的所述一部分作为所述触控板来操作以保持至少预先确定的时间量。
7.根据权利要求1所述的方法,还包括:
在检测到所述第二延长接触从所述触敏显示器抬离之后,继续将所述触敏显示器的所述一部分作为所述触控板来操作以保持至少预先确定的时间量。
8.根据权利要求7所述的方法,其中在所述第二延长接触已与所述触敏显示器保持接触至少第二预先确定的时间量之后,调用所述触控板;并且所述第二预先确定的时间量小于所述预先确定的时间量。
9.根据权利要求7所述的方法,还包括:根据确定在检测到所述第二延长接触的所述抬离之后的所述预先确定的时间量内,在所述触敏显示器的所述一部分的上方未检测到输入,停止将所述触敏显示器的所述一部分作为所述触控板来操作。
10.根据权利要求6或7中任一项所述的方法,还包括:
在将所述触敏显示器的所述一部分作为所述触控板来操作时检测所述触敏显示器上的双击输入,在检测到所述第二延长接触的所述抬离之后的一定时间量内检测到所述双击输入;以及,
响应于检测到所述双击输入,选择在所述触敏显示器上显示的对象。
11.根据权利要求10所述的方法,还包括:检测所述双击输入之后的拖动手势,并且作为响应,随所述拖动手势移动来选择更多所述对象。
12.根据权利要求1至8或11所述的方法,其中所述其他键的任何所述相应显示表示上方的延长接触使对应的扩展键盘功能激活,并且不会使所述电子设备将所述触敏显示器的任何部分作为所述触控板来操作。
13.根据权利要求12所述的方法,其中:
所述虚拟键盘显示在所述触敏显示器的区域中,并且所述其他键的每个所述显示表示包括相应的显示符号,并且其中
将所述触敏显示器的至少所述一部分作为所述触控板来操作包括(i)将所述区域作为所述触控板的一部分来操作,以及(ii)停止显示所述虚拟键盘的所述显示符号中的至少一些。
14.根据权利要求1至8或11中任一项所述的方法,还包括:
检测第三延长接触,所述第三延长接触在所述虚拟键盘的一部分的上方,所述虚拟键盘的所述一部分在所述空格键的所述显示表示的下方,其中所述虚拟键盘的所述一部分不包括任何所述其他键;以及
根据确定所述第三延长接触在所述虚拟键盘的所述一部分的上方,将所述第三延长接触解释为模式切换输入,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。
15.根据权利要求1至8或11中任一项所述的方法,在作为所述触控板来操作时,所述触敏显示器处至少所述部分上方的任何输入控制在所述触敏显示器的另一部分中显示的光标的移动。
16.根据权利要求1至8或11中任一项所述的方法,其中所述虚拟键盘的所述其他键中的至少一些键分别与对应的键盘功能相关联并且与对应的扩展键盘功能相关联,所述对应的键盘功能响应于所述键上方的瞬时接触而激活,所述对应的扩展键盘功能响应于所述键上方的延长接触而激活。
17.根据权利要求1至8或11中任一项所述的方法,其中所述第一延长接触和所述第二延长接触持续至少延长接触检测时间阈值。
18.根据权利要求1至8或11中任一项所述的方法,还包括:
与将所述触敏显示器的所述一部分的操作调用为所述触控板相结合来提供触觉反馈。
19.根据权利要求1至8或11中任一项所述的方法,其中所述显示的虚拟键盘不包括功能(fn)键。
20.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储可执行指令,所述可执行指令在由具有触敏显示器的电子设备的一个或多个处理器执行时使所述电子设备执行以下各项操作,其中所述电子设备未与任何力传感器耦接:
在所述触敏显示器上显示虚拟键盘,所述虚拟键盘包括空格键和其他键的显示表示;
检测所述虚拟键盘上方的第一延长接触;
根据确定所述第一延长接触在所述其他键的任何所述相应显示表示的上方,将所述第一延长接触解释为键盘输入并且激活对应的扩展键盘功能;以及
检测所述虚拟键盘上方的第二延长接触;并且
根据确定所述第二延长接触在所述空格键的相应显示表示的上方,将所述第二延长接触解释为模式切换输入,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。
21.根据权利要求20所述的非暂态计算机可读存储介质,其中所述可执行指令还使所述电子设备执行根据权利要求2至19中任一项所述的方法。
22.一种电子设备,包括:
一个或多个处理器;
触敏显示器;和
存储器,所述存储器存储一个或多个程序,所述一个或多个程序被配置为用于由所述一个或多个处理器执行,其中所述电子设备未与任何力传感器耦接,并且其中所述一个或多个程序包括用于以下操作的指令:
在所述触敏显示器上显示虚拟键盘,所述虚拟键盘包括空格键和其他键的显示表示;
检测所述虚拟键盘上方的第一延长接触;
根据确定所述第一延长接触在所述其他键的任何所述相应显示表示的上方,将所述第一延长接触解释为键盘输入并且激活对应的扩展键盘功能;以及
检测所述虚拟键盘上方的第二延长接触;并且
根据确定所述第二延长接触在所述空格键的相应显示表示的上方,将所述第二延长接触解释为模式切换输入,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。
23.根据权利要求22所述的电子设备,其中所述一个或多个程序还包括指令,所述指令用于执行根据权利要求2至19中任一项所述的方法。
24.一种电子设备,所述电子设备具有触敏次级显示器,其中所述电子设备未与任何力传感器耦接并且所述电子设备包括:
用于将虚拟键盘在所述触敏显示器上显示的装置,所述虚拟键盘包括空格键和其他键的显示表示;
用于检测所述虚拟键盘上方的第一延长接触的装置;
根据确定所述第一延长接触在所述其他键的任何所述相应显示表示的上方,用于将所述第一延长接触解释为键盘输入并且激活对应的扩展键盘功能的装置;和
用于检测所述虚拟键盘上方的第二延长接触的装置;和
根据确定所述第二延长接触在所述空格键的相应显示表示的上方,用于将所述第二延长接触解释为模式切换输入的装置,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。
25.根据权利要求24所述的电子设备,其中所述电子设备还包括用于执行根据权利要求2至19中任一项所述方法的装置。
26.一种信息处理设备,所述信息处理设备用于在电子设备中使用,所述电子设备包括触敏次级显示器,其中所述电子设备未与任何力传感器耦接,所述信息处理设备包括:
用于将虚拟键盘在所述触敏显示器上显示的装置,所述虚拟键盘包括空格键和其他键的显示表示;
用于检测所述虚拟键盘上方的第一延长接触的装置;
根据确定所述第一延长接触在所述其他键的任何所述相应显示表示的上方,用于将所述第一延长接触解释为键盘输入并且激活对应的扩展键盘功能的装置;和
用于检测所述虚拟键盘上方的第二延长接触的装置;和
根据确定所述第二延长接触在所述空格键的相应显示表示的上方,用于将所述第二延长接触解释为模式切换输入的装置,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。
27.根据权利要求26所述的信息处理设备,其中所述电子设备未与任何力传感器耦接,并且其中所述信息处理设备还包括用于执行根据权利要求2至19中任一项所述方法的装置。
28.一种信息处理设备,所述信息处理设备用于在电子设备中使用,所述电子设备包括触敏次级显示器,其中所述电子设备未与任何力传感器耦接,所述信息处理设备包括:
用于将虚拟键盘在所述触敏显示器上显示的装置,所述虚拟键盘包括空格键和其他键的显示表示;
用于检测所述虚拟键盘上方的第一延长接触的装置;
根据确定所述第一延长接触在所述其他键的任何所述相应显示表示的上方,用于将所述第一延长接触解释为键盘输入并且激活对应的扩展键盘功能的装置;和
用于检测所述虚拟键盘上方的第二延长接触的装置;和
根据确定所述第二延长接触在所述空格键的相应显示表示的上方,用于将所述第二延长接触解释为模式切换输入的装置,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。
29.根据权利要求28所述的信息处理设备,其中所述电子设备未与任何力传感器耦接,并且其中所述信息处理设备还包括用于执行根据权利要求2至19中任一项所述方法的装置。
30.一种用于电子设备的图形用户界面,所述电子设备具有一个或多个处理器、存储器以及触敏次级显示器,其中所述电子设备未与任何力传感器耦接,并且所述一个或多个处理器执行存储在所述存储器中的一个或多个程序,所述图形用户界面包括根据执行以下各项所显示的用户界面:
在所述触敏显示器上显示虚拟键盘,所述虚拟键盘包括空格键和其他键的显示表示;
检测所述虚拟键盘上方的第一延长接触;
根据确定所述第一延长接触在所述其他键的任何所述相应显示表示的上方,将所述第一延长接触解释为键盘输入并且激活对应的扩展键盘功能;以及
检测所述虚拟键盘上方的第二延长接触;并且
根据确定所述第二延长接触在所述空格键的相应显示表示的上方,将所述第二延长接触解释为模式切换输入,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。
31.根据权利要求30所述的图形用户界面,其中所述图形用户界面还包括根据权利要求2至19所述方法中的任一项所显示的用户界面。
32.一种电子设备,所述电子设备包括触敏显示器,所述触敏显示器与多个触摸传感器耦接,其中所述触敏显示器未与任何力传感器耦接,所述电子设备还包括存储器和一个或多个处理器,所述一个或多个处理器与所述多个触摸传感器和所述触敏显示器耦接,所述存储器包括可执行指令,所述可执行指令在由所述一个或多个处理器执行时使所述电子设备执行以下各项:
在所述触敏显示器上显示虚拟键盘,所述虚拟键盘包括空格键和其他键的显示表示;
检测所述触敏显示器处的延长接触;
根据确定所述延长接触在所述其他键的任何所述相应显示表示的上方,将所述延长接触解释为键盘输入并且激活对应的键盘功能;并且
根据确定所述延长接触在所述空格键的相应显示表示的上方,将所述延长接触解释为模式切换输入,所述模式切换输入使所述电子设备将所述触敏显示器的至少一部分作为触控板来操作。
33.根据权利要求32所述的电子设备,其中所述可执行指令在由所述一个或多个处理器执行时还使所述电子设备执行根据权利要求2至19中任一项所述的方法。
34.一种方法,包括:
在电子设备处,所述电子设备包括触敏显示器,所述触敏显示器与多个触摸传感器耦接,其中所述触敏显示器未与任何力传感器耦接:
在所述触敏显示器上显示虚拟键盘;
检测来自所述多个触摸传感器中的至少一个触摸传感器的输出,所述输出指示与所述触敏显示器在所述虚拟键盘的至少一部分的上方的接触,其中所述接触包括所述触敏显示器上具有质心的区域;
检测来自所述多个触摸传感器中的至少一个触摸传感器的所述输出的变化,所述输出的所述变化指示所述接触的所述区域已扩大并且所述质心已移动;以及
根据检测到所述变化,将所述触敏显示器的至少一部分作为触控板来操作并且停止操作所述虚拟键盘。
35.根据权利要求34所述的方法,其中至少部分地基于由所述多个触摸传感器中的至少一个触摸传感器所寄存的电容信号来检测所述输出以及所述输出的所述变化。
36.根据权利要求34所述的方法,其中基于以下各项中的一者或多者来检测所述输出的所述变化:(i)所述质心的移动速度;(ii)所述区域的尺寸变化;(iii)所述多个触摸传感器中的至少一个触摸传感器的饱和度水平;以及(iv)用户进行相对于所述触敏显示器的所述接触的手指的计算角度。
37.根据权利要求34所述的方法,其中基于所述质心的移动速度来进一步检测所述输出的所述变化。
38.根据权利要求34所述的方法,其中基于所述区域的尺寸变化来进一步检测所述输出的所述变化。
39.根据权利要求34所述的方法,其中基于所述多个触摸传感器中的至少一个触摸传感器的饱和度水平来进一步检测所述输出的所述变化。
40.根据权利要求34所述的方法,其中基于用户进行相对于所述触敏显示器的所述接触的手指的计算角度来进一步检测所述输出的所述变化。
41.根据权利要求34至40中任一项所述的方法,还包括:
与将所述触敏显示器的所述一部分的操作调用为所述触控板相结合来由所述电子设备提供触觉反馈。
42.根据权利要求34至40中任一项所述的方法,其中文本在所述触敏显示器上邻近所显示的虚拟键盘的区域中显示,光标在所述文本内的位置处显示,并且所述方法还包括,在继续将所述触敏显示器的所述一部分作为所述触控板来操作的同时:
检测来自所述多个触摸传感器中的至少一个触摸传感器的所述输出的另外变化,所述输出的所述另外变化指示所述接触的所述区域已减小并且所述质心已移动;以及
响应于检测到所述输出的所述另外变化,将所述光标的显示保持在所述文本内的所述位置处。
43.根据权利要求42所述的方法,其中在检测到所述另外变化之后以及在继续将所述触敏显示器的所述一部分作为所述触控板来操作时,所述接触在所述触敏显示器上的移动使所述光标移动到所述文本内的不同位置。
44.根据权利要求42所述的方法,还包括:
在继续将所述触敏显示器的所述一部分作为所述触控板来操作的同时:
检测来自所述多个触摸传感器中的至少一个触摸传感器的所述输出的又一变化,所述又一变化指示所述接触的所述区域已扩大并且所述质心已移动;以及
响应于检测到所述又一变化,选择所述文本的至少一部分。
45.根据权利要求44所述的方法,还包括:
检测所述接触从所述触敏显示器的抬离,并且作为响应,停止将所述触敏显示器的所述一部分作为所述触控板来操作。
46.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储可执行指令,所述可执行指令在由具有触敏显示器的电子设备的一个或多个处理器执行时使所述电子设备执行以下各项操作,其中所述电子设备未与任何力传感器耦接:
在所述触敏显示器上显示虚拟键盘;
检测来自所述多个触摸传感器中的至少一个触摸传感器的输出,所述输出指示与所述触敏显示器在所述虚拟键盘的至少一部分的上方的接触,其中所述接触包括所述触敏显示器上具有质心的区域;
检测来自所述多个触摸传感器中的至少一个触摸传感器的所述输出的变化,所述输出的所述变化指示所述接触的所述区域已扩大并且所述质心已移动;以及
根据检测到所述变化,将所述触敏显示器的至少一部分作为触控板来操作并且停止操作所述虚拟键盘。
47.根据权利要求46所述的非暂态计算机可读存储介质,其中所述可执行指令还使所述电子设备执行根据权利要求35至45中任一项所述的方法。
48.一种电子设备,包括:
一个或多个处理器;
触敏显示器;和
存储器,所述存储器存储一个或多个程序,所述一个或多个程序被配置为用于由所述一个或多个处理器执行,其中所述电子设备未与任何力传感器耦接,并且其中所述一个或多个程序包括用于以下操作的指令:
在所述触敏显示器上显示虚拟键盘;
检测来自所述多个触摸传感器中的至少一个触摸传感器的输出,所述输出指示与所述触敏显示器在所述虚拟键盘的至少一部分的上方的接触,其中所述接触包括所述触敏显示器上具有质心的区域;
检测来自所述多个触摸传感器中的至少一个触摸传感器的所述输出的变化,所述输出的所述变化指示所述接触的所述区域已扩大并且所述质心已移动;以及
根据检测到所述变化,将所述触敏显示器的至少一部分作为触控板来操作并且停止操作所述虚拟键盘。
49.根据权利要求48所述的电子设备,其中所述电子设备未与任何力传感器耦接,并且所述一个或多个程序还包括指令,所述指令用于执行根据权利要求35至45中任一项所述的方法。
50.一种电子设备,所述电子设备具有触敏次级显示器,其中所述电子设备未与任何力传感器耦接并且所述电子设备包括:
用于在所述触敏显示器上显示虚拟键盘的装置;
用于检测来自所述多个触摸传感器中的至少一个触摸传感器的输出的装置,所述输出指示与所述触敏显示器在所述虚拟键盘的至少一部分的上方的接触,其中所述接触包括所述触敏显示器上具有质心的区域;
用于检测来自所述多个触摸传感器中的至少一个触摸传感器的所述输出的变化的装置,所述输出的所述变化指示所述接触的所述区域已扩大并且所述质心已移动;和
根据检测到所述变化,用于将所述触敏显示器的至少一部分作为触控板来操作的装置,以及用于停止操作所述虚拟键盘的装置。
51.根据权利要求50所述的电子设备,其中所述电子设备未与任何力传感器耦接,并且所述电子设备还包括用于执行根据权利要求35至45中任一项所述方法的装置。
52.一种信息处理设备,所述信息处理设备用于在电子设备中使用,所述电子设备包括触敏次级显示器,其中所述电子设备未与任何力传感器耦接,所述信息处理设备包括:
用于在所述触敏显示器上显示虚拟键盘的装置;
用于检测来自所述多个触摸传感器中的至少一个触摸传感器的输出的装置,所述输出指示与所述触敏显示器在所述虚拟键盘的至少一部分的上方的接触,其中所述接触包括所述触敏显示器上具有质心的区域;
用于检测来自所述多个触摸传感器中的至少一个触摸传感器的所述输出的变化的装置,所述输出的所述变化指示所述接触的所述区域已扩大并且所述质心已移动;和
根据检测到所述变化,用于将所述触敏显示器的至少一部分作为触控板来操作的装置,以及用于停止操作所述虚拟键盘的装置。
53.根据权利要求52所述的信息处理设备,其中所述电子设备未与任何力传感器耦接,并且其中所述信息处理设备还包括用于执行根据权利要求35至45中任一项所述方法的装置。
54.一种用于电子设备的图形用户界面,所述电子设备具有一个或多个处理器、存储器以及触敏次级显示器,其中所述电子设备未与任何力传感器耦接,并且所述一个或多个处理器执行存储在所述存储器中的一个或多个程序,所述图形用户界面包括根据执行以下各项所显示的用户界面:
在所述触敏显示器上显示虚拟键盘;
检测来自所述多个触摸传感器中的至少一个触摸传感器的输出,所述输出指示与所述触敏显示器在所述虚拟键盘的至少一部分的上方的接触,其中所述接触包括所述触敏显示器上具有质心的区域;
检测来自所述多个触摸传感器中的至少一个触摸传感器的所述输出的变化,所述输出的所述变化指示所述接触的所述区域已扩大并且所述质心已移动;以及
根据检测到所述变化,将所述触敏显示器的至少一部分作为触控板来操作并且停止操作所述虚拟键盘。
55.根据权利要求54所述的图形用户界面,其中所述图形用户界面还包括根据权利要求35至45所述方法中的任一项所显示的用户界面。
CN201811143385.1A 2018-06-03 2018-09-28 用于在具有触敏显示器且不具有力传感器的电子设备处激活并使用触控板的系统和方法 Pending CN110554827A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP19732176.3A EP3803561A1 (en) 2018-06-03 2019-05-31 Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors
PCT/US2019/034827 WO2019236399A1 (en) 2018-06-03 2019-05-31 Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors
AU2019100594A AU2019100594B4 (en) 2018-06-03 2019-06-03 Systems and methods for activating and using a trackpad at an electronic device with a touch sensitive display and no force sensors

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201862679964P 2018-06-03 2018-06-03
US62/679,964 2018-06-03
DKPA201870337 2018-06-11
DKPA201870337 2018-06-11

Publications (1)

Publication Number Publication Date
CN110554827A true CN110554827A (zh) 2019-12-10

Family

ID=68736156

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811143385.1A Pending CN110554827A (zh) 2018-06-03 2018-09-28 用于在具有触敏显示器且不具有力传感器的电子设备处激活并使用触控板的系统和方法

Country Status (3)

Country Link
EP (1) EP3803561A1 (zh)
CN (1) CN110554827A (zh)
WO (1) WO2019236399A1 (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090115831A (ko) * 2008-05-04 2009-11-09 심상정 다중 접촉 터치패드를 위한 누름 스위치
US20100085313A1 (en) * 2008-10-07 2010-04-08 Research In Motion Limited Portable electronic device and method of secondary character rendering and entry
US20100287486A1 (en) * 2009-05-07 2010-11-11 Microsoft Corporation Correction of typographical errors on touch displays
US20120242581A1 (en) * 2011-03-17 2012-09-27 Kevin Laubach Relative Touch User Interface Enhancements
US20130024820A1 (en) * 2011-05-27 2013-01-24 Google Inc. Moving a graphical selector
US20130321280A1 (en) * 2012-05-31 2013-12-05 Research In Motion Limited Method and System for Rendering Diacritic Characters
CN104756060A (zh) * 2012-10-16 2015-07-01 谷歌公司 基于手势的光标控制
CN106095215A (zh) * 2015-03-19 2016-11-09 苹果公司 触摸输入光标操控
JP2017009788A (ja) * 2015-06-22 2017-01-12 カシオ計算機株式会社 楽音発生装置、楽音発生方法、プログラムおよび電子楽器
CN107636593A (zh) * 2015-06-07 2018-01-26 苹果公司 用于提供虚拟绘图辅助工具和与其进行交互的设备、方法和图形用户界面

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090115831A (ko) * 2008-05-04 2009-11-09 심상정 다중 접촉 터치패드를 위한 누름 스위치
US20100085313A1 (en) * 2008-10-07 2010-04-08 Research In Motion Limited Portable electronic device and method of secondary character rendering and entry
US20100287486A1 (en) * 2009-05-07 2010-11-11 Microsoft Corporation Correction of typographical errors on touch displays
US20120242581A1 (en) * 2011-03-17 2012-09-27 Kevin Laubach Relative Touch User Interface Enhancements
US20130024820A1 (en) * 2011-05-27 2013-01-24 Google Inc. Moving a graphical selector
US20130321280A1 (en) * 2012-05-31 2013-12-05 Research In Motion Limited Method and System for Rendering Diacritic Characters
CN104756060A (zh) * 2012-10-16 2015-07-01 谷歌公司 基于手势的光标控制
CN106095215A (zh) * 2015-03-19 2016-11-09 苹果公司 触摸输入光标操控
CN107636593A (zh) * 2015-06-07 2018-01-26 苹果公司 用于提供虚拟绘图辅助工具和与其进行交互的设备、方法和图形用户界面
JP2017009788A (ja) * 2015-06-22 2017-01-12 カシオ計算機株式会社 楽音発生装置、楽音発生方法、プログラムおよび電子楽器

Also Published As

Publication number Publication date
WO2019236399A1 (en) 2019-12-12
EP3803561A1 (en) 2021-04-14

Similar Documents

Publication Publication Date Title
US20220100368A1 (en) User interfaces for improving single-handed operation of devices
US11941243B2 (en) Handwriting keyboard for screens
EP3335103B1 (en) Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
CN107430488B (zh) 基于活动的阈值和反馈
US11119653B2 (en) Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors
CN112711375B (zh) 设备配置用户界面
CN113093970B (zh) 使用可旋转输入机构来控制系统缩放放大率
US10691330B2 (en) Device, method, and graphical user interface for force-sensitive gestures on the back of a device
US11669243B2 (en) Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors
WO2016196508A1 (en) Formatting content for a reduced-size user interface
US11023091B2 (en) Device, method, and graphical user interface for improving visibility of affordances
US20180088750A1 (en) Devices, Methods, and Graphical User Interfaces for Creating and Displaying Application Windows
CN112214147A (zh) 多个视图之间的移动
US10540071B2 (en) Device, method, and graphical user interface for displaying a zoomed-in view of a user interface
US11287960B2 (en) Device, method, and graphical user interface for moving drawing objects
AU2019100594B4 (en) Systems and methods for activating and using a trackpad at an electronic device with a touch sensitive display and no force sensors
CN110554827A (zh) 用于在具有触敏显示器且不具有力传感器的电子设备处激活并使用触控板的系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination