CN113031830B - 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面 - Google Patents

用于与强度敏感输入区域进行交互的设备、方法和图形用户界面 Download PDF

Info

Publication number
CN113031830B
CN113031830B CN202110516449.3A CN202110516449A CN113031830B CN 113031830 B CN113031830 B CN 113031830B CN 202110516449 A CN202110516449 A CN 202110516449A CN 113031830 B CN113031830 B CN 113031830B
Authority
CN
China
Prior art keywords
input
intensity
contact
touch
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110516449.3A
Other languages
English (en)
Other versions
CN113031830A (zh
Inventor
B·T·格里森
B·E·兰伯森
C·穆赛特
M·S·科迪尔
M·A·麦克莱恩
M·J·拜氏
T·M·米勒
J·L·马特里克
J-P·M·穆耶索斯
P·C·蔡
M·L·L·麦卡锡
D·H·布卢姆
何苗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Priority to CN202110516449.3A priority Critical patent/CN113031830B/zh
Publication of CN113031830A publication Critical patent/CN113031830A/zh
Application granted granted Critical
Publication of CN113031830B publication Critical patent/CN113031830B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105—Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本公开涉及用于与强度敏感输入区域进行交互的设备、方法和图形用户界面。具有第一显示器外输入区域的电子设备检测输入区域上的输入的第一部分。响应于输入的第一部分：当输入的第一部分满足第一标准而第一输入的特征强度未增大到高于第一强度阈值时，设备提供指示设备的第一属性的当前状态的第一输出而不改变第一属性。设备检测输入的第二部分。响应于输入的第二部分：如果第一输入的第二部分满足要求输入的特征强度增大到高于第一强度阈值的第二标准，则设备执行改变设备的第一属性的第一操作；否则，设备放弃执行第一操作。

Description

用于与强度敏感输入区域进行交互的设备、方法和图形用户 界面
本申请是基于申请日为2019年05月07日、申请号为2019800374195、发明名称为“用于与强度敏感输入区域进行交互的设备、方法和图形用户界面”的中国发明专利申请的分案申请。
技术领域
本发明整体涉及具有显示器和强度敏感输入区域的电子设备，包括但不限于具有显示器和强度敏感的显示器外输入区域的电子设备。
背景技术
许多具有显示器的电子设备包括机械按钮，诸如机械主按钮、音量按钮和电源按钮。但是除了固定按下点击和固定松开点击之外，机械按钮向用户提供很少(如果有的话)的反馈。一些设备在设备的显示器侧上具有固态主按钮来取代机械主按钮。显示器侧固态主按钮与触觉输出发生器耦接，当固态主按钮被按压输入激活时，触觉输出发生器生成触觉输出以模拟各种类型的机械按钮点击。固态主按钮是机械主按钮的近似模拟，并且被指定用于由几种类型的按压输入触发的非常有限的一组功能。显示器侧固态按钮还占据设备显示器侧上的宝贵空间，从而减小了便携式电子设备上的视觉信息的可用显示区域。
发明内容
因此，需要具有用于在与显示器外输入区域(例如，强度敏感侧按钮或表面)交互期间提供视觉、触觉和/或音频反馈的改进方法和界面的电子设备，使得用户界面的操纵对于用户而言更有效而且更直观。还需要具有用于提供附加功能而不会因更多虚拟控件使显示器杂乱或因更多硬件控件使设备的表面拥挤的改进方法和界面的电子设备。此类方法和界面任选地补充或取代用于在使用按钮与设备进行交互期间提供附加功能控件和提供反馈的常规方法。此类方法和界面通过帮助用户理解所提供的输入与设备对这些输入的响应之间的联系并且减少用户输入错误，减少了用户需要提供的输入的数量和程度，从而形成了更有效的人机界面。
所公开的设备减少或消除了与用于具有按钮的电子设备的用户界面相关联的上述缺陷和其他问题，该设备包括一个或多个强度敏感输入区域(例如，显示器外的强度敏感按钮或位于设备的周边侧上的表面)。在一些实施例中，该设备是台式计算机。在一些实施例中，该设备是便携式的(例如，笔记本电脑、平板电脑或手持设备)。在一些实施例中，该设备是个人电子设备(例如，可穿戴电子设备，诸如手表)。在一些实施例中，该设备具有触控板。在一些实施例中，该设备具有触敏显示器(也称为“触摸屏”或“触摸屏显示器”)。在一些实施例中，该设备具有图形用户界面(GUI)、一个或多个处理器、存储器和一个或多个模块、被存储在存储器中以用于执行多个功能的程序或指令集。在一些实施例中，用户主要通过触笔和/或手指接触以及触敏表面上的手势来与GUI进行交互。在一些实施例中，这些功能任选地包括图像编辑、绘图、演示、文字处理、电子表格制作、玩游戏、接打电话、视频会议、收发电子邮件、即时消息通信、健身支持、数字摄影、数字视频录制、网页浏览、数字音乐播放、记笔记和/或数字视频播放。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。
根据一些实施例，在具有显示器和与所述显示器分开的第一输入区域的电子设备处执行一种方法。所述方法包括：检测所述第一输入区域上的第一输入的第一部分；响应于检测到所述第一输入的所述第一部分：根据确定所述第一输入的所述第一部分满足第一标准，其中所述第一标准包括当在所述第一输入区域上检测到所述第一输入而所述第一输入的特征强度未增大到高于第一强度阈值时满足的一组标准，提供指示所述设备的第一属性的当前状态的第一输出而不改变所述设备的所述第一属性；检测所述输入的第二部分，包括检测所述第一输入的强度增大；并且响应于检测到所述第一输入的所述第二部分：根据确定在检测到所述第一输入的结束之前所述第一输入的所述第二部分满足第二标准，其中所述第二标准包括当所述第一输入的所述特征强度增大到高于所述第一强度阈值时满足的一组标准，执行改变所述设备的所述第一属性的第一操作；并且根据确定所述第一输入的所述第二部分不满足所述第二标准，放弃执行改变所述设备的所述第一属性的所述第一操作。
根据一些实施例，在具有显示器和与所述显示器分开的第一输入区域的电子设备处执行一种方法。所述方法包括：检测所述第一输入区域上的第一输入的第一部分；响应于检测到所述第一输入区域上的所述第一输入的所述第一部分：根据确定所述第一输入的所述第一部分满足第一标准，其中所述第一标准包括当在所述第一输入区域上检测到所述第一输入而所述第一输入的特征强度未增大到高于第一强度阈值时满足的一组标准，在所述显示器上显示包括一个或多个可选选项的用户界面对象的前导对象；当在所述显示器上显示所述前导对象时，检测第一输入区域上的所述第一输入的第二部分，包括检测高于所述第一强度阈值的所述第一输入的强度增大；并且响应于在所述第一输入的所述第二部分期间检测到所述第一输入的所述强度增大，使所述用户界面对象在所述显示器上显现根据所述第一输入的当前强度而变化的量。
根据一些实施例，在具有显示器、不同于所述显示器并且包括第一子区域和第二子区域的输入区域的电子设备处执行一种方法。所述方法包括：检测所述输入区域上的输入；响应于检测到所述输入区域上的所述输入：根据确定所述输入满足第一标准，其中所述第一标准要求当在所述输入区域的所述第一子区域中检测到所述输入时高于第一强度阈值的所述输入的强度的增大，以便满足所述第一标准，以第一方式修改所述设备的第一参数；根据确定所述输入满足不同于所述第一标准的第二标准，其中所述第二标准要求当在所述输入区域的不同于所述第一子区域的所述第二子区域中检测到所述输入时高于所述第一强度阈值的所述输入的强度的增大，以便满足所述第二标准，以不同于所述第一方式的第二方式修改所述设备的所述第一参数；并且根据确定所述输入未增大到高于所述第一强度阈值，放弃以所述第一方式修改所述设备的所述第一参数并且放弃以所述第二方式修改所述设备的所述第一参数。
根据一些实施例，在具有显示器、一个或多个相机和多个触觉输出发生器的电子设备处执行一种方法，所述多个触觉发生器包括在所述设备中的第一位置处的第一触觉输出发生器和在所述设备中的第二位置处的第二触觉输出发生器。所述方法包括：在所述设备处于媒体捕获模式时，执行相应任务：检测所述设备的所述一个或多个相机的视场中的一个或多个对象满足第一标准；并且响应于检测到所述一个或多个相机的所述视场中的所述一个或多个对象满足所述第一标准，利用所述多个触觉输出发生器中的一个或多个触觉输出发生器生成提示所述一个或多个相机的所述视场沿相应方向的移动的触觉输出，其中生成提示所述一个或多个相机的所述视场沿所述相应方向的移动的所述触觉输出包括：根据基于所述相机的所述视场中的所述一个或多个对象确定所述相机的所述视场需要沿第一方向移位以继续执行所述相应任务，生成第一触觉输出，所述第一触觉输出提示所述一个或多个相机的所述视场沿所述第一方向的移动；并且根据基于所述相机的所述视场中的所述一个或多个对象确定所述相机的所述视场需要沿不同于所述第一方向的第二方向移位以继续执行所述相应任务，生成提示所述一个或多个相机的所述视场沿所述第二方向的移动的第二触觉输出，所述第二触觉输出不同于所述第一触觉输出。
根据一些实施例，在具有显示器和与触觉输出发生器相关联的输入区域的电子设备处执行一种方法。所述方法包括：检测所述输入区域上的输入；响应于检测到所述输入区域上的所述输入：根据确定所述输入区域上的所述输入满足第一标准，其中所述第一标准包括当第一输入度量超过第一阈值时满足以便满足所述第一标准的要求，利用与所述输入区域相关联的所述触觉输出发生器生成第一触觉输出；并且在生成所述第一触觉输出之后：根据确定所述输入满足第二标准，其中所述第二标准包括当所述第一输入度量超过比所述第一阈值大的第二阈值时满足以便满足所述第二标准的要求，执行操作；并且根据确定在所述输入满足所述第二标准之前已经检测到取消输入，放弃执行所述操作；并且根据确定所述输入区域上的所述输入不满足所述第一标准，放弃生成所述第一触觉输出。
根据一些实施例，在具有显示器、不同于所述显示器的输入区域和用于生成触觉输出的一个或多个触觉输出发生器的电子设备处执行一种方法。所述方法包括：检测手指在所述输入区域上的按压输入；并且响应于检测到所述输入区域上的所述按压输入：根据确定所述输入区域未由间隙材料与所述手指分开，生成第一触觉输出；并且根据确定所述输入区域由第一间隙材料与所述手指分开，生成不同于所述第一触觉输出的第二触觉输出。
根据一些实施例，在电子设备处执行一种方法，所述电子设备具有设置在所述设备的前侧上的显示器、设置在所述设备的与所述设备的所述前侧相邻的一个或多个周边侧上的输入区域和用于生成触觉输出的一个或多个触觉输出发生器。所述方法包括：检测所述输入区域上的输入；响应于检测到所述输入区域上的所述输入：根据确定由所述输入区域上的所述接触进行的所述输入满足第一标准，其中所述第一标准要求高于第一强度阈值的所述输入的强度的增大以便满足所述第一标准，执行第一操作并且生成具有第一触觉输出轮廓的第一触觉输出；并且根据确定所述输入区域上的所述输入满足不同于所述第一标准的第二标准，其中所述第二标准要求所述输入包括接触在所述输入区域上沿第一方向的移动以便满足所述第二标准，执行不同于所述第一操作的第二操作并且生成具有不同于所述第一触觉输出轮廓的第二触觉输出轮廓的第二触觉输出。
根据一些实施例，一种电子设备包括显示器、触敏表面、一个或多个强度敏感输入区域(例如，侧按钮)、用于检测与触敏表面和输入区域的接触的强度的一个或多个传感器、任选地用于在输入区域生成局部触觉输出和/或贯穿所述设备的多个区域生成整个设备触觉输出的一个或多个触觉输出发生器、一个或多个处理器、存储器以及一个或多个程序；一个或多个程序被存储在存储器中并且被配置为由一个或多个处理器执行，并且一个或多个程序包括用于执行或导致执行任何本文所述的方法的操作的指令。根据一些实施例，一种计算机可读存储介质中存储有指令，所述指令在由电子设备执行时，所述电子设备具有显示器、触敏表面、一个或多个强度敏感输入区域(例如，侧按钮)、用于检测与触敏表面和输入区域的接触的强度的一个或多个传感器以及任选地用于在输入区域生成局部触觉输出和/或贯穿所述设备的多个区域生成整个设备触觉输出的一个或多个触觉输出发生器，使得所述设备执行本文所述的方法中的任一种方法的操作或使得本文所述的方法中的任一种方法的操作执行。根据一些实施例，一种在具有显示器、触敏表面、一个或多个强度敏感输入区域(例如，侧按钮)、用于检测与触敏表面的接触的强度的一个或多个传感器、任选地用于在输入区域生成局部触觉输出和/或贯穿所述设备的多个区域生成整个设备触觉输出的一个或多个触觉输出发生器、存储器以及用于执行存储在所述存储器中的一个或多个程序的一个或多个处理器的电子设备上的图形用户界面包括采用本文所述的方法中的任一种方法显示的元素中的一个或多个元素，这些元素响应于输入而被更新，如在本文所述的方法中的任一种方法中所述。根据一些实施例，一种电子设备包括：显示器、触敏表面、一个或多个强度敏感输入区域(例如，侧按钮)、用于检测与触敏表面的接触的强度的一个或多个传感器、任选地用于在输入区域生成局部触觉输出和/或贯穿所述设备的多个区域生成整个设备触觉输出的一个或多个触觉输出发生器；以及用于执行或导致执行本文所述的方法中的任一种方法的操作的装置。根据一些实施例，一种在电子设备中使用的信息处理装置，所述电子设备具有显示器和触敏表面、一个或多个强度敏感输入区域(例如，侧按钮)、用于检测与触敏表面和输入区域的接触的强度的一个或多个传感器、任选地用于在输入区域生成局部触觉输出和/或贯穿所述设备的多个区域生成整个设备触觉输出的一个或多个触觉输出发生器，所述信息处理装置包括用于执行本文所述的方法中的任一种方法的操作或导致执行本文所述的方法中的任一种方法的操作的装置。
因此，具有显示器、触敏表面、一个或多个强度敏感输入区域(例如，侧按钮)、用于检测与触敏表面的接触的强度的一个或多个传感器、任选地用于在输入区域生成局部触觉输出和/或贯穿所述设备的多个区域生成整个设备触觉输出的一个或多个触觉输出发生器、任选地一个或多个设备取向传感器以及任选地音频系统的电子设备具有用于在与显示器外输入区域进行交互期间向用户提供反馈的改进方法和界面，从而提高了此类设备的效果、效率和用户满意度。此类方法和界面可补充或取代用于促进与设备的交互并向用户提供触觉反馈的常规方法。
附图说明
为了更好地理解各种所述实施例，应结合以下附图参考下面的具体实施方式，其中类似的附图标号在所有附图中指示对应的部分。
图1A是示出根据一些实施例的具有触敏显示器的便携式多功能设备的框图。
图1B是示出根据一些实施例的用于事件处理的示例性部件的框图。
图1C是示出了根据一些实施例的触觉输出模块的框图。
图2A示出根据一些实施例的具有触摸屏的便携式多功能设备。
图2B-2C示出根据一些实施例的强度敏感输入设备的分解图。
图2D至图2F示出根据一些实施例的强度敏感输入设备的不同视图。
图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施例的便携式多功能设备，该便携式多功能设备在该设备的一个或多个周边侧上具有一个或多个强度敏感的显示器外输入区域，以及触摸屏显示器，其示出了具有对应于不同应用程序的应用程序启动图标菜单的示例性主屏幕用户界面。
图4B示出了根据一些实施例的具有与显示器分开的触敏表面的多功能设备。
图4C-图4E示出了根据一些实施例的动态强度阈值的实施例。
图4F至图4G示出根据一些实施例的一组样本触觉输出模式。
图4H至图4J示出根据一些实施例的与触觉输出一起用于模拟按钮点击的随时间变化的示例触觉音频输出模式。
图4K示出根据一些实施例的随时间变化的触觉输出模式和触觉音频输出模式的示例组合。
图5A1至图5A8示出了根据一些实施例的用于为对应于查询和/或修改设备属性的当前状态的按钮交互提供触觉和视觉反馈的示例性用户界面。
图5B1至图5B11示出了根据一些实施例的用于为对应于以不同方式修改设备参数的按钮交互提供触觉和视觉反馈的示例性用户界面。
图5C1至图5C20和图5D1至图5D24示出了根据一些实施例的用于为对应于呈现可回缩菜单并与之交互的不同类型的按钮交互提供触觉和视觉反馈的示例性用户界面。
图5E1至图5E5和图5F1至图5F6示出了根据一些实施例的用于提供触觉和视觉反馈以用于在设备处于媒体捕获模式时引导设备移动以执行相应任务的示例性用户界面。
图5G1至图5G5和图5H1至图5H5示出了根据一些实施例的用于提供触觉和视觉反馈以警告用户即将执行操作的示例性用户界面。
图5I1至图5I6示出了根据一些实施例的为每种相应类型的按钮交互提供触觉输出，该触觉输出根据输入区域和用户手指之间间隙材料的存在而具有变化的触觉输出轮廓。
图6A至6D是示出了根据一些实施例的查询和修改设备属性的方法的流程图。
图7A至7E是示出了根据一些实施例的呈现可回缩菜单并与之交互的方法的流程图。
图8A至图8D是示出了根据一些实施例的以不同方式修改设备参数的方法的流程图。
图9A至图9C是示出了根据一些实施例的引导设备移动的方法的流程图。
图10A至图10C是示出了根据一些实施例的为即将发生的操作生成警告反馈的方法的流程图。
图11A至图11B是示出了根据一些实施例的根据输入区域与在输入区域上检测到的用户手指之间是否存在间隙材料来调节输入区域上的输入的触觉输出的方法的流程图。
图12A至图12E是示出了根据一些实施例的针对在设置在设备的周边侧上的显示器外输入区域上检测到的不同类型的输入提供不同触觉输出的方法的流程图。
具体实施方式
许多具有显示器的电子设备包括用于触发设备功能和在用户界面之间导航的机械按钮，诸如机械主按钮。一些设备具有固态主按钮，该固态主按钮通过响应于在固态主按钮上检测到的按压输入提供局部触觉输出来模仿机械主按钮。但是机械按钮和固态主按钮适用于仅激活若干固定功能，并且几乎不提供除简单按钮点击之外的反馈。本文所述的方法在与强度敏感的屏幕外输入区域(例如，侧按钮或表面)的各种用户交互期间提供视觉、触觉和/或音频反馈，使得用户界面的操纵对于用户而言更有效而且更直观。
本文所述的方法、设备和GUI提供了触发设备功能并使用触觉和视觉反馈来改善设备-用户交互的新颖而且改进的方式，包括：
·代替视觉反馈或与视觉反馈结合，根据显示器外按钮交互查询并任选地修改设备属性(例如，存在未读通知、当前音量等)，并且提供对应的触觉反馈；
·根据在显示器外输入区域上检测到的各种类型的触摸输入(例如，在没有检测到显示菜单的触摸屏上的输入的情况下检测到和/或结合在显示菜单的触摸屏上检测到输入的情况下检测到)呈现可回缩菜单并与之交互，并且结合视觉反馈提供对应的触觉反馈；
·根据显示器外输入区域的哪些子部分被输入激活，为以不同方式修改设备参数提供触觉反馈；
·在强度敏感输入区域提供定向触觉反馈，以在设备处于媒体捕获模式时引导设备移动以继续执行相应任务；
·通过多个反馈通道的协调操作(例如，显示器外输入区域上的局部触觉输出、整个设备触觉输出、音频输出、视觉输出等)生成针对即将发生的操作的警告反馈；
·根据输入区域和在输入区域上检测到的用户手指之间是否存在间隙材料来调节针对输入区域上的输入而生成的触觉输出的相应触觉输出轮廓，从而在各种操作条件下向用户提供一致的触觉反馈；和
·针对在设置在设备的周边侧上的显示器外输入区域上检测到的不同类型的触摸输入提供具有不同触觉输出轮廓的触觉输出。
示例性设备
现在将详细地参考实施例，这些实施例的示例在附图中示出。下面的详细描述中示出许多具体细节，以便提供对各种所描述的实施例的充分理解。但是，对本领域的普通技术人员将显而易见的是，各种所描述的实施例可以在没有这些具体细节的情况下被实践。在其他情况下，没有详细地描述众所周知的方法、过程、部件、电路和网络，从而不会不必要地使实施例的各个方面晦涩难懂。
还将理解的是，虽然在一些情况下，术语“第一”、“第二”等在本文中用于描述各种元件，但是这些元件不应受到这些术语限制。这些术语只是用于将一个元件与另一元件区分开。例如，第一接触可被命名为第二接触，并且类似地，第二接触可被命名为第一接触，而不脱离各种所描述的实施例的范围。第一接触和第二接触均为接触，但它们不是同一个接触，除非上下文另外明确指示。
在本文中对各种所述实施例的描述中所使用的术语只是为了描述特定实施例的目的，而并非旨在进行限制。如在对各种所述实施例中的描述和所附权利要求书中所使用的那样，单数形式“一个”和“该”旨在也包括复数形式，除非上下文另外明确地指示。还将理解的是，本文中所使用的术语“和/或”是指并且涵盖相关联的所列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是，术语“包括”(“includes”、“including”、“comprises”和/或“comprising”)在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
如本文中所使用，根据上下文，术语“如果”任选地被解释为意思是“当……时”后“在……时”或“响应于确定”或“响应于检测到”。类似地，根据上下文，短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为是指“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关过程的实施例。在一些实施例中，该设备为还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备，诸如移动电话。便携式多功能设备的示例性实施例包括但不限于来自Apple Inc.(Cupertino,California)的iPod 和设备。任选地使用其他便携式电子设备，诸如具有触敏表面(例如，触摸屏显示器和/或触控板)的膝上型计算机或平板计算机。还应当理解的是，在一些实施例中，该设备并非便携式通信设备，而是具有触敏表面(例如，触摸屏显示器和/或触控板)的台式计算机。
在下面的讨论中，描述了一种电子设备，该电子设备包括显示器、触敏表面和一个或多个显示器外的强度敏感输入区域。然而，应当理解，该电子设备任选地包括一个或多个其他物理用户接口设备，诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用，诸如以下应用中的一个或多个应用：记笔记应用、绘图应用、演示应用、文字处理应用、网站创建应用、盘编辑应用、电子表格应用、游戏应用、电话应用、视频会议应用、电子邮件应用、即时消息应用、健身支持应用、照片管理应用、数字相机应用、数字摄像机应用、Web浏览应用、数字音乐播放器应用序、和/或数字视频播放器应用。
在该设备上执行的各种应用程序任选地使用至少一个公用的物理用户界面设备，诸如触敏表面或一个或多个强度敏感的显示器外输入区域。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地对于不同应用程序被调整和/或变化，和/或在相应应用程序内被调整和/或变化。这样，设备的共用物理架构(诸如触敏表面或强度敏感的显示器外输入区域)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在将注意力转到具有触敏显示器的便携式设备的实施例。图1A是示出根据一些实施例的具有触敏显示器系统112的便携式多功能设备100的框图。触敏显示器系统112有时为了方便而被叫做“触摸屏”，并且有时被简称为触敏显示器。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入、或控制设备116吗、和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100上的接触的强度的一个或多个强度传感器165(例如，触敏表面，诸如设备100的触敏显示系统112)。设备100包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如，在触敏表面诸如设备100的触敏显示器系统112或设备300的触摸板355上生成触觉输出)。这些部件任选地通过一个或多个通信总线或信号线103进行通信。
如本说明书和权利要求书中所使用的，术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如，触敏表面)相对于设备的另一个部件(例如，外壳)的物理位移、或部件相对于设备的质心的位移。例如，在设备或设备的部件与用户对触摸敏感的表面(例如，手指、手掌或用户手部的其他部分)接触的情况下，通过物理位移生成的触觉输出将由用户解释为触感，该触感对应于设备或设备的部件的物理特征的所感知的变化。例如，触敏表面(例如，触敏显示器、触控板、强度敏感侧按钮或固态按钮)的移动任选地由用户解释为物理致动按钮的“按下点击”或“松开点击”、物理滚轮或拨号盘的“卡位”和/或机械开关或切换件的“卡扣”等。在一些情况下，用户将感觉到触感，诸如“按下点击”或“松开点击”、“卡位”或“卡扣”，即使在检测到输入区域的移动之前不存在由用户的手指移动物理地按压或轻扫的输入区域的移动，和/或即使输入区域的移动与物理机械按钮、滚轮或拨号盘或开关将经历的移动显著不同以产生用户通过输入区域感知的触感。又如，即使在触敏表面(例如，触敏显示器、触控板、强度敏感侧按钮或固态按钮)的光滑度无变化时，触敏表面的移动也会任选地由用户解释或感测为触敏表面的“粗糙度”。虽然用户对触摸的此类解释将受到用户的个体化感官知觉的限制，但是对触摸的许多感官知觉是大多数用户共有的。因此，当触觉输出被描述为对应于用户的特定感官知觉(例如，“按下点击”、“松开点击”、“粗糙度”、“卡位”或“切换装置或开关的翻动和扣合”)时，除非另外陈述，否则所生成的触觉输出对应于设备或其部件的物理位移，该物理位移将会生成典型(或普通)用户的所述感官知觉。使用触觉输出向用户提供触觉反馈增强了设备的可操作性，并且使用户设备界面更高效(例如，通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
在一些实施例中，触觉输出模式指定触觉输出的特征，诸如触觉输出的幅值、触觉输出的移动波形的形状、触觉输出的频率、触觉输出的运动模式(例如，x方向、y方向或z方向的线性振荡或围绕x轴、y轴或z轴的角振荡等)和/或触觉输出的持续时间。
当设备生成具有不同触觉输出模式的触觉输出时，触觉输出可对握持或触摸设备和/或输入区域的用户调用不同的触感。该设备任选地包括一个或多个整个设备触觉输出发生器(例如，耦接到设备的外壳的可移动质块)，以同时在设备上的许多不同位置处生成触觉输出。该设备还可包括一个或多个局部触觉输出发生器(例如，围绕固定枢轴在输入区域下方的各个方向上振荡或振动的表面振荡器或者能够生成特别指向输入区域的触觉输出的其他触觉输出发生器)以生成局部触觉输出。局部振动在设备上的不同位置处具有变化的幅值，其中输入区域或其子部分上的在与输入区域进行交互时用户的手指通常将搁置的地方幅值较大，并且在与输入区域进行交互时用户的手通常将不搁置的其他地方(例如，在输入区域之外)的幅值较小。
虽然用户的感官基于用户对触觉输出的感知，但大多数用户将能够识别设备生成的触觉输出的波形、频率、运动模式和幅值的变化。因此，可调节波形、频率、运动模式和幅值以向用户指示已在输入区域(例如，强度敏感侧按钮、固态按钮、触摸板或触摸屏)上检测到不同类型的输入和/或已执行不同的操作。这样，具有被设计、选择和/或安排用于模拟给定环境(例如，包括图形特征和对象的用户界面、具有虚拟边界和虚拟对象的模拟物理环境、具有物理边界和物理对象的真实物理环境、和/或以上任意者的组合)中对象的特性(例如大小、材料、重量、刚度、光滑度等)；行为(例如振荡、位移、加速、旋转、伸展等)；和/或交互(例如碰撞、粘附、排斥、吸引、摩擦等)的触觉输出模式的触觉输出在一些情况下将为用户提供有帮助的反馈，其减少输入错误并提高用户对设备的操作的效率。另外，触觉输出任选地被生成为对应于与所模拟物理特性(诸如输入阈值或对象选择)无关的反馈。此类触觉输出在一些情况下将为用户提供有帮助的反馈，其减少输入错误并提高用户对设备的操作的效率。
在一些实施例中，具有合适触觉输出模式的触觉输出充当在用户界面中或在设备中屏幕后面发生感兴趣事件的提示。感兴趣事件的示例包括设备上或用户界面中提供的示能表示(例如真实或虚拟按钮、或拨动式开关)的激活、所请求操作的成功或失败、到达或穿过用户界面中的边界、进入新状态、在对象之间切换输入焦点、激活新模式、达到或穿过输入阈值、检测或识别一种类型的输入或手势等等。在一些实施例中，提供触觉输出以充当关于除非改变方向或中断输入被及时检测到、否则会发生的即将发生事件或结果的警告或提示。触觉输出在其他情境下也用于丰富用户体验、改善具有视觉或运动困难或者其他可达性需要的用户对设备的可达性、和/或改善用户界面和/或设备的效率和功能性。
任选地将触觉输出与音频输入和/或视觉用户界面改变进行比较，这进一步增强用户与用户界面和/或设备交互时用户的体验，并有利于关于用户界面和/或设备的状态的信息的更好传输，并且这减少输入错误并提高用户对设备的操作的效率。在一些实施例中，伴随音频增强了触觉输出的效果，并且使用户体验到的触感更突出和/或更逼真。触觉输出的触觉输出轮廓任选地被扩展以包括用于伴随音频输出的音频轮廓，该音频输出被生成以补充触觉输出。用于触觉输出的伴随音频输出的音频轮廓包括音频输出的特征，诸如定时(例如，与对应触觉输出的定时偏移)、幅值(例如，以预定义的值指定的幅值或者音频输出的幅值与触觉输出的一个或多个特征之间的比率或相关性)、频率(例如，以预定义的值或根据与触觉输出的一个或多个特征的关系而指定的频率)、波形的形状(例如，预定义的波形或根据与触觉输出的一个或多个特征的关系而指定的波形)。触觉输出的伴随音频输出不同于常规设备音频输出(例如，由设备生成的音频警告或媒体输出，其独立于触觉输出的生成)。
在一些实施例中，多个不同的触觉输出发生器(例如，位于设备上不同位置处的整个设备触觉输出发生器和/或局部触觉输出发生器)协调其单独输出(例如，利用定时协调、幅值协调和波型协调或上述的组合)以传达围绕设备的方向感测(例如，向上、向下、向左、向右、向前、向后、顺时针、逆时针等)，这进一步增强了用户在与用户界面和/或设备交互时的体验，并且促进了更好地传送关于用户界面和/或设备的状态的信息，并且这减少了输入错误而且提高了用户对设备的操作的效率。在一些实施例中，将由相应触觉输出发生器生成的触觉输出的触觉输出轮廓被扩展以识别其他触觉输出发生器，并且指定相应触觉输出发生器将用来与这些其他触觉输出发生器协调以出于相应目的(例如，向用户指示方向)而生成协调触觉输出的相应方式。
图4F提供可单独地或组合地、按原样或通过一个或多个变换(例如调制、放大、截短等)用于在各种情景中为了各种目的(诸如上文所述的那些以及针对本文讨论的用户界面和方法所述的那些)生成合适触感反馈的一组样本触觉输出模式。触觉输出的控制板的这个示例显示一组三个波形和八个频率可如何被用于生成触觉输出模式的阵列。除了该图中所示的触觉输出模式之外，任选地通过改变触觉输出模式的增益值来在幅值方面调节这些触觉输出模式中每一者，如图所示，例如对于图4G中的FullTap80Hz、FullTap 200Hz、MiniTap 80Hz、MiniTap 200Hz、MicroTap 80Hz、和MicroTap 200Hz，它们各自被图示有具有1.0、0.75、0.5、和0.25的增益的变体。如图4G所示，改变触觉输出模式的增益就改变模式的幅值，而不改变模式的频率或改变波形的形状。在一些实施例中，改变触觉输出模式的频率还导致较低幅值，因为一些触觉输出发生器受限于多少力可被施加于可移动质块，因此质块的较高频率移动被约束到较低幅值以确保形成波形所需要的加速不需要触觉输出发生器的操作力范围之外的力(例如，230Hz、270Hz和300Hz的FullTap的峰值幅值比80Hz、100Hz、125Hz和200Hz的FullTap的幅值低)。
在图4F中，每列显示具有特定波形的触觉输出模式。触觉输出模式的波形表示相对于中性位置(例如xzero)的物理位移对时间的模式，可移动质块通过该模式以生成具有该触觉输出模式的触觉输出。例如，图4F左列中所示的第一组触觉输出模式(例如“FullTap”的触觉输出模式)每一个都具有包括具有两个完整循环的振荡的波形(例如开始且结束于中性位置且穿过中性位置三次的振荡)。图4F中间列中所示的第二组触觉输出模式(例如“MiniTap”的触觉输出模式)每一个都具有包括具有一个完整循环的振荡的波形(例如开始且结束于中性位置且穿过中性位置一次的振荡)。图4F右列中所示的第三组触觉输出模式(例如“MicroTap”的触觉输出模式)每一个都具有包括具有半个完整循环的振荡的波形(例如开始且结束于中性位置且不穿过中性位置的振荡)。触觉输出模式的波形还包括表示在触觉输出开始和结束处可移动质块的逐渐加速和减速的起始缓冲和结束缓冲。图4F-4G所示的示例性波形包括代表可移动质块的最大和最小移动程度的xmin和xmax值。对于可移动质块较大的较大电子设备，该质块的最小和最大移动程度可以更大或更小。图4F-4G所示的示例描述1维中质块的移动，但是类似的原理也可适用于两维或三维中可移动质块的移动。
如图4F所示，每个触觉输出模式还具有对应的特征频率，其影响用户从具有该特征频率的触觉输出感觉到的触感的“节距”。对于连续触觉输出，特征频率表示触觉输出发生器的可移动质块在给定时间段内完成的循环(例如每秒循环)的数量。对于离散触觉输出，生成离散输出信号(例如具有0.5、1、或2个循环)，并且特征频率值指定可移动质块需要移动多快以生成具有该特征频率的触觉输出。如图4F所示，对于每种类型的触觉输出(例如由相应波形限定，诸如FullTap、MiniTap、或MicroTap)，较高频率值对应于可移动质块的较快移动，因此一般而言，对应于较短的触觉输出完成时间(例如包括完成离散触觉输出的所需循环数量的时间加上起始和结束缓冲时间)。例如，特征频率为80Hz的FullTap比特征频率为100Hz的FullTap花更长时间完成(例如在图4F中，35.4ms与28.3ms)。此外，对于给定频率，在相应频率在其波形中具有更多循环的触觉输出比在相同相应频率在其波形中具有更少循环的触觉输出花更长时间完成。例如，150Hz的FullTap比150Hz的MiniTap花更长时间完成(例如19.4ms vs.12.8ms)，150Hz的MiniTap比150Hz的MicroTap花更长时间完成(例如12.8ms vs.9.4ms)。然而对于具有不同频率的触觉输出模式，这个规则可能不适用(例如，具有更多循环但具有更高频率的触觉输出可能比具有更少循环但具有更低频率的触觉输出花更短的时间量完成，反之亦然)。例如，在300Hz，FullTap与MiniTap花同样长的时间(例如9.9ms)。
如图4F所示，触觉输出模式还具有特征幅值，其影响触觉信号中包含的能量的量、或者用户通过具有该特征幅值的触觉输出可感觉到的触感的“强度”。在一些实施例中，触觉输出模式的特征幅值是指表示在生成触觉输出时可移动质块相对于中性位置的最大位移的绝对值或归一化值。在一些实施例中，触觉输出模式的特征幅值可根据(例如基于用户界面情境和行为自定义的)各种条件和/或预先配置的度量(例如基于输入的度量、和/或基于用户界面的度量)调节，例如通过固定或动态确定的增益系数(例如介于0和1之间的值)来调节。在一些实施例中，基于输入的度量(例如强度变化度量或输入速度度量)测量在触发生成触觉输出的输入期间该输入的特征(例如按压输入中接触的特征强度的改变速率或接触在触敏表面上的移动速率)。在一些实施例中，基于用户界面的度量(例如跨边界速度度量)测量在触发生成触觉输出的用户界面改变期间用户界面元素的特征(例如该元素在用户界面中穿过隐藏或可见边界的移动速度)。在一些实施例中，触觉输出模式的特征幅值可被“包络”调制，并且相邻循环的峰值可具有不同幅值，其中以上所示波形之一通过乘以随时间改变(例如从0变到1)的包络参数来进一步修改，以在生成触觉输出时随着时间逐渐调节触觉输出的部分的幅值。
虽然在图4F中为了进行示意性的说明在样本触觉输出模式中表示了特定频率、幅值和波形，但具有其他频率、幅值和波形的触觉输出模式也可用于类似目的。例如，可使用具有介于0.5到4个循环之间的波形。也可使用60Hz-400Hz范围中的其他频率。
图4H至图4J示出根据一些实施例的与触觉输出一起用于模拟按钮点击的随时间变化的示例触觉音频输出模式。
图4K示出根据一些实施例的随时间变化的触觉输出模式和触觉音频输出模式的示例组合。
在图4H中，顶部触觉音频模式“点击A1音频”是与“点击A”正常MiniTap(230Hz)一起播放的音频输出以模拟“正常”第一点击中的第一按下点击，如图4K(第一点击列中的第一行)，其中控件激活阈值处的接触的强度改变速率高于阈值改变速率(例如，该接触正在进行“正常”用力/快速按压)。在该示例中，“点击A1音频”从“点击A”正常MiniTap(230Hz)触觉输出的开始偏移2ms。在一些情况下，播放相同“点击A1音频”和“点击A”正常MiniTap(230Hz)以模拟第一按下点击之后的第一松开点击。在一些情况下，在松开点击中相对于前一按下点击减小“点击A1音频”和/或“点击A”正常MiniTap(230Hz)的增益(例如，减小50％)。
顶部触觉音频模式“点击A1音频”也与“点击A”软MiniTap(230Hz)一起播放以模拟“软”第一点击中的第一按下点击，如图4K(第一点击列中的第二行)，其中控件激活阈值处的接触的强度改变速率低于阈值改变速率(例如，该接触正在进行“软”和/或缓慢按压)。为了模拟“软”按下点击，在“软”按下点击中相对于“正常”按下点击减小“点击A1音频”和“点击A”软MiniTap(230Hz)的增益(例如，减小50％)。在该示例中，“点击A1音频”从“点击A”软MiniTap(230Hz)触觉输出的开始偏移2ms。在一些情况下，播放相同“点击A1音频”和“点击A”软MiniTap(230Hz)以模拟第一按下点击之后的第一松开点击。在一些情况下，在松开点击中相对于前一按下点击减小“点击A1音频”和/或“点击A”软MiniTap(230Hz)的增益(例如，减小50％)。
在图4H中，底部触觉音频模式“点击A2音频”是与“点击A”正常MiniTap(230Hz)一起播放的音频输出以模拟在预先确定的时间段内第一点击之后的“正常”第二点击(例如，如双击输入中的第二点击)中的第二按下点击，如图4K(第二点击列中的第一行)，其中控件激活阈值处的接触的强度改变速率高于阈值改变速率(例如，第二点击中的该接触正在进行“正常”用力/快速按压)。在该示例中，“点击A2音频”从“点击A”正常MiniTap(230Hz)触觉输出的开始偏移2ms。在一些情况下，播放相同“点击A2音频”和“点击A”正常MiniTap(230Hz)以模拟第二按下点击之后的第二松开点击。在一些情况下，在第二松开点击中相对于前一第二按下点击减小“点击A2音频”和/或“点击A”正常MiniTap(230Hz)的增益(例如，减小50％)。
底部触觉音频模式“点击A2音频”也与“点击A”软MiniTap(230Hz)一起播放以模拟在预先确定的时间段内第一点击之后的“软”第二点击(例如，如双击输入中的第二点击)中的第二按下点击，如图4K(第二点击列中的第二行)，其中控件激活阈值处的接触的强度改变速率低于阈值改变速率(例如，该接触正在进行“软”/缓慢按压)。为了模拟“软”按下点击，在“软”按下点击中相对于“正常”按下点击减小“点击A2音频”和“点击A”软MiniTap(230Hz)的增益(例如，减小50％)。在该示例中，“点击A2音频”从“点击A”软MiniTap(230Hz)触觉输出的开始偏移2ms。在一些情况下，播放相同“点击A2音频”和“点击A”软MiniTap(230Hz)以模拟第二按下点击之后的第二松开点击。在一些情况下，在第二松开点击中相对于前一第二按下点击减小“点击A2音频”和/或“点击A”软MiniTap(230Hz)的增益(例如，减小50％)。
在图4I中，顶部触觉音频模式“点击B1音频”是与“点击B”正常MiniTap(270Hz)一起播放的音频输出以模拟“正常”第一点击中的第一按下点击，如图4K(第一点击列中的第三行)，其中控件激活阈值处的接触的强度改变速率高于阈值改变速率(例如，该接触正在进行“正常”用力/快速按压)。在该示例中，“点击B1音频”从“点击B”正常MiniTap(270Hz)触觉输出的开始偏移2.8ms。在一些情况下，播放相同“点击B1音频”和“点击B”正常MiniTap(270Hz)以模拟第一按下点击之后的第一松开点击。在一些情况下，在松开点击中相对于前一按下点击减小“点击B1音频”和/或“点击B”正常MiniTap(270Hz)的增益(例如，减小50％)。
顶部触觉音频模式“点击B1音频”也与“点击B”软MiniTap(270Hz)一起播放以模拟“软”第一点击中的第一按下点击，如图4K(第一点击列中的第四行)，其中控件激活阈值处的接触的强度改变速率低于阈值改变速率(例如，该接触正在进行“软”和/或缓慢按压)。为了模拟“软”按下点击，在“软”按下点击中相对于“正常”按下点击减小“点击B1音频”和“点击B”软MiniTap(270Hz)的增益(例如，减小50％)。在该示例中，“点击B1音频”从“点击B”软MiniTap(270Hz)触觉输出的开始偏移2.8ms。在一些情况下，播放相同“点击B1音频”和“点击B”软MiniTap(270Hz)以模拟第一按下点击之后的第一松开点击。在一些情况下，在松开点击中相对于前一按下点击减小“点击B1音频”和/或“点击B”软MiniTap(230Hz)的增益(例如，减小50％)。
在图4I中，底部触觉音频模式“点击B2音频”是与“点击B”正常MiniTap(270Hz)一起播放的音频输出以模拟在预先确定的时间段内第一点击之后的“正常”第二点击(例如，如双击输入中的第二点击)中的第二按下点击，如图4K(第二点击列中的第三行)，其中控件激活阈值处的接触的强度改变速率高于阈值改变速率(例如，第二点击中的该接触正在进行“正常”用力/快速按压)。在该示例中，“点击B2音频”从“点击B”正常MiniTap(270Hz)触觉输出的开始偏移2.8ms。在一些情况下，播放相同“点击B2音频”和“点击B”正常MiniTap(230Hz)以模拟第二按下点击之后的第二松开点击。在一些情况下，在第二松开点击中相对于前一第二按下点击减小“点击B2音频”和/或“点击B”正常MiniTap(270Hz)的增益(例如，减小50％)。
底部触觉音频模式“点击B2音频”也与“点击B”软MiniTap(270Hz)一起播放以模拟在预先确定的时间段内第一点击之后的“软”第二点击(例如，如双击输入中的第二点击)中的第二按下点击，如图4K(第二点击列中的第四行)，其中控件激活阈值处的接触的强度改变速率低于阈值改变速率(例如，该接触正在进行“软”/缓慢按压)。为了模拟“软”按下点击，在“软”按下点击中相对于“正常”按下点击减小“点击B2音频”和“点击B”软MiniTap(270Hz)的增益(例如，减小50％)。在该示例中，“点击B2音频”从“点击B”软MiniTap(270Hz)触觉输出的开始偏移2.8ms。在一些情况下，播放相同“点击B2音频”和“点击B”软MiniTap(270Hz)以模拟第二按下点击之后的第二松开点击。在一些情况下，在第二松开点击中相对于前一第二按下点击减小“点击B2音频”和/或“点击B”软MiniTap(270Hz)的增益(例如，减小50％)。
在图4J中，顶部触觉音频模式“点击C1音频”是与“点击C”正常MiniTap(300Hz)一起播放的音频输出以模拟“正常”第一点击中的第一按下点击，如图4K(第一点击列中的第五行)，其中控件激活阈值处的接触的强度改变速率高于阈值改变速率(例如，该接触正在进行“正常”用力/快速按压)。在该示例中，“点击C1音频”从“点击C”正常MiniTap(300Hz)触觉输出的开始偏移1.9ms。在一些情况下，播放相同“点击C1音频”和“点击C”正常MiniTap(300Hz)以模拟第一按下点击之后的第一松开点击。在一些情况下，在松开点击中相对于前一按下点击减小“点击C1音频”和/或“点击C”正常MiniTap(300Hz)的增益(例如，减小50％)。
顶部触觉音频模式“点击C1音频”也与“点击C”软MiniTap(300Hz)一起播放以模拟“软”第一点击中的第一按下点击，如图4K(第一点击列中的第六行)，其中控件激活阈值处的接触的强度改变速率低于阈值改变速率(例如，该接触正在进行“软”和/或缓慢按压)。为了模拟“软”按下点击，在“软”按下点击中相对于“正常”按下点击减小“点击C1音频”和“点击C”软MiniTap(300Hz)的增益(例如，减小50％)。在该示例中，“点击C1音频”从“点击C”软MiniTap(300Hz)触觉输出的开始偏移1.9ms。在一些情况下，播放相同“点击C1音频”和“点击C”软MiniTap(270Hz)以模拟第一按下点击之后的第一松开点击。在一些情况下，在松开点击中相对于前一按下点击减小“点击C1音频”和/或“点击C”软MiniTap(300Hz)的增益(例如，减小50％)。
在图4J中，底部触觉音频模式“点击C2音频”是与“点击C”正常MiniTap(300Hz)一起播放的音频输出以模拟在预先确定的时间段内第一点击之后的“正常”第二点击(例如，如双击输入中的第二点击)中的第二按下点击，如图4K(第二点击列中的第五行)，其中控件激活阈值处的接触的强度改变速率高于阈值改变速率(例如，第二点击中的该接触正在进行“正常”用力/快速按压)。在该示例中，“点击C2音频”从“点击C”正常MiniTap(300Hz)触觉输出的开始偏移1.9ms。在一些情况下，播放相同“点击C2音频”和“点击C”正常MiniTap(300Hz)以模拟第二按下点击之后的第二松开点击。在一些情况下，在第二松开点击中相对于前一第二按下点击减小“点击C2音频”和/或“点击C”正常MiniTap(300Hz)的增益(例如，减小50％)。
底部触觉音频模式“点击C2音频”也与“点击C”软MiniTap(300Hz)一起播放以模拟在预先确定的时间段内第一点击之后的“软”第二点击(例如，如双击输入中的第二点击)中的第二按下点击，如图4K(第二点击列中的第六行)，其中控件激活阈值处的接触的强度改变速率低于阈值改变速率(例如，该接触正在进行“软”/缓慢按压)。为了模拟“软”按下点击，在“软”按下点击中相对于“正常”按下点击减小“点击C2音频”和“点击C”软MiniTap(300Hz)的增益(例如，减小50％)。在该示例中，“点击C2音频”从“点击C”软MiniTap(300Hz)触觉输出的开始偏移1.9ms。在一些情况下，播放相同“点击C2音频”和“点击C”软MiniTap(300Hz)以模拟第二按下点击之后的第二松开点击。在一些情况下，在第二松开点击中相对于前一第二按下点击减小“点击C2音频”和/或“点击C”软MiniTap(300Hz)的增益(例如，减小50％)。
应当理解，设备100仅是便携式多功能设备的一个示例，并且设备100任选地具有比所示出的更多或更少的部件，任选地组合两个或更多个部件，或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件在硬件、软件、固件、或它们的任何组合(包括一个或多个信号处理电路和/或专用集成电路)中实施。
存储器102任选地包括高速随机存取存储器，并且还任选地包括非易失性存储器，诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。设备100的其他部件(诸如CPU 120和外围设备接口118)对存储器102的访问任选地由存储器控制器122来控制。
外围设备接口118可用于将设备的输入外围设备和输出外围设备耦接到CPU 120和存储器102。一个或多个处理器120运行或执行存储器102中所存储的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。
在一些实施例中，外围设备接口118、CPU 120和存储器控制器122任选地被实现在单个芯片诸如芯片104上。在一些其他实施例中，它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被称作电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号，并且经由电磁信号与通信网络及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路，包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信来与网络和其他设备进行通信，这些网络为诸如互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如，蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。该无线通信任选地使用多种通信标准、协议、和技术中的任一者，包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如，IEEE802.11a、IEEE 802.11ac、IEEE 802.11ax、IEEE 802.11b、IEEE 802.11g和/或IEEE802.11n)、互联网协议语音技术(VoIP)、Wi-MAX、电子邮件协议(例如，互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如，可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS)、和/或短消息服务(SMS))、或者包括在本文档提交日期还未开发出的通信协议的其他任何适当的通信协议。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据，将音频数据转换为电信号，并将电信号传输到扬声器111。扬声器111将电信号转换为人类可听到的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据，并且将音频数据传输到外围设备接口118以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施例中，音频电路110还包括耳麦插孔(例如，图2A中的212)。耳麦插孔提供音频电路110和可移除的音频输入/输出外围设备之间的接口，该可移除的音频输入/输出外围设备诸如仅输出的耳机或者具有输出(例如，单耳耳机或双耳耳机)和输入(例如，麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触敏显示器系统112和其他输入或控制设备116与外围设备接口118耦接。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161、和用于其他输入或控制设备的一个或多个输入控制器160。一个或多个输入控制器160从其他输入或控制设备116接收电信号/将电信号发送到该其他输入或控制设备。其他输入控制设备116任选地包括物理按钮(例如，下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮等。在一些另选的实施例中，一个或多个输入控制器160任选地耦接至以下各项中的任一者(或不耦接至以下各项中的任一者)：键盘、红外线端口、USB端口、触笔、和/或指针设备诸如鼠标。一个或多个按钮(例如，图2A中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的增大/减小按钮。一个或多个按钮任选地包括下压按钮(例如，图2A中的206)。
触敏显示器系统112提供设备与用户之间的输入接口和输出接口。显示控制器156从触敏显示器系统112接收电信号和/或将电信号发送至触敏显示器系统112。触敏显示器系统112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频以及它们的任何组合(统称为“图形”)。在一些实施例中，一些视觉输出或全部的视觉输出对应于用户界面对象。如本文所用，术语“示能表示”是用户交互式图形用户界面对象(例如，被配置为对被引向图形用户界面对象的输入进行响应的图形用户界面对象)。用户交互式图形用户界面对象的示例包括但不限于按钮、滑块、图标、可选择菜单项、开关、超链接或其他用户界面控件。
触敏显示器系统112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器、或传感器组。触敏显示器系统112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触敏显示器系统112上的接触(和该接触的任何移动或中断)，并且将检测到的接触转换为与被显示在触敏显示器系统112上的用户界面对象(例如，一个或多个软按键、图标、网页或图像)的交互。在一个示例性实施例中，触敏显示器系统112和用户之间的接触点对应于用户的手指或触笔。
触敏显示器系统112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术，但是在其他实施例中使用其他显示技术。触敏显示系统112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触敏显示系统112接触的一个或多个点的其他元件来检测接触及其任何移动或中断，该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在一个示例性实施例中，使用投射式互电容感测技术，诸如从Apple Inc.(Cupertino,California)的iPod和中发现的技术。
触敏显示器系统112任选地具有超过100dpi的视频分辨率。在一些实施例中，触摸屏视频分辨率超过400dpi(例如，为500dpi、800dpi或更大)。用户任选地使用任何合适的物体或附加物诸如触笔、手指等来与触敏显示系统112接触。在一些实施例中，将用户界面设计成与基于手指的接触和手势一起工作，由于手指在触摸屏上的接触区域较大，因此这可能不如基于触笔的输入精确。在一些实施例中，设备将基于手指的粗略输入转化为精确的指针/光标位置或命令以用于执行用户所期望的动作。
在一些实施例中，除了触摸屏之外，设备100任选地包括用于激活或去激活特定功能的触控板(未示出)。在一些实施例中，触控板是设备的触敏区域，与触摸屏不同，该触敏区域不显示视觉输出。触控板任选地是与触敏显示器系统112分开的触敏表面，或者是由触摸屏形成的触敏表面的延伸部分。
在一些实施例中，除了触摸屏和/或触控板之外，设备100任选地包括与触摸屏和/或触控板分开的一个或多个显示器外触敏输入区域。在一些实施例中，显示器外触敏输入区域位于该设备的与该设备的显示器侧相邻的一个或多个周边侧上。触敏输入区域的触敏表面任选地垂直于该设备的显示器。在一些实施例中，除了能够检测对输入区域的接触的不同强度水平之外，输入区域还被配置为检测跨输入区域的表面沿一个或多个方向的移动。在一些实施例中，该设备将基于在输入区域上检测到的接触的移动方向和强度来识别输入区域上的不同类型的输入(例如，按压输入、滚动输入和切换输入)，并且设备将在输入区域生成局部触觉输出以模拟由机械输入设备诸如开关、滑块、拨号盘、滚轮或按钮提供的触觉反馈。在一些实施例中，显示器外触敏输入区域在性质上不同于触摸板，因为接触在显示器外触敏输入区域上的位置和移动不以接触在触摸板上的位置和移动将对应于焦点选择器在显示器上的位置和移动的方式直接对应于焦点选择器在显示器上的位置和移动。事实上，经常地，当用户使用显示器外输入区域来与设备进行交互并操纵显示器上所示的用户界面时，焦点选择器不显示或不需要在显示器上。在许多情况下，在检测到输入区域上的输入之前，和/或基于检测到的输入的类型，而不是在输入区域上检测到的接触的确切位置，将输入区域上的输入的焦点预设为位置、对象或功能。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如，电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电源状态指示符(例如，发光二极管(LED))以及与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出与I/O子系统106中的光学传感器控制器158耦接的光学传感器。一个或多个光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。一个或多个光学传感器164从环境接收通过一个或多个透镜而投射的光，并且将光转换为表示图像的数据。结合成像模块143(也被叫做相机模块)，一个或多个光学传感器164任选地捕获静态图像和/或视频。在一些实施例中，光学传感器位于设备100的与设备前部上的触敏显示系统112相背对的后部上，使得触摸屏能够用作用于静态图像和/或视频图像采集的取景器。在一些实施例中，另一光学传感器位于设备的前部上，从而获取该用户的图像(例如，用于自拍、用于当用户在触摸屏上观看其他视频会议参与者时进行视频会议等等)。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了与I/O子系统106中的强度传感器控制器159耦接的接触强度传感器。一个或多个接触强度传感器165任选地包括一个或多个压阻应变仪、电容式力传感器、电气式力传感器、压电力传感器、光学力传感器、电容式触敏表面、或其他强度传感器(例如，用于测量触敏表面上的接触的力(或压力)的传感器)。一个或多个接触强度传感器165从环境接收接触强度信息(例如，压力信息或压力信息的代用物)。在一些实施例中，至少一个接触强度传感器与触敏表面(例如，触敏显示器系统112)并置排列或邻近。在一些实施例中，至少一个接触强度传感器位于设备100的与位于设备100的前部上的触敏显示系统112相背对的后部上。
设备100任选地还包括一个或多个接近传感器166。图1A示出了与外围设备接口118耦接的接近传感器166。另选地，接近传感器166与I/O子系统106中的输入控制器160耦接。在一些实施例中，当多功能设备被置于用户耳朵附近时(例如，用户正在打电话时)，接近传感器关闭并禁用触敏显示器系统112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了与I/O子系统106中的触觉反馈控制器161耦接的触觉输出发生器。触觉输出发生器167任选地包括一个或多个电声设备诸如扬声器或其他音频部件；和/或用于将能量转换成线性运动的机电设备诸如电机、螺线管、电活性聚合器、压电致动器、静电致动器或其他触觉输出生成部件(例如，用于将电信号转换成设备上的触觉输出的部件)。触觉输出发生器167从触觉反馈模块133接收触觉反馈生成指令，并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施例中，至少一个触觉输出发生器与触敏表面(例如，触敏显示器系统112)并置排列或邻近，并且任选地通过竖直地(例如，向设备100的表面内/外)或侧向地(例如，在与设备100的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。在一些实施例中，至少一个触觉输出发生器传感器位于设备100的与位于设备100的前部上的触敏显示系统112相背对的后部上。
设备100任选地还包括一个或多个加速度计168。图1A示出与外围设备接口118耦接的加速度计168。另选地，加速度计168任选地与I/O子系统106中的输入控制器160耦接。在一些实施例中，基于对从该一个或多个加速度计所接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图来显示信息。设备100任选地除加速度计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系统)接收器(未示出)，以用于获取关于设备100的位置和取向(例如，纵向或横向)的信息。
在一些实施例中，存储于存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、触觉反馈模块(或指令集)133、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135、以及应用程序(或指令集)136。此外，在一些实施例中，存储器102存储设备/全局内部状态157，如图在1A和图3中所示的。设备/全局内部状态157包括以下中的一者或多者：活动应用程序状态，其指示哪些应用程序(如果有的话)当前是活动的；显示状态，其指示什么应用程序、视图或其他信息占据触敏显示器系统112的各个区域；传感器状态，包括从设备的各个传感器和其他输入或控制设备116获得的信息；以及关于设备的位置和/或姿态的位置和/或方位信息。
操作系统126(例如，iOS、Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如，存储器管理、存储设备控制、电源管理等)的各种软件组件和/或驱动器，并且有利于各种硬件和软件组件之间的通信。
通信模块128有利于通过一个或多个外部端口124来与其他设备进行通信，并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件组件。外部端口124(例如，通用串行总线(USB)、火线等)适于直接耦接到其他设备，或间接地通过网络(例如，互联网、无线LAN等)进行耦接。在一些实施例中，外部端口是与Apple Inc.(Cupertino,California)的一些iPod和设备中所使用的30针连接器相同或类似和/或兼容的多针(例如，30针)连接器。在一些实施例中，外部端口是与Apple Inc.(Cupertino,California)的一些iPod和设备中所使用的Lightning连接器相同或类似和/或兼容的Lightning连接器。
接触/运动模块130任选地检测与触敏显示器系统112(结合显示控制器156)和其他触敏设备(例如，触控板或物理点击轮)的接触。接触/运动模块130包括各种软件部件以用于执行与(例如通过手指或触笔)接触检测相关的各种操作，诸如确定是否已发生接触(例如，检测手指按下事件)、确定接触的强度(例如，接触的力或压力，或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪跨触敏表面的移动(例如，检测一个或多个手指拖动事件)，以及确定接触是否已停止(例如，检测手指抬离事件或者接触断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变)，所述接触点的移动由一系列接触数据表示。这些操作任选地被应用于单点接触(例如，单指接触或触笔接触)或者多点同时接触(例如，“多点触摸”/多指接触)。在一些实施例中，接触/运动模块130和显示控制器156检测触控板上的接触。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触模式(例如，所检测到的接触的不同运动、计时和/或强度)。因此，任选地通过检测特定接触模式来检测手势。例如，检测单指轻击手势包括检测手指按下事件，然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如，在图标位置处)检测手指抬起(抬离)事件。又如，检测触敏表面上的手指轻扫手势包括检测手指按下事件，然后检测一个或多个手指拖动事件，并且随后检测手指抬起(抬离)事件。类似地，通过检测触笔的特定接触图案来任选地检测触笔的轻击、轻扫、拖动和其他手势。
在一些实施例中，检测手指轻击手势取决于检测手指按下事件与手指抬起事件之间的时间长度，但是与检测手指按下事件与手指抬起事件之间的手指接触强度无关。在一些实施例中，根据确定手指按下事件与手指抬起事件之间的时间长度小于预先确定的值(例如，小于0.1、0.2、0.3、0.4或0.5秒)，检测轻击手势，而不管轻击期间手指接触的强度是否达到给定的强度阈值(大于标称接触检测强度阈值)，例如轻按压或深按压强度阈值。因此，手指轻击手势可以满足特定输入标准，该特定输入标准不要求接触的特征强度满足给定强度阈值以满足特定输入标准。为清楚起见，轻击手势中的手指接触通常需要满足标称接触检测强度阈值以检测到手指按下事件，低于该标称接触检测强度阈值时，不会检测到接触。类似的分析适用于通过触笔或其他接触检测轻击手势。在设备能够检测在触敏表面上方悬停的手指或触笔接触的情况下，标称接触检测强度阈值任选地不与手指或触笔与触敏表面之间的物理接触对应。
同样的概念以类似方式适用于其他类型的手势。例如，可基于满足与手势中包括的接触的强度无关或者不要求执行手势的一个或多个接触达到强度阈值以便被识别的标准来任选地检测轻扫手势、捏合手势、展开手势和/或长按压手势。例如，轻扫手势基于一个或多个接触的移动的量来检测；缩放手势基于两个或更多个接触朝彼此的移动来检测；扩放手势基于两个或更多个接触背离彼此的移动来检测；长按压手势基于触敏表面上具有少于阈值移动量的接触的持续时间来检测。因此，关于特定手势识别标准不要求接触强度满足相应的强度阈值以满足特定手势识别标准的陈述意味着特定手势识别标准能够在手势中的接触未达到相应的强度阈值时被满足，并且还能够在手势中的一个或多个接触达到或超过相应的强度阈值的情况下被满足。在一些实施例中，基于确定在预定义时间段内检测到手指按下事件和手指抬起事件来检测轻击手势，而不考虑在预定义时间段期间接触是高于还是低于相应的强度阈值，并且基于确定接触移动大于预定义量值来检测轻扫手势，即使在接触移动结束时接触高于相应的强度阈值也是如此。即使在对手势的检测受到执行手势的接触的强度的影响的实施方式中(例如，当接触的强度高于强度阈值时，设备更快地检测到长按压，或者当接触的强度更高时，设备会延迟对轻击输入的检测)，只要在接触未达到特定强度阈值的情况下可以满足识别手势的标准，则对这些手势的检测也不会要求接触达到特定强度阈值(例如，即使识别手势所需的时间量发生变化)。
在某些情况下，接触强度阈值、持续时间阈值和移动阈值以各种不同组合进行组合，以便创建启发式算法来区分针对相同输入元素或区域的两个或更多个不同手势，使得与相同输入元素的多个不同交互能够提供更丰富的用户交互和响应的集合。关于一组特定手势识别标准不要求接触的强度满足相应的强度阈值以满足特定手势识别标准的陈述不排除对其他强度相关手势识别标准进行同时评估，以识别具有当手势包括具有高于相应强度阈值的强度的接触时被满足的标准的其他手势。例如，在某些情况下，第一手势的第一手势识别标准(其不要求接触的强度满足相应的强度阈值以满足第一手势识别标准)与第二手势的第二手势识别标准(其取决于达到相应强度阈值的接触)竞争。在此类竞争中，如果第二手势的第二手势识别标准首先得到满足，则手势任选地不被识别为满足第一手势的第一手势识别标准。例如，如果在接触移动预定义的移动量之前接触达到相应的强度阈值，则检测到深按压手势而不是轻扫手势。相反，如果在接触达到相应的强度阈值之前接触移动预定义的移动量，则检测到轻扫手势而不是深按压手势。即使在此类情况下，第一手势的第一手势识别标准仍然不要求接触的强度满足相应的强度阈值以满足第一手势识别标准，因为如果接触保持低于相应的强度阈值直到手势结束(例如，具有不会增大到高于相应强度阈值的强度的接触的轻扫手势)，手势将被第一手势识别标准识别为轻扫手势。因此，不要求接触的强度满足相应的强度阈值以满足特定手势识别标准的特定手势识别标准将会(A)在某些情况下，忽略相对于强度阈值的接触强度(例如，对于轻击手势而言)和/或(B)在某些情况下，如果在特定手势识别标准识别与输入对应的手势之前，一组竞争的强度相关手势识别标准(例如，对于深按压手势而言)将输入识别为与强度相关手势对应，则不能满足特定手势识别标准(例如，对于长按压手势而言)，从这个意义上来讲，仍然取决于相对于强度阈值的接触强度(例如，对于与深按压手势竞争识别的长按压手势而言)。
图形模块132包括用于在触敏显示器系统112或其他显示器上渲染和显示图形的各种已知软件部件，包括用于改变所显示的图形的视觉冲击(例如，亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用，术语“图形”包括可被显示给用户的任何对象，非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等。
在一些实施例中，图形模块132存储表示待使用的图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收用于指定待显示的图形的一个或多个代码，在必要的情况下还一起接收坐标数据和其他图形属性数据，并且然后生成屏幕图像数据，以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件部件，该指令由触觉输出发生器167使用，以便响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如，联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置并提供该信息以在各种应用程序中使用(例如，提供至电话138以用于基于位置的拨号；提供至相机143作为图片/视频元数据；以及提供至提供基于位置的服务的应用程序诸如天气桌面小程序、当地黄页桌面小程序和地图/导航桌面小程序)。
应用程序136任选地包括以下模块(或指令集)或者其子集或超集：
·联系人模块137(有时称作通讯录或联系人列表)；
·电话模块138；
·视频会议模块139；
·电子邮件客户端模块140；
·即时消息(IM)模块141；
·健身支持模块142；
·用于静态图像和/或视频图像的相机模块143；
·图像管理模块144；
·浏览器模块147；
·日历模块148；
·桌面小程序模块149，其任选地包括以下各项中的一者或多者：天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、字典桌面小程序149-5和由用户获得的其他桌面小程序，以及用户创建的桌面小程序149-6；
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150；
·搜索模块151；
·视频和音乐播放器模块152，任选地由视频播放器模块和音乐播放器模块构成；
·记事本模块153；
·地图模块154；以及/或者
·在线视频模块155。
任选地存储在存储器102中的其他应用程序136的示例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密、数字权益管理、语音识别和语音复制。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132、和文本输入模块134，联系人模块137包括可执行指令用于管理通讯录或联系人列表(例如，存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192中)，包括：添加姓名到通讯录；从通讯录删除姓名；将电话号码、电子邮件地址、物理地址或其他信息与姓名相关联；将图像与姓名相关联；对姓名进行归类和分类；提供电话号码和/或电子邮件地址来发起和/或促进通过电话138、视频会议139、电子邮件140或即时消息141的通信；等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示器系统112、显示控制器156、接触模块130、图形模块132、和文本输入模块134，电话模块138包括用于进行以下操作的可执行指令：输入与电话号码对应的字符序列、访问通讯录137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话、以及当会话完成时断开或挂断。如上所述，无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示系统112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138，视频会议模块139包括根据用户指令来发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134，电子邮件客户端模块140包括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144，电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134，即时消息模块141包括用于进行以下操作的可执行指令：输入与即时消息对应的字符序列、修改先前输入的字符、传输相应即时消息(例如，使用针对基于电话的即时消息的短消息服务(SMS)或多媒体消息服务(MMS)协议或者使用针对基于互联网的即时消息的XMPP、SIMPLE、Apple推送通知服务(APNs)或IMPS)、接收即时消息，以及查看所接收的即时消息。在一些实施例中，所传输和/或接收的即时消息任选地包括图形、相片、音频文件、视频文件、和/或MMS和/或增强消息服务(EMS)中所支持的其他附接件。如本文所用，“即时消息”是指基于电话的消息(例如，使用SMS或MMS发送的消息)和基于互联网的消息(例如，使用XMPP、SIMPLE、APNs或IMPS发送的消息)两者。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块146，健身支持模块142包括可执行指令用于创建健身(例如，具有时间、距离和/或卡路里燃烧目标)；与(体育设备和智能手表中的)健身传感器通信；接收健身传感器数据；校准用于监视健身的传感器；为健身选择和播放音乐；以及显示、存储和传输健身数据。
结合触敏显示器系统112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144，相机模块143包括用于进行以下操作的可执行指令：捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特征、和/或从存储器102删除静态图像或视频。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134、和相机模块143，图像管理模块144包括用于排列、修改(例如，编辑)、或以其他方式操控、加标签、删除、展示(例如，在数字幻灯片或相册中)、以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134，浏览器模块147包括根据用户指令来浏览互联网(包括搜索、链接到、接收、和显示网页或其部分、以及链接到网页的附件和其他文件)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147，日历模块148包括用于根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如，日历条目、待办事项等)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147，桌面小程序模块149是任选地由用户下载和使用的微型应用程序(例如，天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和词典桌面小程序149-5)、或由用户创建的微型应用程序(例如，用户创建的桌面小程序149-6)。在一些实施例中，桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施例中，桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如，Yahoo！桌面小程序)。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、和浏览器模块147，桌面小程序创建器模块150包括用于创建桌面小程序(例如，将网页的用户指定部分转到桌面小程序中)的可执行指令。
结合触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134，搜索模块151包括用于根据用户指令来搜索存储器102中的与一个或多个搜索条件(例如，一个或多个用户指定的搜索词)匹配的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触敏显示系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147，视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令，以及用于显示、呈现或以其他方式回放视频(例如，在触敏显示系统112上或在经由外部端口124无线连接的外部显示器上)的可执行指令。在一些实施例中，设备100任选地包括MP3播放器诸如iPod(Apple Inc.的商标)的功能。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134，记事本模块153包括用于根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147，地图模块154包括用于根据用户指令来接收、显示、修改和存储地图以及与地图相关联的数据(例如，驾车路线；特定位置处或附近的商店和其他兴趣点的数据；和其他基于位置的数据)的可执行指令。
结合触敏显示系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147，在线视频模块155包括允许用户访问、浏览、接收(例如，通过流式传输和/或下载)、回放(例如在触摸屏112上或在无线连接的或经由外部端口124连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件、以及以其他方式管理一种或多种文件格式诸如H.264的在线视频的可执行指令。在一些实施例中，使用即时消息模块141而不是电子邮件客户端模块140来发送特定在线视频的链接。
上述所识别的每个模块和应用对应于用于执行上述一种或多种功能以及在本申请中所描述的方法(例如，本文中所描述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(即，指令集)不必以独立的软件程序、过程或模块实现，因此这些模块的各种子集任选地在各种实施例中组合或以其他方式重新布置。在一些实施例中，存储器102任选地存储上述模块和数据结构的子集。此外，存储器102任选地存储上文未描述的另外的模块和数据结构。
在一些实施例中，设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触控板来执行的设备。通过使用触摸屏和/或触控板作为用于操作设备100的主要输入控制设备，任选地减少设备100上的物理输入控制设备(例如，下压按钮、拨盘等等)的数量。
唯一地通过触摸屏和/或触控板来执行的预定义的一组功能任选地包括在用户界面之间的导航。在一些实施例中，触控板在被用户触摸时将设备100从设备100上显示的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施例中，使用触控板来实现“菜单按钮”。在一些其他实施例中，菜单按钮是物理下压按钮或者其他物理输入控制设备，而不是触控板。
图1B是示出根据一些实施例的用于事件处理的示例性部件的框图。在一些实施例中，存储器102(图1A中)或存储器370(图3)包括事件分类器170(例如，在操作系统126中)和相应的应用程序136-1(例如，前述应用程序136、137至155、380至390中的任一个应用程序)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施例中，应用程序136-1包括应用程序内部状态192，该应用程序内部状态指示当应用程序是活动的或正在执行时在触敏显示器系统112上显示的一个或多个当前应用程序视图。在一些实施例中，设备/全局内部状态157被事件分类器170用来确定哪个(哪些)应用程序当前是活动的，并且应用程序内部状态192被事件分类器170用来确定要将事件信息递送到的应用程序视图191。
在一些实施例中，应用程序内部状态192包括附加信息，诸如以下各项中的一者或多者：当应用程序136-1恢复执行时将被使用的恢复信息、指示信息正被显示或准备好用于被应用程序136-1显示的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列，以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如，作为多点触摸手势的一部分的触敏显示器系统112上的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器诸如接近传感器166、一个或多个加速度计168和/或麦克风113(通过音频电路110)接收的信息。外围设备接口118从I/O子系统106所接收的信息包括来自触敏显示器系统112或触敏表面的信息。
在一些实施例中，事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应，外围设备接口118传输事件信息。在其他实施例中，外围设备接口118仅当存在显著事件(例如，接收到高于预先确定的噪声阈值和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施例中，事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器系统112显示多于一个视图时，命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户能够在显示器上看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图，本文中有时也称为应用程序视图或用户界面窗口，在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如，在其中检测到触摸的最低水平视图任选地被称为命中视图，并且被识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定，所述初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时，命中视图确定模块172将命中视图识别为应当对子事件进行处理的分级结构中的最低视图。在大多数情况下，命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别，命中视图便通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施例中，活动事件识别器确定模块173确定仅命中视图应接收特定子事件序列。在其他实施例中，活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图，并因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施例中，即使触摸子事件完全被局限到与一个特定视图相关联的区域，分级结构中的较高视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如，事件识别器180)。在包括活动事件识别器确定模块173的实施例中，事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施例中，事件分配器模块174在事件队列中存储事件信息，该事件信息由相应事件接收器模块182进行检索。
在一些实施例中，操作系统126包括事件分类器170。另选地，应用程序136-1包括事件分类器170。在又一个实施例中，事件分类器170是独立模块，或者是存储在存储器102中的另一个模块(诸如，接触/运动模块130)的一部分。
在一些实施例中，应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191，其中的每一个都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常，相应应用程序视图191包括多个事件识别器180。在其他实施例中，事件识别器180中的一个或多个事件识别器是独立模块的一部分，该独立模块为诸如用户界面工具包(未示出)或应用程序136-1从中继承方法和其他属性的较高级别的对象。在一些实施例中，相应事件处理程序190包括以下各项中的一者或多者：数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用程序内部状态192。另选地，应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序190。另外，在一些实施例中，数据更新器176、对象更新器177和GUI更新器178中的一者或多者包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如，事件数据179)，并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施例中，事件识别器180还包括元数据183和事件传递指令188(其任选地包括子事件递送指令)的至少一个子集。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件，事件信息还包括附加信息，诸如子事件的位置。当子事件涉及触摸的运动时，事件信息任选地还包括子事件的速率和方向。在一些实施例中，事件包括设备从一个取向旋转到另一取向(例如，从纵向取向旋转到横向取向，或反之亦然)，并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较，并且基于该比较来确定事件或子事件，或者确定或更新事件或子事件的状态。在一些实施例中，事件比较器184包括事件定义186。事件定义186包含事件的定义(例如，预定义的子事件序列)，例如事件1(187-1)、事件2(187-2)以及其他。在一些实施例中，事件187中的子事件包括例如触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个示例中，事件1(187-1)的定义是被显示对象上的双击。例如，双击包括被显示对象上的预先确定时长的第一次触摸(触摸开始)、预先确定时长的第一次抬起(触摸结束)、被显示对象上的预先确定时长的第二次触摸(触摸开始)以及预先确定时长的第二次抬起(触摸结束)。在另一个示例中，事件2(187-2)的定义是被显示对象上的拖动。例如，拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器系统112上的移动、以及触摸的抬离(触摸结束)。在一些实施例中，事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施例中，事件定义187包括对用于相应用户界面对象的事件的定义。在一些实施例中，事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如，在触敏显示器系统112上显示三个用户界面对象的应用程序视图中，当在触敏显示器系统112上检测到触摸时，事件比较器184执行命中测试以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示对象与相应事件处理程序190相关联，则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如，事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施例中，相应事件187的定义还包括延迟动作，该延迟动作延迟事件信息的递送，直到已确定子事件序列确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件序列不与事件定义186中的任何事件匹配时，该相应事件识别器180进入事件不可能、事件失败或事件结束状态，在此之后忽略基于触摸的手势的后续子事件。在这种情况下，对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪并处理持续进行的基于触摸的手势的子事件。
在一些实施例中，相应事件识别器180包括具有指示事件递送系统应当如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表的元数据183。在一些实施例中，元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标志和/或列表。在一些实施例中，元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施例中，当事件的一个或多个特定子事件被识别时，相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施例中，相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施例中，事件识别器180抛出与所识别的事件相关联的标记，并且与该标记相关联的事件处理程序190获得该标记并执行预定义过程。
在一些实施例中，事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反，子事件递送指令将事件信息递送到与子事件序列相关联的事件处理程序或者递送到活跃参与的视图。与子事件序列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施例中，数据更新器176创建并更新在应用程序136-1中使用的数据。例如，数据更新器176对联系人模块137中所使用的电话号码进行更新，或者对视频播放器模块145中所使用的视频文件进行存储。在一些实施例中，对象更新器177创建和更新在应用程序136-1中使用的对象。例如，对象更新器177创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如，GUI更新器178准备显示信息，并且将显示信息发送至图形模块132以用以显示在触敏显示器上。
在一些实施例中，事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对它们的访问权限。在一些实施例中，数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序136-1或应用程序视图191的单个模块中。在其他实施例中，它们被包括在两个或更多个软件模块中。
应当理解，关于触敏显示器上的用户触摸的事件处理的上述论述还适用于利用输入设备来操作多功能设备100的其他形式的用户输入，并不是所有用户输入都是在触摸屏上发起的。例如，任选地与单次或多次键盘按下或按住协作的鼠标移动和鼠标按钮按下；触控板上的接触移动，诸如轻击、拖动、滚动等；触笔输入；设备的移动；口头指令；检测到的眼睛移动；生物特征输入；和/或它们的任何组合任选地被用作对应于限定要识别的事件的子事件的输入。
图1C是示出了根据一些实施例的触觉输出模块的框图。在一些实施例中，I/O子系统106(例如触感反馈控制器161(图1A)和/或一个或多个其他输入控制器160(图1A))包括图1C所示的示例部件中的至少一些。在一些实施例中，外围设备接口118包括图1C所示的示例部件中的至少一些。
在一些实施例中，触觉输出模块包括触感反馈模块133。在一些实施例中，触感反馈模块133聚合并组合来自电子设备上软件应用的针对用户界面反馈(例如，对与所显示用户界面对应的用户输入以及指示电子设备的用户界面中操作的执行或事件的发生的提示和其他通知进行响应的反馈)的触觉输出。触感反馈模块133包括波形模块123(用于提供用于生成触觉输出的波形)、混合器125(用于混合波形，诸如不同通道中的波形)、压缩器127(用于缩减或压缩波形的动态范围)、低通滤波器129(用于滤出波形中的高频信号分量)和热控制器131(用于根据热条件调节波形)中的一者或多者。在一些实施例中，触感反馈模块133被包括在触感反馈控制器161(图1A)中。在一些实施例中，触感反馈模块133的单独单元(或触感反馈模块133的单独实施方式)也被包括在音频控制器(例如音频电路110，图1A)中并用于生成音频信号。在一些实施例中，单个触感反馈模块133被用于生成音频信号以及生成触觉输出的波形。
在一些实施例中，触感反馈模块133还包括触发器模块121(例如，确定要生成触觉输出并引发用于生成对应触觉输出的过程的软件应用、操作系统、或其他软件模块)。在一些实施例中，触发器模块121生成用于引发(例如由波形模块123)生成波形的触发器信号。例如，触发器模块121基于预先设置的定时标准来生成触发器信号。在一些实施例中，触发器模块121从触感反馈模块133之外接收触发器信号(例如，在一些实施例中，触感反馈模块133从位于触感反馈模块133之外的硬件输入处理模块199接收触发器信号)并将触发器信号中继给触感反馈模块133内的其他部件(例如波形模块123)或基于硬件输入设备(例如主按钮、侧按钮、电源按钮等)的激活而(以触发器模块121)触发操作的软件应用程序。在一些实施例中，触发器模块121还(例如从触感反馈模块133，图1A和图3)接收触觉反馈生成指令。在一些实施例中，触发器模块121响应于触感反馈模块133(或触感反馈模块133中的触发器模块121)(例如从触感反馈模块133，图1A和图3)接收触觉反馈指令而生成触发器信号。
波形模块123(例如从触发器模块121)接收触发器信号作为输入，并响应于接收到触发器信号而提供用于生成一个或多个触觉输出的波形(例如，从预定义的一组被指派用于供波形模块123使用的波形中选择的波形，诸如下文中参考图4F至图4G更详细描述的波形)。
混合器125(例如从波形模块123)接收波形作为输入，并将这些波形混合在一起。例如，当混合器125接收两个或更多个波形(例如，第一通道中的第一波形和第二通道中的至少部分地与第一波形重叠的第二波形)时，混合器125输出对应于这两个或更多个波形之和的组合波形。在一些实施例中，混合器125还修改这两个或更多个波形中的一个或多个波形以相对于这两个或更多个波形中的其余波形而强调特定波形(例如通过提高该特定波形的规模和/或减小这些波形中的其他波形的规模)。在一些情况下，混合器125选择一个或多个波形来从组合波形中移除(例如，当有来自不止三个来源的波形已经被请求由触觉输出发生器167同时输出时，来自最老旧来源的波形被丢弃)。
混合器127接收波形(例如来自混合器125的组合波形)作为输入，并修改这些波形。在一些实施例中，压缩器127缩减这些波形(例如，根据触觉输出发生器167(图1A)或357(图3)的物理规范)，使得对应于这些波形的触觉输出被缩减。在一些实施例中，压缩器127诸如通过为波形强加预定义的最大幅值来对波形进行限制。例如，压缩器127减小超过预定义幅值阈值的波形部分的幅值，而保持不超过预定义幅值阈值的波形部分的幅值。在一些实施例中，压缩器127缩减波形的动态范围。在一些实施例中，压缩器127动态地缩减波形的动态范围，使得组合波形保持在触觉输出发生器167的性能规范(例如力和/或可移动质块位移限制)内。
低通滤波器129接收波形(例如来自压缩器127的经压缩波形)作为输入，并对波形进行滤波(例如平滑处理)(例如移除或减少波形中的高频信号分量)。例如在某些情况下，压缩器127在经压缩的波形中包括妨碍触觉输出生成和/或在根据经压缩波形生成触觉输出时超过触觉输出发生器167的性能规范的无关信号(例如高频信号分量)。低通滤波器129减少或移除波形中的此类无关信号。
热控制器131接收波形(例如来自低通滤波器129的经滤波波形)作为输入，并根据设备100的热条件(例如基于在设备100内检测到的内部温度，诸如触感反馈控制器161的温度，和/或设备100检测到的外部温度)调节波形。例如在一些情况下，触感反馈控制器161的输出根据温度而变化(例如，响应于接收到相同波形，触感反馈控制器161在触感反馈控制器161处于第一温度时生成第一触觉输出，而在触感反馈控制器161处于与第一温度不同的第二温度时生成第二触觉输出)。例如，触觉输出的量值(或幅值)可根据温度而变化。为了降低温度变化的效应，波形被修改(例如，波形的幅值基于温度而被增大或减小)。
在一些实施例中，触觉反馈模块133(例如触发器模块121)耦接到硬件输入处理模块199。在一些实施例中，图1A中的其他输入控制器160包括硬件输入处理模块199。在一些实施例中，硬件输入处理模块199接收来自硬件输入设备198(例如图1A中的其他输入或控制设备116，诸如主按钮、侧按钮或电源按钮)的输入。在一些实施例中，硬件输入设备198是本文所述的任何输入设备，诸如触敏显示器系统112(图1A)、键盘/鼠标350(图3)、触控板355(图3)、其他输入或控制设备116之一(图1A)或强度敏感按钮(例如如图2B所示的主按钮，如图4A所述的在设备的侧面(例如，输入区域455、456和457)上的侧按钮或如图2C所示具有机械致动器的按钮)。在一些实施例中，硬件输入设备198由强度敏感输入区域(例如，如图2B所示的主按钮、如图4A所示的与设备的显示器侧相邻的侧面上的侧按钮或如图2C所示的具有机械致动器的按钮)组成而不由触敏显示器系统112(图1A)、键盘/鼠标350(图3)或触控板355(图3)组成。在一些实施例中，响应于来自硬件输入设备198的输入，硬件输入处理模块199提供一个或多个触发器信号给触感反馈模块133以指示已检测到满足预定义输入标准的用户输入，诸如对应于按钮“点击”(例如“按下点击”或“松开点击”)的输入。在一些实施例中，触感反馈模块133响应于对应于按钮“点击”的输入而提供对应于按钮“点击”的波形，从而模拟按压物理按钮的触感反馈。在一些实施例中，触感反馈模块133响应于对应于滚轮“滚动”或拨号盘“转动”的输入而提供对应于滚轮或拨号盘的“卡位”的波形，从而模拟旋转物理滚轮或拨号盘的触感反馈。在一些实施例中，触感反馈模块133响应于对应于开关“开”或“关”的输入而提供对应于开关“卡扣”的波形，从而模拟翻动物理开关的触感反馈。
在一些实施例中，触觉输出模块包括触感反馈控制器161(例如图1A中的触感反馈控制器161)，其控制触觉输出的生成。在一些实施例中，触感反馈控制器161耦接到多个触觉输出发生器，并且选择多个触觉输出发生器中的一个或多个触觉输出发生器并将波形发送到所选择的一个或多个触觉输出发生器以用于生成触觉输出。在一些实施例中，触感反馈控制器161协调对应于激活硬件输入设备198的触觉输出请求和对应于软件事件的触觉输出请求(例如来自触感反馈模块133的触觉输出请求)，并修改两个或更多个波形中的一个或多个波形以相对于两个或更多个波形中的其余波形强调特定波形(例如通过提高特定波形的规模和/或减小这些波形中其余波形的规模，以相比于对应于软件事件的触觉输出优先处理对应于激活硬件输入设备198的触觉输出)。
在一些实施例中，如图1C所示，触感反馈控制器161的输出耦接到设备100的音频电路(例如音频电路110，图1A)，并将音频信号提供给设备100的音频电路。在一些实施例中，触感反馈控制器161提供用于生成触觉输出的波形和用于与生成触觉输出一起提供音频输出的音频信号这二者。在一些实施例中，触感反馈控制器161修改音频信号和/或(用于生成触觉输出的)波形使得音频输出和触觉输出同步(例如通过延迟音频信号和/或波形)在一些实施例中，触感反馈控制器161包括用于将数字波形转换成模拟信号的数模转换器，模拟信号被放大器163和/或触觉输出发生器167接收。
在一些实施例中，触觉输出模块包括放大器163。在一些实施例中，放大器163接收(例如来自触感反馈控制器161的)波形，并放大波形然后将经放大的波形发送给触觉输出发生器167(例如，触觉输出发生器167(图1A)或357(图3)中任何一者或多者)。例如，放大器163将所接收的波形放大到符合触觉输出发生器167的物理规范的信号电平(例如放大到触觉输出发生器167为了生成触觉输出而需要的电压和/或电流使得发送给触觉输出发生器167的信号生成对应于从触感反馈控制器161接收的波形的触觉输出)并将经放大的波形发送给触觉输出发生器167。作为响应，触觉输出发生器167生成触觉输出(例如，局部触觉输出和/或整个设备触觉输出)。在一些实施例中，局部触觉输出由围绕输入区域(例如，侧按钮)下方的固定枢轴来回摇摆的表面振荡器或能够生成特别指向输入区域的触觉输出的其他触觉输出发生器生成。在一些实施例中，通过将可移动质块在一个或多个维度中相对于该可移动质块的中性位置前后移位来生成整个设备触觉输出。整个设备触觉输出例如由耦接到该设备的外壳的触觉输出发生器在该设备上的许多不同位置同时产生。
在一些实施例中，触觉输出模块包括传感器169，其耦接到触觉输出发生器167。传感器169检测触觉输出发生器167或触觉输出发生器167的一个或多个部件(例如用于生成触觉输出的一个或多个运动部件，诸如膜)的状态或状态变化(例如机械位置、物理位移、和/或移动)。在一些实施例中，传感器169是磁场传感器(例如霍尔效应传感器)或其他位移和/或运动传感器。在一些实施例中，传感器169将信息(例如触觉输出发生器167中一个或多个部件的位置、位移和/或移动)提供给触感反馈控制器161，以及根据传感器169提供的关于触觉输出发生器167的状态的信息，触感反馈控制器161调节从触感反馈控制器161输出的波形(例如，任选地经由放大器163发送给触觉输出发生器167的波形)。
图2A示出了根据一些实施例的具有触摸屏(例如，触敏显示系统112，图1A)的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在本实施例以及下文所述的其他实施例中，用户能够通过例如利用一根或多根手指202(在图中未按比例绘制)或一支或多支触笔203(在图中未按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施例中，当用户中断与一个或多个图形的接触时，将发生对一个或多个图形的选择。在一些实施例中，手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些实施方式中或在一些情况下，不经意地与图形接触不会选择图形。例如，当与选择对应的手势是轻击时，在应用程序图标上方扫动的轻扫手势任选地不会选择对应的应用程序。
设备100任选地还包括一个或多个物理按钮，诸如“主按钮”或菜单按钮204。如前所述，菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。作为另外一种选择，在一些实施例中，菜单按钮被实现为被显示在触摸屏显示器上的GUI中的软键。在一些实施例中，移除主按钮，并且通过触敏显示器上的预定义手势(例如，从触摸屏显示器的底部边缘向上轻扫的手势)调用其功能。
在一些实施例中，设备100包括触摸屏显示器、菜单按钮204、用于使设备通电/断电和用于锁定设备的下压按钮206、一个或多个音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212、和对接/充电外部端口124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压下状态持续预定义的时间间隔来对设备进行开/关机；通过压下该按钮并在该预定义的时间间隔过去之前释放该按钮来锁定设备；和/或对设备进行解锁或发起解锁过程。在一些实施例中，设备100还通过麦克风113来接受用于激活或停用某些功能的语音输入。设备100还任选地包括用于检测触敏显示器系统112上的接触的强度的一个或多个接触强度传感器165，和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。在一些实施例中，音量按钮208和下压按钮206由强度敏感输入区域替换，该强度敏感输入区域与局部触觉输出发生器耦接，该局部触觉输出发生器响应于不同类型的触摸输入提供触觉输出以模拟物理按钮、滚轮、开关或其他硬件输入设备的感觉。
图2B-图2C示出适合在图1A、图2A、图3和/或图4A中所示的电子设备中使用的第一输入设备(例如作为home按钮204)的分解图。图2B示出具有电容传感器的强度敏感home按钮的示例，电容传感器用于确定对应于施加于强度敏感home按钮的力的强度值的范围。图2C示出具有机械开关元件的home按钮的示例。参考图2B，输入设备堆叠220包括盖元件222和镶边224。在例示的实施例中，镶边224完全环绕盖元件222的侧面以及盖元件222的顶表面的周边。其他实施例不限于这种构型。例如在一个实施例中，盖元件222的侧面和/或顶表面可部分地被镶边224环绕。另选地，在其他实施例中可省略镶边224。
盖元件222和镶边224二者可由任何合适的不透明、透明和/或半透明材料制成。例如，盖元件222可由玻璃、塑料、或蓝宝石形成，而镶边224可由金属或塑料形成。在一些实施例中，一个或多个附加层(未示出)可位于盖元件222下方。例如，当盖元件222由透明材料形成时，不透明油墨层可设置在盖元件222下方。不透明油墨层可隐藏输入设备堆叠220中的其他部件，使得不能通过透明盖元件222看到其他部件。
第一电路层226可设置在盖元件222下方。可使用任何适当的电路层。例如，第一电路层226可以是电路板或柔性电路。第一电路层226可包括一个或多个电路、信号线和/或集成电路。在一个实施例中，第一电路层226包括生物特征传感器228。可使用任何合适类型的生物特征传感器。例如，在一个实施例中，生物特征传感器是在用户的手指接近和/或接触盖元件222时捕获至少一个指纹的电容式指纹传感器。
第一电路层226可以粘合剂层230附接到盖元件222的底表面。任何合适的粘合剂都可用于粘合剂层。例如，压敏粘合剂层可被用作粘结剂层230。
适形层232被设置在第一电路层226下方。在一个实施例中，适形层232包括形成在适形层232中的开口234。在设备堆叠220被装配时，开口234暴露第一电路层226的顶表面和/或生物特征传感器228。在例示的实施例中，适形层232被定位为围绕镶边224的内周边和/或围绕盖元件222的周边边缘。虽然以圆形形状图示，但是适形层232可具有任何给定形状和/或维度，诸如方形或椭圆形。适形层232在图2B和2C中被图示为连续适形层，但其他实施例并不限于这个构型。在一些实施例中，可在设备堆叠220中使用多个分立的适形层。另外在一些实施例中，适形层232不包括开口234，并且适形层232延伸跨输入设备堆叠220的至少一部分。例如，适形层232可延伸跨盖元件222的底表面、第一电路层226的底表面、或盖元件222的底表面(例如围绕盖元件的周边边缘)和第一电路层226的底表面的一部分。
第二电路层238被定位在第一电路层226下方。柔性电路和电路板是可在第二电路层238中使用的电路层的示例。在一些实施例中，第二电路层238可包括第一电路区部240和第二电路区部242。第一电路区部240和第二电路区部242可彼此电连接。
第一电路区部240可包括第一组被包括在强度传感器中的一个或多个强度传感器部件。在一些实施例中，第一电路区部240可电连接到第一电路层226。例如，当第一电路层226包括生物特征传感器228时，生物特征传感器228可电连接到第二电路层238的第一电路区部240。
第二电路区部242可包括附加电路，诸如信号线、电路部件、集成电路、等等。在一个实施例中，第二电路区部242可包括板对板连接器244，用于将第二电路层238电连接到电子设备中的其他电路。例如，第二电路层238可利用板对板连接器244而可操作地连接到处理设备。除此之外或另选地，第二电路层238可以可操作地连接到将从第一电路区部240中的强度传感器部件接收的信号(例如感测信号)传输给处理设备的电路。除此之外或另选地，第二电路层238可以可操作地连接到提供信号(例如驱动信号、基准信号)给第一电路区部240中所述一个或多个强度传感器部件的电路。
在一些实施例中，第二电路层238的第一电路区部240可利用粘合剂层236而附接到第一电路层226的底表面。在一非限制性示例中，可使用管芯粘结膜将第一电路区部240附接到第一电路层226的底表面。
第三电路层246被设置在第二电路层238的第一电路区部240下方。第三电路层246可包括第二组被包括在强度传感器中的一个或多个强度传感器部件。第三电路层246由支撑元件248支撑和/或附接到支撑元件248。在一个实施例中，支撑元件248附接到镶边224以生成用于设备堆叠220中其他部件的壳体。支撑元件248可利用任何合适的附接机制附接到镶边224。
第一电路区部240中的所述第一组一个或多个强度传感器部件和第三电路层246中的所述第二组一个或多个强度传感器部件一起形成强度传感器。强度传感器可使用任何合适的强度感测技术。示例性的感测技术包括但不限于电容式、压电式、压阻式、超声、和磁性。
在图2B和2C所示的示例中，强度传感器是电容式力传感器。对于电容式力传感器，所述第一组一个或多个强度传感器部件可包括第一组一个或多个电极250，所述第二组一个或多个力传感器部件包括第二组一个或多个电极252。虽然在图2B和2C中以方形形状图示，但所述第一组和所述第二组一个或多个电极250、252中每个电极可具有任何给定形状(例如矩形、圆)。另外，所述第一组250和所述第二组252中的所述一个或多个电极可以任何给定图案布置(例如一个或多个行和一个或多个列)。
图2B和2C示出所述第一组和所述第二组一个或多个电极250、252中的两个电极。然而，其他实施例不限于这种配置。所述第一组和所述第二组一个或多个电极250、252可各自为单个电极或多个分立电极。例如，如果所述第一组一个或多个电极是单个电极，则所述第二组一个或多个电极包括多个分立电极。在一些实施例中，所述第二组一个或多个电极可以是单个电极，所述第一组包括多个分立电极。另选地，所述第一组和所述第二组一个或多个电极都可以各自包括多个分立电极。
所述第一组一个或多个电极250中的每个电极在至少一个方向(例如竖直地)与所述第二组一个或多个电极252中的相应电极对准，以生成一个或多个电容器。当力输入被施加到盖元件222(例如输入设备的输入表面)时，所述第一组250中的至少一个电极移动得更靠近所述第二组252中的相应电极，这改变电容器的电容。从每个电容器感测的电容信号表示该电容器的电容测量值。处理设备(未示出)被配置为接收电容信号并将电容信号相关到被施加于盖元件222的强度的量。在一些实施例中，力传感器可替换开关元件，并且不同强度阈值可被用于确定激活事件。
在一些实施例中，诸如图2C所示的实施例中，开关元件254可位于支撑元件248下方。开关元件254在施加于盖元件222的力输入超过给定的力量(例如与闭合第一电路区部240和第三电路层246之间距离的力阈值)时登记用户输入。可使用任何适当的开关元件。例如，开关元件254可以是在被施加于盖元件222的力输入超过力阈值时塌缩的弹片开关。在塌缩时，弹片开关完成被处理设备检测且被识别为用户输入(例如选择图标、功能、或应用程序)的电路。在一个实施例中，弹片开关被布置成使得能塌缩弹片的顶点邻近支撑板248的底表面。在另一个实施例中，可塌缩弹片的基部可邻近支撑板248的底表面。
图2D至图2F示出了适合在图1A、图2A、图3和/或图4A中所示的电子设备中使用的强度敏感输入设备701(例如作为输入区域255、256和257)的不同视图。在一些实施例中，强度敏感输入设备701是被实现为按钮710的枢转输入设备。根据一些实施例，按钮710的输入表面712任选地用作位于电子设备(例如，设备100和300)的一个或多个周边侧(例如，与显示器侧相邻的侧面)上的一个或多个单独的输入区域和/或子区域。
按钮710包括附接到按钮710的下表面的永磁体726。永磁体726可刚性地附接到按钮710，使得永磁体726与按钮710一致地移动或移位。
按钮710围绕一对枢轴727(或在一些实施例中，单个枢轴)相对于主体730旋转。该对枢轴727附接到主体730并定位在第一突出部733和第二突出部737中的每一者上，这两个突出部均为上部主体732的一部分。两个枢轴727中的每个定位在相应的突出部733、737与按钮710的下表面之间。因此，该对枢轴727在按钮710(或其他输入结构)及其输入表面712下方。更具体地，一个枢轴727定位在第一突出部733和该按钮的第一下端之间，并且另一个枢轴727定位在第二突出部737和按钮710的第二下端之间。一个枢轴727设置在第一突出部733上，并且另一个枢轴727设置在第二突出部737上。枢轴727可相对于主体730旋转或可为静止的，同时允许按钮710相对于主体730旋转。
按钮/输入结构710的输入表面712可被触摸、按压、沿一个或多个方向轻扫，或以其他方式与用户进行交互。在一些实施例中，输入表面710可响应于用户输入和/或响应于永磁体726的移动而平移、偏转、弯曲或以其他方式移动相对较小的距离。在其他实施例中，输入表面712不响应于用户输入而平移、偏转、弯曲或以其他方式移动。可通过各种强度传感器(例如，力传感器、触摸传感器或这两者的组合)来检测输入。为了简单起见，未示出此类传感器。
按钮710可包括一个或多个台阶或搁架。一个或多个搁架可有助于将按钮装配到主机电子设备，诸如将按钮710装配在沿主机电子设备外部的开口内。一个或多个搁架可接纳垫圈，该垫圈接合该一个或多个搁架。
注意图7A至图7B，按钮710按照从上部(例如，从主机电子设备的外部延伸或面向主机电子设备的外部的部分)到下部(例如，延伸到主机电子设备的内部中的部分)的顺序包括输入表面712、第一上部713、卡圈716、第一搁架718和第二搁架720。卡圈716比按钮710的第一上部713窄和/或薄。按钮710的卡圈716和第一上部713可具有相同的大体形状或可为不同的形状。例如，两者可为长方形(例如，菱形)。卡圈716定位在第一搁架718上方或以其他方式设置在第一搁架上。一般来讲，上部按钮部分713、卡圈716、第一搁架718和第二搁架720可全部彼此一体地形成，或者可单独地形成并彼此附连。
按钮710的第一搁架718通常比卡圈716宽和/或长。在一些实施例中，第一搁架718具有与第一上部713类似或相同的宽度。第一搁架718可具有与上部713和卡圈716中的任一者或两者相同的形状，或者可具有不同的形状。
按钮710的第二搁架720通常比第一搁架718宽和/或长。第二搁架720可具有与按钮710的第一上部713、卡圈716和第一搁架718中的一者或多者类似的形状，或者可为不同的形状。第二搁架720定位在第一搁架718下方。第二搁架720定位在第一搁架718和连接器722之间。
一般来讲，第一搁架、卡圈和第二搁架配合以限定围绕按钮710的周边延伸的凹槽、环带等。垫圈或其他密封件可安置在该凹槽中。
连接器722定位在第二搁架720下方并且将按钮710连接到永磁体726。连接器722可定位在永磁体726的上表面的中心部分。连接器722可沿着永磁体726的上表面的基本上整个长度连接到永磁体726。永磁体可通过连接器722刚性地连接到按钮710。在一些实施例中，永磁体726延伸到主体730内的空间中。即，主体可为中空的或可具有限定容纳永磁体730的至少一部分的空间的多个突出部。
主体730包括上部主体732和下部主体736。第一突出部733和第二突出部737中的每一者为上部主体732的一部分；第一突出部和第二突出部限定其间的体积或空间，永磁体726的一部分搁置在该体积或空间中。上部主体732和下部主体736由被构造成接纳电磁体770的宽度减小的区域分开。主体可附接到电子设备的壳体或壳体内的结构。
电磁体770被构造成附接到主体730并相对于永磁体726定位，使得由电磁体770产生的磁场被永磁体726接收到足以移位或移动永磁体726的磁场。电磁体770环绕主体730(具体地，第一突出部733和第二突出部737)并且定位在上部主体732和下部主体736之间。更具体地，电磁体770被定位成适配在形成于上部主体732和下部主体736之间的宽度减小的区域周围。电磁体770具有侧壁776。一般来讲，电磁体770定位在按钮710(或其他输入结构)及其输入表面712下方。
永磁体726相对于电磁体770的定位修改按钮710的操作(例如，致动)。更具体地讲，电磁体770和永磁体726之间的磁相互作用受永磁体726相对于电磁体的相对定位的影响。在图7A至图7C所示的实施例中，永磁体726的下表面728被定位在电磁体770的端部之间。换句话讲，从永磁体726的下表面728延伸的水平面与电磁体770的侧壁相交。在一个实施例中，从永磁体726的下表面728延伸的水平面在电磁体770的侧壁776的中点处与该侧壁776相交(例如，永磁体726的端部与侧壁776的中点共面)。因此，永磁体726延伸穿过电磁体770的一半处。
在一些实施例中，永磁体726可由第二电磁体替换，或者可由第二电磁体补充。代替永磁体726或除了永磁体726之外使用电磁体还可促进对施加在按钮710(或其他输入结构)上的磁力的精细控制，从而同样提供对触觉输出的力的精细控制。应当理解，经由按钮710或其他输入结构的触觉输出可通过增大第二电磁体的场强而增大，或者通过减小第二电磁体的场强而减小。同样，即使当使用永磁体726代替第二电磁体时，第一电磁体770的场强也可改变以改变触觉输出力。
此外，应当指出的是，场强的此类变化通常改变触觉输出强度，但不行进；输入结构(例如，按钮710)和相关联的输入表面行进的距离随着枢转点距输入表面的距离而变化，如上所述。触觉输出强度和行进距离两者的增大可增加触觉输出的显著性和/或可感知性。
注意图7B至图7C，按钮710和附接的永磁体726被示出为处于中性、未致动的第一按钮位置(如图7B所示，其为沿图7A的线7A-7A截取的横截面)和致动的第二按钮位置(图7C)。按钮710通过永磁体728对由电磁体770生成的磁场的反应而在第一按钮位置和第二按钮位置之间致动或枢转。
按钮710通过连接器722附接到永磁体726；在许多实施例中，连接器722的端部限定枢轴727。按钮710被构造成通过一对枢轴727在主体730上枢转。在其他实施例中，连接器和枢轴可以是单独的元件。主体730、永磁体726和电磁体770可设置在主机电子设备内。
可环绕永磁体726的至少一部分的电磁体770在处于中性、未致动的第一按钮位置和致动的第二按钮位置之间的枢转按钮710中生成与永磁体726相互作用的磁场。
当没有电流流过电磁体770的线绕组时，电磁体770不生成磁场，并且永磁体726处于大约在电磁体的内部体积777的中间的中性位置，如图7B所示，其一端在该内部体积内。这对应于中性、未致动的第一按钮位置。然而，当电磁体770通电时，所得的磁场使永磁体726在内部体积777内移动(例如，倾斜)。更具体地讲，永磁体726围绕枢轴723、727倾斜或旋转，使得其端部728更靠近电磁体777的一侧移动，如图7C所示。由于按钮710附接到永磁体726，因此它也围绕枢轴沿与永磁体的运动相反的方向移动。换句话讲，按钮(或其他输入表面)和永磁体两者沿相同方向(例如，顺时针或逆时针)旋转，但沿相反方向移动，因为它们被定位在枢轴的相对的两侧上。因此，当电磁体启动时，按钮710移动到致动位置。该运动可向触摸按钮710(并且通常触摸按钮的输入表面712)的人提供触觉反馈，以指示输入设备701已经被致动。在一些实施例中，按钮710和永磁体726可围绕枢轴727来回振荡以提供触觉反馈。在一些实施例中，触觉反馈控制器(例如，图1C中的触觉反馈控制器161)根据所选择的触觉输出轮廓的要求(例如，基于输入的特征、所触发的功能以及所显示的用户界面反馈来选择)来改变电磁体777的操作参数。
当受磁场影响时，永磁体726从其中性位置(如图7B所示)移动到其致动位置，如图7C所示。在其中性位置，永磁体726的中心线与输入设备701的长轴大致对准，按钮710的中心线也是如此。在图7C所示的致动位置，按钮712和永磁体726的中心线从输入设备701的长轴739偏移角度711。按钮712的中心线和长轴739之间的角度与永磁体726的中心线和长轴739之间的角度大致相同。
按钮/永磁体中心线719和长轴739在枢转点725处相交。枢转点725定位在枢轴727的底部；枢轴727在图7B至图7C中不可见，但在图7A中示出。永磁体726以及因此按钮710在由输入设备701的长轴739和短轴771限定的平面中围绕枢转点旋转。通常，尽管不是必需的，长轴739通过输入表面712和按钮710，而短轴771平行于输入表面和按钮。同样，枢转轴线(其通过枢转点725)大致平行于输入表面。
围绕枢转点725的旋转方向可随着流过电磁体770的电流的方向而改变；因此，按钮710和永磁体726两者可沿两个方向(例如，围绕枢转点725顺时针或逆时针)旋转。如前所述，永磁体726和按钮710通常沿相反的方向移动，同时围绕枢转点725和任何相关联的枢轴727旋转。
用户从按钮710致动接收触觉反馈，因为按钮710的输入表面712与按钮710一起枢转。触摸输入表面712的用户可感觉按钮710的枢转或致动。此外，用户能够看到按钮710从中性、未致动的第一位置到致动的第二位置的枢转。
按钮710(或其他输入结构)可包括在输入表面712下方和上部713内的强度传感器(例如，力传感器717)；力传感器在图7B中示出，但应当理解，强度传感器(例如，力传感器717)的位置可在各种实施例中变化。例如，力传感器717可定位在输入表面712和上部713下方而不是在上部内，或者可定位在永磁体726的下方或旁边，或者定位在输入设备内的任何其他地方(或在相关联的电子设备的壳体的一部分上)。力传感器717感测输入表面712上的输入力(例如，检测用户手指在输入表面712上的接触)并产生输出信号。力传感器717可以是本领域技术人员已知的任何类型的力传感器717，诸如应变仪、电容传感器、电阻传感器、光学传感器等。如果力传感器717是例如电容传感器，则电容的变化可由传感器717感测并作为电输出信号输出到处理器。在一些实施例中，力传感器是应变仪。由力传感器717产生的输出信号由处理器接收。
由力传感器717生成的输出信号允许处理器(例如，经由图1C中的触觉输出控制器161)控制例如电磁体770(或其他致动器)以实现按钮710的致动，并且还可用作电子设备的系统输入。例如，力传感器输出可用于指示用户已按压按钮710或以其他方式与按钮710进行交互(例如，触摸、轻扫)，并且由此控制或改变电子设备的一些功能。
处理器还可控制电磁体770的若干输入中的任一个，以改变由电磁体770生成的磁场。例如，处理器可控制流过致动器770的导线的电流。一般来讲，增大的电流将导致磁场强度增大，从而更快地移动永磁体726并增大触觉输出的强度。
处理器可控制电磁体770的附加方面。例如，在接收到力传感器717的信号时，处理器可为电磁体加电和/或改变电磁体的状态，以便使电磁体770准备好生成磁场以致动按钮710。如果电磁体一直通电但其水平所生成的磁场具有不使永磁体726枢转的尺寸和/或强度，则可能发生这种情况。在接收到来自力传感器717的输出信号时，处理器可控制电磁体770从待机状态移动到全通电模式，从而通过移动永磁体726来致动按钮710。在一些实施例中，输入设备701可被配置为仅在接收到超过阈值力水平的输入时才致动(例如，按钮移动)，低于该阈值力水平则不触发致动。
在一些实施例中，永磁体726在电磁体770内的运动可通过测量电磁体的反电动势(EMF)来感测。
一般来讲，在电磁体中感应的EMF将随着永磁体726行进的量值而变化。此外，当用户更用力地按压在输入表面712上或以其他方式用他或她的手指更刚性地约束输入表面时，永磁体的行进减少。因此，如果用户具有“刚性”输入，则输入结构710(例如，按钮)行进受到约束，并且这可通过经由传感器测量电磁体770的反EMF来感测。如果用户在输入表面712上施加高的力、佩戴手套、具有干燥的皮肤、长满老茧的手指等，则用户可提供刚性输入。一般来讲，产生刚性输入的条件也降低了对触觉输出的敏感性。因此，当电磁体770的反EMF超过阈值时，输入设备701的处理单元可将附加电力引导至电磁体770以提高触觉输出的力和可感知性。
按钮710可定位在沿电子设备的外表面的开口中，使得按钮向用户呈现输入表面。按钮710可与外表面共形，或者可从主机电子设备的外表面突出。在一个实施例中，按钮710是长方形的并且沿电子设备诸如移动电话的外边缘配合。
按钮710可以若干方式中的任一方式致动(例如，移动)。在图7A至图7C的实施例中，按钮710枢转离开输入设备701的长轴739，该长轴大致垂直于其枢转轴线。然而，其他配置也是可能的。例如，按钮710可被配置为沿短轴致动。在一些实施例中，按钮710可以来回摇动方式致动。在一些实施例中，按钮710沿主机电子设备的表面或边缘移动。
在一个实施例中，尽管按钮710可致动，但不需要该致动来向电子设备注册按钮输入，诸如由电子设备的处理器注册按钮输入。换句话讲，不需要按钮710的物理移动或致动来注册按钮开或关输入。相反，实现按钮致动以向用户提供一种类型的触觉反馈。
按钮710可具有多种形状，包括限定弯曲或凸形输入表面712，和/或可为矩形、正方形等。又如，输入表面712可以是基本上平坦的。按钮710的输入表面712和/或其他部分可包括纹理，诸如凸块、脊等。按钮710可具有重新调整的、倾斜的或平坦的边缘。一般来讲，输入表面712的曲率越小，接触输入表面的用户皮肤的剪切(例如，横向位移)越大，因此触觉输出的可感知性越高。因此，与弯曲输入表面的相同行程相比，平坦输入表面712的行程可更容易被用户感知到。可选择输入表面712的曲率以赋予特定触觉输出或触觉输出的特定可感知性。
一般来讲，如果输入表面712的曲率等于在输入结构710围绕枢轴旋转期间输入表面712沿其行进的弧段的曲率，则与输入表面712接触的用户手指的皮肤经历来自输入表面的纯切向运动。“弧段”是在输入结构旋转时输入表面上的点移动通过的圆的部分。换句话讲，如果在提供触觉输出的同时输入表面712的每个点位于由整个输入表面712外接的单个弧上，则输入表面的曲率等于弧段的曲率。换句话讲，如果从枢轴727到旋转平面内的输入表面的每个点的距离相等，则输入表面712的曲率在旋转期间匹配弧段的曲率。输入表面712相对于用户皮肤的纯切向运动产生高度的皮肤剪切和独特的触觉输出感觉。一般来讲，此类触觉输出与典型按钮的沿输入力的方向移动的“点击”或压下是不可区分的或几乎不可区分的。
通过改变输入表面712的曲率，触觉输出的感觉可变化。输入表面的曲率与输入表面712在旋转期间沿其行进的弧段相比改变越大，对用户而言触觉输出感觉起来就越像“摇摆”(例如，用于模拟“切换”操作)运动，而不是“点击”或压下/松开运动。输入表面712的曲率可根据需要或按需进行调整以提供特定的触觉输出。
图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施例中，设备300是膝上型电脑、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如，家用控制器或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于将这些部件互联的一根或多根通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时称作芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330，该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触控板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如，类似于以上参考图1A所述的一个或多个触觉输出发生器167)、传感器359(例如，光学传感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图1A所述的一个或多个接触强度传感器165的接触强度传感器)。存储器370包括高速随机存取存储器，诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备；并且任选地包括非易失性存储器，诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离CPU 310定位的一个或多个存储设备。在一些实施例中，存储器370存储与便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块、和数据结构，或它们的子集。此外，存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加程序、模块和数据结构。例如，设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390，而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中上述所识别的元件中的每个元件任选地存储在先前提到的存储器设备中的一个或多个存储器设备中。上述所识别的模块中的每个模块对应于用于执行上述功能的指令集。上述所识别的模块或程序(即，指令集)不必被实现为单独的软件程序、过程或模块，因此这些模块的各种子集任选地在各种实施例中组合或以其他方式重新布置。在一些实施例中，存储器370任选地存储上述模块和数据结构的子集。此外，存储器370任选地存储上文未描述的附加模块和数据结构。
现在将注意力转到任选地在便携式多功能设备100上实现的用户界面(“UI”)的实施例。
图4A示出了根据一些实施例的便携式多功能设备100，该便携式多功能设备在该设备的一个或多个周边侧上具有一个或多个强度敏感的显示器外输入区域，以及触摸屏显示器，其示出了具有对应于不同应用程序的应用程序启动图标菜单的示例性主屏幕用户界面。类似的用户界面任选地在设备300上实现。在一些实施例中，用户界面400包括以下元件或者其子集或超集：
·一种或多种无线通信(例如，蜂窝信号和Wi-Fi信号)的一个或多个信号强度指示器402；
·时间404；
·蓝牙指示器；
·电池状态指示器406；
·具有常用应用程序图标的托盘408，图标诸如：
○电话模块138的被标记为“电话”的图标416，该图标416任选地包括未接来电或语音留言的数量的指示符414；
○电子邮件客户端模块140的被标记为“邮件”的图标418，该图标418任选地包括未读电子邮件的数量的指示符410；
○浏览器模块147的标记为“浏览器”的图标420；以及
○视频和音乐播放器模块152(也称为iPod(Apple Inc.的商标)模块152)的被标记为“iPod”的图标422；以及
·其他应用程序的图标，诸如：
○IM模块141的被标记为“消息”的图标424；
○日历模块148的被标记为“日历”的图标426；
○图像管理模块144的被标记为“照片”的图标428；
○相机模块143的被标记为“相机”的图标430；
○在线视频模块155的被标记为“在线视频”的图标432；
○股市桌面小程序149-2的被标记为“股市”的图标434；
○地图模块154的被标记为“地图”的图标436；
○天气桌面小程序149-1的被标记为“天气”的图标438；
○闹钟桌面小程序149-4的被标记为“时钟”的图标440；
○健身支持模块142的被标记为“健身支持”的图标442；
○记事本模块153的标记为“记事本”的图标444；以及
○设置应用程序或模块的图标446，该图标446提供对设备100及其各种应用程序136的设置的访问。
应当注意，图4A中示出的图标标签仅仅是示例性的。例如，在一些实施例中，视频和音乐播放器模块152的图标422被标记为“音乐”或“音乐播放器”。对于各种应用程序图标任选地使用其他标签。在一些实施例中，相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施例中，特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。在一些实施例中，当对应于相应应用程序的图标被激活(例如，被轻击输入激活)时，设备启动相应应用程序并且用该相应应用程序的用户界面替换主屏幕用户界面。当接收到清除当前显示的用户界面并返回到主屏幕用户界面的请求时(例如，检测到预定义的归位手势或主按钮的激活)，设备清除当前显示的用户界面并重新显示主屏幕用户界面(例如，主屏幕用户界面的最后显示页面或主屏幕用户界面的默认开始页面)。
如图4A所示，在一些实施例中，便携式多功能设备100在设备的显示器侧上不包括主按钮，并且触摸屏112占据该设备的显示器侧上的基本上所有可用区域。如图4A所示的设备100包括多个离散的强度敏感输入区域455、456和457。输入区域456和457任选地在邻接的触敏表面的两个子部分上实现。输入区域中的每个与相应一组一个或多个局部触觉输出发生器耦接以用于生成局部触觉输出，该局部触觉输出在输入区域(或其相应子部分)具有较大幅值，并且在输入区域(或其相应子部分)之外的位置具有较小幅值或可忽略不计的幅值。
图4B示出了具有与显示器450分开的触敏表面451(例如，图3中的平板或触控板355)的设备(例如，图3中的设备300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如，传感器357中的一个或多个传感器)和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器359。在一些实施例中，该设备包括不同于触敏表面451的强度敏感输入区域。例如，强度敏感输入区域设置在设备的与设备的显示器侧相邻的周边侧(例如，设备的侧边缘)上，并且触敏表面451与设备的显示器侧共面或设置在设备的显示器侧上。在一些实施例中，在强度敏感输入区域上检测到的接触不具有在设备的显示器上显示的对应焦点选择器，该对应焦点选择器位于输入区域上的接触的对应位置处和/或根据接触在输入区域上的移动而移动。在一些实施例中，触敏表面451用作设备的显示器外输入区域。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出随后的许多示例，但是在一些实施例中，设备检测与显示器分开的触敏表面上的输入，如图4B中所示。在一些实施例中，触敏表面(例如，图4B中的451)具有与显示器(例如，450)上的主轴线(例如，图4B中的453)对应的主轴线(例如，图4B中的452)。根据这些实施例，设备检测与显示器上相应位置对应的位置处的与触敏表面451的接触(例如，图4B中的460和462)(例如，在图4B中，460对应于468并且462对应于470)。这样，在触敏表面(例如，图4B中的451)与多功能设备的显示器(例如，图4B中的450)是分开的时侯，由设备在触敏表面上所检测到的用户输入(例如，接触460和462以及它们的移动)被该设备用于操纵显示器上的用户界面。应当理解，类似的方法任选地用于本文所述的其他用户界面。
另外，虽然主要是参考手指输入(例如，手指接触、单指轻击手势、手指轻扫手势等)来给出下面的示例，但是应当理解的是，在一些实施例中，这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如，基于鼠标的输入或触笔输入)替换。例如，轻扫手势任选地由鼠标点击(例如，而不是接触)，之后是光标沿着轻扫的路径的移动(例如，而不是接触的移动)替代。又如，轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如，代替对接触的检测，之后是停止检测接触)替代。类似地，当同时检测到多个用户输入时，应当理解的是，多个计算机鼠标任选地被同时使用，或鼠标和手指接触任选地被同时使用。
如本文所用，术语“焦点选择器”是指指示用户正与之进行交互的用户界面的当前部分的输入元件。在包括光标或其他位置标记的一些实施方式中，光标充当“焦点选择器”，使得当光标在特定用户界面元素(例如，按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如，图3中的触控板355或图4B中的触敏表面451)上检测到输入(例如，按压输入)的情况下，该特定用户界面元素根据所检测到的输入而被调整。在包括使得能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如，图1A中的触敏显示器系统112或图4A中的触摸屏)的一些实施方式中，在触摸屏上检测到的接触充当“焦点选择器”，使得当在触摸屏显示器上在特定用户界面元素(例如，按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如，通过接触的按压输入)时，根据所检测到的输入来调整特定用户界面元素。在一些实施方式中，焦点从用户界面的一个区域移动到用户界面的另一个区域，而无需光标的对应移动或触摸屏显示器上的接触的移动(例如，通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮)；在这些实施方式中，焦点选择器根据焦点在用户界面的不同区域之间的移动而移动。不考虑焦点选择器所采取的具体形式，焦点选择器通常是由用户控制以便传送与用户界面的用户期望的交互(例如，通过向设备指示用户界面的用户期望与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如，在触敏表面(例如，触控板或触摸屏)上检测到按压输入时，焦点选择器(例如，光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
如在本说明书和权利要求书中所使用的，术语触敏表面上的接触的“强度”是触敏表面上的接触(例如，手指接触或触笔接触)的力或压力(每单位面积的力)，或是指触敏表面上的接触的力或压力的代替物(代用物)。接触的强度具有值范围，该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如，至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如，在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些实施方式中，来自多个力传感器的力测量被合并(例如，加权平均或者加和)，以确定估计的接触力。类似地，触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。另选地，在触敏表面上检测到的接触区域的大小和/或其变化、接触附近的触敏表面的电容和/或其变化以及/或者接触附近的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些实施方式中，接触力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如，强度阈值以对应于替代物测量的单位来描述)。在一些实施方式中，将接触力或压力的替代测量值转换为预估力或压力，并且使用预估力或压力确定是否已超过强度阈值(例如，强度阈值是以压力单位测量的压力阈值)。使用接触的强度作为用户输入的属性，从而允许用户访问用户在用于(例如，在触敏显示器上)显示示能表示和/或接收用户输入(例如，经由触敏显示器、触敏表面或物理控件/机械控件诸如旋钮或按钮)的实地面积有限的尺寸更小的设备上本来不能容易地访问的附加设备功能。
在一些实施例中，接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如，确定用户是否已“点击”图标)。在一些实施例中，根据软件参数来确定强度阈值的至少一个子集(例如，强度阈值不是由特定物理致动器的激活阈值来确定的，并且可在不改变设备100的物理硬件的情况下被调节)。例如，在不改变触控板或触摸屏显示器硬件的情况下，触控板或触摸屏显示器的鼠标“点击”阈值可被设置为预定义阈值的大范围中的任一个阈值。另外，在一些实施方式中，设备的用户提供有用于调节一组强度阈值中的一个或多个强度阈值(例如，通过调节各个强度阈值和/或通过利用对“强度”参数的系统级点击来一次调节多个强度阈值)的软件设置。
如说明书和权利要求书中所使用的，接触的“特征强度”这一术语是指基于接触的一个或多个强度的接触的特征。在一些实施例中，特征强度基于多个强度样本。特征强度任选地基于相对于预定义事件(例如，在检测到接触之后，在检测到接触抬离之前，在检测到接触开始移动之前或之后，在检测到接触结束之前，在检测到接触的强度增大之前或之后和/或在检测到接触的强度减小之前或之后)而言在预先确定的时间段(例如，0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间采集的预定义数量的强度样本或一组强度样本。接触的特征强度任选地基于以下各项中的一者或多者：接触强度的最大值、接触强度的均值、接触强度的平均值、接触强度的前10％处的值、接触强度的半最大值、接触强度的90％最大值、通过在预定义时间段上或从预定义时间开始低通滤波接触强度而生成的值等。在一些实施例中，在确定特征强度时使用接触的持续时间(例如，在特征强度是接触的强度在时间上的平均值时)。在一些实施例中，将特征强度与一组一个或多个强度阈值进行比较，以确定用户是否已执行操作。例如，该组一个或多个强度阈值可包括第一强度阈值和第二强度阈值。在本示例中，特征强度未超过第一阈值的接触导致第一操作，特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作，并且特征强度超过第二阈值的接触导致第三操作。在一些实施例中，使用特征强度和一个或多个强度阈值之间的比较来确定是否要执行一个或多个操作(例如，是否执行相应选项或放弃执行相应操作)，而不是用于确定执行第一操作还是第二操作。
在一些实施例中，识别手势的一部分以用于确定特征强度。例如，触敏表面可接收连续轻扫接触，该连续轻扫接触从起始位置过渡并达到结束位置(例如拖动手势)，在该结束位置处，接触的强度增大。在该示例中，接触在结束位置处的特征强度可仅基于连续轻扫接触的一部分，而不是整个轻扫接触(例如，仅结束位置处的轻扫接触的一部分)。在一些实施例中，可在确定接触的特征强度之前向轻扫手势的强度应用平滑化算法。例如，平滑化算法任选地包括以下各项中的一种或多种：不加权滑动平均平滑化算法、三角平滑化算法、中值滤波器平滑化算法和/或指数平滑化算法。在一些情况下，这些平滑化算法消除了轻扫接触的强度中的窄的尖峰或凹陷，以实现确定特征强度的目的。
本文所述的用户界面图任选地包括各种强度图，这些强度图示出触敏表面上的接触相对于一个或多个强度阈值(例如，接触检测强度阈值IT0、提示强度阈值ITH(例如，高于IT0)、轻按压强度阈值ITL(例如，至少初始高于ITH)、深按压强度阈值ITD(例如，至少初始高于ITL)和/或一个或多个其他强度阈值(例如，比ITL低的强度阈值ITH))的当前强度。该强度图通常不是所显示的用户界面的一部分，但是被提供以帮助解释所述图。在一些实施例中，轻按压强度阈值对应于这样的强度：在该强度下设备将执行通常与点击物理鼠标或触控板的按钮相关联的操作。在一些实施例中，深按压强度阈值对应于这样的强度：在该强度下设备将执行与通常与点击物理鼠标或触控板的按钮相关联的操作不同的操作。在一些实施例中，当检测到特征强度低于轻按压强度阈值(例如，并且高于标称接触检测强度阈值IT0，比标称接触检测强度阈值低的接触不再被检测到)的接触时，设备将根据接触在触敏表面上的移动来移动焦点选择器，而不执行与轻按压强度阈值或深按压强度阈值相关联的操作。一般来讲，除非另有陈述，否则这些强度阈值在不同组的用户界面附图之间是一致的。
在一些实施例中，设备对设备所检测到的输入的响应取决于基于输入期间的接触强度的标准。例如，对于一些“轻按压”输入，在输入期间超过第一强度阈值的接触的强度触发第一响应。在一些实施例中，设备对由设备所检测到的输入的响应取决于包括输入期间的接触强度和基于时间的标准两者的标准。例如，对于一些“深按压”输入，只要在满足第一强度阈值与满足第二强度阈值之间经过延迟时间，在输入期间超过大于轻按压的第一强度阈值的第二强度阈值的接触的强度便触发第二响应。该延迟时间的持续时间通常小于200ms(例如，40ms、100ms、或120ms，这取决于第二强度阈值的量值，其中该延迟时间随着第二强度阈值增大而增大)。该延迟时间帮助避免意外地识别深按压输入。又如，对于一些“深按压”输入，在达到第一强度阈值之后将出现敏感度降低的时间段。在该敏感度降低的时间段期间，第二强度阈值增大。第二强度阈值的这种暂时增大还有助于避免意外深按压输入。对于其他深按压输入，对检测到深按压输入的响应不取决于基于时间的标准。
在一些实施例中，输入强度阈值和/或对应输出中的一者或多者基于一个或多个因素(诸如用户设置、接触运动、输入定时、应用运行、施加强度时的速率、同时输入的数量、用户历史、环境因素(例如，环境噪声)、焦点选择器位置等)而变化。示例因素在美国专利申请14/399,606和14/624,296中有所描述，这些美国专利申请全文以引用方式并入本文。
例如，图4C示出了部分地基于触摸输入476随时间的强度而随时间改变的动态强度阈值480。动态强度阈值480是两个分量的总和：在从触摸输入476初始被检测到开始的预定义的延迟时间p1之后随时间衰减的第一分量474和随时间而跟踪触摸输入476的强度的第二分量478。第一分量474的初始高强度阈值减少意外触发“深按压”响应，同时仍然允许在触摸输入476提供足够强度的情况下进行即时“深按压”响应。第二分量478减少通过触摸输入的逐渐的强度波动而无意触发“深按压”响应。在一些实施例中，在触摸输入476满足动态强度阈值480时(例如，在图4C中的点481处)，触发“深按压”响应。
图4D示出了另一个动态强度阈值486(例如，强度阈值ID(例如，也称为ITD))。图4D还示出了两个其他强度阈值：第一强度阈值IH(例如，也称为ITH)和第二强度阈值IL。在图4D中，尽管触摸输入484在时间p2之前满足第一强度阈值IH和第二强度阈值IL(例如，也称为ITL)，但是直到在时间482处经过延迟时间p2才提供响应。同样在图4D中，动态强度阈值486随时间衰减，其中衰减在从时间482(触发了与第二强度阈值IL相关联的响应的时候)已经过预定义的延迟时间p1之后的时间488开始。这种类型的动态强度阈值减少紧接在触发与较低阈值强度(诸如第一强度阈值IH或第二强度阈值IL)相关联的响应之后或与其同时意外触发与动态强度阈值ID相关联的响应。
图4E示出了另一个动态强度阈值492(例如，强度阈值ID)。在图4E中，在从触摸输入490被初始检测到的时候已经过延迟时间p2之后，触发与强度阈值IL相关联的响应。同时，动态强度阈值492在从触摸输入490被初始检测到的时候已经过预定义的延迟时间p1之后衰减。因此，在触发与强度阈值IL相关联的响应之后降低触摸输入490的强度，接着在不释放触摸输入490的情况下增大触摸输入490的强度可触发与强度阈值ID相关联的响应(例如，在时间494处)，即使当触摸输入490的强度低于另一强度阈值(例如，强度阈值IL)时也是如此。
接触特征强度从低于轻按压强度阈值ITL的强度增大到介于轻按压强度阈值ITL与深按压强度阈值ITD之间的强度有时被称为“轻按压”输入。接触的特征强度从低于深按压强度阈值ITD的强度增大到高于深按压强度阈值ITD的强度有时称为“深按压”输入。接触特征强度从低于接触检测强度阈值IT0的强度增大到介于接触检测强度阈值IT0与轻按压强度阈值ITL之间的强度有时被称为检测到触摸表面上的接触。接触的特征强度从高于接触检测强度阈值IT0的强度减小到低于接触检测强度阈值IT0的强度有时被称为检测到接触从触摸表面抬离。在一些实施例中，IT0为零。在一些实施例中，IT0大于零在一些例示中，阴影圆或椭圆用于表示触敏表面上的接触的强度。在一些例示中，没有阴影的圆或椭圆用于表示触敏表面上的相应接触而不指定相应接触的强度。
在本文中所述的一些实施例中，响应于检测到包括相应按压输入的手势或响应于检测到利用相应接触(或多个接触)所执行的相应按压输入来执行一个或多个操作，其中至少部分地基于检测到该接触(或多个接触)的强度增大到高于按压输入强度阈值而检测到该相应按压输入。在一些实施例中，响应于检测到相应接触的强度增大到高于按压输入强度阈值来执行相应操作(例如，在相应按压输入的“向下冲程”上执行相应操作)。在一些实施例中，按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于按压输入强度阈值，并且响应于检测到相应接触的强度随后减小到低于按压输入阈值来执行相应操作(例如，在相应按压输入的“向上冲程”上执行相应操作)。
在一些实施例中，设备采用强度滞后以避免有时被称为“抖动”的意外输入，其中设备限定或选择与按压输入强度阈值具有预定义关系的滞后强度阈值(例如，滞后强度阈值比按压输入强度阈值低X个强度单位，或滞后强度阈值是按压输入强度阈值的75％、90％或某个合理比例)。因此，在一些实施例中，按压输入包括相应接触的强度增大到高于按压输入强度阈值以及该接触的强度随后减小到低于对应于按压输入强度阈值的滞后强度阈值，并且响应于检测到相应接触的强度随后减小到低于滞后强度阈值来执行相应操作(例如，在相应按压输入的“向上冲程”上执行相应操作)。类似地，在一些实施例中，仅在设备检测到接触强度从等于或低于滞后强度阈值的强度增大到等于或高于按压输入强度阈值的强度并且任选地接触强度随后减小到等于或低于滞后强度的强度时才检测到按压输入，并且响应于检测到按压输入(例如，根据环境，接触强度增大或接触强度减小)来执行相应操作。
为了容易解释，任选地响应于检测到以下情况而触发对响应于与按压输入强度阈值相关联的按压输入或响应于包括按压输入的手势而执行的操作的描述：接触的强度增大到高于按压输入强度阈值、接触的强度从低于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接触的强度减小到低于按压输入强度阈值、或接触的强度减小到低于与按压输入强度阈值对应的滞后强度阈值。另外，在将操作描述为响应于检测到接触的强度减小到低于按压输入强度阈值而执行的示例中，任选地响应于检测到接触的强度减小到低于对应于并且小于按压输入强度阈值的滞后强度阈值来执行操作。如上所述，在一些实施例中，对这些操作的触发还取决于满足基于时间的标准(例如，在满足第一强度阈值和满足第二强度阈值之间已经过延迟时间)。
用户界面和相关联的过程
现在将注意力转到可在电子设备诸如便携式多功能设备100或设备300上实现的用户界面(“UI”)和相关的过程，该电子设备具有显示器、触敏表面、用于生成触觉输出的一个或多个触觉输出发生器(例如，一个或多个局部触觉输出发生器和/或一个或多个整个设备触觉输出发生器)、用于检测与设备的触敏表面和一个或多个输入区域(例如，一个或多个显示器外侧按钮)的接触的强度的一个或多个传感器。
图5A1至图5H5示出了根据一些实施例的用于响应于设备的强度敏感输入区域(例如，显示器外输入区域455、456和457)上的多种类型的输入而提供触觉输出和视觉反馈的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程，包括图6A至图6D、图7A至图7E、图8A至图8D、图9A至图9C、图10A至图10C、图11A至图11B和图12A至图12E中的过程。为了便于解释，将参考在具有触敏显示器系统112的设备上执行的操作来论述实施例中的一些实施例。在此类实施例中，焦点选择器为任选地：相应手指或触笔接触、对应于手指或触笔接触的表示点(例如，相应接触的重心或与相应接触相关联的点)、或在触敏显示器系统112上所检测到的两个或更多个接触的重心。然而，响应于当在显示器450上显示附图中示出的用户界面连同焦点选择器时检测到触敏表面451上的接触，任选地在具有显示器450和独立的触敏表面451的设备上执行类似的操作。
图5A1至图5A8示出了根据一些实施例的用于为对应于查询和/或修改设备属性的当前状态的按钮交互提供触觉和视觉反馈的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程，包括图6A至图6D和图12A至图12E中的过程。
图5A1示出了在显示器关闭状态下的设备100。例如，在一段时间不活动之后，设备自动关闭显示器112以节省电力。在一些实施例中，当显示器关闭时设备被锁定，并且需要认证(例如，经由面部识别或生物特征输入)才能解锁。当设备处于显示器关闭状态时，在屏幕上不显示用户界面。在一些实施例中，设备将唤醒屏幕用户界面(例如，唤醒屏幕用户界面501)显示为当设备从显示器关闭状态转变为显示器开启状态时(例如，响应于事件的发生或用户输入的检测)显示的初始界面。
图5A2示出，当在设备100处生成新通知(例如，关于新接收消息的通知502)时，设备从显示器关闭状态转变为显示器开启状态，并且在唤醒屏幕用户界面501上显示新通知502。唤醒屏幕用户界面显示先前生成但未被用户读取或交互的现有未读通知504。唤醒屏幕用户界面501显示当前时间。当在触摸屏112的底部边缘检测到向上轻扫的手势(例如，归位显示手势)时，清除唤醒屏幕用户界面501，并且主屏幕用户界面或最后显示的应用程序的用户界面替换屏幕上的唤醒屏幕用户界面501。在一些实施例中，设备响应于在触摸屏上检测到的水平轻扫手势而导航到微型应用程序用户界面，而不显示主屏幕或最后显示的应用程序用户界面。
图5A3示出，在接收到新通知502以来用户不活动一段时间之后，设备已经返回到显示器关闭状态，而不改变通知502和504的已读/未读状态。在图5A3中，在输入区域456上检测到接触506进行的触摸输入。根据检测到接触506进行的触摸输入(例如，接触506的强度超过接触检测强度阈值IT0)而不需要接触506的强度超过轻按压强度阈值ITL，设备在输入区域456生成局部触觉输出508以指示预定义设备属性(例如，设备处存在/不存在未读通知)的当前值或状态(例如，“存在”，而不是“不存在”)。在一些实施例中，触觉输出508还基于触觉输出的一个或多个特征(例如，触觉输出508是在输入区域456处具有对应数量的相同离散触觉输出的触觉输出序列)来指示存在于设备处的未读通知的数量(例如，两个)。在一些实施例中，设备仅在接触506已在输入区域456上保持至少阈值量的时间T之后才生成触觉输出508，以减少设备关于存在/不存在未读通知的响应的意外触发。在一些实施例中，当接触506进行的输入的强度保持低于提示强度阈值ITH和轻按压强度阈值ITL时，设备不从显示器关闭状态转变为显示器开启状态。在一些实施例中，当设备检测到设备在口袋内时(例如，基于来自环境光传感器的输入)，设备不从显示器关闭状态转换为显示器开启状态。当响应于用户对设备属性信息的查询时放弃打开显示器节省了能量并且更好地保持了用户隐私(例如，当设备保持隐藏在用户的口袋内时，设备提供用户需要的信息)。
图5A4示出了在一些实施例中，当输入区域456上的接触506进行的输入的强度增大到高于提示强度阈值ITH时，唤醒屏幕用户界面501逐渐淡入(例如，处于阴影状态)。唤醒屏幕用户界面连同未读通知502和504的可见性根据输入区域456上的接触506的当前强度动态地改变。在一些实施例中，连同屏幕上显示的视觉反馈(例如，未读通知502和504和/或其计数的视觉显示)提供触觉输出508。在一些实施例中，直到接触506的强度超过提示强度阈值ITH，才提供指示未读通知的存在/计数的触觉输出。在一些实施例中，设备放弃要求接触在输入区域456上保持至少阈值量的时间T，并且如果在满足时间阈值T之前接触的强度超过提示强度阈值ITH，则向用户提供关于未读通知的设备属性。
在图5A3和图5A4中，设备生成关于设备属性的当前值或状态(即，存在未读通知)的视觉反馈和触觉反馈，而不改变设备属性的当前值或状态，因为接触506进行的输入的强度尚未超过第一强度阈值(例如，轻按压强度阈值ITL)。在一些实施例中，当在接触506的强度未超过第一强度阈值的情况下检测到接触506进行的输入的终止(例如，接触506从输入区域456抬离)时，设备转变回显示器关闭状态(例如，在图5A4所示的状态之后)，并且通知502和504保持其未读状态。
图5A5示出，在检测到接触506进行的输入的终止之前，输入区域456上的接触506的强度增大到高于第一强度阈值(例如，轻按压强度阈值ITL)。响应于检测到接触506的强度已增大到高于第一强度阈值，设备100完成其向显示器开启状态的转变，并且在唤醒屏幕用户界面501上显示通知502和504。设备还将通知502和504的已读/未读状态从“未读”改变为“已读”。在一些实施例中，设备生成局部触觉输出510(例如，具有与触觉输出508的触觉输出轮廓不同的触觉输出轮廓)以指示对通知502和504的已读/未读状态作出的改变，以及设备参数的当前状态的变化，即，存在/不存在未读通知从“存在”变化到“不存在”。
在一些实施例中，当接触506进行的输入的强度增大到高于第二强度阈值(例如，深按压强度阈值ITD)时，如果在唤醒屏幕用户界面501上显示的未读通知具有对应的长版本，则设备用通知的对应长版本502'和504'替换通知502和504，如图5A6所示。通知的长版本包括未包括在通知502和504中的附加内容(例如，附接的图像或语音信箱记录)或功能(例如，回放按钮)。在一些实施例中，响应于接触512进行的输入的强度超过第二强度阈值，设备任选地在输入区域456生成另一个局部触觉输出512(例如，具有不同于触觉输出508和510的相应触觉输出轮廓的触觉输出轮廓)。
图5A7示出了在用户不活动一段时间之后，设备返回到显示器关闭状态。通知502和504从唤醒屏幕用户界面清除(例如，保存到通知历史或清除)，因为它们不再是作为图5A5和图5A6所示的交互的结果的“未读”通知。图5A8示出了当在输入区域456上检测到接触514进行的另一输入并且通接触514进行的输入满足用于提供设备的预定义设备属性的当前值或状态(例如，存在/不存在未读通知)的设备查询标准时(例如，接触514的强度超过提示强度阈值ITH)，设备通过在没有任何未读通知的情况下显示唤醒屏幕用户界面(例如，唤醒屏幕用户界面501根据接触514的强度淡入一定量)并且通过放弃在输入区域456生成任何局部触觉输出来响应，以指示在设备处当前不存在未读通知。在一些实施例中，设备提供预定义的失效触觉输出(例如，具有不同触觉输出轮廓的弱触觉输出(例如，失效蜂鸣))以指示预定义的设备属性的当前值为“不存在”。当预定义设备属性的当前值为“不存在”时，响应于接触514进行的输入的强度增大到高于第一强度阈值(例如，轻按压强度阈值)，设备不将设备属性的值改变为“存在”。在一些实施例中，对于具有切换状态(例如，铃声装置开/关状态)或连续可修改状态(例如，音量水平)的不同设备属性，设备响应于接触514进行的输入的强度增大到高于第一强度阈值(例如，轻按压强度阈值)而切换设备属性的当前值或状态(例如，从开切换到关，或从关切换到开)或者继续改变设备属性的当前值(例如，使音量水平增大相应量)。
图5B1至图5B11示出了根据一些实施例的用于为对应于以不同方式修改设备参数的按钮交互提供触觉和视觉反馈的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程，包括图6A至图6D、图8A至图8D和图12A至图12E中的过程。
在图5B1中，浏览器应用程序的用户界面516显示在触摸屏112上。在图5B2中，在输入区域456上检测到接触518进行的触摸输入(例如，在该示例中，输入区域456和457分别主要用作设备的音量增大按钮和音量减小按钮)。响应于在输入区域456上检测到接触518进行的输入(例如，接触518的强度超过检测强度阈值IT0)，并且不需要接触518进行的输入的强度超过第一强度阈值(例如，轻按压强度阈值ITL)，设备显示音量控件520(例如，滑块控件)，其中指示符522(例如，滑块指示符)指示设备的音量设置的当前值。在一些实施例中，背景用户界面516在音量控件520下方变暗和模糊，并且变暗和模糊的量根据接触518的当前强度动态地改变(例如，增大或减小)。在一些实施例中，当接触518的强度保持低于第一强度阈值(例如，轻按压强度阈值ITL)时，音量设置的当前值不改变。换句话讲，输入区域456上的轻触摸使得设备提供预定义设备属性的当前值或状态(例如，设备音量水平)，而不改变预定义设备属性的当前值或状态。在一些实施例中，如果在当前被用户触摸的输入区域456上检测到按压输入，则设备显示视觉反馈(例如，向上指向的动画箭头)，该视觉反馈指示设备属性将改变的方向。在一些实施例中，设备根据上下文信息来确定哪个设备参数(例如，存在/不存在未读通知对比设备音量设置)正由输入区域456上的特定轻触摸输入查询(例如，如果设备处于显示器关闭状态，则设备利用通知状态进行响应，并且如果设备处于显示器开启状态，则设备利用当前音量进行响应)，而不需要在显示器上存在焦点选择器。
图5B3示出了当接触518进行的输入的强度已增大到高于第一强度阈值(例如，轻按压强度阈值ITL)时，设备将设备的当前音量增大相应的量(例如，因为输入区域456对应于设备的音量增大功能)。在一些实施例中，每当接触518进行的输入的强度增大到高于第一强度阈值(例如，根据图4C至图4E所示的方法确定的动态强度阈值)时，设备将设备的音量水平增大相应的量。在一些实施例中，每次增大的确切量是固定的。在一些实施例中，当越过第一强度阈值时，例如根据强度增大的一个或多个特征(例如，速度和总量)动态地确定每次增大的确切量。在一些实施例中，越过第一强度阈值的强度的更快增大或保持在第一强度阈值以上的强度的更长持续时间导致设备的音量水平增大更大的量。在一些实施例中，对于响应于接触518的强度增大到高于第一强度阈值而对音量水平作出的每次递增，设备生成相应的触觉输出(例如，局部触觉输出524(例如，具有与触觉输出508、510和512的触觉输出轮廓不同的触觉输出轮廓))。在一些实施例中，触觉输出524的触觉输出轮廓任选地与触觉输出510的触觉输出轮廓相同，并且对应于在输入区域456上检测到的轻按压输入。在一些实施例中，如图5B3所示，当接触524进行的输入改变音量水平时，指示符522沿音量控件520向上移动以指示设备的当前音量水平。当在输入区域456上连续检测到接触518时，用户界面516保持在音量控件520下方变暗和模糊。在一些实施例中，只要在输入区域456上检测到接触518，音量控件520就保持显示。在一些实施例中，当在设备的音量水平已改变之后检测到接触518的抬离时，设备停止显示音量控件520并且恢复用户界面516的外观。在不再显示音量控件之后，设备的音量水平保持在已改变的水平。
图5B4示出了当接触518的强度增大到高于第一强度阈值多次，或者接触518的强度已保持高于第一强度阈值达延长的时间段时，设备已将设备的音量水平增大到设备音量的最大值。响应于设备的音量水平达到最大值，设备在输入区域456生成局部触觉输出526(例如，触觉输出与强度增大到高于第一强度阈值或满足用于保持强度高于第一强度阈值的时间阈值同步)，以指示已达到音量设置的最大值。在一些实施例中，除了或代替在输入区域456生成的局部触觉输出526，设备提供整个设备触觉输出528以指示已达到音量水平的最大值。
图5B5和图5B6示出，在一些实施例中，如果在输入区域456上检测到相同接触或不同接触(例如，接触530)进行的附加按压输入，并且该接触(例如，接触530)的强度超过第一强度阈值，则设备显示(例如，重新显示)示出最大值处的当前音量水平的音量控件520，但放弃生成局部触觉输出526和整个触觉输出528中的至少一者(例如，一者或两者)，以指示响应于输入区域456上的轻按压输入未对音量水平作出进一步改变。在一些实施例中，设备生成失效触觉输出(例如，与输入区域456的局部触觉输出相对的整个设备失效蜂鸣532)以指示响应于输入区域456上的轻按压输入，不可对音量水平作出进一步改变，如图5B6所示。
图5B7示出了在接触518进行的输入或接触530进行的输入终止之后，在输入区域457(例如，该输入区域当前对应于设备的音量减小功能)上检测到接触534进行的另一输入。响应于输入区域457上接触534进行的输入，当接触534进行的输入的强度未超过第一强度阈值时，设备显示音量控件520而不修改音量水平，并且每当接触534进行的输入的强度增大到高于第一强度阈值时，设备将音量水平减小相应的量。在一些实施例中，如果在当前被用户触摸的输入区域457上检测到按压输入，则设备显示视觉反馈(例如，向下指向的动画箭头)，该视觉反馈指示设备属性将改变的方向。在图5B7中，响应于检测到接触534的强度增大到高于第一强度阈值，设备减小当前设备音量。设备还在输入区域457生成局部触觉输出536，以指示用于输入已满足用于减小音量水平的标准，并且音量水平已相应地减小。在一些实施例中，局部触觉输出536的触觉输出轮廓不同于图5B3中局部触觉输出524的触觉输出轮廓，以反映音量水平的变化方向的差异。
图5B8至图5B9示出，在输入区域457上的接触534进行的输入的强度减小(如图5B8所示)之后，接触534进行的输入的强度增大到高于第二强度阈值(例如，深按压强度阈值ITD)。响应于检测到接触534进行的输入的强度已超过第二强度阈值，设备将设备的音量水平重置为对应于输入区域457的预设值(例如，对应于使设备的音量静音的最小值)，如图5B9所示。结合将音量水平重置为静音，设备还在输入区域457生成局部触觉输出(例如，具有与触觉输出524、536和526的触觉输出轮廓不同的触觉输出538)以指示已达到音量水平的最小值。在一些实施例中，设备还结合局部触觉输出538生成整个设备触觉输出540，以指示已响应于接触534进行的深按压输入而将音量静音。图5B9示出了在用作音量减小按钮的输入区域457上检测到输入的场景。相反，如果在输入区域456(例如，用作音量增大按钮的输入区域)上检测到接触534，则设备将设备的音量水平重置为对应于输入区域456的预设值(例如，最大音量水平)，响应于检测到输入的强度超过第二强度阈值，并且设备将在输入区域456生成对应的局部触觉输出和整个设备触觉输出以指示音量水平的突然重置。在一些实施例中，除了或代替要求接触的强度增大到高于深按压强度阈值以便将音量水平重置为预设最大值或最小值，设备要求接触强度保持高于轻按压强度阈值至少阈值量的时间T，以便将音量水平重置为预设最大值或最小值。
图5B10和图5B11示出了同一组输入区域456和457对应于多个设备参数(例如，包括至少音量水平设置和屏幕亮度设置)。响应于在输入区域546和457两者上检测到的同时按压输入，设备将输入区域的当前所选择的设备参数切换或转换到多个设备参数中的下一个设备参数。在图5B10中，在接触534从输入区域457抬离之后并且分别在输入区域456和457上的两个接触542和544的初始触摸按压时(例如，接触542和544两者的强度低于第一强度阈值(例如，轻按压强度阈值ITL))，设备在显示器上重新显示音量控件520以指示针对输入区域的当前所选择的设备参数，并且指示设备音量设置的当前值。在图5B11中，在检测到接触542和544两者的强度增大到高于第一强度阈值(例如，轻按压强度阈值ITL)时，设备将对应于输入区域456和457的当前所选择的设备参数切换到显示器亮度设置。响应于输入区域456和457上的接触542和544进行的同时轻按压输入，设备用亮度控件550的显示替换音量控件520的显示。亮度控件550是具有指示显示器的当前亮度设置的指示符的滑块控件。结合用亮度控件550替换音量控件520的显示，设备分别在输入区域456和457生成局部触觉输出546和548(例如，具有彼此相同的触觉输出轮廓，以及与触觉输出524、526、536、538的触觉输出轮廓不同的触觉输出轮廓)，以指示设备已切换到多个设备参数中的另一个参数作为针对输入区域456和457的当前控制的设备参数。在接触542和544进行的输入终止之后，设备响应于输入区域456和457上的按压输入，以类似于相对于图5B1至图5B10中的音量设置所描述的方式调节设备的亮度设置。响应于输入区域456和457上的另一同时轻按压输入，设备将针对输入区域的当前控制的设备参数切换回音量设置(例如，如果输入区域仅对应于两个设备参数)或切换到多个设备参数中的下一个设备参数。
图5C1至图5C20示出了根据一些实施例的用于为对应于呈现可回缩菜单并与之交互的不同类型的按钮交互提供触觉和视觉反馈的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程，包括图7A至图7E和图12A至图12E中的过程。
图5C1示出了设备100显示浏览器应用程序的用户界面。设备100包括与局部触觉输出发生器耦接以用于在输入区域455生成局部触觉输出的输入区域455(例如，设置在设备的邻近显示器边缘的周边侧上的电源按钮)。
在图5C2中，设备100检测输入区域455上的接触552。响应于检测到接触552(例如，接触552的强度超过接触检测强度阈值IT0)，设备显示对应于输入区域455旁边的可回缩菜单的前导对象554。在一些实施例中，前导对象554动画化(例如，具有移动或改变的视觉特征)以提示用户更用力地按压输入区域455(例如，在朝向显示器的方向上施加更多压力)。如果用户简单地将他/她的手指搁置在输入区域455上，则设备保持显示前导对象554，而不显示菜单。如果在显示菜单之前检测到接触552的抬离，则设备停止显示前导对象554。在一些实施例中，设备使在前导对象554下方当前显示的用户界面变暗并模糊，以将用户的注意力集中在前导对象554上。
图5C3至5C5示出，当接触552进行的输入的强度增大然后减小时，设备使具有多个可选选项的菜单显现随接触552的强度动态改变的量。如图5C3所示，当接触552进行的输入的强度增大时，显现菜单556的一部分(例如，从显示器的与输入区域455相邻的一侧滑入到显示器上)，该部分示出第一可选选项558(例如，用于打开/关闭设备的免打扰模式的选项)。随着接触552进行的输入的强度继续增大，菜单556的附加部分被显现(例如，菜单沿用户手指施加在输入区域455上的力/压力的方向进一步滑入)，示出第二可选选项560(例如，用于关闭设备的选项)。在图5C5中，随着接触552进行的输入的强度再次减小，菜单556朝向显示器的与输入区域455相邻的边缘回缩。如果检测到接触552的抬离，则菜单556完全回缩并且停止显示。在一些实施例中，在菜单556完全扩展以显示菜单上的所有可用选项之前，如果在菜单中当前在显示器上可见的选项中的一个选项上检测到轻击输入(例如，触摸屏上的另一个接触进行的轻击输入)，则所选择的选项将被调用，并且设备执行对应于所选择的选项的操作(例如，打开“免打扰”模式，或者关闭设备)。
图5C6至图5C7示出，如果在接触552的抬离之前，设备检测到接触552进行的输入的强度增大到高于第一强度阈值(例如，轻按压强度阈值ITL)，则设备完全显示菜单556并且在接触552抬离之后保持菜单556的显示。完全显示的菜单556包括第三可选选项562(例如，用于使用设备的支付功能的选项)。在一些实施例中，完全显示的菜单556还包括用于利用增强的按压输入(例如，输入区域455上的深按压输入或长按压输入)通过菜单556指示附加功能的可用性的指示符5641。这些附加功能的示例参照图5G1至5G5和5H1至5H5来讨论。如图5C6所示，结合检测到接触552进行的轻按压输入和菜单556的完全显示，设备在输入区域455生成局部触觉输出566。在一些实施例中，局部触觉输出566与接触552的强度达到第一强度阈值同步。在一些实施例中，在达到第一强度阈值之后，菜单滑出并快速回到其完全打开状态，并且设备将触觉输出566与菜单最终稳定在其完全打开状态同步。图5C7示出了在检测到接触552的抬离之后菜单556的完全打开状态。完全显示的菜单556中的每个选项可通过触摸屏上对应于该选项的位置处的轻击输入选择性地激活。
图5C8至图5C9示出了，接触5661在第一可选选项558上进行的轻击输入使得设备激活设备的“免打扰”模式。在图5C9中，设备生成整个设备触觉输出(例如，触觉输出5601)并显示通知(例如，通知5621)以响应于接触5663进行的轻击输入而向用户指示“免打扰”模式已被打开。在该示例中，选项558是切换按钮，并且如果再次轻击选项558，则设备关闭“免打扰”模式。通知5621在预设时间段之后停止显示。
图5C10至图5C12示出了使选择指示符(例如，选择指示符568)滚动通过多个可选选项(例如，选项558、560和562)以改变菜单556中的当前所选择的选项。在图5C10中，设备检测输入区域455上的接触564，以及接触564沿细长输入区域455的纵向方向的向下移动。响应于检测到输入区域455上的接触564进行的向下轻扫输入的开始(例如，不需要接触的强度达到提示强度阈值或轻按压强度阈值)，设备在菜单556中的当前所选择的选项(例如，选项558)的位置显示选择指示符568。在不同的实施例中，选择指示符可采用不同的形式(例如，作为应用于所选择的选项的聚光灯、突出显示、光标、特殊视觉效果等)。在图5C11中，当输入区域455上的接触564进行的向下轻扫输入继续时，设备将当前所选择的选项改变为菜单556中的第二选项560，并且将选择指示符568移动到第二选项560的位置。在图5C12中，当输入区域455上的接触564进行的向下轻扫输入进一步继续时，设备将当前所选择的选项改变为菜单556中的第三选项562，并且将选择指示符568移动到第三选项562的位置。在图5C10至图5C12中，轻扫输入由连续保持的接触564提供。也可使用输入区域455上的多次连续短的向下轻扫来实现图5C10至图5C12所示的相同效果。如图5C10至图5C12所示，设备在接触564进行的轻扫输入期间在输入区域455上生成局部触觉输出5663。在一些实施例中，局部触觉输出集中在接触564沿输入区域455的当前位置上。在一些实施例中，局部触觉输出是具有固定持续时间的相同离散触觉输出的连续序列，模拟粗表面的触觉反馈或机械滚轮的重量。在一些实施例中，接触564的移动满足预设移动标准(例如，距离阈值)会触发从一个可选选项切换到下一个可选选项，并且设备结合满足预设移动标准和切换当前所选择的选项而生成相应的离散触觉输出，以模拟由机械滚轮或拨号盘产生的卡位。虽然在图5C10至图5C12所示的示例中使用了向下轻扫，但是响应于输入区域455上的向上轻扫输入，设备在菜单556中沿相反方向切换当前所选择的选项，并且在输入区域455提供对应的局部触觉输出。
在图5C13中，当选项562是菜单556中当前所选择的选项时，设备检测输入区域455上的接触570进行的轻按压输入(例如，强度超过提示强度阈值或轻按压强度阈值的输入)。响应于该轻按压输入，设备激活对应于当前所选择的选项562的功能(例如，支付功能)。响应于检测到该轻按压输入，设备生成局部触觉输出572以指示满足强度要求和所选择的选项激活。在一些实施例中，设备还在所选择的选项被激活时突出显示所选择的选项。指示所选择的选项的激活的触觉输出572具有与指示所选择的选项的切换和/或选择指示器的滚动的触觉输出566不同的触觉输出轮廓。
图5C14至图5C17示出了使用沿细长输入区域455的纵向方向的轻扫输入(例如，向上轻扫和向下轻扫)滚动通过支付选项菜单(例如，包括多个可选支付卡576、582、588等的菜单574)中的多个可选选项。如图5C14所示，在通过接触570进行的轻按压输入激活支付选项562之后，设备用菜单574的显示替换菜单556的显示。默认支付卡576(例如，上次使用的支付卡)是在检测到任何附加输入之前菜单574中的当前所选择的选项。当前所选择的支付选项的放大图像(例如，当前选择的卡576的图像578)任选地与菜单574一起显示。在图5C15中，设备检测接触580沿输入区域455的纵向方向进行的向下轻扫输入，并且响应于检测到该向下轻扫输入，设备在菜单574中的支付选项列表中向前滚动并选择菜单574中的下一个支付卡582。当前所选择的支付卡582被放大，并且当前所选择的卡的放大图像584被显示。在图5C16中，设备检测接触580沿输入区域455的纵向方向进行的向下轻扫输入的继续，并且响应于检测到该向下轻扫输入的继续，设备在菜单574中的支付选项列表中向前滚动并选择菜单574中的下一个支付卡588。当前所选择的支付卡588被放大，并且当前所选择的卡的放大图像590被显示。在一些实施例中，支付选项列表被实现为圆形列表，并且用户可通过输入区域455上的一个或多个附加向下轻扫来继续滚动通过该列表并返回到第一个支付选项574。在图5C17中，设备检测接触580进行的向上轻扫输入(例如，接触580沿细长输入区域455的纵向方向的向下移动的反转)。响应于接触580进行的向上轻扫输入，设备在菜单574中的支付选项列表中向后滚动，并且再次选择菜单574中的前一个支付卡582。
如图5C14至图5C17所示，设备在接触580进行的轻扫输入期间在输入区域455上生成局部触觉输出。在一些实施例中，局部触觉输出集中在接触580沿输入区域455的当前位置上(例如，每个触觉输出的大多数能量集中在手指接触正下方，并且触觉输出序列的焦点在向下轻扫或向上轻扫期间随着手指接触向下或向上移动)。在一些实施例中，局部触觉输出是具有固定持续时间的相同离散触觉输出的连续序列，模拟粗表面的触觉反馈或机械滚轮的重量。在一些实施例中，在向下轻扫输入期间提供的局部触觉输出586和在向上轻扫期间提供的局部触觉输出592具有不同的触觉输出轮廓以指示轻扫方向的差异。例如，响应于向下轻扫而提供的触觉输出各自包括具有大峰后接小峰的模式；而响应于向上轻扫而提供的触觉输出各自包括具有小峰后接大峰的模式。在一些实施例中，接触564的移动满足预设移动标准(例如，距离阈值)会触发从一个可选选项切换到下一个可选选项，并且设备结合满足预设移动标准和切换当前所选择的选项而生成相应的离散触觉输出，以模拟由机械滚轮或拨号盘产生的卡位。类似地，响应于输入区域455上的向上轻扫输入，设备在菜单574中沿相反方向切换当前所选择的选项，并且在输入区域455提供对应的离散局部触觉输出(例如，具有与离散局部触觉输出586的触觉输出轮廓不同的触觉输出轮廓)。
在图5C18中，当支付选项582是当前所选择的支付选项时，输入区域455上的轻击输入确认对支付选项582的选择，例如，如通过菜单574中的支付卡图像584和支付选项582的进一步突出显示所指示的。在一些实施例中，轻击输入不是必需的(例如，在动作不如支付重要的情况下)，并且当前所选择的选项可直接使用而无需进一步确认。在一些实施例中，设备生成局部触觉输出596以指示确认对支付选项582的选择。
在图5C19中，当支付选项582被选择和确认时，使设备接近销售点设备(例如，POS设备598)(例如，用户握持设备并且在输入区域455、456和457与设备的周边侧接触)(例如，在预设距离内)。响应于检测到POS设备598在预设距离内，设备100在使用当前所选择的支付卡582执行支付操作之前发起倒计时(例如，对应于预设取消时间段的倒计时)。在倒计时期间，如果设备移动远离POS设备598，则支付操作被取消。如果设备保持在POS设备的预设距离内，则在倒计时结束时执行支付操作。在一些实施例中，如果支付操作的实际执行花费有限的时间量并且在陈述支付操作的执行之后的时间段内可取消，则设备任选地在支付操作的取消仍可在倒计时结束之前成功执行时开始支付操作的执行。如图5C19所示，设备以完成度计593的形式显示倒计时(例如，指示总取消时间段的70％完成或30％剩余)。在一些实施例中，如果用户希望完成支付操作而不是取消支付操作，则设备显示提示591，要求用户将设备保持在POS设备598的预设阈值距离内。
在图5C19中，设备在仍然允许取消操作的倒计时时间段期间提供协调触觉输出597的序列。在一些实施例中，协调触觉输出597围绕输入区域455、456和457以重复序列生成。在一些实施例中，围绕设备的周边侧的不同输入区域处的触觉输出597的幅值指示相应的方向(例如，顺时针方向，其中输入区域457具有最低触觉输出强度(例如，具有局部触觉输出597-1)、输入区域456具有中间触觉输出强度(例如，具有局部触觉输出597-2)并且输入区域455具有最高触觉输出强度(例如，具有局部触觉输出597-3))。在一些实施例中，不同输入区域处的触觉输出的定时也从公共参考时间偏移不同的量(例如，输入区域457处的触觉输出(例如，局部触觉输出597-1)具有最早的开始时间，接着是输入区域456处的触觉输出(例如，局部触觉输出597-2)，接着是输入区域455处的触觉输出(例如，局部触觉输出597-3))。在一些实施例中，围绕设备的周边侧的不同输入区域处的触觉输出的定时对应于与当前使用场景相关的相应方向(例如，顺时针方向、向右方向等)(例如，对应于倒计时指示符的移动方向)。在一些实施例中，在不同输入区域455、456和457处提供的单独触觉输出597之间的协调方式(例如，在相对强度、定时和触觉输出模式方面)在这些触觉输出的触觉输出轮廓中指定，并且该协调由中央控制器(例如，图1C中的触觉反馈控制器161)控制。在一些实施例中，除了局部触觉输出597之外，设备还提供在倒计时期间振动整个设备的整个设备触觉输出(例如，连续触觉输出(例如，连续蜂鸣))，以警示用户：如果没有及时取消的话，支付操作的执行或完成即将发生。在一些实施例中，整个设备触觉输出的强度随着倒计时指示符的进度单调增大，以提高向用户发出警告的紧急性。
图5C20示出，当倒计时结束时，设备执行或完成支付操作，并且通过将设备移动离开POS设备598而使操作的取消不再可用。在一些实施例中，设备提供整个设备触觉输出595以指示支付操作的执行或完成。清除示能表示587任选地被提供在显示器上以用于清除菜单574。
图5D1至图5D24示出了根据一些实施例的用于为对应于呈现可回缩菜单(例如，剪贴板)并与之交互的不同类型的按钮交互提供触觉和视觉反馈的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程，包括图7A至图7E和图12A至图12E中的过程。
图5D1示出了应用程序(例如，与图5C1所示相同)的用户界面(例如，用户界面516)。在检测到输入区域455上的接触585时，设备显示对应于可回缩菜单556的前导对象554(例如，与图5C2所示的前导对象相同)，如图5D2所示。设备检测接触585沿细长输入区域455上的方向的移动(例如，从设备的显示器侧到设备的背侧)，如图5D2至图5D3所示。响应于检测到接触585在细长输入区域455上沿水平方向的移动，设备显示对应于另一可回缩菜单(例如剪贴板)的不同前导对象583，如图5D3所示。此外，响应于检测到接触585在输入区域455上沿水平方向的移动，设备提供局部触觉输出581(例如，具有与触觉输出508、510、512、524、526、536、538、546、548、566、5663、572、586、592、596、597和/或589的触觉输出轮廓不同的触觉输出轮廓)，以指示当前由输入区域455控制的菜单的切换/转换。在一些实施例中，设备响应于输入区域455上的水平轻扫输入来切换所显示的前导对象(例如，用于菜单556的前导对象554和用于菜单577的前导对象583)，而不管在细长输入区域455上检测到的水平轻扫输入的方向(例如，从显示器侧到背侧，或从背侧到显示器侧)如何。这不同于物理切换按钮的行为，在物理切换按钮中，对于按钮的每个切换状态，只有一个轻扫方向是有效的。在一些实施例中，输入区域455对应于三个或更多个菜单的圆形列表，并且设备响应于输入区域455上的多个水平轻扫而滚动通过该三个或更多个菜单的相应前导对象并提供对应的局部触觉输出(例如，具有与触觉输出581相同的触觉输出轮廓的触觉输出)，以指示前导对象和相关联的菜单的切换。
图5D4至图5D5示出了，随着接触579进行的输入的强度增大，设备显现现在对应于输入区域455的菜单577的增大的区域(例如，对象诸如内容项(例如，图像、web链接、文档、文本等)的剪贴板)。菜单577显示在用户界面516上方而不使用户界面516模糊和变暗(例如，与图5C3中的菜单556的情况形成对比)。对于剪贴板菜单，下面的用户界面保持完全可见，使得用户可在涉及剪贴板中的对象的复制和粘贴操作期间清楚地看到该用户界面中的对象和可能的放下位置。
在图5D6至图5D8中，当菜单577作为在输入区域455上检测到的持续接触579的结果并且在接触579的强度增大到高于第一强度阈值(例如，轻按压强度阈值ITL)之前，在触摸屏上对应于用户界面516中的图像573的位置(例如，菜单577之外的位置)处检测到接触575。响应于检测到接触575满足预设选择标准(例如，基于接触575满足的时间阈值的长按压标准，或基于接触575满足的强度阈值的轻按压标准)，设备选择图像573。然后，根据接触575在触摸屏上到菜单577内的位置的后续移动，所选择的图像573的表示(例如，缩略图571)被拖动到菜单577中，如图5D7所示。
在图5D8中，在将缩略图571拖动到菜单577中之后，设备检测接触575的抬离。响应于检测到接触575的抬离，设备将缩略图571插入到菜单577中，并且图像573的副本变成对应于菜单577的剪贴板中的对象。在一些实施例中，设备生成整个设备触觉输出569以指示图像573插入剪贴板中。
在图5D9中，在通过接触575进行的拖放输入将图像573插入剪贴板中之后，设备在接触579的强度增大到高于第一强度阈值(例如，轻按压强度阈值ITL)之前检测接触579的抬离。响应于检测到接触579进行的输入的终止，设备将菜单577回缩，并且用户界面516不再被菜单577遮挡。在图5D3至图5D9所示的上述过程中，在菜单未完全显示的情况下将对象添加到菜单577中。在一些实施例中，当菜单由于先前的轻按压输入已完全快速打开时，还可通过拖放输入将对象添加到菜单。
在图5D10中，例如，作为启动另一个应用程序(例如，从主屏幕或从已经替换图5D9中的用户界面516的显示的应用程序切换器用户界面启动)的结果，显示另一个用户界面567。
在图5D11至图5D12中，在输入区域455上检测接触565进行的输入。在检测到接触565时，对应于菜单577的前导对象583显示在输入区域455旁边(如图5D11所示)。当接触565的强度增大时，菜单577沿由用户手指施加在输入区域455上的力/压力的方向逐渐滑动到显示器上。缩略图571作为菜单577中显示的第一个项目出现，如图5D12所示。
图5D13至图5D14示出了接触563进行的拖动输入已选择缩略图571的副本并将其拖动到用户界面567上。当接触563在触摸屏112上保持以保持缩略图571的副本时，检测到接触565的抬离。响应于检测到接触565从输入区域455抬离，设备停止显示菜单577，而接触563继续保持到用户界面567上方的缩略图571的副本上。
在图5D15中，当检测到接触563的抬离时，对应于缩略图571的图像被放置到根据接触563的抬离位置和用户界面567上的可用放下位置所选择的放下位置。在一些实施例中，设备生成整个设备触觉输出559以指示图像稳定到其在用户界面567上的最终位置。
图5D16至图5D17示出了，在输入区域455上检测到接触557进行的按压输入(例如，接触强度超过第一强度阈值(例如，轻按压强度阈值ITL))，并且因此设备使菜单577在用户界面567上完全展开。当接触557的强度超过第一强度阈值并且菜单快速打开时，设备生成局部触觉输出553以指示满足菜单显示标准并且菜单显示将在接触557从输入区域455抬离之后保持。当菜单577完全打开时，滚动指示符555显示在菜单577中以指示附加项目在菜单577中，该附加项目可响应于滚动输入而显现。
图5D18至图5D19示出了在菜单577完全打开之后，在输入区域455上检测到分别由接触551和547进行的两个连续向下轻扫输入。响应于在输入区域455上检测到的向下轻扫输入，菜单577沿对应于该轻扫输入的方向的方向滚动(例如，当该轻扫向下时向右滚动，并且当该轻扫向上时向左滚动)，如滚动指示符555的移动所指示的。除了视觉反馈之外，响应于检测到接触551和547进行的轻扫输入，设备还在输入区域455上分别生成局部触觉输出549和545。局部触觉输出549和545具有相同的触觉输出轮廓，该触觉输出轮廓被设计成模拟滚轮响应于轻扫输入和/或手指接触下的输入区域的粗糙度的旋转。在一些实施例中，选择指示符向前和向后移动通过菜单577中的可选选项(例如，内容项)的列表，以指示响应于在输入区域455上检测到的向下轻扫输入和向上轻扫输入的当前所选择的选项，并且输入区域上的轻击输入激活由选择指示符指示的当前所选择的选项。
在图5D20至图5D22中，当菜单577在被滚动之后保持打开时，设备检测对应于菜单577中的对象541的位置处的接触543。根据接触543在触摸屏112的边缘(例如，在可允许的屏幕上放下位置之外)选择和拖动对象541，设备从菜单577中移除对象541。在接触543抬离时，设备生成整个设备触觉输出539以指示已完成从菜单577删除对象541。
在图5D23至图5D24中，在菜单577之外检测到接触537进行的轻击输入，并且设备从用户界面567上方清除菜单577。
图5E1至图5E5示出了根据一些实施例的用于提供触觉和视觉反馈以用于在设备处于媒体捕获模式时引导设备移动以执行相应任务的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程，包括图9A至图9C和图12A至图12E中的过程。
在图5E1中，用户界面535是处于全景捕获模式的相机用户界面。设备检测到所有三个输入区域455、456和457上的用户接触(例如，设备左侧的接触527，以及设备右侧的接触525)的存在(例如，设备被握在用户手中，而且用户与输入区域455、456和457接触)。尽管在图5E1至图5E5中示出了与所有输入区域的同时接触，但在本文所示的过程期间的各个时间在输入区域中的两个或更多个输入区域上生成局部触觉输出，即使在该过程期间没有一直保持与所有输入区域的接触。此外，在一些情况下，在输入区域455、456和457生成触觉输出响应于在相机的视场中检测到的对象满足标准，不需要在输入区域455、456、457上检测到触摸输入。
如图5E1所示，在全景捕获过程开始时，面板533显示已经捕获的全景图像的一部分(例如部分图像529)和指向完成该全景图像所需的设备移动方向的移动提示531(例如箭头)。在面板533下方，显示相机的当前视场。相机的视场在全景捕获期间基于设备相对于外部环境的当前位置连续更新。
在图5E2中，当设备向右移动并且全景捕获正在进行中时，设备检测到设备正偏离水平移动，并且设备的移动需要向上移(例如，箭头在面板533的中心线下方)，以便使在设备移动期间的不同点处捕获的全景图像的内容正确地对齐(例如，相机图像流的连续帧中的山顶应当占据帧中的相同垂直位置)。根据确定设备已经偏离水平移动，并且设备需要向上移以使视场中的对象返回到适当位置以继续全景图像捕获，设备使用局部触觉输出发生器在设备左侧的输入区域456和457生成协调触觉输出(例如，协调触觉输出523)。根据协调触觉输出523的扩展的触觉输出轮廓，输入区域457(例如，设备左侧的较低输入区域)处的局部触觉输出发生器生成离散触觉输出523-1序列，该序列具有第一幅值(例如，较低幅值)并且在离散触觉输出523-1中的连续触觉输出之间存在间隙(例如，如由从该较低输入区域传播的一系列小的圆形对象所指示的，每个小的圆形对象表示相应离散触觉输出，并且每个相应小的圆形对象与该较低输入区域的距离对应于自从生成由相应小的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据协调触觉输出523的扩展的触觉输出轮廓，输入区域456(例如，设备左侧的较高输入区域)处的局部触觉输出发生器生成离散触觉输出523-2序列，该序列具有第二幅值(例如，较高幅值)并且在该离散触觉输出中的连续触觉输出之间存在间隙(例如，如由从该较高输入区域传播的一系列大的圆形对象所指示的，每个大的圆形对象表示相应离散触觉输出，并且每个相应大的圆形对象与该较高输入区域的距离对应于自从生成由相应大的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据扩展的触觉输出轮廓，设备偏移在较低输入区域457和较高输入区域456生成的局部触觉输出523-1和局部触觉输出523-2的定时，使得在这两个输入区域生成离散触觉输出的协调序列523。例如，示例性协调序列是“2L-5H-2L-5H-2L-5H-…”，其中“2L”表示在较低输入区域457生成的较低强度(例如，幅值＝2)触觉输出，并且“5H”表示在较高输入区域456生成的较高强度(例如，幅值＝5)触觉输出。基于协调触觉输出序列523，设备提示用户向上移动设备(例如，沿从具有较弱触觉输出523-1的区域到具有较强触觉输出523-2的区域的方向)。在一些实施例中，协调触觉输出序列在输入区域456和457连续生成，直到设备停止检测沿向下方向的偏离为止(例如，直到用户已经向上移动设备并且恢复设备的向右水平移动为止)。
在图5E3中，当设备继续向右移动并且全景捕获即将完成时，设备检测到设备正偏离水平移动，并且设备的移动需要向下移(例如，箭头在面板533的中心线上方)，以便使在设备移动期间的不同点处捕获的全景图像的内容正确地对齐(例如，相机图像流的连续帧中的山顶应当占据帧中的相同垂直位置)。根据确定设备已经偏离水平移动，并且设备需要向上移以使视场中的对象返回到适当位置以继续全景图像捕获，设备使用局部触觉输出发生器在设备左侧的输入区域456和457生成协调触觉输出(例如，协调触觉输出521)。根据协调触觉输出521的扩展的触觉输出轮廓，输入区域457(例如，设备左侧的较低输入区域)处的局部触觉输出发生器生成离散触觉输出521-1序列，该序列具有第三幅值(例如，较高幅值)并且在离散触觉输出521-1中的连续触觉输出之间存在间隙(例如，如由从该较低输入区域传播的一系列大的圆形对象所指示的，每个大的圆形对象表示相应离散触觉输出，并且每个相应大的圆形对象与该较低输入区域的距离对应于自从生成由相应大的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据协调触觉输出521的扩展的触觉输出轮廓，输入区域456(例如，设备左侧的较高输入区域)处的局部触觉输出发生器生成离散触觉输出521-2序列，该序列具有第四幅值(例如，较低幅值)并且在该离散触觉输出中的连续触觉输出之间存在间隙(例如，如由从该较高输入区域传播的一系列小的圆形对象所指示的，每个小的圆形对象表示相应离散触觉输出，并且每个相应小的圆形对象与该较高输入区域的距离对应于自从生成由相应小的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据扩展的触觉输出轮廓，设备偏移在较低输入区域457和较高输入区域456生成的局部触觉输出521-1和局部触觉输出521-2的定时，使得在这两个输入区域生成离散触觉输出的协调序列。例如，示例性触觉输出序列是“2H-5L-2H-5L-2H-5L…”，其中“2H”表示在较高输入区域456生成的较低强度(例如，幅值＝2)触觉输出，并且“5L”表示在较低输入区域457生成的较高强度(例如，幅值＝5)触觉输出。基于协调触觉输出序列521，设备提示用户向下移动设备(例如，沿从具有较弱触觉输出521-1的区域到具有较强触觉输出521-2的区域的方向)。在一些实施例中，协调触觉输出序列在输入区域456和457连续生成，直到设备停止检测沿向上方向的偏离为止(例如，直到用户已经向下移动设备并且恢复设备的向右水平移动为止)。
在图5E4中，当设备继续向右移动并且设备检测到全景捕获接近完成时(例如，设备的水平移动满足预定义的接近完成线性或角位移阈值)。设备检测到水平移动停止和/或设备需要进一步向右移动以便完成全景图像。根据确定设备已经偏离所需的向右移动，并且设备需要向右移动以继续全景图像捕获，设备使用局部触觉输出发生器在设备左侧的输入区域456和设备右侧的输入区域455生成协调触觉输出(例如，协调触觉输出519)。根据协调触觉输出519的扩展的触觉输出轮廓，输入区域456(例如，设备左侧的上部输入区域)处的局部触觉输出发生器生成离散触觉输出519-1序列，该序列具有第五幅值(例如，较低幅值)并且在离散触觉输出519-1中的连续触觉输出之间存在间隙(例如，如由从设备左侧上的输入区域456传播的一系列小的圆形对象所指示的，每个小的圆形对象表示相应离散触觉输出，并且每个相应小的圆形对象与输入区域456的距离对应于自从生成由相应小的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据协调触觉输出519的扩展的触觉输出轮廓，输入区域455(例如，设备右侧的输入区域)处的局部触觉输出发生器生成离散触觉输出519-2序列，该序列具有第六幅值(例如，较高幅值)并且在该离散触觉输出中的连续触觉输出之间存在间隙(例如，如由从右侧输入区域455传播的一系列大的圆形对象所指示的，每个大的圆形对象表示相应离散触觉输出，并且每个相应大的圆形对象与右侧输入区域455的距离对应于自从生成由相应较大的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据扩展的触觉输出轮廓，设备偏移在左侧输入区域456和右侧输入区域455生成的局部触觉输出519-1和局部触觉输出519-2的定时，使得在这两个输入区域生成离散触觉输出的协调序列。例如，示例性触觉输出序列是“2L-5R-2L-5R-2L-5R…”，其中“2L”表示在左侧输入区域456生成的较低强度(例如，幅值＝2)触觉输出，并且“5R”表示在右侧输入区域455生成的较高强度(例如，幅值＝5)触觉输出。基于协调触觉输出序列519，设备提示用户向右移动设备(例如，沿从具有较弱触觉输出519-1的区域到具有较强触觉输出519-2的区域的方向)。在一些实施例中，协调触觉输出序列在输入区域456和455连续生成，直到设备的向右运动恢复和/或全景完成为止。
在图5E5中，一旦设备已经向右移动了所需的量，全景捕获就完成。响应于检测到全景图像的完成，设备停止在相机用户界面535中的相机视场上方显示面板533。全景图像515被保存到照片库中。此外，设备任选地在输入区域455生成局部触觉输出517(例如，不是协调触觉输出519的一部分)以指示全景捕获完成。
图5F1至图5F6示出了根据一些实施例的用于提供触觉和视觉反馈以用于在设备处于媒体捕获模式时引导设备移动以执行相应任务的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程，包括图9A至图9C和图12A至图12E中的过程。
在图5F1中，显示相机用户界面513，其中相机的视场捕获三个正在跳舞的被摄体(例如，男性、女性和女孩)。在图5F2中，当用户握持设备时(例如，接触511和509在输入区域455、456和457上)，设备检测输入区域455(例如，也用作设备的电源按钮)上的接触509进行的轻按压输入(例如，接触强度超过第一强度阈值(例如，提示强度阈值ITH))。响应于检测到输入区域455上的接触509进行的轻按压输入，设备发起相机应用程序的面部检测和/或自动对焦功能，并且围绕在相机的视场中识别的三个被摄体的面部显示三个指示符505-1、505-2、505-3。此外，结合面部检测和自动聚焦功能被激活，设备在输入区域455生成局部触觉输出507(例如，一系列弱轻击)以指示自动聚焦和面部检测已被触发，并且只要接触509的强度保持高于第一强度阈值(例如，提示强度阈值ITH)，自动聚焦和面部检测就持续。
在图5F3中，设备检测接触509的强度增大到高于大于第一强度阈值(例如，提示强度阈值ITH)的第二强度阈值(例如，轻按压强度阈值ITL)。响应于检测到接触509的强度增大到高于第二强度阈值，设备激活相机应用程序的视频捕获功能，例如，如按钮503的变化所指示。当被摄体和相机相对于彼此四处移动时，面部检测和自动对焦在用户界面513上的相机的视场中继续。响应于检测到接触509的强度超过第二强度阈值，设备在输入区域455生成局部触觉输出625以指示接触509激活输入区域并因此激活相机的视频捕获功能。
图5F4至图5F5示出，在视频捕获过程期间，设备持续监测在视场中识别的面部的位置，并且在检测到的面部即将移出视场时生成警告。尽管在图5F4至图5F6中示出了与所有输入区域的同时接触(例如，接触511和509)，但在本文所示的过程期间的各个时间在输入区域中的两个或更多个输入区域上生成局部触觉输出，即使在该过程期间没有一直保持与所有输入区域的接触。此外，在一些情况下，在输入区域455、456和457生成触觉输出响应于在相机的视场中检测到的对象满足标准，不需要在输入区域455、456、457上检测到触摸输入。
在图5F4中，当设备检测到被摄体的面部中的一个(例如，女孩面部)已移动至相机的视场的左边缘时，设备使用设备左侧的较低输入区域457和设备右侧的输入区域455生成协调触觉输出(例如，协调触觉输出601)。根据确定视场的左下侧的对象即将超出框架，并且设备需要向左移以将该对象远离视场的左边缘移动以继续视频捕获，设备根据用于协调触觉输出601的扩展的触觉输出轮廓生成协调触觉输出。根据协调触觉输出601的扩展的触觉输出轮廓，输入区域457(例如，设备左侧的较低输入区域)处的局部触觉输出发生器生成离散触觉输出601-2序列，该序列具有第一幅值(例如，较高幅值)并且在离散触觉输出601-2中的连续触觉输出之间存在间隙(例如，如由从较低输入区域457传播的一系列大的圆形对象所指示的，每个大的圆形对象表示相应离散触觉输出，并且每个相应大的圆形对象与较低的左侧输入区域的距离对应于自从生成由相应大的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据协调触觉输出601的扩展的触觉输出轮廓，输入区域455(例如，设备右侧的输入区域)处的局部触觉输出发生器生成离散触觉输出601-1序列，该序列具有第二幅值(例如，较低幅值)并且在该离散触觉输出中的连续触觉输出之间存在间隙(例如，如由从右侧输入区域传播的一系列小的圆形对象所指示的，每个小的圆形对象表示相应离散触觉输出，并且每个相应小的圆形对象与右侧输入区域的距离对应于自从生成由相应小的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据扩展的触觉输出轮廓，设备偏移在右侧输入区域455和较低的左侧输入区域457生成的局部触觉输出601-1和局部触觉输出601-2的定时，使得在这两个输入区域生成离散触觉输出的协调序列。例如，示例性触觉输出序列是“2R-5LL-2R-5LL-2R-5LL…”，其中“2R”表示在右侧输入区域455生成的较低强度(例如，幅值＝2)触觉输出，并且“5LL”表示在较低的左侧输入区域457生成的较高强度(例如，幅值＝5)触觉输出。基于协调触觉输出序列601，设备提示用户向左移动设备(例如，沿从具有较弱触觉输出601-1的区域到具有较强触觉输出601-2的区域的方向)。在一些实施例中，协调触觉输出序列在输入区域455和457连续生成，直到设备检测到对应于指示符505-3的对象不再靠近相机视场的左边缘为止(例如，对象完全离开屏幕，或者移回框架中)(例如，由于设备的移动和/或对应于指示符505-3的对象的移动)。
在图5F5中，当设备检测到被摄体的面部中的一个(例如，女性面部)已移动至相机的视场的右边缘时，设备使用设备左侧的上部输入区域456和设备右侧的输入区域455生成协调触觉输出(例如，协调触觉输出603)。根据确定视场的右上侧的对象即将超出框架，并且设备需要向右移以将该对象远离视场的右边缘移动以继续视频捕获，设备根据用于协调触觉输出603的扩展的触觉输出轮廓生成协调触觉输出。根据协调触觉输出603的扩展的触觉输出轮廓，输入区域455(例如，设备右侧的输入区域)处的局部触觉输出发生器生成离散触觉输出603-1序列，该序列具有第一幅值(例如，较高幅值)并且在离散触觉输出603-1中的连续触觉输出之间存在间隙(例如，如由从右侧输入区域455传播的一系列大的圆形对象所指示的，每个大的圆形对象表示相应离散触觉输出，并且每个相应大的圆形对象与右侧输入区域的距离对应于自从生成由相应大的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据协调触觉输出603的扩展的触觉输出轮廓，输入区域456(例如，设备左侧的上部输入区域)处的局部触觉输出发生器生成离散触觉输出603-2序列，该序列具有第二幅值(例如，较低幅值)并且在该离散触觉输出中的连续触觉输出之间存在间隙(例如，如由从上部左侧输入区域传播的一系列小的圆形对象所指示的，每个小的圆形对象表示相应离散触觉输出，并且每个相应小的圆形对象与上部左侧输入区域的距离对应于自从生成由相应小的圆形对象表示的相应离散触觉输出以来已经经过的时间量)。进一步根据扩展的触觉输出轮廓，设备偏移在右侧输入区域455和上部左侧输入区域456生成的局部触觉输出603-1和局部触觉输出603-2的定时，使得在这两个输入区域生成离散触觉输出的协调序列。例如，示例性触觉输出序列是“2UL-5R-2UL-5R-2UL-5R…”，其中“2UL”表示在上部左侧输入区域456生成的较低强度(例如，幅值＝2)触觉输出，并且“5R”表示在右侧输入区域455生成的较高强度(例如，幅值＝5)触觉输出。基于协调触觉输出序列603，设备提示用户向右移动设备(例如，沿从具有较弱触觉输出603-2的区域到具有较强触觉输出603-1的区域的方向)。在一些实施例中，协调触觉输出序列在输入区域455和456连续生成，直到设备检测到对应于指示符505-2的对象不再靠近相机视场的右边缘为止(例如，对象完全离开屏幕，或者移回框架中)(例如，由于设备的移动和/或对应于指示符505-2的对象的移动)。
图5F6示出了，当所有检测到的被摄体都良好地在框架中时，视频捕获继续(例如，用户的手指搁置在输入区域455、456和457上)，并且设备不生成任何协调触觉输出来提示设备的移动。
图5G1至图5G5示出了根据一些实施例的用于提供触觉和视觉反馈以警告用户即将执行操作的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程，包括图10A至图10C和图12A至图12E中的过程。
在图5G1中，菜单556已响应于先前的轻按压输入而显示(例如，根据类似于图5C1至图5C7所示的过程)。如图5G1所示，除了多个可选选项(例如，选项558、560和562)之外，指示符5641显示在菜单556中以指示可响应于增强的按压输入(例如，具有增强的持续时间和/或强度要求的按压输入)而触发的附加功能(例如，紧急呼叫功能)的可用性。
在图5G2中，随着输入区域455上的接触605的强度增大到高于轻按压强度阈值ITL并继续朝深按压强度阈值ITD增大，设备生成第一局部触觉输出607(例如，一系列弱点击)以指示即将达到用于触发设备的紧急呼叫功能的阈值强度。在一些实施例中，局部触觉输出的强度根据接触605进行的输入的当前强度而动态地改变。在一些实施例中，设备还改变指示附5641的外观以指示接触605的强度正朝向用于触发紧急呼叫功能的阈值强度增大。
在图5G3中，设备检测到接触605进行的输入的强度已增大到高于深按压强度阈值ITD(例如，已满足警告发起标准)。响应于检测到接触605进行的输入的强度已超过深按压强度阈值ITD，设备启动用于紧急呼叫功能的倒计时并且使用定位在输入区域455、456、457的局部触觉输出发生器生成第一协调触觉输出(例如，协调触觉输出609)作为对用户的警告，即如果在倒计时(例如，对应于取消时段的倒计时)结束之前未接收到取消输入，则将在倒计时结束时调用紧急服务。在一些实施例中，在不同输入区域生成的协调触觉输出609(例如，局部触觉输出609-1、609-2和609-3)相同而且同步。在一些实施例中，在不同输入区域生成的局部触觉输出在定时上偏移，以围绕设备创建移动循环。在一些实施例中，触觉输出的幅值在倒计时时间段期间随时间推移连续增大。如图5G3所示，在接触605的强度增大到高于深按压强度阈值满足警告发起标准之后，显示通知611以指示将在5秒倒计时结束时执行紧急呼叫，并且在该倒计时时间段期间需要将输入的强度保持高于深按压强度阈值ITD(例如，需要满足强度阈值和时间阈值的组合阈值)，以便满足用于执行紧急呼叫功能的操作执行标准。如果不满足强度阈值或者如果输入在倒计时时间段结束之前终止，则将不执行紧急呼叫操作并且将停止警告触觉输出。在一些实施例中，指示符5641的外观被改变(例如，闪烁或脉动)以指示即将满足操作执行标准并且即将执行紧急呼叫功能。在一些实施例中，除了用于指示紧急呼叫功能的即将执行的局部触觉输出和视觉反馈之外，设备还生成连续而且逐步增大的(例如，具有增大的幅值)整个设备触觉输出(例如，触觉输出613)以进一步增强警告的效果。
在图5G4中，当倒计时时间段结束并且满足用于执行紧急呼叫功能的操作执行标准(例如，接触605进行的输入满足组合的强度阈值和持续时间阈值)时，设备停止生成警告反馈(例如，局部触觉输出609、通知611和整个设备触觉输出613)，并呼叫紧急服务。如图5G4所示，通知617指示紧急呼叫正在进行。在一些实施例中，设备生成整个设备触觉输出(例如，触觉输出615)以指示紧急呼叫功能被执行并正在进行中。此时，不再允许取消紧急呼叫操作。
在图5G5中，该呼叫连接，并且设备停止生成任何触觉输出。显示通知619以指示该呼叫连接，并且显示呼叫终止示能表示(例如，按钮621)。在呼叫终止示能表示上由接触623进行的轻击输入终止该紧急呼叫，并且用户界面恢复到图5G1所示的状态。
图5H1至图5H5示出了根据一些实施例的用于提供触觉和视觉反馈以警告用户即将执行操作(例如，激活基于语音的数字助理)的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程，包括图10A至图10C和图12A至图12E中的过程。
在图5H1中，显示用户界面(例如，唤醒屏幕用户界面501)。在图5H2中，菜单556已响应于接触627进行的轻按压输入而显示(例如，根据类似于图5C1至图5C7所示的过程)。生成局部触觉输出(例如，局部触觉输出629)以指示该输入已满足轻按压强度阈值。如图5H2所示，除了多个可选选项(例如，选项558、560和562)之外，指示符5641显示在菜单556中以指示可响应于增强的按压输入(例如，具有增强的持续时间和/或强度要求的按压输入)而触发的附加功能(例如，数字助理功能)的可用性。
在图5H3中，当接触627进行的输入的强度在至少阈值量的时间T保持高于轻按压强度阈值ITL时，设备在输入区域455和456使用局部触觉输出发生器生成协调触觉输出(例如，触觉输出631)。在一些实施例中，局部触觉输出631-1和631-2各自是离散触觉输出序列，并且这两个离散触觉输出序列的定时彼此略微偏移(例如，偏移对应于这些序列中的一个序列中的两个连续离散触觉输出之间的间隙的量)。在一些实施例中，响应于检测到接触627进行的输入的强度在至少阈值量的时间T保持高于轻按压强度阈值ITL，设备开始收集计算资源以启动数字助理。
在一些实施例中，在数字助理完全准备好接受语音输入并对语音输入作出响应之前，设备显示视觉反馈633和637(例如，文本问候(例如，“我能为你做什么？“继续，我在听...”)、动画(例如，动画波形)等)以指示数字助理做好了准备，如图5H3和5H4所示。在图5H4中，在数字助理完全准备好接收语音输入并提供基于语音的响应之前，设备继续在输入区域455和456上生成局部触觉输出631。在一些实施例中，在数字助理已被触发并且触觉输出631被生成之后，用户不需要将输入的强度保持高于轻按压强度阈值ITL。在一些实施例中，如果在数字助理被完全激活并准备好对用户的语音输入作出响应之前检测到取消输入(例如，接触627的抬离)，则设备停止生成局部触觉输出631，并恢复用户界面501。
在图5H5中，设备检测到在数字助理被完全激活并准备好对用户的语音输入作出响应之前未检测到取消输入，设备停止生成局部触觉输出631并显示数字助理用户界面639。在一些实施例中，响应于检测到数字助理被完全激活并准备好对用户的语音输入作出响应，并且在数字助理被完全激活并准备好对用户的语音输入作出响应之前未检测到取消输入，设备停止生成局部触觉输出631，并且生成整个设备触觉输出641以指示数字助理完全准备好对用户的语音输入作出响应。
图5I1至图5I6示出了根据一些实施例的为每种相应类型的按钮交互提供触觉输出，该触觉输出根据输入区域和用户手指之间间隙材料的存在而具有变化的触觉输出轮廓。这些附图用于示出下文描述的过程，包括图11A和图11B中的过程。
为了进行示意性的说明，仅使用两种类型的材料(例如，壳体643的材料和壳体645的材料)作为图5I1至图5I6中的示例性间隙材料。在实际使用场景中，许多不同类型的间隙材料是可能的，并且各自对应于修改基本触觉输出的触觉输出轮廓的相应方式(例如，当不存在间隙材料时生成的触觉输出)以通过不同类型的间隙材料在用户的手指上产生一致(例如，几乎相同)的触感。
在一些实施例中，根据输入区域和用户手指之间存在的实际材料(例如，材料类别(例如，皮革、塑料、有机硅、织物等)或材料的实际特性(例如，弹性、密度、厚度、刚度等))、所检测到的输入的类型(例如，输入的实际强度，或者输入是否为输入区域上的手指搁置输入、轻按压输入、深按压输入，水平轻扫输入或垂直轻扫输入)和/或所生成的触觉输出的类型(例如，波形、幅值、频率等)，设备使用不同策略来修改将在存在间隙材料(例如，壳体或手套或衣服)的情况下在对应的输入区域生成的触觉输出的触觉输出轮廓。图5I1至图5I6示出了针对不同间隙材料、不同类型的输入和不同类型的触觉输出对触觉输出轮廓的定性修改。这些定性修改并不意味着是穷举性的，并且在各种实施例中可根据实际使用场景而变化。
在图5I1中，在输入区域455上检测强度超过提示强度阈值ITH的按压输入，并且设备响应于检测到该按压输入而生成局部触觉输出。在图5I1的左侧部分中，触觉输出649生成。触觉输出649的触觉输出轮廓(例如，两个离散波形的序列)在图5I1的左侧部分的底部提供。响应于该按压输入，设备任选地结合在输入区域455生成局部触觉输出来执行操作(例如，在变暗的唤醒屏幕用户界面上显示未读通知，如图5A4所示，选择菜单中的项目，如图5C13所示，自动聚焦于所检测到的面部，如图5F2所示)。
在图5I1的中间部分中，设备100(例如，包括输入区域455)被壳体643覆盖。设备检测由用户在输入区域455上提供的相同按压输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的按压输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料一)，设备生成具有经修改的触觉输出轮廓的局部触觉输出653。触觉输出653的经修改的触觉输出轮廓在图5I1的中间部分的底部示出。在该示例中，触觉输出轮廓中的两个离散波形的幅值经修改(例如，幅值增大50％)以克服壳体643的阻尼效应并且在输入区域上方的间隙材料上产生移动，该移动基本上类似于在不存在间隙材料643的情况下由触觉输出649引起的输入区域的移动。
在图5I1的右侧部分中，设备100(例如，包括输入区域455)被壳体645覆盖。设备检测由用户在输入区域455上提供的相同按压输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的按压输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料二)，设备生成具有经修改的触觉输出轮廓的局部触觉输出657。触觉输出657的经修改的触觉输出轮廓在图5I1的右侧部分的底部示出。在该示例中，触觉输出轮廓中的两个离散波形的幅值经修改(例如，幅值增大50％)以克服壳体645的阻尼效应。此外，通过在经修改的触觉输出轮廓中添加从原始波形略微偏移的时间来生成第二波形，以克服壳体的蓬松材料的模糊效果。基于经修改的触觉输出轮廓，触觉输出657在输入区域上方的间隙材料上产生移动，该移动基本上类似于在不存在间隙材料的情况下由触觉输出649引起的输入区域的移动。
在图5I2所示的示例中，间隙材料包在用户的手指周围，而不是包在设备周围。在图5I2的左侧部分中，在用户的手指和设备的输入区域之间不存在间隙材料。当设备检测到接触665进行的强度高于提示强度阈值的按压输入时，设备生成具有与图5I1中的触觉输出649相同的触觉输出轮廓的触觉输出667。在图5I2的中间部分中，在壳体643中使用的相同间隙材料包在用户的手指周围。因此，当设备检测到由接触669进行的通过间隙材料的相同按压输入时，设备生成具有经修改的触觉输出轮廓的触觉输出671，以补偿由于间隙材料的存在而引起的触觉输出的衰减和失真。在该示例中，经修改的触觉输出轮廓与当在壳体643中使用相同的间隙材料时生成的触觉输出653的触觉输出轮廓相同。在图5I2的右侧部分中，在壳体645中使用的相同间隙材料包在用户的手指周围。因此，当设备检测到由接触673进行的通过间隙材料的相同按压输入时，设备生成具有经修改的触觉输出轮廓的触觉输出675，以补偿由于间隙材料的存在而引起的触觉输出的衰减和失真。在该示例中，经修改的触觉输出轮廓与当在壳体645中使用相同的间隙材料时生成的触觉输出657的触觉输出轮廓相同。在一些实施例中，触觉输出的触觉输出轮廓任选地被不同地修改，具体取决于间隙材料是用于包在设备周围的壳体中还是用于包在用户手指周围的手套中。
在图5I3中，在输入区域455上检测强度超过轻按压强度阈值ITL的按压输入，并且设备响应于检测到轻按压输入而生成局部触觉输出。在图5I3的左侧部分中，触觉输出679生成。触觉输出679的触觉输出轮廓(例如，两个离散波形的序列(例如，较强波形之后是较弱波形))在图5I3的左侧部分的底部提供。响应于该轻按压输入，设备任选地结合在输入区域455生成局部触觉输出来执行操作(例如，修改唤醒屏幕用户界面上的通知的已读/未读状态，如图5A5所示，修改设备参数的值，如图5B3和图5B7所示，切换到不同的参数控件，如图5B11所示，完全显示菜单，如图5C6和图5D17所示，激活视频捕获模式，如图5F3所示，激活数字助理，如图5H3所示)。
在图5I3的中间部分中，设备100(例如，包括输入区域455)被壳体643覆盖。设备检测由用户在输入区域455上提供的相同轻按压输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的轻按压输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料一)，设备生成具有经修改的触觉输出轮廓的局部触觉输出683。触觉输出683的经修改的触觉输出轮廓在图5I3的中间部分的底部示出。在该示例中，触觉输出轮廓中的两个离散波形的幅值被不同地修改(例如，波形一的幅值增大50％，波形二的幅值增大40％)以克服壳体643的阻尼效应并且在输入区域上方的间隙材料上产生移动，该移动基本上类似于在存在间隙材料的情况下由触觉输出679引起的输入区域的移动。
在图5I3的右侧部分中，设备100(例如，包括输入区域455)被壳体645覆盖。设备检测由用户在输入区域455上提供的相同按压输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的按压输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料二)，设备生成具有经修改的触觉输出轮廓的局部触觉输出687。触觉输出687的经修改的触觉输出轮廓在图5I3的右侧部分的底部示出。在该示例中，触觉输出轮廓中的两个离散波形的幅值被不同地修改(例如，第一个波形的幅值被修改45％，并且第二个波形的幅值均增大40％)以克服壳体645的阻尼效应。此外，通过在经修改的触觉输出轮廓中添加从原始波形略微偏移的时间来生成第二波形，以克服壳体的蓬松材料的模糊效果。基于经修改的触觉输出轮廓，触觉输出687在输入区域上方的间隙材料上产生移动，该移动基本上类似于在不存在间隙材料的情况下由触觉输出679引起的输入区域的移动。
在一些实施例中，触觉输出的触觉输出轮廓任选地被以相同方式修改而无论间隙材料是用于包在设备周围的壳体中还是用于包在用户手指周围的手套中。在一些实施例中，触觉输出的触觉输出轮廓任选地被不同地修改，具体取决于间隙材料是用于包在设备周围的壳体中还是用于包在用户手指周围的手套中。
在图5I4中，在输入区域455上检测强度超过深按压强度阈值ITD的按压输入，并且设备响应于检测到深按压输入而生成局部触觉输出。在图5I4的左侧部分中，触觉输出693生成。触觉输出693的触觉输出轮廓(例如，中间具有较强区段而且侧接两个较弱区段的离散波形)在图5I4的左侧部分的底部提供。响应于该深按压输入，设备任选地结合在输入区域455生成局部触觉输出来执行操作(例如，在唤醒屏幕用户界面上显示通知的扩展版本，如图5A6所示，重置设备参数，如图5B9所示，开始发起紧急呼叫的警告时间段，如图5G3所示)。
在图5I4的中间部分中，设备100(例如，包括输入区域455)被壳体643覆盖。设备检测由用户在输入区域455上提供的相同深按压输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的深按压输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料一)，设备生成具有经修改的触觉输出轮廓的局部触觉输出697。触觉输出697的经修改的触觉输出轮廓在图5I4的中间部分的底部示出。在该示例中，触觉输出轮廓中的波形的幅值和形状经修改(例如，波形的中心部分的幅值增大60％，波形的侧部的幅值增大40％，并且第二波形被添加到原始波形的中心部分并且从原始波形略微偏移)以克服壳体643的阻尼效应并且在输入区域上方的间隙材料上产生移动，该移动基本上类似于在不存在间隙材料的情况下由触觉输出697引起的输入区域的移动。
在图5I4的右侧部分中，设备100(例如，包括输入区域455)被壳体645覆盖。设备检测由用户在输入区域455上提供的相同深按压输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的深按压输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料二)，设备生成具有经修改的触觉输出轮廓的局部触觉输出701。触觉输出701的经修改的触觉输出轮廓在图5I4的右侧部分的底部示出。在该示例中，触觉输出轮廓中的波形的幅值和形状经修改(例如，第一个波形的幅值增大40％，并且第二哥波形的幅值增大60％，并且第二波形被添加到整个原始波形并且从原始波形略微偏移)以克服壳体645的阻尼效应。基于经修改的触觉输出轮廓，触觉输出687在输入区域上方的间隙材料上产生移动，该移动基本上类似于在不存在间隙材料的情况下由触觉输出693引起的输入区域的移动。
在一些实施例中，触觉输出的触觉输出轮廓任选地被以相同方式修改而无论间隙材料是用于包在设备周围的壳体中还是用于包在用户手指周围的手套中。在一些实施例中，触觉输出的触觉输出轮廓任选地被不同地修改，具体取决于间隙材料是用于包在设备周围的壳体中还是用于包在用户手指周围的手套中。
在图5I5中，在输入区域455上检测到强度超过轻按压强度阈值ITL并且持续时间至少T的长按压输入，并且设备响应于检测到该长按压输入而生成局部触觉输出。在图5I5的左侧部分中，触觉输出705生成。触觉输出705的触觉输出轮廓(例如，三个离散波形的序列)在图5I5的左侧部分的底部提供。响应于该长按压输入，设备任选地结合在输入区域455生成局部触觉输出来执行操作(例如，激活数字助理，如图5H3所示)。
在图5I5的中间部分中，设备100(例如，包括输入区域455)被壳体643覆盖。设备检测由用户在输入区域455上提供的相同长按压输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的长按压输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料一)，设备生成具有经修改的触觉输出轮廓的局部触觉输出709。触觉输出709的经修改的触觉输出轮廓在图5I5的中间部分的底部示出。在该示例中，触觉输出轮廓中的波形的幅值经修改(例如，三个离散波形的幅值增大50％)以克服壳体643的阻尼效应并且在输入区域上方的间隙材料上产生移动，该移动基本上类似于在不存在间隙材料的情况下由触觉输出705引起的输入区域的移动。
在图5I5的右侧部分中，设备100(例如，包括输入区域455)被壳体645覆盖。设备检测由用户在输入区域455上提供的相同长按压输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的长按压输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料二)，设备生成具有经修改的触觉输出轮廓的局部触觉输出713。触觉输出713的经修改的触觉输出轮廓在图5I5的右侧部分的底部示出。在该示例中，触觉输出轮廓中的波形的幅值和形状经修改(例如，三个离散波形的幅值增大50％)以克服壳体645的阻尼效应。此外，将具有较低幅值(例如，30％强度)的三个离散波形的第二序列添加到原始触觉输出轮廓中的原始序列。基于经修改的触觉输出轮廓，触觉输出713在输入区域上方的间隙材料上产生移动，该移动基本上类似于在不存在间隙材料的情况下由触觉输出705引起的输入区域的移动。
在一些实施例中，触觉输出的触觉输出轮廓任选地被以相同方式修改而无论间隙材料是用于包在设备周围的壳体中还是用于包在用户手指周围的手套中。在一些实施例中，触觉输出的触觉输出轮廓任选地被不同地修改，具体取决于间隙材料是用于包在设备周围的壳体中还是用于包在用户手指周围的手套中。
在图5I6中，在输入区域455上检测到强度低于提示强度阈值ITH并且持续时间至少T的长手指搁置输入，并且设备响应于检测到该长手指搁置输入而生成局部触觉输出。在图5I6的左侧部分中，触觉输出717生成。触觉输出717的触觉输出轮廓(例如，具有增大的幅值的三个离散波形的序列)在图5I6的左侧部分的底部提供。响应于该长手指搁置输入，设备任选地结合在输入区域455生成局部触觉输出来执行操作(例如，检查未读通知的存在/不存在而不修改通知的状态，如图5A3所示)。
在图5I6的中间部分中，设备100(例如，包括输入区域455)被壳体643覆盖。设备检测由用户在输入区域455上提供的相同长手指搁置输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的长手指搁置输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料一)，设备生成具有经修改的触觉输出轮廓的局部触觉输出721。触觉输出721的经修改的触觉输出轮廓在图5I6的中间部分的底部示出。在该示例中，触觉输出轮廓中的波形的幅值被修改不同的量(例如，这三个离散波形的幅值分别增大40％、50％和60％)以克服壳体643的阻尼效应并且在输入区域上方的间隙材料上产生移动，该移动基本上类似于在不存在间隙材料的情况下由触觉输出717引起的输入区域的移动。
在图5I6的右侧部分中，设备100(例如，包括输入区域455)被壳体645覆盖。设备检测由用户在输入区域455上提供的相同长手指搁置输入(例如，任选地确定该输入的强度，同时考虑用户的手指和输入区域455之间的间隙材料的存在)。响应于检测到相同的长手指搁置输入，无论间隙材料是否存在，设备都执行相同的操作。但是根据确定存在间隙材料(例如，材料二)，设备生成具有经修改的触觉输出轮廓的局部触觉输出725。触觉输出725的经修改的触觉输出轮廓在图5I6的右侧部分的底部示出。在该示例中，触觉输出轮廓中的波形的幅值和形状经修改(例如，这三个离散波形的幅值分别增大50％、60％和50％，并且波形的频率加倍)以克服壳体645的阻尼效果。基于经修改的触觉输出轮廓，触觉输出725在输入区域上方的间隙材料上产生移动，该移动基本上类似于在不存在间隙材料的情况下由触觉输出717引起的输入区域的移动。
在一些实施例中，触觉输出的触觉输出轮廓任选地被以相同方式修改而无论间隙材料是用于包在设备周围的壳体中还是用于包在用户手指周围的手套中。在一些实施例中，触觉输出的触觉输出轮廓任选地被不同地修改，具体取决于间隙材料是用于包在设备周围的壳体中还是用于包在用户手指周围的手套中。
在上述示例中，在输入区域上检测到的输入不包括接触的移动。然而，在各种实施例中，当在用户的手指和设备的输入区域之间存在间隙材料时，并且设备响应于在输入区域上检测到的轻扫输入(例如，在输入区域上沿水平方向，或在沿着输入区域的垂直方向上)，设备对在输入区域生成的局部触觉输出的触觉输出轮廓进行对应的修改。基于原始触觉输出轮廓的特征和间隙材料的特征来确定修改，使得由经修改的触觉输出生成的间隙材料的移动(例如，间隙材料的一部分接近或邻近输入区域)基本上类似于在不存在间隙材料的情况下由原始触觉输出生成的设备上的输入区域的移动(例如，经修改的触觉输出通过间隙材料在手指上产生与由直接在手指上的原始触觉输出所产生的类似的触感(例如，如通过振动强度、频率等所测量的))。
图6A至6D是示出了根据一些实施例的查询和修改设备属性的方法6000的流程图。
方法6000提供了供用户通过触摸输入就设备的预设属性的当前状态查询设备而不改变设备的属性，同时保留通过继续当前输入来改变属性的选项的机制。具体地讲，设备生成输出以指示预设属性的当前状态(例如，当前音量水平、铃声装置是否打开、是否存在未读通知、等)而不响应于满足设备查询标准时设备的显示器外输入区域(例如，侧按钮区域)上的触摸输入的初始部分而改变该属性的当前状态，并且当该输入的继续满足设备调节标准时继续改变预设属性的当前状态。为用户提供用于获得设备属性的当前状态而不改变设备属性，并允许用户在看到设备属性的当前状态之后通过继续相同的输入(例如，随着接触强度的增大)直接改变设备属性的轻量机构增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供实现预期成果所需的输入并减少操作设备/与设备交互时的用户错误，以及通过减少用于执行动作的步骤数)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。在一些实施例中，设备属性的当前状态经由触觉输出提供，而无需不必要地使设备的显示器和/或其他功能上电，这在用户频繁检查设备属性的当前状态而不旨在改变设备属性时进一步减少了电力使用并且改善了设备的电池寿命。
方法6000在具有显示器(例如，设置在设备的前侧上的显示器)以及与该显示器分开的第一输入区域(例如，输入区域455、456或457)(例如，可压低的按钮、固态按钮或代替按钮的被配置为响应于输入的触敏区域)的电子设备(例如，图3的设备300，或图1A和图4A的便携式多功能设备100)处执行。在一些实施例中，该设备是具有平坦的前侧(例如，显示器侧)、平坦的背侧(例如，背侧)和通过锋利边缘或倒圆边缘接合前侧和背侧的一个或多个平坦的、倾斜的或弯曲的周边侧(例如，通过锋利直边缘接合的四个窄平坦面、通过倒圆边缘接合的四个窄平坦面，或连续曲面)。在一些实施例中，显示器是触摸屏显示器，并且触敏表面在显示器上或与显示器集成。在一些实施例中，显示器与触敏表面是分开的。在一些实施例中，第一输入区域是例如基于电容式和/或电阻式触摸感测技术来检测与触敏表面的接触的强度的触敏表面。在一些实施例中，第一输入区域是基于耦接到表面的力、压力和/或振动传感器来检测输入对象(例如，手指)的接触和/或按压的存在的触敏表面。在一些实施例中，第一输入区域是与显示器(例如，触摸屏显示器)共面的表面。在一些实施例中，第一输入区域是设置在设备的与设备的前侧相邻的周边侧(例如，左边缘、右边缘、顶部边缘或底部边缘，或者沿着那些边缘中的两个或更多个边缘)上的表面(例如，突起区域、凹入区域或与周围表面齐平的区域)。在一些实施例中，电子设备还包括用于检测与设备的显示器的接触的存在和/或强度的一个或多个第一传感器(例如，用于检测触摸屏显示器上的接触的强度的电容传感器和/或电阻传感器)，以及用于检测与设备的第一输入区域的接触的存在和/或强度的一个或多个第二传感器(例如，用于检测与第一输入区域(例如，侧“按钮”区域)的接触的存在、激活和任选地强度的电容传感器、电阻传感器、压力传感器、力传感器和/或振动传感器))。在一些实施例中，设备还包括用于生成触觉输出的一个或多个触觉输出发生器(例如，用于在第一输入区域生成局部触觉输出的按钮致动器，和/或用于生成整个设备触觉输出的一个或多个内部致动器等)。在一些实施例中，方法6000由存储在计算机可读存储介质(非暂态计算机可读存储介质)中并由电子设备的一个或多个处理器诸如设备100的一个或多个处理器122(图1A和图4A)执行的指令来管理。为了便于解释，以下介绍了由设备100执行的方法6000。方法6000中的一些操作任选地被组合，并且/或者一些操作的次序任选地被改变。
根据方法6000并且参考图6A，设备检测(6002)第一输入区域上的第一输入的第一部分(例如，检测第一输入区域上的接触(例如，检测设备的触敏侧按钮上的接触的触摸按压))。
根据方法6000并且参考图6A，响应于检测到第一输入的第一部分(6004)：根据确定第一输入的第一部分满足第一标准(例如，设备查询标准)，其中第一标准包括当在第一输入区域上检测到第一输入而第一输入的特征强度未增大到高于第一强度阈值时满足的一组标准(例如，根据检测到接触的特征强度高于第一强度阈值(例如接触检测强度阈值，或高于接触检测强度阈值并且低于深按压强度阈值的轻按压强度阈值(或按钮激活强度阈值)))，设备提供指示设备的第一属性的当前状态(例如，当前音量水平、铃声装置是否打开、是否存在未读通知等)的第一输出(例如，在显示器上显示用户界面对象(例如，通知、音量调节器等)或提供触觉输出以指示新通知的可用性而不显示通知或激活显示器)而不改变设备的第一属性。例如，这在图5A1至图5A3中示出，其中设备响应于接触506进行的输入来提供触觉输出508以指示存在未读通知。例如，这在图5A4中进一步示出，其中设备响应于接触506进行的输入提供触觉输出508并显示唤醒屏幕用户界面501的阴影版本以指示未读通知的存在。例如，这在图5B2中进一步示出，其中设备显示控件520和指示符522以指示设备的当前音量水平。
在一些实施例中，响应于检测到接触进行的第一输入的第一部分并且根据确定接触进行的第一输入的第一部分不满足第一标准，设备放弃提供第一输出。例如，当用户将手指搁置在侧按钮上或轻轻按在侧按钮上时，显示器亮起，并且显示对应于设备的属性的用户界面对象，例如音量控件、铃声装置控件或未读通知的通知摘要。设备的属性具有设备可根据自动化设备调节、由外部事件触发和/或根据用户先前的手动调节而采取的多种可能状态(例如，离散配置、值和/或状态或连续范围的值)。在一些实施例中，用户界面对象任选地为可对用户输入作出反应的交互式控件对象，例如，用于调节用户界面对象上所示的滑块或切换按钮的轻扫输入或按压输入。在一些实施例中，用户界面对象仅显示属性的状态的视觉指示。在一些实施例中，除了属性的状态的视觉指示之外或代替属性的状态的视觉指示，设备使用位于侧按钮处的局部触觉输出发生器在侧按钮处输出局部触觉输出，或者使用位于设备内部的内部致动器输出整个设备触觉输出。当第一输出指示设备的第一属性的当前状态时，第一属性的当前状态未改变，例如，当响应于输入的第一部分初始显示音量控件时，音量控件示出当前音量水平而不改变当前音量水平；当显示铃声装置控件时，不改变当前铃声装置开/关设置；当最初显示通知摘要时，其示出未读通知的数量以及任选地通知的发送者而不含通知的内容；当生成触觉输出以指示存在一个或多个未读通知时，不改变未读通知的已读/未读状态，并且不改变设备处未读通知的数量。在一些实施例中，当设备具有至少一个未读通知时，设备响应于输入的第一部分生成具有第一触觉输出模式(例如，具有对应于未读通知总数的触觉输出轮廓的两次蜂鸣或一次蜂鸣)的触觉输出，并且当设备没有未读通知时，设备不生成触觉输出，或者生成具有第二触觉输出模式(例如，单次蜂鸣或较轻的蜂鸣)的触觉输出。在一些实施例中，如果在检测到输入的第一部分时显示器关闭，则生成触觉输出而不激活显示器。
根据方法6000并且参考图6A，设备检测(6006)输入的第二部分，包括检测第一输入的强度增大(并且任选地，包括检测接触的抬离)。根据方法6000并且参考图6A，响应于检测到第一输入的第二部分(6008)：根据确定在检测到第一输入的结束之前第一输入的第二部分满足第二标准(例如，设备调节标准)，其中第二标准包括当第一输入的特征强度增大到高于第一强度阈值时满足的一组标准(例如，在呈现第一输出之后和/或在继续显示第一输出时设备检测到第一输入的特征强度增大到高于第一强度阈值时满足第二标准)，设备执行改变设备的第一属性的第一操作(例如，调节当前音量、切换铃声装置开/关控件或打开显示器以示出未读通知的内容(并且将未读通知中的至少一个或所有未读通知的已读/未读状态从“未读”改变为“已读”或将设备处未读通知的存在从“是”改变为“否”)等)；并且根据确定第一输入的第二部分不满足第二标准(例如，在第一输入的结束之前检测到接触的特征强度保持低于第一强度阈值时，第一输入不满足第二标准)，设备放弃执行改变设备的第一属性的第一操作(并且任选地，如果此时仍然提供第一输出，则停止提供第一输出)。这在图5A5中示出，例如，其中当接触506进行的按压输入的强度超过轻按压强度阈值ITL时，设备在唤醒屏幕用户界面上显示未读通知，并且将该通知的未读状态改变为已读。这在图5B3中进一步示出，其中当接触进行的按压输入的强度超过例如轻按压强度阈值ITL时，设备增大音量水平。在一些实施例中，第二标准(例如，设备调节标准)不基于接触的强度。例如，在一些实施例中，当在第一输入区域上检测到轻按压输入时，或者当在第一输入区上检测到轻击输入时，当在第一输入区域上检测到接触的存在时满足第一标准，并且当在第一输入区域上检测到触摸保持输入时满足第二标准。在一些实施例中，在第一输入的第一部分满足第一标准之后并且任选地在第一输出仍然由设备提供时检测到的单独输入满足第二标准。例如，当轻击输入或轻按压输入满足第一标准时，生成触觉输出以指示未读通知的存在而不将设备从显示器关闭状态切换到显示器开启状态，在该轻击输入或轻按压输入终止之后检测到的侧按钮上的触摸保持输入满足第二标准，并且使得设备打开显示器并显示未读通知。
根据方法6000并且参考图6A，提供指示设备的第一属性的当前状态的第一输出而不改变设备的属性包括(6010)：显示具有第一视觉特征(例如，长度、宽度、滑块或拨号盘控件上的指示符位置、切换控件上的指示符位置等)的第一用户界面对象(例如，音量滑块控件、铃声装置切换控件、亮度滑块控件)，该第一视觉特征对应于第一属性的当前状态(例如，当前音量水平、当前亮度水平、当前铃声装置开/关设置等)。这在图5A4中示出，其中未读通知的存在由变暗的唤醒屏幕用户界面上的通知的存在示出。例如，这在图5B2中进一步示出，其中控件520和指示符522指示设备的当前音量水平。在一些实施例中，当第一属性的当前状态是第一属性的多个可能状态中的第一状态时，第一视觉特征具有第一值，并且当第一属性的当前状态是该多个可能状态中的不同于第一状态的第二状态时，第一视觉特征具有第二值。在一些实施例中，显示器在检测到第一输入之前关闭，并且第一输入的第一部分使得屏幕从显示器关闭状态切换到显示器开启状态，并且第一用户界面对象出现在显示器上(例如，出现在锁定屏幕或唤醒屏幕或变暗或模糊的屏幕上方，而没有其他用户界面对象)。在一些实施例中，当第一用户界面出现在变暗或模糊的用户界面的顶部时，显示器上显示的当前用户界面变暗或模糊。显示具有对应于第一属性的当前状态的第一视觉特征的用户界面对象增强了设备的可操作性(例如，通过提供视觉反馈以减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法6000并且参考图6B，提供指示设备的第一属性的当前状态的第一输出而不改变设备的属性包括(6012)：生成具有第一触觉输出轮廓(例如，幅值、频率、调制频率、输出脉冲串的数量、伴随音频输出的特征等)的第一触觉输出(例如，图5A3和图5A4中的局部触觉输出508)(例如，由设备的内部致动器产生的整个设备触觉输出，或由位于设备的侧按钮上/处的触觉输出发生器(例如，振荡器)产生的局部触觉输出)，第一触觉输出轮廓对应于第一属性的当前状态(例如，电池电量(例如，低、中、高)、未读通知的存在(存在/无，或未读通知的计数)、未读语音邮件的存在(例如，存在/无，或未读语音邮件的计数)、铃声装置开/关状态、静音开关开/关状态等)。在一些实施例中，设备放弃输出针对第一属性的多个可能状态中的预定义状态的第一触觉输出(例如，在当前电池电量较高时，或者在当前时间没有未读通知时)。在一些实施例中，第一属性的多个可能状态中的每个状态具有对应的触觉输出，该对应的触觉输出具有相应触觉输出轮廓。在一些实施例中，第一触觉输出与第一用户界面对象在显示器上的显示同步。生成具有对应于第一属性的当前状态的触觉输出轮廓的触觉输出提供了关于在不存在音频和视觉反馈或除音频和视觉反馈之外的设备状态的附加信息。提供改进的反馈(例如，利用第一触觉输出)增强了设备的可操作性(例如，通过减少操作设备/与设备进行交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法6000并且参考图6B，提供第一触觉输出包括(6014)：根据确定当检测到第一输入的第一部分时显示器不活动，生成第一触觉输出而不激活显示器(例如，在图5A3中，当提供触觉输出508时不激活显示器)。在一些实施例中，当不存在未读通知时，设备输出预定义的触觉输出(例如，“失效”蜂鸣)，并且当检测到第一输入的第一部分时，如果显示器尚未活动，则不打开显示器。在一些实施例中，根据确定存在至少一个未读通知，设备激活显示器以显示指示未读通知的计数的徽章，同时生成第一触觉输出以指示设备处未读通知的存在。使用触觉输出提供设备属性信息而不打开显示器减少了电力使用并且延长了设备的电池寿命(例如，通过消除每当用户检查设备属性时对显示器加电的需要)并且增强了设备的可操作性(例如，通过减少由所显示的信息引起的视觉干扰，并且通过放弃打开显示器来改善用户隐私)。
根据方法6000并且参考图6B，设备包括(6016)局部地驻留在第一输入区域并且在第一输入区域提供包括第一触觉输出的局部触觉输出的第一触觉输出发生器(例如，围绕第一输入区域下方的固定枢轴来回摇摆的表面振荡器，或者能够生成特别指向第一输入区域的触觉输出的其他触觉输出发生器)。在一些实施例中，设备还包括位于设备内并且提供在设备上的许多不同位置同时产生触觉输出的整个设备触觉输出的第二触觉输出发生器(例如，围绕中心搁置位置来回移动的质块)，诸如耦接到设备的外壳的触觉输出发生器。在一些实施例中，内部触觉输出发生器提供由握持设备的用户的手感测的整个设备振动。在一些实施例中，由内部触觉输出发生器生成的整个设备触觉输出对应于响应于在触摸屏显示器上检测到的触摸输入而不是在侧按钮上检测到的输入而显示的视觉反馈。在一些实施例中，第一触觉输出发生器在侧按钮区域提供局部振动，而不是在设备处作为整体提供。局部振动在设备上的不同位置处具有变化的幅值，其中在操作侧按钮区域时用户的手指通常将搁置的侧按钮区域上具有较大的幅值，并且在侧按钮区域之外的当操作侧按钮区域时用户的手通常将不搁置的其他位置处具有较小的幅值。在一些实施例中，由第一触觉输出发生器生成的局部触觉输出对应于响应于在第一输入区域(例如，侧按钮)上检测到的输入而显示的视觉反馈。利用局部触觉输出发生器在第一输入区域生成局部触觉输出改善了用户的输入与用户所接收的触觉反馈之间的位置相关性，使得反馈对用户而言更即时而且更直观。提供改进的反馈增强了设备的可操作性(例如，通过减少操作设备/与设备进行交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法6000并且参考图6B，生成具有与第一属性的当前状态对应的第一触觉输出轮廓的第一触觉输出包括(6018)：根据确定第一属性的当前状态是第一属性的多个可能状态中的第一状态(例如，正常电池电量、响铃装置关状态或非紧急通知存在、第一数量的未读通知等)，生成具有第一幅值或第一模式(例如，第一幅值和/或第一频率，或第一数量的重复输出)的第一触觉输出；并且根据确定第一属性的当前状态是该多个可能状态中的不同于第一状态的第二状态(例如，低电池电量、铃声装置开状态、紧急通知存在、第二数量的未读通知等)，生成具有不同于第一幅值或第一模式的第二幅值或第二模式(例如，比第一幅值更高的幅值和/或比第一频率更高的频率，或第二数量的重复输出)的第一触觉输出。例如，触觉输出的幅值和/或间距随着第一属性的值(例如，未读通知或未读语音邮件的计数、未读消息的重要性、电池消耗水平等)的增大(或另选地，该值的减小)而增大。在另一个示例中，重复输出(蜂鸣)的数量对应于未读通知的数量。利用触觉输出的幅值或模式来传达第一属性的当前状态是向用户提供信息的快速而且直观的方式。提供改进的反馈增强了设备的可操作性(例如，通过减少操作设备/与设备进行交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法6000并且参考图6B，根据一个或多个电容触摸传感器的输出来检测(6020)第一输出的第一部分，并且第一强度阈值基于电容阈值(例如，与触摸下方的第一输入区域的阈值物理移动或变形相反)。利用电容触摸传感器来确定输入的强度并将电容阈值用作强度阈值增强了设备的可操作性(例如，通过经由软件手段使设备易于配置并且适应个体用户的使用习惯)，从而通过使用户能够更舒适、快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法6000并且参考图6C，根据一个或多个力传感器的输出来检测(6022)第一输出的第一部分，并且第一强度阈值基于力阈值(例如，与第一输入区域沿力输入的方向的阈值物理移动或变形相反)。利用力传感器来确定输入的强度并将力阈值用作强度阈值增强了设备的可操作性(例如，通过经由软件手段使设备易于配置并且适应个体用户的使用习惯)，从而通过使用户能够更舒适、快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法6000并且参考图6C，第一标准还包括(6024)当在第一输入区域上检测到第一输入超过阈值量的时间(例如，在第一输入区域上具有小于阈值量的移动)时满足的一组标准。使用时间阈值作为输入满足用于向设备查询设备属性的当前状态的标准的条件增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过避免意外触发设备的响应，并且通过减少在操作设备/与设备交互时的用户错误)，从而通过使用户能够更舒适、快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法6000并且参考图6C，检测第一输入的第二部分包括检测第一输入的终止(例如，包括检测接触从侧按钮的抬离(例如，接触的强度下降到预定义的接触检测阈值以下))，并且其中该方法包括(6026)：响应于检测到第一输入的终止并且根据确定在第一输入的终止之前第一输入的第二部分不满足第二标准：停止提供指示设备的第一属性的当前状态的第一输出。例如，提供第一输出包括在显示器上显示第一用户界面对象(例如，在首次打开显示器之后)，并且停止提供第一输出包括停止显示第一用户界面对象(并且，任选地，恢复在第一输入的第一部分之前显示的原始用户界面，或者如果显示器被打开，则关闭显示器)。当输入终止而不满足设备调节标准时自动停止提供指示第一属性的当前状态的输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法6000并且参考图6C，设备的第一属性包括(6028)在设备处未读通知的存在/不存在。提供指示第一属性的当前状态的输出而不改变设备的第一属性包括显示未读通知的指示符(例如，显示具有未读通知的数字计数的徽章，或者放弃显示该徽章，或者显示不同的指示符以指示在设备处不存在未读通知)。执行改变设备的第一属性的第一操作包括：显示未读通知中的至少一个未读通知的内容(例如，显示文本消息的完整内容的扩展通知)(例如，显示具有发送者姓名的未读通知的列表和来自通知的摘要或摘录)；并且改变未读通知中的至少一个未读通知的已读/未读状态(例如，从“未读”改变为“已读”)。例如，这在图5A1至图5A8中示出。在一些实施例中，提供指示第一属性的当前状态的输出而不改变设备的第一属性包括提供指示未读通知的存在/计数的触觉输出而不改变未读通知的已读/未读状态并且不激活设备的显示，并且执行第一操作包括激活显示器，显示来自未读通知中的至少一个未读通知的内容，以及改变未读通知中的至少一个未读通知的已读/未读状态。用于响应于输入的第一部分满足第一标准而显示存在/不存在未读通知的指示符而不改变通知的已读/未读属性，并且响应于输入的第二部分满足第二标准而显示内容并改变通知中的至少一个通知的已读/未读状态的启发法增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法6000并且参考图6D，设备的第一属性包括(6030)设备处的可调节控件(例如，音量设置、铃声装置开/关设置、静音/取消静音设置、亮度设置等)。提供指示第一属性的当前状态的输出而不改变设备的第一属性包括显示对应于可调节控件的控件对象，其中该控件对象包括可调节控件的当前值的指示符(例如，示出当前音量水平的音量滑块控件、示出铃声装置的当前开/关设置的铃声装置切换控件、示出控件的当前静音/取消静音状态的静音/取消静音切换控件、示出当前亮度水平的亮度拨盘控件等)。执行改变设备的第一属性的第一操作包括改变可调节控件的当前值。例如，这在图5B1至图5B7中示出。在一些实施例中，第一输入区域包括两个或更多个子区域，并且可调节控件的当前值的变化方向基于触摸这两个或更多个子区域中的哪个子区域。例如，如果触摸第一输入区域的上部，则值增大；并且如果触摸第一输入区域的下部，则值减小。用于响应于输入的第一部分满足第一标准而显示具有控件的当前值的指示符的控件对象而不改变控件的当前值，并且响应于输入的第二部分满足第二标准而改变控件的当前值的启发法增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
应当理解，图6A-图6D中的操作被描述的特定次序仅仅是示例性的，并非旨在指示所述次序是操作可被执行的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外，应当指出的是，本文相对于本文所述的其他方法(例如，方法7000、8000、9000、10000、11000和12000)描述的其他过程的细节同样以类似的方式适用于上文相对于图6A至图6D描述的方法6000。例如，上文参考方法6000所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文参考本文所述的其他方法(例如，方法7000、8000、9000、10000、11000和12000)所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的特征中的一者或多者。为了简明起见，此处不再重复这些细节。
图7A至7E是示出了根据一些实施例的呈现可回缩菜单并与之交互的方法7000的流程图。
方法7000涉及响应于在屏幕外输入区域上检测到的触摸输入的第一部分(例如，具有低强度)而显示具有多个可选选项(例如，菜单)的用户界面对象的前导(例如，视觉指示符)，并且一旦输入的强度已增大到高于强度阈值，则使用户界面对象以对应于在触摸输入的第二部分期间触摸输入的变化的强度的变化量显现。在强度达到强度阈值之前显示前导对象并且根据输入的变化的强度来显现变化量的用户界面对象增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供直接对应于用户的输入的强度的动态视觉反馈，以及帮助用户提供实现预期成果所需的输入并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
方法7000在具有显示器(例如，设置在设备的前侧上的显示器)以及与该显示器分开的第一输入区域(例如，输入区域455、456或457)(例如，可压低的按钮、固态按钮或代替按钮的被配置为响应于输入的触敏区域)的电子设备(例如，图3的设备300，或图1A和图4A的便携式多功能设备100)处执行。在一些实施例中，第一输入区域是例如基于电容式和/或电阻式触摸感测技术来检测与触敏表面的接触的强度的触敏表面。在一些实施例中，第一输入区域是基于耦接到表面的力、压力和/或振动传感器来检测输入对象(例如，手指)的接触和/或按压的存在的触敏表面。在一些实施例中，第一输入区域是与显示器(例如，触摸屏显示器)共面的表面。在一些实施例中，第一输入区域是设置在设备的与设备的前侧相邻的周边侧(例如，左边缘、右边缘、顶部边缘或底部边缘，或者沿着那些边缘中的两个或更多个边缘)上的表面(例如，突起区域、凹入区域或与周围表面齐平的区域)。在一些实施例中，电子设备还包括用于检测与设备的显示器的接触的存在和/或强度的一个或多个第一传感器(例如，用于检测触摸屏显示器上的接触的强度的电容传感器和/或电阻传感器)，以及用于检测与设备的第一输入区域的接触的存在和/或强度的一个或多个第二传感器(例如，用于检测与第一输入区域(例如，侧“按钮”区域)的接触的存在、激活和任选地强度的电容传感器、电阻传感器、压力传感器、力传感器和/或振动传感器))。在一些实施例中，设备还包括用于生成触觉输出的一个或多个触觉输出发生器(例如，用于在第一输入区域生成局部触觉输出的按钮致动器，和/或用于生成整个设备触觉输出的一个或多个内部致动器等)。
根据方法7000并且参考图7A，设备检测(7002)第一输入区域上的第一输入的第一部分(例如，检测第一输入区域上的接触(例如，检测设备的触敏侧按钮上的接触的触摸按压))。这在图5C2中示出，其中在输入区域455上检测到接触552进行的输入。这在图5D3中进一步示出，其中在输入区域455上检测到接触585进行的输入。
根据方法7000并且参考图7A，响应于检测到第一输入区域上的第一输入的第一部分：根据确定第一输入的第一部分满足第一标准(例如，预览显示标准)，其中第一标准包括当在第一输入区域上检测到第一输入而第一输入的特征强度未增大到高于第一强度阈值时满足的一组标准(例如，根据检测到接触的特征强度高于第一强度阈值(例如，接触检测强度阈值、高于接触检测强度阈值且低于深按压强度阈值(或按钮激活强度阈值)的轻按压强度阈值(或预览强度阈值)))，设备在显示器上显示(7004)包括一个或多个可选选项的用户界面对象(例如，具有两个或更多个可选选项的菜单、用于存储一个或多个复制的对象的剪贴板等)的前导对象(例如，图5C2中的前导对象554和图5D3中的前导对象583)(例如，不包括可选选项的预览或指示符)。在一些实施例中，响应于检测到第一输入的第一部分并且根据确定第一输入的第一部分不满足第一标准，设备放弃显示前导对象。在一些实施例中，显示器在检测到第一输入的第一部分之前关闭，并且响应于检测到第一输入的第一部分并且根据确定第一输入的第一部分满足第一标准而打开显示器。在一些实施例中，在显示器上显示唤醒屏幕用户界面或锁定屏幕用户界面时，检测到第一输入的第一部分。在一些实施例中，在显示器上显示主屏幕或跳板用户界面时，检测到第一输入的第一部分。主屏幕或跳板用户界面显示对应于安装在设备上的不同应用程序的应用程序启动图标。当主屏幕上的相应应用程序启动图标被激活(例如，通过轻击输入激活)时，设备启动对应于相应应用程序启动图标的应用程序。当设备的主按钮(例如，硬件、固态或虚拟主按钮)被激活(例如，通过按压输入激活)时，或者当检测到预定义的主手势(例如，从触摸屏的底部边缘开始的向上轻扫手势)时，主屏幕或跳板用户界面替换当前显示的用户界面。主屏幕或跳板用户界面任选地包括多个页面，每个页面包括安装在设备上的所有应用程序的相应子集的相应应用程序启动图标。在一些实施例中，除了主屏幕用户界面之外，设备还提供微型应用程序对象用户界面，该微型应用程序对象用户界面包括对应于安装在设备上的所有应用程序的选定子组的微型应用程序对象(例如，桌面小程序、插件)。不同于应用程序启动图标，微型应用程序对象各自提供其对应的完整应用程序中可用的内容和/或功能的子组，并且任选地在以预设方式(例如，通过轻击输入)激活时启动对应的完整应用程序。在一些实施例中，在显示器上显示应用程序的用户界面时，检测到第一输入的第一部分。在一些实施例中，无论当检测到第一输入的第一部分时在显示器上显示什么，前导对象都具有相同的外观。
根据方法7000并且参考图7A，当在显示器上显示前导对象(例如，图5C2中的前导对象554和图5D3中的前导对象583)时，设备检测(7006)到第一输入区域上的第一输入的第二部分(例如，图5C3至图5C4中接触552进行的输入，以及图5D4至图5D5中接触579进行的输入)，包括检测到第一输入的强度增大到高于第一强度阈值(例如，第一输入的第一部分和第二部分由第一输入区域上的相同接触提供，该接触在第一输入的整个第一部分和第二部分中保持)。
根据方法7000并且参考图7A，响应于在第一输入的第二部分期间检测到第一输入的强度增大，设备使用户界面对象在显示器上显现(7008)根据第一输入的当前强度而变化的量。例如，这在图5C3至图5C5和图5D4至图5D6中示出，其中菜单556和577显现根据输入区域455上的输入的当前强度而动态改变的相应量。在一些实施例中，随着接触强度在第一输入区域(例如，侧按钮)上增大，第一用户界面对象(例如，菜单、剪贴板)从显示器的与第一输入区域(例如，侧按钮)相邻的边缘逐渐滑动到显示器上。在一些实施例中，随着第一接触的强度在第一输入区域(例如，侧按钮)上增大，第一用户界面对象(例如，菜单或剪贴板)逐渐淡入到显示器上。在一些实施例中，用户界面对象在显示器上可见的量可随着接触的强度在达到比第一强度阈值大的第二强度阈值之前变化(例如，增大和/或减小)而变化。一旦接触的强度增大到高于第二强度阈值，用户界面对象就被完全显示。在一些实施例中，用户界面滑动到显示器上的方向与在第一输入的第二部分期间手指施加在第一输入区域上的力/压力的方向相同或平行。
根据方法7000并且参考图7A，在检测到第一输入的第二部分之后，设备检测(7010)到第一输入区域上的第一输入的第三部分，包括检测到第一输入的强度的继续增大(例如，当用户界面对象的一部分响应于第一输入的第二部分而显现时)。响应于检测到第一输入的强度继续增大：根据确定第一输入的第三部分满足第二标准，其中第二标准包括当在检测到第一输入的结束(例如，检测第一输入的结束包括检测释放输入，诸如接触从第一输入区域的抬离，或者检测接触的特征强度的减小，即减小到低于释放强度阈值)之前第一输入的特征强度增大到高于第二强度阈值时满足的一组标准，第二强度阈值大于第一强度阈值(例如，根据确定接触的特征强度增大到高于比第一强度阈值高的第二强度阈值，并且任选地，根据确定在检测到第一接触之后第一接触保持基本上静止(例如，具有小于阈值量的移动的触摸保持)超过阈值量的时间(例如，长按压时间阈值))：设备在显示器上显示包括一个或多个可选选项的用户界面对象(例如，当满足第二标准时菜单或剪贴板突然打开，并且在第一输入的强度减小并且第一输入最终终止之后保持以完全打开状态显示)。这在图5C6和图5D17中示出，其中当输入区域455上的输入的强度超过轻按压强度阈值时，菜单556和577完全打开并保持显示。在一些实施例中，根据确定第一输入的第三部分不满足第二标准(例如，根据确定在检测到第一输入的结束之前接触的特征强度保持低于第二强度阈值)，设备放弃完全显示用户界面对象(并且在第一输入终止时停止显示用户界面对象的前导对象和用户界面对象的任何当前显现的部分)。在输入的强度增大到高于第二强度阈值之后显示菜单增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少实现预期结果所需的输入数量)，此外，通过使用户能够更快速且有效地使用设备，减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7B，在检测到第一输入的第三部分之后，设备检测(7012)第一输入区域上的第一输入的第四部分，包括检测第一输入的强度减小(例如，检测第一输入的强度减小到或低于第一强度阈值或检测到接触的抬离)：根据确定在检测到第一输入的第四部分之前满足第二标准(例如，第一输入的第三部分满足第二标准)，设备保持用户界面对象的显示(例如，如图5D17所示)而不改变用户界面对象当前显示的量(例如，菜单或剪贴板保持完全打开)；并且根据确定在检测到第一输入的第四部分之前不满足第二标准(例如，第一输入的第三部分不满足第二标准)，设备根据第一输入的当前强度减少用户界面对象在显示器上显现的量(并且任选地，当第一输入的当前强度下降到低于第一强度阈值时，停止显示用户界面对象(例如，如图5D9所示))。根据输入的先前部分是否已满足第二标准，根据输入的强度减小来保持菜单的显示或减少菜单显现的量增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7B，响应于检测到第一输入的强度继续增大：根据确定第一输入的第三部分满足第二标准：设备生成(7014)第一触觉输出(例如，由设备的内部致动器产生的整个设备触觉输出，或由位于设备的侧按钮上/处的触觉输出发生器(例如，振荡器)产生的局部触觉输出)(例如，具有第一触觉输出轮廓(例如，幅值、频率、调制频率、输出脉冲串的数量、伴随音频输出的特征等)的触觉输出(例如，当满足第二标准时与用户界面对象的完整显示同步的触觉输出))。例如，这在图5C6和图5D17中示出，其中当菜单556和577响应于在输入区域455上检测到的轻按压输入而快速打开时，设备分别生成触觉输出566和553。响应于满足第二标准(还导致菜单的完全显示)而生成触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7B，设备包括(7016)第一触觉输出发生器，该第一触觉输出发生器局部地驻留在第一输入区域并且在第一输入区域提供包括第一触觉输出的局部触觉输出。例如，第一触觉输出发生器是围绕第一输入区域下方的固定枢轴来回摇摆的表面振荡器或能够生成特别指向第一输入区域的触觉输出的其他触觉输出发生器。在一些实施例中，设备还包括位于设备内并且在设备上的许多不同位置同时产生触觉输出的第二触觉输出发生器(例如，围绕中心搁置位置来回移动的质块)，诸如耦接到设备的外壳的触觉输出发生器。在一些实施例中，内部触觉输出发生器提供由握持设备的用户的手感测的整个设备振动。在一些实施例中，由内部触觉输出发生器生成的整个设备触觉输出对应于响应于在触摸屏显示器上检测到的触摸输入而不是在侧按钮上检测到的输入而显示的视觉反馈。在一些实施例中，第一触觉输出发生器在侧按钮区域提供局部振动，而不是在设备处作为整体提供。局部振动在设备上的不同位置处具有变化的幅值，其中在操作侧按钮区域时用户的手指通常将搁置的侧按钮区域上具有较大的幅值，并且在侧按钮区域之外的当操作侧按钮区域时用户的手通常将不搁置的其他位置处具有较小的幅值。在一些实施例中，由第一触觉输出发生器生成的局部触觉输出对应于响应于在第一输入区域(例如，侧按钮)上检测到的输入而显示的视觉反馈。响应于在第一输入区域上检测到的输入满足第二标准而在第一输入区域提供局部触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7B，第一触觉输出的生成与第一输入满足第二标准同步(7018)。将在第一输入区域生成局部触觉输出与在第一输入区域上检测到的输入满足第二标准同步增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7B，第一触觉输出的生成与用户界面对象在显示器上的初始完整显示同步(7020)。在输入满足第二标准之后将第一触觉输出的生成与用户界面对象在显示器上的完整显示同步增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7C，设备包括(7022)不同于第一输入区域的触敏表面(例如，触敏表面与触摸屏显示器中的显示器集成)。方法7000包括：当在显示器上显示包括一个或多个可选选项的用户界面对象时(例如，在用户界面对象在显示器上部分和/或完全显现时)，检测触敏表面上的第二输入(例如，与第一输入中在第一输入区域上的接触不同的接触进行的触摸输入)；并且响应于检测到第二输入：根据确定第二输入满足选择标准(例如，第一可选选项上的轻击输入满足该选择标准)，选择第一可选选项(例如，通过相对于用户界面对象中的其他可选选项突出显示第一可选选项来在视觉上指示对第一可选选项的选择)。这在图5D13中示出，其中由接触563选择缩略图571。此外，菜单556中的选项可由轻击输入来选择。在响应于在屏幕外输入区域上检测到的输入而显示菜单之后，使用在触敏表面(例如，触摸屏)上检测到的另一输入来选择该菜单上的图标。允许使用不同于输入区域的触敏表面来选择菜单上的可选选项增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过允许用户利用多个输入接口与设备进行交互(例如，不将设备在两只手之间变换位置或不调节手柄)并减少操作设备/与设备进行交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7C，响应于检测到第二输入：根据确定第二输入满足选择确认标准(例如，检测第二输入还包括检测第二输入中的接触从触敏表面(例如，触摸屏显示器)上对应于第一可选选项的位置抬离)，设备执行(7024)对应于第一可选选项的第一操作。例如，这在图5C8和图5C9中示出，其中菜单556中的免打扰功能由选项558上的轻击输入来激活。在一些实施例中，第一可选选项上的轻击输入相对于第一可选选项满足选择确认标准。又如，跨多个可选选项的轻扫输入改变当前可选选项，并且在接触从触摸屏显示器抬离时激活最终选择的选项。在一些实施例中，用户界面对象是支付卡的列表，并且当第一支付卡被选择时该轻击支付卡列表中的第一支付卡或抬离使得第一支付卡被选择用于支付交易。又如，用户界面对象是电源相关功能的菜单，包括关机、重启、睡眠、关闭显示器、打开低功率模式等，并且在选择第一电源相关功能时轻击菜单中的第一电源相关功能或抬离使得对应的电源相关功能被打开。在选择选项的输入抬离之后执行对应于所选择的选项的操作增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7C，响应于检测到第二输入：根据确定第二输入满足拖动标准(例如，选择第一可选选项，然后由第一可选选项上的轻击保持输入移动第一可选选项，然后拖动输入，由此满足拖动标准)，设备在用户界面对象之外(例如，在显示器上的与对应于触敏表面上的接触的当前位置的位置处)显示(7026)第一可选选项的表示。例如，这在图5D13至图5D15中示出，其中图像571被从菜单577拖动并放置到用户界面567中。在一些实施例中，用户界面对象是视觉效果或滤镜的列表，并且将第一视觉效果或滤镜从用户界面对象拖离并到达用户界面的该用户界面对象之外的部分显示该视觉效果或滤镜的效果的预览(例如，当前显示的图像上的饱和度滤镜的预览)，或者将该视觉效果或滤镜应用于所显示图像的一部分(例如，放大镜对象放大所显示图像的对应于接触在显示器上的位置的部分，或者模糊对象模糊所显示图像的对应于接触在显示器上的位置的部分)。又如，第一可选选项的表示是插入光标，如果检测到与触摸屏的接触的抬离，则该插入光标指示将插入第一可选选项的位置。根据确定选择选项的输入也满足拖动标准而将所选择的选项拖动到用户界面对象之外增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7C，响应于检测到第二输入：根据确定第二输入满足放置标准(例如，在第一可选选项上的轻击保持输入随后是拖动输入之后检测到的接触的释放满足放置标准)，设备在用户界面对象之外显示(7028)第一可选选项的副本。例如，这在图5D13至图5D15中示出，其中图像571被从菜单577拖动并放置到用户界面567中。在一些实施例中，用户界面对象是包括一个或多个复制的对象(例如，图像、链接、文本等)的剪贴板。当由触摸保持输入以及随后的拖动输入将第一对象拖动到用户界面对象之外时，在用户界面上示出指示第一对象将被插入的位置的插入光标或图标，并且当检测到接触的抬离并且满足放置标准时，在用户界面中的由插入光标或图标指示的最终位置显示第一对象的副本。在根据确定选择选项的输入也满足拖动标准而将所选择的选项拖动到用户界面对象之外后，根据确定输入也满足放置标准，将所选择的选项(例如，图像或项目)的副本放置在用户界面对象之外的位置处。在输入满足放置标准时放置所选择的选项增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的用户输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7C，在用户界面对象在显示器上部分地显现而第一输入不满足第二标准时检测到(7030)第二输入。这在图5D13中示出，其中在菜单577完全打开之前选择图像563。在一些实施例中，该菜单中的对象在菜单完全打开之前是可选择的(例如，当该菜单仅部分地位于显示器上时，用户可从该菜单中选择或拖动对象)。在一些实施例中，该菜单中的对象在菜单完全打开之前不可选择。例如，对于剪贴板，对象在剪贴板完全打开之前不可选择，因为用户需要能够在做出正确选择之前完全看到所存储的对象。相比之下，对于电源相关功能的菜单，这些功能在该菜单完全打开之前是可选择的，因为该菜单是相对固定的并且用户熟悉这些功能。使可选选项在用户界面对象完全显现之前可选择增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的时间和用户输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7D，当在显示器上显示包括一个或多个可选选项的用户界面对象时(例如，当用户界面对象在显示器上部分地和/或完全显现时)，设备检测(7032)第一输入区域上的第三输入(例如，不同于第一输入中在第一输入区域上的接触的接触进行的触摸输入，或作为与第一输入中在第一输入区域上的接触相同的连续接触的接触进行的触摸输入)，其中第三输入包括接触在第一输入区域的移动(例如，在沿着第一输入区域的纵向方向的方向上的移动(例如，垂直向上或向下))。响应于检测到第三输入，设备根据第三输入中的接触的移动而使选择指示符(例如，图5C10至图5C12中的选择指示符568)滚动通过显示器上的一个或多个可选选项(例如，当该移动是沿第一输入区域的向下轻扫时，使选择指示符向下滚动通过菜单或剪贴板中的可选选项的列表，并且当该移动是沿第一输入区域的向上轻扫时，使选择指示符向上滚动通过菜单或剪贴板中的可选选项的列表)。例如，这在图5C10至图5C12中示出，其中响应于在输入区域455上检测到的接触564进行的轻扫输入，使选择指示符移动通过菜单556中的可选选项。在一些实施例中，在该菜单完全打开之后(例如，响应于第一输入区域上的按压输入)，该菜单变得可通过第一输入区域上的轻扫输入滚动。在响应于第一输入区域上的按压输入完全显示用户界面对象之后响应于第一输入区域上的轻扫输入来使选择指示符滚动通过用户界面对象中的可选选项增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少同时显示在屏幕上的可选选项的数量，并且提供附加的可选选项而不使用户界面混乱)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7D，在根据第一输入区域上的第三输入中的接触的移动将选择指示符移动到显示器上的一个或多个可选选项中的第一可选选项时，设备检测(7034)第一输入区域上满足选择确认标准的第四输入(例如，当检测到第一输入区域上的接触的抬离时，或者当检测到第一输入区域上的接触的特征强度增大到高于预定义的确认强度阈值(例如，第二强度阈值)时，满足选择确认标准)。在一些实施例中，通过检测接触进行的按压输入，然后检测接触从第一输入区域的抬离来满足选择确认标准。例如，这在图5C13中示出。在一些实施例中，通过检测接触，然后检测接触从第一输入区域的抬离来满足选择确认标准，而不要求接触的特征强度首先增大到高于预定义的确认强度阈值。响应于检测到满足选择确认标准的第四输入，设备执行对应于第一可选选项的操作(例如，如果第一可选选项是滤镜，则将该滤镜应用于当前显示的图像。如果第一可选选项是用于关闭设备的电源相关功能，则开始关闭设备的过程。如果第一可选选项是音乐曲目，则开始回放该音乐曲目等)。响应于第一输入区域上的选择确认输入(例如，按压输入或按压输入的抬离)执行对应于当前所选择的选项的操作增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7D，设备包括(7036)不同于第一输入区域的触敏表面(例如，触敏表面与触摸屏显示器中的显示器集成)。方法7000包括：当在显示器上显示包括一个或多个可选选项的用户界面对象时(例如，当用户界面对象在显示器上部分地和/或完全显现时)，检测触敏表面上的第五输入，包括：检测触敏表面上的接触(例如，不同于第一输入中在第一输入区域上的接触的接触进行的触摸输入)在对应于显示在用户界面对象之外的第二用户界面对象的位置处的触摸按压，检测该接触在触敏表面上到用户界面对象内的位置的移动(例如，第五输入是将第二用户界面对象从菜单或剪贴板外部拖动到菜单或剪贴板的拖动手势)，以及当第二用户界面在用户界面对象内时，检测接触从触敏表面的抬离。响应于检测到第五输入，设备将第二用户界面对象作为新的可选选项添加到用户界面对象中。这在图5D5至图5D8中示出，其中响应于接触575进行的输入，将图像571添加到菜单577。允许响应于不同于第一输入区域的触敏表面(例如，触摸屏)上的输入(例如，触摸拖放输入)从用户界面对象(例如，菜单或剪贴板)外部选择对象，将所选择的对象拖动到用户界面对象中，并且将所选择的对象作为用户界面对象中的新的可选选项添加到用户界面对象中增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法7000并且参考图7D，设备包括(7038)不同于第一输入区域的触敏表面(例如，触敏表面与触摸屏显示器中的显示器集成)。方法7000包括：当在显示器上显示包括一个或多个可选选项的用户界面对象时(例如，当用户界面对象在显示器上部分地和/或完全显现时)，检测触敏表面上的第六输入，包括：检测触敏表面上的接触(例如，不同于第一输入中在第一输入区域上的接触的接触进行的触摸输入)在对应于显示在用户界面对象内的相应可选选项的位置处的触摸按压，检测该接触在触敏表面上到用户界面对象外部的位置的移动(例如，第六输入是将相应可选选项从菜单或剪贴板内拖动到菜单或剪贴板之外的拖动手势)，以及当相应可选选项被拖动到用户界面对象之外时，检测接触从触敏表面的抬离。响应于检测到第六输入，设备从用户界面对象移除该相应可选选项(例如，将其从用户界面对象中删除(例如，当输入满足对象移动标准时被放置到用户界面对象之外的用户界面上，或者当输入满足对象删除标准时被清除而不被放置到用户界面对象之外的用户界面上))。例如，这在图5D20至图5D22中示出，其中响应于接触543进行的输入从菜单577中移除图像541。响应于不同于第一输入区域的触敏表面(例如，触摸屏)上的输入(例如，触摸拖放输入)将可选选项拖动到用户界面对象之外以将其从用户界面对象移除或删除增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
应当理解，已经对图7A-图7E中的操作进行描述的特定次序仅仅是示例性的，并非旨在指示所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外，应当指出的是，本文相对于本文所述的其他方法(例如，方法6000、8000、9000、10000、11000和12000)描述的其他过程的细节同样以类似的方式适用于上文相对于图7A至图7E描述的方法7000。例如，上文参考方法7000所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文参考本文所述的其他方法(例如，方法6000、8000、9000、10000、11000和12000)所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的特征中的一者或多者。为了简明起见，此处不再重复这些细节。
图8A至图8D是示出了根据一些实施例的以不同方式修改设备参数的方法8000的流程图。
方法8000涉及根据在设备的第一子区域还是第二子区域上检测到输入，响应于显示器外输入区域(例如，侧按钮区域)上的按压输入，以两种不同方式(例如，第一方式和不同于第一方式的第二方式)中的一种方式来修改设备的参数。根据确定输入区域的两个子区域中的哪个子区域由按压输入激活来以不同方式修改参数增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。此外，根据确定输入区域上的输入不满足强度阈值(例如，输入不是按压输入)放弃以不同方式修改参数增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
方法8000在具有显示器和输入区域的电子设备(例如，图3的设备300，或图1A和图4A的便携式多功能设备100)上执行，该输入区域不同于该显示器并且包括第一子区域(例如，设备100左侧的上部输入区域456)和第二子区域(例如，设备100左侧的下部输入区域457)(例如，输入区域是可压低的按钮、固态按钮或代替按钮的被配置为响应于输入的触敏区域，并且第一子区域和第二子区域是输入区域的上部区域和下部区域)。在一些实施例中，第一子区域和第二子区域是连续的并且彼此连接。在一些实施例中，第一子区域和第二子区域彼此分开而且离散。在一些实施例中，第一子区域和第二子区域被配置为彼此独立地移动和/或具有传感器以检测彼此独立的输入。在一些实施例中，第一输入区域(以及任选地，其每个子区域)是例如基于电容式和/或电阻式触摸感测技术来检测与触敏表面的接触的强度的触敏表面。在一些实施例中，第一输入区域(以及任选地，其每个子区域)是基于耦接到表面的力、压力和/或振动传感器来检测输入对象(例如，手指)的接触和/或按压的存在的触敏表面。在一些实施例中，第一输入区域(以及任选地，其每个子区域)是与显示器(例如，触摸屏显示器)共面的表面。在一些实施例中，第一输入区域(以及任选地，其子区域中的每个子区域)是设置在设备的与设备的前侧相邻的周边侧(例如，左边缘、右边缘、顶部边缘或底部边缘，或者沿着那些边缘中的两个或更多个边缘)上的表面(例如，突起区域、凹入区域或与周围表面齐平的区域)。在一些实施例中，电子设备还包括用于检测与设备的显示器的接触的存在和/或强度的一个或多个第一传感器(例如，用于检测触摸屏显示器上的接触的强度的电容传感器和/或电阻传感器)，以及用于检测与设备的第一输入区域(以及任选地，其子区域中的每个子区域)的接触的存在和/或强度的一个或多个第二传感器(例如，用于检测与第一输入区域(例如，侧“按钮”区域)的接触的存在、激活和任选地强度的电容传感器、电阻传感器、压力传感器、力传感器和/或振动传感器))。在一些实施例中，设备还包括用于生成触觉输出的一个或多个触觉输出发生器(例如，用于在第一输入区域(以及任选地，其子区域中的每个子区域)生成局部触觉输出的按钮致动器，和/或用于生成整个设备触觉输出的一个或多个内部致动器等)。
根据方法8000并且参考图8A，设备检测(8002)输入区域上的输入(例如，图5B2中的上部输入区域456上的接触518进行的输入，或图5B7中的下部输入区域547上得接触534进行的输入)(例如，检测第一输入区域上的接触(例如，检测设备的触敏侧按钮上的接触的触摸按压))。
根据方法8000并且参考图8A，响应于检测到输入区域上的输入(8004)，并且根据确定该输入(例如，图5B3中的上部输入区域456上的接触518进行的轻按压输入)满足第一标准(例如，第一按钮激活标准)，其中第一标准要求当在输入区域的第一子区域(例如，图5B3中的上部输入区域456)中检测到该输入时该输入的强度增大到高于第一强度阈值(例如，高于接触检测强度阈值且低于深按压强度阈值的轻按压强度阈值)以便满足第一标准，设备以第一方式修改(8006)设备的第一参数(例如，增大音量水平(例如，如图5B3所示)，或向上滚动)。响应于检测到输入区域上的输入(例如，图5B7中的下部输入区域457上的接触534进行的轻按压输入)(8004)，并且根据确定该输入满足第二标准(例如，第二按钮激活标准)，其中第二标准要求当在第二子区域(例如，图5B7中的下部输入区域457)中检测到该输入时该输入的强度增大到高于第一强度阈值以便满足第二标准，设备以不同于第一方式的第二方式修改(8008)设备的第一参数(例如，降低音量(例如，如图5B7所示)或向下滚动)。在一些实施例中，第一标准和第二标准要求在检测到接触之后接触保持基本上静止(例如，具有小于阈值量的移动的触摸保持)超过阈值量的时间(例如，长按压时间阈值)，而不需要强度上升到高于轻按压强度阈值。响应于检测到输入区域上的输入(8004)，并且根据确定输入未增大到高于第一强度阈值(例如，在检测到接触的抬离之前，输入未增大到高于第一强度阈值)，设备放弃(8010)以第一方式修改设备的第一参数，并且放弃以第二方式修改设备的第一参数(例如，设备不以任何方式改变第一参数)。
根据方法8000并且参考图8A，设备包括(8012)位于输入区域(例如，围绕输入区域下方的相应固定枢轴来回摇摆的一个或多个表面振荡器)并且在输入区域提供局部触觉输出的一个或多个第一触觉输出发生器。方法8000包括：根据确定输入(例如，图5B3中在上部输入区域456上的接触518进行的输入)满足第一标准，生成具有第一触觉输出轮廓的第一触觉输出(例如，图5B3中的触觉输出524)；并且根据确定输入(例如，图5B7中在下部输入区域457上的接触534进行的输入)满足第二标准，生成具有第二触觉输出轮廓的第二触觉输出(例如，图5B7中的触觉输出536)。在一些实施例中，第一触觉输出和第二触觉输出具有相同的触觉输出轮廓和不同的伴随音频输出(例如，一个伴随音频输出具有比另一个更高的频率)。在一些实施例中，第一触觉输出和第二触觉输出具有不同的触觉输出轮廓(例如，频率、模式、幅值等)。在一些实施例中，第一触觉输出和第二触觉输出由相同的局部触觉输出发生器输入区域(例如，侧按钮区域)生成，并且触觉输出在输入区域上的用户与输入区域接触的任何位置处被感测到。在一些实施例中，使用单独的局部触觉输出发生器在输入区域的第一子区域和第二子区域中的每一者处生成局部触觉输出。在一些实施例中，根据确定输入未增大到高于第一强度阈值，设备放弃生成第一触觉输出和第二触觉输出。在一些实施例中，设备生成触觉输出以向用户指示第一子区域和第二子区域的位置。例如，当用户的手指搁置在第一子区域上时，由第一触觉输出发生器生成第三触觉输出，并且当用户的手指搁置在第二子区域上时，由第一触觉输出发生器生成第四触觉输出，其中第三触觉输出和第四触觉输出具有彼此不同并且与第一触觉输出和第二触觉输出不同的触觉输出模式。当输入满足用于修改参数的标准时在输入区域中的检测到该输入的地方提供局部触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8B，根据确定输入满足第一标准，设备根据第一参数的当前值为第一触觉输出选择(8014)第一触觉输出轮廓。类似地，在一些实施例中，根据确定输入满足第二标准，设备根据第一参数的当前值为第二触觉输出选择第二触觉输出轮廓。在一些实施例中，当根据输入调节第一参数时，设备连续且动态地调节第一/第二触觉输出轮廓。在一些实施例中，根据确定输入满足第一/第二标准，设备根据第一参数的当前值为伴随第一/第二触觉输出的音频输出选择音频输出轮廓。在一些实施例中，当根据输入调节第一参数时，设备连续且动态地调节音频输出轮廓。在输入区域中提供具有对应于由输入修改的参数的当前值的触觉输出轮廓的局部触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8B，根据确定第一参数的当前值已经达到第一参数的值范围的末端(例如，图5B4中音量值达到最大音量值)，设备生成(8016)具有不同于第一(和任选地，第二)触觉输出轮廓的相应触觉输出轮廓的末端触觉输出(例如，图5B4中的触觉输出526)。例如，当第一参数的值达到第一参数的值范围中的最大值或最小值时，触觉输出具有与当响应于输入区域的第一子区域/第二子区域上的输入而连续调节第一参数的值时已生成的一系列触觉输出离散而且不同的质量。在一些实施例中，末端触觉输出具有与第一触觉输出不同的触觉输出模式。在一些实施例中，末端触觉输出具有与伴随第一触觉输出的音频输出不同的伴随音频输出。在一些实施例中，在达到第一参数的值范围的末端并生成末端触觉输出之前，设备根据第一参数的当前值在第一参数的值范围内的连续变化来连续调节第一触觉输出轮廓的特征(例如，频率、循环数量、幅值)。在一些实施例中，当在输入满足第一标准之前第一参数的当前值已经在第一参数的值范围的末端时，不生成触觉输出。例如，当设备响应于按压输入而将第一参数的当前值增大到值范围的末端时，生成末端触觉输出，但是当用户再一次或多次按压输入区域时，设备放弃生成附加触觉输出，因为附加按压输入没有改变参数值。当达到参数的端值时，提供具有不同触觉输出轮廓的局部触觉输出。对应于参数的端值的触觉输出的触觉输出轮廓不同于在达到参数的端值之前结合到达其他值而生成的触觉输出的触觉输出轮廓。使用不同的触觉输出轮廓来指示已达到参数的端值增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8B，根据确定第一参数的当前值已经达到第一参数的值范围的末端，设备放弃(8018)生成第一(和任选地，第二)触觉输出轮廓。响应于输入而提供用于修改设备参数的有区别的反馈，包括结合达到不是该参数的端值的新值来提供触觉输出，并且响应于输入而在达到参数的端值时放弃提供触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8B，根据确定输入未增大到高于第一强度阈值：根据确定在输入区域的第一子区域中检测到输入，设备生成(8020)指示在输入区域的第一子区域中检测到输入的第一反馈(例如，第一视觉反馈和/或具有第三触觉输出模式的第三触觉输出)；并且根据确定在输入区域的第二子区域中检测到输入，设备生成指示在输入区域的第二子区域中检测到输入的不同于第一反馈的第二反馈(例如，第二视觉反馈和/或具有第四触觉输出模式的第四触觉输出)。在一些实施例中，第一视觉反馈包括突出显示用户界面对象的第一区域(例如，滑块控件的上部，或向上箭头)，并且第二视觉反馈包括突出显示用户界面对象的第二区域(例如，滑块控件的下部，或向下箭头)。在一些实施例中，第三触觉输出和第四触觉输出具有相同的触觉输出轮廓和不同的伴随音频输出(例如，一个伴随音频输出具有比另一个更高的频率)。在一些实施例中，第三触觉输出和第四触觉输出具有不同的触觉输出轮廓(例如，频率、模式、幅值等)。在一些实施例中，第三触觉输出和第四触觉输出由相同的局部触觉输出发生器在输入区域(例如，侧按钮区域)生成，并且触觉输出根据用户与输入区域接触的位置而改变。在一些实施例中，使用单独的局部触觉输出发生器在输入区域的第一子区域和第二子区域中的每一者处生成局部触觉输出。提供有区别的反馈以指示输入区域的两个子区域中的哪一个在按压输入激活该子区域之前被触摸增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8C，以第一方式修改设备的第一参数包括(8022)沿第一方向(例如，向上方向、具有增大的值的方向、顺时针方向、向左方向等)修改设备的第一参数；并且以第二方式修改设备的第一参数包括沿与第一方向不同(例如，相反)的第二方向(例如，向下方向、具有减小的值的方向、逆时针方向、向右方向等)修改设备的第一参数。这在图5B1至图5B10中示出，其中音量水平由在上部输入区域456上检测到的按压输入增大，并且音量水平由在下部输入区域457上检测到的按压输入减小。例如，对于在输入区域的上部区域上检测到的每个按压输入(例如，如由接触的持续时间或强度跨强度阈值的上升和下降所定义的)，设备将第一参数(设备的音量、亮度或其他控制参数)增大固定量；并且对于在输入区域的下部区域上检测到的每个按压输入，设备将第一参数减小该固定量。在一些实施例中，针对每次按压输入的改变量由按压输入的最大强度来调节(例如，较高强度对应于设备的第一参数的改变的较大乘数)。根据输入区域的两个子区域中的哪个子区域由按压输入激活来沿两个不同方向修改参数增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8C，以第一方式修改设备的第一参数包括(8024)将设备的第一参数修改第一量(例如，输入的第一乘数、第一绝对量等)；并且以第二方式修改设备的第一参数包括将设备的第一参数修改不同于(例如，大于、或小于、或为预定义倍数)第一量的第二量(例如，输入的第二乘数、第二绝对量等)。例如，对于在输入区域的第一上部区域上检测到的每个按压输入(例如，如由接触的持续时间或强度跨强度阈值的上升和下降所定义的)，设备将第一参数(设备的音量、亮度或其他控制参数)增大第一固定量；并且对于在输入区域的在第一上部区域下方的第二上部区域上检测到的每个按压输入，设备将第一参数增大第二固定量(例如，一次5％或一次5倍等)，该第二固定量小于第一固定量(例如，一次10％或一次10倍等)。在一些实施例中，对于在输入区域的第一下部区域上检测到的每个按压输入，设备将第一参数(设备的音量、亮度或其他控制参数)减小第三固定量；并且对于在输入区域的在第一下部区域下方的第二下部区域上检测到的每个按压输入，设备将第一参数减小第四固定量(例如，一次10％或一次10倍等)，该第二固定量大于第一固定量(例如，一次5％或一次5倍等)。在一些实施例中，针对每次按压输入的改变量由按压输入的最大强度来调节(例如，较高强度对应于设备的第一参数的改变的较大乘数)。根据输入区域的两个子区域中的哪个子区域由按压输入激活来将参数修改两个不同的量增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8C，以第一方式修改设备的第一参数包括(8026)：根据在输入区域的第一子区域检测到的输入的特征强度(例如，输入的强度超过第一强度阈值的量)，动态地调节修改设备的第一参数的第一速率；并且以第二方式修改设备的第一参数包括：根据在输入区域的第二子区域检测到的输入的特征强度(例如，输入的强度超过第一强度阈值的量)，动态地调节修改设备的第一参数的第二速率。根据输入的特征强度响应于输入而动态地调节用以调节参数的速率增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8C，第一参数是(8028)用于操作设备的硬件部件的控制参数(例如，扬声器的音量(例如，通过操作图5B7中的控件520)、显示的亮度(例如，通过操作图5B11中的控件550)或手电筒等)。根据确定输入区域的两个子区域中的哪个子区域由按压输入激活来以不同方式修改设备的硬件部件的控制参数增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8C，第一参数是(8030)用于移动通过内容(例如，在内容项中向上和向下滚动、在对象(例如，图像、媒体对象等)的列表中扫描、将分页内容向上和向下翻页、回放或刷过媒体对象(例如，音乐剪辑、视频文件等))的操作控制参数。根据确定输入区域的两个子区域中的哪个子区域由按压输入激活来以不同方式移动通过内容(例如，向上和向下滚动或刷过媒体内容或列表)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8C，根据确定输入满足第一标准第一次数(例如，设备检测到输入的强度上升和下降并且跨过第一强度阈值多次)，设备以第一方式修改(8032)设备的第一参数第二次数(例如，每次修改第一量，并且对于每次增大到高于第一强度阈值)，第二次数对应于第一次数。例如，在图5B2至图5B4中，响应于在输入区域456上检测到的多个连续按压输入，音量水平增大多次。类似地，根据确定输入满足第二标准第三次数(例如，设备检测到输入的强度上升和下降并且跨过第一强度阈值多次)，设备以第二方式修改设备的第一参数第四次数(例如，每次修改第一量，并且对于每次增大到高于第一强度阈值)，第四次数对应于第三次数。以对应于输入满足第一标准的次数的次数来以相应方式修改参数使得用户设备界面更高效(例如，通过减少操作设备/与设备进行交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8D，响应于检测到输入区域上的输入：根据确定该输入满足第三标准(例如，第一增强按钮激活标准)，其中第三标准要求当在输入区域的第一子区域中检测到该输入时该输入的强度增大到高于比第一强度阈值大的第二强度阈值(例如，高于接触检测强度阈值和轻按压强度阈值的深按压强度阈值)以便满足第三标准，设备将设备的第一参数重置(8034)为第一预先确定的值(例如，使音量水平最大化(例如，如图5B8至图5B9所示)，或滚动到顶部，而不经历中间值)。在一些实施例中，响应于检测到输入区域上的输入：根据确定该输入满足第四标准(例如，第二增强按钮激活标准)，其中第四标准要求当在输入区域的第二子区域中检测到该输入时该输入的强度增大到高于第二强度阈值以便满足第四标准，将设备的第一参数重置为不同于第一预先确定的值的第二预先确定的值。例如，当显示可滚动内容(例如，可滚动文档)或可刷内容(例如，音乐剪辑)时，侧按钮的上部上的深按压使得设备跳到内容的开始，而侧按钮的下部上的深按压使得设备跳到内容的结尾。当显示项目列表时，侧按钮的上部上的深按压使得设备跳到列表中的第一个项目，并且侧按钮的下部上的深按压使得设备跳到列表中的最后一个项目。当呈现滑块控件时，侧按钮的上部上的深按压使得设备将指示符重置到滑块控件的开始，并且侧按钮的下部上的深按压使得设备将指示符重置到滑块控件的结尾。当应用滤镜时，侧按钮的上部上的深按压导致将应用滤镜值范围的最大值，并且侧按钮的下部上的深按压导致将应用滤镜值范围的最小值。当输入满足增强的强度要求(例如，如第三标准所要求的)时将参数重置为预先确定的值同时放弃以通常的方式调节参数(例如，响应于不满足增强的强度要求的按压输入而进行调节的方式)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8D，响应于检测到输入区域上的输入(例如，图5B2中上部输入区域456上的接触518进行的输入)：设备显示(8036)对应于可通过输入区域上的所需输入来修改的第一参数(例如，设备音量)的第一用户界面对象(例如，图5B2中的音量控件520)(例如，该用户界面对象是滚动条、音量控件、亮度控件、刷动器、可移动通过项目列表的选择指示符)，其中显示该用户界面对象而不需要输入的强度超过第一强度阈值。在一些实施例中，在检测到该输入之前不显示第一用户界面对象。在一些实施例中，当在输入区域上检测到该输入之前以第一方式显示第一用户界面对象，并且当在输入区域上检测到该输入之后以第二方式显示第一用户界面对象(例如，突出显示或选择)。显示对应于响应于在输入区域上检测到的触摸输入来修改的参数的用户界面对象而不需要该触摸输入的强度超过用于实际修改该参数的强度阈值增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8D，响应于检测到输入区域上的输入：根据确定该输入(例如，图5B10至图5B11中的接触542和544进行的输入)满足第五标准(例如，参数切换标准)，设备将可通过输入区域上的所需输入来修改的当前选择参数从第一参数(例如，如图5B10所示的音量控制)切换(8038)为不同于第一参数的第二参数(例如，如图5B11所示的亮度控制)。例如，最初，可通过按压输入区域来修改的当前选择参数是设备的音量。响应于同时检测到输入区域的上部和下部两者上的按压输入，可通过按压所述输入区域来修改的当前选择参数变为显示器的亮度。在一些实施例中，可通过输入区域上的按压输入来控制参数的列表，并且每当设备检测到输入区域的上部和下部两者被同时按压时，设备循环通过该列表以选择当前可修改的参数。在一些实施例中，设备还显示对应于由输入区域控制的当前选择参数的用户界面对象。响应于在输入区域上检测到的满足预设标准(例如，参数切换标准)的触摸输入来切换要修改的参数增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供附加控制选项而不使用户界面混乱并减少实现预期结果所需的输入数量)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法8000并且参考图8D，第五标准要求(8040)当在输入区域的第一子区域和第二子区域中同时检测到该输入时该输入的强度增大到高于第一强度阈值(例如，高于接触检测强度阈值且低于深按压强度阈值的轻按压强度阈值)以便满足第五标准。这在图5B10至图5B11中示出。在一些实施例中，设备不需要在输入区域的上部和下部两者上同时进行按压输入，而是响应于输入区域上的轻扫输入(例如，沿输入区域的纵向方向的向下轻扫或向上轻扫)来切换该输入区域控制的参数。响应于在输入区域的两个子区域上同时检测到的按压输入切换要修改的参数增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供附加控制选项而不使用户界面混乱，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
应当理解，已经对图8A-图8D中的操作进行描述的特定次序仅仅是示例性的，并非旨在指示所述次序是所述操作可被执行的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外，应当指出的是，本文相对于本文所述的其他方法(例如，方法6000、7000、9000、10000、11000和12000)描述的其他过程的细节同样以类似的方式适用于上文相对于图8A至图8D描述的方法8000。例如，上文参考方法8000所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文参考本文所述的其他方法(例如，方法6000、7000、9000、10000、11000和12000)所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的特征中的一者或多者。为了简明起见，此处不再重复这些细节。
图9A至图9C是示出了根据一些实施例的引导设备移动的方法9000的流程图。
方法9000涉及使用位于设备的不同位置处的触觉输出发生器提供局部触觉输出以引导和提示设备的移动，以便继续执行相应任务(例如，完成全景照片、导航到目的地、搜索对象)，其中相应任务在设备的媒体捕获模式期间执行，并且触觉输出发生器被选择性地激活以根据相机的视场中的一个或多个对象需要移位以便继续执行该任务的方向来提示设备沿相应方向的移动。使用局部触觉输出来引导和提示用户基于相机视场中的对象需要移位以继续执行任务的方向来沿相应方向移动设备增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈以帮助用户提供实现预期结果所需的输入，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
方法9000在具有显示器、一个或多个相机和多个触觉输出发生器的电子设备(例如，图3的设备300，或图1A和图4A的便携式多功能设备100)处执行，该多个触觉输出发生器包括在设备中的第一位置处(例如，在设备的第一边缘(例如，右边缘或顶部边缘)之上或之下)的第一触觉输出发生器以及在设备中的第二位置处(例如，在设备的第二边缘(例如，左边缘或底部边缘)之上或之下)的第二触觉输出发生器。在一些实施例中，第一触觉输出发生器和第二触觉输出发生器位于沿设备的相同边缘的单独部分中。
根据方法9000并且参考图9A，当设备处于媒体捕获模式(例如，图5E1中的全景捕获模式或图5F3中的视频记录模式)时(例如，使用一个或多个相机连续捕获视频或静止图像)，设备执行(9002)相应任务(例如，捕获全景图像、在车辆上提供逐个拐弯导航指令、搜索周围环境中的特定对象(例如，配对智能家居设备)，捕获具有预定义加框和对准要求的对象或人的图像(例如，用于生物特征认证，用于某种艺术构图)，提供车辆转向引导(例如，倒车停车、在目标上释放/拾取负载等)，为用于控制无人载具(例如，空中无人机)的远程导航控制提供指导，为相机辅助的手术提供指导等)。
在执行相应任务时，设备检测(9006)到设备的一个或多个相机的视场中的一个或多个对象(例如，预定义的对象、视觉标记、特征、界标等)满足第一标准(例如，设备移位标准)。例如，在图5E2和图5E3中，视场中的山脉偏离水平移动。在图5E4中，在完成全景图像之前停住或停止山脉在视场中的移动。在图5F4和图5F5中，面部505-3和505-3即将移出框架。在一些实施例中，第一标准用于确定是否需要移动相机的视场以便满足用于执行相应任务的要求。根据相应任务，该要求可以不同。例如，当捕获全景图像时，该要求是视场水平地(例如，平行于地面)移位，并且当设备检测到如基于相机视场中的一个或多个对象的改变的位置所确定的与水平移动的偏离时，满足第一标准。又如，当在车辆上提供逐个拐弯导航指令时，该要求之一是基于下一个转弯使相机的视场在正确的车道上(例如，对于即将到来的右转弯为右车道，并且对于即将到来的左转弯为左车道)，并且当设备检测到车辆不在正确车道中时(例如，基于在相机的视场中识别的道路标记)，满足第一标准。又如，在捕获用于有照片的证件的图像时，该要求是被摄体的头部需要适配在图像中的预定义框内；并且当设备检测到被摄体头部不在相机的视场中的预定义框内(例如，偏离中心或太大)时，满足第一标准。
响应于检测到一个或多个相机的视场中的一个或多个对象满足第一标准(9006)，设备利用多个触觉输出发生器中的一个或多个触觉输出发生器生成提示一个或多个相机的视场沿相应方向的移动(例如，通过移动(例如，2D平移、3D平移、旋转、平移、枢转、倾斜或上述的组合等)设备整体或设备的包括相机的一部分)的触觉输出(例如，图5E2中的触觉输出523、图5E3中的触觉输出524、图5E4中的触觉输出519、图5F4中的触觉输出601、图5F5中的触觉输出603)，其中生成提示一个或多个相机的视场沿相应方向的移动的触觉输出包括：根据基于相机的视场中的一个或多个对象确定相机的视场需要沿第一方向(例如，向左、顺时针、向上、向前、在西北方向、更靠近用户或上述中的两个或更多个的组合等)移位以继续执行相应任务(例如，继续捕获全景图像，继续在车辆上提供逐个拐弯导航指令，继续搜索周围环境中的特定对象(例如，配对智能家居设备)，继续捕获具有预定义的加框和对准要求的对象或人的图像(例如，用于生物特征认证、用于某种艺术构图)，继续提供车辆转向引导(例如，倒车停车、在目标上释放/拾取负载等)，继续为用于控制无人载具(例如，空中无人机)的远程导航控制提供指导，继续为相机辅助的手术提供指导等)，生成提示一个或多个相机的视场沿第一方向的移动(例如，图5E2中的触觉输出523向上提示视场的移动；或图5F4中的触觉输出601提示视场的向左移动)的第一触觉输出(例如，第一触觉输出由第一触觉输出发生器提供，并且被局部化到设备中的第一位置(例如，设备的左边缘))；并且根据基于相机的视场中的一个或多个对象确定相机的视场需要沿第二方向(例如，向右、逆时针、向下、向后、在东南方向、远离用户或上述中的两个或更多个的组合等)移位以继续执行相应任务，生成提示一个或多个相机的视场沿第二方向的移动(例如，图5E3中的触觉输出521提示视场的向下移动，并且图5E4中的触觉输出519提示视场的向前移动；或图5F5中的触觉输出603提示视场的向右移动)的第二触觉输出(例如，第二触觉输出由第二触觉输出发生器提供，并且被局部化到设备中的不同于第一触觉输出的第二位置(例如，设备的右边缘))。
根据方法9000并且参考图9A，生成第一触觉输出包括(9008)使用第一触觉输出发生器在设备中的第一位置(例如，在设备的第一边缘(例如，右边缘或顶部边缘)之上或之下)生成第一触觉输出；并且生成第二触觉输出包括使用第二触觉输出发生器在设备中的第二位置(例如，在设备的第二边缘(例如，左边缘或底部边缘)之上或之下)生成第二触觉输出发生器。在一些实施例中，第一触觉输出发生器和第二触觉输出发生器位于沿设备的相同边缘的单独部分中。在一些实施例中，对于相应任务，与该任务相关的多个方向中的每个方向基于设备中触觉输出发生器的相应位置与多个触觉输出发生器的相应子组(例如，一个或多个)相关联；并且设备根据相机的视场需要移动以继续执行相应任务的方向选择性地激活触觉输出发生器的子组。在一些实施例中，第一触觉输出和第二触觉输出具有相同的触觉输出轮廓(例如，频率、幅值、模式、伴随音频等)但是向用户提供不同的提示，因为它们由位于设备中不同位置的不同触觉输出发生器生成并且被局部化到设备表面上的不同部分。使用位于设备上不同位置的触觉输出发生器生成相应的局部触觉输出以提示用户沿不同方向移动设备增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法9000并且参考图9B，生成第一触觉输出(例如，用于提示顺时针移动)包括(9010)根据第一输出序列(例如，第一序列包括第一触觉输出发生器，然后是第二触觉输出发生器)使用第一触觉输出发生器和第二触觉输出发生器生成第一触觉输出。生成第二触觉输出(例如，用于提示逆时针移动)包括根据不同于第一输出序列的第二输出序列(例如，第二序列包括第二触觉输出发生器，然后是第一触觉输出发生器)使用第一触觉输出发生器和第二触觉输出发生器生成第二触觉输出。例如，这在图5E2、图5E3和图5E4中示出，其中协调触觉输出523、521和519各自根据不同输出序列使用位于不同输入区域的一对触觉输出发生器来生成。这在图5F4和图5F5中进一步示出，其中协调触觉输出601和603各自根据不同输出序列使用位于不同输入区域的一对触觉输出发生器来生成。在一些实施例中，第一触觉输出发生器和第二触觉输出发生器位于沿设备的相同边缘或在设备的不同边缘上的单独部分中。在一些实施例中，对于相应任务，与该任务相关的多个方向中的每个方向基于设备中触觉输出发生器的相应位置与多个触觉输出发生器的全部或所选择的子组的相应操作序列相关联；并且设备根据对应于相机的视场需要移动以继续执行相应任务的方向的操作序列来激活触觉输出发生器的全部或所选择的子组。在一些实施例中，第一序列包括相应触觉输出发生器仅一次(例如，对于沿第一方向的移动，该序列是第一触觉输出发生器的一次输出，之后是第二触觉输出发生器的一次输出，然后任选地重复第一序列一次或多次，每次重复之间具有预先确定的延迟以分开各序列；并且对于沿第一方向的移动，第二序列是第二触觉输出发生器的一次输出，之后是第一触觉输出发生器的一次输出，然后任选地重复第二序列一次或多次，每次重复之间具有预先确定的延迟以分开各序列)。在一些实施例中，序列调用相应触觉输出发生器多次(例如，对于沿第一方向的移动，第一序列是第一触觉输出发生器的两次连续输出，之后是第二触觉输出发生器的一次输出，然后任选地重复第一序列一次或多次，每次重复之间具有预先确定的延迟以分开各序列；并且对于沿第二方向的移动，第二序列是第二触觉输出发生器的两次连续输出，之后是第一触觉输出发生器的一次输出，然后任选地重复第二序列一次或多次，每次重复之间具有预先确定的延迟以分开各序列)。根据不同的输出序列操作位于设备上不同位置处的一组触觉输出发生器以提示用户沿不同的方向移动设备增强了设备的可操作性，并且使用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法9000并且参考图9B，生成第一触觉输出(例如，用于提示顺时针移动)包括(9012)根据第一功率比(例如，第一功率比包括第一触觉输出发生器以第二触觉输出发生器的功率的20％来操作)使用第一触觉输出发生器和第二触觉输出发生器生成第一触觉输出。生成第二触觉输出(例如，用于提示逆时针移动)包括根据不同于第一功率比的第二功率比(例如，第二功率比包括第二触觉输出发生器以第一触觉输出发生器的20％来操作)使用第一触觉输出发生器和第二触觉输出发生器生成第二触觉输出。例如，这在图5E2和图5E3中示出，其中协调触觉输出523、521和519各自根据不同功率比使用位于不同输入区域的一对触觉输出发生器来生成。在一些实施例中，第一触觉输出发生器和第二触觉输出发生器位于沿设备的相同边缘或在设备的不同边缘上的单独部分中。在一些实施例中，对于相应任务，与该任务相关的多个方向中的每个方向基于设备中触觉输出发生器的相应位置与多个触觉输出发生器的全部或所选择的子组的相应功率比相关联；并且设备根据对应于相机的视场需要移动以继续执行相应任务的方向的功率比来激活触觉输出发生器的全部或所选择的子组。根据不同的功率比操作位于设备上不同位置处的一组触觉输出发生器以提示用户沿不同的方向移动设备增强了设备的可操作性，并且使用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法9000并且参考图9B，检测到设备的一个或多个相机的视场中的一个或多个对象满足第一标准包括(9014)：根据预定义的对象识别标准(例如，基于图像处理、特征提取和对象识别技术)识别设备的一个或多个相机的视场中的第一对象(例如，图5F3中的面部505-1、505-2和505-3)(例如，被摄体的头部、预定义的道路标记、目标等)；并且检测一个或多个相机的视场中的第一对象的当前位置或移动偏离一个或多个相机的视场中的预定义位置或移动路径(例如，视场的中心，投影在视场上的预定义导航路径)(例如，在图5F4中，面部505-3在视场的左边缘的阈值距离内，并且在图5F5中，面部505-2在视场的右边缘的阈值距离内)。例如，当执行获取有照片的证件的任务时，当检测到用户的头部在视场中偏离中心时，设备检测到用户的头部在相机的视场中满足第一标准。又如，当提供室内导航引导时，当设备检测到相机的视场中的入口从视场的中心区域偏移超过阈值距离时，设备检测到该入口满足第一标准。再如，当提供避障引导时，当设备检测到移动障碍物的移动路径已偏离预测的移动路径从而需要调节现有的避障操控时，设备检测到移动障碍物满足第一标准。再如，当捕获全景图像时，当设备检测到当前在相机的视场中的场景的先前捕获部分的位置相对于其先前成像位置向上或向下移位时，设备检测到该场景满足第一标准。使用相机视场中的对象与预定义位置或移动路径的偏移作为提示用户沿相应方向移动设备的基础增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法9000并且参考图9B，检测到设备的一个或多个相机的视场中的一个或多个对象满足第一标准包括(9016)：根据预定义的对象识别标准(例如，基于图像处理、特征提取和对象识别技术)识别设备的一个或多个相机的视场中的第一对象(例如，所跟踪的移动对象，诸如鸟、流星、移动目标等，或静止对象，诸如固定目标、肖像被摄体等)；并且检测第一对象的至少一部分在一个或多个相机的视场之外。在一些实施例中，当跟踪移动目标时，当设备检测到相机的视场中的移动对象正在移到相机的视场之外时，设备检测到该移动对象满足第一标准。根据确定相机的视场中的预定义对象的至少一部分已移到相机的视场之外而提示用户沿相应方向移动设备增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法9000并且参考图9C，检测到设备的一个或多个相机的视场中的一个或多个对象满足第一标准包括(9018)：根据预定义的对象识别标准(例如，基于当前视场与全景图像的先前捕获部分之间的比较)识别设备的一个或多个相机的视场中的第一对象(例如，全景中的部分场景中的对象等)；并且检测到第一对象的移动速度在预定义的速度范围之外(例如，如图5E4所示，其中视场中的山脉相对于设备移动太慢(例如，因为设备移动停止))(例如，太快或太慢而不能拍摄清晰的全景图像)。在一些实施例中，当跟踪移动目标时，当设备检测到相机的视场中的移动对象正在与设备相比以阈值速度差更快或更慢移动时，设备检测到该移动对象满足第一标准。根据确定相机的视场中的预定义对象以预定义速度范围之外的速度移动而提示用户沿相应方向移动设备增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法9000并且参考图9C，在设备静止时设备检测到(9020)满足第一标准(例如，对象仅由于对象的运动而在视场中移动(例如，当设备在物理环境中保持静止时))。根据在设备静止时确定相机视场中的预定义对象满足第一标准而提示用户移动设备增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法9000并且参考图9C，在设备处于运动中时设备检测到(9022)满足第一标准(例如，对象仅由于设备的运动而在视场中移动(例如，当对象在物理环境中保持静止时))。根据在设备运动时确定相机视场中的预定义对象满足第一标准而提示用户移动设备增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法9000并且参考图9C，在设备和对象均处于运动中时设备检测到(9024)满足第一标准(例如，对象由于设备和对象之间的相对运动(例如，由于它们的不同速度)而在视场中移动)。根据在设备和对象两者运动时确定相机视场中的预定义对象满足第一标准而提示用户移动设备增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法9000并且参考图9C，响应于检测到一个或多个相机的视场中的一个或多个对象满足第一标准，设备显示提示一个或多个相机的视场沿相应方向的移动(例如，通过移动(例如，2D平移、3D平移、旋转、平移、枢转、倾斜或上述的组合等)设备整体或设备的包括相机的一部分)的视觉指示符，其中生成提示一个或多个相机的视场沿相应方向的移动的视觉指示符包括(9026)：根据基于相机的视场中的一个或多个对象确定相机的视场需要沿第一方向(例如，向左、顺时针、向上、向前、在北方向、更靠近用户或上述中的两个或更多个的组合等)移位以继续执行相应任务，为该视觉指示符提供提示一个或多个相机的视场沿第一方向的移动的第一视觉特征(例如，第一运动模式、方向、形状、动画序列等)；并且根据基于相机的视场中的一个或多个对象确定相机的视场需要沿第二方向(例如，向右、逆时针、向下、向后、在东南方向、更远离用户或上述中的两个或更多个的组合等)移位以继续执行相应任务，为该视觉指示符生成提示一个或多个相机的视场沿第二方向的移动的不同于第一视觉特征的第二视觉特征(例如，第二运动模式、方向、形状、动画序列等)。结合提示用户沿相应方向移动设备的触觉输出来提供视觉反馈并且提供具有对应于相应方向的视觉特征的视觉反馈增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，以及通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
应当理解，已经对图9A-图9C中的操作进行描述的特定次序仅仅是示例性的，并非旨在指示所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外，应当指出的是，本文相对于本文所述的其他方法(例如，方法6000、7000、8000、10000、11000和12000)描述的其他过程的细节同样以类似的方式适用于上文相对于图9A至图9C描述的方法9000。例如，上文参考方法9000所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文参考本文所述的其他方法(例如，方法6000、7000、8000、10000、11000和12000)所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的特征中的一者或多者。为了简明起见，此处不再重复这些细节。
图10A至图10C是示出了根据一些实施例的为即将发生的操作生成警告反馈的方法10000的流程图。
方法10000涉及当输入区域上的输入满足第一标准但该输入不满足第二标准时生成警告触觉输出，并且当该输入满足第二标准(例如，具有相对于第一标准的增强要求)时执行操作。在满足第二标准之前使用与输入区域相关联的触觉输出发生器来提供警告触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。此外，当不满足第一标准时放弃生成触觉输出，并且当在满足第二标准之前检测到取消输入时放弃执行操作增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
方法10000在具有显示器和输入区域的电子设备(例如，图3的设备300，或图1A和图4A的便携式多功能设备100)处执行，该输入区域与触觉输出发生器(例如，位于该设备的边缘(例如，侧按钮区域)并且生成局部触觉输出而不是整个设备触觉输出的局部触觉输出发生器)相关联。在一些实施例中，局部触觉输出发生器是围绕输入区域下方的固定枢轴来回摇摆的表面振荡器或能够生成特别指向输入区域的触觉输出的其他触觉输出发生器。在一些实施例中，局部触觉输出发生器在输入区域提供局部振动，而不是在设备处作为整体提供。局部振动在设备上的不同位置处具有变化的幅值，其中在操作输入区域时用户的手指通常将搁置的输入区域上具有较大的幅值，并且在输入区域之外的当操作输入区域时用户的手通常将不搁置的其他位置处具有较小的幅值。在一些实施例中，该设备还包括生成整个设备触觉输出的整个设备触觉输出发生器(例如，位于设备内并且围绕中心搁置位置来回移动的质块)。在一些实施例中，整个设备触觉输出发生器在设备上的许多不同位置同时产生触觉输出，诸如耦接到设备外壳的触觉输出发生器。在一些实施例中，局部触觉输出发生器提供对应于响应于在输入区域上检测到的触摸/按压输入而执行的操作和/或生成的视觉反馈的触觉输出。在一些实施例中，结合或独立于局部触觉输出，该设备还利用整个设备触觉输出发生器来生成整个设备触觉输出，该整个设备触觉输出对应于响应于在触摸屏用户界面上检测到的触摸/按压输入而不是在输入区域上检测到的触摸/按压输入而执行的操作和/或生成的视觉反馈。
根据方法10000并参考图10A，设备检测(10002)输入区域上的输入(例如，触摸屏显示器或触敏侧按钮上的接触进行的触摸输入)。
根据方法10000并且参考图10A，响应于检测到输入区域上的输入：根据确定输入区域上的该输入满足第一标准(例如，警告发起标准)，其中第一标准包括当第一输入度量(例如，输入的时间特征、输入的强度特征、输入的运动特征和/或输入的混合时间/强度/运动特征)超过第一阈值时满足以便满足第一标准的要求(例如，当该输入满足用于发起操作的执行的标准时，该输入满足警告发起标准，或者如果该输入在其当前进程中继续，则该输入即将满足用于发起操作的执行的标准)，设备利用与输入区域相关联的触觉输出发生器生成(10006)第一触觉输出(例如，第一触觉输出是其触觉输出轮廓的特征参数(例如，幅值、频率、伴随音频音量、伴随音频频率等)中的至少一个特征参数具有增大的值的逐步增大触觉输出)。这在图5G2中示出，其中接触605进行的输入的强度已超过轻按压强度阈值；并且设备生成触觉输出607以指示在输入的强度继续增大的情况下将触发紧急呼叫功能。另选地，这在图5G3中示出，其中接触605进行的输入的强度已超过深按压强度阈值和忽略不计的持续时间要求，并且设备开始倒计时时间段，并且生成触觉输出609(包括输入区域455)以指示在倒计时时间段结束时将触发紧急呼叫功能。这也在图5H3中示出，其中接触627进行的输入已满足轻按压强度阈值和时间阈值T；并且设备生成触觉输出631以指示数字助理将很快变得可对用户输入进行响应。在生成第一触觉输出之后：根据确定输入满足第二标准(例如，操作执行标准)，其中第二标准包括当第一输入度量(例如，输入的时间特征、输入的强度特征、输入的运动特征和/或输入的混合时间/强度/运动特征)超过比第一阈值大的第二阈值时满足以便满足第二标准的要求，设备执行操作(例如，执行支付操作、发起紧急呼叫、激活基于语音的数字助理、关闭设备等)；并且根据确定在输入满足第二标准之前已经检测到取消输入(例如，接触从输入区域的抬离、输入区域上的接触的移动、对所显示的用户界面上的取消按钮的选择等)，设备放弃执行该操作。这在图5G3中示出，其中接触605进行的输入的强度已超过比轻按压强度阈值大的深按压强度阈值；并且设备生成触觉输出609以指示用于发起紧急呼叫的倒计时时间段已开始。如果输入在达到深按压强度阈值之前已终止，则设备将接触605的抬离视为取消输入，并且不开始倒计时时间段。另选地，这在图5G4中示出，其中接触605进行的输入的强度在超过阈值量的时间T(例如，倒计时时间段)保持高于深按压强度阈值，并且设备完成倒计时时间段并进行紧急呼叫。如果输入已被终止或者如果输入的强度在倒计时时间段结束之前已下降到深按压强度阈值以下，则设备将不发起紧急呼叫。这也在图5H5中示出，在接触627进行的输入的强度在数字助理准备就绪所需的附加时间段保持高于轻按压强度阈值的情况下，设备在其完全准备就绪时呈现全功能数字助理。如果在数字助理完全准备就绪之前检测到取消输入，则设备不呈现数字助理用户界面，如图5H5所示。响应于检测到输入区域上的输入并且根据确定输入区域上的输入不满足第一标准(例如，警告发起标准)，设备放弃(10008)生成第一触觉输出。
根据方法10000并且参考图10A，在生成第一触觉输出之后：根据确定输入满足第二标准(例如，操作执行标准)，设备生成(10010)指示操作的执行(例如，进入操作执行的不再可取消的阶段)的第二触觉输出(例如，图5G3中指示倒计时开始的触觉输出609，或图5G4中指示发起紧急呼叫的触觉输出615，或图5H5中指示数字助理准备就绪的触觉输出641)。例如，由内部触觉输出发生器生成不同于利用输入区域生成的触觉输出的整体设备触觉输出，以指示支付操作的执行、拨打紧急呼叫、基于语音的数字助理的激活、开始关闭设备，此时该操作不再可取消。在一些实施例中，设备不需要将接触从输入区域抬离以便满足第二标准。在一些实施例中，第一标准和第二标准基于不同于接触的移动距离的度量(例如，第一标准和第二标准不由跨显示器上的不同距离阈值的轻扫输入来满足，而是由满足基于强度或基于时间的标准的输入来满足)。结合满足导致执行操作的第二标准而生成触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并且帮助用户提供所需的输入来实现预期结果)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并且参考图10A，在生成第一触觉输出之后：根据确定在输入满足第二标准之前已检测到取消输入，设备停止(10012)生成第一触觉输出。例如，当在输入区域上连续检测到输入和/或输入继续满足第一标准时，并且/或者在检测到取消输入之前，设备继续生成第一触觉输出。当满足第二标准时或当检测到取消输入时，设备停止生成第一触觉输出。当在满足第二标准之前(例如，在发起动作的执行并且该执行不可逆之前)检测到取消输入时停止生成第一触觉输出(例如，警告触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并且帮助用户提供所需的输入来实现预期结果)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并参考图10B，生成第一触觉输出包括(10014)生成持续直到满足第二标准或当检测到取消输入时为止的连续触觉输出(例如，图5G3中的触觉输出609或图5H3和5H4中的触觉输出631)。在一些实施例中，不满足第一标准的按压输入使得输入区域处的触觉输出发生器生成离散而且不连续的按钮按压触觉输出(例如弱按下点击触觉输出)，并且满足第一标准的按压输入使得输入区域处的触觉输出发生器生成连续的警告触觉输出(例如，强而且持续的警告触觉输出)，并且设备放弃生成离散而且不连续的触觉输出。生成持续直到满足第二标准(例如，在发起操作的执行并且该执行不可逆时)或者当在满足第二标准之前已经检测到取消输入(例如，在发起操作的执行并且该执行不可逆时之前)时为止的连续触觉输出(例如，警告触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并且帮助用户提供所需的输入来实现预期结果)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并参考图10B，生成连续触觉输出包括(10016)单调改变(例如，单调增大，或单调减小)对应于第一触觉输出的触觉输出轮廓的至少一个方面(例如，增大幅值、增大峰值幅值、增大频率、增大伴随音频的音量、增大伴随音频的频率等)。例如，当侧按钮上的输入(例如，按压输入或触摸保持输入)满足用于触发警告的标准以发起紧急呼叫时，位于侧按钮处的触觉输出发生器生成连续触觉输出，该连续触觉输出具有幅值增大而且频率恒定的振动序列，以及具有频率增大而且音量增大的伴随音频。又如，当侧按钮上的输入满足用于触发警告的标准以激活基于语音的数字助理时，位于侧按钮处的触觉输出发生器生成触觉输出直到满足第二标准或当检测到取消输入时为止，该触觉输出具有幅值增大而且频率减小的振动序列。生成连续而且单调变化的(例如，逐步增大的)触觉输出(例如，警告触觉输出)，该触觉输出持续直到满足第二标准(例如，在发起操作的执行并且该执行不可逆时)或者当在满足第二标准之前已经检测到取消输入(例如，在发起操作的执行并且该执行不可逆时之前)时为止增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈并且帮助用户提供所需的输入来实现预期结果)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并且参考图10B，第一标准包括(10018)当输入的特征强度超过第一强度阈值时满足以便满足第一标准的要求(例如，侧按钮上的接触或触敏显示器上的示能表示上的接触进行的轻按压输入满足警告发起标准)。在一些实施例中，第一标准还包括以下要求：在输入区域上初始检测到接触直到满足第一标准的时间期间，输入区域上的接触保持基本上静止(例如，在阈值量的时间内具有小于阈值量的移动)。当输入区域上的输入满足第一标准的基于强度的要求但该输入不满足第二标准时生成警告触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并且参考图10B，第二标准包括(10020)当输入的特征强度超过比第一强度阈值大的第二强度阈值时满足以便满足第二标准的要求。例如，该输入由与输入区域的接触提供，设备还要求该输入包括该接触(例如，相同接触)在超过阈值量的时间的小于阈值量的移动(例如，当对照第一标准和第二标准评估该输入时，该接触基本上静止)。当输入区域上的输入满足第一标准的基于强度的要求但该输入不满足基于强度的第二标准(例如，具有相对于第一标准增强的强度要求)时生成警告触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并且参考图10B，第一标准包括(10022)当输入以小于阈值量的移动保持至少第一阈值量的时间时满足以便满足第一标准的要求(例如，侧按钮上的接触或触敏显示器上的示能表示上的接触进行的触摸保持输入(例如，具有并发强度要求或不具有并发强度要求)满足警告发起标准。当输入区域上的输入满足第一标准的基于时间的要求(例如，触摸保持要求)但该输入不满足第二标准时生成警告触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并且参考图10B，第二标准包括(10024)当输入以小于阈值量的移动保持至少比第一阈值量的时间长的第二阈值量的时间时满足以便满足第二标准的要求。例如，侧按钮上的接触或触敏显示器上的示能表示上的接触进行的长触摸保持输入(例如，具有并发强度要求或不具有并发强度要求)满足操作执行标准。当输入区域上的输入满足第一标准的基于时间的要求(例如，触摸保持要求)但该输入不满足基于时间的第二标准(例如，具有相对于第一标准增强的时间要求)时生成警告触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并且参考图10C，与输入区域相关联的触觉输出发生器位于(10026)输入区域处并在输入区域产生局部触觉输出。该设备还包括第二触觉输出发生器，该第二触觉输出发生器不驻留在输入区域并且产生整个设备触觉输出(例如，使整个设备振动并且不被局部化到整个设备触觉输出发生器处的触觉输出)。方法10000包括：响应于检测到输入区域上的输入：根据确定输入区域上的该输入满足第一标准，除了被局部化到输入区域的第一触觉输出之外，由第二触觉输出发生器生成不被局部化到输入区域的第三触觉输出(例如，可在设备上的任何地方检测到的整个设备触觉输出)。当输入区域上的输入满足第一标准但该输入不满足第二标准(例如，相对于第一标准具有增强的要求)时使用局部触觉输出发生器和整个设备触觉输出发生器两者生成触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈以帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并且参考图10C，第一触觉输出是(10028)模拟输入对输入区域的致动的离散触觉输出；并且其中第三触觉输出是连续触觉输出，该连续触觉输出提供持续警告反馈直到输入满足第二标准或检测到取消输入为止。例如，当侧按钮上的按压输入满足第一标准时，第一触觉输出模拟按钮点击，并且第三触觉输出是持续并延伸到整个设备的振动(例如，可通过用户的手在侧按钮区域之外的位置握持设备来检测)。例如，当操作正在进行紧急呼叫时，在用户以所需强度(例如，至少轻按压强度)在侧按钮上按压所需时间段(例如，5秒)之后，侧按钮上的输入满足警告发起标准，并且侧按钮处的局部触觉输出发生器生成按钮点击触觉输出(例如，在初始按压时，在侧按钮处生成轻点击触觉输出，并且在满足警告发起标准时，在侧按钮处生成强点击触觉输出)。除了由在侧按钮处生成的局部触觉输出生成的按钮点击触觉输出之外，由内部触觉输出发生器生成具有增大的幅值的持续的整个设备警告触觉输出(例如，持续的强振动)，伴随着警报声效果。当输入区域上的输入满足第一标准但该输入不满足第二标准(例如，相对于第一标准具有增强的要求)时生成局部触觉输出以模拟该输入对输入区域的致动并且生成持续的整个设备触觉输出作为对即将发生的操作的警告增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈以帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法10000并且参考图10C，响应于检测到输入区域上的输入：根据确定输入区域上的该输入满足第一标准(例如，警告发起标准)，设备显示(10030)指示(例如，动画，倒计时定时器、燃烧的熔丝、具有用于触发操作的执行的阈值指示符的进度或强度条等)：当输入区域上的输入满足附加标准时(例如，具有增大的强度，或保持更长的时间)将执行该操作。例如，当操作正在激活基于语音的数字助理时，在用户以所需强度(例如，至少轻按压强度)在侧按钮上按压所需时间段(例如，1.5秒)之后，侧按钮上的输入满足警告发起标准，并且侧按钮处的局部触觉输出发生器生成长按压按钮点击触觉输出(例如，在初始按压时，在侧按钮处生成轻点击触觉输出，并且在满足警告发起标准时，在侧按钮处生成强点击触觉输出)。除了由在侧按钮处生成的局部触觉输出生成的长按压按钮点击触觉输出之外，还生成声音和屏幕上动画，指示在输入满足附加标准的情况下数字助理将变得可用(例如，相对于激活数字助理所需的强度阈值，动态更新以反映当前接触强度的强度计)。在输入区域上的输入满足第一标准后，显示当该输入满足附加标准时操作将执行的指示增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈以帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
应当理解，已经对图10A-图10C中的操作进行描述的特定次序仅仅是示例性的，并非旨在指示所述次序是可以执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外，应当指出的是，本文相对于本文所述的其他方法(例如，方法6000、7000、8000、9000、11000和12000)描述的其他过程的细节同样以类似的方式适用于上文相对于图10A至图10C描述的方法10000。例如，上文参考方法10000所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文参考本文所述的其他方法(例如，方法6000、7000、8000、9000、11000和12000)所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的特征中的一者或多者。为了简明起见，此处不再重复这些细节。
图11A至图11B是示出了根据一些实施例的根据输入区域与在输入区域上检测到的用户手指之间是否存在间隙材料来调节输入区域上的输入的触觉输出的方法11000的流程图。
方法11000涉及根据在输入对象(例如，用户的手指)和设备的在其上检测到输入的输入区域之间是否存在间隙材料来改变触觉输出的特征(例如，体现在触觉输出的触觉输出轮廓中，包括幅值、模式、频率、伴随音频、在其他同时生成的触觉输出之间的协调等)。根据间隙材料的存在/不存在并且任选地根据间隙材料的性质来改变触觉输出的特征使得当设备在各种条件下操作(例如，包裹在各种类型的壳体中，由戴手套的手指操作，或透过衣服操作)时设备能够向用户提供一致的触觉反馈。在不同操作条件下提供一致的触觉反馈增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
方法11000在电子设备(例如，图3的设备300，或图1A和图4A的便携式多功能设备100)(例如，具有平坦的前侧(例如，显示器侧)、平坦的背侧(例如，背侧)和通过锋利边缘或倒圆边缘接合前侧和背侧的一个或多个平坦的、倾斜的或弯曲的周边侧(例如，由锋利直边缘接合的四个窄平面，由倒圆边缘接合的四个窄平面，或连续曲面)的平板形设备)处执行，该电子设备具有显示器(例如，设置在该设备的前侧上的触摸屏显示器)(例如，占据该设备的基本上整个前侧的触摸屏显示器)、不同于显示器的输入区域(例如，输入区域是设置在该设备的与该设备的前侧相邻的一个或多个周边侧(例如，周边侧包括设备的左周边侧、右周边侧、顶部周边侧或底部周边侧中的一者或多者)上的侧按钮xxx)，以及用于生成触觉输出的一个或多个触觉输出发生器。在一些实施例中，输入区域是例如基于电容式和/或电阻式触摸感测技术来检测与触敏表面的接触的强度的触敏表面。在一些实施例中，输入区域是基于耦接到表面的力、压力和/或振动传感器来检测输入对象(例如，手指)的接触和/或按压的存在的触敏表面。在一些实施例中，输入区域是与显示器(例如，触摸屏显示器)共面的表面。在一些实施例中，输入区域是设置在设备的与设备的前侧相邻的周边侧(例如，左边缘、右边缘、顶部边缘或底部边缘，或者沿着那些边缘中的两个或更多个边缘)上的表面(例如，突起区域、凹入区域或与周围表面齐平的区域)。在一些实施例中，电子设备还包括用于检测与设备的显示器的接触的存在和/或强度的一个或多个第一传感器(例如，用于检测触摸屏显示器上的接触的强度的电容传感器和/或电阻传感器)，以及用于检测与设备的第一输入区域的接触的存在和/或强度的一个或多个第二传感器(例如，用于检测与第一输入区域(例如，侧“按钮”区域)的接触的存在、激活和任选地强度的电容传感器、电阻传感器、压力传感器、力传感器和/或振动传感器))。在一些实施例中，设备还包括用于生成触觉输出的一个或多个触觉输出发生器(例如，用于在第一输入区域生成局部触觉输出的按钮致动器，和/或用于生成整个设备触觉输出的一个或多个内部致动器等)。
根据方法11000并且参考图11A，设备检测(11002)手指在输入区域上的按压输入。根据方法11000并且参考图11A，响应于检测到输入区域上的按压输入(例如，检测到手指进行的接触的强度增大到高于第一强度阈值(例如，接触检测阈值、大于接触检测阈值的轻按压强度阈值，以及大于轻按压强度阈值的深按压强度阈值))(11004)：根据确定输入区域未由间隙材料与手指分开(例如，当输入区域直接暴露于手指的皮肤时，没有壳体或衣服(例如，由织物、塑料、皮革、有机硅、羊毛、木材、金属等制成)将设备的包括输入区域的部分与手指的皮肤分开，设备生成第一触觉输出(例如，图5I1中的触觉输出649、图5I2中的触觉输出667、图5I3中的触觉输出679、图5I4中的触觉输出693等)；以及根据确定输入区域由第一间隙材料(例如，在围住设备的包括输入区域的部分的壳体中或围住手指的手套中使用的第一织物、塑料、皮革、有机硅、木材、金属等)与手指分开，设备生成不同于第一触觉输出(例如，分别是图5I1中的触觉输出649、图5I2中的触觉输出667、图5I3中的触觉输出679、图5I4中的触觉输出693)的第二触觉输出(例如，分别是图5I1中的触觉输出653和657、图5I2中的触觉输出671和675、图5I3中的触觉输出683和687、图5I4中的触觉输出697和701)(例如，第二触觉输出适于通过壳体或手套的间隙材料在用户的手指上产生类似的触感)。
根据方法11000并且参考图11A，响应于检测到输入区域上的按压输入，设备执行(11006)对应于该按压输入的操作(例如，在显示器上显示可选选项的菜单，提供用于设备的第一属性的设备状态(例如，铃声装置音量、未读通知的可用性等))。响应于输入区域上的按压输入执行相同的操作，结合生成具有根据输入区域和输入区域上的手指之间是否存在间隙材料而选择的触觉输出轮廓的相应触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法11000并参考图11A，根据确定按压输入的特征强度超过第一强度阈值(例如，轻按压强度阈值)来执行第一触觉输出和第二触觉输出的生成；并且该方法还包括(11008)：响应于检测到按压输入：根据确定按压输入的特征强度未超过第一强度阈值，放弃生成第一触觉输出并且放弃生成第二触觉输出(例如，在满足第一强度阈值之前，设备不响应于按压输入生成任何触觉输出，并且不执行对应于按压输入的操作)。当输入的特征强度未超过第一强度阈值时放弃生成触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过减少对用户的不必要的干扰，帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备进行交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法11000并且参考图11A，设备选择(11010)用于第二触觉输出轮廓的第二触觉输出轮廓，使得第一间隙材料的由第二触觉输出生成的移动(例如，第一间隙材料的一部分接近或邻近输入区域)基本上类似于设备上的输入区域的由第一触觉输出生成的移动(例如，第二触觉输出通过第一间隙材料在手指上产生与由第一触觉输出直接在手指上产生的类似的触感(例如，如通过振动强度、频率等所测量的))。通过为在存在间隙材料的情况下生成的触觉输出选择触觉输出轮廓来使得在用户的手指上产生一致的触感(例如，导致间隙材料在输入区域上方的移动，该移动基本上类似于输入区域在不存在间隙材料的情况下的移动)增强了设备的可操作性，并且使得设备用户界面更高效(例如，通过提供改进的反馈以帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法11000并且参考图11A，为第二触觉输出轮廓选择第二触觉输出轮廓包括(11012)基于第一间隙材料和对应于第一触觉输出的第一触觉输出轮廓选择相应的特定于材料的触觉输出轮廓(例如，取决于第一间隙材料(例如，皮革相比塑料相比有机硅)的用于第二触觉输出的不同的第二触觉输出轮廓)。在一些实施例中，由设备基于设备上感测第一间隙材料的特征的传感器来确定材料。在一些实施例中，材料由设备基于在第一间隙材料中编码的信息(例如，条形码、QR码或嵌入在第一间隙材料中的RFID或NFC信息)来确定。在一些实施例中，材料基于设备处的用户输入(例如，从用户界面中的选项列表中选择设备壳体材料的类型)来确定。根据间隙材料和用于在不存在间隙材料的情况下生成的触觉输出的触觉输出轮廓来为在存在间隙材料的情况下生成的触觉输出选择触觉输出轮廓允许设备在各种操作条件下(例如，在输入区域和用户手指之间使用不同的壳体材料和手套材料)向用户提供一致的触觉反馈，这增强了设备的可操作性，并且使得设备用户界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法11000并且参考图11B，为第二触觉输出轮廓选择第二触觉输出轮廓包括(11014)根据确定第一间隙材料是在包围设备的包括输入区域的至少一部分的壳体中还是第一间隙材料在包围输入区域上的手指的手套中来选择不同的触觉输出轮廓。例如，这在图5I1和图5I2中示出。根据间隙材料是设备上的壳体还是用户的手指上的手套来为在存在间隙材料的情况下生成的触觉输出选择触觉输出轮廓允许设备在各种操作条件下(例如，在输入区域和用户手指之间使用壳体还是使用手套)向用户提供一致的触觉反馈，这增强了设备的可操作性，并且使得设备用户界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法11000并且参考图11B，第一触觉输出和第二触觉输出由一个或多个触觉输出发生器种的第一触觉输出发生器生成(11016)，该第一触觉输出发生器驻留在输入区域并且在输入区域产生局部触觉输出(例如，与在设备上的许多不同位置同时产生触觉输出相反，诸如经由耦接到设备的外壳的触觉输出发生器)。在一些实施例中，第一触觉输出发生器是围绕输入区域下方的固定枢轴来回摇摆的表面振荡器或能够生成特别指向输入区域的触觉输出的其他触觉输出发生器。在一些实施例中，第一触觉输出发生器在侧按钮区域提供局部振动，并且不是在设备处作为整体提供。局部振动在设备上的不同位置处具有变化的幅值，其中在操作侧按钮区域时用户的手指通常将搁置的侧按钮区域上具有较大的幅值，并且在侧按钮区域之外的当操作侧按钮区域时用户的手通常将不搁置的其他位置处具有较小的幅值。使用驻留在输入区域的触觉输出发生器生成局部触觉输出作为对输入区域上的按压输入的反馈允许设备在各种操作条件下(例如，在输入区域和用户手指之间具有壳体或具有手套的情况下)直接向用户的手指提供一致的触觉反馈，这增强了设备的可操作性，并且使得设备用户界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法11000并且参考图11B，第一材料包括(11018)围住设备的包括输入区域的至少一部分的壳体的材料。例如，这在图5I1中示出。在具有或不具有围住设备的壳体的情况下提供一致的触觉反馈增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法11000并且参考图11B，第一材料包括(11020)围住输入区域上的手指的手套的材料。例如，这在图5I2中示出。在手套在用户的手指上或者手套不在用户的手指上的情况下提供一致的触觉反馈增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法11000并且参考图11B，设备根据由用户指定的设置参数确定(11022)输入区域和手指之间是否存在间隙材料。利用由用户指定的设置参数是确定输入区域和用户的手指之间是否存在间隙材料的简单而且准确的方式。准确而且适应性地确定是否存在广泛适用于用户设备的无限数量的使用场景的间隙材料增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法11000并且参考图11B，设备根据由位于输入区域的一个或多个传感器提供的按压输入的电容特性来确定(11024)输入区域和手指之间是否存在间隙材料。利用按压输入的电容特性来确定在输入区域和用户的手指之间是否存在间隙材料是自动的并且可容易地适应各种各样的间隙材料类型。利用按压输入的电容特性来确定在输入区域和手指之间是否存在间隙材料增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
应当理解，已经对图11A-图11B中的操作进行描述的特定次序仅仅是示例性的，并非旨在指示所述次序是所述操作可被执行的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外，应当指出的是，本文相对于本文所述的其他方法(例如，方法6000、7000、8000、9000、10000和12000)描述的其他过程的细节同样以类似的方式适用于上文相对于图11A至图11B描述的方法11000。例如，上文参考方法11000所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文参考本文所述的其他方法(例如，方法6000、7000、8000、9000、10000和12000)所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的特征中的一者或多者。为了简明起见，此处不再重复这些细节。
图12A至图12E是示出了根据一些实施例的针对在设置在设备的周边侧上的显示器外输入区域上检测到的不同类型的输入提供不同触觉输出的方法12000的流程图。
方法12000涉及响应于在设备的与显示器相邻的周边侧上的屏幕外输入区域上检测到的不同类型的触摸输入而生成具有不同触觉输出轮廓的触觉输出，包括输入区域上的按压输入和跨输入区域的轻扫输入(例如，跨细长输入区域的在水平方向的轻扫输入或沿细长输入区域的在垂直方向的轻扫输入)。响应于在输入区域上检测到的不同类型的输入而提供不同的触觉反馈(经由具有不同触觉输出轮廓的触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
方法12000在电子设备(例如，图3的设备300，或图1A和图4A的便携式多功能设备100)(例如，具有平坦的前侧(例如，显示器侧)、平坦的背侧(例如，背侧)和通过锋利边缘或倒圆边缘接合前侧和背侧的一个或多个平坦的、倾斜的或弯曲的周边侧(例如，由锋利直边缘接合的四个窄平面，由倒圆边缘接合的四个窄平面，或连续曲面)的平板形设备)处执行，该电子设备具有设置在该设备的前侧上的显示器(例如，占据该设备的基本上整个前侧的触摸屏显示器、包括与显示器共面的触敏表面的触摸屏显示器)、设置在该设备的与该设备的前侧相邻的一个或多个周边侧上的输入区域(例如，侧按钮455、456和/或457)(例如，周边侧包括设备的左周边侧、右周边侧、顶部周边侧或底部周边侧中的一者或多者)，以及用于生成触觉输出的一个或多个触觉输出发生器(例如，用于在第一输入区域生成局部触觉输出的按钮致动器，和/或用于生成整个设备触觉输出的一个或多个内部致动器等)。在一些实施例中，输入区域是例如基于电容式和/或电阻式触摸感测技术来检测与触敏表面的接触的强度的触敏表面。在一些实施例中，输入区域是基于耦接到表面的力、压力和/或振动传感器来检测输入对象(例如，手指)的接触和/或按压的存在的触敏表面。在一些实施例中，输入区域是与显示器(例如，触摸屏显示器)共面的表面。在一些实施例中，输入区域是设置在设备的与设备的前侧相邻的周边侧(例如，左边缘、右边缘、顶部边缘或底部边缘，或者沿着那些边缘中的两个或更多个边缘)上的表面(例如，突起区域、凹入区域或与周围表面齐平的区域)。在一些实施例中，电子设备还包括用于检测与设备的显示器的接触的存在和/或强度的一个或多个第一传感器(例如，用于检测触摸屏显示器上的接触的强度的电容传感器和/或电阻传感器)，以及用于检测与设备的第一输入区域的接触的存在和/或强度的一个或多个第二传感器(例如，用于检测与第一输入区域(例如，侧“按钮”区域)的接触的存在、激活和任选地强度的电容传感器、电阻传感器、压力传感器、力传感器和/或振动传感器))。
根据方法12000并且参考图12A，设备检测(12002)输入区域上的输入(例如，检测输入区域上的接触进行的输入)。例如，输入是按压输入(例如，接触506进行的输入、接触518进行的输入、接触530进行的输入、接触534进行的输入、接触542和544进行的输入、接触552进行的输入、接触570进行的输入、接触594进行的输入、接触579进行的输入、接触565进行的输入、接触557进行的输入、接触509进行的输入、接触605进行的输入、接触627进行的输入)、水平轻扫输入(例如，接触585进行的输入)或垂直轻扫输入(例如，接触564进行的输入、接触580进行的输入、接触551进行的输入、接触547进行的输入)中的一者，如图5A1至图5A8、图5B1至图5B11、图5C1至图5C20、图5D1至图5D24、图5E1至图5E5、图5F1至图5F6、图5G1至图5G5以及图5H1至图5H5所示。
响应于检测到输入区域上的输入(12004)：根据确定该接触在输入区域上进行的输入(例如，图5A5中的接触506进行的轻按压输入、图5B3中的接触518进行的轻按压输入、图5B7的中接触534进行的轻按压输入、图5C6的中接触552进行的轻按压输入、图5D17中的接触557进行的轻按压输入、图5F3中的接触509进行的轻按压输入或图5H2中的接触627进行的轻按压输入)满足第一标准(例如，按钮按压标准)，其中第一标准(例如，按钮按压标准)要求输入的强度增大到高于第一强度阈值(例如，大于接触检测阈值且小于深按压强度阈值的轻按压强度阈值)以便满足第一标准，设备执行第一操作(例如，显示可选选项的菜单，显示用于控制设备参数(例如，音量、铃声装置设置等)的控制对象)，并且生成具有第一触觉输出轮廓(例如，以模拟按钮沿垂直于输入区域的在接触位置处的区域的方向的致动)的第一触觉输出(例如，图5A5中的触觉输出510、图5B3中的触觉输出524、图5B7中的触觉输出536、图5C6中的触觉输出566、图5D17中的触觉输出553、图5F3中的触觉输出625或图5H2中的触觉输出629)。在一些实施例中，在输入的向下按压阶段期间生成第一触觉输出。在一些实施例中，在输入的释放阶段期间生成第一触觉输出。在一些实施例中，生成一对触觉输出，其中一个触觉输出用于向下按压，另一个触觉输出用于释放。
响应于检测到输入区域上的输入(12004)：根据确定输入区域上的该输入(例如，图5D2至图5D3中的接触585进行的输入、图5C10至图5C12中的接触564进行的输入、图5C15至图5C17中的接触580进行的输入、图5D18至图5D19中的接触551进行的输入、接触547进行的输入)满足不同于第一标准的第二标准(例如，第二标准是按钮切换标准或按钮滑动标准中的一者)，其中第二标准(例如，按钮切换标准或按钮滑动标准中的一者)要求输入包括接触在输入区域上沿第一方向的移动(例如，在设备的周边侧上的跨细长触敏区域的方向上(对于按钮切换标准)，或者在沿设备的周边侧上的细长触敏区域的方向上(对于按钮滑动标准))以便满足第二标准，设备执行不同于第一操作的第二操作(例如，打开/关闭铃声装置)，并且生成具有与第一触觉输出轮廓不同的第二触觉输出轮廓的第二触觉输出(例如，图5D3中的触觉输出581、图5C10至图5C12中的触觉输出5663、图5C15至图5C17中的触觉输出586和592、图5D18至图5D19中的触觉输出549和545)(例如，模拟响应于横向移动或力(例如，在按钮切换输入中)而切换的开关切换，或者模拟响应于横向移动或力(例如，在按钮滑动输入中)而移动的滑块的滑动的触觉输出)。
根据方法12000并且参考图12A，响应于检测到输入区域上的输入：根据确定输入区域上的该输入(例如，图5D2至图5D3中的接触585进行的输入、图5C10至图5C12中的接触564进行的输入、图5C15至图5C17中的接触580进行的输入、图5D18至图5D19中的接触551进行的输入、接触547进行的输入)满足不同于第一标准和第二标准的第三标准(例如，第三标准是按钮切换标准或按钮滑动标准中的另一者)，其中第三标准要求输入包括接触在输入区域上沿不同于(例如，正交于)第一方向的第二方向的移动以便满足第三标准，设备执行(12006)不同于第一操作和第二操作的第三操作(例如，打开/关闭显示器，激活基于语音的数字助理、开始关机过程)，并且设备生成具有与第一触觉输出轮廓和第二触觉输出轮廓不同的第三触觉输出轮廓的第三触觉输出(例如，图5D3中的触觉输出581、图5C10至图5C12中的触觉输出5663、图5C15至图5C17中的触觉输出586和592、图5D18至图5D19中的触觉输出549和545)(例如，模拟按钮切换或按钮滑动中的另一者的触觉输出)。响应于在输入区域上检测到的不同类型的输入(包括按压输入、沿着输入区域的轻扫输入、横跨输入区域的轻扫输入)而提供不同的触觉反馈(经由具有不同触觉输出轮廓的触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12A，响应于检测到输入区域上的输入：根据确定输入区域上的该输入(例如，图5A6中的接触506进行的深按压输入或图5B9中的接触534进行的深按压输入)满足不同于第一标准和第二标准(以及第三标准)的第四标准(例如，深按压标准)，其中第四标准(例如，深按压标准)要求输入的强度增大到高于比第一强度阈值(例如，轻按压强度阈值)大的第二强度阈值(例如，深按压强度阈值)以便满足第四标准，设备执行(12008)不同于第一操作和第二操作(以及第三操作)的第四操作(例如，开始针对即将发生的操作的警告)，并且设备生成具有与第一触觉输出轮廓和第二触觉输出轮廓(以及第三触觉输出轮廓)不同的第四触觉输出轮廓的第四触觉输出(例如，图5A6中的触觉输出512或图5B9中的触觉输出538)(例如，第四触觉输出是模拟比由轻按压输入触发的常规按钮点击更强的按钮点击的触觉输出)。响应于在输入区域上检测到的不同类型的输入(包括按压输入、深按压输入和轻扫输入)而提供不同的触觉反馈(经由具有不同触觉输出轮廓的触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12B，响应于检测到输入区域上的输入：根据确定输入区域上的该输入(例如，图5A3中的接触506进行的输入)满足不同于第一标准和第二标准(以及第三标准和第四标准)的第五标准(例如，按钮触摸标准)，其中第五标准(例如，按钮触摸标准)要求输入的强度保持低于第一强度阈值(例如，轻按压强度阈值)(例如，当用户简单地将他/她的手指搁置在输入区域上使得接触强度高于接触检测强度阈值时，满足第五标准)以便满足第五标准，设备执行(12010)不同于第一操作和第二操作(以及第三操作和第四操作)的第五操作(例如，显示菜单的提示)，并且(任选地)设备生成具有与第一触觉输出轮廓和第二触觉输出轮廓(以及第三触觉输出轮廓和第四触觉输出轮廓)不同的第五触觉输出轮廓的第五触觉输出(例如，图5A3中的触觉输出508)(例如，第五触觉输出是模拟纹理以便用户知道输入区域位于何处的触觉输出)。在一些实施例中，当满足第五标准时，设备放弃生成第五触觉输出。响应于在输入区域上检测到的不同类型的输入(包括按压输入、轻扫输入和轻触摸输入或手指搁置输入)而提供不同的触觉反馈(经由具有不同触觉输出轮廓的触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12B，响应于检测到输入区域上的输入：根据确定输入区域上的该输入(例如，图5B3中的接触518进行的输入)满足不同于第一标准和第二标准(以及第三标准、第四标准和第五标准)的第六标准(例如，上部按钮按压标准)，其中第六标准要求在输入区域的第一预定义区域(例如，侧按钮的上半部)保持接触并且该接触的强度增大到高于第一强度阈值(例如，轻按压强度阈值)以便满足第六标准，设备执行(12012)不同于第一操作和第二操作(以及第三操作、第四操作和第五操作)的第六操作(例如，增大控制参数(例如，音量、亮度等)的值)，并且设备生成具有与第一触觉输出轮廓和第二触觉输出轮廓(以及第三触觉输出轮廓、第四触觉输出轮廓和第五触觉输出轮廓)不同的第六触觉输出轮廓的第六触觉输出(例如，图5B3中的触觉输出524)(例如，第六触觉输出是模拟在摇臂开关的向上棘动的上部上的按压的触觉输出)。根据确定输入区域上的该输入(例如，图5B7中的接触534进行的输入)满足不同于第一标准、第二标准(第三标准、第四标准、第五标准)和第六标准的第七标准(例如，下部按钮按压标准)，其中第七标准要求在输入区域的低于第一预定义区域的第二预定义区域(例如，第二预定义区域是侧按钮的下半部)保持接触并且该接触的强度增大到高于第一预定义强度阈值(例如，轻按压强度阈值)以便满足第七标准，设备执行不同于第一操作和第二操作(第三操作、第四操作和第五操作)和第六操作的第七操作(例如，减小控制参数(例如，音量、亮度等)的值)，并且设备生成具有与第一触觉输出轮廓和第二触觉输出轮廓(以及第三、第四、第五触觉输出轮廓和任选的第六触觉输出轮廓)不同的第七触觉输出轮廓的第七触觉输出(例如，图5B7中的触觉输出536)(例如，第七触觉输出是模拟在摇臂开关的向下棘动的下部上的按压的触觉输出)。例如，在侧按钮的顶部上按压使得音量增大，并且生成一系列触觉输出，该一系列触觉输出的量值根据增大的音量值而增大；当在侧按钮的底部上按压使得音量减小时，并且生成一系列触觉输出，该一系列触觉输出的量值根据减小的音量值而减小。响应于在输入区域的不同子区域上检测到的触摸输入而提供不同的触觉反馈(经由具有不同触觉输出轮廓的触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12C，响应于检测到输入区域上的输入：根据确定输入区域上的该输入(例如，图5B10至图5B11中的接触542和544进行的输入)满足不同于第一标准和第二标准(以及第三标准、第四标准、第五标准)以及第六标准和第七标准的第八标准(例如，同时按钮按压标准)，其中第八标准要求在第一接触的强度高于第一强度阈值(例如，轻按压强度阈值)的情况下第一接触保持在输入区域的第一预定义区域(例如，侧按钮的上半部)，同时在第二接触的强度高于第一预定义强度阈值(例如，轻按压强度阈值)的情况下第二接触保持在输入区域的第二预定义区域以便满足第八标准，设备执行(12014)不同于第一操作、第二操作(第三操作、第四操作、第五操作)以及第六操作和第七操作的第八操作(例如，切换成使用侧按钮控制不同的参数)，并且设备生成具有与第一触觉输出轮廓和第二触觉输出轮廓(以及第三、第四、第五触觉输出轮廓以及第六和第七触觉输出轮廓)不同的第八触觉输出轮廓的第八触觉输出(例如，图5B11中的触觉输出546和548)(例如，第八触觉输出是模拟将两个按钮一起按压的触觉输出)。响应于在输入区域的不同子区域上检测到的相应按压输入和在输入区域的两个子区域上同时检测到的按压输入而提供不同的触觉反馈(经由具有不同触觉输出轮廓的触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12C，响应于检测到输入区域上的输入：根据确定输入区域上的该输入(例如，图5A3中的接触506进行的输入或图5H3中的接触627进行的输入)满足不同于第一标准和第二标准(以及第三、第四、第五、第六、第七和第八标准)的第九标准(例如，长按压标准)，其中第九标准(例如，长按压标准)要求接触以小于阈值量的移动在输入区域上保持至少阈值量的时间(例如，3秒)(例如，第九标准由侧按钮上的触摸保持手势来满足)以便满足第九标准，设备执行(12016)不同于第一操作和第二操作(以及第三、第四、第五、第六、第七和第八操作)的第九操作(例如，激活基于语音的数字助理)，并且设备生成具有与第一触觉输出轮廓和第二触觉输出轮廓(以及第三、第四、第五、第六、第七和第八触觉输出轮廓)不同的第九触觉输出轮廓的第九触觉输出(例如，图5A3中的触觉输出508，或图5H3中的触觉输出631)。响应于在输入区域上检测到的不同类型的输入(包括按压输入、轻扫输入和长按压输入)而提供不同的触觉反馈(经由具有不同触觉输出轮廓的触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12C，设备检测(12018)输入区域上的输入的终止。响应于检测到输入的终止：根据确定已经基于输入满足一个或多个基于强度的标准(例如，按钮激活标准、深按压标准、长按压标准、同时按钮按压标准等)而响应于该输入生成了触觉输出，设备生成具有相应按钮释放触觉输出轮廓的相应按钮释放触觉输出。在一些实施例中，不同的按钮释放触觉输出轮廓用于响应于输入而生成的不同触觉输出。例如，用于深按压输入的按钮释放触觉输出轮廓不同于用于侧按钮上的轻按压输入的按钮释放触觉输出轮廓。根据确定已经基于满足一个或多个基于强度的标准(例如，用于手指搁置输入、轻按压输入、深按压输入、双指按压输入等)生成了触觉输出而生成相应的按钮释放触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过通知用户已检测到输入的终止，帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12D，检测输入区域上的输入包括在检测到输入的强度增大到高于第一强度阈值之前检测输入的强度增大，并且其中该方法包括(12020)：响应于在检测到输入的强度增大到高于第一强度阈值之前检测到输入的强度增大：在显示器上显示具有至少一个视觉特征(例如，图5A4中的唤醒屏幕用户界面501的可见性，图5C3至图5C5中的菜单556显现的量)的视觉反馈，该视觉特征以根据输入区域上的输入的当前强度的量而变化(例如，使用户界面对象在显示器上显现根据第一输入的当前强度而变化的量)。在一些实施例中，随着接触强度在第一输入区域(例如，侧按钮)上增大，第一用户界面对象(例如，菜单、剪贴板)从显示器的与第一输入区域(例如，侧按钮)相邻的边缘逐渐滑动到显示器上。在一些实施例中，随着第一接触的强度在第一输入区域(例如，侧按钮)上增大，第一用户界面对象(例如，菜单或剪贴板)逐渐淡入到显示器上。在一些实施例中，用户界面对象在显示器上可见的量可随着接触的强度在达到比第一强度阈值大的第二强度阈值之前变化(例如，增大和/或减小)而变化。一旦接触的强度增大到高于第二强度阈值，用户界面对象就被完全显示。在一些实施例中，用户界面滑动到显示器上的方向与手指施加在第一输入区域上的力/压力的方向相同或平行。提供在输入满足第一标准的强度阈值之前根据输入区域上的输入的强度而改变的动态视觉反馈增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈以帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并参考图12D，在显示器上显示视觉反馈包括(12022)随着用户界面对象沿对应于施加在输入区域上的力的方向(例如，用户界面滑动到显示器上的方向与手指在第一输入区域上施加的力/压力的方向相同或平行)的方向移动到显示器上而显现该用户界面对象(例如，在图5C3至图5C5中显现的菜单556，或图5D4至图5D5中的菜单577)。随着用户界面对象沿对应于施加在输入区域上的力的方向的方向移动到显示器上而显现该用户界面对象增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈以帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并参考图12D，根据确定输入满足第二标准(例如，按钮切换标准或按钮滑动标准)，执行第二操作并且生成具有第二触觉输出轮廓的第二触觉输出，包括(12024)：确定第二操作是用于将设备属性的值从第一值改变为不同于第一值的第二值(例如，从开到关、从低值到高值等)，还是从第二值改变为第一值(例如，从关到开、从高值到低值等)；以及根据确定第二操作是用于将设备属性的值从第一值改变为第二值(例如，从开到关，或增大设备属性的值)，为第二触觉输出轮廓选择第一组参数值(例如，第一频率、第一幅值、第一模式等)；以及根据确定第二操作是用于将设备属性的值从第二值改变为第一值(例如，从关到开，或减小设备属性的值)，为第二触觉输出轮廓选择第二组参数值(例如，第二频率、第二幅值、第二模式等)。例如，类似的触觉输出用于模拟由被翻动的切换开关产生的触感；但是根据所改变的受控设备属性的实际状态，根据输入所改变的状态的方向来改变第二触觉输出的一些(而不是全部)方面(例如，幅值，但不是模式；或模式，但不是幅值)。又如，类似的触觉输出用于模拟由移动的机械滑块产生的触感；但是根据受控设备属性的值的实际改变方向，根据输入所改变的值的方向来改变第二触觉输出的一些(而不是全部)方面(例如，幅值，但不是模式；或模式，但不是幅值)。根据轻扫输入(例如，沿一个方向的轻扫与沿相反方向的轻扫)所引起的设备属性值的变化方向(例如，从值1到值2还是从值2到值1)来提供不同的触觉反馈(经由具有不同触觉输出轮廓的触觉输出)增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12D，设备包括(12026)用于检测输入区域上的接触的强度的强度传感器(例如，电容传感器、电阻传感器、力传感器、压力传感器和/或振动传感器)，其中在检测到输入区域的致动之前进行强度的检测(例如，输入区域的致动不依赖于通过塌缩提供电阻的物理机构诸如圆顶开关或其他机械开关机构来完成电路)。例如，接触的强度增大不沿按压输入的方向致动侧按钮的表面，并且检测相对于强度阈值的强度不依赖于侧按钮的表面的物理移动与移动阈值之间的比较。响应于按压输入而生成第一触觉输出不是根据按压输入引起的表面移动满足移动阈值。在检测到输入区域的物理致动之前使用强度传感器来检测输入区域上的接触的强度允许设备更快速而且更准确地检测输入区域上的输入，并且使设备更积极地响应于用户输入。利用具有这些强度传感器(而不是物理致动的硬件按钮)的输入区域来检测输入增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12E，设备包括(12028)用于检测输入区域上的接触的移动的移动传感器(例如，电容传感器、电阻传感器、力传感器、压力传感器和/或振动传感器)，其中在检测到输入区域的致动之前进行接触的移动的检测(例如，输入区域的致动不依赖于通过塌缩提供电阻的物理机构诸如圆顶开关或其他机械开关机构来完成电路)。例如，接触沿第一方向的移动是相对于输入区域，并且不根据接触沿第一方向的移动而导致输入区沿第一方向的对应位移。第二触觉输出的生成不是根据接触的移动引起的输入区域的任何部分的位移满足移动阈值。在检测到输入区域的物理致动之前使用移动传感器来检测输入区域上的接触的移动允许设备更快速而且更准确地检测输入区域上的输入，并且使设备更积极地响应于用户输入。利用具有这些移动传感器(而不是物理致动的操纵杆或轨迹球)的输入区域来检测输入增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12E，设备包括(12030)用于检测输入区域上的接触的移动的移动传感器(例如，电容传感器、电阻传感器、力传感器、压力传感器和/或振动传感器)，其中通过输入区域的至少一部分以不同于接触的移动的移动模式的移动来生成第一触觉输出和第二触觉输出(以及其他局部按钮触觉输出)。例如，按钮的移动的幅值比接触的移动小得多。按钮振荡，并且接触的移动不振荡或以低得多的频率振荡。使用移动传感器来检测输入区域上的接触的具有与输入区域的物理致动的移动模式不同的移动模式的移动允许设备更快速而且更准确地检测输入区域上的输入，并且使设备更积极地响应于用户输入。利用具有这些移动传感器(而不是物理致动的操纵杆或轨迹球)的输入区域来检测输入增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12E，第一标准和第二标准(以及第三标准)满足(12032)而不需要焦点选择器(例如，光标或手指)同时存在于显示器上。使用在输入区域上检测到的输入来操作设备而不需要焦点选择器同时存在于显示器上减少了用户界面上的杂乱，并且释放了屏幕空间以用于附加功能和控件。因此，利用在不需要在显示器上同时存在焦点选择器(例如，接触或光标)的情况下操作的显示器外输入区域增强了设备的可操作性，并且使得用户设备界面更有效(例如，通过提供附加控制选项而不因为附加显示的控件或手指接触使用户界面杂乱)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
根据方法12000并且参考图12E，第一触觉输出和第二触觉输出(以及其他局部按钮触觉输出)(12034)被局部化到设备的周边侧上(例如，由位于或接近设备的周边侧的按钮致动器生成，而不是从设备内部的内部致动器传播到输入区域外部的位置(例如，贯穿设备))。响应于在设备的周边尺寸上的输入区域上检测到的输入而在设备的周边侧上提供局部触觉输出增强了设备的可操作性，并且使得用户设备界面更高效(例如，通过提供改进的反馈以帮助用户提供所需的输入来实现预期结果，并且减少操作设备/与设备交互时的用户错误)，从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
应当理解，已经对图12A-图12E中的操作进行描述的特定次序仅仅是示例性的，并非旨在指示所述次序是可执行这些操作的唯一次序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外，应当指出的是，本文相对于本文所述的其他方法(例如，方法6000、7000、8000、9000、10000和11000)描述的其他过程的细节同样以类似的方式适用于上文相对于图12A至图12E描述的方法6000。例如，上文参考方法12000所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文参考本文所述的其他方法(例如，方法6000、7000、8000、9000、10000和11000)所述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的特征中的一者或多者。为了简明起见，此处不再重复这些细节。
出于解释的目的，前面的描述是通过参考具体实施例来描述的。然而，上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容，很多修改形式和变型形式都是可能的。选择和描述实施例是为了最佳地阐明本发明的原理及其实际应用，以便由此使得本领域的其他技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施例。

Claims (19)

1.一种用于与输入区域进行交互的方法，包括：
在具有显示器和与所述显示器分开的第一输入区域的电子设备处：
检测邻近所述显示器的边缘的所述第一输入区域上的第一输入的第一部分；
响应于检测到所述第一输入区域上的所述第一输入的所述第一部分：
根据确定所述第一输入的所述第一部分满足第一标准，其中所述第一标准包括当在所述第一输入区域上检测到所述第一输入而所述第一输入的特征强度未增大到高于第一强度阈值时满足的一组标准，在所述显示器上在邻近所述第一输入区域的所述显示器的所述边缘上显示对应于包括一个或多个可选选项的用户界面对象的前导对象；
当在所述显示器上显示所述前导对象时，检测所述第一输入区域上的所述第一输入的第二部分，包括检测高于所述第一强度阈值的所述第一输入的强度的增大；以及
响应于在所述第一输入的所述第二部分期间检测到所述第一输入的强度的所述增大，将所述用户界面对象从所述显示器的邻近所述第一输入区域的所述边缘朝向所述显示器的相对边缘扩展根据所述第一输入的当前强度而变化的量。
2.根据权利要求1所述的方法，包括：
在检测到所述第一输入的所述第二部分之后，检测所述第一输入区域上的所述第一输入的第三部分，包括检测所述第一输入的强度的继续增大；
响应于检测到所述第一输入的强度的所述继续增大：
根据确定所述第一输入的所述第三部分满足第二标准，其中所述第二标准包括当在检测到所述第一输入的结束之前所述第一输入的特征强度增大到高于第二强度阈值时满足的一组标准，所述第二强度阈值大于所述第一强度阈值：在所述显示器上显示包括所述一个或多个可选选项的所述用户界面对象。
3.根据权利要求2所述的方法，包括：
在检测到所述第一输入的所述第三部分之后，检测所述第一输入区域上的所述第一输入的第四部分，包括检测所述第一输入的强度减小：
根据确定在检测到所述第一输入的所述第四部分之前满足所述第二标准，保持所述用户界面对象的显示而不改变所述用户界面对象当前显示的量；以及
根据确定在检测到所述第一输入的所述第四部分之前未满足所述第二标准，根据所述第一输入的当前强度减小所述用户界面对象在所述显示器上显现的量。
4.根据权利要求2至3中任一项所述的方法，包括：
响应于检测到所述第一输入的强度的所述继续增大：
根据确定所述第一输入的所述第三部分满足所述第二标准：
生成第一触觉输出。
5.根据权利要求4所述的方法，其中所述设备包括第一触觉输出发生器，所述第一触觉输出发生器局部地驻留在所述第一输入区域并且在所述第一输入区域提供包括所述第一触觉输出的局部触觉输出。
6.根据权利要求4所述的方法，其中所述第一触觉输出的所述生成与所述第一输入满足所述第二标准同步。
7.根据权利要求4所述的方法，其中所述第一触觉输出的所述生成与所述用户界面对象在所述显示器上的初始完整显示同步。
8.根据权利要求2至3中任一项所述的方法，其中所述设备包括不同于所述第一输入区域的触敏表面，并且其中所述方法包括：
当在所述显示器上显示包括所述一个或多个可选选项的所述用户界面对象时，检测在所述触敏表面上在与所述用户界面对象中的所述一个或多个可选选项中的第一可选选项对应的位置处的第二输入；以及
响应于检测到所述第二输入：
根据确定所述第二输入满足选择标准，选择所述第一可选选项。
9.根据权利要求8所述的方法，包括：
响应于检测到所述第二输入：
根据确定所述第二输入满足选择确认标准，执行对应于所述第一可选选项的第一操作。
10.根据权利要求8所述的方法，包括：
响应于检测到所述第二输入：
根据确定所述第二输入满足拖动标准，在所述用户界面对象之外显示所述第一可选选项的表示。
11.根据权利要求10所述的方法，包括：
响应于检测到所述第二输入：
根据确定所述第二输入满足放置标准，在所述用户界面对象之外显示所述第一可选选项的副本。
12.根据权利要求8所述的方法，其中当所述用户界面对象在所述显示器上部分地显现而所述第一输入不满足所述第二标准时检测到所述第二输入。
13.根据权利要求2至3中任一项所述的方法，包括：
当在所述显示器上显示包括所述一个或多个可选选项的所述用户界面对象时，检测所述第一输入区域上的第三输入，其中所述第三输入包括接触在所述第一输入区域上的移动；以及
响应于检测到所述第三输入，根据所述第三输入中的所述接触的所述移动，使选择指示符滚动通过所述显示器上的所述一个或多个可选选项。
14.根据权利要求13所述的方法，包括：
在根据所述第一输入区域上的所述第三输入中的所述接触的所述移动将所述选择指示符移动到所述显示器上的所述一个或多个可选选项中的第一可选选项时，检测所述第一输入区域上的满足选择确认标准的第四输入；以及
响应于检测到满足所述选择确认标准的所述第四输入，执行对应于所述第一可选选项的操作。
15.根据权利要求1至3中任一项所述的方法，其中所述设备包括不同于所述第一输入区域的触敏表面，并且其中所述方法包括：
当在所述显示器上显示包括所述一个或多个可选选项的所述用户界面对象时，检测所述触敏表面上的第五输入，包括：
检测所述触敏表面上在与第二用户界面对象对应的位置处的接触的触摸按压，所述第二用户界面对象在所述用户界面对象之外显示，
检测所述接触在所述触敏表面上到所述用户界面对象内的位置的移动，以及
当所述第二用户界面对象在所述用户界面对象内时，检测所述接触从所述触敏表面的抬离；以及
响应于检测到所述第五输入，将所述第二用户界面对象作为新的可选选项添加到所述用户界面对象中。
16.根据权利要求1至3中任一项所述的方法，其中所述设备包括不同于所述第一输入区域的触敏表面，并且其中所述方法包括：
当在所述显示器上显示包括所述一个或多个可选选项的所述用户界面对象时，检测所述触敏表面上的第六输入，包括：
检测在所述触敏表面上在与所述用户界面对象内显示的相应可选选项对应的位置处的接触的触摸按压，
检测所述接触在所述触敏表面上到所述用户界面对象之外的位置的移动，以及
当所述相应可选选项被拖动到所述用户界面对象之外时，检测所述接触从所述触敏表面的抬离；以及
响应于检测到所述第六输入，从所述用户界面对象移除所述相应可选选项。
17.一种电子设备，包括：
显示器；
与所述显示器分开的第一输入区域；
一个或多个处理器；
存储器；和
一个或多个程序，其中所述一个或多个程序存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序包括用于执行根据权利要求1至16中的任一项所述的方法的指令。
18.一种存储一个或多个程序的计算机可读存储介质，所述一个或多个程序包括指令，所述指令在由具有显示器和与所述显示器分开的第一输入区域的电子设备执行时，使得所述设备执行根据权利要求1至16中的任一项所述的方法。
19.一种计算机程序产品，所述计算机程序产品包括指令，所述指令在由具有显示器和与所述显示器分开的第一输入区域的电子设备执行时，使得所述设备执行根据权利要求1至16中的任一项所述的方法。
CN202110516449.3A 2018-05-07 2019-05-07 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面 Active CN113031830B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110516449.3A CN113031830B (zh) 2018-05-07 2019-05-07 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201862668187P 2018-05-07 2018-05-07
US62/668,187 2018-05-07
US16/403,329 US10955956B2 (en) 2018-05-07 2019-05-03 Devices, methods, and graphical user interfaces for interaction with an intensity-sensitive input region
US16/403,329 2019-05-03
CN201980037419.5A CN112219181A (zh) 2018-05-07 2019-05-07 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面
CN202110516449.3A CN113031830B (zh) 2018-05-07 2019-05-07 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面
PCT/US2019/031078 WO2019217392A2 (en) 2018-05-07 2019-05-07 Devices, methods, and graphical user interfaces for interaction with an intensity-sensitive input region

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201980037419.5A Division CN112219181A (zh) 2018-05-07 2019-05-07 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面

Publications (2)

Publication Number Publication Date
CN113031830A CN113031830A (zh) 2021-06-25
CN113031830B true CN113031830B (zh) 2024-07-16

Family

ID=68385134

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202110516449.3A Active CN113031830B (zh) 2018-05-07 2019-05-07 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面
CN201980037419.5A Pending CN112219181A (zh) 2018-05-07 2019-05-07 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201980037419.5A Pending CN112219181A (zh) 2018-05-07 2019-05-07 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面

Country Status (4)

Country Link
US (3) US10955956B2 (zh)
EP (1) EP3791249A2 (zh)
CN (2) CN113031830B (zh)
WO (1) WO2019217392A2 (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018216780A1 (ja) * 2017-05-24 2018-11-29 株式会社ミライセンス 刺激伝達装置
US10698489B1 (en) * 2018-04-03 2020-06-30 Apple Inc. Compact pivoting input device
US10955956B2 (en) 2018-05-07 2021-03-23 Apple Inc. Devices, methods, and graphical user interfaces for interaction with an intensity-sensitive input region
US11550394B2 (en) * 2018-11-08 2023-01-10 Goto Group, Inc. Force-based control for a mobile device having a non-linear surface
US10999889B2 (en) * 2018-12-21 2021-05-04 Viavi Solutions Inc. System, instrument, and method for monitoring a premises
USD915446S1 (en) * 2019-02-19 2021-04-06 Beijing Xiaomi Mobile Software Co., Ltd. Mobile phone with animated graphical user interface
US10754428B1 (en) * 2019-02-25 2020-08-25 Facebook Technologies, Llc Systems, methods, and devices for audio-tactile mapping
US11797113B2 (en) 2019-06-01 2023-10-24 Apple Inc. Devices, methods, and graphical user interfaces for interaction with a control
US11393135B1 (en) * 2020-02-28 2022-07-19 Apple Inc. Modifying objects in a graphical environment
US20230162591A1 (en) * 2020-04-16 2023-05-25 IKE Smart City, LLC Interactive kiosk with emergency call module
USD946622S1 (en) * 2020-04-29 2022-03-22 The Foundry Innovation and Research 1, Ltd. Display screen or portion thereof with graphical user interface
US20210405871A1 (en) * 2020-06-26 2021-12-30 Rohde & Schwarz Gmbh & Co. Kg User interface control device and method for controlling a user interface
JP7224553B2 (ja) * 2020-08-05 2023-02-17 三菱電機株式会社 情報処理装置及び情報処理方法
KR20230113777A (ko) * 2020-12-01 2023-08-01 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 사용자 인터페이스와 마스터 제어기 사이의 상호작용
JP2022088187A (ja) * 2020-12-02 2022-06-14 富士フイルム株式会社 情報処理装置及び情報処理プログラム
CN115129371A (zh) * 2021-03-23 2022-09-30 北京小米移动软件有限公司 一种屏幕唤醒方法、屏幕唤醒装置及存储介质
CN113505705B (zh) * 2021-07-13 2023-09-26 浙江树人学院（浙江树人大学） 一种双层管柱电涡流信号去噪方法、系统及处理终端
USD1038958S1 (en) 2021-08-17 2024-08-13 Beijing Kuaimajiabian Technology Co., Ltd. Display screen or portion thereof with an animated graphical user interface
USD1011376S1 (en) * 2021-08-17 2024-01-16 Beijing Kuaimajiabian Technology Co., Ltd. Display screen or portion thereof with an animated graphical user interface
US11954256B2 (en) * 2021-12-17 2024-04-09 Google Llc Haptic interface for computing devices
US12039542B1 (en) 2022-09-14 2024-07-16 Wells Fargo Bank, N.A. Systems and methods for assigning card-specific alerts to payment cards
WO2024186519A1 (en) * 2023-03-03 2024-09-12 Apple Inc. Devices, methods, and user interfaces for edge and corner interactions

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101609383A (zh) * 2006-03-03 2009-12-23 苹果公司 具有显示器和用于用户界面及控制的周围触摸敏感边框的电子设备
CN104335146A (zh) * 2012-02-02 2015-02-04 索尼移动通讯有限公司 便携式电子装置以及控制具有接近感测用户接口的便携式电子装置的方法

Family Cites Families (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040164973A1 (en) 2002-06-28 2004-08-26 Kyocera Corporation Personal digital assistant and program for controlling used for the same
GB2460061B (en) * 2008-05-14 2012-06-13 Sony Uk Ltd Remote control handset
US8686952B2 (en) 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
KR101674205B1 (ko) 2009-10-27 2016-11-08 엘지전자 주식회사 이동 통신 단말기에서의 아이콘 표시 제어 방법 및 이를 적용한 이동 통신 단말기
KR101742986B1 (ko) * 2010-07-26 2017-06-15 엘지전자 주식회사 영상표시기기 및 그 동작 방법
US9417754B2 (en) * 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
WO2013022978A2 (en) 2011-08-08 2013-02-14 Mark Olsson Haptic directional feedback handles for location devices
US9134832B2 (en) * 2012-02-02 2015-09-15 Sony Corporation Portable electronic device and method of controlling a portable electronic device having a proximity-sensing user interface
CN103364970B (zh) * 2012-03-26 2015-03-25 联想(北京)有限公司 显示设备及方法
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169854A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
CN105260049B (zh) 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
JP6082458B2 (ja) 2012-05-09 2017-02-15 アップル インコーポレイテッド ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
EP3410287B1 (en) 2012-05-09 2022-08-17 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
KR101683868B1 (ko) 2012-05-09 2016-12-07 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
EP2847661A2 (en) 2012-05-09 2015-03-18 Apple Inc. Device, method, and graphical user interface for moving and dropping a user interface object
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
US9792038B2 (en) 2012-08-17 2017-10-17 Microsoft Technology Licensing, Llc Feedback via an input device and scribble recognition
KR101949737B1 (ko) 2012-08-28 2019-02-19 엘지전자 주식회사 이동 단말기 및 이의 제어 방법, 이를 위한 기록 매체
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
KR101905174B1 (ko) 2012-12-29 2018-10-08 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
JP6093877B2 (ja) 2012-12-29 2017-03-08 アップル インコーポレイテッド 複数接触ジェスチャのために触知出力の生成を見合わせるためのデバイス、方法、及びグラフィカルユーザインタフェース
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
JP6097843B2 (ja) 2012-12-29 2017-03-15 アップル インコーポレイテッド コンテンツをスクロールするか選択するかを判定するためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
US9454251B1 (en) 2013-06-26 2016-09-27 Google Inc. Methods, systems, and media for controlling a remote device using a touch screen of a mobile device in a display inhibited state
US9699496B2 (en) * 2013-07-15 2017-07-04 Verizon Patent And Licensing Inc. Media service user interface systems and methods
US9990125B2 (en) * 2013-11-15 2018-06-05 Lg Electronics Inc. Mobile terminal and method of controlling the same
US10296165B2 (en) 2013-12-10 2019-05-21 Lg Electronics Inc. Mobile terminal including display on front surface and rear input unit on rear surface and method for operating mobile terminal based on first input applied to rear input unit and second input applied to display
CN104954548A (zh) 2014-03-24 2015-09-30 宏达国际电子股份有限公司 通过遮盖控制移动式电子装置的方法、装置及其存储介质
JP6300604B2 (ja) 2014-04-01 2018-03-28 キヤノン株式会社 触感制御装置、触感制御方法及びプログラム
US10403238B2 (en) * 2014-06-03 2019-09-03 Lenovo (Singapore) Pte. Ltd. Presentation of representations of input with contours having a width based on the size of the input
US9762236B2 (en) * 2015-02-02 2017-09-12 Uneo Inc. Embedded button for an electronic device
US10055121B2 (en) * 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10095396B2 (en) * 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9645732B2 (en) * 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10152208B2 (en) * 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
CN106147580A (zh) 2015-04-08 2016-11-23 泉州市合创涂料科技有限公司 一种单组份无溶剂型聚氨酯防水涂料的制备方法
US10346030B2 (en) * 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
DK201670737A1 (en) 2016-06-12 2018-01-22 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Haptic Feedback
CN108351750B (zh) 2016-06-12 2019-08-13 苹果公司 用于处理与触摸输入相关联的强度信息的设备、方法、以及图形用户界面
WO2017218409A1 (en) * 2016-06-12 2017-12-21 Apple Inc. Devices, methods, and graphical user interfaces for providing haptic feedback
KR102535737B1 (ko) 2016-08-03 2023-05-24 삼성전자주식회사 압력 센서를 포함하는 전자 장치
KR20180017746A (ko) * 2016-08-10 2018-02-21 엘지전자 주식회사 이동 단말기 및 그 제어방법
US10324538B2 (en) * 2016-08-30 2019-06-18 Garmin Switzerland Gmbh Dynamic watch user interface
WO2018048547A1 (en) * 2016-09-06 2018-03-15 Apple Inc. Devices, methods, and graphical user interfaces for generating tactile outputs
DK201670728A1 (en) 2016-09-06 2018-03-19 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Feedback During Interaction with an Intensity-Sensitive Button
KR102410742B1 (ko) * 2016-09-09 2022-06-22 센셀, 인크. 터치 센서 상의 입력을 검출하고 특징화하기 위한 시스템
US10133543B2 (en) * 2016-09-23 2018-11-20 Apple Inc. Devices, methods, and graphical user interfaces for media playback control using intensity-based user inputs
US9916073B1 (en) 2017-01-17 2018-03-13 Nanoport Technology Inc. Electronic device having force-based modifiable graphical elements and method of operating same
US20180217717A1 (en) 2017-01-31 2018-08-02 Toyota Research Institute, Inc. Predictive vehicular human-machine interface
KR102687729B1 (ko) * 2017-02-03 2024-07-24 삼성전자주식회사 전자 장치 및 객체 표시 방법
KR20190021141A (ko) * 2017-08-22 2019-03-05 삼성전자주식회사 멀티 윈도우를 제어하는 전자 장치 및 그 동작 방법
US10732676B2 (en) * 2017-09-06 2020-08-04 Apple Inc. Illuminated device enclosure with dynamic trackpad
US10503261B2 (en) * 2017-12-15 2019-12-10 Google Llc Multi-point feedback control for touchpads
US10955956B2 (en) 2018-05-07 2021-03-23 Apple Inc. Devices, methods, and graphical user interfaces for interaction with an intensity-sensitive input region
US11797113B2 (en) 2019-06-01 2023-10-24 Apple Inc. Devices, methods, and graphical user interfaces for interaction with a control

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101609383A (zh) * 2006-03-03 2009-12-23 苹果公司 具有显示器和用于用户界面及控制的周围触摸敏感边框的电子设备
CN104335146A (zh) * 2012-02-02 2015-02-04 索尼移动通讯有限公司 便携式电子装置以及控制具有接近感测用户接口的便携式电子装置的方法

Also Published As

Publication number Publication date
US20230012223A1 (en) 2023-01-12
CN113031830A (zh) 2021-06-25
CN112219181A (zh) 2021-01-12
US20210165520A1 (en) 2021-06-03
US11507215B2 (en) 2022-11-22
WO2019217392A3 (en) 2020-01-02
WO2019217392A2 (en) 2019-11-14
EP3791249A2 (en) 2021-03-17
US12099672B2 (en) 2024-09-24
US10955956B2 (en) 2021-03-23
US20190339804A1 (en) 2019-11-07

Similar Documents

Publication Publication Date Title
CN113031830B (zh) 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面
US11635818B2 (en) Devices, methods, and graphical user interfaces for providing feedback during interaction with an intensity-sensitive button
CN113253844B (zh) 用于与用户界面对象进行交互并提供反馈的设备、方法和图形用户界面
US11808562B2 (en) Devices and methods for measuring using augmented reality
US10901513B2 (en) Devices, methods, and graphical user interfaces for haptic mixing
KR102693148B1 (ko) 사용자 인터페이스들을 위한 촉각 피드백
EP3329356B1 (en) Devices and methods for processing and disambiguating touch inputs using intensity thresholds based on prior input intensity
US20240053847A1 (en) Devices, Methods, and Graphical User Interfaces for Interaction with a Control
EP3518079B1 (en) Devices, methods, and graphical user interfaces for providing feedback during interaction with an intensity-sensitive button
CN118860250A (zh) 用于与强度敏感输入区域进行交互的设备、方法和图形用户界面

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant