CN108139863B - 用于在与强度敏感按钮交互期间提供反馈的设备、方法和图形用户界面 - Google Patents

用于在与强度敏感按钮交互期间提供反馈的设备、方法和图形用户界面 Download PDF

Info

Publication number
CN108139863B
CN108139863B CN201780002188.5A CN201780002188A CN108139863B CN 108139863 B CN108139863 B CN 108139863B CN 201780002188 A CN201780002188 A CN 201780002188A CN 108139863 B CN108139863 B CN 108139863B
Authority
CN
China
Prior art keywords
tactile output
contact
intensity
user interface
tactile
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780002188.5A
Other languages
English (en)
Other versions
CN108139863A (zh
Inventor
I·A·乔德里
K·L·科希恩达
M·阿朗索鲁伊斯
S·J·鲍尔
M·I·布朗
G·I·巴彻
M·S·科蒂尔
A·C·戴伊
J·K·芬尼斯
B·T·格里森
R·P·豪沃思
J·伊夫
B·A·琼斯
C·G·卡鲁纳穆尼
D·R·克尔
J·B·科平
J·B·莫瑞尔
J-P·M·茂伊勒塞奥克斯
C·茂塞特
D·W·皮特谢尔
D·T·普雷斯顿
D·里乔
H·D·维尔韦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DKPA201670740A external-priority patent/DK179630B1/en
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Priority to CN202311573304.2A priority Critical patent/CN117742450A/zh
Priority to CN201910962148.6A priority patent/CN110825165B/zh
Priority claimed from PCT/US2017/048372 external-priority patent/WO2018048632A1/en
Publication of CN108139863A publication Critical patent/CN108139863A/zh
Application granted granted Critical
Publication of CN108139863B publication Critical patent/CN108139863B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1662Details related to the integrated keyboard
    • G06F1/1671Special purpose buttons or auxiliary keyboards, e.g. retractable mini keypads, keypads or buttons that remain accessible at closed laptop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0227Cooperation and interconnection of the input arrangement with other functional units of a computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/802D [Two Dimensional] animation, e.g. using sprites
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明题为“用于在与强度敏感按钮交互期间提供反馈的设备、方法和图形用户界面”。本发明公开了在电子设备处:在显示用户界面的同时,检测输入序列,包括检测home按钮上接触的特征强度的增大。作为响应,该设备确定增大是否高于第一强度阈值以及接近特征强度增大到第一强度阈值以上时的时间特征强度的改变具有针对强度改变度量的第一值还是第二值。如果增大高于阈值且改变具有第一值,该设备执行第一操作,该第一操作改变显示器上显示的用户界面;并生成对应于增大的第一分立触觉输出。如果增大高于阈值且改变具有第二值,该设备执行第一操作并生成对应于增大的第二分立触觉输出。

Description

用于在与强度敏感按钮交互期间提供反馈的设备、方法和图 形用户界面
技术领域
本发明整体涉及具有显示器和强度敏感按钮的电子设备,包括但不限于具有显示器和强度敏感home按钮的电子设备。
背景技术
很多具有显示器的电子设备包括机械按钮,诸如机械home按钮,以在电子设备上显示的不同用户界面之间导航。但机械按钮除了固定的按下点击和固定的松开点击之外,只给用户提供非常少的(如果有的话)反馈。
发明内容
因此,需要具有改进的方法和界面的电子设备,该方法和界面用于在与按钮交互期间提供视觉、触觉和/或音频反馈,使得用户操纵用户界面更有效直观。此类方法和界面任选地补充或替换用于在与按钮交互期间提供反馈的常规方法。此类方法和界面通过帮助用户理解所提供的输入和设备对输入的响应之间的关联,减小了来自用户的输入的数量、程度和/或性质,从而形成了更有效的人机界面。
通过所公开的设备可减少或消除与具有按钮的电子设备的用户界面相关联的上述缺陷和其他问题,该公开的设备包括一个或多个强度敏感型按钮。在一些实施方案中,该设备是台式计算机。在一些实施方案中,该设备是便携式的(例如,笔记本电脑、平板电脑或手持设备)。在一些实施方案中,该设备是个人电子设备(例如,可穿戴电子设备,诸如手表)。在一些实施方案中,该设备具有触摸板。在一些实施方案中,该设备具有触敏显示器(也称为“触摸屏”或“触摸屏显示器”)。在一些实施方案中,该设备具有图形用户界面(GUI)、一个或多个处理器、存储器和一个或多个模块、被存储在存储器中以用于执行多个功能的程序或指令集。在一些实施方案中,用户主要通过触笔和/或手指接触以及触敏表面上的手势来与GUI进行交互。在一些实施方案中,这些功能任选地包括图像编辑、绘图、呈现、文字处理、电子表格制作、玩游戏、接打电话、视频会议、收发电子邮件、即时消息通信、健身支持、数字摄影、数字视频录制、网页浏览、数字音乐播放、笔记记录和/或数字视频播放。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。
根据一些实施方案,在具有显示器、触敏表面和用于检测与设备的home按钮的接触强度的一个或多个传感器的电子设备上执行一种方法。该方法包括:在显示器上显示第一用户界面,在显示第一用户界面的同时,检测指向第一用户界面的输入。响应于检测到指向第一用户界面的输入,该方法包括:停止显示第一用户界面,并显示与第一用户界面不同的第二用户界面。在显示第二用户界面的同时,该方法包括:检测home按钮上的接触。在连续检测home按钮上的接触的同时,该方法包括:(i)检测接触的特征强度增大到第一强度阈值以上;(ii)响应于检测到接触的特征强度增大到第一强度阈值,显示从第二用户界面过渡回第一用户界面的开始;以及(iii)在显示从第二用户界面过渡回第一用户界面的开始的同时,检测输入序列,包括检测包括接触的特征强度增大到第一强度阈值以上的按压输入。响应于检测到该输入序列,该方法包括:(i)根据确定输入序列满足第一标准,(例如,第一标准要求在检测到按压输入结束之前,接触的特征强度增大到第二强度阈值以上):(A)停止显示第二用户界面,并(B)在显示器上重新显示第一用户界面;以及(ii)根据确定输入序列满足第二标准,(例如,第二标准要求在检测到按压输入结束之前,接触的特征强度保持低于第二强度阈值):(A)反转从第二用户界面过渡回第一用户界面的开始,并(B)在显示器上重新显示第二用户界面。
根据一些实施方案,电子设备包括被配置为显示用户界面的显示单元;用于接收接触的触敏表面;用于检测与设备的home按钮的接触强度的一个或多个传感器单元;以及与显示单元、触敏表面单元以及一个或多个传感器单元耦接的处理单元。该处理单元被配置为:在显示器上显示第一用户界面;在显示第一用户界面的同时,检测指向第一用户界面的输入;响应于检测到指向第一用户界面的输入:(i)停止显示第一用户界面;以及(ii)显示与第一用户界面不同的第二用户界面;在显示第二用户界面的同时,检测home按钮上的接触;在连续检测home按钮上的接触的同时:(i)检测接触的特征强度增大到第一强度阈值以上;(ii)响应于检测到接触的特征强度增大到第一强度阈值,显示从第二用户界面过渡回第一用户界面的开始;(iii)在显示从第二用户界面过渡回第一用户界面的开始的同时,检测输入序列,包括检测包括接触的特征强度增大到第一强度阈值以上的按压输入;响应于检测到输入序列:(i)根据确定输入序列满足第一标准,其中第一标准要求在检测到按压输入结束之前,接触的特征强度增大到第二强度阈值以上:(A)停止显示第二用户界面,并(B)在显示器上重新显示第一用户界面;以及(ii)根据确定输入序列满足第二标准,其中第二标准要求在检测到按压输入结束之前,接触的特征强度保持低于第二强度阈值:(A)反转从第二用户界面过渡回第一用户界面的开始,以及(B)在显示器上重新显示第二用户界面。
根据一些实施方案,在具有显示器和触敏表面的电子设备上执行一种方法。该方法包括:显示第一用户界面,并在显示第一用户界面的同时,检测第一输入,(例如,第一输入与显示第二用户界面的请求和显示第三用户界面的请求一致)。响应于检测到第一输入,该方法包括:开始显示从第一用户界面到第二用户界面的第一动画过渡。在显示第一动画过渡的同时,该方法包括:检测第二输入。响应于检测到第二输入,该方法包括:(i)根据确定第二输入与显示第三用户界面的请求一致且第二输入在第一时间接收:(A)在第一动画过渡中的第一点处中断从第一用户界面到第二用户界面的第一动画过渡,以及(B)显示从第一动画过渡中的第一点到第三用户界面的第二动画过渡;以及(ii)根据确定第二输入与显示第三用户界面的请求一致且第二输入在第一时间之后的第二时间接收:(A)在第一动画过渡中的第一点之后的第一动画过渡中的第二点处中断从第一用户界面到第二用户界面的第一动画过渡,以及(B)显示从第一动画过渡中的第二点到第三用户界面的第三动画过渡,该第三动画过渡与第二动画过渡不同。
根据一些实施方案,一种电子设备包括被配置为显示用户界面的显示单元;用于接收接触的触敏表面单元;以及与显示单元和触敏表面单元耦接的处理单元。该处理单元被配置为:显示第一用户界面;在显示第一用户界面的同时,检测第一输入,其中第一输入与显示第二用户界面的请求和显示第三用户界面的请求一致;响应于检测到第一输入,开始显示从第一用户界面到第二用户界面的第一动画过渡;在显示第一动画过渡的同时,检测第二输入;以及响应于检测到第二输入:(i)根据确定第二输入与显示第三用户界面的请求一致且第二输入在第一时间接收:(A)在第一动画过渡中的第一点处中断从第一用户界面到第二用户界面的第一动画过渡,并(B)显示从第一动画过渡中的第一点到第三用户界面的第二动画过渡;以及(ii)根据确定第二输入与显示第三用户界面的请求一致且第二输入在第一时间之后的第二时间接收:(A)在第一动画过渡中的第一点之后的第一动画过渡中的第二点处中断从第一用户界面到第二用户界面的第一动画过渡,以及(B)显示从第一动画过渡中的第二点到第三用户界面的第三动画过渡,其中该第三动画过渡与第二动画过渡不同。
根据一些实施方案,在具有显示器、触敏表面和用于生成触觉输出的一个或多个触觉输出发生器的电子设备上执行一种方法。该方法包括:在显示器上显示home按钮配置用户界面,包括显示针对home按钮的多种不同触觉输出设置,且所述home按钮在多种不同情景中在所述设备上可用以响应于检测到home按钮上第一类型的输入而消除当前显示的用户界面。在显示home按钮配置用户界面的同时,该方法包括:检测多种不同触觉输出设置的home按钮的相应触觉输出设置的选择。在选择针对home按钮的相应触觉输出设置的同时,该方法包括:检测home按钮上第一类型的第一输入。响应于检测到home按钮上第一类型的第一输入,该方法包括:(i)根据确定相应触觉输出设置是针对home按钮的第一触觉输出设置,经由一个或多个触觉输出发生器提供对应于针对home按钮的第一触觉输出设置的第一触觉输出,而不消除home按钮配置用户界面;以及(ii)根据确定相应触觉输出设置是针对home按钮与第一触觉输出设置不同的第二触觉输出设置,经由一个或多个触觉输出发生器提供对应于针对home按钮的第二触觉输出设置的第二触觉输出,而不消除home按钮配置用户界面。
根据一些实施方案,一种电子设备包括被配置为显示用户界面的显示单元;用于接收接触的触敏表面单元;用于生成触觉输出的一个或多个触觉输出生成单元;以及与显示单元、触敏表面单元和一个或多个触觉输出生成单元耦接的处理单元。该处理单元被配置为:在显示器上显示home按钮配置用户界面,包括显示针对home按钮的多种不同触觉输出设置,其中所述home按钮在多种不同情景中在所述设备上可用以响应于检测到home按钮上第一类型的输入而消除当前显示的用户界面;在显示home按钮配置用户界面的同时,检测多种不同触觉输出设置的home按钮相应触觉输出设置的选择;在选择针对home按钮的相应触觉输出设置的同时,检测home按钮上第一类型的第一输入;以及响应于检测到home按钮上第一类型的第一输入:(i)根据确定相应触觉输出设置是针对home按钮的第一触觉输出设置,经由一个或多个触觉输出发生器提供对应于针对home按钮的第一触觉输出设置的第一触觉输出,而不消除home按钮配置用户界面;以及(ii)根据确定相应触觉输出设置是针对home按钮与第一触觉输出设置不同的第二触觉输出设置,经由一个或多个触觉输出发生器提供对应于针对home按钮的第二触觉输出设置的第二触觉输出,而不消除home按钮配置用户界面。
根据一些实施方案,在具有显示器、触敏表面和用于生成触觉输出的一个或多个触觉输出发生器的电子设备上执行一种方法。该方法包括:在显示器上显示第一用户界面,且所述home按钮在多种不同情景中在所述设备上可用以响应于检测到home按钮上第一类型的输入而消除当前显示的用户界面。在显示第一用户界面的同时,该方法包括:检测指向第一用户界面的第一类型的第一输入。响应于检测到指向第一用户界面的第一类型的第一输入,该方法包括:(i)根据确定在电子设备处启用了用户界面触觉输出,执行第一操作,并经由一个或多个触觉输出发生器提供对应于第一操作的第一触觉输出;以及(ii)根据确定禁用了用户界面触觉输出,执行第一操作,并放弃提供第一触觉输出对应于第一操作的至少一部分。在执行第一操作之后,该方法包括:检测home按钮上第一类型的第二输入。响应于检测到home按钮上第一类型的第二输入:(i)执行与home按钮相关联的第二操作;以及(ii)经由一个或多个触觉输出发生器提供与激活home按钮相关联的触觉输出,而不论在设备处是否启用了用户界面触觉输出。
根据一些实施方案,一种电子设备包括被配置为显示用户界面的显示单元;用于接收接触的触敏表面单元;用于生成触觉输出的一个或多个触觉输出生成单元;以及与显示单元、触敏表面单元和一个或多个触觉输出生成单元耦接的处理单元。该处理单元被配置为:在显示器上显示第一用户界面,其中所述home按钮在多种不同情景中在所述设备上可用以响应于检测到home按钮上第一类型的输入而消除当前显示的用户界面;在显示第一用户界面的同时,检测指向第一用户界面的第一类型的第一输入;响应于检测到指向第一用户界面的第一类型的第一输入:(i)根据确定在电子设备处启用了用户界面触觉输出,执行第一操作,并经由一个或多个触觉输出发生器提供对应于第一操作的第一触觉输出;(ii)根据确定禁用了用户界面触觉输出,执行第一操作,并放弃提供第一触觉输出对应于第一操作的至少一部分,检测home按钮上第一类型的第二输入;以及响应于检测到home按钮上第一类型的第二输入:(i)执行与home按钮相关联的第二操作;以及(ii)经由一个或多个触觉输出发生器提供与激活home按钮相关联的触觉输出,而不论在设备处是否启用了用户界面触觉输出。
根据一些实施方案,在具有显示器、触敏表面、用于生成触觉输出的一个或多个触觉输出发生器以及用于检测与设备的home按钮的接触强度的一个或多个传感器的电子设备上执行一种方法。该方法包括:在显示器上显示用户界面,在显示用户界面的同时,检测home按钮上的输入序列,包括检测home按钮上的第一按压输入。检测第一按压输入包括检测home按钮上的接触的特征强度的增大。响应于检测到home按钮上的第一按压输入:(i)根据确定第一按压输入包括接触的特征强度增大到第一强度阈值以上,且接近接触的特征强度增大到第一强度阈值以上时的时间接触的特征强度的改变具有针对强度改变度量的第一值:(A)执行改变显示器上显示的用户界面的第一操作;以及(B)经由一个或多个触觉输出发生器生成对应于接触的特征强度增大到第一强度阈值以上的第一分立触觉输出;以及(ii)根据确定第一按压输入包括接触的特征强度增大到第一强度阈值以上,且接近接触的特征强度增大到第一强度阈值以上时的时间接触的特征强度的改变具有与强度改变度量的第一值不同的针对强度改变度量的第二值:(A)执行改变显示器上显示的用户界面的第一操作;以及(B)经由一个或多个触觉输出发生器生成对应于接触的特征强度增大到第一强度阈值以上且与第一分立触觉输出不同的第二分立触觉输出。
根据一些实施方案,一种电子设备包括被配置为显示用户界面的显示单元;用于接收接触的触敏表面单元;用于生成触觉输出的一个或多个触觉输出生成单元;以及用于检测与设备的home按钮的接触强度的一个或多个传感器单元;以及与显示单元、触敏表面单元、一个或多个触觉输出生成单元以及一个或多个传感器单元耦接的处理单元。该处理单元被配置为:在显示器上显示用户界面;在显示用户界面的同时,检测home按钮上的输入序列,包括检测home按钮上的第一按压输入,其中检测第一按压输入包括检测home按钮上接触的特征强度的增大;以及响应于检测到home按钮上的第一按压输入:(i)根据确定第一按压输入包括接触的特征强度增大到第一强度阈值以上,且接近接触的特征强度增大到第一强度阈值以上时的时间接触的特征强度的改变具有针对强度改变度量的第一值:(A)执行改变显示器上显示的用户界面的第一操作;以及(B)经由一个或多个触觉输出发生器生成对应于接触特征强度增大到第一强度阈值以上的第一分立触觉输出;以及(ii)根据确定第一按压输入包括接触的特征强度增大到第一强度阈值以上,且接近接触的特征强度增大到第一强度阈值以上时的时间接触的特征强度的改变具有与强度改变度量的第一值不同的针对强度改变度量的第二值:(A)执行改变显示器上显示的用户界面的第一操作;以及(B)经由一个或多个触觉输出发生器生成对应于接触的特征强度增大到第一强度阈值以上且与第一分立触觉输出不同的第二分立触觉输出。
根据一些实施方案,在具有显示器、触敏表面、用于生成触觉输出的一个或多个触觉输出发生器以及用于检测与设备的home按钮的接触强度的一个或多个传感器的电子设备上执行一种方法。该方法包括:显示第一用户界面。在显示第一用户界面的同时,该方法包括检测:(i)home按钮上的第一按压输入;以及(ii)home按钮上在第一按压输入之后检测的第二按压输入。响应于检测到第一按压输入并在检测第二按压输入之前,提供具有第一非视觉输出配置文件的第一非视觉输出。第一非视觉输出提供指示检测到第一按压输入的反馈且第一非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出。响应于检测到home按钮上包括第一按压输入和第二按压输入的输入序列,该方法包括:(i)基于对应于第一按压输入的第一时间点和对应于第二按压输入的第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是独立输入:(A)执行与第一按压输入相关联的第一操作;以及(B)提供具有第一非视觉输出配置文件的第二非视觉输出,该第二非视觉输出提供指示检测到第二按压输入的反馈且第二非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出;以及(ii)基于第一时间点和第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是输入模式的部分:(A)执行与输入模式相关联的第二操作,第二操作与第一操作不同;以及(B)提供具有与第一非视觉输出配置文件不同的第二非视觉输出配置文件的第三非视觉输出,且第三非视觉输出提供指示检测到第二按压输入的反馈且第三非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出。
根据一些实施方案,一种电子设备包括被配置为显示用户界面的显示单元;用于接收接触的触敏表面单元;用于生成触觉输出的一个或多个触觉输出生成单元;用于检测与设备的home按钮的接触强度的一个或多个传感器单元;以及与显示单元、触敏表面单元、一个或多个触觉输出生成单元以及一个或多个传感器单元耦接的处理单元。该处理单元被配置为:显示第一用户界面;在显示第一用户界面的同时,检测:(i)home按钮上的第一按压输入;以及(ii)在第一按压输入之后检测到的home按钮上的第二按压输入;响应于检测到第一按压输入并在检测第二按压输入之前,提供具有第一非视觉输出配置文件的第一非视觉输出,其中第一非视觉输出提供指示检测到第一按压输入的反馈,且第一非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出;响应于检测到包括home按钮上第一按压输入和第二按压输入的输入序列:(i)基于对应于第一按压输入的第一时间点和对应于第二按压输入的第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是独立输入:(A)执行与第一按压输入相关联的第一操作;以及(B)提供具有第一非视觉输出配置文件的第二非视觉输出,其中该第二非视觉输出提供指示检测到第二按压输入的反馈且第二非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出;以及(ii)基于第一时间点和第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是输入模式的部分:(A)执行与输入模式相关联的第二操作,其中第二操作与第一操作不同;以及(B)提供具有与第一非视觉输出配置文件不同的第二非视觉输出配置文件的第三非视觉输出,其中第三非视觉输出提供指示检测到第二按压输入的反馈且第三非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出。
根据一些实施方案,在具有显示器、触敏表面、用于生成触觉输出的一个或多个触觉输出发生器以及用于检测与设备的相应按钮的接触强度的一个或多个传感器的电子设备上执行一种方法。该方法包括:检测相应按钮上的输入,使用一个或多个触觉输出发生器生成触觉输出,指示已经激活相应按钮,替代在机械按压相应按钮时检测相应按钮激活的机械开关。响应于检测到相应按钮上的该输入,该方法包括:(i)根据确定输入满足激活标准,激活标准包括输入包括高于相应强度阈值的强度以便满足激活标准的要求,提供具有第一触觉输出模式的第一触觉输出,第一触觉输出模式包括:(A)一个或多个触觉输出发生器相对于一个或多个触觉输出发生器的一个或多个对应中性位置的0.5和4个周期之间的振荡,且一个或多个触觉输出发生器的振荡发生于80Hz和400Hz之间的频率下;以及(ii)根据确定输入不满足激活标准,放弃提供第一触觉输出。
根据一些实施方案,一种电子设备包括被配置为显示用户界面的显示单元;用于接收接触的触敏表面单元;用于生成触觉输出的一个或多个触觉输出生成单元;用于检测与设备的home按钮的接触强度的一个或多个传感器单元;以及与显示单元、触敏表面单元、一个或多个触觉输出生成单元以及一个或多个传感器单元耦接的处理单元。该处理单元被配置为:检测相应按钮上的输入,其中使用一个或多个触觉输出发生器生成触觉输出,指示已经激活相应按钮,替代在机械按压相应按钮时检测相应按钮激活的机械开关;响应于检测到相应按钮上的输入:(i)根据确定该输入满足激活标准,其中激活标准包括输入包括高于相应强度阈值的强度以便满足激活标准的要求,提供具有第一触觉输出模式的第一触觉输出,第一触觉输出模式包括:一个或多个触觉输出发生器相对于一个或多个触觉发生器的一个或多个对应中性位置的0.5和4个周期之间的振荡,其中一个或多个触觉输出发生器的振荡发生于80Hz和400Hz之间的频率下;(ii)根据确定输入不满足激活标准,放弃提供第一触觉输出。
根据一些实施方案,电子设备包括显示器、触敏表面、用于检测与触敏表面的接触强度的任选地一个或多个传感器、强度敏感型按钮(例如,虚拟或物理home按钮)、一个或多个处理器、存储器以及一个或多个程序;该一个或多个程序被存储在存储器中并且被配置为由一个或多个处理器执行,并且该一个或多个程序包括用于执行或使得执行本文所述方法中的任一方法的操作的指令。根据一些实施方案,计算机可读存储介质在其中存储有指令,该指令当由具有显示器、触敏表面、强度敏感型按钮(例如,虚拟或物理home按钮)以及用于检测与触敏表面的接触强度的任选地一个或多个传感器的电子设备执行时,使得该设备执行或使得执行本文所述方法中的任一方法的操作。根据一些实施方案,具有显示器、触敏表面、用于检测与触敏表面的接触强度的任选地一个或多个传感器、强度敏感型按钮(例如,虚拟或物理home按钮)、存储器以及执行存储于存储器中的一个或多个程序的一个或多个处理器的电子设备上的图形用户界面包括在本文所述方法中的任一方法中所显示的一个或多个元素,该一个或多个元素响应于输入进行更新,如本文所述方法中的任一方法中所描述的。根据一些实施方案,一种电子设备包括:显示器、触敏表面、强度敏感型按钮(例如,虚拟或物理home按钮),和用于检测与触敏表面的接触强度的任选地一个或多个传感器;以及用于执行或使得执行本文所述方法中的任一方法的操作的装置。根据一些实施方案,用于在具有显示器和触敏表面、强度敏感型按钮(例如,虚拟或物理home按钮)以及用于检测与触敏表面的接触强度的任选地一个或多个传感器的电子设备中使用的信息处理设备,包括用于执行或使得执行本文所述方法中的任一方法的操作的装置。
因此,为具有显示器、触敏表面、用于检测与设备按钮的接触强度的一个或多个传感器(例如,虚拟或物理home按钮)、用于检测与触敏表面的接触强度的任选地一个或多个传感器、一个或多个触觉输出发生器、任选的一个或多个设备取向传感器以及任选的音频系统的电子设备提供了改进的方法和界面,用于在与按钮交互期间向用户提供反馈,由此提高有效性、效率和用户对此类设备的满意度。此类方法和界面可补充或替换用于向用户提供触觉反馈的常规方法。
附图说明
为了更好地理解本发明的各种所描述的实施方案,应该结合以下附图参考下面的具体实施方式,在附图中,类似的附图标号在所有附图中指示对应的部分。
图1A是示出了根据一些实施方案具有触敏显示器的便携式多功能设备的框图。
图1B是示出了根据一些实施方案用于事件处理的示例部件的框图。
图1C是示出了根据一些实施方案的触觉输出模型的框图。
图2A示出了根据一些实施方案具有触摸屏的便携式多功能设备。
图2B-图2C示出了根据一些实施方案的力敏输入设备的分解图。
图3是根据一些实施方案具有显示器和触敏表面的示例多功能设备的框图。
图4A示出了根据一些实施方案针对便携式多功能设备上的应用菜单的示例用户界面。
图4B示出了根据一些实施方案用于具有与显示器分开的触敏表面的多功能设备的一种示例用户界面。
图4C-图4E示出了根据一些实施方案的动态强度阈值的实施例。
图4F1-图4F4和4G1-图4G4示出了根据一些实施方案的一组样本触觉输出模式。
图4H-图4J示出了根据一些实施方案,结合触觉输出使用以模拟按钮点击的示例触觉音频输出模式与时间的关系。
图4K示出了根据一些实施方案,触觉输出模式与触觉音频输出模式的示例组合与时间的关系。图4L-图4Q为清晰起见放大了图4K中所示的组合。
图5A1-图5A18示出了根据一些实施方案用于为按钮交互提供触觉和视觉反馈的示例性用户界面。
图5B1-图5B75示出了根据一些实施方案用于为按钮交互提供触觉和视觉反馈的示例性用户界面。
图5C1-图5C19示出了根据一些实施方案用于home按钮配置过程的示例性用户界面。
图6A1-图6B26示出了根据一些实施方案用于控制用户界面触觉和home按钮触觉的示例性用户界面。
图7A-图7G是示出了根据一些实施方案提供与激活用户输入设备相关的视觉反馈的方法的流程图。
图8是根据一些实施方案的电子设备的功能框图。
图9A-图9D是示出了根据一些实施方案响应于设备的home按钮上的多种输入提供视觉反馈和触觉输出的方法的流程图。
图10是根据一些实施方案的电子设备的功能框图。
图11A-图11E是示出了根据一些实施方案的home按钮配置的方法的流程图。
图12是根据一些实施方案的电子设备的功能框图。
图13A-图13D是示出了根据一些实施方案的控制用户界面触觉和home屏幕触觉的方法的流程图。
图14是根据一些实施方案的电子设备的功能框图。
图15A-图15E是示出了根据一些实施方案依据基于输入的度量或基于用户界面的度量生成具有不同触觉输出模式的触觉输出的方法的流程图。
图16是根据一些实施方案的电子设备的功能框图。
图17A-图17D是示出了根据一些实施方案为双击输入的第二次点击提供与双击输入的第一次点击不同的触觉输出的方法的流程图。
图18是根据一些实施方案的电子设备的功能框图。
图19A-图19C是示出了根据一些实施方案提供分立的触觉输出以指示激活设备上持续的非机械按钮的方法的流程图。
图20是根据一些实施方案的电子设备的功能框图。
具体实施方式
很多具有显示器的电子设备包括机械按钮,诸如机械home按钮,以在电子设备上显示的不同用户界面之间导航。但机械按钮除了固定的按下点击和固定的松开点击之外,只给用户提供非常少的(如果有的话)反馈。本文描述的方法在与按钮(例如,虚拟或物理home按钮)交互期间提供视觉、触觉和/或音频反馈,使得用户操纵用户界面更有效直观。
本文描述的方法、设备和GUI使用反馈通过多种方式改进设备-用户的交互,包括通过:
·提供关于激活用户输入设备(例如,虚拟或物理home按钮)的视觉反馈;
·响应于设备的home按钮上多种输入而提供视觉反馈和触觉输出;
·配置由home按钮提供的反馈;
·控制用户界面触觉和home按钮触觉;
·依据基于输入的度量或基于用户界面的度量生成具有不同触觉输出模式的触觉输出;
·为双击输入的第二次点击提供与双击输入的第一次点击不同的触觉输出;以及
·提供分立的触觉输出以指示激活了设备上的持续非机械按钮。
示例设备
现在将详细地参考实施方案,这些实施方案的实施例在附图中示出。下面的详细描述中示出许多具体细节,以便提供对各种所描述的实施方案的充分理解。然而,对本领域的普通技术人员将显而易见的是,各种所描述的实施方案可以在没有这些具体细节的情况下被实践。在其他情况下,没有详细地描述众所周知的方法、过程、部件、电路和网络,从而不会不必要地使实施方案的各个方面晦涩难懂。
还应当理解,虽然在一些情况下,术语“第一”、“第二”等在本文中用于描述各种元素,但是这些元素不应受到这些术语限制。这些术语只是用于将一个元素与另一元素区分开。例如,第一接触可被命名为第二接触,并且类似地,第二接触可被命名为第一接触,而不脱离各种所描述的实施方案的范围。第一接触和第二接触均为接触,但它们不是同一个接触,除非上下文另外明确地指出。
在本文中对各种所述实施方案的描述中所使用的术语只是为了描述特定实施方案的目的,而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样,单数形式“一个”、“该”或“所述”旨在也包括复数形式,除非上下文另外明确地指出。还应当理解,本文中所使用的术语“和/或”是指并且涵盖相关联地列出的项目中的一个或多个项目的任何和全部可能的组合。进一步应当理解,术语“包括”(“includes”,“including”,“comprises”和/或“comprising”)当在本说明书中使用时指定存在所陈述的特征、整数、步骤、操作、元素、和/或部件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元素、部件、和/或其分组。
如本文中所用,根据上下文,术语“如果”任选地被解释为意思是“当……时”(“when”或“upon”)或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为是指“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、针对此类设备的用户界面和用于使用此类设备的相关联的过程的实施方案。在一些实施方案中,该设备为还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自Apple Inc(Cupertino,California)的设备、iPod设备、和设备。任选地使用其他便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型电脑或平板电脑。还应当理解,在一些实施方案中,该设备并非便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触摸板)的台式计算机。
在下面的论述中,描述了一种包括显示器和触敏表面的电子设备。然而,应当理解,该电子设备任选地包括一个或多个其他物理用户界面设备,诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用,诸如以下应用中的一个或多个应用:笔记记录应用、绘图应用、呈现应用、文字处理应用、网站创建应用、盘编辑应用、电子表格应用、游戏应用、电话应用、视频会议应用、电子邮件应用、即时消息应用、健身支持应用、照片管理应用、数字相机应用、数字摄像机应用、Web浏览应用、数字音乐播放器应用、和/或数字视频播放器应用。
在设备上执行的各种应用任选地使用至少一个通用的物理用户界面设备,诸如触敏表面。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地对于不同应用被调整和/或变化,和/或在相应应用内被调整和/或变化。这样,设备的通用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用。
现在关注具有触敏显示器的便携式设备的实施方案。图1A是示出了根据一些实施方案具有触敏显示器系统112的便携式多功能设备100的框图。触敏显示器系统112有时为了方便而被叫做“触摸屏”,并且有时被简称为触敏显示器。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入或控制设备116、和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100(例如,触敏表面,诸如设备100的触敏显示器系统112)上的接触强度的一个或多个强度传感器165。设备100包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如在触敏表面诸如设备100的触敏显示器系统112或设备300的触摸板355上生成触觉输出)。这些部件任选地通过一个或多个通信总线或信号线103进行通信。
如本说明书和权利要求书中所使用的,术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户手部的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解释为触感,该触感与设备或设备的部件的物理特征的所感知的变化对应。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动器按钮没有移动时。作为另一个实施例,即使在触敏表面的光滑度无变化时,触敏表面的移动也会任选地由用户解释为或感测为触敏表面的“粗糙度”。虽然由用户对触摸的此类解释将受到用户的个体化感官知觉的限制,但是有许多触摸的感官知觉是大多数用户共有的。因此,当触觉输出被描述为与用户的特定感官知觉(例如,“松开点击”、“按下点击”、“粗糙度”)对应时,除非另外陈述,否则所生成的触觉输出与设备或其部件的物理位移对应,该物理位移将会生成典型(或普通)用户的所描述的感官知觉。使用触觉输出向用户提供触觉反馈增强了设备的可操作性并使得用户-设备界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使用户能够更快更有效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
在一些实施方案中,触觉输出模式指定触觉输出的特征,诸如触觉输出的振幅、触觉输出移动波形的形状、触觉输出的频率和/或触觉输出的持续时间。
在设备(例如,经由一个或多个移动可移动质量以生成触觉输出的触觉输出发生器)生成具有不同触觉输出模式的触觉输出时,该触觉输出可以在拿着或触摸该设备的用户体内引起不同的触觉感觉。尽管用户的感觉基于用户对触觉输出的感知,但大部分用户将能够识别设备生成的触觉输出的波形、频率和振幅的变化。因此,可以调节波形、频率和振幅以向用户指示已经执行了不同的操作。这样一来,在一些环境中,具有设计、所选择和/或设定成模拟给定环境(例如,包括图形特征和对象的用户界面、具有虚拟边界和虚拟对象的模拟物理环境、具有物理边界和物理对象的真实物理环境和/或以上任意的组合)中对象特征(例如,尺寸、材料、重量、硬度、平滑度等);行为(例如,振荡、位移、加速、旋转、膨胀等);和/或交互(例如,碰撞、粘附、排斥、吸引、摩擦等)的触觉输出模式的触觉输出将向用户提供有帮助的反馈,其减少输入错误并提高用户操作设备的效率。此外,任选地生成触觉输出以对应于与模拟的物理特征,诸如输入阈值或对象的选择,无关的反馈。在一些环境中,此类触觉输出向用户提供有帮助的反馈,其减少输入错误并提高用户操作设备的效率。
在一些实施方案中,具有适当触觉输出模式的触觉输出充当用户界面中或设备中场景后方发生感兴趣事件的提示。感兴趣事件的示例包括激活设备上或用户界面中提供的示能表示(例如,真实或虚拟按钮,或切换开关),所请求的操作成功或失败,达到或跨越用户界面中的边界,进入新的状态,在对象之间切换输入焦点,激活新模式,达到或跨越输入阈值,检测或识别输入或手势的类型等。在一些实施方案中,提供触觉输出以充当即将发生的事件或结果的警告或提示,除非及时检测到重定向或中断输入,否则就会发生该事件或结果。还在其他情景中使用触觉输出以丰富用户体验,改善视觉或运动困难或有其他可及性需求的用户对设备的可及性和/或改善用户界面和/或设备的效率和功能性。触觉输出任选地伴随有音频输出和/或可见的用户界面改变,这进一步增强了用户与用户界面和/或设备交互时的体验,并便于更好地传达关于用户界面和/或设备状态的信息,这样减少了输入错误并提高了用户操作设备的效率。
图4F1提供了可以逐个或组合,照原样或通过一种或多种变换(例如,调制,放大,截断等)使用的一组样本触觉输出模式,以在各种情形中并出于各种目的形成适当的触觉反馈,各种情形和各种目的诸如是上文提到的那些和相对于本文所述的用户界面和方法描述的那些。图4F2-图4F4是图4F1中所示曲线图的扩展图。这个触觉输出调色板的实施例示出了如何可以使用一组三个波形和八个频率产生触觉输出模式的阵列。除了本图中所示的触觉输出模式之外,任选地通过改变触觉输出模式的增益值,调节这些触觉输出模式的每种的振幅,如图所示,例如,对于图4G1中的FullTap 80Hz、FullTap 200Hz、MiniTap 80Hz、MiniTap 200Hz、MicroTap80Hz和MicroTap 200Hz,其均利用增益为1.0、0.75、0.5和0.25的变体示出。图4G2-图4G4是图4G1中所示曲线图的扩展图。如图4G1所示,改变触觉输出模式的增益改变了模式的振幅而不改变模式的频率或改变波形的形状。在一些实施方案中,改变触觉输出模式的频率还导致更低的振幅,因为一些触觉输出发生器受到可以向可移动质量施加多大力的限制,于是质量的更高频率移动被约束到更低振幅,以确保形成该波形所需的加速度不需要触觉输出发生器操作力范围之外的力(例如,在230Hz、270Hz和300Hz处的FullTap的峰值振幅低于在80Hz、100Hz、125Hz和200Hz处的FullTap的振幅)。
在图4F1中,每个列示出了具有特定波形的触觉输出模式。触觉输出模式的波形表示为生成具有该触觉输出模式的触觉输出,可移动质量经历的相对于中性位置(例如,xzero)的物理位移与时间之间关系的模式。例如,图4F1中左列中所示的第一组触觉输出模式(例如,“FullTap”触觉输出模式)均具有包括两个完整周期的振荡(例如,在中性位置开始和结束并跨越中性位置三次的振荡)的波形。图4F1中中列中所示的第二组触觉输出模式(例如,“MiniTap”触觉输出模式)均具有包括一个完整周期的振荡(例如,在中性位置开始和结束并跨越中性位置一次的振荡)的波形。图4F1中右列中所示的第三组触觉输出模式(例如,“MicroTap”触觉输出模式)均具有包括一半完整周期的振荡(例如,在中性位置开始和结束且不跨越中性位置的振荡)的波形。触觉输出模式的波形还包括起始缓冲和结束缓冲,其表示可移动质量在触觉输出的开始和结束时的逐渐加速和减速。图4F1-图4G1中所示的示例波形包括xmin和xmax值,其表示可移动质量的最大和最小移动范围。对于具有更大可移动质量的更大电子设备,质量的移动可以有更大或更小的最小和最大范围。图4F1-图4G1中所示的示例描述了质量在1个维度的移动,然而,类似原理会也适用于可移动质量在两个或三个维度上的移动。
如图4F1所示,每个触觉输出模式还具有对应的特征频率,其影响着用户从具有该特征频率的触觉输出感觉到的触觉感觉的“间距”。对于连续的触觉输出,该特征频率表示触觉输出发生器的可移动质量在给定一段时间之内完成的周期数量(例如,每秒的周期数)。对于分立的触觉输出,生成分立的输出信号(例如,具有0.5、1或2个周期),该特征频率值指定可移动质量需要多快移动以生成具有该特征频率的触觉输出。如图4F1所示,对于每种触觉输出(例如,由相应波形定义,诸如FullTap、MiniTap或MicroTap),更高的频率值对应于可移动质量的更快移动,因此,通常,对应于完成触觉输出的更短时间(例如,包括针对分立触觉输出完成所需数量周期的时间,加上开始和结束缓冲时间)。例如,特征频率为80Hz的FullTap要比特征频率为100Hz的FullTap花更长时间完成(例如,图4F1中的35.4ms与28.3ms)。此外,对于给定频率,在相应频率处在其波形中具有更多周期的触觉输出比在相同相应频率处在其波形中具有更少周期的触觉输出花更长时间完成。例如,150Hz的FullTap比150Hz的MiniTap花更长时间完成(例如,19.4ms与12.8ms),150Hz的MiniTap比150Hz的MicroTap花更长时间完成(例如,12.8ms与9.4ms)。然而,对于具有不同频率的触觉输出模式,这条规则可能不适用(例如,周期更多但频率更高的触觉输出可能比周期更少但频率更低的触觉输出花更短的时间量完成,反之亦然)。例如,在300Hz,FullTap与MiniTap花同样长的时间(例如,9.9ms)。
如图4F1所示,触觉输出模式还具有影响触觉信号中包含的能量的量的特征振幅,或者可以由用户通过具有该特征振幅的触觉输出感觉到的触觉感觉的“强度”。在一些实施方案中,触觉输出模式的特征振幅是指表示可移动质量在生成触觉输出时从中性位置的最大位移的绝对值或归一化值。在一些实施方案中,可以根据各种条件(例如,基于用户界面情景和行为定制)和/或预配置的度量(例如,基于输入的度量和/或基于用户界面的度量),例如通过固定或动态确定的增益因子(例如,0和1之间的值)调节触觉输出模式的特征振幅。在一些实施方案中,基于输入的度量(例如,强度改变度量或输入速度度量)测量在触发生成触觉输出的输入期间输入的特征(例如,按压输入中接触特征强度的改变速率或触敏表面上接触的移动速率)。在一些实施方案中,基于用户界面的度量(例如,跨边界的速度度量)测量在触发生成触觉输出的用户界面改变期间,用户界面元素的特征(例如,该元素跨越用户界面中隐藏或可见边界的移动速度)。在一些实施方案中,触觉输出模式的特征振幅可以由“包络”调制,相邻周期的峰可以具有不同的振幅,其中上文所示波形之一进一步通过乘以随时间改变(例如,从0到1)的包络参数而被修改,以在生成触觉输出时随时间逐渐调节触觉输出各部分的振幅。
尽管出于例示性目的,在图4F1中以样本触觉输出模式表示特定频率、振幅和波形,但可以出于类似目的使用具有其他频率、振幅和波形的触觉输出模式。例如,可以使用具有0.5到4个周期之间的波形。也可以使用60Hz-400Hz范围中的其他频率。表1提供了特定触觉反馈行为、配置及其使用示例的示例。
表1
表1中上文所示的示例意在例示可以针对不同输入和事件生成触觉输出的一定范围的环境。表1不应被视为需要设备利用所指示的触觉输出对所列输入或事件的每个做出响应。相反,表1意在例示触觉输出针对不同的输入和/或事件(例如,基于触觉输出模式、频率、增益等)如何变化和/或是类似的。例如,表1示出了“事件成功”触觉输出是如何从“事件失败”触觉输出变化的,以及重新定位触觉输出与冲击触觉输出如何不同。
图4H-图4J示出了根据一些实施方案,结合触觉输出使用以模拟按钮点击的示例触觉音频输出模式与时间的关系。
图4K示出了根据一些实施方案,触觉输出模式与触觉音频输出模式的示例组合与时间的关系。图4L-图4Q为清晰起见放大了图4K中所示的组合。
在图4H中,顶部触觉音频模式“点击A1音频”是结合“点击A”正常MiniTap(230Hz)播放的音频输出,以模拟“正常”第一次点击中的第一次按下点击,如图4K(第一点击列中的第一行)和图4L的上部所示,其中控制激活阈值处接触强度的改变速率高于阈值改变速率(例如,该接触正在做出“正常”用力/快速按压)。在该实施例中,“点击A1音频”从“点击A”正常MiniTap(230Hz)触觉输出的起点偏移2ms。在一些情况下,播放同样的“点击A1音频”和“点击A”正常MiniTap(230Hz)以模拟第一次按下点击之后的第一次松开点击。在一些情况下,在松开点击中,相对于前面的按下点击,减小“点击A1音频”和/或“点击A”正常MiniTap(230Hz)的增益(例如,减小50%)。
顶部触觉音频模式“点击A1音频”也是结合“点击A”软MiniTap(230Hz)播放的,以模拟“软”第一次点击中的第一次按下点击,如图4K(第一点击列中的第二行)和图4L的下部所示,其中控制激活阈值处接触强度的改变速率低于阈值改变速率(例如,该接触正在做出“软”和/或慢按压)。为了模拟“软”按下点击,在“软”按下点击中,相对于“正常”按下点击,减小“点击A1音频”和“点击A”软MiniTap(230Hz)的增益(例如,减小50%)。在该实施例中,“点击A1音频”从“点击A”软MiniTap(230Hz)触觉输出的起点偏移2ms。在一些情况下,播放同样的“点击A1音频”和“点击A”软MiniTap(230Hz)以模拟第一次按下点击之后的第一次松开点击。在一些情况下,在松开点击中,相对于前面的按下点击,减小“点击A1音频”和/或“点击A”软MiniTap(230Hz)的增益(例如,减小50%)。
在图4H中,底部触觉音频模式“点击A2音频”是结合“点击A”正常MiniTap(230Hz)播放的音频输出,以模拟在预先确定的一段时间之内继第一次点击之后的“正常”第二次点击(例如,作为双击输入中的第二次点击)中的第二次按下点击,如图4K(第二点击列中的第一行)和图4M的上部所示,其中控制激活阈值处接触强度的改变速率高于阈值改变速率(例如,第二次点击中的该接触正在做出“正常”用力/快速按压)。在该实施例中,“点击A2音频”从“点击A”正常MiniTap(230Hz)触觉输出的起点偏移2ms。在一些情况下,播放同样的“点击A2音频”和“点击A”正常MiniTap(230Hz)以模拟第二次按下点击之后的第二次松开点击。在一些情况下,在第二次松开点击中,相对于前面的第二次按下点击,减小“点击A2音频”和/或“点击A”正常MiniTap(230Hz)的增益(例如,减小50%)。
底部触觉音频模式“点击A2音频”是也是结合“点击A”软MiniTap(230Hz)播放的,以模拟在预先确定的一段时间之内继第一次点击之后的“软”第二次点击(例如,作为双击输入中的第二次点击)中的第二次按下点击,如图4K(第二点击列中的第二行)和图4M的下部所示,其中控制激活阈值处接触强度的改变速率低于阈值改变速率(例如,该接触正在做出“软”和/或慢按压)。为了模拟“软”按下点击,在“软”按下点击中,相对于“正常”按下点击,减小“点击A2音频”和“点击A”软MiniTap(230Hz)的增益(例如,减小50%)。在该实施例中,“点击A2音频”从“点击A”软MiniTap(230Hz)触觉输出的起点偏移2ms。在一些情况下,播放同样的“点击A2音频”和“点击A”软MiniTap(230Hz)以模拟第二次按下点击之后的第二次松开点击。在一些情况下,在第二次松开点击中,相对于前面的第二次按下点击,减小“点击A2音频”和/或“点击A”软MiniTap(230Hz)的增益(例如,减小50%)。
在图4I中,顶部触觉音频模式“点击B1音频”是结合“点击B”正常MiniTap(270Hz)播放的音频输出,以模拟“正常”第一次点击中的第一次按下点击,如图4K(第一点击列中的第三行)和图4N的上部所示,其中控制激活阈值处接触强度的改变速率高于阈值改变速率(例如,该接触正在做出“正常”用力/快速按压)。在该实施例中,“点击B1音频”从“点击B”正常MiniTap(270Hz)触觉输出的起点偏移2.8ms。在一些情况下,播放同样的“点击B1音频”和“点击B”正常MiniTap(270Hz)以模拟第一次按下点击之后的第一次松开点击。在一些情况下,在松开点击中,相对于前面的按下点击,减小“点击B1音频”和/或“点击B”正常MiniTap(270Hz)的增益(例如,减小50%)。
顶部触觉音频模式“点击B1音频”也是结合“点击B”软MiniTap(270Hz)播放的,以模拟“软”第一次点击中的第一次按下点击,如图4K(第一点击列中的第四行)和图4N的下部所示,其中控制激活阈值处接触强度的改变速率低于阈值改变速率(例如,该接触正在做出“软”和/或慢按压)。为了模拟“软”按下点击,在“软”按下点击中,相对于“正常”按下点击,减小“点击B1音频”和“点击B”软MiniTap(270Hz)的增益(例如,减小50%)。在该实施例中,“点击B1音频”从“点击B”软MiniTap(270Hz)触觉输出的起点偏移2.8ms。在一些情况下,播放同样的“点击B1音频”和“点击B”软MiniTap(270Hz)以模拟第一次按下点击之后的第一次松开点击。在一些情况下,在松开点击中,相对于前面的按下点击,减小“点击B1音频”和/或“点击B”软MiniTap(230Hz)的增益(例如,减小50%)。
在图4I中,底部触觉音频模式“点击B2音频”是结合“点击B”正常MiniTap(270Hz)播放的音频输出,以模拟在预先确定的一段时间之内继第一次点击之后的“正常”第二次点击(例如,作为双击输入中的第二次点击)中的第二次按下点击,如图4K(第二点击列中的第三行)和图4O的上部所示,其中控制激活阈值处接触强度的改变速率高于阈值改变速率(例如,第二次点击中的该接触正在做出“正常”用力/快速按压)。在该实施例中,“点击B2音频”从“点击B”正常MiniTap(270Hz)触觉输出的起点偏移2.8ms。在一些情况下,播放同样的“点击B2音频”和“点击B”正常MiniTap(230Hz)以模拟第二次按下点击之后的第二次松开点击。在一些情况下,在第二次松开点击中,相对于前面的第二次按下点击,减小“点击B2音频”和/或“点击B”正常MiniTap(270Hz)的增益(例如,减小50%)。
底部触觉音频模式“点击B2音频”是也是结合“点击B”软MiniTap(270Hz)播放的,以模拟在预先确定的一段时间之内继第一次点击之后的“软”第二次点击(例如,作为双击输入中的第二次点击)中的第二次按下点击,如图4K(第二点击列中的第四行)和图4O的下部所示,其中控制激活阈值处接触强度的改变速率低于阈值改变速率(例如,该接触正在做出“软”和/或慢按压)。为了模拟“软”按下点击,在“软”按下点击中,相对于“正常”按下点击,减小“点击B2音频”和“点击B”软MiniTap(270Hz)的增益(例如,减小50%)。在该实施例中,“点击B2音频”从“点击B”软MiniTap(270Hz)触觉输出的起点偏移2.8ms。在一些情况下,播放同样的“点击B2音频”和“点击B”软MiniTap(270Hz)以模拟第二次按下点击之后的第二次松开点击。在一些情况下,在第二次松开点击中,相对于前面的第二次按下点击,减小“点击B2音频”和/或“点击B”软MiniTap(270Hz)的增益(例如,减小50%)。
在图4J中,顶部触觉音频模式“点击C1音频”是结合“点击C”正常MiniTap(300Hz)播放的音频输出,以模拟“正常”第一次点击中的第一次按下点击,如图4K(第一点击列中的第五行)和图4P的上部所示,其中控制激活阈值处接触强度的改变速率高于阈值改变速率(例如,该接触正在做出“正常”用力/快速按压)。在该实施例中,“点击C1音频”从“点击C”正常MiniTap(300Hz)触觉输出的起点偏移1.9ms。在一些情况下,播放同样的“点击C1音频”和“点击C”正常MiniTap(300Hz)以模拟第一次按下点击之后的第一次松开点击。在一些情况下,在松开点击中,相对于前面的按下点击,减小“点击C1音频”和/或“点击C”正常MiniTap(300Hz)的增益(例如,减小50%)。
顶部触觉音频模式“点击C1音频”也是结合“点击C”软MiniTap(300Hz)播放的,以模拟“软”第一次点击中的第一次按下点击,如图4K(第一点击列中的第六行)和图4P的下部所示,其中控制激活阈值处接触强度的改变速率低于阈值改变速率(例如,该接触正在做出“软”和/或慢按压)。为了模拟“软”按下点击,在“软”按下点击中,相对于“正常”按下点击,减小“点击C1音频”和“点击C”软MiniTap(300Hz)的增益(例如,减小50%)。在该实施例中,“点击C1音频”从“点击C”软MiniTap(300Hz)触觉输出的起点偏移1.9ms。在一些情况下,播放同样的“点击C1音频”和“点击C”软MiniTap(270Hz)以模拟第一次按下点击之后的第一次松开点击。在一些情况下,在松开点击中,相对于前面的按下点击,减小“点击C1音频”和/或“点击C”软MiniTap(300Hz)的增益(例如,减小50%)。
在图4J中,底部触觉音频模式“点击C2音频”是结合“点击C”正常MiniTap(300Hz)播放的音频输出,以模拟在预先确定的一段时间之内继第一次点击之后的“正常”第二次点击(例如,作为双击输入中的第二次点击)中的第二次按下点击,如图4K(第二点击列中的第五行)和图4Q的上部所示,其中控制激活阈值处接触强度的改变速率高于阈值改变速率(例如,第二次点击中的该接触正在做出“正常”用力/快速按压)。在该实施例中,“点击C2音频”从“点击C”正常MiniTap(300Hz)触觉输出的起点偏移1.9ms。在一些情况下,播放同样的“点击C2音频”和“点击C”正常MiniTap(300Hz)以模拟第二次按下点击之后的第二次松开点击。在一些情况下,在第二次松开点击中,相对于前面的第二次按下点击,减小“点击C2音频”和/或“点击C”正常MiniTap(300Hz)的增益(例如,减小50%)。
底部触觉音频模式“点击C2音频”是也是结合“点击C”软MiniTap(300Hz)播放的,以模拟在预先确定的一段时间之内继第一次点击之后的“软”第二次点击(例如,作为双击输入中的第二次点击)中的第二次按下点击,如图4K(第二点击列中的第六行)和图4Q的下部所示,其中控制激活阈值处接触强度的改变速率低于阈值改变速率(例如,该接触正在做出“软”和/或慢按压)。为了模拟“软”按下点击,在“软”按下点击中,相对于“正常”按下点击,减小“点击C2音频”和“点击C”软MiniTap(300Hz)的增益(例如,减小50%)。在该实施例中,“点击C2音频”从“点击C”软MiniTap(300Hz)触觉输出的起点偏移1.9ms。在一些情况下,播放同样的“点击C2音频”和“点击C”软MiniTap(300Hz)以模拟第二次按下点击之后的第二次松开点击。在一些情况下,在第二次松开点击中,相对于前面的第二次按下点击,减小“点击C2音频”和/或“点击C”软MiniTap(300Hz)的增益(例如,减小50%)。
应当理解,设备100仅是便携式多功能设备的一个示例,并且设备100任选地具有比所示出的更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件在硬件、软件、固件、或它们的任何组合(包括一个或多个信号处理电路和/或专用集成电路)中实施。
存储器102任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。设备100的其他部件(诸如CPU 120和外围设备接口118)对存储器102的访问任选地由存储器控制器122来控制。
外围设备接口118可被用于将设备的输入外围设备和输出外围设备耦接到CPU120和存储器102。该一个或多个处理器120运行或执行被存储在存储器102中的各种软件程序和/或指令集,以执行设备100的各种功能并处理数据。
在一些实施方案中,外围设备接口118、CPU 120、和存储器控制器122任选地在单个芯片诸如芯片104上实施。在一些其他实施方案中,它们被任选地在独立的芯片上实施。
RF(射频)电路108接收和发送也被叫做电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号来与通信网络以及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路,包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信来与网络以及其他设备进行通信,该网络为诸如互联网(也被称为万维网(WWW))、内联网、和/或无线网络(诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。该无线通信任选地使用多种通信标准、协议、和技术中的任一者,包括但不限于全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如,IEEE802.11a、IEEE 802.11ac、IEEE 802.11ax、IEEE 802.11b、IEEE 802.11g和/或IEEE802.11n)、互联网协议语音技术(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS)、和/或短消息服务(SMS))、或者包括在本文档提交日期还未开发出的通信协议的任何其他适当的通信协议。
音频电路110、扬声器111和麦克风113提供用户和设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人类可听见的声波。音频电路110还接收由麦克风113根据声波转换的电信号。音频电路110将电信号转换为音频数据并将音频数据传输到外围设备接口118,以用于处理。音频数据任选地由外围设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中,音频电路110还包括耳麦插孔(例如,图2A中的212)。耳麦插孔提供音频电路110与可移除音频输入外围设备/输出外围设备之间的接口,该外围设备为诸如仅输出的耳机或者具有输出(例如,单耳耳机或双耳耳机)和输入(例如,麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触敏显示器系统112和其他输入或控制设备116与外围设备接口118耦接。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161、和用于其他输入或控制设备的一个或多个输入控制器160。该一个或多个输入控制器160从其他输入或控制设备116接收电信号/将电信号发送到其他输入或控制设备。其他输入或控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击轮等。在一些另选的实施方案中,输入控制器160任选地耦接至以下各项中的任一者(或不耦接至以下各项中的任一者):键盘、红外线端口、USB端口、触笔、和/或指针设备诸如鼠标。一个或多个按钮(例如,图2A中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的增大/减小按钮。一个或多个按钮任选地包括下压按钮(例如,图2A中的206)。
触敏显示器系统112提供设备与用户之间的输入接口和输出接口。显示控制器156从触敏显示器系统112接收电信号和/或将电信号发送至触敏显示器系统112。触敏显示器系统112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频和它们的任何组合(统称为“图形”)。在一些实施方案中,一些视觉输出或全部视觉输出对应于用户界面对象。如本文所用,术语“示能表示”是指用户交互式图形用户界面对象(例如,被配置为对被引向图形用户界面对象的输入进行响应的图形用户界面对象)。用户交互式图形用户界面对象的示例包括但不限于按钮、滑块、图标、可选择菜单项、开关、超链接或其他用户界面控件。
触敏显示器系统112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器、或传感器组。触敏显示器系统112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触敏显示器系统112上的接触(和该接触的任何移动或中断),并且将检测到的接触转换为与被显示在触敏显示器系统112上的用户界面对象(例如,一个或多个软按键、图标、网页或图像)的交互。在一个示例性实施方案中,触敏显示器系统112和用户之间的接触点对应于用户的手指或触笔。
触敏显示器系统112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术,但是在其他实施方案中使用其他显示技术。触敏显示器系统112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触敏显示器系统112接触的一个或多个点的其他元素来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在一个示例性实施方案中,使用投射式互电容感测技术,诸如从Apple Inc.(Cupertino,California)的iPod中发现的技术。
触敏显示器系统112任选地具有超过100dpi的视频分辨率。在一些实施方案中,触摸屏视频分辨率超过400dpi(例如,500dpi、800dpi或更大)。用户任选地使用任何合适的物体或附加物诸如触笔、手指等来与触敏显示器系统112接触。在一些实施方案中,将用户界面设计成与基于手指的接触和手势一起工作,由于手指在触摸屏上的接触区域较大,因此这可能不如基于触笔的输入精确。在一些实施方案中,设备将基于手指的粗略输入翻译为精确的指针/光标位置或命令,以用于执行用户所期望的动作。
在一些实施方案中,除了触摸屏之外,设备100任选地包括用于激活或去激活特定功能的触摸板(未示出)。在一些实施方案中,触摸板是设备的触敏区域,该触敏区域与触摸屏不同,其不显示视觉输出。触摸板任选地是与触敏显示器系统112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如,电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电源状态指示器(例如,发光二极管(LED))、和与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出与I/O子系统106中的光学传感器控制器158耦接的光学传感器。光学传感器164任选地包括电荷耦合器件(CCD)、或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜而投射的光,并且将光转换为表示图像的数据。结合成像模块143(也被叫做相机模块),光学传感器164任选地捕获静态图像和/或视频。在一些实施方案中,光学传感器位于设备100的与设备前部上的触敏显示器系统112相背对的后部上,使得触摸屏能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中,另一光学传感器位于设备的前部上,从而获取该用户的图像(例如,用于自拍、用于在用户在触摸屏上查看其他视频会议参与者时进行视频会议等等)。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了与I/O子系统106中的强度传感器控制器159耦接的接触强度传感器。接触强度传感器165任选地包括一个或多个压阻应变仪、电容式力传感器、电气式力传感器、压电力传感器、光学力传感器、电容式触敏表面、或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施方案中,至少一个接触强度传感器与触敏表面(例如,触敏显示器系统112)并置排列或邻近。在一些实施方案中,至少一个接触强度传感器位于设备100的与位于设备100的前部上的触敏显示器系统112相背对的后部上。
设备100任选地还包括一个或多个接近传感器166。图1A示出了与外围设备接口118耦接的接近传感器166。另选地,接近传感器166与I/O子系统106中的输入控制器160耦接。在一些实施方案中,当多功能设备被置于用户耳朵附近时(例如,用户正在打电话时),接近传感器关闭并禁用触敏显示器系统112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了与I/O子系统106中的触觉反馈控制器161耦接的触觉输出发生器。触觉输出发生器167任选地包括一个或多个电声设备诸如扬声器或其他音频部件;和/或用于将能量转换成线性运动的机电设备诸如电机、螺线管、电活性聚合器、压电致动器、静电致动器、或其他触觉输出生成部件(例如,用于将电信号转换成设备上的触觉输出的部件)。触觉输出发生器167从触觉反馈模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,触敏显示器系统112)并置排列或邻近,并且任选地通过垂直地(例如,向设备100的表面内/外)或侧向地(例如,在与设备100的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。在一些实施方案中,至少一个触觉输出发生器传感器位于设备100的与位于设备100的前部上的触敏显示器系统112相背对的后部上。
设备100任选地还包括一个或多个加速度计168。图1A示出与外围设备接口118耦接的加速度计168。另选地,加速度计168任选地与I/O子系统106中的输入控制器160耦接。在一些实施方案中,基于对从该一个或多个加速度计所接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图显示信息。设备100任选地除了加速度计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系统)接收器(未示出),以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息。
在一些实施方案中,存储于存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、触觉反馈模块(或指令集)133、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135、以及应用(或指令集)136。此外,在一些实施方案中,存储器102存储设备/全局内部状态157,如在图1A和图3中所示的。设备/全局内部状态157包括以下各项中的一者或多者:活动应用状态,指示哪些应用(如果有的话)当前是活动的;显示状态,指示什么应用、视图或其他信息占据触敏显示器系统112的各个区域;传感器状态,包括从设备的各个传感器和其他输入或控制设备116获得的信息;以及关于设备位置和/或姿态的位置和/或定位信息。
操作系统126(例如,iOS、Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如,存储器管理、存储设备控制、电源管理等)的各种软件部件和/或驱动器,并且有利于各种硬件和软件部件之间的通信。
通信模块128促进通过一个或多个外部端口124来与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件部件。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备,或间接地通过网络(例如,互联网、无线LAN等)进行耦接。在一些实施方案中,外部端口是与Apple Inc.(Cupertino,California)的一些iPod设备中所使用的30针连接器相同或类似和/或兼容的多针(例如,30针)连接器。在一些实施方案中,外部端口是与Apple Inc.(Cupertino,California)的一些iPod设备中所使用的Lightning连接器相同或类似和/或兼容的Lightning连接器。
接触/运动模块130任选地检测与触敏显示器系统112(结合显示控制器156)和其他触敏设备(例如,触摸板或物理点击轮)的接触。接触/运动模块130包括各种软件部件以用于执行与(例如通过手指或触笔)接触检测相关的各种操作,诸如确定是否已发生接触(例如,检测手指按下事件)、确定接触强度(例如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪跨触敏表面的移动(例如,检测一个或多个手指拖动事件)、以及确定接触是否已停止(例如,检测手指抬离事件或者接触断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变),接触点的移动由一系列接触数据表示。这些操作任选地被应用于单点接触(例如,单指接触或触笔接触)或者多点同时接触(例如,“多点触摸”/多指接触)。在一些实施方案中,接触/运动模块130和显示控制器156检测触摸板上的接触。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触图案(例如,所检测到的接触的不同运动、定时、和/或强度)。因此,任选地通过检测特定接触图案来检测手势。例如,检测单指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标位置处)检测手指抬起(抬离)事件。作为另一个实施例,在触敏表面上检测手指轻扫手势包括检测手指按下事件、然后检测一个或多个手指拖动事件、并且随后检测手指抬起(抬离)事件。类似地,通过检测触笔的特定接触图案来任选地检测触笔的轻击、轻扫、拖动和其他手势。
在一些实施方案中,检测手指轻击手势取决于检测到手指按下事件和手指松开事件之间的时间长度,但与检测到手指按下事件和手指松开事件之间的手指接触强度无关。在一些实施方案中,根据确定手指按下事件和手指松开事件之间的时间长度小于预先确定值(例如,小于0.1、0.2、0.3、0.4或0.5秒),检测到轻击手势,而与轻击期间手指接触强度是否满足给定强度阈值(大于标称接触检测强度阈值)无关,诸如轻按压或深按压强度阈值。因此,手指轻击手势能够满足特定的输入标准,该输入标准不需要接触的特征强度满足给定强度阈值,以便满足特定输入标准。为了清晰起见,轻击手势中的手指接触典型地需要满足标称接触检测强度阈值,低于该阈值则检测不到接触,以便检测到手指按下事件。类似的分析适用于检测触笔的轻击手势或其他接触。在该设备能够检测悬停于触敏表面上方的手指或触笔接触的情况下,标称接触检测强度阈值任选地不对应于手指或触笔和触敏表面之间的物理接触。
相同的概念以类似方式适用于其他类型的手势。例如,基于满足标准任选地检测刷动手势、捏指手势、捏指分开手势和/或常压手势,该标准与手势中包括的接触强度无关,或者不需要执行该手势的接触达到强度阈值以被识别。例如,基于一个或多个接触的移动量检测刷动手势;基于两个或更多接触向彼此移动而检测到捏指手势;基于两个或更多接触彼此离开的移动检测到捏指分离手势;以及基于触敏表面上少于阈值量移动的接触的持续时间而检测到长按手势。这样一来,特定手势识别标准不要求接触强度满足相应强度阈值以便满足特定手势识别标准的表述意味着,如果手势中的接触未达到相应强度阈值,就能够满足该特定手势识别标准,且在手势中接触的一个或多个未达到或超过相应强度阈值的环境中也能够满足该识别标准。在一些实施方案中,基于确定在预定义时间段之内检测到手指按下和手指松开事件而检测到轻击手势,与预定义时间段期间接触高于还是低于相应强度阈值无关,并且基于确定接触移动大于预定义大小,即使在接触移动的末尾接触高于相应强度阈值,也检测到刷动手势。即使在手势检测受到执行手势的接触强度影响的具体实施中(例如,该设备在接触强度高于强度阈值时更快地检测长按,或在接触强度更高时延迟检测轻击输入),那些手势的检测不要求接触达到特定强度阈值,只要在接触未达到特定强度阈值的环境中可以满足识别手势的标准即可(例如,即使其识别手势所花的时间量改变)。
在一些环境中,以多种不同的组合来组合接触强度阈值、持续时间阈值和移动阈值,以便形成启发,用于区分指向同一输入元素或区域的两个或更多不同手势,从而能够与同一输入元素进行多种不同交互,以提供更丰富的用户交互和响应集。特定组的手势识别标准不要求接触强度满足相应强度阈值以便满足特定手势识别标准的表述不排除在手势包括高于相应强度阈值的强度的接触时同时评估其他取决于强度的手势识别标准以识别确实满足标准的其他手势。例如,在一些环境中,针对第一手势的第一手势识别标准——不要求接触强度满足相应强度阈值以便满足第一手势识别标准——是与针对第二手势的第二手势识别标准竞争的——其取决于达到相应强度阈值的接触。在此类竞争中,如果首先满足针对第二手势的第二手势识别标准,则任选地不将该手势识别为满足针对第一手势的第一手势识别标准。例如,如果在接触移动预定义移动量之前接触达到相应强度阈值,则检测到深按压手势而非刷动手势。相反,如果在接触达到相应强度阈值之前,接触移动预定义移动量,则检测到刷动手势而非深按压手势。即使在此类环境中,针对第一手势的第一手势识别标准仍然不要求接触强度满足相应强度阈值以便满足第一手势识别标准,因为如果接触保持低于相应强度阈值直到手势结束(例如,接触不会增大到高于相应强度阈值的强度的刷动手势),该手势会已经被第一手势识别标准识别为刷动手势。这样一来,不要求接触强度满足相应强度阈值以便满足特定手势识别标准的特定手势识别标准将(A)在一些环境中,忽略相对于强度阈值的接触强度(例如,对于轻击手势)和/或(B)在一些环境中,仍然取决于接触相对于强度阈值而言的强度,因为如果在特定手势识别标准识别对应于输入的手势之前,竞争组的取决于强度的手势识别标准(例如,针对深按压手势)将输入识别为对应于取决于强度的手势,该特定手势识别标准(例如,针对长按手势)将会失效(例如,对于与深按压手势竞争识别的长按手势)。
图形模块132包括用于在触敏显示器系统112或其他显示器上呈现和显示图形的各种已知软件部件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,包括但不限于文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等。
在一些实施方案中,图形模块132存储待使用的用于表示图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用等接收用于指定待显示的图形的一个或多个代码,在必要的情况下还接收坐标数据和其他图形属性数据,并且然后生成屏幕图像数据,以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件部件,该指令由触觉输出发生器167使用,以便响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用)中输入文本的软键盘。
GPS模块135确定设备的位置并提供在各种应用中使用的这种信息(例如,提供至用于基于位置的拨号的电话138,提供至相机143作为图片/视频元数据,以及提供至提供基于位置的服务诸如天气桌面小程序、当地黄页桌面小程序和地图/导航桌面小程序的应用)。
应用136任选地包括以下模块(或指令集)或者其子集或超集:
·联系人模块137(有时称作通讯录或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健身支持模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·浏览器模块147;
·日历模块148;
·桌面小程序模块149,其任选地包括以下各项中的一者或多者:天气桌面小程序149-1、股票桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5和由用户获得的其他桌面小程序,以及用户创建的桌面小程序149-6;
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150;
·搜索模块151;
·视频和音乐播放器模块152,任选地由视频播放器模块和音乐播放器模块构成;
·记事本模块153;
·地图模块154;和/或
·在线视频模块155。
任选地存储在存储器102中的其他应用136的示例包括其他文字处理应用、其他图像编辑应用、绘图应用、呈现应用、支持JAVA的应用、加密、数字权益管理、语音识别、和语音复制。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,联系人模块137包括用于管理通讯录或联系人列表(例如被存储在存储器102或存储器370中的联系人模块137的应用内部状态192中)的可执行指令,包括:将姓名添加到通讯录;从通讯录删除姓名;使电话号码、电子邮件地址、物理地址或其他信息与姓名相关联;使图像与姓名相关联;对姓名归类和分类;提供电话号码和/或电子邮件地址以发起和/或促进通过电话138、视频会议139、电子邮件140、或IM 141的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示器系统112、显示控制器156、接触模块130、图形模块132、和文本输入模块134,电话模块138包括用于执行以下操作的可执行指令:输入与电话号码对应的字符序列、访问通讯录137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话、以及当会话完成时断开或挂断。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一者。
结合RF电路108、音频电路110、扬声器111、麦克风113、触敏显示器系统112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138,视频会议模块139包括根据用户指令来发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,即时消息模块141包括用于执行以下操作的可执行指令:输入与即时消息对应的字符序列、修改先前输入的字符、传输相应的即时消息(例如,使用针对基于电话的即时消息的短消息服务(SMS)或多媒体消息服务(MMS)协议或者使用针对基于互联网的即时消息的XMPP、SIMPLE、Apple推送通知服务(APNs)或IMPS)、接收即时消息,以及查看所接收的即时消息。在一些实施方案中,所传输和/或接收的即时消息任选地包括图形、相片、音频文件、视频文件、和/或MMS和/或增强消息服务(EMS)中所支持的其他附接件。如本文所用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS发送的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE、APNs或IMPS发送的消息)两者。
结合RF电路108、触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154、和音乐播放器模块146,健身支持模块142包括用于执行以下操作的可执行指令:创建健身(例如具有时间、距离、和/或卡路里燃烧目标);与(运动设备和智能手表中的)健身传感器进行通信;接收健身传感器数据;校准用于监视健身的传感器;选择健身音乐并进行播放;以及显示、存储和传输健身数据。
结合触敏显示器系统112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132和图像管理模块144,相机模块143包括用于执行以下操作的可执行指令:捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特征、和/或从存储器102删除静态图像或视频。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132、文本输入模块134和相机模块143,图像管理模块144包括用于排列、修改(例如,编辑)、或以其他方式操纵、加标签、删除、呈现(例如,在数字幻灯片或相册中),以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,浏览器模块147包括根据用户指令来浏览互联网(包括搜索、链接到、接收、和显示网页或其部分、以及链接到网页的附件和其他文件)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括用于根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序模块149是任选地由用户下载和使用的微型应用(例如,天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4和词典桌面小程序149-5)、或由用户创建的微型应用(例如,用户创建的桌面小程序149-6)。在一些实施方案中,桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中,桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!桌面小程序)。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147,桌面小程序创建器模块150包括用于创建桌面小程序(例如,将网页的用户指定部分转到桌面小程序中)的可执行指令。
结合触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134,搜索模块151包括用于根据用户指令来搜索存储器102中的与一个或多个搜索条件(例如,一个或多个用户指定的搜索词)匹配的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令,以及用于显示、呈现或以其他方式回放视频(例如,在触敏显示器系统112上或在无线连接的或经由外部端口124连接的外部显示器上)的可执行指令。在一些实施方案中,设备100任选地包括MP3播放器,诸如iPod(Apple Inc.的商标)的功能。
结合触敏显示器系统112、显示控制器156、接触模块130、图形模块132和文本输入模块134,记事本模块153包括用于根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154包括用于根据用户指令来接收、显示、修改和存储地图以及与地图相关联的数据(例如,驾车路线;与特定位置处或附近的商店及其他兴趣点有关的数据;以及其他基于位置的数据)的可执行指令。
结合触敏显示器系统112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、回放(例如在触摸屏112上或在无线连接的或经由外部端口124连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件、以及以其他方式管理一种或多种文件格式诸如H.264的在线视频的可执行指令。在一些实施方案中,使用即时消息模块141而不是电子邮件客户端模块140来发送至特定在线视频的链接。
上述模块和应用中的每个模块和应用对应于用于执行上述一种或多种功能以及本专利申请所述的方法(例如,本文所述的计算机实现的方法和其他信息处理方法)的可执行指令集。这些模块(即,指令集)不必以独立的软件程序、过程或模块实现,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。在一些实施方案中,存储器102任选地存储上述模块和数据结构的子集。此外,存储器102任选地存储上面未描述的附加模块和数据结构。
在一些实施方案中,设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触摸板作为用于设备100的操作的主要输入控制设备,任选地减少设备100上的物理输入控制设备(诸如下压按钮、拨号盘等等)的数量。
唯一地通过触摸屏和/或触摸板执行的该预定义的一组功能任选地包括在用户界面之间进行导航。在一些实施方案中,触摸板在被用户触摸时将设备100从被显示在设备100上的任何用户界面导航到主菜单、home屏幕菜单或根菜单。在此类实施方案中,使用触摸板来实现“菜单按钮”。在一些其他实施方案中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触摸板。
图1B是示出了根据一些实施方案用于事件处理的示例部件的框图。在一些实施方案中,存储器102(图1A中)或存储器370(图3)包括事件分类器170(例如,在操作系统126中)和相应的应用136-1(例如,前述应用136、137至155、380至390中的任一个应用)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用136-1和应用136-1的应用视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中,应用136-1包括应用内部状态192,该应用内部状态指示当应用是活动的或正在执行时在触敏显示器系统112上显示的当前应用视图。在一些实施方案中,设备/全局内部状态157被事件分类器170用于确定哪个(哪些)应用当前是活动的,并且应用内部状态192被事件分类器170用于确定要将事件信息递送到的应用视图191。
在一些实施方案中,应用内部状态192包括另外的信息,诸如以下各项中的一者或多者:当应用136-1恢复执行时将被使用的恢复信息、指示正被应用136-1显示的信息或准备好用于被该应用显示的信息的用户界面状态信息、用于使得用户能够返回到应用136-1的前一状态或视图的状态队列,以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如,作为多点触摸手势的一部分的触敏显示器系统112上的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器(诸如接近传感器166、加速度计168和/或麦克风113(通过音频电路110))接收的信息。外围设备接口118从I/O子系统106所接收的信息包括来自触敏显示器系统112或触敏表面的信息。
在一些实施方案中,事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应,外围设备接口118传输事件信息。在其他实施方案中,外围设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中,事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器系统112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户可在显示器上看到的控件和其他元素构成。
与应用相关联的用户界面的另一方面是一组视图,在本文中有时也称为应用视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用的)应用视图任选地与在应用的程序化或视图分级结构内的程序化水平对应。例如,在其中检测到触摸的最低水平视图任选地被称为命中视图,并且被认为是正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,该初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于接触的手势的子事件相关的信息。当应用具有在分级结构中组织的多个视图时,命中视图确定模块172将命中视图识别为应对子事件进行处理的分级结构中的最低视图。在大多数情况下,命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别,命中视图通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块173确定仅命中视图才应接收特定子事件序列。在其他实施方案中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图都是活跃参与的视图,因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施方案中,即使触摸子事件完全被局限到与一个特定视图相关联的区域,但在分级结构中较高的视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施方案中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施方案中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器模块182进行检索。
在一些实施方案中,操作系统126包括事件分类器170。另选地,应用136-1包括事件分类器170。在其他实施方案中,事件分类器170是独立的模块,或者是存储在存储器102中的另一个模块(诸如接触/运动模块130)的一部分。
在一些实施方案中,应用136-1包括多个事件处理程序190和一个或多个应用视图191,其中每个应用视图包括用于处理发生在应用的用户界面的相应视图内的触摸事件的指令。应用136-1的每个应用视图191包括一个或多个事件识别器180。通常,相应应用视图191包括多个事件识别器180。在其他实施方案中,事件识别器180中的一个或多个事件识别器是独立模块的一部分,该独立模块诸如用户界面工具包(未示出)或应用136-1从中继承方法和其他属性的更高水平的对象。在一些实施方案中,相应事件处理程序190包括以下各项中的一者或多者:数据更新器176、对象更新器177、GUI更新器178和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用内部状态192。另选地,应用视图191中的一个或多个应用视图包括一个或多个相应事件处理程序190。另外,在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178中的一者或多者被包括在相应应用视图191中。
相应事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施方案中,事件识别器180还包括元数据183和事件递送指令188(其任选地包括子事件递送指令)的至少一个子集。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速率和方向。在一些实施方案中,事件包括设备从一个取向到另一取向(例如,从纵向取向到横向取向,或反之亦然)的旋转,并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,并基于该比较,确定事件或子事件,或确定或更新事件或子事件的状态。在一些实施方案中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其他。在一些实施方案中,事件187中的子事件包括例如触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个实施例中,针对事件1(187-1)的定义是在被显示对象上的双击。例如,双击包括被显示对象上的预先确定时长的第一次触摸(触摸开始)、预先确定时长的第一次抬离(触摸结束)、被显示对象上的预先确定时长的第二次触摸(触摸开始),以及预先确定时长的第二次抬离(触摸结束)。在另一个实施例中,针对事件2(187-2)的定义是被显示对象上的拖动。例如,拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器系统112上的移动、以及触摸的抬离(触摸结束)。在一些实施方案中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中,事件定义187包括对用于相应用户界面对象的事件的定义。在一些实施方案中,事件比较器184执行命中测试,以确定哪个用户界面对象与子事件相关联。例如,在触敏显示器系统112上显示三个用户界面对象的应用视图中,当在触敏显示器系统112上检测到触摸时,事件比较器184执行命中测试以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示的对象与相应的事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中,对相应事件187的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列是否确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件系列不与事件定义186中的任何事件匹配时,该相应事件识别器180进入事件不可能、事件失败或事件结束状态,在此之后忽略基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪并处理持续进行的基于触摸的手势的子事件。
在一些实施方案中,相应事件识别器180包括具有指示出事件递送系统应该如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标志和/或列表的元数据183。在一些实施方案中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标志和/或列表。在一些实施方案中,元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施方案中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中,相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中,事件识别器180抛出与所识别的事件相关联的标志,并且与该标志相关联的事件处理程序190获取该标志并执行预定义的过程。
在一些实施方案中,事件递送指令188包括递送关于子事件的事件信息而无需激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件系列相关联的事件处理程序或递送到活跃参与的视图。与子事件系列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施方案中,数据更新器176创建并更新在应用136-1中使用的数据。例如,数据更新器176对联系人模块137中所使用的电话号码进行更新,或者对视频播放器模块145中所使用的视频文件进行存储。在一些实施方案中,对象更新器177创建和更新在应用136-1中使用的对象。例如,对象更新器177创建新用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息,并且将显示信息发送到图形模块132,以用于触敏显示器上的显示。
在一些实施方案中,事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对数据更新器176、对象更新器177和GUI更新器178的访问权限。在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178被包括在相应应用136-1或应用视图191的单个模块中。在其他实施方案中,它们被包括在两个或更多个软件模块中。
应当理解,关于触敏显示器上的用户触摸的事件处理的上述讨论还适用于利用输入设备来操作多功能设备100的其他形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,任选地结合单次或多次键盘按压或保持的鼠标移动和鼠标按钮按压;触摸板上的接触移动,诸如轻击、拖动、滚动等;触笔输入;设备的移动;口头指令;所检测到的眼睛移动;生物特征输入;和/或任选地被用作与用于限定要识别的事件的子事件对应的输入的它们的任意组合。
图1C是示出了根据一些实施方案的触摸输出模块的框图。在一些实施方案中,I/O子系统106(例如,触觉反馈控制器161(图1A)和/或其他输入控制器160(图1A))包括图1C所示示例部件的至少一些。在一些实施方案中,外围设备接口118包括图1C所示示例部件的至少一些。
在一些实施方案中,触觉输出模块包括触觉反馈模块133。在一些实施方案中,触觉反馈模块133聚合并组合触觉输出,用于来自电子设备上软件应用的用户界面反馈(例如,对对应于所显示用户界面和提示以及指示电子设备的用户界面中操作的执行或事件的发生的其他通知的用户输入做出响应的反馈)。触觉反馈模块133包括如下一个或多个:波形模块123(用于提供用于生成触觉输出的波形)、混合器125(用于混合波形,诸如不同信道中的波形)、压缩器127(用于减小或压缩波形的动态范围)、低通滤波器129(用于过滤掉波形中的高频信号分量)和热控制器131(用于根据热条件调节波形)。在一些实施方案中,触觉反馈模块133包括在触觉反馈控制器161(图1A)中。在一些实施方案中,触觉反馈模块133的独立单元(或触觉反馈模块133的独立具体实施)也包括在音频控制器(例如,音频电路110,图1A)中,并用于生成音频信号。在一些实施方案中,使用单个触觉反馈模块133生成音频信号并生成用于触觉输出的波形。
在一些实施方案中,触觉反馈模块133还包括触发模块121(例如,软件应用、操作系统、或确定要生成触觉输出并发起用于生成对应触觉输出的过程的其他软件模块)。在一些实施方案中,触发模块121生成用于(例如,由波形模块123)发起波形生成的触发信号。例如,触发模块121基于预设的定时标准生成触发信号。在一些实施方案中,触发模块121从触觉反馈模块133外部接收触发信号(例如,在一些实施方案中,触觉反馈模块133从位于触觉反馈模块133外部的硬件输入处理模块146接收触发信号)并将触发信号中继到触觉反馈模块133之内的其他部件(例如,波形模块123)或基于激活硬件输入设备(例如,home按钮)而(例如,利用触发模块121)触发操作的软件应用。在一些实施方案中,触发模块121还(例如,从触觉反馈模块133,图1A和图3)接收触觉反馈生成指令。在一些实施方案中,触发模块121响应于触觉反馈模块133(或触觉反馈模块133中的触发模块121)(例如,从触觉反馈模块133,图1A和图3)接收到触觉反馈指令而生成触发信号。
波形模块123(例如,从触发模块121)接收触发信号作为输入,并响应于接收到触发信号,提供用于生成一个或多个触觉输出的波形(例如,从预定义组的指定由波形模块123使用的波形选择的波形,诸如下文参考图4F1-图4G1更详细描述的波形)。
混合器125(例如,从波形模块123)接收波形作为输入,并将波形混合在一起。例如,在混合器125接收两个或更多波形(例如,第一信道中的第一波形,以及第二信道中至少部分与第一波形交叠的第二波形)时,混合器125输出对应于两个或更多波形之和的组合波形。在一些实施方案中,混合器125还修改两个或更多波形中的一个或更多波形,以相对于两个或更多波形中的其余波形(例如,通过增加特定波形的尺度和/或减小其余波形的尺度)突出特定波形。在一些环境中,混合器125选择一个或多个波形以从组合波形去除(例如,在有来自超过三个来源的,触觉输出发生器167请求同时输出的波形时,丢弃来自最旧来源的波形)。
压缩器127接收波形(例如,来自混合器125的组合波形)作为输入,并修改波形。在一些实施方案中,压缩器127(例如,根据触觉输出发生器167(图1A)或357(图3)的物理规范)减少波形,从而减少对应于波形的触觉输出。在一些实施方案中,压缩器127诸如通过为波形强制实施预定义最大振幅而限制波形。例如,压缩器127减小波形中超过预定义振幅阈值的部分的振幅,同时保持波形中不超过预定义振幅阈值的部分的振幅。在一些实施方案中,压缩器127减小波形的动态范围。在一些实施方案中,压缩器127动态减小波形的动态范围,使得组合波形保持在触觉输出发生器167的性能规范(例如,力和/或可移动质量位移极限)之内。
低通滤波器129接收波形(例如,来自压缩器127的压缩波形)作为输入,并过滤(例如,平滑化)波形(例如,去除或减少波形中的高频信号分量)。例如,在一些情况下,压缩器127在压缩波形中包括在根据压缩波形生成触觉输出时妨碍生成触觉输出和/或超过触觉输出发生器167的性能规范的外来信号(例如,高频信号分量)。低通滤波器129减少或去除波形中此类外来信号。
热控制器131接收波形(例如,来自低通滤波器129的滤波波形)作为输入,并根据设备100的热状况(例如,基于设备100之内检测的内部温度,诸如触觉反馈控制器161的温度,和/或设备100检测的外部温度)调节波形。例如,在一些情况下,触觉反馈控制器161的输出根据温度而改变(例如,触觉反馈控制器161响应于接收到相同的波形,在触觉反馈控制器161处在第一温度时生成第一触觉输出,在触觉反馈控制器161处在与第一温度不同的第二温度时生成第二触觉输出)。例如,触觉输出的大小(或振幅)可以根据温度改变。为了减轻温度变化的效应,修改该波形(例如,基于温度增大或减小波形的振幅)。
在一些实施方案中,触觉反馈模块133(例如,触发模块121)被耦接到硬件输入处理模块146。在一些实施方案中,图1A中的其他输入控制器160包括硬件输入处理模块146。在一些实施方案中,硬件输入处理模块146从硬件输入设备145(例如,图1A中的其他输入或控制设备116,诸如home按钮)接收输入。在一些实施方案中,硬件输入设备145是本文描述的任何输入设备,诸如触敏显示器系统112(图1A)、键盘/鼠标350(图3)、触摸板355(图3)、其他输入或控制设备116(图1A)之一或强度敏感home按钮(例如,如图2B所示,或如图2C所示具有机械致动器的home按钮)。在一些实施方案中,硬件输入设备145由强度敏感home按钮(例如,如图2B所示,或如图2C所示具有机械致动器的home按钮)和非触敏显示器系统112(图1A)、键盘/鼠标350(图3)或触摸板355(图3)构成。在一些实施方案中,响应于来自硬件输入设备145的输入,硬件输入处理模块146向触觉反馈模块133提供一个或多个触发信号以指示已经检测到满足预定义输入标准的用户输入,诸如对应于home按钮“点击”(例如,“按下点击”或“松开点击”)的输入。在一些实施方案中,触觉反馈模块133响应于对应于home按钮“点击”的输入提供对应于home按钮“点击”的波形,模拟按压物理home按钮的触觉反馈。
在一些实施方案中,触觉输出模块包括触觉反馈控制器161(例如,图1A中的触觉反馈控制器161),其控制触觉输出的生成。在一些实施方案中,触觉反馈控制器161耦接到多个触觉输出发生器,选择多个触觉输出发生器中的一个或多个触觉输出发生器,并向所选择的一个或多个触觉输出发生器发送波形,用于生成触觉输出。在一些实施方案中,触觉反馈控制器161协调对应于激活硬件输入设备145的触觉输出请求和对应于软件事件的触觉输出请求(例如,来自触觉反馈模块133的触觉输出请求),并修改两个或更多波形中的一个或多个波形以相对于两个或更多波形的其余波形突出特定(多个)波形(例如,通过增大特定波形的尺度和/或减小波形其余波形的尺度,诸如相对于对应于软件事件的触觉输出,优先化对应于激活硬件输入设备145的触觉输出)。
在一些实施方案中,如图1C所示,触觉反馈控制器161的输出耦接到设备100的音频电路(例如,音频电路110,图1A),并向设备100的音频电路提供音频信号。在一些实施方案中,触觉反馈控制器161结合触觉输出的生成,既提供用于生成触觉输出的波形,又提供用于提供音频输出的音频信号。在一些实施方案中,触觉反馈控制器161修改音频信号和/或波形(用于生成触觉输出),使得音频输出和触觉输出同步(例如,通过延迟音频信号和/或波形)。在一些实施方案中,触觉反馈控制器161包括用于将数字波形转换成模拟信号的数模转换器,模拟信号被放大器163和/或触觉输出发生器167接收。
在一些实施方案中,触觉输出模块包括放大器163。在一些实施方案中,放大器163(例如,从触觉反馈控制器161)接收波形,并在向触觉输出发生器167(例如,触觉输出发生器167(图1A)或357(图3)的任一个)发送放大波形之前放大波形。例如,放大器163将接收的波形放大到根据触觉输出发生器167的物理规范的信号水平(例如,触觉输出发生器167用于生成触觉输出所需的电压和/或电流,使得发送到触觉输出发生器167的信号产生对应于从触觉反馈控制器161接收的波形的触觉输出),并向触觉输出发生器167发送放大的波形。作为响应,触觉输出发生器167生成触觉输出(例如,通过相对于可移动质量的中性位置在一个或多个维度上来回移动可移动质量)。
在一些实施方案中,触觉输出模块包括耦接到触觉输出发生器167的传感器169。传感器169检测触觉输出发生器167或触觉输出发生器167的一个或多个部件(例如,用于生成触觉输出的一个或多个活动部分,诸如振动膜)的状态或状态改变(例如,机械位置、物理位移和/或移动)。在一些实施方案中,传感器169是磁场传感器(例如,霍尔效应传感器)或其他位移和/或移动传感器。在一些实施方案中,传感器169向触觉反馈控制器161提供信息(例如,触觉输出发生器167中一个或多个部分的位置、位移和/或移动),并根据传感器169提供的关于触觉输出发生器167状态的信息,触觉反馈控制器161调节从触觉反馈控制器161输出的波形(例如,任选地经由放大器163向触觉输出发生器167发送的波形)。
图2A示出了根据一些实施方案具有触摸屏(例如,触敏显示器系统112,图1A)的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在该实施方案中以及在下文中描述的其他实施方案中,用户能够通过例如利用一个或多个手指202(在附图中没有按比例绘制)或者利用一个或多个触笔203(在附图中没有按比例绘制),在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中,当用户中断与一个或多个图形的接触时,将发生对一个或多个图形的选择。在一些实施方案中,手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,不经意地与图形接触不会选择图形。例如,当与选择对应的手势是轻击时,在应用图标上方扫动的轻扫手势任选地不会选择对应应用。
设备100任选地还包括一个或多个物理按钮,诸如“home屏幕”按钮或菜单按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用中的任何应用136。另选地,在一些实施方案中,菜单按钮被实现为被显示在触摸屏显示器上的GUI中的软键。
在一些实施方案中,设备100包括触摸屏显示器、菜单按钮204、用于使设备通电/断电和用于锁定设备的下压按钮206、音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212、和对接/充电外部端口124。下压按钮206被任选地用于:通过按下按钮并使按钮在下压状态保持预先确定的时间间隔来使设备通电/断电;通过按下按钮并在经过预先确定的时间间隔之前释放按钮来锁定设备;和/或对设备进行解锁或发起解锁过程。在一些实施方案中,设备100还通过麦克风113来接受用于激活或去激活某些功能的语音输入。设备100还任选地包括用于检测触敏显示器系统112上的接触强度的一个或多个接触强度传感器165、和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图2B-图2C示出了适于用在图1A、图2A、图3和/或图4A中所示电子设备中的第一输入设备(例如,home按钮204)的分解图。图2B示出了具有电容式传感器的强度敏感home按钮的实施例,电容式传感器用于确定对应于施加到强度敏感home按钮的力的强度值范围。图2C示出了具有机械开关元件的home按钮的实施例。参考图2B,该输入设备栈220包括盖元件222和围缘224。在例示的实施方案中,围缘224完全围绕盖元件222的侧面和盖元件222顶表面的周边。其他实施方案不限于这种配置。例如,在一个实施方案中,盖元件222的侧面和/或顶表面可以被围缘224部分围绕。另选地,在其他实施方案中可以省去围缘224。
盖元件222和围缘224都可以由任何适当的不透明、透明和/或半透明材料形成。例如,盖元件222可以由玻璃、塑料或蓝宝石制成,围缘224可以由金属或塑料制成。在一些实施方案中,可以在盖元件222下方定位一个或多个附加的层(未示出)。例如,在盖元件222由透明材料制成时,可以在盖元件222下方设置不透明油墨层。不透明油墨层可以隐藏输入设备栈220中的其他部件,使得其他部件不能通过透明盖元件222看到。
第一电路层226可以设置于盖元件222下方。可使用任何适当的电路层。例如,第一电路层226可以是电路板或柔性电路。第一电路层226可以包括一个或多个电路、信号线和/或集成电路。在一个实施方案中,第一电路层226包括生物识别传感器228。可以使用任何适当类型的生物识别传感器。例如,在一个实施方案中,该生物识别传感器是电容式指纹传感器,在用户的手指(或多个手指)接近和/或接触盖元件222时,该电容式指纹传感器捕获至少一个指纹。
可以利用粘合剂层230将第一电路层226附着到盖元件222的底表面。可以为粘合剂层使用任何适当的粘合剂。例如,可以使用压敏粘合剂层作为粘合剂层230。
在第一电路层226下方设置适形层232。在一个实施方案中,适形层232包括形成于适形层232中的开口234。在组装设备栈220时,开口234暴露第一电路层226的顶表面和/或生物识别传感器228。在例示的实施方案中,适形层232定位于围缘224内周边周围和/或盖元件222的周边边缘周围。尽管以圆形形状示出,但适形层232可以具有任何给定形状和/或尺度,诸如正方形或椭圆形。适形层232被示为图2B和图2C中的连续适形层,但其他实施方案不限于这种配置。在一些实施方案中,可以在设备栈220中使用多个分立的适形层。此外,在一些实施方案中,适形层232不包括开口234,且适形层232在输入设备栈220的至少一部分上延伸。例如,适形层232可以在盖元件222的底表面、第一电路层226的底表面,或盖元件222的底表面一部分(例如,盖元件周边边缘周围)和第一电路层226底表面上延伸。
在第一电路层226下方定位第二电路层238。柔性电路和电路板是可以用于第二电路层238中的电路层的实施例。在一些实施方案中,第二电路层238可以包括第一电路部分240和第二电路部分242。第一电路部分240和第二电路部分242可以彼此电连接。
第一电路部分240可以包括强度传感器中包括的第一组一个或多个强度传感器部件。在一些实施方案中,第一电路部分240可以电连接到第一电路层226。例如,在第一电路层226包括生物识别传感器228时,生物识别传感器228可以电连接到第二电路层238的第一电路部分240。
第二电路部分242可以包括附加的电路,诸如信号线、电路部件、集成电路等。在一个实施方案中,第二电路部分242可以包括板到板连接器244,以将第二电路层238电连接到电子设备中的其他电路。例如,第二电路层238可以利用板到板连接器244可操作地连接到处理设备。除此之外或另选地,第二电路层238可以可操作地连接到向处理设备传输从第一电路部分240中强度传感器部件接收的信号(例如,感测信号)的电路。除此之外或另选地,第二电路层238可以可操作地连接到向第一电路部分240中的一个或多个强度传感器部件提供信号(例如,驱动信号,参考信号)的电路。
在一些实施方案中,第二电路层238的第一电路部分240可以使用粘合剂层236附接到第一电路层226的底表面。在非限制性实施例中,可以使用管芯附接膜将第一电路部分240附接到第一电路层226的底表面。
第三电路层246设置于第二电路层238的第一电路部分240下方。第三电路层246可以包括强度传感器中包括的第二组一个或多个强度传感器部件。第三电路层246由支撑元件248支撑和/或附接到支撑元件248。在一个实施方案中,支撑元件248附接到围缘224以产生用于设备栈220中其他部件的外壳。支撑元件248可以使用任何适当的附接机构附接到围缘224。
第一电路部分240中的第一组一个或多个强度传感器部件和第三电路层246中第二组一个或多个强度传感器部件一起形成强度传感器。强度传感器可以使用任何适当的强度感测技术。示例感测技术包括但不限于电容式、压电式、压阻式、超声波式和磁性。
在图2B和图2C所示的实施例中,该强度传感器是电容式力传感器。对于电容式力传感器,第一组一个或多个强度传感器部件可以包括第一组一个或多个电极250,第二组一个或多个力传感器部件包括第二组一个或多个电极252。尽管图2B和图2C中被示为正方形形状,但第一组一个或多个电极250和第二组一个或多个电极252中的每个电极都可以具有任何给定的形状(例如,矩形、圆形)。此外,可以将第一组和第二组中的一个或多个电极250、252布置成任何给定图案(例如,一个或多个行以及一个或多个列)。
图2B和图2C示出了第一组一个或多个电极250和第二组一个或多个电极252中的两个电极。然而,其他实施方案不限于这种配置。第一组一个或多个电极250和第二组一个或多个电极252可以均为单个电极或多个分立电极。例如,如果第一组一个或多个电极为单个电极,第二组一个或多个电极包括多个分立电极。在一些实施方案中,第二组一个或多个电极可以是单个电极,第一组包括多个分立电极。另选地,第一组一个或多个电极和第二组一个或多个电极两者都可以均包括多个分立电极。
第一组一个或多个电极250中的每个电极沿至少一个方向(例如,垂直地)与第二组一个或多个电极252中的相应电极对准,以产生一个或多个电容器。在向盖元件222(例如,输入设备的输入表面)施加力输入时,第一组250中的至少一个电极移动得更接近第二组252中的相应电极,这会改变电容器的电容。从每个电容器感测到的电容信号表示该电容器的电容测量值。处理设备(未示出)被配置为接收电容信号并将电容信号相关到向盖元件222施加的强度量。在一些实施方案中,力传感器能够替换开关元件,并可以使用不同的强度阈值来确定激活事件。
在一些实施方案中,诸如图2C中所示的实施方案中,开关元件254可以定位于支撑元件248下方。在施加到盖元件222的力输入超过给定量的力(例如,与第一电路部分240和第三电路层246之间的闭合距离相关联的力阈值)时,开关元件254登记用户输入。可使用任何适当的切换元件。例如,该开关元件254可以是弹片开关,在施加到盖元件222的力输入超过力阈值时,其会塌缩。在塌缩时,该弹片开关完成被处理设备检测到并被识别为用户输入(例如,图标、功能或应用的选择)的电路。在一个实施方案中,布置该弹片开关,使得可塌缩拱顶的顶点接近支撑板248的底表面。在另一个实施方案中,可塌缩拱顶的基底可以接近支撑板248的底表面。
图3是根据一些实施方案具有显示器和触敏表面的示例多功能设备的框图。设备300不必是便携式的。在一些实施方案中,设备300是膝上型计算机、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统、或控制设备(例如,家用控制器或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于将这些部件互联的一个或多个通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时叫做芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330,该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触摸板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如,类似于以上参考图1A所述的触觉输出发生器167)、传感器359(例如,光学传感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图1A所述的接触强度传感器165的接触强度传感器)。存储器370包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备,并且任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离CPU 310定位的一个或多个存储设备。在一些实施方案中,存储器370存储与便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块、和数据结构,或它们的子组。此外,存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加程序、模块、和数据结构。例如,设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中上述所识别的元件中的每个元件任选地存储在先前提到的存储器设备中的一个或多个存储器设备中。上述所识别的模块中的每个模块对应于用于执行上述功能的一组指令。上述所识别的模块或程序(即,指令集)不必被实现为单独的软件程序、过程或模块,并且因此这些模块的各种子集任选地在各种实施方案中被组合或以其他方式重新布置。在一些实施方案中,存储器370任选地存储上述模块和数据结构的子集。此外,存储器370任选地存储上面未描述的另外的模块和数据结构。
现在将注意力转到任选地在便携式多功能设备100上实现的用户界面(“UI”)的实施方案。
图4A示出了根据一些实施方案针对便携式多功能设备100上的应用菜单的示例用户界面。类似的用户界面任选地在设备300上实现。在一些实施方案中,用户界面400包括以下元素或者其子集或超集:
·用于无线通信(诸如,蜂窝信号和Wi-Fi信号)的信号强度指示器402;
·时间404;
·蓝牙指示器;
·电池状态指示器406;
·具有用于常用应用的图标的托盘408,图标诸如:
○电话模块138的被标记为“电话”的图标416,该图标416任选地包括未接来电或语音留言的数量的指示器414;
○电子邮件客户端模块140的被标记为“邮件”的图标418,该图标418任选地包括未读电子邮件的数量的指示器410;
○浏览器模块147的被标记为“浏览器”的图标420;和
○视频和音乐播放器模块152(也称为iPod(Apple Inc.的商标)模块152)的被标记为“iPod”的图标422;以及
·其他应用的图标,图标诸如:
○IM模块141的被标记为“消息”的图标424;
○日历模块148的被标记为“日历”的图标426;
○图像管理模块144的被标记为“照片”的图标428;
○相机模块143的被标记为“相机”的图标430;
○在线视频模块155的被标记为“在线视频”的图标432;
○股票桌面小程序149-2的被标记为“股票”的图标434;
○地图模块154的被标记为“地图”的图标436;
○天气桌面小程序149-1的被标记为“天气”的图标438;
○闹钟桌面小程序149-4的被标记为“时钟”的图标440;
○健身支持模块142的被标记为“锻炼支持”的图标442;
○记事本模块153的被标记为“记事本”的图标444;以及
○用于设置应用或模块的图标446,该图标446提供对设备100及其各种应用136的设置的访问。
应当注意,图4A中示出的图标标签仅仅是示例。例如,在一些实施方案中,视频和音乐播放器模块152的图标422被标记为“音乐”或“音乐播放器”。其他标签任选地用于各种应用图标。在一些实施方案中,相应应用图标的标签包括与该相应应用图标对应的应用的名称。在一些实施方案中,特定应用图标的标签不同于与该特定应用图标对应的应用的名称。
图4B示出了具有与显示器450分开的触敏表面451(例如,图3中的平板电脑或触摸板355)的设备(例如,图3中的设备300)上的示例用户界面。设备300还任选地包括用于检测触敏表面451上的接触强度的一个或多个接触强度传感器(例如,传感器357的一个或多个),和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器359。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出随后的实施例中的许多实施例,但是在一些实施方案中,设备检测与显示器分开的触敏表面上的输入,如图4B中所示。在一些实施方案中,触敏表面(例如,图4B中的451)具有与显示器(例如,450)上的主轴线(例如,图4B中的453)对应的主轴线(例如,图4B中的452)。根据这些实施方案,设备检测与显示器上相应位置对应的位置处的与触敏表面451的接触(例如,图4B中的460和462)(例如,在图4B中,460对应于468并且462对应于470)。这样,在触敏表面(例如,图4B中的451)与多功能设备的显示器(图4B中的450)分开时,由设备在触敏表面上检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操纵显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界面。
另外,虽然主要是参考手指输入(例如,手指接触、手指轻击手势、手指轻扫手势等)来给出下面的实施例,但是应当理解的是,在一些实施方案中,这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如,基于鼠标的输入或触笔输入)代替。例如,轻扫手势任选地由鼠标点击(例如,而不是接触),之后是光标沿着轻扫的路径的移动(例如,而不是接触的移动)来代替。作为另一个实施例,轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如,而不是对接触的检测,以及之后的停止检测接触)来代替。类似地,当同时检测到多个用户输入时,应当理解,多个计算机鼠标任选地被同时使用,或鼠标和手指接触任选地被同时使用。
如本文所用,术语“焦点选择器”是指示用户正与其进行交互的用户界面的当前部分的输入元素。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如,图3中的触摸板355或图4B中的触敏表面451)上检测到输入(例如,按压输入)的情况下,该特定用户界面元素根据所检测到的输入而被调节。在包括使得能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如,图1A中的触敏显示器系统112或图4A中的触摸屏)的一些具体实施中,在触摸屏上所检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如,通过接触的按压输入)时,该特定用户界面元素根据所检测到的输入而被调节。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键来将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据用户界面的不同区域之间的焦点移动而移动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制以便传送与用户界面的用户期望的交互(例如,通过向设备指示用户界面的用户期望与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触摸板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备的显示器上示出的其他用户界面元素)。
如在本说明书和权利要求书中所使用的,术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如,手指接触或触笔接触)的力或压力(每单位面积的力),或是指触敏表面上的接触的力或压力的替代物(代用物)。接触强度具有值范围,该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如至少256个)。接触强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中,来自多个力传感器的力测量被合并(例如,加权平均或者加和),以确定估计的接触力。类似地,触笔的压敏尖端任选地用于确定触笔在触敏表面上的压力。另选地,在触敏表面上检测到的接触区域的大小和/或其变化、接触附近的触敏表面的电容和/或其变化以及/或者接触附近的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中,接触力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如,强度阈值以对应于替代物测量的单位来描述)。在一些具体实施中,接触力或压力的替代物测量被转换成估计的力或压力,并且估计的力或压力用于确定是否已超过强度阈值(例如,强度阈值是以压力的单位进行测量的压力阈值)。使用接触强度作为用户输入的属性,从而允许用户访问用户在用于(例如,在触敏显示器上)显示示能表示和/或接收用户输入(例如,经由触敏显示器、触敏表面或物理控件/机械控件诸如旋钮或按钮)的实际面积有限的尺寸更小的设备上本来不能容易地访问的附加设备功能。
在一些实施方案中,接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如,确定用户是否已“点击”图标)。在一些实施方案中,根据软件参数来确定强度阈值的至少一个子集(例如,强度阈值不是由特定物理致动器的激活阈值来确定的,并且可在不改变设备100的物理硬件的情况下被调节)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏显示器的鼠标“点击”阈值可被设定成预定义的阈值的大范围中的任一个阈值。另外,在一些具体实施中,向设备的用户提供用于调节一组强度阈值中的一个或多个强度阈值(例如,通过调节各个强度阈值和/或通过利用对“强度”参数的系统级点击来一次调节多个强度阈值)的软件设置。
如说明书和权利要求中所使用的,接触的“特征强度”这一术语是指基于接触的一个或多个强度的接触的特征。在一些实施方案中,特征强度基于多个强度样本。特征强度任选地基于相对于预定义事件(例如,在检测到接触之后,在检测到接触抬起之前,在检测到接触开始移动之前或之后,在检测到接触结束之前,在检测到接触强度增大之前或之后和/或在检测到接触强度减小之前或之后)而言在预先确定的时间段(例如,0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间收集的预定义数量的强度样本或一组强度样本。接触的特征强度任选地基于以下各项中的一者或多者:接触强度的最大值、接触强度的均值、接触强度的平均值、接触强度的前10%处的值、接触强度的半最大值、接触强度的90%最大值、通过对在预定义期间或开始于预定义时间的接触强度低通过滤产生的值等。在一些实施方案中,在确定特征强度时使用接触的持续时间(例如,在特征强度是接触强度在时间上的平均值时)。在一些实施方案中,将特征强度与一组一个或多个强度阈值进行比较,以确定用户是否已执行操作。例如,该组一个或多个强度阈值可包括第一强度阈值和第二强度阈值。在该实施例中,特征强度未超过第一阈值的接触导致第一操作,特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作,并且特征强度超过第二强度阈值的接触导致第三操作。在一些实施方案中,使用特征强度和一个或多个强度阈值之间的比较来确定是否要执行一个或多个操作(例如,是否执行相应选项或放弃执行相应操作),而不是用于确定执行第一操作还是第二操作。
在一些实施方案中,识别手势的一部分以用于确定特征强度。例如,触敏表面可接收连续轻扫接触,该连续轻扫接触从起始位置过渡并到达结束位置(例如拖动手势),在该结束位置处,接触强度增大。在该实施例中,接触在结束位置处的特征强度可仅基于连续轻扫接触的一部分,而不是整个轻扫接触(例如,仅结束位置处的轻扫接触的部分)。在一些实施方案中,可在确定接触的特征强度之前向轻扫手势的强度应用平滑化算法。例如,该平滑化算法任选地包括以下各项中的一者或多者:不加权滑动平均平滑化算法、三角平滑化算法、中值滤波器平滑化算法、和/或指数平滑化算法。在一些情况下,这些平滑化算法消除了轻扫接触强度中的窄的尖峰或凹陷,以用于确定特征强度。
本文所述的用户界面图任选地包括各种强度图,这些强度图示出了触敏表面上的接触相对于一个或多个强度阈值(例如,接触检测强度阈值IT0、轻按压强度阈值ITL、深按压强度阈值ITD(例如,其至少部分地高于IL)和/或一个或多个其他强度阈值(例如,比IL更低的强度阈值IH))的当前强度。该强度图通常不是所显示的用户界面的一部分,但是被提供以帮助解释附图。在一些实施方案中,轻按压强度阈值对应于这样的强度:在该强度下设备将执行通常与点击物理鼠标的按钮或触控板相关联的操作。在一些实施方案中,深按压强度阈值对应于这样的强度:在该强度下设备将执行与通常与点击物理鼠标或触控板的按钮相关联的操作不同的操作。在一些实施方案中,当检测到特征强度低于轻按压强度阈值(例如,并且高于标称接触检测强度阈值IT0,比标称接触检测强度阈值低的接触不再被检测到)的接触时,设备将根据接触在触敏表面上的移动来移动焦点选择器,而不执行与轻按压强度阈值或深按压强度阈值相关联的操作。一般来讲,除非另有说明,否则这些强度阈值在不同组的用户界面附图之间是一致的。
在一些实施方案中,设备对设备所检测到的输入的响应取决于基于输入期间的接触强度的标准。例如,对于一些“轻按压”输入,在输入期间超过第一强度阈值的接触强度触发第一响应。在一些实施方案中,设备对由设备所检测到的输入的响应取决于包括输入期间的接触强度和基于时间的标准两者的标准。例如,对于一些“深按压”输入,只要在满足第一强度阈值与满足第二强度阈值之间经过延迟时间,在输入期间超过大于轻按压的第一强度阈值的第二强度阈值的接触强度便触发第二响应。该延迟时间的持续时间通常小于200ms(例如,40ms、100ms、或120ms,这取决于第二强度阈值的量值,其中该延迟时间随着第二强度阈值增大而增大)。这个延迟时间帮助避免意外的深按压输入识别。作为另一个实施例,对于一些“深按压”输入,在满足第一强度阈值之后将出现敏感度降低的时间段。在该敏感度降低的时间段期间,第二强度阈值增大。第二强度阈值的这种暂时增大还有助于避免意外深按压输入。对于其他深按压输入,对检测到深按压输入的响应不取决于基于时间的标准。
在一些实施方案中,输入强度阈值和/或对应输出中的一者或多者基于一个或多个因素而变化,诸如用户设置、接触运动、输入定时、应用运行、施加强度时的速率、同时输入的数量、用户历史、环境因素(例如,环境噪声)、焦点选择器位置等。示例因素在美国专利申请No.14/399,606和No.14/624,296中有所描述,这些美国专利申请全文以引用方式并入本文。
例如,图4C示出了部分基于触摸输入476随时间的强度而随时间改变的动态强度阈值480。动态强度阈值480是两个分量的总和:在从触摸输入476初始被检测到开始的预定义的延迟时间p1之后随时间衰减的第一分量474,以及随时间而跟踪触摸输入476的强度的第二分量478。第一分量474的初始高强度阈值减少意外触发“深按压”响应,同时仍然允许在触摸输入476提供足够强度的情况下进行立即“深按压”响应。第二分量478减少通过触摸输入的逐渐的强度波动而无意触发“深按压”响应。在一些实施方案中,在触摸输入476满足动态强度阈值480时(例如,在图4C中的点481处),触发“深按压”响应。
图4D示出了另一个动态强度阈值486(例如,强度阈值ID)。图4D还示出了两个其他强度阈值:第一强度阈值IH和第二强度阈值IL。在图4D中,虽然触摸输入484在时间p2之前满足第一强度阈值IH和第二强度阈值IL,但是没有响应被提供,直到在时间482处经过延迟时间p2。另外,在图4D中,动态强度阈值486随时间而衰减,其中衰减在从时间482(当触发与第二强度阈值IL相关联的响应时)经过预定义的延迟时间p1之后的时间488开始。这种类型的动态强度阈值减少紧接在触发与较低阈值强度(诸如第一强度阈值IH或第二强度阈值IL)相关联的响应之后或与其同时意外触发与动态强度阈值ID相关联的响应。
图4E示出了另一个动态强度阈值492(例如,强度阈值ID)。在图4E中,在从触摸输入490被初始检测到已经过延迟时间p2之后,触发与强度阈值IL相关联的响应。同时,动态强度阈值492在从触摸输入490被初始检测到已经过预定义的延迟时间p1之后衰减。因此,在触发与强度阈值IL相关联的响应之后减小触摸输入490的强度、接着增大触摸输入490的强度而无需释放触摸输入490可触发与强度阈值ID相关联的响应的(例如,在时间494),即使在触摸输入490的强度低于另一强度阈值例如强度阈值IL时也是如此。
接触的特征强度从低于轻按压强度阈值ITL的强度增大到介于轻按压强度阈值ITL与深按压强度阈值ITD之间的强度有时被称为“轻按压”输入。接触的特征强度从低于深按压强度阈值ITD的强度增大到高于深按压强度阈值ITD的强度有时称为“深按压”输入。接触的特征强度从低于接触检测强度阈值IT0的强度增大到介于接触检测强度阈值IT0与轻按压强度阈值ITL之间的强度有时被称为检测到触摸表面上的接触。接触的特征强度从高于接触检测强度阈值IT0的强度减小到低于接触检测强度阈值IT0的强度有时被称为检测到接触从触摸表面抬离。在一些实施方案中,IT0为零。在一些实施方案中,IT0大于零在一些例示中,阴影圆或椭圆用于表示触敏表面上的接触强度。在一些例示中,没有阴影的圆或椭圆用于表示触敏表面上的相应接触,而无需指定相应接触强度。
在本文中所述的一些实施方案中,响应于检测到包括相应按压输入的手势或响应于检测到利用相应接触(或多个接触)执行的相应按压输入来执行一个或多个操作,其中至少部分地基于检测到该接触(或多个接触)的强度增大到高于按压输入强度阈值而检测到相应按压输入。在一些实施方案中,响应于检测到相应接触强度增大到高于按压输入强度阈值来执行相应操作(例如,在相应按压输入的“向下冲程”上执行相应操作)。在一些实施方案中,按压输入包括相应接触强度增大到高于按压输入强度阈值以及该接触强度随后减小到低于按压输入强度阈值,并且响应于检测到相应接触强度随后减小到低于按压输入阈值来执行相应操作(例如,在相应按压输入的“向上冲程”上执行相应操作)。
在一些实施方案中,设备采用强度滞后以避免有时称为“抖动”的意外输入,其中设备限定或选择与按压输入强度阈值具有预定义关系的滞后强度阈值(例如,滞后强度阈值比按压输入强度阈值低X个强度单位,或滞后强度阈值是按压输入强度阈值的75%、90%或某个合理比例)。因此,在一些实施方案中,按压输入包括相应接触强度增大到高于按压输入强度阈值以及该接触强度随后减小到低于对应于按压输入强度阈值的滞后强度阈值,并且响应于检测到相应接触强度随后减小到低于滞后强度阈值来执行相应操作(例如,在相应按压输入的“向上冲程”上执行相应操作)。类似地,在一些实施方案中,仅在设备检测到接触强度从等于或低于滞后强度阈值的强度增大到等于或高于按压输入强度阈值的强度并且任选地接触强度随后减小到等于或低于滞后强度的强度时才检测到按压输入,并且响应于检测到按压输入(例如,根据环境,接触强度增大或接触强度减小)来执行相应操作。
为了容易解释,任选地响应于检测到以下情况而触发对响应于与按压输入强度阈值相关联的按压输入或响应于包括按压输入的手势而执行的操作的描述:接触强度增大到高于按压输入强度阈值、接触强度从低于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接触强度减小到低于按压输入强度阈值、或接触强度减小到低于与按压输入强度阈值对应的滞后强度阈值。另外,在将操作描述为响应于检测到接触强度减小到低于按压输入强度阈值而执行的实施例中,任选地响应于检测到接触强度减小到低于对应于并且小于按压输入强度阈值的滞后强度阈值来执行操作。如上所述,在一些实施方案中,对这些操作的触发还取决于满足基于时间的标准(例如,在满足第一强度阈值与满足第二强度阈值之间已经过延迟时间)。
用户界面和相关联的过程
现在转向可以在电子设备上实现的用户界面(“UI”)和关联过程的实施方案,该电子设备诸如是便携式多功能设备100或设备300,具有显示器、触敏表面、用于生成触觉输出的一个或多个触觉输出发生器、用于检测与设备按钮(例如,虚拟或物理home按钮)接触强度的一个或多个传感器,以及(任选地)用于检测与触敏侧面的接触强度的一个或多个传感器。
图5A1-图5C19示出了根据一些实施方案,用于响应于设备按钮(例如,物理home按钮或虚拟home按钮)上的多种输入而提供触觉输出和视觉反馈的示例性用户界面。这些附图中的用户界面被用于例示下面描述的过程,包括图7A-图7G、图9A-图9D、图11A-图11E、图13A-图13D、图15A-图15E、图17A-图17D和图19A-图19C中的过程。为了便于解释,将参考在具有触敏显示器系统112的设备上执行的操作来论述一些实施方案。在此类实施方案中,焦点选择器任选地为:相应手指或触笔接触、对应于手指或触笔接触的表示点(例如,相应接触的重心或与相应接触相关联的点)、或在触敏显示器系统112上所检测到的两个或更多个接触的重心。然而,任选地,响应于在触敏表面451上检测到接触,在具有显示器450和独立的触敏表面451的设备上执行类似操作,同时在显示器450上显示图中所示的用户界面,连同焦点选择器。
图5A1-图5A18示出了根据一些实施方案用于为按钮交互提供触觉和视觉反馈的示例性用户界面。图5A1-图5A18示出了从home屏幕打开应用并响应于home按钮(例如,按钮204)上的多种输入提供视觉反馈和触觉输出。
图5A1示出了根据一些实施方案用于设备100上应用菜单的用户界面510(例如,多页home屏幕的主要页面)。用户界面510包括与上文相对于图4A所述的用户界面400类似的元素,出于简洁的原因,这里将不提供用户界面510的元素的穷尽描述。
图5A2-图5A3示出了在时钟图标上检测输入(例如,接触502进行的轻击手势,图5A2)并显示时钟应用的用户界面512(在图5A3中)的实施例。
图5A4-图5A8示出了检测home按钮(例如,按钮204)上接触(例如,接触504)强度改变并根据强度提供关于激活home按钮的视觉反馈(例如,显示从用户界面512过渡回到用户界面510的开始)的实施例。在图5A4中,接触504-a的强度尚未达到“提示”强度阈值ITH,因此不显示视觉反馈。在图5A5-图5A7中,在接触504的强度增大到提示强度阈值ITH以上时,视觉反馈根据接触强度动态地改变。例如,随着接触强度从图5A5增大到图5A6,推进了从用户界面512向用户界面510的过渡(例如,从用户界面513-1到用户界面513-2),随着接触强度从图5A6减小到图5A7,反转从用户界面512到用户界面510的过渡(例如,从用户界面513-2到用户界面513-1)。由于接触504的强度不会增大到轻按压强度阈值ITL以上,在检测到接触504的输入结束时,在显示器上重新显示时钟应用的用户界面512(图5A8中)。
图5A9-图5A14示出了检测home按钮(例如,按钮204)上接触(例如,接触508)的强度变化并根据强度提供关于激活home按钮的视觉反馈(例如,显示从用户界面512过渡回到用户界面510的开始)且响应于home按钮(例如,按钮204)上的输入提供触觉输出的实施例。在图5A9-图5A11中,随着接触强度增大(例如,从接触508-a到接触508-b到接触508-c),从用户界面512到用户界面510的过渡向前推进(例如,从用户界面513-1到用户界面513-2到用户界面513-3)。在图5A11中,在接触508-c的强度增大到home按钮上的“轻按压”强度阈值ITL时(例如,按钮204的按下点击,或者有时称为“按压事件”),设备100提供触觉输出503(例如,增益为0.5的MiniTap 270Hz)。在图5A13中,在接触508-e的强度减小到“轻按压释放”强度阈值ITLR时(例如,按钮204的松开点击,或者有时称为“释放事件”),设备100提供不同的触觉输出,诸如触觉输出505(例如,增益为0.3的MiniTap 270Hz)。由于接触508的强度增大到轻按压强度阈值ITL(例如,在图5A11中)且(例如,通过图5A13中的释放事件)检测到接触508的输入结束,从用户界面512到用户界面510的过渡继续完成,如图5A11-图5A14所示(例如,从图5A11中的用户界面513-3到图5A12中的用户界面513-4到图5A13中的用户界面513-5到图5A14中的用户界面510)。图5A11和图5A13中所示的触觉输出对应于强度改变度量(例如,“软”强度)的第一值范围,如下文相对于方法1500所述。
图5A15-图5A16示出了如果直到过去超过阈值量时间(例如,长按时间TLP)接触508的按压输入都未提起的图5A12的替代序列。在这种情况下,(例如,在图5A16中的用户界面513-6中)中断从用户界面512到用户界面510的动画过渡,并显示用户界面515(例如,自动化助理用户界面)。在一些实施方案中,在中断从用户界面512到用户界面510的动画过渡时,显示另一个动画过渡(例如,从中断点到用户界面515),如图5A17中的用户界面514-1所示。在一些实施方案中,如图5A16所示,在接触508-f的强度在阈值量时间(例如,TLP)之内保持高于轻按压强度阈值ITL时,设备100提供触觉输出507(例如,增益为0.9的双MiniTap270Hz或MicroTap 270Hz)。在一些实施方案中,如图5A18所示,在完成向自动化助理用户界面(例如,用户界面515,图5A18)的过渡时,设备100提供触觉输出509(例如,增益为0.9的双MiniTap 270Hz或MicroTap270Hz)。在一些实施方案中,设备100在接触在TLP阈值量时间内保持高于轻按压强度阈值ITL时提供触觉输出(例如,触觉输出507,图5A16),或者在完成向自动化助理用户界面的过渡时提供触觉输出(例如,触觉输出509,图5A18),但并非两者都做。
在图5A1-图5A18的实施例中,针对home按钮(例如,按钮204)上的按压事件(例如,在接触强度增大到轻按压强度阈值ITL时)和释放事件(例如,在接触强度减小到轻按压释放强度阈值ITLR时)的触觉输出被示为270Hz的Minitap(例如,在选择第二触觉输出设置时,如下文相对于图5C1-图5C9所述)。在一些实施方案中,在选择第一触觉输出设置时(例如,如下文相对于图5C13-图5C19所述),在这些实施例中触觉输出会是230Hz的MiniTap。在一些实施方案中,在选择第三触觉输出设置时(例如,如下文相对于图5C10-图5C12所述),在这些实施例中触觉输出会是300Hz的MiniTap。类似地,在图5B1-图5B75中,针对按压事件和释放事件的触觉输出被示为270Hz的MiniTap(例如,在选择第二触觉输出设置时),但如果选择第一触觉输出设置或第三触觉输出设置,则触觉输出会分别是230Hz或300Hz的MiniTap。
图5B1-图5B75示出了根据一些实施方案用于为按钮交互提供触觉和视觉反馈的示例性用户界面。图5B1-图5B75示出了从多页home屏幕的次要页面文件夹打开应用并响应于home按钮(例如,按钮204)上的多种输入提供视觉反馈和触觉输出。
图5B1示出了根据一些实施方案用于设备100上的应用菜单的用户界面520(例如,多页home屏幕的次要页面)。用户界面520包括与上文相对于图4A所述的用户界面400类似的元素,出于简洁的原因,这里将不提供用户界面520的元素的穷尽描述。
图5B2-图5B3示出了在摄影文件夹上检测输入(例如,接触530进行的轻击手势,图5B2)并显示摄影文件夹的用户界面522(在图5B3中)的实施例。
图5B4-图5B5示出了检测用户界面522的页面图标(例如,用于文字处理应用,诸如Apple Inc.(Cupertino,California)的页面应用)上的输入(例如,接触531的轻击手势,图5B4)并显示页面应用的用户界面524的实施例(例如,图5B5中)。
图5B6-图5B14示出了检测时间上接近的双击的实施例(例如,具有第一按压事件,接着是第一释放事件,接着是第二按压事件,其中第一按压事件和第二按压事件是彼此在阈值量时间之内检测到的,诸如双击时间阈值TDC),其中第一按压事件和第二按压事件都发生在阈值量时间之前,诸如中断时间阈值TI。由于第一按压事件和第二按压事件都发生于中断时间阈值TI之前,因此中断(例如,在检测到第二按压事件时的第一点,如图5B10所示)从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡。
图5B6-图5B10示出了从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡的开始。在图5B6中,在接触532-a的强度增大到home按钮上的轻按压强度阈值ITL时(例如,按钮204的第一按下点击,或者有时称为“第一按压事件”),设备100提供触觉输出571(例如,增益为1的MiniTap 270Hz)。在图5B8中,在接触532-c的强度减小到轻按压释放强度阈值ITLR时(例如,按钮204的第一次松开点击,或者有时称为“第一释放事件”),设备100提供不同的触觉输出,诸如触觉输出572(例如,增益为0.5的MiniTap270Hz)。在图5B10中,在接触532-e的强度在双击时间阈值TDC之内的第二时间内增大到home按钮上的轻按压强度阈值ITL时(例如,按钮204的第二按下点击,或者有时称为“第二按压事件”),设备100提供另一触觉输出,诸如触觉输出573(例如,增益为0.8的MiniTap270Hz)。图5B6、图5B8和图5B10中所示的触觉输出对应于强度改变度量(例如,“正常”强度)的第二值范围,如下文相对于方法1500所述。
在图5B10中,在检测到第二按压事件时,在第一点(例如,在用户界面525-5)处中断从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡,并从中断点开始向用户界面528(例如,多任务用户界面)的动画过渡。图5B11-图5B13示出了从中断点到用户界面528的动画过渡(例如,从图5B11中的用户界面526-1到图5B12中的用户界面526-2到图5B13中的用户界面526-3)。图5B14示出了其上具有页面应用(例如,用户界面524)的用户界面528(例如,多任务用户界面)。
图5B15-图5B16示出了在home按钮(例如,按钮204)上检测输入(例如,接触533进行的按压输入,图5B15)并显示页面应用的用户界面524(在图5B16中)的实施例。图5B16与图5B5是相同的开始点。图5B15中所示的触觉输出对应于强度改变度量(例如,“软”强度)的第一值范围,如下文相对于方法1500所述。
图5B17-图5B25示出了图5B6-图5B14的替代序列,从图5B5中的页面应用的用户界面524开始。图5B17-图5B25示出了检测(与图5B5-图5B14相比)时间上更远的双击的实施例(例如,具有第一按压事件,接着是第一释放事件,接着是第二按压事件,其中第一按压事件和第二按压事件是彼此在阈值量时间之内检测到的,诸如双击时间阈值TDC),其中第一按压事件和第二按压事件都发生在阈值量时间之前,诸如中断时间阈值TI。由于第一按压事件和第二按压事件都发生于中断时间阈值TI之前,因此中断(例如,在检测到第二按压事件时的第二点,如图5B21所示)从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡。
图5B17-图5B21示出了从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡的开始。在图5B17中,在接触534-a的强度增大到home按钮上的轻按压强度阈值ITL时(例如,按钮204的第一次按下点击,或者“第一按压事件”),设备100提供触觉输出575(例如,增益为1的MiniTap 270Hz)。在图5B19中,在接触534-c的强度减小到轻按压释放强度阈值ITLR时(例如,按钮204的第一次松开点击,或者第一释放事件),设备100提供不同的触觉输出,诸如触觉输出576(例如,增益为0.5的MiniTap 270Hz)。在图5B21中,在home按钮上接触534-e的强度在双击时间阈值TDC之内的第二时间内时(例如,按钮204的第二次按下点击,或者第二按压事件),设备100提供另一触觉输出,诸如触觉输出577(例如,增益为0.8的MiniTap 270Hz)。图5B17、图5B19和图5B21中所示的触觉输出对应于强度改变度量(例如,“正常”强度)的第二值范围,如下文相对于方法1500所述。
在图5B21中,在检测到第二按压事件时,在比第一点(例如,在图5B10中的用户界面525-5处)稍晚的第二点(例如,在用户界面525-6)处中断从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡,并从第二中断点开始向用户界面528(例如,多任务用户界面)的动画过渡。图5B22-图5B24示出了从第二中断点到用户界面528的动画过渡(例如,从图5B22中的用户界面527-1到图5B23中的用户界面527-2到图5B24中的用户界面527-3)。图5B25示出了其上具有页面应用(例如,用户界面524)的用户界面528(例如,多任务用户界面)。
图5B26-图5B27示出了在home按钮(例如,按钮204)上检测输入(例如,接触535进行的按压输入,图5B26)并显示页面应用的用户界面524(在图5B27中)的实施例。图5B27与图5B5是相同的开始点。图5B26中所示的触觉输出对应于强度改变度量(例如,“软”强度)的第一值范围,如下文相对于方法1500所述。
图5B28-图5B38示出了图5B6-图5B14和图5B17-图5B25的替代序列,从图5B5中的页面应用的用户界面524开始。图5B28-图5B38示出了检测(与图5B5-图5B14和图5B16-图5B25相比)时间上更远的双击的实施例(例如,具有第一按压事件,接着是第一释放事件,接着是第二按压事件,其中第一按压事件和第二按压事件是彼此在阈值量时间之内检测到的,诸如双击时间阈值TDC),其中第一按压事件发生在阈值量时间,诸如中断时间阈值TI之前,而第二按压事件发生在中断时间阈值TI之后。由于第二按压事件发生于中断时间阈值TI之后,因此在动画过渡到多任务用户界面(例如,用户界面529,图5B38)之前,不中断从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡。
图5B28-图5B34示出了从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡。在图5B28中,在接触536-a的强度增大到home按钮上的轻按压强度阈值ITL时(例如,按钮204的第一按下点击,或者“第一按压事件”),设备100提供触觉输出579(例如,增益为1的MiniTap 270Hz)。在图5B30中,在接触536-c的强度减小到轻按压释放强度阈值ITLR时(例如,按钮204的第一次松开点击,或者第一释放事件),设备100提供不同的触觉输出,诸如触觉输出580(例如,增益为0.5的MiniTap 270Hz)。在图5B32中,在接触536-e的强度在双击时间阈值TDC之内的第二时间内增大到home按钮上的轻按压强度阈值ITL时(例如,按钮204的第二次按下点击,或者第二按压事件),设备100提供另一触觉输出,诸如触觉输出581(例如,增益为0.8的MiniTap270Hz)。图5B28、图5B30和图5B32中所示的触觉输出对应于强度改变度量(例如,“正常”强度)的第二值范围,如下文相对于方法1500所述。
在图5B32中,在检测到第二按压事件时,不中断从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡,因为第二按压事件发生于中断时间阈值TI之后。图5B33-图5B34示出了从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡的继续,图5B35示出了用户界面522。图5B36-图5B37示出了从用户界面522(例如,摄影文件夹)到用户界面529的动画过渡。图5B38示出了其上具有摄影文件夹(例如,用户界面522)的用户界面529(例如,多任务用户界面)。
图5B40-图5B48示出了图5B6-图5B14、图5B17-图5B25和图5B28-图5B38的替代序列,从图5B5中的页面应用的用户界面524开始。图5B40-图5B48示出了在双击时间阈值TDC之后发生第二按压事件的情况下,检测两次单击的实施例。由于第二次按压事件发生于双击时间阈值TDC之后,因此将两次按压事件作为两个单次点击处理(与双击相反)。
图5B40-图5B46示出了从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡。在图5B40中,在接触537-a的强度增大到home按钮上的轻按压强度阈值ITL时(例如,按钮204的按下点击,或者“第一按压事件”),设备100提供触觉输出582(例如,增益为1的MiniTap 270Hz)。在图5B42中,在接触537-c的强度减小到轻按压释放强度阈值ITLR时(例如,按钮204的松开点击,或者第一释放事件),设备100提供不同的触觉输出,诸如触觉输出583(例如,增益为0.5的MiniTap 270Hz)。在图5B45中,在过去双击时间阈值TDC之后,接触538-a的强度增大到home按钮上的轻按压强度阈值ITL时(例如,按钮204的按下点击,或者第二按压事件),设备100提供触觉输出584(例如,增益为1的MiniTap270Hz)。在一些实施方案中,触觉输出584(图5B45中)具有与触觉输出582(图5B50中)相同的特征(例如,增益为1的MiniTap 270Hz),因为它们都是单次点击输入的按下点击。图5B40、图5B42和图5B45中所示的触觉输出对应于强度改变度量(例如,“正常”强度)的第二值范围,如下文相对于方法1500所述。
在图5B45中,在检测到第二按压事件时,不中断从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡,因为第二按压事件是独立的单次点击。图5B46示出了从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡的继续,图5B47示出了用户界面522。尽管未示出,但在一些实施方案中,设备100显示从用户界面522(图5B47中)到用户界面520(图5B48中)的动画过渡。
图5B49示出了来自用户界面524(例如,页面应用)的替代序列的比较,如上文详细所述。图5B49的顶行示出了图5B5-图5B14的序列,其中有时间上接近的双击,且第一按压事件和第二按压事件都发生于TI之前。图5B49的第二行示出了图5B16-图5B25的序列,其中有具有时间上更远的第一按压事件和第二按压事件的双击,但第一按压事件和第二按压事件都发生于TI之前。图5B49的第三行示出了图5B27-图5B38的序列,其中有具有时间上更远的第一按压事件和第二按压事件的双击,且第一按压事件发生于TI之前,第二按压事件发生于TI之后。图5B49的第四行示出了图5B39-图5B48的序列,其中有两次单击,第一按压事件发生于TI之前,第二按压事件发生于TDC之后。
图5B50-图5B59示出了图5B5-图5B15的另一替代序列。在图5B50-图5B59中,直到第一释放事件(例如,图5B53中)之后才开始从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡。尽管未示出,但在一些实施方案中,图5B16-图5B25、图5B27-图5B38和/或图5B39-图5B48的序列具有替代序列,其中直到第一释放事件(例如,分别在图5B19、图5B30和图5B42中)之后才开始从用户界面524(例如,页面应用)到用户界面522(例如,摄影文件夹)的动画过渡。
图5B60-图5B61示出了在home按钮(例如,按钮204)上检测输入(例如,接触540进行的按压输入,图5B60)并显示页面应用的用户界面524(在图5B61中)的实施例。图5B60中所示的触觉输出对应于强度改变度量(例如,“软”强度)的第一值范围,如下文相对于方法1500所述。
图5B62-图5B65示出了“软”强度按下点击和“软”强度松开点击。在图5B63中,在接触541-b的强度增大到具有“软”强度(例如,对于高达每秒预定义数量单位的强度的强度改变度量值范围而言,诸如每秒1250克)的home按钮上的轻按压强度阈值ITL时,设备100提供触觉输出590(例如,增益为0.5的MiniTap 270Hz)。在图5B65中,在接触541-d的强度减小到具有“软”强度(例如,对于高达每秒预定义数量单位的强度的强度改变度量值范围而言,诸如每秒1250克)的轻按压释放强度阈值ITLR时,设备100提供触觉输出591(例如,增益为0.25的MiniTap 270Hz)。在一些实施方案中,“软”松开点击事件的触觉输出是“软”按下点击事件的触觉输出的50%。在一些实施方案中,“软”松开点击事件的音频输出是“软”按下点击事件的音频输出的50%。
图5B66-图5B69示出了“正常”强度按下点击和“正常”强度松开点击。在图5B66中,在接触542-b的强度增大到具有“正常”强度(例如,对于大于每秒预定义数量单位的强度的强度改变度量值范围而言,诸如每秒1250克)的home按钮上的轻按压强度阈值ITL时,设备100提供触觉输出592(例如,增益为1的MiniTap 270Hz)。在图5B69中,在接触542-d的强度减小到具有“正常”强度(例如,对于大于每秒预定义数量单位的强度的强度改变度量值范围而言,诸如每秒1250克)的轻按压释放强度阈值ITLR时,设备100提供触觉输出593(例如,增益为0.5的MiniTap270Hz)。在一些实施方案中,“正常”松开点击事件的触觉输出是“正常”按下点击事件的触觉输出的50%。在一些实施方案中,“正常”松开点击事件的音频输出是“正常”按下点击事件的音频输出的50%。
图5B70-图5B75示出了使用home按钮(例如,按钮204)作为“返回”按钮。图5B71-图5B72示出了在显示用户界面522(例如,摄影文件夹)的同时检测home按钮(例如,按钮204)上的输入(例如,接触543的按压输入,图5B71),并作为响应,显示用户界面520(例如,具有摄影文件夹的多页home屏幕的次要页面)的实施例。图5B73-图5B74示出了在显示用户界面520(例如,多页home屏幕的次要页面)的同时检测home按钮(例如,按钮204)上的输入(例如,接触544的按压输入,图5B73),并作为响应,显示用户界面510(例如,多页home屏幕的主要页面)的实施例。在一些实施方案中,如图5B75所示,在显示多页home屏幕的主要页面(例如,用户界面510)的同时检测到home按钮上的输入(例如,接触545的按压输入)时,设备100提供触觉输出596(例如,增益为1的MiniTap 270Hz),但不改变显示的用户界面。
图5C1-图5C19示出了根据一些实施方案用于home按钮配置过程的示例性用户界面。图5C1-图5C19示出了home按钮配置过程的实施例,在此期间,在为设备上的home按钮选择触觉输出设置之前,用户为home按钮选择并尝试多个触觉输出设置。
图5C1-图5C5示出了选择“设置”,然后选择“通用”,接着选择“home按钮”的实施例。图5C6-图5C7示出了向用户界面564(例如,选择了选项2的home按钮配置用户界面)的动画过渡的实施例。在图5C8中,当前选择了选项2作为触觉输出设置。在一些实施方案中,选择选项2作为默认的触觉输出设置。在一些实施方案中,选项2对应于第二触觉输出模式,诸如MiniTap 270Hz。在图5C9中,在接触553的强度增大到home按钮上的轻按压强度阈值ITL时,设备100提供对应于所选择的触觉输出设置(例如,选项2)的触觉输出561(例如,MiniTap 270Hz)。
图5C10-图5C11示出了选择选项3(例如,利用选项3上接触554的按压输入,图5C10)并显示用户界面566(例如,选择了选项3的home按钮配置用户界面)的实施例。尽管未示出,但是在一些实施方案中,在用户界面564(图5C10中)和用户界面566(图5C11)之间显示动画过渡,其中选项2移动回到适当位置,并且其中选项3向home按钮(例如,按钮204)移动。
在图5C11中,当前选择了选项3作为触觉输出设置。在一些实施方案中,选项3对应于第三触觉输出模式,诸如MiniTap 300Hz。在图5C12中,在接触555的强度增大到home按钮上的轻按压强度阈值ITL时,设备100提供对应于所选择的触觉输出设置(例如,选项3)的触觉输出565(例如,MiniTap 300Hz)。
图5C13-图5C14示出了选择选项1(例如,利用选项1上接触556的按压输入,图5C13)并显示用户界面568(例如,选择了选项1的home按钮配置用户界面)的实施例。尽管未示出,但在一些实施方案中,在用户界面566(图5C13中)和用户界面568(图5C14)之间显示动画过渡,其中选项3移动回到适当位置,并且其中选项1向home按钮(例如,按钮204)移动。
在图5C14中,当前选择了选项1作为触觉输出设置。在一些实施方案中,选项1对应于第一触觉输出模式,诸如MiniTap 230Hz。在图5C15中,在接触557的强度增大到home按钮(例如,按钮204)上的轻按压强度阈值ITL时,设备100提供对应于所选择的触觉输出设置(例如,选项1)的触觉输出567(例如,MiniTap 230Hz)。
图5C16-图5C17示出了选择“完成”(例如,利用接触558在“完成”图标上的按压输入,图5C16)(选择了选项1)并作为响应,显示用户界面562(例如,通用设置用户界面,图5C17)的实施例。
在图5C18中,在接触559的强度增大到home按钮(例如,按钮204)上的轻按压强度阈值ITL时,设备100提供对应于所选择触觉输出设置(例如,选项1)的触觉输出569(例如,MiniTap 230Hz)。响应于home按钮(例如,按钮204)上的输入,显示用户界面510(例如,多页home屏幕的主要页面)(图5C19中)。需注意,图5A1-图5A18和图5B1-图5B75被示为选项2上具有触觉输出设置,因此这些附图中的触觉输出对应于所选择的选项2的触觉输出设置(例如,MiniTap 270Hz)。如果用户已经为触觉输出设置选择了选项1(例如,如图5C16中所示),则图5A1-图5A18和图5B1-图5B75中的触觉输出会对应于选项1的所选择的触觉输出设置(例如,MiniTap 230Hz)。类似地,如果用户已经为触觉输出设置选择了选项3,则图5A1-图5A18和图5B1-图5B75中的触觉输出会对应于选项3的所选择的触觉输出设置(例如,MiniTap 300Hz)。
图6A1-图6B26示出了根据一些实施方案用于控制生成用户界面触觉反馈和生成home按钮触觉反馈的示例用户界面。这些附图中的用户界面用于示出下文描述的过程,包括图13A-图13D中的过程。尽管将参考触摸屏显示器(其中组合了触敏表面和显示器)上的输入给出随后的实施例中的一些实施例,但是在一些实施方案中,设备检测与显示器450分开的触敏表面451上的输入,如图4B中所示。
在一些实施方案中,该设备提供触觉输出控制设置(例如,声音和触觉设置),其允许用户在设备处打开和关闭用户界面触觉输出的生成。
通常,该设备响应于与用户界面元素的直接交互,例如,通过检测用户输入时放在用户界面元素附近的焦点选择器(例如,指针或接触)选择、操纵、拖/放,和/或激活用户界面元素而生成各种用户界面触觉输出。用户界面触觉输出通常伴随有用户界面的视觉改变。例如,在一些实施方案中,该设备响应于在用户界面中拾取项目的输入(例如,在对应于该项目的位置处维持的接触做出的长按输入)而提供触觉输出(例如,MicroTap(150Hz)),并且该用户界面示出,该对象被向着显示器的表面提起,并定时触觉输出与对象的移动结束重合。除了用户界面触觉输出之外,该设备还响应于激活设备上的持久按钮(例如,虚拟home按钮或非机械home屏幕或返回按钮)而生成触觉输出。按钮的激活可以伴随或不伴随用户界面中的对应视觉改变。例如,响应于home按钮上的按压输入,该设备生成触觉输出并消除当前显示的用户界面,且显示home屏幕。响应于home按钮上的另一按压输入,该设备为按钮按压生成触觉输出,但继续显示home屏幕(例如,在当前显示的home屏幕仅仅是home屏幕或多页home屏幕的主要页面时)。因此,在一些情景中,该设备允许用户关闭用户界面触觉输出,例如,以节省电力或减少注意力分散。然而,该设备还在用户仅仅希望关闭用户界面触觉输出时,防止用户无意中关闭持续按钮的触觉输出生成。
在一些实施方案中,该设备提供非视觉反馈,其既包括音频输出分量,又包括触觉输出分量。特定类型的音频输出与用户界面中的视觉改变配对,或者独立于用户界面中的任何视觉改变而存在。例如,可以独立于触觉输出而播放音频提示、铃声、音乐剪辑,并用以提示用户用户界面或设备状态的一些改变。在一些实施方案中,该设备生成专门关联到并增强或补充触觉输出的特定音频输出。这些类型的音频输出在本文中被称为“触觉音频输出”。在一些实施方案中,非视觉反馈配置文件包括针对触觉输出的触觉输出模式和针对伴随触觉输出的触觉音频输出的触觉音频输出模式,以在用户体内引起特定的触觉感觉。触觉音频输出和对应的触觉输出的频率、振幅、波形和/或定时之间的相互作用在用户体内形成更丰富且更细致入微的触觉感觉,并使得非视觉反馈对用户而言更突出。在一些情景中,该设备允许用户使用一般的音量控制和/或静音控制来控制触觉音频输出的生成(例如,对应于用户界面触觉输出的触觉音频输出和/或对应于设备/系统触觉输出(例如,home按钮触觉输出)的触觉音频输出),例如,以节省电力和/或减少注意力分散。然而,该设备还防止用户无意中关闭针对设备/系统触觉输出的触觉音频(例如,伴随用于激活持续按钮的触觉输出的音频)。
图6A1-图6A26示出了在设备处打开用户界面触觉输出时触觉输出的生成。图6A1-图6A26示出,在设备处打开用户界面触觉输出时,该设备既生成用户界面触觉输出,又生成系统触觉输出(例如,用于激活硬件或设备上的持续按钮的触觉输出)。图6B1-图6B26示出,在设备处关闭用户界面触觉输出时,该设备生成系统触觉输出(例如,用于激活硬件或设备上持续按钮的触觉输出),但放弃生成用户界面触觉输出的至少一些。
如图6A1所示,控制用户界面(例如,声音和触觉控制用户界面680)包括用于在设备处控制声音和触觉输出的若干切换设置。例如,通过切换控件671将响铃时振动设置670设置为“关闭”;通过切换控件673将静音时振动设置672设置为“关闭”;并通过切换控件675将用户界面触觉输出设置674设置为“打开”。声音和触觉控制界面680还包括音量控件676,用于为铃声装置设置当前音量并提示音频输出(例如,通过沿音量控件676移动音量指示器677)。此外,通过切换控件679将按钮改变设置678设置为“关闭”。
在设备100处通过切换控件675打开用户界面触觉输出的同时,生成用户界面触觉输出以及系统触觉输出。在图6A2-图6A4中,在触摸屏112上,在对应于home屏幕用户界面(例如,home屏幕602)上的应用启动图标(例如,用于启动邮件应用的图标606)的位置处,检测到接触(例如,接触604)做出的输入。如图6A3-图6A4所示,在接触604的特征强度增大到轻按压强度阈值ITL(如图6A4中强度计610所示)以上时,home屏幕602(除图标606之外)被模糊化,在模糊的home屏幕602上方呈现菜单(例如,快速动作菜单608)(如图6A4所示)。此外,如图6A4所示,响应于检测到接触604的特征强度增大到轻按压强度阈值ITL以上,设备100结合呈现快速动作菜单608生成触觉输出612(例如,MicroTap(200Hz),增益:1.0)。
图6A5-图6A8示出,在触摸屏112上保持接触604的同时,该设备检测到接触604从对应于应用启动图标606的位置移动到对应菜单选项614、616、618和620的相应位置。在接触604向对应于菜单选项614、616、618和620的每个的位置移动时,设备100生成相应的触觉输出(例如,触觉输出622、624、628和630)(例如,MicroTap(270Hz),增益:0.4,最小间隔:0.05s),以指示接触604已经移动到不同的菜单选项。
图6A8-图6A9示出,在接触604在菜单选项620上方时,检测到接触604的提起。响应于检测到接触604的提起,设备100启动邮件应用并显示对应于菜单选项620的邮件应用的用户界面(例如,电子邮件列表用户界面622),如图6A10所示。
在图6A11-图6A13中,在触摸屏112上在对应于电子邮件项目列表中电子邮件项目(例如,项目626)的位置处检测到另一接触(例如,接触624)的输入。如图6A11-图6A13所示,在接触624的特征强度增大到轻按压强度阈值ITL(如图6A13中的强度计610所示)以上时,电子邮件列表用户界面622(除项目626之外)被模糊化,在模糊的电子邮件列表用户界面622上方呈现项目626的预览(例如,预览628)(如图6A13所示)。此外,如图6A13所示,响应于检测到接触624的特征强度增大到轻按压强度阈值ITL以上,设备100结合呈现预览628生成触觉输出630(例如,MicroTap(200Hz),增益:1.0)。
图6A13-图6A16示出,在触摸屏112上保持接触624的同时,该设备检测到接触624从其向下触摸的位置向左移动。接触624向左移动向着触摸屏112的左侧拖动预览628。在向触摸屏112的左侧拖动预览628的同时,逐渐从预览628的后方显露隐藏的菜单选项632(例如,“归档”)。在图6A16中,在接触624在用户界面中跨越阈值位置(例如,触摸屏112中央线左侧的隐藏阈值位置)移动以触发与隐藏的菜单选项632相关联的操作(例如,对电子邮件项目归档并从电子邮件列表移除它)时,设备100改变菜单选项632的颜色,以指示预览628的移动满足触发归档操作的阈值。此外,设备100结合用户界面中的视觉改变生成触觉输出634(例如,MicroTap(270Hz),增益:1.0),以指示预览628的移动满足触发归档操作的阈值。
图6A17-图6A19示出,在接触624跨越(或拖动预览628通过)用于触发归档操作的阈值位置之后,检测到接触624的提起。响应于检测到接触624被提起,设备100对与项目626对应的电子邮件执行归档操作,并从电子邮件项目列表移除项目626,如图6A19所示。
在图6A20-图6A22中,在触摸屏112上在对应于电子邮件项目列表中另一电子邮件项目(例如,项目638)的位置处检测到另一接触(例如,接触636)的输入。如图6A20-图6A22所示,在接触636的特征强度增大到轻按压强度阈值ITL(如图6A22中的强度计610所示)以上时,电子邮件列表用户界面622(除项目638之外)被模糊化,并在模糊的电子邮件列表用户界面622上方呈现项目638的预览(例如,预览640)(如图6A22所示)。此外,如图6A22所示,响应于检测到接触636的特征强度增大到轻按压强度阈值ITL以上,设备100结合呈现预览640生成触觉输出642(例如,MicroTap(200Hz),增益:1.0)。
图6A23示出,在触摸屏112上(例如,预览640上方)保持接触636的同时,该设备检测到接触636的特征强度增大到深按压强度阈值ITD以上。响应于检测到接触636的特征强度增大到深按压强度阈值以上,设备100停止显示预览640并显示内容显示用户界面644(例如,显示电子邮件项目638的内容的用户界面)替代模糊的电子邮件列表用户界面。此外,设备100结合用户界面644的显示而生成触觉输出646(例如,FullTap(150Hz),增益:1.0)。
在图6A24中,检测到接触636被提起,在检测到接触636提起之后,保持用户界面644。
图6A25示出,在触摸屏112上显示用户界面644的同时,在设备100上的home按钮(例如,home按钮650)上检测到接触(例如,接触646)做出的按压输入。响应于检测到按压输入(例如,接触646的特征强度增大到轻按压强度阈值ITL以上),设备100生成触觉输出648(例如,MiniTap(230Hz),增益:1.0),以指示home按钮650被按压输入激活。图6A26示出,响应于按压输入激活home按钮650,消除用户界面644,并显示home屏幕602替代触摸屏112上的用户界面644。
图6B1-图6B26示出了在设备处关闭用户界面触觉输出时触觉输出的生成。具体地讲,图6B1-图6B26示出,在设备处关闭用户界面触觉输出时,该设备继续生成系统触觉输出(例如,用于激活硬件或设备上持续按钮的触觉输出),但除了在从用户触觉输出设置的控件免除特定用户界面触觉输出的生成时,放弃生成用户界面触觉输出。
如图6B1所示,通过声音和触觉控制界面680中的切换控件675将用户界面触觉输出设置674设置为“关闭”。
在设备100处通过切换控件675关闭用户界面触觉输出的同时,不再生成至少一些用户界面触觉输出。在图6B2-图6B4中,在触摸屏112上,在对应于home屏幕602上用于启动邮件应用的图标606的位置处,检测到接触(例如,接触605)做出的输入。如图6B3-图6B4所示,在接触605的特征强度增大到轻按压强度阈值ITL(如图6B4中的强度计610所示)以上时,home屏幕602(除图标606之外)被模糊化,在模糊的home屏幕602上方呈现快速动作菜单608(如图6B4所示)。此外,如图6B4所示,响应于检测到接触605的特征强度增大到轻按压强度阈值ITL以上,设备100结合呈现快速动作菜单608生成触觉输出613(例如,MicroTap(200Hz),增益:1.0)。在该实施例中,尽管触觉输出613是用户界面触觉输出,但也从用户界面触觉输出设置的控制中免除用于响应于按压输入呈现快速动作菜单的触觉输出。换句话讲,根据一些实施方案,不论用于用户界面触觉输出的当前触觉输出是什么,始终生成伴随响应于应用启动图标上的按压输入呈现快速动作菜单的触觉输出(例如,MicroTap(200Hz),增益:1.0)。
图6B5-图6B8示出,在触摸屏112上保持接触605的同时,该设备检测到接触605从对应于应用启动图标606的位置移动到对应菜单选项614、616、618和620的相应位置。在接触605移动到对应于菜单选项614、616、618和620的每个的位置时,设备100突出显示该菜单选项,以指示已经将接触605移动到不同的菜单选项,但不生成任何触觉输出以伴随用户界面中发生的视觉改变(例如,与图6A5-图6A8中所示的情形相反,其中生成触觉输出622、624、628和630以指示接触604已经移动到不同的菜单选项)。换句话讲,在一些实施方案中,在关闭用户界面触觉输出时,设备100放弃为输入的一些部分生成触觉输出(例如,接触605跨过各个菜单选项移动),而继续为输入的其他部分(例如,接触605的强度增大到轻按压强度阈值以上以导致显示快速动作菜单608)生成触觉输出,不论是否打开还是关闭用户界面触觉输出。
图6B8-图6B9示出,在接触605在菜单选项620上方时,检测到接触605的提起。响应于检测到接触605提起,设备100启动邮件应用并显示对应于菜单选项620的邮件列表用户界面622,如图6B10所示。
在图6B11-图6B13中,在触摸屏112上在对应于电子邮件项目列表中的项目626的位置处检测到另一接触(例如,接触625)的输入。如图6B11-图6B13所示,在接触625的特征强度增大到轻按压强度阈值ITL(如图6B13中的强度计610所示)以上时,电子邮件列表用户界面622(除项目626之外)被模糊化,并且在模糊的电子邮件列表用户界面622上方呈现预览628(如图6B13所示)。此外,如图6B13所示,响应于检测到接触625的特征强度增大到轻按压强度阈值ITL以上,设备100结合呈现预览628生成触觉输出631(例如,MicroTap(200Hz),增益:1.0)。换句话讲,根据一些实施方案,不论用于用户界面触觉输出的当前触觉输出为什么,始终生成伴随响应于项目上的按压输入呈现预览的触觉输出(例如,MicroTap(200Hz),增益:1.0)。
图6B13-图6B16示出,在触摸屏112上保持接触625的同时,该设备检测到接触625从其向下触摸的位置向左移动。接触625向左移动向着触摸屏112的左侧拖动预览628。在向触摸屏112的左侧拖动预览628的同时,逐渐从预览628的后方显露隐藏的菜单选项632(例如,“归档”)。在图6B16中,在接触625在用户界面中跨越阈值位置(例如,触摸屏112中央线左侧的隐藏阈值位置)移动以触发与隐藏的菜单选项632相关联的操作(例如,对电子邮件项目归档并从电子邮件列表移除它)时,设备100改变菜单选项632的颜色,以指示预览628的移动满足触发归档操作的阈值。然而,与图6A16中所示的情形相反,设备100不会结合用户界面中的视觉改变生成任何触觉输出。换句话讲,设备100已经根据处于“关闭”状态的当前触觉输出设置放弃生成用户界面触觉输出。
图6B17-图6B19示出,在接触625跨越(或拖动预览628通过)用于触发归档操作的阈值位置之后,检测到接触625的提起。响应于检测到接触625被提起,设备100对与项目626对应的电子邮件执行归档操作,并从电子邮件项目列表移除项目626,如图6B19所示。
在图6B20-图6B22中,在触摸屏112上在对应于电子邮件项目列表中项目638的位置处检测到另一接触(例如,接触637)的输入。如图6B20-图6B22所示,在接触637的特征强度增大到轻按压强度阈值ITL(如图6B22中的强度计610所示)以上时,电子邮件列表用户界面622(除项目638之外)被模糊化,在模糊的电子邮件列表用户界面622上方呈现预览640(如图6B22所示)。此外,如图6B22所示,响应于检测到接触637的特征强度增大到轻按压强度阈值ITL以上,设备100结合呈现预览640生成触觉输出643(例如,MicroTap(200Hz),增益:1.0),因为用于关闭用户界面触觉输出的当前触觉输出设置从控制免除了触觉输出643。
图6B23示出,在触摸屏112上(例如,预览640上方)保持接触637的同时,该设备检测到接触637的特征强度增大到深按压强度阈值ITD以上。响应于检测到接触637的特征强度增大到深按压强度阈值以上,设备100停止显示预览640并显示内容显示用户界面644替代模糊的电子邮件列表用户界面。此外,设备100结合用户界面644的显示生成触觉输出647(例如,FullTap(150Hz),增益:1.0),因为用于关闭用户界面触觉输出的当前触觉输出设置从控制免除了触觉输出647。
在图6B24中,检测到接触637被提起,在检测到接触637提起之后,保持用户界面644。
图6B25示出,在触摸屏112上显示用户界面644的同时,在设备100上的home按钮650上检测到接触(例如,接触647)做出的按压输入。响应于检测到按压输入(例如,接触647的特征强度增大到轻按压强度阈值ITL以上),设备100生成触觉输出649(例如,MiniTap(230Hz),增益:1.0),以指示home按钮650被按压输入激活。图6B26示出,响应于按压输入激活home按钮650,消除用户界面644,并显示home屏幕602替代触摸屏112上的用户界面644。
尽管图6A1-图6B26中未示出,但根据各种使用情景和设备省电配置中的不同考虑的特定优先化,触觉音频输出可以伴随以上实施例中生成的一些或所有触觉输出。例如,在一些实施方案中,触觉音频输出由一般的设备音频音量控件和/或静音控件来控制。
在一些实施方案中,在生成触觉输出时,不论设备是否静音,都始终生成触觉音频输出。
在一些实施方案中,在生成系统触觉输出时,不论设备是否静音,都始终生成触觉音频输出。
在一些实施方案中,在生成用户界面触觉输出时,不论设备是否静音,都始终生成触觉音频输出。
在一些实施方案中,在生成触觉输出时,在设备静音时使触觉音频输出静音,并在设备不静音时生成触觉音频输出。
在一些实施方案中,在生成系统触觉输出时,在设备静音时使伴随系统触觉输出的触觉音频输出静音,并在设备不静音时生成伴随系统触觉输出的触觉音频输出。
在一些实施方案中,在生成用户界面触觉输出时,在设备静音时使伴随用户界面触觉输出的触觉音频输出静音,并在设备不静音时生成伴随用户界面触觉输出的触觉音频输出。
在一些实施方案中,在设备与触觉输出一起生成触觉音频时,该设备根据也生成的触觉输出的特征,生成触觉音频输出。例如,在增大对应触觉输出的振幅时,增大音频输出的振幅。例如,在增大对应触觉输出的频率时,增大音频输出的频率。在一些实施方案中,音频输出中性质(例如,振幅或频率)的改变量大于对应触觉输出中性质的改变量。
在一些实施方案中,在设备与触觉输出一起生成触觉音频时(例如,受到用户界面触觉输出设置控制的用户界面触觉输出),该设备生成振幅基于设备音量设置被调节的触觉音频输出。在一些实施方案中,在设备与触觉输出一起生成触觉音频时(例如,被免除受到用户界面触觉输出设置控制的用户界面触觉输出),该设备生成振幅基于设备音量设置不被调节的触觉音频输出。
在一些实施方案中,该设备在关闭用户界面触觉输出时,不论设备的静音/非静音设置如何,都继续生成触觉音频输出。例如,对于未被免除受用户界面触觉输出设置控制的触觉输出,在不生成触觉输出时,该设备可以生成代替触觉输出的音频输出,以向用户提供非视觉反馈。
在一些实施方案中,如果打开用户界面触觉输出,该设备仅根据设备的静音设置关闭触觉音频输出(例如,用于用户界面触觉输出的触觉音频输出)。
触觉输出控件和触觉输出控件的其他变化是可能的,本文未穷举列出。
图7A-图7G是示出了根据一些实施方案提供与激活用户输入设备(例如,虚拟或物理home按钮)相关的视觉反馈的方法700的流程图。方法700在具有显示器、触敏表面、一个或多个用以检测与触敏表面和/或设备的相应按钮(例如,虚拟或物理home按钮)的接触强度的传感器以及用于生成触觉输出的一个或多个触觉输出发生器的电子设备(例如,图3的设备300,或者图1A中的便携式多功能设备100)处被执行。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。在一些实施方案中,方法700受到存储在计算机可读存储介质(例如,非暂态计算机可读存储介质)中并由电子设备的一个或多个处理器(诸如设备100(图1A)的一个或多个处理器122)执行的指令管控。为了便于解释,下文描述由设备100执行的方法700。方法700中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
方法700涉及响应于检测到与激活用户输入设备的输入(例如,按压输入)一致的前导输入(例如,轻触摸)而显示与激活用户输入设备(例如,虚拟或物理home按钮)相关的视觉反馈的开始。在一些实施方案中,在检测到激活用户输入设备的输入时,呈现对应于激活用户输入设备的用户界面改变作为已经呈现的视觉反馈的继续。如果在终止前导输入之前未检测到用于激活用户输入设备的输入,则停止显示视觉反馈并恢复用户界面的初始状态。在实际激活用户输入设备之前显示关于激活用户输入设备的视觉反馈的开始向用户提供了关于输入效果的信息(例如,激活home按钮以返回home屏幕),并允许用户有机会基于该信息决定是否继续完成输入。因此,该视觉反馈通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误而增强了设备的可操作性,此外通过使用户能够更快更高效地使用设备而减小了电力使用并改善了设备的电池寿命。
在一些实施方案中,该设备的home按钮是物理home按钮或虚拟home按钮(例如,按钮204,图5A1)。在一些实施方案中,该设备包括一个或多个传感器以检测与触敏表面的接触强度。在一些实施方案中,该显示器是触敏显示器。在一些实施方案中,该设备包括用于生成触觉输出的一个或多个触觉输出发生器。在一些实施方案中,所述home按钮在多种不同情景中在所述设备上可用(例如,在相应位置持续显示或位于该设备上与显示器分开的持续位置处),以响应于在home按钮上检测到第一类型的输入(例如,经由压下机械开关或通过对比home按钮上的接触强度与激活标准而检测到的按压输入或按压和释放输入,该激活标准基于参考方法900、1300、1500和1700更详细描述的一个或多个强度阈值)而消除当前显示的用户界面(例如,并且任选地,重新显示先前显示的用户界面,诸如应用的先前视图,或系统用户界面,诸如设备的home屏幕、多任务用户界面或虚拟助理用户界面)。参考方法1100和1900更详细描述了为home按钮激活配置触觉的其他方面。
在一些实施方案中,home按钮对多种输入做出响应,包括:第一类型的输入(例如,单击(例如,具有一次按压事件,或一次按压事件接着一次释放事件))、第二类型的输入(例如,双击(例如,具有第一按压事件,接着第一释放事件,接着第二按压事件,或具有第一按压事件,接着第一释放事件,接着第二按压事件,接着第二释放事件,其中第一按压事件和第二按压事件是在彼此的阈值量时间之内检测的))、第三类型的输入(例如,长按(例如,具有在已过去超过阈值量时间之前不被提起的第一按压事件)),以及第四类型的输入(例如,深按压(例如,具有包括接触强度在接触的初始向下触摸之后阈值量时间之内增大到深按压强度阈值以上的第一按压事件))。在一些实施方案中,每种输入都与消除当前显示的用户界面,以及执行对应操作,并任选地显示与该操作相关联的对应用户界面相关联。
根据方法700并参考图7A,该设备(例如,设备100,图5A1)在显示器上显示(702)第一用户界面(例如,home屏幕或多页home屏幕的主要页面,诸如图5A1中的用户界面510)。在显示第一用户界面(例如,用户界面510,图5A1)的同时,该设备检测(704)指向第一用户界面的输入(例如,时钟图标上的接触502做出的轻击手势,图5A2)。例如,指向第一用户界面的输入是触敏表面上在对应于第一用户界面或整个用户界面(不在home按钮上)中可激活对象的位置处的触摸输入。作为另一个实施例,指向第一用户界面的输入是指向应用启动图标、文件夹图标、通知、菜单选项、控制示能表示(例如,用以显示控制用户界面)或用户界面整体的触摸输入(例如,home屏幕或多页home屏幕的主要页面上的刷动输入)。
响应于检测到指向第一用户界面(706)的输入,该设备停止显示第一用户界面(例如,用户界面510,图5A2),并显示与第一用户界面不同的第二用户界面(例如,时钟应用的用户界面512,图5A3)(例如,第一应用的用户界面、叠加在暗化home屏幕上的扩展文件夹、叠加在暗化home屏幕上的扩展通知、叠加在暗化home屏幕上的控制面板、同时呈现多个用户界面的相应表示的多任务用户界面、多页home屏幕的次要页面、通知屏、桌面小程序屏等)。
在显示第二用户界面的同时,该设备检测(708)home按钮上的接触(例如,接触504-a,如图5A4所示)。在连续检测home按钮上的接触的同时,该设备执行至少三个操作(710)。首先,该设备检测接触的特征强度增大到第一强度阈值以上(例如,提示强度阈值ITH)(例如,如图5A5所示)。第二,响应于检测到接触的特征强度增大到第一强度阈值,该设备显示从第二用户界面过渡回第一用户界面的开始(例如,如图5A5-图5A6和图5A9-图5A10中所示)。第三,在显示从第二用户界面过渡回第一用户界面的开始的同时,该设备检测到输入序列,包括检测到按压输入(例如,接触504做出的输入序列504-a到504-d,图5A4-图5A7,或接触508做出的输入序列508-a到508-e,图5A9-图5A13),该按压输入包括接触的特征强度增大到第一强度阈值(例如,提示强度阈值ITH)以上(例如,在达到第一强度阈值之后,且在显示从第二用户界面过渡回第一用户界面的开始之后,接触强度继续增大)。
现在转到图7B,响应于检测到该输入序列(712),该设备确定该输入序列是否满足第一标准和/或确定该输入序列是否满足第二标准。根据确定该输入序列满足第一标准,第一标准要求接触的特征强度在检测到按压输入结束之前(例如,检测按压输入的结束包括检测释放输入,诸如从触敏表面提起接触或接触的特征强度减小到释放强度阈值以下(例如,如图5A13所示)(例如,释放强度阈值可以预先配置为高于、低于或等同于轻按压强度阈值,或基于按压输入的输入度量(例如,接触强度的增大速率)被动态确定))增大到第二强度阈值(例如,如图5A11所示)以上(例如,第二强度阈值为轻按压强度阈值ITL,第二强度阈值高于第一强度阈值),该设备:停止显示第二用户界面,并在显示器上重新显示第一用户界面(例如,在从第二用户界面过渡回第一用户界面结束时,重新显示第一用户界面,不再显示第二用户界面)。例如,在图5A8-图5A14中,该输入序列满足第一标准,在从用户界面510过渡回用户界面510结束时(例如,用户界面513-1到513-5,图5A9-图5A13),该设备100停止显示用户界面512(图5A8中),并重新显示用户界面510(图5A14中)。
根据确定输入序列满足第二标准,该第二标准要求接触的特征强度在检测到按压输入结束之前保持低于第二强度阈值,该设备:反转从第二用户界面过渡回第一用户界面的开始,并在显示器上重新显示第二用户界面。例如,在图5A4-图5A8中,该输入序列满足第二标准,该设备100反转过渡(例如,从用户界面513-2到用户界面513-1,图5A6-图5A7)的开始,并在显示器上重新显示第二用户界面(例如,用户界面512,图5A8)。
在一些实施方案中,停止显示第二用户界面并重新显示第一用户界面包括(714)显示从第二用户界面过渡回第一用户界面的开始的继续(例如,如图5A9-图5A13所示)。在一些实施方案中,通过显示响应于前导输入而显示的视觉反馈的继续,根据用户的预期无缝地执行从第二用户界面到第一用户界面的完整过渡,而不会以意外的视觉改变分散用户注意力,并使得用户界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当的输入并减少用户错误),这样通过使用户能够更快更有效地使用设备而另外减小了电力使用并改善了设备的电池寿命。此外,由于响应于前导输入而呈现视觉反馈,不必要地延迟了从第二用户界面到第一用户界面的过渡。
在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括(716)同时显示第二用户界面的至少一部分与第一用户界面的至少一部分。例如,在图5A9中,用户界面513-1包括用户界面512的一部分和用户界面510的一部分。在一些实施方案中,在过渡推进时,显示更多用户界面510,显示更少用户界面512(例如,如图5A10-图5A13所示)。
在一些实施方案中,第一用户界面为home屏幕(例如,用户界面510,图5A1),包括对应于电子设备(718)上不同应用的多个应用启动图标。
现在参考图7C,在一些实施方案中,第一用户界面和第二用户界面是应用(720)的相继显示的用户界面。例如,在一些情景中home按钮充当返回按钮。
在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括(722)减小第二用户界面的尺寸(例如,根据接触增大的强度)。例如,如图5A5-图5A6所示,随着接触504的特征强度增大,减小第二用户界面512的显示尺寸。在一些实施方案中,该设备从第二用户界面后方显露(724)第一用户界面,因为第二用户界面的尺寸减小了(例如,随着接触强度增大)。例如,在接触达到第一强度阈值之前以全屏尺寸显示第二用户界面(例如,如图5A4所示),随着接触强度增大到第一强度阈值以上,第二用户界面缩小以显露背景中的home屏幕(例如,如图5A5-图5A6所示)。
在一些实施方案中,第二用户界面是第一应用的用户界面(例如,时钟应用的用户界面512,图5A8),第一应用对应于第一用户界面中的第一应用启动图标(例如,用户界面510上的时钟图标,图5A14),减小第二用户界面的尺寸包括向第一用户界面上第一应用启动图标的位置缩小第二用户界面(726)(例如,如图5A9-图5A13所示)。
在一些实施方案中,第二用户界面包括扩展文件夹(例如,叠加于第一用户界面的模糊且扩展版本上)(例如,用户界面522,图5B70),扩展的文件夹对应于第一用户界面中的第一文件夹图标(例如,用户界面520中的摄影文件夹,图5B72),减小第二用户界面的尺寸包括向着第一用户界面上的第一文件夹图标的位置缩小扩展的文件夹(任选地,同时缩小并清晰化第一用户界面的扩展版本)(728)。
在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括(730)(例如,根据接触增大的强度)沿第一方向横向偏移第二用户界面。例如,home屏幕的次要页面(例如,用户界面520,图5B72)向左或向右偏移,以为home屏幕的主要页面(例如,用户界面510,图5B74)留出空间。在一些实施方案中,该设备显露出(732)第一用户界面,因为第二用户界面沿第一方向被横向偏移(例如,从第二用户界面后面显露home屏幕,或者home屏幕滑动到移动的第二用户界面下一个)。
现在参考图7D,在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括(734)(例如,根据接触强度增大)淡出第二用户界面(或减小其不透明度)。例如,与home屏幕相邻的桌面小程序屏淡出,因为home屏幕的主要页面从侧面滑入。在一些实施方案中,该设备沿第一方向横向偏移(736)第一用户界面,以覆盖第二用户界面(例如,将home屏幕滑入),因为第二用户界面淡出。
在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括(738)(例如,根据接触强度增大)改变第一用户界面和第二用户界面中的至少一者的虚拟深度。例如,从与更接近显示器表面的第二用户界面的堆叠状态开始,第二用户界面向左偏移,然后向右偏移,同时随着接触强度增大从显示器的表面后退离开,而第一用户界面向右偏移,然后向左偏移,同时向显示器的表面前进。
在一些实施方案中,第二用户界面(例如,多任务用户界面528,图5B15)包括对第一用户界面的表示(例如,页面应用用户界面524,图5B16),显示从第二用户界面过渡回第一用户界面的开始包括扩展对第二用户界面中包括的第一用户界面的表示以及减小对第一用户界面的表示的虚拟深度(742)。在图5B15-图5B16中,对页面应用的表示响应于home按钮上接触533做出的按压输入从多任务用户界面528弹出。作为另一个实施例,如果第二用户界面(例如,多任务用户界面)包括对顶部位置处home屏幕的表示,对home屏幕的表示会从多任务用户界面弹出。
现在参考图7E,在一些实施方案中,检测输入序列还包括(744)检测在输入序列满足第一标准之前(例如,在第一类型的输入(例如,单击)激活home按钮动作(例如,消除当前用户界面并恢复home屏幕)之前),接触的特征强度在第一强度阈值和第二强度阈值(例如,大于第一强度阈值)之间变化。在一些实施方案中,该设备响应于检测到在输入序列满足第一标准之前接触的特征强度在第一强度阈值和第二强度阈值之间改变,根据接触的特征强度动态地推进和反转从第二用户界面到第一用户界面的过渡(例如,如图5A9-图5A10所示)。在一些实施方案中,根据接触的特征强度动态地推进和反转从第二用户界面到第一用户界面的过渡指示用户如何完成输入(例如,通过更用力按压)以及如何取消输入(例如,通过提起而没有更用力按压)。此外,允许用户有更多时间考虑是否完成输入,这增强了设备的可操作性并使得用户界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使用户能够更快高效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
在一些实施方案中,根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括(746)根据接触的特征强度动态地改变施加于第一用户界面的模糊半径。
在一些实施方案中,根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括(748)根据接触的特征强度动态显露第一用户界面的至少一部分。(例如,随着接触的特征强度增大而渐进地显露更多第一用户界面,随着接触强度减小而渐进地隐藏更多第一用户界面)(例如,如图5A5-图5A7所示)。
在一些实施方案中,根据接触的特征强度动态地推进和反转从第二用户界面到第一用户界面的过渡包括(750):根据接触的特征强度动态地(例如,在第一方向(例如,水平)上横向)偏移第二用户界面在显示器上的位置,并根据接触的特征强度随着第二用户界面的位置动态偏移(例如,沿第一方向来回横向偏移)而显露对应量的第一用户界面。例如,随着接触的特征强度增大,沿第一方向渐进偏移第二用户界面以显露第一用户界面的一部分,并随着接触的特征强度减小而沿与第一方向相反的第二方向渐进地偏移第二用户界面以隐藏第一用户界面的该部分(例如,如图5A5-图5A7所示)。
参考图7F,在一些实施方案中,根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括(752):根据接触的特征强度动态地改变第二用户界面的不透明度。例如,随着接触的特征强度增大,渐进地减小用于呈现第二用户界面的不透明度以显露第一用户界面,随着接触的特征强度减小,渐进地增大用于呈现第二用户界面的不透明度以使第一用户界面模糊。
在一些实施方案中,第二用户界面是第一用户界面的一部分的扩展版本(例如,扩展文件夹UI看起来像是home屏幕扩展版本的一部分)。在一些实施方案中,根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括:根据接触的特征强度动态地改变第二用户界面的尺寸(754)。例如,随着接触强度增大,扩展文件夹UI缩小,将围绕文件夹的第一用户界面的部分拉入显示器的可查看区域中,随着接触强度的减小,缩小的文件夹重新扩展,将围绕文件夹的第一用户界面的部分推出到显示器的可查看区域之外。
在一些实施方案中,第二用户界面包括对第一用户界面的表示。在一些实施方案中,根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括(756)根据接触的特征强度动态地改变对第一用户界面的表示的虚拟深度(例如,随着接触强度增大,对第一用户界面的表示尺寸扩展,并沿z方向向着显示器表面推进,对其他用户界面的表示保持在与之前相同的深度,并变得被第一用户界面的扩展和推进表示覆盖;随着接触强度减小,该过程反转)。
在一些实施方案中,第一用户界面为home屏幕(例如,用户界面510,图5A14),第二用户界面为第一应用的用户界面(例如,用户界面512,图5A8)(758)。在一些实施方案中,响应于检测到输入序列并根据确定该输入序列满足第一标准(例如,如图5A9-图5A13所示),该设备关闭或暂停第一应用(760)。
在一些实施方案中,第一用户界面为多页home屏幕的主要页面(例如,用户界面510,图5B74),第二用户界面为多页home屏幕的次要页面(例如,用户界面520,图5B72)(762)。
在一些实施方案中,第一用户界面(例如,用户界面520,图5B72)为home屏幕(该home屏幕包括对应于包括一个或多个文件夹项的第一文件夹的第一文件夹图标),第二用户界面(例如,用户界面522,图5B70)包括第一文件夹的扩展视图(例如,包括一个或多个应用启动图标,叠加在home屏幕的非突出版本上的扩展文件夹),其包括一个或多个文件夹项的更大(例如,完整尺寸)表示(764)。
现在参考图7G,在一些实施方案中,如上所述,该设备包括一个或多个触觉输出发生器(766)。在一些实施方案中,响应于检测到输入序列并根据确定输入序列满足第一标准,该设备使用一个或多个触觉输出发生器(768)生成第一触觉输出,如图5A11所示。在一些实施方案中,第一强度阈值是点击前阈值(例如,提示强度阈值ITH),在检测到接触的特征强度增大到第一强度阈值以上时不生成触觉输出,如图5A9-图5A10所示。
在一些实施方案中,该设备在检测到接触的特征强度增大到第一强度阈值以上时生成(770)触觉输出。在一些实施方案中,在检测到接触的特征强度增大到第一强度阈值以上时生成的触觉输出与响应于确定该输入序列满足第一标准而生成的触觉输出(例如,振幅、持续时间、频率和/或波形)不同。在一些实施方案中,在检测到接触的特征强度增大到第一强度阈值以上时生成的触觉输出与响应于确定该输入序列满足第一标准而生成的触觉输出相同。
在一些实施方案中,该设备响应于检测到接触的特征强度增大到第一强度阈值以上而放弃生成(772)触觉输出,如图5A9-图5A10所示。
在一些实施方案中,根据确定输入序列包括接触的特征强度增大到第二强度阈值以上且满足长按标准(例如,以接触的特征强度增大到高于第二强度阈值开始的按压输入的最小持续时间,诸如图5A16中的TLP),该设备中断(774)从第二用户界面到第一用户界面的动画过渡,以显示向与长按标准相关联的第三用户界面(例如,自动化助理用户界面,诸如用户界面515,图5A18)的动画过渡(例如,包括用户界面514-1,图5A17),如图5A15-图5A18所示。
例如,在接触的特征强度增大到第二强度阈值以上之后,该设备将不再随着接触强度减小使过渡回第二用户界面反转。相反,过渡向着重新显示第一用户界面进展。然而,如果在接触的特征强度增大到第二强度阈值以上之后接触保持超过阈值量时间,该设备中断向第一用户界面过渡,并重定向成显示第三用户界面(例如,数字助理用户界面,诸如用户界面515,图5A18)。以下参考方法900提供了附加实施例。
根据输入的初始部分显示视觉反馈并基于输入如何继续而允许已经进行中的用户界面过渡分叉和/或中断,使得用户界面响应性更好且更有效。例如,该设备不必一直等到输入终止才确定其类型,从而缩短或消除了开始对应于所确定的输入类型的适当用户界面过渡的延迟。向用户提供改进的视觉反馈增强了设备的可操作性并使得用户-设备界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使得用户能够更快更高效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
在一些实施方案中,根据确定该输入序列包括接触的特征强度增大到第二强度阈值以上且满足多次点击标准(例如,重复点击之间的最小持续时间,任选地从两次相继点击输入的第一次松开点击到第二次松开点击、从第一次按下点击到第二次松开点击或从第一次松开点击到第二次按下点击或从第一次按下点击到第二次按下点击测量,该两次相继点击输入对应于home按钮上接触的特征强度增大和后续减小),该设备中断(776)从第二用户界面到第一用户界面的动画过渡以显示向与多次点击标准相关联的第四用户界面(例如,多任务用户界面)的动画过渡(例如,如下文参考方法900更详细所述)。作为一个非限制性实施例,在接触的特征强度增大到第二强度阈值(例如,图5B6中)以上之后,该设备将不再随着接触强度减小而使过渡回第二用户界面反转。相反,过渡向着重新显示第一用户界面进展(例如,如图5B7-图5B10所示)。然而,如果在阈值量时间之内检测到接触做出的第二按压输入(例如,如图5B10所示),则登记双击输入;该设备中断第一用户界面的重新显示并(例如,如图5B11-图5B13所示)过渡到显示第四用户界面(例如,多任务用户界面,诸如用户界面528,图5B14)。
应当理解,对图7A-图7G中的操作进行描述的特定顺序仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法900、1100、1300、1500、1700和1900)描述的其他过程的细节同样以类似的方式适用于上文相对于图7A-图7G描述的方法700。例如,上文参考方法700所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器以及动画任选地具有本文中参考本文描述的其他方法(例如,方法900、1100、1300、1500、1700和1900)所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器以及动画的一个或多个特征。为了简明起见,这些细节在这里不再重复。
根据一些实施方案,图8示出了根据各种所述实施方案的原理进行配置的电子设备800的功能框图。该设备的功能块任选地由执行各种所描述的实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图8中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图8所示,该电子设备800包括被配置为显示信息的显示单元801(例如,触敏显示器系统112(也称为触摸屏和触摸屏显示器),图1A)、被配置为在触摸屏显示器上接收接触、手势和其他用户输入的触敏表面单元804(例如,显示控制器156和触敏显示器系统112,图1A)、被配置为检测与触敏表面单元和/或设备的相应按钮(例如,home按钮)的接触强度的一个或多个传感器单元806、任选的用于生成触觉输出的一个或多个触觉输出生成单元807,以及与显示单元802、触敏表面单元804、一个或多个传感器单元806和任选的一个或多个触觉输出生成单元807耦接的处理单元808。为了便于例示,图8将显示单元802和触敏表面单元804示为与电子设备800集成,然而,在一些实施方案中,这些单元中之一或两者与电子设备通信,尽管单元保持与电子设备物理分离(例如,如图3所示且如参考图3所述)。在一些实施方案中,处理单元包括显示单元(例如,显示单元810)、输入检测单元(例如,输入检测单元812)、特征强度检测单元(例如,特征强度检测单元814)、确定单元(例如,确定单元816)和触觉输出生成单元(例如,触觉输出生成单元818)。
在一些实施方案中,处理单元(或其一个或多个部件,诸如单元810-818)被配置为:(例如,利用显示单元810)在显示器上显示第一用户界面;在显示第一用户界面的同时,(例如,利用输入检测单元812)检测指向第一用户界面的输入;响应于检测到指向第一用户界面的输入:(例如,利用显示单元810)停止显示第一用户界面,并(例如,利用显示单元810)显示与第一用户界面不同的第二用户界面;在显示第二用户界面的同时,检测home按钮上的接触;在连续检测home按钮上的接触的同时:(例如,利用输入检测单元812)检测接触的特征强度增大到第一强度阈值以上;响应于检测到接触的特征强度增大到第一强度阈值以上,(例如,利用显示单元810)显示从第二用户界面过渡回第一用户界面的开始;在显示从第二用户界面过渡回第一用户界面的开始的同时,(例如,利用输入检测单元812)检测包括检测按压输入的输入序列,该按压输入包括接触的特征强度增大到第一强度阈值以上;响应于检测到输入序列:根据确定该输入序列满足第一标准,该第一标准要求接触的特征强度在检测到按压输入结束之前增大到第二强度阈值以上:(例如,利用显示单元810)停止显示第二用户界面,并(例如,利用显示单元810)在显示器上重新显示第一用户界面;以及根据确定输入序列满足第二标准,该第二标准要求接触的特征强度在检测到按压输入结束之前保持低于第二强度阈值:(例如,利用显示单元810)反转从第二用户界面过渡回第一用户界面的开始,并(例如,利用显示单元810)在显示器上重新显示第二用户界面。
在一些实施方案中,停止显示第二用户界面并重新显示第一用户界面包括显示从第二用户界面过渡回第一用户界面的开始的继续。
在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括同时显示第二用户界面的至少一部分与第一用户界面的至少一部分。
在一些实施方案中,第一用户界面为home屏幕,包括对应于电子设备上不同应用的多个应用启动图标。
在一些实施方案中,第一用户界面和第二用户界面是应用的相继显示的用户界面。
在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括减小第二用户界面的尺寸。
在一些实施方案中,该处理单元被配置为:(例如,利用显示单元810)从第二用户界面后方显露第一用户界面,因为第二用户界面的尺寸减小了。
在一些实施方案中,第二用户界面是第一应用的用户界面,第一应用对应于第一用户界面中的第一应用启动图标,减小第二用户界面的尺寸包括向第一用户界面上第一应用启动图标的位置缩小第二用户界面。
在一些实施方案中,第二用户界面包括扩展文件夹,该扩展文件夹对应于第一用户界面中的第一文件夹图标,减小第二用户界面的尺寸包括向第一用户界面上第一文件夹图标的位置缩小扩展文件夹。
在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括沿第一方向横向偏移第二用户界面。
在一些实施方案中,该处理单元被配置为:(例如,利用显示单元810)在沿第一方向横向偏移第二用户界面时,显露第一用户界面。
在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括淡出第二用户界面。
在一些实施方案中,该处理单元被配置为:(例如,利用显示单元810)在第二用户界面淡出时沿第一方向横向偏移第一用户界面以覆盖第二用户界面。
在一些实施方案中,显示从第二用户界面过渡回第一用户界面的开始包括改变第一用户界面和第二用户界面中的至少一者的虚拟深度。
在一些实施方案中,第二用户界面包括对第一用户界面的表示,显示从第二用户界面过渡回第一用户界面的开始包括扩展对第二用户界面中包括的第一用户界面的表示以及减小对第一用户界面的表示的虚拟深度。
在一些实施方案中,检测输入序列还包括在输入序列满足第一标准之前检测接触的特征强度在第一强度阈值和第二强度阈值之间变化;该处理单元被配置为,响应于在输入序列满足第一标准之前(例如,利用特征强度检测单元814)检测接触的特征强度在第一强度阈值和第二强度阈值之间变化,(例如,利用显示单元810)根据接触的特征强度,动态推进和反转从第二用户界面到第一用户界面的过渡。
在一些实施方案中,根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括:根据接触的特征强度动态地改变施加于第一用户界面的模糊半径。
在一些实施方案中,根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括:根据接触的特征强度动态显露第一用户界面的至少一部分。
在一些实施方案中,根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括:根据接触的特征强度动态地偏移第二用户界面在显示器上的位置,其中根据接触的特征强度随着第二用户界面的位置动态偏移而显露对应量的第一用户界面。
在一些实施方案中,根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括:根据接触的特征强度动态地改变第二用户界面的不透明度。
在一些实施方案中,第二用户界面是第一用户界面的一部分的扩展版本;根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括:根据接触的特征强度动态地改变第二用户界面的尺寸。
在一些实施方案中,第二用户界面包括对第一用户界面的表示;根据接触的特征强度动态推进和反转从第二用户界面到第一用户界面的过渡包括:根据接触的特征强度动态地改变第一用户界面表示的虚拟深度。
在一些实施方案中,第一用户界面是home屏幕,第二用户界面是第一应用的用户界面,处理单元被配置为:响应于检测到输入序列:根据确定该输入序列满足第一标准,关闭或暂停第一应用。
在一些实施方案中,第一用户界面为多页home屏幕的主要页面,第二用户界面为多页home屏幕的次要页面。
在一些实施方案中,第一用户界面是home屏幕,其中home屏幕包括对应于包括一个或多个文件夹项的第一文件夹的第一文件夹图标;第二用户界面包括第一文件夹的扩展视图,其包括对一个或多个文件夹项的更大表示。
在一些实施方案中,该设备包括一个或多个触觉输出发生器,处理单元被配置为:响应于检测到输入序列:根据确定输入序列满足第一标准,(例如,利用触觉输出生成单元818)生成第一触觉输出。
在一些实施方案中,该处理单元被配置为:在检测到接触的特征强度增大到第一强度阈值以上时(例如,利用触觉输出生成单元818)生成触觉输出。
在一些实施方案中,该处理单元被配置为:放弃响应于检测到接触的特征强度增大到第一强度阈值以上而生成触觉输出。
在一些实施方案中,处理单元被配置为,(例如,利用特征强度检测单元814)根据确定输入序列包括接触的特征强度增大到第二强度阈值以上且满足长按标准,(例如,利用显示单元810)中断从第二用户界面到第一用户界面的动画过渡,以显示向与长按标准相关联的第三用户界面的动画过渡。
在一些实施方案中,处理单元被配置为根据确定输入序列包括接触的特征强度增大到第二强度阈值以上且满足多次点击标准,中断从第二用户界面到第一用户界面的动画过渡,以显示向与多次点击标准相关联的第四用户界面的动画过渡。
上述信息处理方法中的操作任选地通过运行信息处理设备中的一个或多个功能模块来实现,该信息处理设备诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图7A-图7G所述的操作任选地由图1A-图1B或图8中所描绘的部件来实现。例如,显示操作702、检测操作704、响应操作706、检测操作708、检测操作710和响应操作712任选地由事件分类器170、事件识别器180和事件处理程序190来实现。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用136-1。应用136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用内部状态192。在一些实施方案中,事件处理程序190访问相应GUI更新器178来更新应用所显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A-图1B中所示的部件可如何实现其他过程。
图9A-图9D是示出了根据一些实施方案响应于设备的home按钮上的多种输入提供视觉反馈和触觉输出的方法900的流程图。方法900在具有显示器、触敏表面,以及一个或多个用以检测与触敏表面和/或设备的相应按钮(例如,虚拟或物理home按钮)的接触强度的传感器的电子设备(例如,图3的设备300,或者图1A中的便携式多功能设备100)处被执行。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。在一些实施方案中,方法900受到计算机可读存储介质(例如,非暂态计算机可读存储介质)中存储并由电子设备的一个或多个处理器,诸如设备100(图1A)的一个或多个处理器122执行的指令管控。为了便于解释,下文描述由设备100执行的方法900。方法900中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
方法900涉及响应于输入的初始部分开始从第一用户界面到第二用户界面的动画过渡,其中可以根据输入的后续部分是否以及何时满足用于向第三用户界面过渡的标准,在不同点中断动画过渡,以向第三用户界面进展。在完全确定输入的输入类型之前开始动画过渡改善了用户界面的响应性。将中断的定时匹配到确认输入类型时的定时改善了向用户提供的视觉反馈(例如,通过使设备看起来对用户输入响应更灵敏),并(例如,通过帮助用户提供适当的输入并减少用户操作设备/与设备交互时的错误)增强了设备的可操作性。此外,在很多情况下,完成向第二用户界面的过渡而没有中断(例如,输入的后续部分表现出与过渡到第二用户界面的请求一致)。在此类情况下,通过在检测到输入的初始部分后立即开始向第二用户界面的用户界面过渡,实现了用户期望的结果而没有不必要的延迟。因此,改善的视觉反馈与用户的预期兼容,同时使得用户界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使用户能够更快高效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
在一些实施方案中,该设备包括一个或多个触觉输出发生器。在一些实施方案中,该设备包括一个或多个传感器以检测与设备的按钮(例如,物理或虚拟按钮,诸如物理home按钮或虚拟home按钮,诸如按钮204,图5B1)的接触强度。在一些实施方案中,所述home按钮在多种不同情景中在所述设备上可用(例如,在相应位置持续显示或位于该设备上与显示器分开的持续位置处),以响应于在home按钮上检测到第一类型的输入(例如,经由压下机械开关或通过对比home按钮上的接触强度与激活标准而检测到的具有按压事件或具有按压事件和和释放事件的单击输入,该激活标准基于参考方法700、1300、1500和1700更详细描述的一个或多个强度阈值)而消除当前显示的用户界面(例如,并且任选地,重新显示先前显示的用户界面,诸如应用的先前视图,或系统用户界面,诸如设备的home屏幕、多任务用户界面或虚拟助理用户界面)。参考方法1100和1900更详细描述了为home按钮激活配置触觉的其他方面。
在一些实施方案中,home按钮对多种输入做出响应,包括:第一类型的输入(例如,单击(例如,具有一次按压事件,或一次按压事件接着一次释放事件))、第二类型的输入(例如,双击(例如,具有第一按压事件,接着第一释放事件,接着第二按压事件,或具有第一按压事件,接着第一释放事件,接着第二按压事件,接着第二释放事件,其中第一按压事件和第二按压事件是在彼此的阈值量时间之内检测的))、第三类型的输入(例如,长按(例如,具有在已过去超过阈值量时间之前不被提起的第一按压事件)),以及第四类型的输入(例如,深按压(例如,具有包括接触强度在接触的初始向下触摸之后阈值量时间之内增大到深按压强度阈值以上的第一按压事件))。在一些实施方案中,每种输入都与消除当前显示的用户界面,以及执行对应操作,并任选地显示与该操作相关联的对应用户界面相关联。
参考图9A,该设备显示(920)第一用户界面(例如,第一应用的用户界面,诸如用户界面524,图5B5)。在显示第一用户界面的同时,该设备检测(904)第一输入,该第一输入与显示第二用户界面的请求以及显示第三用户界面的请求一致(例如,home按钮上的第一接触做出的第一按压输入,诸如接触532-a做出的第一按压输入,图5B6)。在一些实施方案中,按压输入被定义为接触的特征强度增大到轻按压强度阈值ITL以上(例如,如图5B6所示),接着是接触强度减小到预定义的松开点击强度阈值(例如,轻按压释放强度阈值ITLR,如图5B8所示)以下,或接着是与过渡到第二用户界面的请求(例如,过渡到home屏幕或过渡到home屏幕上叠加的扩展文件夹的单击输入,诸如用户界面522,图5B3)和过渡到第三用户界面的请求(例如,过渡到多任务用户界面,诸如用户界面528的双击输入,图5B14)一致的接触提起。
响应于检测到第一输入,该设备开始(906)显示从第一用户界面(例如,第一应用的用户界面,诸如用户界面524,图5B5)向第二用户界面(例如,叠加于home屏幕上的home屏幕或扩展文件夹,诸如用户界面522,图5B3)的第一动画过渡。在一些实施方案中,响应于检测到第一输入的松开点击部分(例如,接触强度从高于松开点击强度阈值的强度减小到低于松开点击强度阈值的强度,如图5B50-图5B54所示)而开始显示第一动画。在一些实施方案中,响应于检测到接触强度增大到提示强度阈值ITH以上而开始显示第一动画(例如,如图5A8-图5A11、图5B6、图5B17、图5B28和图5B40所示)。
在显示第一动画过渡的同时(例如,第一动画过渡已经开始但尚未完成,使得当前在显示器上显示第一动画过渡的开始和结束之间的中间状态,诸如用户界面525-5,图5B10),该设备检测到(908)第二输入(例如,接触532-e做出的第二按压输入,图5B10)(例如,由相同的连续接触或由检测到提起第一接触之后的第二接触做出的第二按压输入)。
响应于检测到第二输入,该设备确定第二输入是否与显示第三用户界面的请求一致,以及是否在第一时间接收到第二输入。根据确定第二输入与显示第三用户界面的请求一致且在第一时间接收到第二输入(例如,在过去用于检测双击输入的阈值量时间之前,在第一时间检测到第二点击输入),该设备在第一动画过渡中的第一点(例如,第一动画过渡中对应于第一时间的第一点)中断(910)从第一用户界面到第二用户界面的第一动画过渡,并显示从第一动画过渡中的第一点到第三用户界面的第二动画过渡(例如,通过在第一动画过渡中第一点处检测到双击输入的第二点击而中断第一动画过渡)。例如,如图5B10-图5B14所示,在双击时间阈值TDC之前,在第一时间检测到第二输入(例如,接触532-e做出的第二按压输入,图5B10),在第一动画过渡中的第一点(例如,在用户界面525-5处,图5B10)处中断从第一用户界面(例如,用户界面524,图5B5)向第二用户界面(例如,用户界面522,图5B3)的第一动画过渡,并显示从第一动画过渡中的第一点到第三用户界面(例如,用户界面528,图5B14)的第二动画过渡(例如,第二动画过渡包括用户界面526-1、526-2和526-3,图5B11-图5B13)。
根据确定第二输入与显示第三用户界面的请求一致且在第一时间之后的第二时间接收到第二输入(例如,在过去用于检测双击输入的阈值量时间之前,在第二时间检测到第二点击输入),该设备在第一动画过渡中的第一点(例如,第一动画过渡中对应于第一时间的第一点)之后的第一动画过渡中的第二点处中断从第一用户界面到第二用户界面的第一动画过渡,并显示从第一动画过渡中的第二点到第三用户界面的第三动画过渡,其中第三动画过渡与第二动画过渡不同(例如,通过在第一动画过渡中的第二点处检测到双击输入的第二点击而中断第一动画过渡,从而从那里开始向第三用户界面的过渡)。例如,如图5B21-图5B25所示,在双击时间阈值TDC之前但在第一时间之后(例如,图5B10中),在第二时间检测到第二输入(例如,接触534-e做出的第二按压输入,图5B21),在第一动画过渡中的第一点(例如,在用户界面525-5处,图5B10)之后的第一动画过渡中的第二点(例如,在用户界面525-6处,图5B21)处中断从第一用户界面(例如,用户界面524,图5B5)向第二用户界面(例如,用户界面522,图5B3)的第一动画过渡,并显示从第一动画过渡中的第二点到第三用户界面(例如,用户界面528,图5B25)的第三动画过渡(例如,第三动画过渡包括用户界面527-1、527-2和527-3,图5B22-图5B24)。
现在参考图9B,在一些实施方案中,响应于检测到第二输入:根据确定第二输入满足第一标准(例如,第一标准要求在检测到长按输入之后未检测到第二输入(例如,在登记第一点击事件之后且在登记第二点击事件之前超过阈值量时间内不保持接触))且在第二时间之后的第三时间接收到第二输入(例如,在过去用于检测双击输入的阈值量时间之后检测到的点击或在用于检测双击的阈值量时间之前但在用于中断第一动画过渡的阈值量时间TI之后检测到的点击),该设备继续显示(912)第一动画过渡(例如,在第一动画过渡结束时将显示home屏幕)。在图5B27-图5B38和图5B39-图5B48中,例如,显示第一动画过渡到完成,并在过渡结束时显示第二用户界面(例如,用户界面522)(例如,分别在图5B35和图5B47中)。例如,在输入表现出是进入第二用户界面的请求的单击的情况下(例如,在图5B39-图5B48中),比在开始从第一用户界面到第二用户界面的动画过渡之前设备一直等到过去双击时间阈值而未检测到第二点击更快地完成从第一用户界面到第二用户界面的动画过渡。结果,用户界面响应更快且更有效,并使得用户能够更快且更有效地使用该设备。
在一些实施方案中,第一时间和第二时间发生于用于检测包括第一输入的双击输入(例如,图5B5-图5B14,图5B16-图5B25和图5B27-图5B38中)的阈值时间之前(914)。在一些实施方案中,第三时间发生于用于检测包括第一输入的双击输入(例如,图5B39-图5B48中)的阈值时间之后(916)。
在一些实施方案中,第二输入是第一输入的重复(918)(例如,如图5B39-图5B48所示)。
在一些实施方案中,从第一用户界面到第二用户界面的第一动画过渡包括(920)第一用户界面沿第一方向(例如,向下或向上)的移动,第二动画过渡包括第一用户界面沿与第一方向不同的(例如,垂直于第一方向)第二方向(例如,向左或向右)的移动。例如,在一些实施方案中,在第一动画过渡期间,第一应用的用户界面向着显示器底部向下移动(或向着显示器顶部向上移动,如图5B6-图5B10所示),在检测到第二输入时,第一应用的用户界面向回(或向下)移动并向显示器侧面移动(例如,如图5B11-图5B14所示)。在一些实施方案中,用户界面对双击输入的每次点击做出响应,用户接收针对其输入的每次按压输入的视觉反馈。用户界面流畅且动态适应于用户的输入。这种改进的视觉反馈赋予用户更好的控制感而不需要对用户的部分做出任何改变以改变其与设备交互的方式。这增强了设备的可操作性并使得用户-设备界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使用户能够更快高效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
在一些实施方案中,响应于检测到第二输入:根据确定第二输入与显示与第一用户界面、第二用户界面和第三用户界面不同的第四用户界面(例如,数字助理用户界面)的请求一致,(例如,在检测到第一输入(例如,第一次点击)之后且检测到任何第二次点击之前,保持接触阈值量时间,从而登记长点击),该设备在与第一动画过渡中第一点和第二点不同的第一动画过渡中的第三点处(例如,第三点对应于检测到第一输入(例如,第一次点击)之后第一阈值量时间(例如,长按时间阈值)的第三时间)中断(922)从第一用户界面到第二用户界面的第一动画过渡,并显示从第一动画过渡中第三点到第四用户界面的第四动画过渡,该第四动画过渡与第一动画过渡、第二动画过渡和第三动画过渡不同。例如,在检测到第一次点击之后,开始向home屏幕的第一动画过渡,如果将接触保持阈值量时间而没有强度增大到登记第二次点击,则登记长按输入,中断第一动画过渡,并从那里开始向第四用户界面的第四动画过渡(例如,如图5A15-图5A18所示)。在一些实施方案中,在检测到按压输入的按下点击时开始用于检测长点击的计时器(例如,如图5A15所示)。在一些实施方案中,在检测到按压输入的松开点击时开始用于检测双击的计时器。
在一些实施方案中,在检测到按压输入的按下点击时开始向第二用户界面(例如,home屏幕或home屏幕上叠加的扩展文件夹,诸如用户界面522,图5B3)的动画过渡。在一些实施方案中,在检测到按压输入的松开点击时开始向第二用户界面(例如,home屏幕或home屏幕上叠加的扩展文件夹,诸如用户界面522,图5B3)的动画过渡(例如,如图5B50-5B59所示)。在实施方案中,其中在检测到按压输入的松开点击时开始向第二用户界面(例如,home屏幕或home屏幕上叠加的扩展文件夹,诸如用户界面522,图5B3)的动画过渡,并在检测到按下点击时开始用于检测长点击的计时器,减小用户对检测到长点击还是单次点击混淆的可能性。在此类实施方案中,一旦检测到松开点击并开始向第二用户界面的动画过渡,在此类实施方案中,向第二用户界面的动画过渡将不被向第四用户界面(例如,数字助理用户界面)的动画中断。
在一些实施方案中,从第一用户界面到第二用户界面的第一动画过渡包括(924)第一用户界面沿第一方向(例如,向下)的移动,第四动画过渡包括第一用户界面沿与第一方向相反的第二方向(例如,向上)的移动,且第三动画过渡在与第一方向和第二方向正交的第三方向上(例如,向左和向右)。
参考图9C,在一些实施方案中,响应于检测到第二输入:根据确定第二输入与过渡到第五用户界面的请求(例如,过渡到用户界面的深按压输入)(例如,第二输入包括在第一输入之后,接触的特征强度继续增大到比第一强度阈值更高的第二阈值以上而接触的特征强度并没有首先减小)一致,该设备在第一动画过渡中的第四点处(例如,第四点对应于特征强度增大到第二强度阈值以上的时间)中断(926)从第一用户界面到第二用户界面的第一动画过渡,并显示从第一动画过渡中的第四点到第五用户界面的第五动画过渡,其中第五动画过渡与第一动画过渡、第二动画过渡和第三(和第四)动画过渡不同。在一些实施方案中,在检测到输入的初始部分且输入的初始部分与多种输入类型一致从而对应于会导致多种不同最终用户界面(例如,第一最终用户界面、第二最终用户界面、第三最终用户界面、第四最终用户界面等)的多种不同操作时,该设备开始向第一最终用户界面的动画过渡;在向第一最终用户界面的动画过渡进行中时,如果输入的后续部分消除了该输入是进入第一最终用户界面的请求的可能性,该设备向第二最终用户界面重定向当前的动画过渡;在向第二最终用户界面的动画过渡在进行中时,如果输入的后续部分消除了该输入是进入第二最终用户界面的请求的可能性,该设备向第三最终用户界面重定向当前的动画过渡。在一些实施方案中,利用针对用于检测不同输入类型的定时和标准,针对输入类型和操作之间匹配,以及针对对应于最终用户界面的动画过渡的适当设计,可以使用户界面非常平滑和高效,实现设备的可操作性和效率改进。
在一些实施方案中,在显示第一用户界面的同时,在检测第一输入之前,该设备:检测(928)针对第一输入的前导输入(例如,检测接触的向下触摸以及接触的特征强度增大到提示强度阈值ITH以上),并响应于检测到前导输入,该设备显示提示动画,提示动画包括从第一用户界面到第二用户界面的第一动画过渡的开始(例如,如图5A5-图5A6所示并如上文相对于方法700更详细所述)。
在一些实施方案中,第一用户界面是第一应用(930)的用户界面(例如,用户界面524,图5B5),该设备根据第二用户界面上第一应用启动图标的位置(例如,根据用户界面522上页面图标的位置,图5B3)生成第一动画过渡(和/或第二动画过渡,和/或第三动画过渡)。在一些实施方案中,第二用户界面是包括多个应用启动图标的应用启动用户界面(例如,用户界面522,图5B3),多个应用启动图标包括对应于第一应用的第一应用启动图标(例如,对应于页面应用的页面图标)。例如,在一些实施方案中,第一动画过渡示出,第一应用的用户界面向home屏幕上(或home屏幕上叠加的扩展文件夹,诸如用户界面522,图5B3)的第一应用图标缩小,如图5B17-图5B21所示。
在一些实施方案中,检测第一输入包括(932)检测home按钮上第一接触所做的第一按压输入,第一按压输入包括第一接触的特征强度增大到第一强度阈值(例如,轻按压强度阈值ITL)以上(例如,如图5B17所示),接着第一接触的特征强度降低到第二强度阈值(例如,第二强度阈值是与按压强度阈值相同、比其更大或更小的释放强度阈值)以下(例如,如图5B19所示)。
在一些实施方案中,该设备响应于检测到第一接触的特征强度增大到第一强度阈值以上而生成(934)第一触觉输出(例如,响应于检测到第一接触的特征强度增大到轻按压强度阈值ITL以上而生成的按下点击触觉输出),如图5B17所示(例如,增益为1的MiniTap270Hz)。
在一些实施方案中,该设备响应于检测到第一接触的特征强度减小到第二强度阈值以下而生成(936)第二触觉输出(例如,响应于检测到第一接触的特征强度减小到轻按压释放强度阈值ITLR以下而生成的松开点击触觉输出),如图5B19所示(例如,增益为0.5的MiniTap 270Hz)。在一些实施方案中,第二触觉输出与第一触觉输出不同(例如,具有不同的振幅(例如,更低的振幅)、持续时间(例如,更短的持续时间)、频率(例如,更低的频率)和/或波形(例如,具有更少周期的波形))。在一些实施方案中,第二触觉输出是第一触觉输出的50%(例如,振幅的50%)。在一些实施方案中,第二触觉输出可与第一触觉输出相同。在一些实施方案中,针对按下点击和松开点击的触觉输出相同,但具有不同的对应触觉音频输出(例如,具有不同的振幅和/或频率的音频输出)。
现在参考图9D,在一些实施方案中,响应于检测到第二输入:根据确定第二输入与显示第三用户界面的请求一致且在第二时间之后的第四时间接收到第二输入(例如,在过去用于检测双击输入的阈值量时间之前,在第四时间检测到第二点击输入),该设备继续(938)显示从第一用户界面到第二用户界面的第一动画过渡,且该设备显示从第一动画过渡结束到第三用户界面的第五动画过渡(例如,如图5B27-图5B38所示)。在一些实施方案中,第五动画过渡与第二动画过渡和第三动画过渡不同。
例如,第一动画过渡不被在第一动画过渡中的第二点处检测到双击输入的第二次点击中断,因此,向第三用户界面的过渡从第一动画过渡的结束开始(例如,如图5B35-图5B38所示)。在一些实施方案中,在从第一用户界面到第二用户界面的过渡的大部分已经在检测到双击输入的第二次点击时间之前已经完成时,更自然的做法是完成向第二用户界面的过渡并开始从第二用户界面向第三用户界面的过渡。此类设计的一个优点是第三动画过渡的起始点是稳定用户界面,不需要针对检测到双击的第二次点击时的每个不同时刻定制。此类允许早期但不在特定点之后发生中断的设计的另一个优点是,动画可以更早开始而无需等待看是否要检测双击的第二次点击,由此改善了用户界面的响应性并减小了用户的困惑和用户困惑导致的意外输入。在一些实施方案中,使用从第二用户界面到第三用户界面的预录动画简化了软件的设计并改善了设备的电池寿命。
在一些实施方案中,响应于检测到第二输入:根据确定第二输入不与显示第三用户界面的请求一致(例如,因为第二输入在第三时间之后的第四时间接收且不满足多次点击时间阈值),该设备放弃过渡(940)到第三用户界面(例如,如果在过去多次点击时间阈值之后检测到第二点击输入,将点击作为独立点击处理,且不显示与满足多次点击时间阈值的多次相继点击相关联的多任务用户界面)。例如,第一输入表现为单击,即进入第二用户界面的请求(例如,次要home屏幕或home屏幕上叠加的扩展文件夹,诸如用户界面522,图5B3),第二输入表现为另一单击,即从第二用户界面(例如,次要home屏幕或home屏幕上叠加的扩展文件夹,诸如用户界面522,图5B3)到与第一用户界面(例如,应用UI)、第二用户界面(例如,次要home屏幕或home屏幕上叠加的扩展文件夹,诸如用户界面522,图5B3)、第三用户界面(例如,多任务用户界面)和第四用户界面(例如,数字助理用户界面)不同的第五用户界面(例如,主要home屏幕或具有文件夹的次要home屏幕,诸如用户界面520,图5B1)的请求,则完成从第一用户界面到第二用户界面的动画过渡,然后显示从第二用户界面到第五用户界面的动画过渡。最后,显示第五用户界面。图5B39-图5B48中例示了这一实施方案的实施例。
应当理解,对图9A-图9D中的操作进行描述的特定顺序仅仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法700、1100、1300、1500、1700和1900)描述的其他过程的细节同样以类似的方式适用于上文相对于图9A-图9D描述的方法900。例如,上文参考方法900所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文中参考本文描述的其他方法(例如,方法700、1100、1300、1500、1700和1900)所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的一个或多个特征。为了简明起见,这些细节在这里不再重复。
根据一些实施方案,图10示出了根据各种所述实施方案的原理进行配置的电子设备1000的功能框图。该设备的功能块任选地由执行各种所描述的实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图10中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图10所示,电子设备1000包括被配置为显示信息的显示单元1001(例如,触敏显示器系统112(也称为触摸屏和触摸屏显示器),图1A)、被配置为在触摸屏显示器上接收接触、手势和其他用户输入的触敏表面单元1004(例如,显示器控制器156和触敏显示器系统112,图1A)、任选的被配置为检测与触敏表面单元和/或设备的相应按钮(例如,home按钮)的接触强度的一个或多个传感器单元1006、任选的用于生成触觉输出的一个或多个触觉输出生成单元1007,以及与显示单元1002、触敏表面单元1004、任选的一个或多个传感器单元1006和任选的一个或多个触觉输出生成单元1007耦接的处理单元1008。为了便于例示,图10将显示单元1002和触敏表面单元1004示为与电子设备1000集成,然而,在一些实施方案中,这些单元中之一或两者与电子设备通信,尽管单元保持与电子设备物理分离(例如,如图3所示且如参考图3所述)。在一些实施方案中,该处理单元包括显示单元(例如,显示单元1010)、输入检测单元(例如,输入检测单元1012)、确定单元(例如,确定单元1014)、触觉输出提供单元(例如,触觉输出提供单元1016以及特征强度检测单元1018)。
在一些实施方案中,处理单元(或其一个或多个部件,诸如单元1010-1018)被配置为:(例如,利用显示单元1010)显示第一用户界面;在显示第一用户界面的同时,(例如,利用输入检测单元1012)检测第一输入,该第一输入与显示第二用户界面的请求和显示第三用户界面的请求一致;响应于检测到第一输入,(例如,利用显示单元1010)开始显示从第一用户界面到第二用户界面的第一动画过渡;在显示第一动画过渡的同时,(例如,利用输入检测单元1012)检测第二输入;响应于检测到第二输入:根据确定第二输入与显示第三用户界面的请求一致且在第一时间接收到第二输入:(例如,利用显示单元1010)在第一动画过渡中的第一点处中断从第一用户界面到第二用户界面的第一动画过渡,并(例如,利用显示单元1010)显示从第一动画过渡中的第一点到第三用户界面的第二动画过渡;根据确定第二输入与显示第三用户界面的请求一致且在第一时间之后的第二时间接收到第二输入:(例如,利用显示单元1010)在第一动画过渡中第一点之后的第一动画过渡中的第二点处中断从第一用户界面到第二用户界面的第一动画过渡,并(例如,利用显示单元1010)显示从第一动画过渡中的第二点到第三用户界面的第三动画过渡,其中第三动画过渡与第二动画过渡不同。
在一些实施方案中,该处理单元被配置为:响应于检测到第二输入:根据确定第二输入满足第一标准且在第二时间之后的第三时间接收到第二输入,(例如,利用显示单元1010)继续显示第一动画过渡。
在一些实施方案中,第一时间和第二时间发生于用于检测包括第一输入的双击输入的阈值时间之前。
在一些实施方案中,第三时间发生于用于检测包括第一输入的双击输入的阈值时间之后。
在一些实施方案中,第二输入是第一输入的重复。
在一些实施方案中,从第一用户界面到第二用户界面的第一动画过渡包括第一用户界面沿第一方向的移动,第二动画过渡包括第一用户界面沿与第一方向不同的第二方向的移动。
在一些实施方案中,处理单元被配置为:响应于检测到第二输入:根据确定第二输入与显示不同于第一用户界面、第二用户界面和第三用户界面的第四用户界面的请求一致:(例如,利用显示单元1010)在不同于第一动画过渡中第一点和第二点的第一动画过渡中的第三点处中断从第一用户界面到第二用户界面的第一动画过渡,并(例如,利用显示单元1010)显示从第一动画过渡中的第三点到第四用户界面的第四动画过渡,其中第四动画过渡与第一动画过渡、第二动画过渡和第三动画过渡不同。
在一些实施方案中,从第一用户界面到第二用户界面的第一动画过渡包括第一用户界面沿第一方向的移动,第四动画过渡包括第一用户界面沿与第一方向相反的第二方向的移动,且第三动画过渡在与第一方向和第二方向正交的第三方向上。
在一些实施方案中,处理单元被配置为:响应于检测到第二输入:根据确定第二输入与过渡到第五用户界面的请求一致:(例如,利用显示单元1010)在第一动画过渡中的第四点处中断从第一用户界面到第二用户界面的第一动画过渡,并(例如,利用显示单元1010)显示从第一动画过渡中的第四点到第五用户界面的第五动画过渡,第五动画过渡与第一动画过渡、第二动画过渡和第三动画过渡不同。
在一些实施方案中,处理单元被配置为:在显示第一用户界面的同时,在检测到第一输入之前:(例如,利用输入检测单元1012)检测针对第一输入的前导输入;响应于检测到前导输入,(例如,利用显示单元1010)显示提示动画,其中该提示动画包括从第一用户界面到第二用户界面的第一动画过渡的开始。
在一些实施方案中,第一用户界面是第一应用的用户界面,该处理单元被配置为根据第一应用启动图标在第二用户界面上的位置生成第一动画过渡。
在一些实施方案中,检测第一输入包括检测home按钮上的第一接触做出的第一按压输入,其中第一按压输入包括第一接触的特征强度增大到第一强度阈值以上,接着第一接触的特征强度减小到第二强度阈值以下。
在一些实施方案中,该处理单元被配置为:响应于检测到第一接触的特征强度增大到第一强度阈值以上(例如,利用触觉输出生成单元1016)生成第一触觉输出。
在一些实施方案中,该处理单元被配置为:响应于检测到第一接触的特征强度减小到第二强度阈值以下(例如,利用触觉输出生成单元1016)生成第二触觉输出。
在一些实施方案中,处理单元被配置为:响应于检测到第二输入:根据确定第二输入与显示第三用户界面的请求一致且在第二时间之后的第四时间接收到第二输入:(例如,利用显示单元1010)继续显示从第一用户界面到第二用户界面的第一动画过渡,并(例如,利用显示单元1010)显示从第一动画过渡的结束到第三用户界面的第五动画过渡,其中第五动画过渡与第二动画过渡和第三动画过渡不同。
在一些实施方案中,该处理单元被配置为,响应于检测到第二输入:根据确定第二输入不与显示第三用户界面的请求一致,放弃过渡到第三用户界面。
上述信息处理方法中的操作任选地通过运行信息处理设备中的一个或多个功能模块来实现,该信息处理设备诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图9A-图9D所述的操作任选地由图1A-图1B或图10中所描绘的部件来实现。例如,显示操作902、检测操作904、响应操作906、检测操作908和响应操作910任选地由事件分类器170、事件识别器180和事件处理程序190来实现。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用136-1。应用136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用内部状态192。在一些实施方案中,事件处理程序190访问相应GUI更新器178来更新应用所显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A-图1B中所示的部件可如何实现其他过程。
图11A-图11E是示出了根据一些实施方案的home按钮配置的方法1100的流程图。方法1100在具有显示器、触敏表面,以及一个或多个用以检测与触敏表面和/或设备的相应按钮(例如,虚拟或物理home按钮)的接触强度的传感器的电子设备(例如,图3的设备300,或者图1A中的便携式多功能设备100)处被执行。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。在一些实施方案中,该设备包括一个或多个传感器以检测与设备的home按钮(例如,物理home按钮或虚拟home按钮)的接触强度。在一些实施方案中,方法1100受到计算机可读存储介质(例如,非暂态计算机可读存储介质)中存储并由电子设备的一个或多个处理器,诸如设备100(图1A)的一个或多个处理器122执行的指令管控。为了便于解释,下文描述由设备100执行的方法1100。方法1100中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
方法1100涉及home按钮配置过程,在此期间,在为设备上的home按钮选择触觉输出设置之前,用户为home按钮选择并尝试多个触觉输出设置。在home按钮配置过程期间,暂停home按钮的正常功能,同时响应于在home按钮上检测到按压输入,为home按钮生成对应于当前选择的触觉输出设置的触觉输出。允许用户在进行最喜爱的设置之前针对home按钮配置用户界面中的按钮按压尝试不同的触觉输出设置使得home按钮更好地适应用户在按钮按压应当感觉如何的特定偏好和预期。home按钮配置用户界面使得用户-设备界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使用户能够更快高效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
在一些实施方案中,该设备包括一个或多个传感器以检测与设备的home按钮(例如,物理home按钮或虚拟home按钮)的接触强度。在一些实施方案中,该设备包括一个或多个传感器以检测与触敏表面的接触强度。在一些实施方案中,该显示器是触敏显示器。
参考图11A,该设备在显示器上显示(1102)home按钮配置用户界面(例如,用户界面564,图5C8),该用户界面包括显示针对home按钮的多种不同触觉输出设置(例如,第一触觉输出模式,诸如MiniTap 230Hz,第二触觉输出模式,诸如MiniTap 270Hz,以及第三触觉输出模式,诸如MiniTap 300Hz),所述home按钮在多种不同情景中在所述设备上可用(例如,在相应位置持续显示或位于该设备上与显示器分开的持续位置处),以响应于在home按钮上检测到第一类型的输入(例如,经由压下机械开关或通过对比home按钮上的接触强度与激活标准而检测到的按压输入或按压和释放输入,该激活标准基于参考方法700、900、1300、1500和1700更详细描述的一个或多个强度阈值)而消除当前显示的用户界面(例如,并且任选地,重新显示先前显示的用户界面,诸如应用的先前视图,或系统用户界面,诸如设备的home屏幕、多任务用户界面或虚拟助理用户界面)。参考方法1900更详细描述了为home按钮激活配置触觉的其他方面。
在显示home按钮配置用户界面的同时,该设备检测(1104)多种不同触觉输出设置(例如,如图5C13所示)的相应触觉输出设置的选择。在选择针对home按钮的相应触觉输出设置的同时,该设备检测(1105)home按钮上第一类型的第一输入(例如,如图5C15中所示)。
响应于检测到home按钮上第一类型的第一输入,该设备确定相应的触觉输出设置是针对home按钮的第一还是第二触觉输出设置。根据确定相应触觉输出设置是针对home按钮的第一触觉输出设置,该设备经由一个或多个触觉输出发生器提供(1106)第一触觉输出,该第一触觉输出对应于针对home按钮的第一触觉输出设置(例如,第一触觉输出模式,诸如图4L中所示的MiniTap 230Hz),而不取消home按钮配置用户界面(例如,放弃显示home屏幕),如图5C15所示。根据确定相应触觉输出设置是针对home按钮的与第一触觉输出设置不同的第二触觉输出设置,该设备经由一个或多个触觉输出发生器提供(1106)第二触觉输出(与第一触觉输出不同(例如,第二触觉输出模式,诸如MiniTap 270Hz,如图4N所示)),该第二触觉输出对应于针对home按钮的第二触觉输出设置,而不取消home按钮配置用户界面(例如,放弃显示home屏幕),如图5C9所示。在一些实施方案中,在显示home按钮配置用户界面时,该设备抑制在(例如,通过触摸输入)激活home按钮时正常发生的操作,诸如利用home屏幕的显示替代当前显示的屏幕的显示。
在一些实施方案中,响应于检测到home按钮上第一类型的第一输入,该设备还确定相应的触觉输出设置是否是第三触觉输出设置(与第一触觉输出设置和第二触觉输出设置不同)。根据确定相应触觉输出设置是针对home按钮的与第一触觉输出设置和第二触觉输出设置不同的第三触觉输出设置,该设备经由一个或多个触觉输出发生器提供(1108)第三触觉输出(与第一触觉输出和第二触觉输出不同(例如,第三触觉输出模式,诸如MiniTap300Hz,如图4P所示)),该第三触觉输出对应于针对home按钮的第三触觉输出设置,而不取消home按钮配置用户界面(例如,放弃显示home按钮),如图5C12所示。在一些实施方案中,在显示home按钮配置用户界面时,该设备抑制在(例如,通过触摸输入)激活home按钮时正常发生的操作,诸如利用home屏幕的显示替代当前显示的屏幕的显示。
现在参考图11B,在一些实施方案中,响应于检测到选择home按钮的相应触觉输出设置,该设备呈现(1110)提示,请求用户在home按钮上提供第一类型的输入(例如,利用显示的文本,诸如“试试”,显示提示以按压home按钮)。例如,在图5C14中,用户界面568包括提示:“按压home按钮来试试。”
在一些实施方案中,第一触觉输出和第二触觉输出具有不同的频率和相同的波形(1112)(例如,第一触觉输出和第二触觉输出都是MiniTap,但具有不同的频率(例如,分别为230Hz和270Hz,分别如图4L和图4N所示))。
在一些实施方案中,响应于在home按钮上检测到第一类型的第一输入:根据确定相应的触觉输出设置是针对home按钮的第一触觉输出设置,该设备提供(1114)与第一触觉输出同时的第一音频输出(例如,如图5C15和图4L所示);根据确定相应触觉输出设置是针对home按钮的第二触觉输出,该设备提供(1114)与第二触觉输出同时的第二音频输出(例如,如图5C9和图4N所示)。在一些实施方案中,第二音频输出与第一音频输出不同,第二触觉输出与第一触觉输出不同(例如,如图4N和图4L所示)。在一些实施方案中,将特定触觉输出与对应的音频输出配对,从而在不同情景中生成触觉输出时,与触觉输出一起生成相同的对应音频输出(例如,如图4K所示)。
在一些实施方案中,提供对应于针对home按钮的第一触觉输出设置的第一触觉输出包括(1118)响应于检测到第一类型的第一输入(例如,对应于接触的特征强度增大到按下点击强度阈值(例如,ITL)的按下点击,如图5C18和图4L的上部所示)的第一部分提供第一触觉输出(例如,具有第一触觉输出模式的触觉输出,诸如增益为1的MiniTap 230Hz);响应于检测到home按钮上第一类型的第一输入,该设备根据确定相应触觉输出设置是针对home按钮的第一触觉输出设置,响应于检测到第一类型的第一输入的第二部分(例如,对应于接触的特征强度减小到松开点击强度阈值(例如,ITL或在低于ITL的强度的另一阈值强度值(例如,ITLR))以下的松开点击),经由一个或多个触觉输出发生器提供第一附加触觉输出(例如,具有触觉输出模式的附加触觉输出,诸如增益为0.5的MiniTap230Hz,如图4L的底部所示)。在一些实施方案中,第一触觉输出和第一附加触觉输出具有不同的振幅和相同的波形(例如,针对按下点击的触觉比针对松开点击的触觉更强,但两者都是MiniTap)。在一些实施方案中,第一附加触觉输出(例如,针对松开点击的触觉,如图4L的底部所示)是触觉增益的50%和第一触觉输出(例如,针对按下点击的触觉,如图4L的上部所示)的音频增益的50%。
在一些实施方案中,响应于检测到第一类型的第一输入的第一部分,该设备与第一触觉输出同时提供(1118)第一音频输出;响应于检测到第一类型的第一输入的第二部分,该设备与第一附加触觉输出同时提供(1118)第一附加音频输出。在一些实施方案中,第一音频输出和第一附加音频输出具有不同的振幅和相同的波形。在一些实施方案中,第一音频输出和第一附加音频输出的振幅相差第一量,第一触觉输出和第一附加触觉输出的振幅相差与第一量不同的第二量(1120)。例如,在一些实施方案中,如果针对点击输入的松开点击的附加触觉输出的振幅是针对点击输入的按下点击的触觉输出的振幅的90%,那么针对点击输入的松开点击的附加音频输出的振幅是针对点击输入的按下点击的音频输出的振幅的80%。
现在参考图11C,在一些实施方案中,提供对应于针对home按钮的第二触觉输出设置的第二触觉输出包括响应于检测到第一类型的第一输入的第一部分(例如,对应于接触的特征强度增大到按下点击强度阈值(例如,ITL)以上的按下点击,如图5C9和图4N上部所示)而提供第二触觉输出(例如,具有第二触觉输出模式的触觉输出,诸如增益为1的MiniTap270Hz)。在一些实施方案中,该设备响应于检测到home按钮上第一类型的第一输入,根据确定相应触觉输出设置是针对home按钮的第二触觉输出设置,响应于检测到第一类型的第一输入的第二部分(例如,对应于接触的特征强度减小到松开点击强度阈值(例如,ITL或处在低于ITL的强度的另一阈值强度值(例如,ITLR))以下的松开点击),经由一个或多个触觉输出发生器提供(1122)第二附加触觉输出(例如,具有触觉输出模式的触觉输出,诸如增益为0.5的MiniTap 270Hz,如图4N底部所示)。在一些实施方案中,第二触觉输出和第二附加触觉输出具有不同的振幅和相同的波形(例如,针对按下点击的触觉输出比针对松开点击的触觉输出更强,但两者都是MiniTap)。在一些实施方案中,第二附加触觉输出(例如,针对松开点击的触觉,如图4N的底部所示)是触觉增益的50%和第二触觉输出(例如,针对按下点击的触觉,如图4N的上部所示)的音频增益的50%。
在一些实施方案中,响应于检测到选择home按钮的相应触觉输出设置:根据确定相应的触觉输出设置是针对home按钮的第一触觉输出设置,该设备显示(1124)包括对第一触觉输出设置的表示向home按钮移动的第一动画指示,根据确定相应触觉输出设置是针对home按钮的第二触觉输出,该设备显示(1124)包括对第二触觉输出设置的表示向home按钮移动的第二动画指示。
在一些实施方案中,对第一触觉输出设置的表示和对第二触觉输出设置的表示具有与home按钮相同的形状(1126)(例如,对触觉输出设置的表示和home按钮都是圆形的)。在一些实施方案中,对触觉输出设置的表示包括指向home按钮的提示(例如,如图5C8所示)。
在一些实施方案中,第一动画指示包括(1128)对与第一触觉输出设置相关联的第一触觉输出特征的动画表示(例如,第一振幅、频率、波形、周期数和/或以上两者或更多的组合),第二动画指示包括对与第二触觉输出设置相关联的第二触觉输出特征的动画表示(例如,第二振幅、频率、波形、周期数和/或以上两者或更多的组合)。
现在参考图11D,响应于检测到home按钮上第一类型的第一输入:根据确定相应触觉输出设置是针对home按钮的第一触觉输出设置,该设备改变(1130)对home按钮配置用户界面中第一触觉输出设置的表示的外观(例如,示出对第一触觉输出设置的表示(例如,表示第一触觉输出设置的按钮形状的图标)的闪烁或颜色改变),根据确定相应触觉输出设置是针对home按钮的第二触觉输出设置,该设备改变(1130)对home按钮配置用户界面中第二触觉输出设置的表示的外观(例如,示出对第二触觉输出设置的表示(例如,表示第二触觉输出设置的按钮形状的图标)的闪烁或颜色改变)。
在一些实施方案中,在显示home按钮配置用户界面的同时,该设备显示(1132)第一示能表示(例如,“完成”图标,图5C16),在被激活时,该示能表示导致消除home按钮配置用户界面(例如,用户界面568,图5C16),并导致显示另一用户界面(例如,显示home按钮配置用户界面之前显示的用户界面)替代home按钮配置用户界面(例如,用户界面562,图5C17)。
在一些实施方案中,在显示home按钮配置用户界面和第一示能表示的同时,该设备检测(1134)第一示能表示的激活(例如,如图5C16所示)。响应于检测到第一示能表示的激活,该设备(1134):停止显示home按钮配置用户界面;并显示(1134)与home按钮配置用户界面(例如,如图5C17所示)不同的相应用户界面(例如,重新显示恰在显示home按钮配置用户界面之前显示的第一用户界面,诸如设备设置用户界面,或显示设备设置用户界面序列中的下一用户界面)。在显示相应用户界面的同时,该设备检测(1134)home按钮上第一类型的第二输入(例如,如图5C18所示);响应于检测到home按钮上第一类型的第二输入,该设备(1134):停止显示相应用户界面(例如,设备设置用户界面或设备设置用户界面序列中下一个用户界面);显示(1134)与相应用户界面不同的第三用户界面(例如,home屏幕,诸如用户界面510,图5C19);并经由一个或多个触觉输出发生器提供(1134)相应触觉输出,该触觉输出对应于针对激活示能表示时选择的home按钮的相应触觉输出设置(例如,如果选择了第一触觉输出设置(例如,如图5C18所示),提供第一触觉输出(以及,任选地,第一附加触觉输出),如果选择了第二触觉输出设置,提供第二触觉输出(以及任选地,第二附加触觉输出),并且如果选择了第三触觉输出设置,则提供第三触觉输出(以及任选地,第三附加触觉输出))。
在一些实施方案中,在选择针对home按钮的相应触觉输出设置时,该设备检测(1136)home按钮上第二类型的第一输入(例如,第一类型为单击输入,第二类型为双击输入、用力点击输入或长点击输入),第二类型与第一类型不同。响应于检测到home按钮上第二类型的第一输入:根据确定相应触觉输出设置是针对home按钮的第一触觉输出设置,该设备经由一个或多个触觉输出发生器提供(1136)对应于针对home按钮的第一触觉输出设置的第一触觉输出,而不消除home按钮配置用户界面(例如,放弃显示home屏幕);根据确定相应触觉输出设置是针对home按钮的第二触觉输出设置,该设备经由一个或多个触觉输出发生器提供(1136)对应于针对home按钮的第二触觉输出设置的第二触觉输出,而不消除home按钮配置用户界面。
应当理解,对图11A-图11E中的操作进行描述的特定顺序仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法700、900、1300、1500、1700和1900)描述的其他过程的细节同样以类似的方式适用于上文相对于图11A-图11E描述的方法1100。例如,上文参考方法1100所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文中参考本文描述的其他方法(例如,方法700、900、1300、1500、1700和1900)所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的一个或多个特征。为了简明起见,这些细节在这里不再重复。
根据一些实施方案,图12示出了根据各种所述实施方案的原理进行配置的电子设备1200的功能框图。该设备的功能块任选地由执行各种所描述的实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图12中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图12所示,该电子设备1200包括被配置为显示信息的显示单元1201(例如,触敏显示器系统112(也称为触摸屏和触摸屏显示器),图1A)、被配置为在触摸屏显示器上接收接触、手势和其他用户输入的触敏表面单元1204(例如,显示器控制器156和触敏显示器系统112,图1A)、任选的被配置为检测与触敏表面单元和/或设备的相应按钮(例如,home按钮)的接触强度的一个或多个传感器单元1206、用于生成触觉输出的一个或多个触觉输出生成单元1207,以及与显示单元1202、触敏表面单元1204、任选的一个或多个传感器单元和一个或多个触觉输出生成单元耦接的处理单元1208。为了便于例示,图12将显示单元1202和触敏表面单元1204示为与电子设备1200集成,然而,在一些实施方案中,这些单元中之一或两者与电子设备通信,尽管单元保持与电子设备物理分离(例如,如图3所示且如参考图3所述)。在一些实施方案中,处理单元包括显示单元(例如,显示单元1210)、输入检测单元(例如,输入检测单元1212)、触觉输出提供单元(例如,触觉输出提供单元1214)和音频输出提供单元(例如,音频输出提供单元1216)。
在一些实施方案中,该处理单元(或其一个或多个部件,诸如单元1210-1216)被配置为:在显示器上显示home按钮配置用户界面,其包括响应于检测到home按钮上第一类型的输入,(例如,利用显示单元1210)显示针对home按钮的多种不同触觉输出设置,该home按钮在多种不同情景中在该设备上可用,以消除当前显示的用户界面;在显示home按钮配置用户界面的同时,(例如,利用输入检测单元1212)检测多种不同触觉输出设置的home按钮的相应触觉输出设置的选择;在选择针对home按钮的相应触觉输出设置时,(例如,利用输入检测单元1212)检测home按钮上第一类型的第一输入;响应于检测到home按钮上第一类型的第一输入:根据确定相应触觉输出设置是针对home按钮的第一触觉输出设置,(例如,利用触觉输出提供单元1214)经由一个或多个触觉输出发生器提供对应于针对home按钮的第一触觉输出设置的第一触觉输出,而不消除home按钮配置用户界面;根据确定相应触觉输出设置是针对home按钮的与第一触觉输出设置不同的第二触觉输出,(例如,利用触觉输出提供单元1214)经由一个或多个触觉输出发生器,提供对应于针对home按钮的第二触觉输出设置的第二触觉输出,而不消除home按钮配置用户界面。
在一些实施方案中,该处理单元被配置为:响应于检测到home按钮上第一类型的第一输入:根据确定相应触觉输出设置是针对home按钮与第一触觉输出设置和第二触觉输出设置不同的第三触觉输出设置,(例如,利用触觉输出提供单元1214)经由一个或多个触觉输出发生器提供对应于针对home按钮的第三触觉输出设置的第三触觉输出,而不消除home按钮配置用户界面。
在一些实施方案中,该处理单元被配置为:响应于检测到选择home按钮的相应触觉输出设置,(例如,利用显示单元1210)呈现提示,所述提示请求用户在home按钮上提供第一类型的输入。
在一些实施方案中,第一触觉输出和第二触觉输出具有不同频率和相同的波形。
在一些实施方案中,该处理单元被配置为:响应于在home按钮上检测到第一类型的第一输入:根据确定相应的触觉输出设置是针对home按钮的第一触觉输出设置,(例如,利用音频输出提供单元1216)提供与第一触觉输出同时的第一音频输出;根据确定相应触觉输出设置是针对home按钮的第二触觉输出,(例如,利用音频输出提供单元1216)提供与第二触觉输出同时的第二音频输出。
在一些实施方案中,提供对应于针对home按钮的第一触觉输出的第一触觉输出包括响应于检测到第一类型的第一输入的第一部分提供第一触觉输出;该处理单元被配置为,响应于检测到home按钮上第一类型的第一输入,根据确定相应触觉输出设置是针对home按钮的第一触觉输出设置,(例如,利用触觉输出提供单元1214)经由一个或多个触觉输出发生器,响应于检测到第一类型的第一输入的第二部分,提供第一附加触觉输出。
在一些实施方案中,该处理单元被配置为:响应于检测到第一类型的第一输入的第一部分,(例如,利用音频输出提供单元1216)与第一触觉输出同时提供第一音频输出;响应于检测到第一类型的第一输入的第二部分,(例如,利用音频输出提供单元1216)与第一附加触觉输出同时提供第一附加音频输出。
在一些实施方案中,第一音频输出和第一附加音频输出的振幅相差第一量,第一触觉输出和第一附加触觉输出的振幅相差与第一量不同的第二量。
在一些实施方案中,提供对应于针对home按钮的第二触觉输出设置的第二触觉输出包括响应于检测到第一类型的第一输入的第一部分提供第二触觉输出;该处理单元被配置为,响应于检测到home按钮上第一类型的第一输入,根据确定相应触觉输出设置是针对home按钮的第二触觉输出设置,(例如,利用触觉输出提供单元1214)经由一个或多个触觉输出发生器,响应于检测到第一类型的第一输入的第二部分,提供第二附加触觉输出。
在一些实施方案中,该处理单元被配置为:响应于检测到选择home按钮的相应触觉输出设置:根据确定相应的触觉输出设置是针对home按钮的第一触觉输出设置,(例如,利用显示单元1210)显示包括对第一触觉输出设置的表示向home按钮移动的第一动画指示,根据确定相应触觉输出设置是针对home按钮的第二触觉输出设置,(例如,利用显示单元1210)显示包括对第二触觉输出设置的表示向home按钮移动的第二动画指示。
在一些实施方案中,对第一触觉输出设置的表示和对第二触觉输出设置的表示具有与home按钮相同的形状。
在一些实施方案中,第一动画指示包括对与第一触觉输出设置相关联的第一触觉输出特征的动画表示,第二动画指示包括对与第二触觉输出设置相关联的第二触觉输出特征的动画表示。
在一些实施方案中,该处理单元被配置为:响应于检测到home按钮上第一类型的第一输入:根据确定相应的触觉输出设置是针对home按钮的第一触觉输出设置,(例如,利用显示单元1210)改变对home按钮配置用户界面中第一触觉输出设置的表示的外观,根据确定相应触觉输出设置是针对home按钮的第二触觉输出设置,(例如,利用显示单元1210)改变对home按钮配置用户界面中第二触觉输出设置的表示的外观。
在一些实施方案中,该处理单元被配置为:在显示home按钮配置用户界面的同时,显示第一示能表示,该第一示能表示在被激活时,(例如,利用显示单元1210)导致消除home按钮配置用户界面,并导致显示另一用户界面替代home按钮配置用户界面。
在一些实施方案中,该处理单元被配置为:在显示home按钮配置用户界面和第一示能表示的同时,检测第一示能表示的激活;响应于检测到第一示能表示的激活:(例如,利用显示单元1210)停止显示home按钮配置用户界面;(例如,利用显示单元1210)显示与home按钮配置用户界面不同的相应用户界面;在显示相应用户界面的同时,(例如,利用输入检测单元1212)检测home按钮上第一类型的第二输入;响应于检测到home按钮上第一类型的第二输入:(例如,利用显示单元1210)停止显示相应用户界面;(例如,利用显示单元1210)显示与相应用户界面不同的第三用户界面;并(例如,利用触觉输出提供单元1214)经由一个或多个触觉输出发生器提供对应于在激活示能表示时选择的针对home按钮的相应触觉输出设置的相应触觉输出。
在一些实施方案中,该处理单元被配置为:在选择针对home按钮的相应触觉输出设置的同时,检测home按钮上第二类型的第一输入,该第二类型与第一类型不同;响应于检测到home按钮上第二类型的第一输入:根据确定相应触觉输出设置是针对home按钮的第一触觉输出设置,(例如,利用触觉输出提供单元1214)经由一个或多个触觉输出发生器提供对应于针对home按钮的第一触觉输出设置的第一触觉输出,而不消除home按钮配置用户界面;根据确定相应触觉输出设置是针对home按钮的第二触觉输出设置,(例如,利用触觉输出提供单元1214)经由一个或多个触觉输出发生器提供对应于针对home按钮的第二触觉输出设置的第二触觉输出,而不消除home按钮配置用户界面。
上述信息处理方法中的操作任选地通过运行信息处理设备中的一个或多个功能模块来实现,该信息处理设备诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图11A-图11E所述的操作任选地由图1A-图1B或图12中所描绘的部件来实现。例如,显示操作1102、检测操作1104、检测操作1105和响应操作1106任选地由事件分类器170、事件识别器180和事件处理程序190来实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用136-1。应用136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用内部状态192。在一些实施方案中,事件处理程序190访问相应GUI更新器178来更新应用所显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A-图1B中所示的部件可如何实现其他过程。
图13A-图13D是示出了根据一些实施方案控制用户界面触觉和home屏幕触觉的方法1300的流程图。方法1300在具有显示器、触敏表面和用于检测与触敏表面的接触强度的一个或多个传感器的电子设备(例如,设备300,图3;或便携式多功能设备100,图1A)处执行的。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。在一些实施方案中,该设备包括一个或多个传感器以检测与设备的home按钮(例如,物理home按钮或虚拟home按钮)的接触强度。在一些实施方案中,方法1300受到计算机可读存储介质(例如,非暂态计算机可读存储介质)中存储并由电子设备的一个或多个处理器,诸如设备100(图1A)的一个或多个处理器122执行的指令管控。为了便于解释,下文描述由设备100执行的方法1300。方法1300中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
如下所述,方法1300涉及在设备上独立控制用于用户界面事件的触觉反馈生成和用于激活持续按钮(例如,虚拟home按钮或非机械home屏幕或返回按钮)的触觉反馈生成,使得在经由触觉输出设置(例如,针对触觉输出生成的开/关切换)针对设备上的用户界面事件禁用触觉反馈生成时,用于激活持续按钮的触觉反馈生成仍然保持启用。通过允许此类独立控制,在用户仅仅希望关闭用户界面触觉反馈时,用户不会无意中禁用用于激活持续按钮的触觉反馈,从而避免用户困扰,并避免由于用户困扰而降低设备的人机界面的可操作性和效率。此外,这种独立控制还允许用户自由禁用一般用户界面触觉反馈,以利于节省电池电量并减少由于特定情景中不必要的触觉反馈造成注意力分散,而不用害怕影响与激活持续按钮相关联的有用触觉反馈(这可能会伴随或不伴随用户界面的视觉改变)。
在一些实施方案中,该设备提供触觉输出控制设置(例如,声音和触觉设置),其允许用户在设备处打开和关闭用户界面触觉输出的生成。
通常,该设备响应于与用户界面元素的直接交互,例如,通过检测用户输入时放在用户界面元素附近的焦点选择器(例如,鼠标指针或接触)选择、操纵、拖/放,和/或激活用户界面元素而生成各种类型的用户界面触觉输出。用户界面触觉输出通常伴随有用户界面的视觉改变。例如,在一些实施方案中,该设备响应于在用户界面中拾取项目的输入(例如,在对应于该项目的位置处维持的接触做出的长按输入)而提供触觉输出(例如,MicroTap(150Hz)),该用户界面示出,该对象正向着显示器的表面跳起,并定时触觉输出与对象的移动结束一致。除了用户界面触觉输出之外,该设备还响应于激活设备上的持久按钮(例如,虚拟home按钮或非机械home屏幕或返回按钮)而生成输出。按钮的激活可以伴随或不伴随用户界面的对应视觉改变。例如,响应于home按钮上的按压输入,该设备生成触觉输出并消除当前显示的用户界面,且显示home屏幕。响应于home按钮上的另一按压输入,该设备生成针对按钮按压的触觉输出并继续显示home屏幕。因此,在一些情景中,该设备允许用户关闭用户界面触觉输出,例如,以节省电力或减少注意力分散。然而,该设备还在用户仅仅希望关闭用户界面触觉输出时,防止用户无意中关闭持续按钮的触觉输出生成。
在一些实施方案中,该设备提供非视觉反馈,其既包括音频输出分量,又包括触觉输出分量。特定类型的音频输出与用户界面中的视觉改变配对,或者独立于用户界面中的任何视觉改变而存在。例如,可以独立于触觉输出而播放音频提示、铃声、音乐剪辑,并用以提示用户用户界面或设备状态的一些改变。在一些实施方案中,该设备生成专门关联到并增强或补充触觉输出的特定音频输出。这些类型的音频输出在本文中被称为“触觉音频输出”。在一些实施方案中,非视觉反馈配置文件包括针对触觉输出的触觉输出模式和针对伴随触觉输出的触觉音频输出的音频输出模式,以在用户体内引起特定的触觉感觉。触觉音频输出和对应的触觉输出的频率、振幅、波形和/或定时之间的相互作用在用户体内形成更丰富且更细致入微的触觉感觉,并使得非视觉反馈对用户而言更突出。在一些情景中,该设备允许用户使用一般的音量控制和/或静音控制来控制触觉音频输出的生成(例如,对应于用户界面触觉输出的触觉音频输出和/或对应于按钮触觉输出的触觉音频输出),例如,以节省电力或减少注意力分散。然而,该设备还防止用户无意中关闭针对设备触觉输出的触觉音频(例如,伴随用于激活持续按钮的触觉输出的音频)。
参考图13A,该设备在显示器上显示(1302)第一用户界面。在一些实施方案中,在维持显示第一用户界面的同时,为第一用户界面和设备的home按钮保持启用输入的检测。在一些实施方案中,所述home按钮在多种不同情景中在所述设备上可用(例如,在相应位置持续显示或位于该设备上与显示器分开的持续位置处),以响应于在home按钮上检测到第一类型的输入(例如,经由压下机械开关或通过对比home按钮上的接触强度与激活标准而检测到的按压输入或按压和释放输入,该激活标准基于上文参考方法700、900、1500和1700更详细描述的一个或多个强度阈值)而消除当前显示的用户界面(例如,并且任选地,重新显示先前显示的用户界面,诸如应用的先前视图,或系统用户界面,诸如设备的home屏幕、多任务用户界面或虚拟助理用户界面)。参考方法1100和1900更详细描述了为home按钮激活配置触觉的其他方面。
在显示第一用户界面的同时,该设备检测(1304)指向第一用户界面的第一类型的第一输入(例如,触敏显示器上对应于第一用户界面中可激活对象或可激活部分的位置处的接触所做的按压输入)。
响应于检测到指向第一用户界面的第一类型的第一输入(例如,包括下压输入的按压输入,接着是释放输入),该设备(例如,基于图6A1和图6B1中的触觉输出切换控制设置675)确定是否在电子设备处启用了用户界面触觉输出。根据确定在电子设备处启用了用户界面触觉输出(例如,用于电子设备的触觉切换设置或触觉输出切换设置打开,如图6A1所示),该设备执行(1306)第一操作,并经由一个或多个触觉输出发生器提供对应于第一操作的第一触觉输出。例如,如图6A4-图6A8所示,响应于接触604的输入,结合显示快速动作菜单608和在快速动作菜单中移动通过每个菜单选项,生成触觉输出。在另一个实施例中,在图6A11-图6A18中,响应于接触624的输入,结合显示预览628和移动通过用于对电子邮件消息归档的隐藏阈值而生成触觉输出。在另一个实施例中,在图6A18-图6A22中,响应于接触636的输入,结合显示预览640和显示内容显示用户界面644而生成触觉输出。
根据确定禁用用户界面触觉输出(例如,针对电子设备的触觉切换设置或触觉输出切换设置关闭),该设备执行(1306)第一操作,并放弃提供第一触觉输出对应于第一操作的至少一部分(例如,第一触觉输出任选包括一个或多个分立的触觉输出,它们是结合对应于输入的不同部分的用户界面改变而生成的)。例如,如图6B4-图6B8所示,响应于接触605的输入,结合移动通过快速动作菜单608中的每个菜单选项,设备放弃生成触觉输出。在另一个实施例中,在图6B11-图6B18中,响应于接触625的输入,结合移动通过用于对电子邮件消息归档的隐藏阈值而放弃生成触觉输出。
在执行第一操作(且未改变设备上用户界面触觉输出的启用/禁用状态)之后,该设备检测(1308)home按钮(例如,图6A25和图6B25中的home按钮650)上第一类型的第二输入(例如,包括下压输入接着释放输入的单击)。响应于检测到home按钮上第一类型的第二输入,该设备执行(1310)与home按钮相关联的第二操作(例如,消除第一应用并显示home屏幕、多任务用户界面或虚拟助理用户界面),并经由一个或多个触觉输出发生器提供与激活home按钮相关联的触觉输出(例如,按下点击触觉输出和/或松开点击触觉输出),而不论在设备处是否启用了用户界面触觉输出(例如,与按压home按钮相关联的触觉输出的生成与触觉切换设置或触觉输出切换设置无关)。例如,该设备结合图6A25-图6A26和图6B25-图6B26中激活home按钮650而生成触觉输出,不论图6A1和图6B1中用户界面触觉输出设置674的开/关状态如何。
现在参考图13B,在一些实施方案中,第一用户界面是第一应用的用户界面,第一操作是(1312)第一应用的操作,第二操作包括消除第一应用(例如,暂停或退出第一应用,并显示home屏幕替代第一应用的用户界面或显示先前显示的用户界面替代第一应用)。例如,第一操作用于呈现邮件应用中的预览640,和/或呈现邮件应用中的内容显示用户界面644,第二操作是消除邮件应用的用户界面,并显示home屏幕替代邮件应用的用户界面,如图6A19-图6A26和图6B19-图6B26中所示。
在一些实施方案中,在执行第一操作(不改变设备上用户界面触觉输出的启用/禁用状态)之后,该设备检测(1314)home按钮上与第一类型不同的第二类型的第一输入(例如,具有至少两次由一次松开点击分开的按下点击)。响应于检测到home按钮上第二类型的第一输入,该设备执行与home按钮相关联的第三操作(与第二操作不同)(例如,消除当前显示的用户界面,并显示多任务用户界面)。响应于检测到home按钮上第二类型的第一输入,该设备还经由一个或多个触觉输出发生器提供与激活home按钮相关联的触觉输出(例如,第一按下点击触觉输出和/或第一松开点击触觉输出,接着是第二按下点击触觉输出和/或第二松开点击触觉输出),而不论在电子设备处是否启用了用户界面触觉输出(例如,与按压home按钮相关联的触觉输出的生成与触觉切换设置无关)。在一些实施方案中,针对第一类型的输入的触觉输出和针对第二类型的输入的触觉输出是不同的,例如,具有不同的触觉输出模式,或不同数量的分立触觉输出等。
在一些实施方案中,在执行第一操作(不改变设备上用户界面触觉输出的启用/禁用状态)之后,该设备检测(1316)home按钮上与第一类型(和第二类型)不同的第三类型的第一输入(例如,长点击(例如,具有保持至少阈值量时间的一次按下点击))。响应于检测到home按钮上第三类型的第一输入,该设备执行与home按钮相关联的与第二操作(和第三操作)不同的第四操作(例如,消除当前显示的用户界面,并显示虚拟助理用户界面)。响应于检测到home按钮上第三类型的第一输入,该设备还经由一个或多个触觉输出发生器提供与激活home按钮相关联的触觉输出(例如,第一按下点击触觉输出),而不论在电子设备处是否启用了用户界面触觉输出(例如,与按压home按钮相关联的触觉输出的生成和触觉切换设置或触觉输出切换设置无关)。
在一些实施方案中,第一触觉输出(和针对用户界面交互的其他触觉输出)和与激活home按钮相关联的触觉输出(以及针对home按钮交互的其他触觉输出)是由一个或多个触觉输出发生器的相同一个或多个致动器提供(1318)的。
在一些实施方案中,响应于home按钮上第一类型的相应输入而提供的对应触觉输出的触觉输出模式是(例如,由根据home按钮配置用户界面中选择的home按钮触觉输出设置的软件指令)用户可调节的(1320)(例如,通过根据home按钮配置用户界面中选择的home按钮触觉输出设置的软件指令)。
现在参考图13C,在一些实施方案中,响应于检测到home按钮上第一类型的第二输入,该设备提供(1322)音频输出连同与激活home按钮相关联的触觉输出,而不论是否启用了用户界面触觉输出,不论是否在设备处使音频输出静音。例如,在一些实施方案中,在图6A25和图6A26中所示的情形中,该设备生成触觉音频输出以伴随触觉输出,以指示激活home按钮,而不论设备的音频输出静音/非静音设置如何。在一些实施方案中,触觉输出伴随着对应的音频输出,以在针对不同类型的输入的反馈和用户界面响应之间提供更丰富的质地和区分。对应于home按钮触觉输出的音频输出任选地不受设备上音频控制设置(例如,静音/非静音控制和/或音量控制)的控制,使得用户不会无意中改变针对home按钮的触觉输出和对应音频输出之间精心设计的配对。通过即使在已经禁用一般设备音频输出时也提供触觉反馈音频(例如,模拟用户预计的来自激活硬件按钮的音频反馈),例如,通过减少操作设备/与设备交互时的非期望结果和用户错误,改善了设备的可操作性和效率,这另外减少了电力使用并改善了设备的电池寿命。例如,参考图4H和图4Q更详细描述了home按钮触觉音频输出模式和对应的触觉输出模式。
在一些实施方案中,响应于检测到home按钮上第一类型的第二输入,该设备提供(1324)音频输出连同与激活home按钮相关联的触觉输出,而不论是否启用了用户界面触觉输出,并且音频输出的音量与设备处当前音量设置无关。例如,在一些实施方案中,在图6A25和图6A26中所示的情形中,该设备生成触觉音频输出以伴随触觉输出,以指示激活home按钮,而不论设备的音频输出音量设置如何。在一些实施方案中,触觉输出伴随着对应的音频输出,以在针对不同类型的输入的反馈和用户界面响应之间提供更丰富的质地和区分。对应于触觉输出的音频输出的音量不受设备上音量控件的控制,使得用户不会无意中改变触觉输出和具有适当振幅的对应音频输出之间精心设计的配对。通过将触觉反馈音频音量的控制从一般设备音频的音量控制解耦(例如,模拟用户预计的来自激活硬件按钮的音频反馈),例如,通过减少操作设备/与设备交互时的非期望结果和用户错误,改善了设备的可操作性和效率,这另外减少了电力使用并改善了设备的电池寿命。例如,参考图4H和图4Q更详细描述了home按钮触觉音频输出模式和对应的触觉输出模式。
在一些实施方案中,响应于检测到指向第一用户界面的第一类型的第一输入并根据确定启用了用户界面触觉输出(例如,针对电子设备的触觉切换设置或触觉输出切换设置打开),该设备确定在设备处是否使音频输出静音。根据确定在设备处未使音频输出静音,该设备提供(1326)音频输出连同第一触觉输出。根据确定在设备处未使音频输出静音,该设备放弃提供音频输出连同第一触觉输出。例如,在一些实施方案中,在图6A1-图6A8和图6A9-图6A17中所示的情形中,仅在设备处未使音频输出静音的时候,该设备生成触觉音频输出以伴随触觉输出,以指示激活home按钮。在一些实施方案中,触觉输出伴随着对应的音频输出,以在针对不同类型的输入的反馈和用户界面响应之间提供更丰富的质地和区分。在启用所述用户界面触觉输出时,因为音频输出不是用于提供针对与用户界面的交互的反馈的唯一手段,允许用户经由一般的音频静音切换设置关闭触觉音频节省了电池电力,而不会严重影响设备的性能和可操作性。
在一些实施方案中,响应于检测到指向第一用户界面的第一类型的第一输入并根据确定启用了用户界面触觉输出(例如,针对电子设备的触觉切换设置或触觉输出切换设置打开),该设备确定音频输出当前设置的水平。根据确定音频输出在设备处被设置到第一水平,该设备以第一音量提供(1328)音频输出连同第一触觉输出,并基于设备处音频输出的第一水平确定。根据确定音频输出在设备处被设置到第二水平,以与第一音量不同的第二音量提供音频输出连同第一触觉输出,并且第二音量是基于设备处音频输出的第二水平确定的。例如,在一些实施方案中,在图6A1-图6A8和图6A9-图6A17中所示的情形中,该设备生成触觉音频输出以伴随触觉输出,以指示激活home按钮,并根据设备处的当前音量设置调节触觉音频输出的振幅。在一些实施方案中,触觉输出伴随着对应的音频输出,以在针对不同类型的输入的反馈和用户界面响应之间提供更丰富的质地和区分。在启用所述用户界面触觉输出时,允许用户对如何响亮或微弱地播放触觉音频输出进行某种控制允许用户针对其特定偏好调节反馈,从而改善设备的性能和可操作性。
现在参考图13D,在一些实施方案中,响应于检测到指向第一用户界面的第一类型的第一输入并根据确定禁用了用户界面触觉输出(例如,针对电子设备的触觉切换设置关闭),不论在设备处是否使音频输出静音,该设备都放弃提供(1330)音频输出连同第一触觉输出。例如,在一些实施方案中,在图6B1-图6B8、图6B9-图6B17和图6B20-图6B23中所示的情形中,该设备不生成触觉音频输出以伴随结合显示快速动作菜单608(图6B4)、预览628(图6B13)、预览640(图6B22)和用户界面644(图6B23)而生成的触觉输出,无论在设备处是否使音频输出静音。
在一些实施方案中,响应于检测到指向第一用户界面的第一类型的第一输入并根据确定禁用了用户界面触觉输出(例如,针对电子设备的触觉切换设置关闭),不论在设备处是否使音频输出静音,该设备都提供(1330)音频输出连同第一触觉输出。例如,在一些实施方案中,在图6B1-图6B8、图6B9-图6B17和图6B20-图6B23中所示的情形中,该设备生成触觉音频输出以伴随结合显示快速动作菜单608(图6B4)、预览628(图6B13)、预览640(图6B22)和用户界面644(图6B23)而生成的触觉输出,无论在设备处是否使音频输出静音。
在一些实施方案中,响应于检测到指向第一用户界面的第一类型的第一输入:根据确定禁用用户界面触觉输出并根据确定第一操作是预定义免除操作(例如,home屏幕上的基于取决于强度的输入标准而触发的瞥视和弹出操作、或快速动作菜单表示),该设备利用一个或多个触觉输出发生器提供(1332)对应于第一操作的第一触觉输出。例如,在一些实施方案中,在图6B1-图6B8、图6B9-图6B17和图6B20-图6B23所示的情形中,即使在设备处禁用用户界面触觉输出时,该设备也结合显示快速动作菜单608(图6B4)、预览628(图6B13)、预览640(图6B22)和用户界面644(图6B23)生成触觉输出,因为响应于用力按压(例如,接触强度高于轻按压强度阈值ITL的按压输入或从用户界面触觉输出设置的控制免除了深按压强度阈值ITD)显示了快速动作菜单和预览以及内容用户界面。
在一些实施方案中,响应于检测到指向第一用户界面的第一类型的第一输入,并根据确定禁用用户界面触觉输出,该设备确定第一操作是否是第一类型的预定义操作和/或第二类型的预定义操作。根据确定第一操作是第一类型的预定义操作(例如,基于取决于强度的输入标准触发的home屏幕上的瞥视和弹出操作,或快速动作菜单表示),该设备利用一个或多个触觉输出发生器提供(1334)对应于第一操作的第一触觉输出。根据确定第一操作是第二类型的预定义操作(例如,在响应于触敏表面上接触强度增大到相应强度阈值以上而显示的快速动作菜单中不同选项之间移动焦点,或指示满足用于触发与响应于检测到触敏表面上接触强度增大到相应强度阈值以上而显示的内容预览相关联的操作的触发标准),该设备执行第一操作而不利用一个或多个触觉输出发生器提供对应于第一操作的触觉输出。例如,在图6B2-图6B8中,响应于接触605的按压输入,结合显示快速动作菜单608而提供触觉输出,并响应于接触605的刷动输入,结合通过快速动作菜单中每个菜单项移动而跳过触觉输出。根据确定启用所述用户界面触觉输出(例如,针对电子设备的触觉切换设置打开),该设备执行第一操作并利用一个或多个触觉输出发生器提供对应于第一操作的第一触觉输出,不论第一操作是否是第一类型的预定义操作还是第二类型的预定义操作。例如,在图6A2-图6A8中,响应于接触605的按压输入,结合显示快速动作菜单608而提供触觉输出,并响应于接触605的刷动输入,也结合通过快速动作菜单中每个菜单选项移动生成触觉输出。
应当理解,对图13A-图13D中的操作进行描述的特定顺序仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法700、900、1100、1500、1700和1900)描述的其他过程的细节同样以类似的方式适用于上文相对于图13A-图13D描述的方法1300。例如,上文参考方法700、900、1100、1500、1700和1900描述的接触、手势、用户界面对象、触觉输出、触觉音频输出、强度阈值、定时标准、焦点选择器、动画和配置任选地具有本文参考本文所述其他方法(例如,方法1300)所述的接触、手势、用户界面对象、触觉输出、触觉音频输出、强度阈值、定时标准、焦点选择器、动画和配置的特征的一个或多个。为了简明起见,这些细节在这里不再重复。
根据一些实施方案,图14示出了根据各种所述实施方案的原理进行配置的电子设备1400的功能框图。该设备的功能块任选地由执行各种所描述的实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图14中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图14所示,该电子设备1400包括被配置为显示信息的显示单元1401(例如,触敏显示器系统112(也称为触摸屏和触摸屏显示器),图1A)、被配置为在触摸屏显示器上接收接触、手势和其他用户输入的触敏表面单元1404(例如,显示器控制器156和触敏显示器系统112,图1A)、任选的被配置为检测与触敏表面单元和/或设备的相应按钮(例如,home按钮)的接触强度的一个或多个传感器单元1406、用于生成触觉输出的一个或多个触觉输出生成单元1407,以及与显示单元1402、触敏表面单元1404、任选的一个或多个传感器单元1406和一个或多个触觉输出生成单元1407耦接的处理单元1408。为了便于例示,图14将显示单元1402和触敏表面单元1404示为与电子设备1400集成,然而,在一些实施方案中,这些单元中之一或两者与电子设备通信,尽管单元保持与电子设备物理分离(例如,如图3所示且如参考图3所述)。在一些实施方案中,处理单元包括显示单元(例如,显示单元1410)、输入检测单元(例如,输入检测单元1412)、操作执行单元(例如,操作执行单元1414)、触觉输出提供单元(例如,触觉输出提供单元1416)和音频输出提供单元(例如,音频输出提供单元1418)。
在一些实施方案中,该处理单元(或其一个或多个部件,例如单元1410-1418)被配置为:(例如,利用显示单元1410)在显示器上显示第一用户界面,所述home按钮在多种不同情景中在所述设备上可用以响应于检测到home按钮上第一类型的输入而消除当前显示的用户界面;在显示第一用户界面的同时,(例如,利用输入检测单元1412)检测指向第一用户界面的第一类型的第一输入;响应于检测到指向第一用户界面的第一类型的第一输入:根据确定在电子设备处启用所述用户界面触觉输出,(例如,利用操作执行单元1414)执行第一操作,并(例如,利用触觉输出提供单元1416)经由一个或多个触觉输出发生器提供对应于第一操作的第一触觉输出;根据确定禁用用户界面触觉输出,(例如,利用操作执行单元1414)执行第一操作,并放弃提供第一触觉输出对应于第一操作的至少一部分;在执行第一操作之后,检测home按钮上第一类型的第二输入;响应于检测到home按钮上第一类型的第二输入:(例如,利用操作执行单元1414)执行与home按钮相关联的第二操作;并(例如,利用触觉输出提供单元1416)经由一个或多个触觉输出发生器提供与激活home按钮相关联的触觉输出,而不论在设备处是否启用了用户界面触觉输出。
在一些实施方案中,第一用户界面是第一应用的用户界面,第一操作是第一应用的操作,第二操作包括消除第一应用。
在一些实施方案中,该处理单元被配置为:在执行第一操作之后,(例如,利用输入检测单元1412)检测home按钮上与第一类型不同的第二类型的第一输入;响应于检测到home按钮上第二类型的第一输入:(例如,利用操作执行单元1414)执行与home按钮相关联的与第二操作不同的第三操作;以及(例如,利用触觉输出提供单元1416)经由一个或多个触觉输出发生器提供与激活home按钮相关联的触觉输出,而不论在电子设备处是否启用了用户界面触觉输出。
在一些实施方案中,该处理单元被配置为:在执行第一操作之后,(例如,利用输入检测单元1412)检测home按钮上与第一类型不同的第三类型的第一输入;响应于检测到home按钮上第三类型的第一输入:(例如,利用操作执行单元1414)执行与home按钮相关联的与第二操作不同的第四操作;并(例如,利用触觉输出提供单元1416)经由一个或多个触觉输出发生器提供与激活home按钮相关联的触觉输出,而不论在电子设备处是否启用了用户界面触觉输出。
在一些实施方案中,第一触觉输出和与激活home按钮相关联的触觉输出是由一个或多个触觉输出发生器的相同一个或多个致动器提供的。
在一些实施方案中,响应于home按钮上第一类型的相应输入提供的对应触觉输出的触觉输出模式是用户可调节的。
在一些实施方案中,该处理单元被配置为:响应于检测到home按钮上第一类型的第二输入,(例如,利用音频输出提供单元1418)提供音频输出连同与激活home按钮相关联的触觉输出,而不论是否启用了用户界面触觉输出,不论是否在设备处使音频输出静音。
在一些实施方案中,该处理单元被配置为:响应于检测到home按钮上第一类型的第二输入,(例如,利用音频输出提供单元1418)提供音频输出连同与激活home按钮相关联的触觉输出,而不论是否启用了用户界面触觉输出,其中音频输出的音量与设备处当前音量设置无关。
在一些实施方案中,该处理单元被配置为:响应于检测到指向第一用户界面的第一类型的第一输入:根据确定启用所述用户界面触觉输出:根据确定在设备处未对音频输出静音,(例如,利用音频输出提供单元1418)提供音频输出连同第一触觉输出;根据确定在设备处对音频输出静音,放弃提供音频输出连同第一触觉输出。
在一些实施方案中,该处理单元被配置为:响应于检测到指向第一用户界面的第一类型的第一输入:根据确定启用所述用户界面触觉输出:根据确定在设备处将音频输出设置到第一水平,(例如,利用音频输出提供单元1418)以第一音量提供音频输出连同第一触觉输出,该第一音量是基于设备处音频输出的第一水平确定的;根据确定在设备处将音频输出设置到第二水平,(例如,利用音频输出提供单元1418)在第二音量下提供音频输出连同第一触觉输出,该第二音量与第一音量不同且是基于设备处音频输出的第二水平确定的。
在一些实施方案中,该处理单元被配置为:响应于检测到指向第一用户界面的第一类型的第一输入:根据确定禁用了用户界面触觉输出,不论在设备处是否使音频输出静音,都放弃提供音频输出连同第一触觉输出。
在一些实施方案中,该处理单元被配置为:响应于检测到指向第一用户界面的第一类型的第一输入:根据确定禁用了用户界面触觉输出并根据确定第一操作是预定义免除操作,利用一个或多个触觉输出发生器提供对应于第一操作的第一触觉输出。
在一些实施方案中,该处理单元被配置为:响应于检测到指向第一用户界面的第一类型的第一输入:根据确定禁用用户界面触觉输出:根据确定第一操作是第一类型的预定义操作,(例如,利用触觉输出提供单元1416)利用一个或多个触觉输出发生器提供对应于第一操作的第一触觉输出;根据确定第一操作是第二类型的预定义操作,(例如,利用操作执行单元1414)执行第一操作而不利用一个或多个触觉输出发生器提供对应于第一操作的触觉输出;根据确定启用了用户界面触觉输出,(例如,利用操作执行单元1414)执行第一操作并(例如,利用触觉输出提供单元1416)利用一个或多个触觉输出发生器提供对应于第一操作的第一触觉输出,而不论第一操作是第一类型的预定义操作还是第二类型的预定义操作。
上述信息处理方法中的操作任选地通过运行信息处理设备中的一个或多个功能模块来实现,该信息处理设备诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图13A-图13D所述的操作任选地由图1A-图1B或图14中所描绘的部件来实施。例如,显示操作1302、检测操作1304、响应操作1306、检测操作1308和响应操作1310任选地由事件分类器170、事件识别器180和事件处理程序190来实现。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用136-1。应用136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用内部状态192。在一些实施方案中,事件处理程序190访问相应GUI更新器178来更新应用所显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A-图1B中所示的部件可如何实现其他过程。
图15A-15E是示出了根据一些实施方案,根据基于输入的度量或基于用户界面的度量,生成具有不同触觉输出模式的触觉输出的方法1500的流程图。方法1500在具有显示器、触敏表面,以及一个或多个用以检测与触敏表面和/或设备的相应按钮(例如,虚拟或物理home按钮)的接触强度的传感器的电子设备(例如,图3的设备300,或者图1A中的便携式多功能设备100)处被执行。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。在一些实施方案中,该设备包括用于生成触觉输出的一个或多个触觉输出发生器。在一些实施方案中,该设备包括一个或多个传感器以检测与设备的home按钮(例如,物理home按钮或虚拟home按钮)的接触强度。在一些实施方案中,方法1500受到计算机可读存储介质(例如,非暂态计算机可读存储介质)中存储并由电子设备的一个或多个处理器,诸如设备100(图1A)的一个或多个处理器122执行的指令管控。为了便于解释,下文描述由设备100执行的方法1500。方法1500中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
方法1500涉及根据基于输入的度量或基于用户界面的度量生成具有不同触觉输出模式的触觉输出。基于度量选择触觉输出的触觉输出模式(例如,振幅、波形和/或频率),度量例如是在跨越强度阈值时接触强度的改变速率、在焦点选择器或用户界面元素跨越用户界面中的阈值位置时焦点选择器或用户界面元素的移动速度等。通过将触觉输出的触觉输出模式更紧密联系到用户输入的特征和/或用户界面的视觉改变(如基于输入和/或基于用户界面的度量所测量的),设备提供的反馈变得更加直观并更好地符合用户的期望。向用户提供的改进反馈增强了设备的可操作性(例如,通过符合用户的期望并避免在用户与设备交互时困扰)并使得用户-设备界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使用户能够更快且更高效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
参考图15A,该设备在显示器上显示(1502)用户界面(例如用户界面524,图5B62)。在显示用户界面的同时,该设备检测(1504)home按钮上的输入序列(例如,按压输入或按压并保持输入,或按压输入继之以释放输入),其包括检测home按钮上的第一按压输入,检测第一按压输入包括检测home按钮上接触的特征强度增大(例如,如图5B62-5B63所示)。
响应于检测到home按钮上的第一按压输入(1506):根据确定第一按压输入包括接触的特征强度增大到第一强度阈值(例如,ITL,图5B63)以上,且在接近接触的特征强度增大到第一强度阈值以上时接触的特征强度改变(例如,在开始于,或结束于,或包括接触的特征强度增大到第一强度阈值以上时的时间的预先确定时间窗口期间发生的接触的特征强度的改变量)对于强度改变度量(例如,如图5B63所示)而言具有第一值,该设备:执行改变显示器上显示的用户界面的第一操作(例如,将图5B63中的用户界面524改变为图5B70中的用户界面522);并经由一个或多个触觉输出发生器生成对应于接触的特征强度增大到第一强度阈值以上的第一分立触觉输出(例如,触觉输出590(例如,增益为0.5的MiniTap270Hz),图5B63)。
响应于检测到home按钮上的第一按压输入(1506):根据确定第一按压输入包括接触的特征强度增大到第一强度阈值(例如,ITL,图5B67)以上,且在接近接触的特征强度增大到第一强度阈值以上时接触的特征强度改变对于强度改变度量(例如,如图5B67所示)而言具有与强度改变度量(例如,如图5B63所示)的第一值不同的第二值,该设备执行改变显示器上显示的用户界面的第一操作(例如,将图5B67中的用户界面524改变为图5B70中的用户界面522);并经由一个或多个触觉输出发生器生成对应于接触的特征强度增大到第一强度阈值以上且与第一分立触觉输出不同的第二分立触觉输出(例如,触觉输出592(例如,增益为1的MiniTap270Hz),图5B67)。
现在参考图15B,在一些实施方案中,第一分立触觉输出和第二分立触觉输出具有(1508)相同的波形(例如,MiniTap 230Hz、MiniTap 270Hz或MiniTap 300Hz)(例如,图5B63中的触觉输出590为MiniTap 270Hz,图5B67中的触觉输出592为MiniTap 270Hz),且第一分立触觉输出和第二分立触觉输出具有不同的振幅(例如,对于第一分立触觉输出而言,增益为0.5的MiniTap 270Hz,如图5B63中所示,对于第二分立触觉输出而言,增益为1的MiniTap270Hz,如图5B67中所示)。
在一些实施方案中,在接触的特征强度保持在第一强度阈值以上时(1510),第一分立触觉输出停止(例如,第一分立触觉输出为短的“轻击”,诸如FullTap、MiniTap或MicroTap,而不是持续的振动)(例如,如图5B63-图5B64所示)。
在一些实施方案中,在接触的特征强度保持在第一强度阈值以上时(1512),第二触觉输出停止(例如,第二分立触觉输出为短的“轻击”,例如FullTap、MiniTap或MicroTap,而不是持续的振动)(例如,如图5B67-图5B68所示)。
在一些实施方案中,针对强度改变度量的第一值范围生成(1514)第一触觉输出(例如,对于高达每秒预定义数量强度单位的强度改变度量值范围(例如,每秒1250克),有时称为“软”强度,生成具有第一触觉输出模式(例如,增益为0.5的MiniTap 270Hz,如图5B63所示)的触觉输出)。在一些实施方案中,针对强度改变度量的第二值范围生成(1516)第二触觉输出(例如,对于大于每秒预定义数量强度单位的强度改变度量值范围(例如,每秒1250克),有时称为“正常”强度,生成具有与第一触觉输出模式(例如,增益为0.5的MiniTap 270Hz,如图5B63所示)不同的第二触觉输出模式(例如,增益为1.0的MiniTap270Hz,如图5B67所示)的触觉输出)。
现在参考图15C,在一些实施方案中,检测home按钮上的输入序列还包括(1518)检测home按钮上第一按压输入之后的home按钮上的第一释放输入,且检测第一释放输入包括检测home按钮上接触的特征强度的减小(例如,如图5B65和图5B69所示)。在一些实施方案中,响应于检测到home按钮上的第一释放输入(1518):根据确定第一释放输入包括接触的特征强度减小到第二强度阈值(例如,与按压强度阈值相同或不同的释放强度阈值(例如,释放强度阈值ITLR低于按压强度阈值ITL))以下且接近接触的特征强度减小到第二强度阈值以下时的时间接触的特征强度阈值改变具有针对强度改变度量的第三值(例如,对于高达每秒预定义数量强度单位的强度改变度量值范围(例如,每秒1250克)),该设备经由一个或多个触觉输出发生器生成对应于接触的特征强度减小到第二强度阈值以下的第三分立触觉输出(例如,触觉输出591(例如,增益为0.25的MiniTap270Hz),图5B65)。
在一些实施方案中,响应于检测到home按钮上的第一释放输入(1518):根据确定第一释放输入包括接触的特征强度减小到第二强度阈值以下且在接近接触的特征强度减小到第二强度阈值以下时的时间接触特征强度的改变具有与强度改变度量第三值不同的针对强度改变度量的第四值(例如,对于大于每秒预定义数量强度单位的强度改变度量值范围(例如,每秒1250克)),该设备经由一个或多个触觉输出发生器生成对应于接触特征强度减小到第二强度阈值以下且与第三分立触觉输出(例如,触觉输出591(例如,增益为0.25的MiniTap 270Hz),图5B65)不同的第四分立触觉输出(例如,触觉输出593(例如,增益为0.5的MiniTap270Hz),图5B69)。
在一些实施方案中,生成第一触觉输出和第二触觉输出包括(1520)分别根据强度改变度量的第一值和第二值,向基础触觉输出模式施加第一修改(例如,将振幅改变第一乘数或增益值),且生成第三触觉输出和第四触觉输出包括分别根据强度改变度量的第三值和第四值,向基础触觉输出模式施加与第一修改不同的第二修改(例如,将振幅改变第二乘数或增益值)。
在一些实施方案中,第二强度阈值(1522)与第一强度阈值不同(例如,更低)(例如,按下点击强度阈值为350mg,松开点击强度阈值为250mg)。在一些实施方案中,按下点击和松开点击强度阈值是基于按压输入和/或释放输入的特征动态确定的。例如,在一些实施方案中,强度快速增大的按压输入(例如,快速用力按压)可能导致比强度缓慢增大的按压输入(例如,更慢更轻按压)更高的按下点击强度阈值。类似地,强度减小更慢的释放输入(例如,更慢更轻释放)可能导致比强度减小更快的释放输入(例如,快速释放)更低的松开点击强度阈值。
现在参考图15D,在一些实施方案中,第一分立触觉输出和第二分立触觉输出是由基础触觉输出模式(例如,根据强度改变度量的值向基础触觉输出模式(例如,振幅调制、频率调制、延迟等)施加不同量的修改)生成的(1524),该基础触觉输出模式与当前从针对home按钮的多种不同触觉输出设置(例如,MiniTap 230Hz、MiniTap 270Hz或MiniTap300Hz)选择的触觉输出设置相关联。上文参考方法1100并相对于图5C1-图5C19描述了改变针对home按钮的触觉输出设置的实施例。
在一些实施方案中,home按钮被持续显示在相应位置或位于设备上与显示器分开的持续位置处(1526)(例如,按钮204,图5B52)。在一些实施方案中,强度改变度量基于(1528)接触的特征强度随时间的改变速率(例如,随50ms的时间窗口的改变速率)。
在一些实施方案中,强度改变度量基于(1530)在接触的特征强度达到相关阈值强度(例如,第一强度阈值,第二强度阈值等)时(例如,在达到ITL时,如图5B63和图5B67所示,或在达到ITLR时,如图5B65和图5B69所示),测量的接触特征强度的改变速率。
在一些实施方案中,检测输入序列包括(1532)检测home按钮上的第二按压输入(例如,在初始按压输入和释放初始按压输入之后),检测第二按压输入包括检测home按钮上接触的特征强度的第二次增大。响应于检测到第二按压输入(1532):基于对应于第一按压输入的第一时间点(例如,接触强度第一次增大到第一强度阈值以上的时间或接触强度第一次减小到对应于第一强度阈值的释放强度阈值以下的时间)和对应于第二按压输入的第二时间点(接触强度第二次增大到第一强度阈值以上的时间或接触强度第二次减小到释放强度阈值以下的时间)之间的时间量,根据确定第一按压输入和第二按压输入是预定义输入模式部分(例如,因为第二时间点在第一时间点之后少于阈值量时间(例如第一按下点击和第二按下点击之间的持续时间少于用于检测双击输入的时间窗口或第一松开点击和第二松开点击之间的持续时间少于用于检测双击输入的时间窗口,或者第一松开点击到第二按下点击之间的持续时间少于用于检测双击输入的时间窗口)),该设备执行与预定义输入模式(例如,双击输入模式)相关联的第二操作(例如,显示多任务用户界面,如图5B5-图5B14所示),第二操作与第一操作不同:且该设备经由一个或多个触觉输出发生器提供与第一触觉输出和第二触觉输出不同的第五分立触觉输出(例如,触觉输出573(例如,增益为0.8的MiniTap 270Hz),图5B10)。
例如,在一些实施方案中,针对双击输入的第二次点击的触觉输出与针对单击输入的触觉输出或针对双击输入的第一次点击的触觉输出不同(例如,在图5B5-图5B10中,双击输入的第二次按压输入(例如,触觉输出573,图5B10)具有与双击输入的第一次按压输入不同的触觉输出(例如,触觉输出571,图5B6))。在一些实施方案中,针对双击输入的第二次点击的触觉输出(例如,触觉输出573(例如,增益为0.8的MiniTap 270Hz),图5B10)的振幅低于双击输入的第一次点击(例如,触觉输出571(例如,增益为1的MiniTap 270Hz),图5B6)。在一些实施方案中,针对双击输入第一次点击的按下点击的触觉输出比第一次点击的松开点击具有更高振幅,并比双击输入的第二次点击的按下点击具有更高振幅(例如,分别如图5B6、图5B8和图5B10所示)。在一些实施方案中,双击输入的第二次点击的松开点击与双击输入的第一次点击的松开点击相同(例如,松开点击不被修改)。在一些实施方案中,双击输入的第二次点击的松开点击与双击输入的第二次点击的按下点击以相同方式修改。
现在参考图15E,在一些实施方案中,检测输入序列包括(1534)检测home按钮上的第二按压输入(例如,在初始按压输入和释放初始按压输入之后),检测第二按压输入包括检测home按钮上接触的特征强度的第二次增大(例如,从低于第一强度阈值的强度到高于第一强度阈值的强度)。响应于检测到第一按压输入,该设备与响应于第一按压输入生成的第一触觉输出和第二触觉输出中的相应一者同时提供(1534)第一音频输出(例如,如图4O所示)。
响应于检测到第二按压输入:基于对应于第一按压输入的第一时间点(例如,接触强度第一次增大到第一强度阈值以上的时间或接触强度在增大到第一强度阈值以上之后第一次减小到第二强度阈值以下的时间)和对应于第二按压输入的第二时间点(接触强度第二次增大到第一强度阈值以上的时间或接触强度在增大到第一强度阈值以上之后第二次减小到第二强度阈值以下的时间)之间的时间量,根据确定第一按压输入和第二按压输入是预定义输入模式部分(例如,因为第二时间点在第一时间点之后少于阈值量时间(例如第一按下点击和第二按下点击之间的持续时间少于用于检测双击输入的时间窗口,或第一松开点击和第二松开点击之间的持续时间少于用于检测双击输入的时间窗口,或者第一松开点击到第二按下点击之间的持续时间少于用于检测双击输入的时间窗口)),该设备:(i)执行与输入模式相关联的第二操作,其中第二操作与第一操作不同;(ii)经由一个或多个触觉输出发生器提供第五分立触觉输出,该第五触觉输出与针对第一按压输入生成的第一按压输入和第二按压输入的相应一个相同;以及(iii)与第五分立音频输出同时提供第二音频输出,第二音频输出和第一音频输出具有不同的音频输出模式(例如,不同的振幅、频率和/或波形)(例如,如图5B5-图5B14和图4K的第三行所示)。
在一些实施方案中,响应于检测到home按钮上的第一按压输入(1536),该设备将用户界面从第一用户界面改变为第二用户界面,而不论强度改变度量对应于第一按压输入的值如何(例如,在图5B52-图5B65的序列之后,也在图5B66-图5B69的序列之后,显示用户界面522,图5B70)。在一些实施方案中,利用相同的动画显示从第一用户界面到第二用户界面的改变。在一些实施方案中,利用取决于强度改变度量值的不同动画显示从第一用户界面到第二用户界面的改变(例如,对于更快的按压输入是更快过渡,对于更慢的按压输入是更慢过渡)。
应当理解,对图15A-图15E中的操作进行描述的特定顺序仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法700、900、1100、1300、1700和1900)描述的其他过程的细节同样以类似的方式适用于上文相对于图15A-图15E描述的方法1500。例如,上文参考方法1500所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文中参考本文描述的其他方法(例如,方法700、900、1100、1300、1700和1900)所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的一个或多个特征。为了简明起见,这些细节在这里不再重复。
根据一些实施方案,图16示出了根据各种所述实施方案的原理进行配置的电子设备1600的功能框图。该设备的功能块任选地由执行各种所描述的实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图16中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图16所示,该电子设备1600包括被配置为显示信息的显示单元1601(例如,触敏显示器系统112(也称为触摸屏和触摸屏显示器),图1A)、被配置为在触摸屏显示器上接收接触、手势和其他用户输入的触敏表面单元1604(例如,显示器控制器156和触敏显示器系统112,图1A)、被配置为检测与触敏表面单元和/或设备的相应按钮(例如,home按钮)的接触强度的一个或多个传感器单元1606、用于生成触觉输出的一个或多个触觉输出生成单元1607,以及与显示单元1602、触敏表面单元1604、一个或多个传感器单元1606和一个或多个触觉输出生成单元1607耦接的处理单元1608。为了便于例示,图16将显示单元1602和触敏表面单元1604示为与电子设备1600集成,然而,在一些实施方案中,这些单元中之一或两者与电子设备通信,尽管单元保持与电子设备物理分离(例如,如图3所示且如参考图3所述)。在一些实施方案中,处理单元包括显示单元(例如,显示单元1610)、输入检测单元(例如,输入检测单元1612)、特征强度检测单元(例如,特征强度检测单元1614)、操作执行单元(例如,操作执行单元1616)、触觉输出生成单元(例如,触觉输出生成单元1618)、确定单元(例如,确定单元1620)和音频输出提供单元(例如,音频输出提供单元1622)。
在一些实施方案中,该处理单元(或其一个或多个部件,诸如单元1610-1622)被配置为:(例如,利用显示单元1610)在显示器上显示用户界面;在显示用户界面的同时,检测home按钮上的输入序列,其包括(例如,利用输入检测单元1612)检测home按钮上的第一按压输入,以及检测home按钮上的第一按压输入包括检测接触的特征强度增大;响应于检测到home按钮上的第一按压输入:(例如,利用确定单元1620)根据确定第一按压输入包括接触的特征强度增大到第一强度阈值以上且(例如,利用特征强度检测单元1614)接近接触特征强度增大到第一强度阈值以上时的时间接触特征强度的改变具有针对强度改变度量的第一值:(例如,利用操作执行单元1616)执行改变显示器上显示的用户界面的第一操作;并(例如,利用触觉输出生成单元1618)经由一个或多个触觉输出发生器生成对应于接触特征强度增大到第一强度阈值以上的第一分立触觉输出;(例如,利用确定单元1620)根据确定第一按压输入包括接触特征强度增大到第一强度阈值以上(例如,利用特征强度检测单元1614)且(例如,利用特征强度检测单元1614)接近接触特征强度增大到第一强度阈值以上时的时间接触特征强度的改变具有与强度改变度量的第一值不同的针对强度改变度量的第二值:(例如,利用操作执行单元1616)执行改变显示器上显示的用户界面的第一操作;以及(例如,利用触觉输出生成单元1618)经由一个或多个触觉输出发生器生成对应于接触特征强度增大到第一强度阈值以上且与第一分立触觉输出不同的第二分立触觉输出。
在一些实施方案中,第一分立触觉输出和第二分立触觉输出具有相同的波形;第一分立触觉输出和第二分立触觉输出具有不同的振幅。
在一些实施方案中,在接触的特征强度保持在第一强度阈值以上的同时,第一分立触觉输出停止。
在一些实施方案中,在接触的特征强度保持在第一强度阈值以上的同时,第二触觉输出停止。
在一些实施方案中,针对强度改变度量的第一值范围生成第一触觉输出。
在一些实施方案中,针对强度改变度量的第二值范围生成第二触觉输出。
在一些实施方案中,检测home按钮上的输入序列还包括检测home按钮上的第一按压输入之后的home按钮上的释放输入,检测第一释放输入包括检测home按钮上接触的特征强度的减少;处理单元被配置为:响应于检测到home按钮上的第一释放输入:根据确定第一释放输入包括接触的特征强度减小到第二强度阈值以下且接近接触的特征强度减小到第二强度阈值以下时的时间接触特征强度的改变具有针对强度改变度量的第三值:(例如,利用触觉输出生成单元1618)经由一个或多个触觉输出发生器生成对应于接触特征强度减小到第二强度阈值以下的第三分立触觉输出;根据确定第一释放输入包括接触的特征强度减小到第二强度阈值以下且接近接触特征强度减小到第二强度阈值以下时的时间接触特征强度的改变具有与强度改变度量的第三值不同的针对强度改变度量的第四值:(例如,利用触觉输出生成单元1618)经由一个或多个触觉输出发生器生成对应于接触的特征强度减小到第二强度阈值以下且与第三分立触觉输出不同的第四分立触觉输出。
在一些实施方案中,生成第一触觉输出和第二触觉输出包括分别根据强度改变度量的第一值和第二值,向基础触觉输出模式施加第一修改,且生成第三触觉输出和第四触觉输出包括分别根据强度改变度量的第三值和第四值,向基础触觉输出模式施加与第一修改不同的第二修改。
在一些实施方案中,第二强度阈值与第一强度阈值不同。
在一些实施方案中,第一分立触觉输出和第二分立触觉输出是由基础触觉输出模式生成的,该基础触觉输出模式与当前从针对home按钮的多种不同触觉输出设置选择的触觉输出设置相关联。
在一些实施方案中,home按钮被持续显示在相应位置或位于设备上与显示器分开的持续位置处。
在一些实施方案中,强度改变度量基于接触的特征强度随时间的改变速率。
在一些实施方案中,强度改变度量基于在接触的特征强度达到相关阈值强度时测量的接触特征强度的改变速率。
在一些实施方案中,检测输入序列包括检测home按钮上的第二按压输入,其中检测第二按压输入包括检测home按钮上接触特征强度的第二次增大;处理单元被配置为,响应于检测到第二按压输入:基于对应于第一按压输入的第一时间点和对应于第二按压输入的第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是预定义输入模式一部分:(例如,利用操作执行单元1616)执行与预定义输入模式相关联的第二操作,该第二操作与第一操作不同;以及(例如,利用触觉输出生成单元1618)经由一个或多个触觉输出发生器提供与第一触觉输出和第二触觉输出不同的第五分立触觉输出。
在一些实施方案中,检测输入序列包括检测home按钮上的第二按压输入,其中检测第二按压输入包括检测home按钮上接触特征强度的第二次增大;处理单元被配置为:响应于检测到第二按压输入,(例如,利用音频输出提供单元1622)提供与响应于第一按压输入生成的第一触觉输出和第二触觉输出中的相应一者同时的第一音频输出;响应于检测到第二按压输入:基于对应于第一按压输入的第一时间点和对应于第二按压输入的第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是预定义输入模式部分:(例如,利用操作执行单元1616)执行与输入模式相关联的第二操作,其中第二操作与第一操作不同;(例如,利用触觉输出生成单元1618)经由一个或多个触觉输出发生器提供第五分立触觉输出,其中第五触觉输出与针对第一按压输入生成的第一触觉输出和第二触觉输出中的相应一者相同;以及(利用音频输出提供单元1622)提供与第五分立触觉输出同时的第二音频输出,第二音频输出和第一音频输出具有不同的音频输出模式。
在一些实施方案中,该处理单元被配置为:响应于检测到home按钮上的第一按压输入:(例如,利用显示单元1610)将用户界面从第一用户界面改变为第二用户界面,而不论对应于第一按压输入的强度改变度量的值如何。
上述信息处理方法中的操作任选地通过运行信息处理设备中的一个或多个功能模块来实现,该信息处理设备诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图15A-图15E所述的操作任选地由图1A-图1B或图16中所描绘的部件来实现。例如,显示操作1502、检测操作1504和响应操作1506任选地由事件分类器170、事件识别器180和事件处理程序190来实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用136-1。应用136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用内部状态192。在一些实施方案中,事件处理程序190访问相应GUI更新器178来更新应用所显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A-图1B中所示的部件可如何实现其他过程。
图17A-图17D是示出了根据一些实施方案为双击输入的第二次点击提供与双击输入的第一次点击不同的触觉输出的方法1700的流程图。方法1700是在具有显示器、触敏表面和用于检测与触敏表面的接触强度的一个或多个传感器的电子设备(例如,设备300,图3;或便携式多功能设备100,图1A)处执行的。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。在一些实施方案中,该设备包括一个或多个传感器以检测与设备的home按钮(例如,物理home按钮或虚拟home按钮)的接触强度。在一些实施方案中,方法1700受到计算机可读存储介质(例如,非暂态计算机可读存储介质)中存储并由电子设备的一个或多个处理器,例如设备100(图1A)的一个或多个处理器122执行的指令管控。为了便于解释,下文描述由设备100执行的方法1700。方法1700中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
方法1700涉及为双击输入的第二次点击提供与双击输入的第一次点击不同的触觉输出。通过为双击输入的两次点击提供不同的触觉输出,该设备在检测到用户提供的两次相继按压输入之后,有效且简明地通知用户设备登记的是双击还是设备登记的是两次独立的单击。向用户提供的改进反馈增强了设备的可操作性(例如,通过向用户提供关于设备如何识别当前输入(例如,识别为两次单击或双击)的提示以避免查看设备对输入的响应时用户混淆)并使得用户-设备界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使用户能够更快高效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
参考图17A,该设备显示(1702)第一用户界面(例如,用户界面524,图5B5)(例如,包括多个可激活用户界面对象的针对应用的用户界面)。在显示第一用户界面的同时,该设备检测(1704):(i)home按钮上的第一按压输入(例如,对应于接触强度增大到按压强度阈值以上的按下点击事件,接着是对应于接触强度减小到释放强度阈值以下的松开点击事件,释放强度阈值任选地低于按压强度阈值)(例如,如图5B6-图5B8和图5B40-图5B42所示),以及(ii)在第一按压输入之后检测到的home按钮上的第二按压输入(例如,对应于接触强度增大到按压强度阈值以上的按下点击事件,任选地,接着是对应于接触强度减小到释放强度阈值以下的松开点击事件,释放强度阈值任选地低于按压强度阈值)(例如,如图5B10和图5B45所示)。
响应于检测到第一按压输入并在检测第二按压输入之前,该设备提供(1706)具有第一非视觉输出配置文件的第一非视觉输出(例如,第一非视觉输出配置文件包括针对一个或多个分立触觉输出的触觉输出模式,以及任选地,针对一个或多个要伴随一个或多个触觉输出的音频输出的对应音频输出模式)。第一非视觉输出提供指示检测到第一按压输入的反馈,第一非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出(例如,触觉输出571(例如,增益为1的MiniTap 270Hz),图5B6,以及触觉输出582(例如,增益为1的MiniTap 270Hz),图5B40)。
响应于检测到home按钮上包括第一按压输入和第二按压输入的输入序列(1708),该设备至少部分基于对应于第一按压输入的第一时间点(例如,检测到第一按压输入的按下点击事件的时间或检测到第一按压输入的松开点击事件的时间)和对应于第二按压输入的第二时间点(例如,检测到第二按压输入的按下点击事件的时间或检测到第二按压输入的松开点击事件的时间)之间的时间量,确定第一按压输入和第二按压输入是独立的输入还是输入模式的部分。基于对应于第一按压输入的第一时间点和对应于第二按压输入的第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是独立输入(例如,图5B39-图5B48中),该设备(i)执行与第一按压输入相关联的第一操作(例如,第一操作包括停止显示第一用户界面(例如,用户界面524,图5B39)以及在显示器上显示第二用户界面(例如,用户界面522,图5B46)(例如,叠加于暗化home屏幕上的扩展文件夹、home屏幕、多页home屏幕的主要页面等));以及(ii)提供具有第一非视觉输出配置文件的第二非视觉输出(例如,触觉输出584(例如,增益为1的MiniTap 270Hz),图5B45),其中第二非视觉输出提供指示检测到第二按压输入的反馈,第二非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出。例如,因为第二时间点大于第一时间点之后的阈值时间量(例如,第一按下点击和第二按下点击之间的持续时间大于用于检测双击输入的时间窗口;或者第一松开点击和第二松开点击之间的持续时间大于用于检测双击输入的时间窗口,或者第一松开点击到第二按下点击之间的持续时间大于用于检测双击输入的时间窗口),该设备确定第一按压输入和第二按压输入是独立输入(例如,如图5B39-图5B48所示)。在一些实施方案中,用于检测双击输入的阈值时间量是根据接近检测到第一点击的按下点击事件时的时间强度改变速率动态确定的。例如,更快接近按下点击强度阈值导致用于检测双击输入的更短时间窗口,因此,导致更快确认单击输入,这样增强了设备的可操作性并使得用户-设备界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使用户能够更快且更高效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
基于第一时间点和第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是(预定义)输入模式的部分(例如,图5B5-图5B14中),该设备:(i)执行与输入模式相关联的第二操作,该第二操作与第一操作不同(例如,第二操作包括停止显示第一用户界面(例如,用户界面524,图5B5)并在显示器上显示第三用户界面(例如,同时呈现多个用户界面的多任务用户界面,诸如用户界面528,图5B14));以及(ii)提供具有与第一非视觉输出配置文件不同的第二非视觉输出配置文件的第三非视觉输出(例如,触觉输出573(例如,增益为0.8的MiniTap 270Hz),图5B10)(例如,第二非视觉输出配置文件包括针对一个或多个分立触觉输出的触觉输出模式,以及任选地,针对要伴随一个或多个触觉输出的一个或多个音频输出的对应音频输出模式),第三非视觉输出提供指示检测到第二按压输入的反馈(与指示第二按压输入是预定义输入模式的部分的第二非视觉输出不同),第三非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出。例如,因为第二时间点少于第一时间点之后阈值时间量(例如,第一按下点击和第二按下点击之间的持续时间少于用于检测双击输入的时间窗口;或者第一松开点击和第二松开点击之间的持续时间少于用于检测双击输入的时间窗口,或者第一松开点击到第二按下点击之间的持续时间少于用于检测双击输入的时间窗口),该设备确定第一按压输入和第二按压输入是输入模式的部分(例如,如图5B5-图5B14所示)。在一些实施方案中,用于检测双击输入的阈值时间量是根据接近检测到第一点击的按下点击事件时的时间强度改变速率动态确定的。例如,更快接近按下点击强度阈值导致用于检测双击输入的更短时间窗口,因此,导致更快确认单击输入,这样增强了设备的可操作性并使得用户-设备界面更有效(例如,通过在操作设备/与设备交互时帮助用户提供适当输入并减少用户错误),这样还通过使用户能够更快且更高效地使用设备而另外减小了电力使用并改善了设备的电池寿命。
现在参考图17B,在一些实施方案中,第一时间点是以下中的一者(1710):第一按压输入的特征强度增大到按压强度阈值(例如,ITL)以上的时间(例如,如图5B6和图5B40所示),以及第一按压输入的特征强度减小到释放强度阈值(例如,ITLR)以下的时间(例如,如图5B8和图5B42所示)。在一些实施方案中,第二时间点是以下中的一者(1712):第二按压输入的特征强度增大到按压强度阈值(例如,ITL)以上的时间(例如,如图5B10和图5B45所示),以及第二按压输入的特征强度减小到释放强度阈值(例如,ITLR)以下的时间。
在一些实施方案中,响应于检测到home按钮上包括第一按压输入和第二按压输入的输入序列:根据确定第一按压输入和第二按压输入是独立输入(例如,因为第二时间点在第一时间点之后大于阈值时间量),该设备(1714):执行与第二按压输入相关联的第三操作(例如,如图5B39-图5B48所示)。在一些实施方案中,第三操作与和第一按压输入相关联的第一操作不同。在一些实施方案中,第三操作与和输入模式相关联的第二操作不同。在一些实施方案中,第三操作包括停止显示第二用户界面(例如,叠加于暗化home屏幕上的扩展文件夹,诸如用户界面522,图5B47)以及在显示器上显示第四用户界面(例如,home屏幕,诸如用户界面520,图5B48)。在一些实施方案中,如果在执行与第一按压输入相关联的第一操作之后,已经显示了home屏幕,则第三操作没有效果。
在一些实施方案中,执行与第一按压输入相关联的第一操作包括(1716)响应于第一按压输入的释放事件(或松开点击事件)(例如,对应于接触强度减小到释放强度阈值以下)执行第一操作。
在一些实施方案中,第三非视觉输出的触觉输出(例如,触觉输出573(例如,增益为0.8的MiniTap 270Hz),图5B10)与(1718)第一非视觉输出的触觉输出(例如,触觉输出571(例如,增益为1的MiniTap270Hz),图5B6)不同。
在一些实施方案中,第一非视觉输出的第一音频输出与第三非视觉输出的第二音频输出不同(1720)(例如,如图4K所示)。在一些实施方案中,在第一非视觉输出的第一音频输出与第三非视觉输出的第二音频输出不同时,第一非视觉输出的触觉输出与第三非视觉输出的触觉输出相同。在一些实施方案中,在第一非视觉输出的第一音频输出与第三非视觉输出的第二音频输出不同时,第一非视觉输出的触觉输出与第三非视觉输出的触觉输出不同(例如,如图5B6所示,其中触觉输出571增益为1,在图5B10中,其中触觉输出573增益为0.8)。
在一些实施方案中,home按钮上的第一按压输入是(1722)对应于home按钮上的第一接触的特征强度增大到按压强度阈值以上的第一按压事件,接着是对应于第一接触的特征强度减小到释放强度阈值(任选地低于按压强度阈值)以下的第一释放事件(例如,如图5B6-图5B8所示),home按钮上的第二按压输入是对应于home按钮上第二接触的特征强度增大到按压强度阈值以上的第二按压事件(例如,与第一接触相同的连续接触,或与第一接触不同的接触)(例如,如图5B10所示)。
现在参考图17C,home按钮上的第一按压输入是(1724)对应于home按钮上的第一接触的特征强度增大到按压强度阈值以上的第一按压事件,接着是对应于第一接触的特征强度减小到释放强度阈值(任选地低于按压强度阈值)以下的第一释放事件,home按钮上的第二按压输入是对应于home按钮上第二接触的特征强度增大到按压强度阈值以上的第二按压事件(例如,与第一接触相同的连续接触,或与第一接触不同的接触),接着是对应于第二接触的特征强度减小到释放强度阈值(任选地低于按压强度阈值)以下的第二释放事件。
在一些实施方案中,响应于检测到home按钮上的第一按压输入(1726):根据确定第一按压输入的强度改变度量具有第一值(例如,接近第一按压输入中接触的特征强度增大到按压强度阈值以上时的时间第一按压输入中接触特征强度的改变具有针对强度改变度量的第一值),该设备提供具有对应于针对强度改变度量的第一值的第一振幅的第一非视觉输出(例如,触觉输出590(例如,增益为0.5的MiniTap 270Hz),图5B63);根据确定第一按压输入的强度改变度量具有与第一值不同的第二值(例如,接近第一按压输入中接触的特征强度增大到按压强度阈值以上时的时间第一按压输入中接触的特征强度改变具有与强度改变度量的第一值不同的针对强度改变度量的第二值),提供具有对应于针对强度改变度量的第二值的第二振幅的第一非视觉输出(例如,触觉输出592(例如,增益为1的MiniTap 270Hz),图5B67),其中第二振幅与第一振幅不同。上文参考方法1500描述了基于强度改变度量选择非视觉输入的实施例。
在一些实施方案中,响应于检测到home按钮上的第二按压输入(1728):根据确定第一按压输入和第二按压输入是独立输入:根据确定第二按压输入的强度改变度量具有第三值(例如,接近第二按压输入中接触的特征强度增大到按压强度阈值以上时的时间第二按压输入中接触特征强度的改变具有针对强度改变度量的第三值),该设备提供具有对应于针对强度改变度量的第三值的第三振幅的第二非视觉输出;根据确定第二按压输入的强度改变度量具有与第三值不同的第四值(例如,接近第二按压输入中接触的特征强度增大到按压强度阈值以上时的时间第二按压输入中接触的特征强度改变具有针对强度改变度量的第四值),该设备提供具有对应于针对强度改变度量的第四值的第四振幅的第二非视觉输出,第四振幅与第三振幅不同。例如,在第一按压输入和第二按压输入被解释为独立按压输入时,基于第一强度阈值被第一按压输入和第二按压输入跨越时按压输入强度的增大速率改变针对第一按压输入和第二按压输入的触觉输出的振幅,触觉输出的波形和频率相同。
同样,响应于检测到home按钮上的第二按压输入(1728):根据确定第一按压输入和第二按压输入是(预定义)输入模式的部分:根据确定第二按压输入的强度改变度量具有第三值(例如,接近第二按压输入中接触的特征强度增大到按压强度阈值以上时的时间第二按压输入中接触特征强度的改变具有针对强度改变度量的第三值),该设备提供具有对应于针对强度改变度量的第三值的第五振幅的第三非视觉输出;根据确定第二按压输入的强度改变度量具有第四值(例如,接近第二按压输入中接触的特征强度增大到按压强度阈值以上时的时间第二按压输入中接触的特征强度改变具有针对强度改变度量的第四值),该设备提供具有对应于针对强度改变度量的第四值的第六振幅的第三非视觉输出,其中第六振幅与第五振幅不同。上文参考方法1500描述了基于强度改变度量选择非视觉输入的实施例。例如,在第一按压输入和第二按压输入被解释为诸如双击的同一输入序列的部分时,基于按压输入强度的增大速率改变针对第二按压输入的触觉输出的振幅。即使基于与按压输入相关联的强度改变度量的值选择为两次相继按压输入的每次按压输入提供的非视觉输出的振幅,针对两次独立输入的第二按压输入的非视觉输出的振幅与针对预定义输入模式的第二按压输入的非视觉输出的振幅不同,即使两次按压输入具有针对强度改变度量的相同值,这为用户提供了与用户的输入更一致的反馈(例如,更用力的按压产生与更轻柔按压不同的反馈),这样增强了设备的可操作性,并使得用户-设备界面更有效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时用户的错误),这通过使用户能够更快且更有效地使用该设备而另外减少了电力使用并改善了设备的电池寿命。
现在参考图17D,在一些实施方案中,响应于检测到第一按压输入,该第一按压输入与过渡到第二用户界面的请求(例如,过渡到home屏幕的单击输入)以及过渡到第三用户界面的请求(例如,过渡到多任务用户界面的双击输入)一致,该设备开始(1730)显示从第一用户界面到第二用户界面的动画过渡(例如,如图5B6-图5B10所示)。响应于检测到第二按压输入,第二按压输入是在显示第一动画过渡的同时检测的:根据确定在第一时间接收到第二按压输入(例如,在过去用于检测双击输入的阈值时间量之前检测到点击),该设备:在第一动画过渡中的第一点处(例如,在用户界面525-5处,图5B10)中断从第一用户界面到第二用户界面的第一动画过渡,并显示从第一动画过渡中的第一点到第三用户界面(例如,用户界面528,图5B14)的第二动画过渡(例如,第二动画过渡包括用户界面526-1、526-2和526-3,图5B11-图5B13)。
同样,响应于检测到第二按压输入:根据确定在第一时间之后的第二时间接收第二按压输入(例如,在过去用于检测双击输入的阈值时间量之前检测到点击),该设备:在第一动画过渡中的第一点(例如,在用户界面525-5处,图5B10)之后的第一动画过渡中的第二点处(例如,在用户界面525-6处,图5B21)中断从第一用户界面到第二用户界面的第一动画过渡,并显示从第一动画过渡中的第二点到第三用户界面的第三动画过渡(例如,第三动画过渡包括用户界面527-1、527-2和527-3,图5B22-图5B24),其中第三动画过渡与第二动画过渡不同。上文参考方法900描述了基于何时检测到第二按压输入中断动画的实施例。
应当理解,对图17A-图17D中的操作进行描述的特定顺序仅是示例性的,并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法700、900、1100、1300、1500和1900)描述的其他过程的细节同样以类似的方式适用于上文相对于图17A-图17D描述的方法1700。例如,上文参考方法1700所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文中参考本文描述的其他方法(例如,方法700、900、1100、1300、1500和1900)所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的一个或多个特征。为了简明起见,这些细节在这里不再重复。
根据一些实施方案,图18示出了根据各种所述实施方案的原理进行配置的电子设备1800的功能框图。该设备的功能块任选地由执行各种所描述的实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图18中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图18所示,该电子设备1800包括被配置为显示信息的显示单元1801(例如,触敏显示器系统112(也称为触摸屏和触摸屏显示器),图1A)、被配置为在触摸屏显示器上接收接触、手势和其他用户输入的触敏表面单元1804(例如,显示器控制器156和触敏显示器系统112,图1A)、被配置为检测与触敏表面单元和/或设备的相应按钮(例如,home按钮)的接触强度的一个或多个传感器单元1806、用于生成触觉输出的一个或多个触觉输出生成单元1807,以及与显示单元1802、触敏表面单元1804、一个或多个传感器单元1806和一个或多个触觉输出生成单元1807耦接的处理单元1808。为了便于例示,图18将显示单元1802和触敏表面单元1804示为与电子设备1800集成,然而,在一些实施方案中,这些单元中之一或两者与电子设备通信,尽管单元保持与电子设备物理分离(例如,如图3所示且如参考图3所述)。在一些实施方案中,处理单元包括显示单元(例如,显示单元1810)、输入检测单元(例如,输入检测单元1812)、非视觉输出提供单元(例如,非视觉输出提供单元1814)、确定单元(例如,确定单元1816)和操作执行单元(例如,操作执行单元1818)。
在一些实施方案中,该处理单元(或其一个或多个部件,诸如单元1810-1818)被配置为:(例如,利用显示单元1810)显示第一用户界面;在显示第一用户界面的同时,检测:(例如,利用输入检测单元1812)home按钮上的第一按压输入;在第一按压输入之后(例如,利用输入检测单元1812)检测home按钮上的第二按压输入;响应于检测到第一按压输入并在检测第二按压输入之前,(例如,利用非视觉输出提供单元1814)提供具有第一非视觉输出配置文件的第一非视觉输出,第一非视觉输出提供指示检测到第一按压输入的反馈,且第一非视觉输出包括一个或多个触觉输出发生器提供的触觉输出;响应于检测到包括home按钮上第一按压输入和第二按压输入的输入序列:基于对应于第一按压输入的第一时间点和对应于第二按压输入的第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是独立输入,(例如,利用操作执行单元1818)执行与第一按压输入相关联的第一操作;并(例如,利用非视觉输出提供单元1814)提供具有第一非视觉输出配置文件的第二非视觉输出,第二非视觉输出提供指示检测到第二按压输入的反馈,且第二非视觉输出包括由一个或多个触觉输出发生器提供的触觉输出;基于第一时间点和第二时间点之间的时间量,根据确定第一按压输入和第二按压输入是输入模式的部分:(例如,利用操作执行单元1818)执行与输入模式相关联的第二操作,该第二操作与第一操作不同;并(例如,利用非视觉输出提供单元1814)提供具有与第一非视觉输出配置文件不同的第二非视觉输出配置文件的第三非视觉输出,该第三非视觉输出提供指示检测到第二输入的反馈,且该第三非视觉输出包括由一个或多个触觉发生器提供的触觉输出。
在一些实施方案中,第一时间点是以下中的一者:第一按压输入的特征强度增大到按压强度阈值以上的时间,以及第一按压输入的特征强度减小到释放强度阈值以下的时间。
在一些实施方案中,第二时间点是以下中的一者:第二按压输入的特征强度增大到按压强度阈值以上的时间,以及第二按压输入的特征强度减小到释放强度阈值以下的时间。
在一些实施方案中,处理单元被配置为:响应于检测到home按钮上包括第一按压输入和第二按压输入的输入序列:根据确定第一按压输入和第二按压输入是独立输入:(例如,利用操作执行单元1818)执行与第二按压输入相关联的第三操作。
在一些实施方案中,执行与第一按压输入相关联的第一操作包括响应于第一按压输入的释放事件执行第一操作。
在一些实施方案中,第三非视觉输出的触觉输出与第一非视觉输出的触觉输出不同。
在一些实施方案中,第一非视觉输出的第一音频输出与第三非视觉输出的第二音频输出不同。
在一些实施方案中,home按钮上的第一按压输入是对应于home按钮上的第一接触的特征强度增大到按压强度阈值以上的第一按压事件,接着是对应于第一接触的特征强度减小到释放强度阈值以下的第一释放事件,home按钮上的第二按压输入是对应于home按钮上第二接触的特征强度增大到按压强度阈值以上的第二按压事件。
在一些实施方案中,home按钮上的第一按压输入是对应于home按钮上的第一接触的特征强度增大到按压强度阈值以上的第一按压事件,接着是对应于第一接触的特征强度减小到释放强度阈值以下的第一释放事件,home按钮上的第二按压输入是对应于home按钮上第二接触的特征强度增大到按压强度阈值以上的第二按压事件,接着第二接触的特征强度减小到释放强度阈值以下的第二释放事件。
在一些实施方案中,处理单元被配置为:响应于检测到home按钮上的第一按压输入:根据确定第一按压输入的强度改变度量具有第一值,(例如,利用非视觉输出提供单元1814)提供具有对应于针对强度改变度量的第一值的第一振幅的第一非视觉输出;根据确定第一按压输入的强度改变度量具有与第一值不同的第二值,(例如,利用非视觉输出提供单元1814)提供具有对应于针对强度改变度量的第二值的第二振幅的第一非视觉输出,其中第二振幅与第一振幅不同。
在一些实施方案中,处理单元被配置为:响应于检测到home按钮上的第二按压输入:根据确定第一按压输入和第二按压输入是独立输入:根据确定第二按压输入的强度改变度量具有第三值,(例如,利用非视觉输出提供单元1814)提供具有对应于针对强度改变度量的第三值的第三振幅的第二非视觉输出;并根据确定第二按压输入的强度改变度量具有与第三值不同的第四值,(例如,利用非视觉输出提供单元1814)提供具有对应于针对强度改变度量的第四值的第四振幅的第二非视觉输出,其中第四振幅与第三振幅不同;根据确定第一按压输入和第二按压输入是输入模式的部分:根据确定第二按压输入的强度改变度量具有第三值:(例如,利用非视觉输出提供单元1814)提供具有对应于针对强度改变度量的第三值的第五振幅的第三非视觉输出;根据确定第二按压输入的强度改变度量具有第四值,(例如,利用非视觉输出提供单元1814)提供具有对应于针对强度改变度量的第四值的第六振幅的第三非视觉输出,第六振幅与第五振幅不同。
在一些实施方案中,处理单元被配置为:响应于检测到第一按压输入,该第一按压输入与过渡到第二用户界面的请求和过渡到第三用户界面的请求一致,(例如,利用显示单元1810)开始显示从第一用户界面到第二用户界面的第一动画过渡;响应于检测到第二按压输入,该第二按压输入是在显示第一动画过渡的同时检测的:根据确定第二按压输入在第一时间接收:(例如,利用显示单元1810)在第一动画过渡中的第一点处中断从第一用户界面到第二用户界面的第一动画过渡,并(例如,利用显示单元1810)显示从第一动画过渡中的第一点到第三用户界面的第二动画过渡;根据确定第二按压输入在第一时间之后的第二时间接收:(例如,利用显示单元1810)在第一动画过渡中第一点之后的第一动画过渡中的第二点处中断从第一用户界面到第二用户界面的第一动画过渡,并(例如,利用显示单元1810)显示从第一动画过渡中的第二点到第三用户界面的第三动画过渡,其中第三动画过渡与第二动画过渡不同。
上述信息处理方法中的操作任选地通过运行信息处理设备中的一个或多个功能模块来实现,该信息处理设备诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图17A-图17D所述的操作任选地由图1A-图1B或图18中所描绘的部件来实施。例如,显示操作1702、检测操作1704、响应操作1706和响应操作1708任选地由事件分类器170、事件识别器180和事件处理程序190来实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序所显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A-图1B中所示的部件可如何实现其他过程。
图19A-图19C是示出了根据一些实施方案提供分立的触觉输出以指示激活设备上持续的非机械按钮的方法1900的流程图。方法1900是在具有显示器、触敏表面和用于检测与触敏表面的接触强度的一个或多个传感器的电子设备(例如,设备300,图3;或便携式多功能设备100,图1A)处执行的。在一些实施方案中,显示器是触摸屏显示器,并且触敏表面在显示器上或与显示器集成。在一些实施方案中,显示器与触敏表面是分开的。在一些实施方案中,该设备包括用于生成触觉输出的一个或多个触觉输出发生器。在一些实施方案中,该设备包括一个或多个传感器以检测与设备的相应按钮(例如,home按钮,诸如物理home按钮或虚拟home按钮)的接触强度。在一些实施方案中,方法1900受到计算机可读存储介质(例如,非暂态计算机可读存储介质)中存储并由电子设备的一个或多个处理器,诸如设备100(图1A)的一个或多个处理器122执行的指令管控。为了便于解释,下文描述由设备100执行的方法1900。方法1900中的一些操作任选地被组合,和/或一些操作的顺序任选地被改变。
方法1900涉及为指示激活设备上持续非机械按钮而提供的分立触觉输出的具体设计。触觉输出的波形(例如,致动器跨越中性位置做出的振荡次数)和频率范围一起产生自然且简洁的反馈,以指示按钮已经被按压输入激活,同时,不会因为致动器继续振荡而不必要地延长触觉输出给用户造成不当的注意力分散,这样增强了设备的可操作性并使得用户-设备界面更有效(例如,通过帮助用户提供适当输入并减少操作设备/与设备交互时用户的错误),这另外通过使用户能够更快且更有效地使用设备而减少了电力使用并改善了设备的电池寿命。此外,精心选择的触觉输出模式改进了向用户提供的反馈的效率,从而改善了设备的电池寿命。
参考图19A,该设备检测(1902)相应按钮(例如,按钮204,图5A1)上的输入,使用一个或多个触觉输出发生器生成触觉输出,指示已经激活相应按钮,替代在机械按压相应按钮时检测相应按钮激活的机械开关。响应于检测到相应按钮上的输入(1904):根据确定该输入满足激活标准(例如,图5A9-图5A11中),其中该激活标准包括该输入包括相应强度阈值(例如,轻按压强度阈值ITL)以上的强度的要求,以便满足激活标准,该设备提供具有第一触觉输出模式的第一触觉输出(例如,触觉输出503(例如,增益为0.5的MiniTap 270Hz),图5A11),其包括:一个或多个触觉输出发生器相对于一个或多个触觉输出发生器的一个或多个对应中性位置的0.5和4个周期之间的振荡,其中一个或多个触觉输出发生器的振荡发生于80Hz和400Hz之间的频率下(例如,80Hz、100Hz、125Hz、150Hz、200Hz、230Hz、270Hz或300Hz的MiniTap,如图4F1和图4G1所示);根据确定输入不满足激活标准,该设备放弃提供第一触觉输出(例如,在图5A4-图5A8中)。
在一些实施方案中,第一触觉输出模式包括(1906)一个或多个触觉输出发生器相对于一个或多个触觉输出发生器的一个或多个对应中性位置的0.5和2周期之间的振荡(例如,具有2个周期振荡的FullTap,具有1个周期振荡的MiniTap或具有0.5个周期振荡的MicroTap,如图4F1所示)。
在一些实施方案中,第一触觉输出模式包括(1908)一个或多个触觉输出发生器相对于一个或多个触觉输出发生器的一个或多个对应中性位置的1和2周期之间的振荡(例如,具有2个周期振荡的FullTap,或具有1个周期振荡的MiniTap,如图4F1所示)。
在一些实施方案中,一个或多个触觉输出发生器的振荡发生于(1910)200Hz和350Hz之间的频率下(例如,如图4F1所示)。
在一些实施方案中,一个或多个触觉输出发生器的振荡发生于(1912)225Hz和325Hz之间的频率下(例如,230Hz处的MiniTap、270Hz处的MiniTap或300Hz处的MiniTap,如图4F1和图4K所示)。
在一些实施方案中,一个或多个触觉输出发生器的振荡发生于(1914)从150Hz和400Hz之间的两个或更多频率中选择的可变频率下(例如,230Hz处的MiniTap、270Hz处的MiniTap或300Hz处的MiniTap,如图4F1和图4K所示)。
现在转到图19B,在一些实施方案中,响应于检测到home按钮上的输入(1916):根据确定该输入满足激活标准(例如,该输入包括高于相应强度阈值的强度)且接近输入的特征强度增大到相应强度阈值以上时的时间输入特征强度的改变具有针对强度改变度量的第一值(例如,“软”强度),该设备提供具有对应于强度改变度量的第一值的第一振幅的第一触觉输出(例如,触觉输出590(例如,增益为0.5的MiniTap 270Hz),图5B62);根据确定输入满足激活标准(例如,该输入包括高于相应强度阈值的强度)且接近输入特征强度增大到相应强度阈值以上时的时间输入特征强度的改变具有与强度改变度量的第一值不同的针对强度改变度量的第二值(例如,“正常”强度),该设备提供具有对应于针对强度改变度量的第二值的第二振幅的第一触觉输出(例如,触觉输出592(例如,增益为1的MiniTap270Hz),图5B67),且第二振幅与第一振幅不同。上文参考方法1500更详细地描述了基于强度改变度量改变触觉输出的振幅的实施例。
在一些实施方案中,在检测到home按钮上的输入之后,该设备检测(1918)home按钮上的第二输入。响应于检测到第一输入且在检测第二输入之前,该设备提供(1918)具有第三振幅的第一触觉输出(例如,触觉输出571(例如,增益为1的MiniTap 270Hz),图5B6,或触觉输出582(例如,增益为1的MiniTap 270Hz),图5B40)。响应于检测到包括输入和第二输入的输入序列,该设备至少部分基于第一时间点(例如,检测到针对输入的按压事件的时间或检测到针对输入的释放事件的时间)和对应于第二输入的第二时间点(例如,检测到针对第二输入的按压事件的时间或检测到针对第二输入的释放事件的时间)之间的时间量,确定该输入和第二输入是独立的输入(例如,如图5B39-图5B48所示)还是输入模式的部分(例如,如图5B5-图5B14所示)。
基于对应于该输入的第一时间点和对应于第二输入的第二时间点之间的时间量,根据确定该输入和第二输入是独立输入(例如,因为第二时间点在第一时间点之后大于阈值时间量)(例如,如图5B39-图5B48所示),该设备提供具有第三振幅的第二触觉输出(例如,触觉输出584(例如,增益为1的MiniTap 270Hz),图5B45),且第二触觉输出提供指示检测到第二输入的反馈。基于第一时间点和第二时间点之间的时间量,根据确定该输入和第二输入是(预定义)输入模式的部分(例如,因为第二时间点在第一时间点之后少于阈值时间量)(例如,如图5B5-图5B14所示),该设备提供具有与第三振幅不同的第四振幅的第三触觉输出(例如,触觉输出573(例如,增益为0.8的MiniTap 270Hz),图5B10),且第三触觉输出提供指示检测到第二输入的反馈。在一些实施方案中,该阈值时间量是按压事件到按压事件的时间段。在一些实施方案中,该阈值时间量是释放事件到释放事件的时间段。上文参考方法1700更详细地描述了基于时间阈值改变触觉输出的振幅的实施例。
现在参考图19C,在一些实施方案中,在显示器上显示第一用户界面(例如,用户界面512,图5A3)的同时检测home按钮上的输入(例如,第一应用的用户界面、叠加在暗化home屏幕上的扩展文件夹、叠加在暗化home屏幕上的扩展通知、叠加在暗化home屏幕上的控制面板、同时呈现多个用户界面的多任务用户界面、多页home屏幕的次要页面、通知屏、桌面小程序屏等)。响应于检测到home按钮上的输入:根据确定该输入满足激活标准(例如,如图5A11所示),该设备停止显示第一用户界面,并在显示器上显示第二用户界面(例如,用户界面510,图5A14)(例如,home屏幕、多页home屏幕的主要页面等);根据确定该输入不满足激活标准(例如,如图5A4-图5A7所示),该设备保持在显示器上显示第一用户界面(例如,用户界面512,图5A8)。
在一些实施方案中,第二用户界面是系统用户界面(例如,home屏幕、多页home屏幕的主要页面、多任务屏、虚拟助理屏等),诸如图5A14中的用户界面510。
应当理解,对图19A-图19C中的操作进行描述的特定顺序仅是示例性的,并非旨在表示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。另外,应当指出的是,本文相对于本文所述的其他方法(例如,方法700、900、1100、1300、1500和1700)描述的其他过程的细节同样以类似的方式适用于上文相对于图19A-图19C描述的方法1900。例如,上文参考方法1900所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画任选地具有本文中参考本文描述的其他方法(例如,方法700、900、1100、1300、1500和1700)所描述的接触、手势、用户界面对象、触觉输出、音频输出、强度阈值、时间阈值、焦点选择器和动画的一个或多个特征。为了简明起见,这些细节在这里不再重复。
根据一些实施方案,图20示出了根据各种所述实施方案的原理进行配置的电子设备2000的功能框图。该设备的功能块任选地由执行各种所描述的实施方案的原理的硬件、软件或硬件和软件的组合来实现。本领域的技术人员应当理解,图20中所述的功能块任选地被组合或被分离为子块,以便实现各种所描述的实施方案的原理。因此,本文的描述任选地支持本文所述的功能块的任何可能的组合或分离或进一步限定。
如图20所示,该电子设备2000包括被配置为显示信息的显示单元2001(例如,触敏显示器系统112(也称为触摸屏和触摸屏显示器),图1A)、被配置为在触摸屏显示器上接收接触、手势和其他用户输入的触敏表面单元2004(例如,显示器控制器156和触敏显示器系统112,图1A)、被配置为检测与触敏表面单元和/或设备的相应按钮(例如,home按钮)的接触强度的一个或多个传感器单元2006、用于生成触觉输出的一个或多个触觉输出生成单元2007,以及与显示单元2002、触敏表面单元2004、一个或多个传感器单元2006和一个或多个触觉输出生成单元2007耦接的处理单元2008。为了便于例示,图20将显示单元2002和触敏表面单元2004示为与电子设备2000集成,然而,在一些实施方案中,这些单元中之一或两者与电子设备通信,尽管单元保持与电子设备物理分离(例如,如图3所示且如参考图3所述)。在一些实施方案中,该处理单元包括显示单元(例如,显示单元2009)、输入检测单元(例如,输入检测单元2010)、确定单元(例如,确定单元2012)、触觉输出提供单元(例如,触觉输出提供单元2014)。
在一些实施方案中,该处理单元(或其一个或多个部件,诸如单元2010-2014)被配置为:(例如,利用输入检测单元2010)检测相应按钮上的输入,(例如,利用触觉输出提供单元2014结合一个或多个触觉输出提供单元2007)使用一个或多个触觉输出发生器生成指示已经激活相应按钮的触觉输出,替代在机械按压相应按钮时检测相应按钮激活的机械开关;响应于检测到相应按钮上的输入:(i)(例如,利用确定单元2012)根据确定该输入满足激活标准,该激活标准包括该输入包括高于相应强度阈值的强度的要求,以便满足该激活标准,(例如,利用触觉输出提供单元2014结合一个或多个触觉输出提供单元2007)提供具有第一触觉输出模式的第一触觉输出,第一触觉输出模式包括一个或多个触觉输出发生器相对于一个或多个触觉发生器的一个或多个对应中性位置的0.5和4个周期之间的振荡,其中一个或多个触觉输出发生器的振荡发生于80Hz和400Hz之间的频率下;以及(ii)(例如,利用确定单元2012)根据确定该输入不满足激活标准,放弃提供第一触觉输出。
在一些实施方案中,第一触觉输出模式包括一个或多个触觉输出发生器相对于一个或多个触觉输出发生器的一个或多个对应中性位置的0.5和2周期之间的振荡。
在一些实施方案中,第一触觉输出模式包括一个或多个触觉输出发生器相对于一个或多个触觉输出发生器的一个或多个对应中性位置的1和2周期之间的振荡。
在一些实施方案中,一个或多个触觉输出发生器的振荡发生于200Hz和350Hz之间的频率下。
在一些实施方案中,一个或多个触觉输出发生器的振荡发生于225Hz和325Hz之间的频率下。
在一些实施方案中,一个或多个触觉输出发生器的振荡发生于从150Hz和400Hz之间的两个或更多频率中选择的可变频率下。
在一些实施方案中,该处理单元被配置为:响应于检测到home按钮上的输入:根据确定该输入满足激活标准且接近输入的特征强度增大到相应强度阈值以上时的时间输入特征强度的改变具有针对强度改变度量的第一值,(例如,利用触觉输出提供单元2014结合一个或多个触觉输出提供单元2007)提供具有对应于强度改变度量的第一值的第一振幅的第一触觉输出;根据确定输入满足激活标准且接近输入特征强度增大到相应强度阈值以上时的时间输入特征强度的改变具有与强度改变度量的第一值不同的针对强度改变度量的第二值,(例如,利用触觉输出提供单元2014结合一个或多个触觉输出提供单元2007)提供具有对应于针对强度改变度量的第二值的第二振幅的第一触觉输出,其中第二振幅与第一振幅不同。
在一些实施方案中,该处理单元被配置为:在检测home按钮上的输入之后,(例如,利用输入检测单元2010)检测home按钮上的第二输入;响应于检测到第一输入并在检测第二输入之前,(例如,利用触觉输出提供单元2014结合一个或多个触觉输出提供单元2007)提供具有第三振幅的第一触觉输出;响应于检测到包括输入和第二输入的输入序列:基于对应于输入的第一时间点和对应于第二输入的第二时间点之间的时间量,根据确定输入和第二输入是独立输入:(例如,利用触觉输出提供单元2014结合一个或多个触觉输出提供单元2007)提供具有第三振幅的第二触觉输出,第二触觉输出提供指示检测到第二输入的反馈;基于第一时间点和第二时间点之间的时间量,根据确定输入和第二输入是输入模式的部分:(例如,利用触觉输出提供单元2014结合一个或多个触觉输出提供单元2007)提供具有与第三振幅不同的第四振幅的第三触觉输出,第三触觉输出提供指示检测到第二输入的反馈。
在一些实施方案中,在显示器上显示第一用户界面的同时检测home按钮上的输入,该处理单元被配置为:响应于检测到home按钮上的输入:根据确定输入满足激活标准:(例如,利用显示单元2009)停止显示第一用户界面;并(例如,利用显示单元2009)在显示器上显示第二用户界面;根据确定输入不满足激活标准,(例如,利用显示单元2009)保持在显示器上显示第一用户界面。
在一些实施方案中,第二用户界面为系统用户界面。
上述信息处理方法中的操作任选地通过运行信息处理设备中的一个或多个功能模块来实现,该信息处理设备诸如为通用处理器(例如,如以上相对于图1A和图3所描述的)或特定于应用的芯片。
以上参考图19A-图19C所述的操作任选地由图1A-图1B或图20中所描绘的部件来实施。例如,检测操作1902和响应操作1904任选地由事件分类器170、事件识别器180和事件处理程序190来实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触,并且事件分配器模块174将事件信息递送到应用136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较,并且确定触敏表面上第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件,诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义的事件或子事件时,事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177来更新应用程序内部状态192。在一些实施例中,事件处理程序190访问相应GUI更新器178来更新应用程序所显示的内容。类似地,本领域的普通技术人员会清楚地知道基于在图1A-图1B中所示的部件可如何实现其他过程。
出于解释的目的,前面的描述是参考具体的实施方案来描述的。然而,上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择和描述实施方案是为了最佳地阐明本发明的原理及其实际应用,以便由此使得本领域的其他技术人员能够最佳地使用具有适合于所构想的特定用途的各种修改的本发明以及各种所描述的实施方案。

Claims (30)

1.一种用于生成触觉输出的方法,包括:
在具有触敏表面、显示器、以及用于生成触觉输出的一个或多个触觉输出发生器的电子设备处,其中所述设备包括用于检测与所述设备的home按钮的接触强度的一个或多个传感器:
在所述显示器上显示用户界面;
在显示所述用户界面的同时,检测所述home按钮上的输入序列,包括检测所述home按钮上的第一按压输入,其中检测所述第一按压输入包括检测所述home按钮上接触的特征强度的增大;并且
响应于检测到所述home按钮上的所述第一按压输入:
根据确定所述第一按压输入包括所述接触的所述特征强度增大到第一强度阈值以上,并且确定在开始于、包括或者结束于所述接触的所述特征强度增大到所述第一强度阈值以上时的时间的预先确定时间窗口内所述接触的所述特征强度的改变具有针对强度改变度量的第一值:
执行改变所述显示器上显示的所述用户界面的第一操作;以及
经由所述一个或多个触觉输出发生器生成对应于所述接触的所述特征强度增大到所述第一强度阈值以上的第一触觉输出;并且
根据确定所述第一按压输入包括所述接触的所述特征强度增大到所述第一强度阈值以上,并且确定在开始于、包括或者结束于所述接触的所述特征强度增大到所述第一强度阈值以上时的时间的预先确定时间窗口内所述接触的所述特征强度的所述改变具有与所述强度改变度量的所述第一值不同的、针对所述强度改变度量的第二值:
执行改变所述显示器上显示的所述用户界面的所述第一操作;以及
经由所述一个或多个触觉输出发生器生成对应于所述接触的所述特征强度增大到所述第一强度阈值以上且与所述第一触觉输出不同的第二触觉输出,
其中:
所述第一触觉输出和所述第二触觉输出是由基础触觉输出模式生成的,所述基础触觉输出模式与当前从针对所述home按钮的多个不同触觉输出设置选择的触觉输出设置相关联;以及
所述第一触觉输出和所述第二触觉输出具有针对所述基础触觉输出模式的不同的振幅,所述不同的振幅分别基于所述强度改变度量的所述第一值和所述强度改变度量的所述第二值而被选择。
2.根据权利要求1所述的方法,其中在所述接触的所述特征强度保持在所述第一强度阈值以上的同时,所述第一触觉输出停止。
3.根据权利要求1至2中任一项所述的方法,其中在所述接触的所述特征强度保持在所述第一强度阈值以上的同时,所述第二触觉输出停止。
4.根据权利要求1至2中任一项所述的方法,其中针对所述强度改变度量的第一值范围生成所述第一触觉输出。
5.根据权利要求4所述的方法,其中针对所述强度改变度量的第二值范围生成所述第二触觉输出。
6.根据权利要求1至2中任一项所述的方法,其中:
检测所述home按钮上的所述输入序列还包括检测所述home按钮上的所述第一按压输入之后的所述home按钮上的第一释放输入,其中检测所述第一释放输入包括检测所述home按钮上所述接触的所述特征强度的减小;并且
所述方法包括:
响应于检测到所述home按钮上的所述第一释放输入:
根据确定所述第一释放输入包括所述接触的所述特征强度减小到第二强度阈值以下,并且确定在开始于、包括或者结束于所述接触的所述特征强度减小到所述第二强度阈值以下时的时间的预先确定时间窗口内所述接触的所述特征强度的改变具有针对所述强度改变度量的第三值:
经由所述一个或多个触觉输出发生器生成对应于所述接触的所述特征强度减小到所述第二强度阈值以下的第三触觉输出;以及
根据确定所述第一释放输入包括所述接触的所述特征强度减小到所述第二强度阈值以下,并且确定在开始于、包括或者结束于所述接触的所述特征强度减小到所述第二强度阈值以下时的时间的预先确定时间窗口内所述接触的所述特征强度的所述改变具有与所述强度改变度量的所述第三值不同的、针对所述强度改变度量的第四值:
经由所述一个或多个触觉输出发生器生成对应于所述接触的所述特征强度减小到所述第二强度阈值以下且与所述第三触觉输出不同的第四触觉输出。
7.根据权利要求6所述的方法,其中:
生成所述第一触觉输出和所述第二触觉输出包括分别根据所述强度改变度量的所述第一值和所述第二值向所述基础触觉输出模式施加第一修改;以及
生成所述第三触觉输出和所述第四触觉输出包括分别根据所述强度改变度量的所述第三值和所述第四值向所述基础触觉输出模式施加与所述第一修改不同的第二修改。
8.根据权利要求6所述的方法,其中所述第二强度阈值与所述第一强度阈值不同。
9.根据权利要求1至2中任一项所述的方法,其中所述home按钮被持续显示在相应位置或位于所述设备上与所述显示器分开的持久性位置处。
10.根据权利要求1至2中任一项所述的方法,其中所述强度改变度量基于所述接触的所述特征强度随时间的改变速率。
11.根据权利要求1至2中任一项所述的方法,其中所述强度改变度量基于在所述接触的所述特征强度达到相关阈值强度时测量的所述接触的所述特征强度的改变速率。
12.根据权利要求1至2中任一项所述的方法,其中:
检测所述输入序列包括检测所述home按钮上的第二按压输入,其中检测所述第二按压输入包括检测所述home按钮上所述接触的所述特征强度的第二次增大;并且
所述方法包括响应于检测到所述第二按压输入:
基于对应于所述第一按压输入的第一时间点和对应于所述第二按压输入的第二时间点之间的时间量,根据确定所述第一按压输入和所述第二按压输入是预定义输入模式的部分:
执行与所述预定义输入模式相关联的第二操作,其中所述第二操作与所述第一操作不同;以及
经由所述一个或多个触觉输出发生器提供与所述第一触觉输出和所述第二触觉输出不同的第五触觉输出。
13.根据权利要求1至2中任一项所述的方法,其中:
检测所述输入序列包括检测所述home按钮上的第二按压输入,其中检测所述第二按压输入包括检测所述home按钮上所述接触的所述特征强度的第二次增大;并且
所述方法包括:
响应于检测到所述第一按压输入,与响应于所述第一按压输入生成的所述第一触觉输出和所述第二触觉输出中的相应一者同时提供第一音频输出;并且
响应于检测到所述第二按压输入:
基于对应于所述第一按压输入的第一时间点和对应于所述第二按压输入的第二时间点之间的时间量,根据确定所述第一按压输入和所述第二按压输入是预定义输入模式的部分:
执行与所述预定义输入模式相关联的第二操作,其中所述第二操作与所述第一操作不同;
经由所述一个或多个触觉输出发生器提供第五触觉输出,其中所述第五触觉输出与针对所述第一按压输入生成的所述第一触觉输出和所述第二触觉输出中的所述相应一者相同;以及
与所述第五触觉输出同时提供第二音频输出,其中所述第二音频输出和所述第一音频输出具有不同的音频输出模式。
14.根据权利要求1至2中任一项所述的方法,包括:
响应于检测到所述home按钮上的所述第一按压输入:
将所述用户界面从第一用户界面改变为第二用户界面,不论对应于所述第一按压输入的所述强度改变度量的值为何。
15.一种存储一个或多个程序的计算机可读存储介质,所述一个或多个程序包括指令,所述指令当由具有显示器、触敏表面、用于生成触觉输出的一个或多个触觉输出发生器以及用于检测与电子设备的home按钮的接触强度的一个或多个传感器的所述电子设备执行时,使得所述电子设备执行根据权利要求1至14所述的方法中的任一方法。
16.一种信息处理装置,其用于在电子设备中使用,所述电子设备具有显示器、触敏表面、用于生成触觉输出的一个或多个触觉输出发生器、以及用于检测与所述设备的home按钮的接触强度的一个或多个传感器,包括:
用于在所述显示器上显示用户界面的装置;
用于在显示所述用户界面的同时检测所述home按钮上的输入序列的装置,包括检测所述home按钮上的第一按压输入,其中检测所述第一按压输入包括检测所述home按钮上接触的特征强度的增大;以及
用于响应于检测到所述home按钮上的所述第一按压输入而执行以下操作的装置:
根据确定所述第一按压输入包括所述接触的所述特征强度增大到第一强度阈值以上,并且确定在开始于、包括或者结束于所述接触的所述特征强度增大到所述第一强度阈值以上时的时间的预先确定时间窗口内所述接触的所述特征强度的改变具有针对强度改变度量的第一值:
执行改变所述显示器上显示的所述用户界面的第一操作;以及
经由所述一个或多个触觉输出发生器生成对应于所述接触的所述特征强度增大到所述第一强度阈值以上的第一触觉输出;以及
根据确定所述第一按压输入包括所述接触的所述特征强度增大到所述第一强度阈值以上,并且确定在开始于、包括或者结束于所述接触的所述特征强度增大到所述第一强度阈值以上时的时间的预先确定时间窗口内所述接触的所述特征强度的所述改变具有与所述强度改变度量的所述第一值不同的、针对所述强度改变度量的第二值:
执行改变所述显示器上显示的所述用户界面的所述第一操作;以及
经由所述一个或多个触觉输出发生器生成对应于所述接触的所述特征强度增大到所述第一强度阈值以上且与所述第一触觉输出不同的第二触觉输出,
其中:
所述第一触觉输出和所述第二触觉输出是由基础触觉输出模式生成的,所述基础触觉输出模式与当前从针对所述home按钮的多个不同触觉输出设置选择的触觉输出设置相关联;以及
所述第一触觉输出和所述第二触觉输出具有针对所述基础触觉输出模式的不同的振幅,所述不同的振幅分别基于所述强度改变度量的所述第一值和所述强度改变度量的所述第二值而被选择。
17.根据权利要求16所述的信息处理装置,其中在所述接触的所述特征强度保持在所述第一强度阈值以上的同时,所述第一触觉输出停止。
18.根据权利要求16至17中任一项所述的信息处理装置,其中在所述接触的所述特征强度保持在所述第一强度阈值以上的同时,所述第二触觉输出停止。
19.根据权利要求16至17中任一项所述的信息处理装置,其中针对所述强度改变度量的第一值范围生成所述第一触觉输出。
20.根据权利要求19所述的信息处理装置,其中针对所述强度改变度量的第二值范围生成所述第二触觉输出。
21.根据权利要求16至17中任一项所述的信息处理装置,其中:
检测所述home按钮上的所述输入序列还包括检测所述home按钮上的所述第一按压输入之后的所述home按钮上的第一释放输入,其中检测所述第一释放输入包括检测所述home按钮上所述接触的所述特征强度的减小;并且
所述信息处理装置包括用于执行以下操作的装置:
响应于检测到所述home按钮上的所述第一释放输入:
根据确定所述第一释放输入包括所述接触的所述特征强度减小到第二强度阈值以下,并且确定在开始于、包括或者结束于所述接触的所述特征强度减小到所述第二强度阈值以下时的时间的预先确定时间窗口内所述接触的所述特征强度的改变具有针对所述强度改变度量的第三值:
经由所述一个或多个触觉输出发生器生成对应于所述接触的所述特征强度减小到所述第二强度阈值以下的第三触觉输出;并且
根据确定所述第一释放输入包括所述接触的所述特征强度减小到所述第二强度阈值以下,并且确定在开始于、包括或者结束于所述接触的所述特征强度减小到所述第二强度阈值以下时的时间的预先确定时间窗口内所述接触的所述特征强度的所述改变具有与所述强度改变度量的所述第三值不同的、针对所述强度改变度量的第四值:
经由所述一个或多个触觉输出发生器生成对应于所述接触的所述特征强度减小到所述第二强度阈值以下且与所述第三触觉输出不同的第四触觉输出。
22.根据权利要求21所述的信息处理装置,其中:
生成所述第一触觉输出和所述第二触觉输出包括分别根据所述强度改变度量的所述第一值和所述第二值向所述基础触觉输出模式施加第一修改;以及
生成所述第三触觉输出和所述第四触觉输出包括分别根据所述强度改变度量的所述第三值和所述第四值向所述基础触觉输出模式施加与所述第一修改不同的第二修改。
23.根据权利要求21所述的信息处理装置,其中所述第二强度阈值与所述第一强度阈值不同。
24.根据权利要求16至17中任一项所述的信息处理装置,其中所述home按钮被持续显示在相应位置或位于所述设备上与所述显示器分开的持久性位置处。
25.根据权利要求16至17中任一项所述的信息处理装置,其中所述强度改变度量基于所述接触的所述特征强度随时间的改变速率。
26.根据权利要求16至17中任一项所述的信息处理装置,其中所述强度改变度量基于在所述接触的所述特征强度达到相关阈值强度时测量的所述接触的所述特征强度的改变速率。
27.根据权利要求16至17中任一项所述的信息处理装置,其中:
检测所述输入序列包括检测所述home按钮上的第二按压输入,其中检测所述第二按压输入包括检测所述home按钮上所述接触的所述特征强度的第二次增大;并且
所述信息处理装置包括用于响应于检测到所述第二按压输入执行以下操作的装置:
基于对应于所述第一按压输入的第一时间点和对应于所述第二按压输入的第二时间点之间的时间量,根据确定所述第一按压输入和所述第二按压输入是预定义输入模式的部分:
执行与所述预定义输入模式相关联的第二操作,其中所述第二操作与所述第一操作不同;以及
经由所述一个或多个触觉输出发生器提供与所述第一触觉输出和所述第二触觉输出不同的第五触觉输出。
28.根据权利要求16至17中任一项所述的信息处理装置,其中:
检测所述输入序列包括检测所述home按钮上的第二按压输入,其中检测所述第二按压输入包括检测所述home按钮上所述接触的所述特征强度的第二次增大;
所述信息处理装置包括用于执行以下操作的装置:
响应于检测到所述第一按压输入,与响应于所述第一按压输入生成的所述第一触觉输出和所述第二触觉输出中的相应一者同时提供第一音频输出;并且
响应于检测到所述第二按压输入:
基于对应于所述第一按压输入的第一时间点和对应于所述第二按压输入的第二时间点之间的时间量,根据确定所述第一按压输入和所述第二按压输入是预定义输入模式的部分:
执行与所述预定义输入模式相关联的第二操作,其中所述第二操作与所述第一操作不同;
经由所述一个或多个触觉输出发生器提供第五触觉输出,其中所述第五触觉输出与针对所述第一按压输入生成的所述第一触觉输出和所述第二触觉输出中的所述相应一者相同;以及
与所述第五触觉输出同时提供第二音频输出,其中所述第二音频输出和所述第一音频输出具有不同的音频输出模式。
29.根据权利要求16至17中任一项所述的信息处理装置,包括:
响应于检测到所述home按钮上的所述第一按压输入:
将所述用户界面从第一用户界面改变为第二用户界面,不论对应于所述第一按压输入的所述强度改变度量的值为何。
30.一种电子设备,包括:
显示器;
触敏表面,
一个或多个触觉输出生成单元,其被配置为生成触觉输出,
一个或多个传感器单元,其被配置为检测与所述设备的home按钮的接触强度,以及
根据权利要求16至29中任一项所述的信息处理装置。
CN201780002188.5A 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的设备、方法和图形用户界面 Active CN108139863B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202311573304.2A CN117742450A (zh) 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的方法和设备
CN201910962148.6A CN110825165B (zh) 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的方法和设备

Applications Claiming Priority (19)

Application Number Priority Date Filing Date Title
US201662384180P 2016-09-06 2016-09-06
US62/384,180 2016-09-06
DK201670728 2016-09-19
DKPA201670728A DK201670728A1 (en) 2016-09-06 2016-09-19 Devices, Methods, and Graphical User Interfaces for Providing Feedback During Interaction with an Intensity-Sensitive Button
DK201670738 2016-09-20
DKPA201670740A DK179630B1 (en) 2016-09-06 2016-09-20 Devices, methods and graphical user interfaces for providing feedback during interaction with an intensity sensitive button
DKPA201670739A DK180150B1 (da) 2016-09-06 2016-09-20 Indretninger, fremgangsmåder og grafiske brugergrænseflader til tilvejebringelse af feedback under interaktion med en intensitetsfølsom knap
US15/271,194 US9740381B1 (en) 2016-09-06 2016-09-20 Devices, methods, and graphical user interfaces for providing feedback during interaction with an intensity-sensitive button
DKPA201670738A DK179223B9 (en) 2016-09-06 2016-09-20 Devices, methods and graphical user interfaces for providing feedback during interaction with an intensity sensitive button
US15/271,194 2016-09-20
DK201670740 2016-09-20
DK201670739 2016-09-20
US15/272,398 US10303252B2 (en) 2016-09-06 2016-09-21 Devices, methods, and graphical user interfaces for providing feedback during interaction with an intensity-sensitive button
US15/272,398 2016-09-21
US15/272,386 US10198073B2 (en) 2016-09-06 2016-09-21 Devices, methods, and graphical user interfaces for providing feedback during interaction with an intensity-sensitive button
US15/272,386 2016-09-21
US15/273,464 US10228765B2 (en) 2016-09-06 2016-09-22 Devices, methods, and graphical user interfaces for providing feedback during interaction with an intensity-sensitive button
US15/273,464 2016-09-22
PCT/US2017/048372 WO2018048632A1 (en) 2016-09-06 2017-08-24 Devices, methods, and graphical user interfaces for providing feedback during interaction with an intensity-sensitive button

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN201910962148.6A Division CN110825165B (zh) 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的方法和设备
CN202311573304.2A Division CN117742450A (zh) 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的方法和设备

Publications (2)

Publication Number Publication Date
CN108139863A CN108139863A (zh) 2018-06-08
CN108139863B true CN108139863B (zh) 2019-09-24

Family

ID=59581281

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201910962148.6A Active CN110825165B (zh) 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的方法和设备
CN202311573304.2A Pending CN117742450A (zh) 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的方法和设备
CN201780002188.5A Active CN108139863B (zh) 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的设备、方法和图形用户界面

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201910962148.6A Active CN110825165B (zh) 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的方法和设备
CN202311573304.2A Pending CN117742450A (zh) 2016-09-06 2017-08-24 用于在与强度敏感按钮交互期间提供反馈的方法和设备

Country Status (6)

Country Link
US (9) US9740381B1 (zh)
JP (6) JP6570758B2 (zh)
KR (6) KR102136236B1 (zh)
CN (3) CN110825165B (zh)
AU (5) AU2017218929A1 (zh)
DK (1) DK201670728A1 (zh)

Families Citing this family (121)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2013259642A1 (en) 2012-05-09 2014-12-04 Apple Inc. Device, method, and graphical user interface for moving and dropping a user interface object
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169854A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
CN108958550B (zh) 2012-05-09 2021-11-12 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
KR101683868B1 (ko) 2012-05-09 2016-12-07 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
CN108287651B (zh) 2012-05-09 2021-04-13 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
EP3096218B1 (en) 2012-05-09 2018-12-26 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
KR102001332B1 (ko) 2012-12-29 2019-07-17 애플 인크. 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10346021B2 (en) * 2013-05-29 2019-07-09 Rakuten, Inc. Automatic list scrolling apparatus, method and program based on a selected item
USD738889S1 (en) 2013-06-09 2015-09-15 Apple Inc. Display screen or portion thereof with animated graphical user interface
CN110795005A (zh) 2013-09-03 2020-02-14 苹果公司 利用磁属性来操控用户界面对象的用户界面
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
US10545657B2 (en) 2013-09-03 2020-01-28 Apple Inc. User interface for manipulating user interface objects
USD798888S1 (en) * 2013-12-23 2017-10-03 Canonical Limited Touchscreen device with graphical user interface
CN116301544A (zh) 2014-06-27 2023-06-23 苹果公司 尺寸减小的用户界面
WO2016036416A1 (en) 2014-09-02 2016-03-10 Apple Inc. Button functionality
WO2016036509A1 (en) 2014-09-02 2016-03-10 Apple Inc. Electronic mail user interface
US20160062571A1 (en) 2014-09-02 2016-03-03 Apple Inc. Reduced size user interface
CN113824998A (zh) 2014-09-02 2021-12-21 苹果公司 音乐用户界面
CN104657253B (zh) * 2015-02-13 2017-09-29 青岛海信移动通信技术股份有限公司 一种显示可视化提示的方法及移动终端
US10365807B2 (en) 2015-03-02 2019-07-30 Apple Inc. Control of system zoom magnification using a rotatable input mechanism
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10088993B2 (en) * 2015-04-01 2018-10-02 Ebay Inc. User interface for controlling data navigation
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
USD775649S1 (en) 2015-09-08 2017-01-03 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD813243S1 (en) * 2015-09-08 2018-03-20 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD843399S1 (en) * 2016-07-29 2019-03-19 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD926779S1 (en) * 2016-08-02 2021-08-03 Royal App Ltd. Display screen or portion thereof with graphical user interface for product display
DK201670728A1 (en) 2016-09-06 2018-03-19 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Feedback During Interaction with an Intensity-Sensitive Button
JP2018045434A (ja) * 2016-09-14 2018-03-22 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US10521107B2 (en) * 2016-09-24 2019-12-31 Apple Inc. Devices, methods, and graphical user interfaces for selecting and interacting with different device modes
JP6822063B2 (ja) * 2016-10-26 2021-01-27 富士ゼロックス株式会社 プログラム及び機器
CN108605096B (zh) * 2016-11-29 2020-04-14 华为技术有限公司 一种电子设备拍摄方法和装置
CN106709306A (zh) * 2016-12-01 2017-05-24 北京小米移动软件有限公司 消息阅读方法及装置
USD857051S1 (en) * 2017-02-27 2019-08-20 Lg Electronics Inc. Display screen with graphical user interface
USD857052S1 (en) * 2017-02-27 2019-08-20 Lg Electronics Inc. Display screen with animated graphical user interface
US10732714B2 (en) 2017-05-08 2020-08-04 Cirrus Logic, Inc. Integrated haptic system
AU2017413665B2 (en) * 2017-05-12 2023-02-02 Razer (Asia-Pacific) Pte. Ltd. Method and apparatus for quantifying button click force
US10866619B1 (en) 2017-06-19 2020-12-15 Apple Inc. Electronic device having sealed button biometric sensing system
US10719430B2 (en) * 2017-06-26 2020-07-21 Nanjing University Sketch-guided GUI test generation for mobile applications
US10521090B2 (en) 2017-07-13 2019-12-31 International Business Machines Corporation Dashboard generation based on user interaction
US10444975B2 (en) * 2017-07-18 2019-10-15 Google Llc Graphical icon manipulation
US10862848B2 (en) * 2017-07-28 2020-12-08 Feelette Oy Digital communication system and method indicating pressing time
USD872761S1 (en) * 2017-08-25 2020-01-14 Lg Electronics Inc. Display screen with animated graphical user interface
CN111033516B (zh) * 2017-09-07 2023-09-08 指纹卡安娜卡敦知识产权有限公司 用于确定手指覆盖指纹传感器的传感器区的方法和指纹感测系统
USD841025S1 (en) * 2017-10-17 2019-02-19 Domo, Inc. Display screen or portion thereof with a transitional graphical user interface
USD881217S1 (en) * 2017-10-31 2020-04-14 Sony Corporation Display panel or screen with graphical user interface
US10635956B2 (en) * 2018-01-11 2020-04-28 Access Solutions, LLC Systems and methods for foreign material exclusion accountability
US10620704B2 (en) 2018-01-19 2020-04-14 Cirrus Logic, Inc. Haptic output systems
USD903692S1 (en) * 2018-02-22 2020-12-01 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
USD879138S1 (en) * 2018-03-16 2020-03-24 Magic Leap, Inc. Display panel or portion thereof with a transitional graphical user interface
CN110289844B (zh) * 2018-03-19 2021-01-29 华为技术有限公司 触压按键组件、振动传感器组件和电子设备
US11139767B2 (en) 2018-03-22 2021-10-05 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10795443B2 (en) 2018-03-23 2020-10-06 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10820100B2 (en) 2018-03-26 2020-10-27 Cirrus Logic, Inc. Methods and apparatus for limiting the excursion of a transducer
US10832537B2 (en) * 2018-04-04 2020-11-10 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US11069206B2 (en) 2018-05-04 2021-07-20 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US10955956B2 (en) 2018-05-07 2021-03-23 Apple Inc. Devices, methods, and graphical user interfaces for interaction with an intensity-sensitive input region
US10620705B2 (en) 2018-06-01 2020-04-14 Google Llc Vibrating the surface of an electronic device to raise the perceived height at a depression in the surface
US11171951B2 (en) * 2018-06-07 2021-11-09 Paypal, Inc. Device interface output based on biometric input orientation and captured proximate data
US10936163B2 (en) 2018-07-17 2021-03-02 Methodical Mind, Llc. Graphical user interface system
US11269415B2 (en) 2018-08-14 2022-03-08 Cirrus Logic, Inc. Haptic output systems
USD900845S1 (en) * 2018-09-07 2020-11-03 Teraoka Seiko Co., Ltd. Display screen or portion thereof with graphical user interface
US10712824B2 (en) 2018-09-11 2020-07-14 Apple Inc. Content-based tactile outputs
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
CN110134248B (zh) * 2018-09-11 2020-12-11 苹果公司 基于内容的触觉输出
WO2020075456A1 (ja) * 2018-10-11 2020-04-16 オムロン株式会社 入力装置
GB201817495D0 (en) 2018-10-26 2018-12-12 Cirrus Logic Int Semiconductor Ltd A force sensing system and method
USD937283S1 (en) * 2018-11-06 2021-11-30 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD937284S1 (en) * 2018-11-06 2021-11-30 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD916783S1 (en) 2018-12-21 2021-04-20 Xerox Corporation Display screen with animated graphic user interface
US10748391B2 (en) * 2018-12-27 2020-08-18 Immersion Corporation Haptic signal conversion system
US10754428B1 (en) * 2019-02-25 2020-08-25 Facebook Technologies, Llc Systems, methods, and devices for audio-tactile mapping
US10955955B2 (en) 2019-03-29 2021-03-23 Cirrus Logic, Inc. Controller for use in a device comprising force sensors
US10828672B2 (en) 2019-03-29 2020-11-10 Cirrus Logic, Inc. Driver circuitry
US10726683B1 (en) 2019-03-29 2020-07-28 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using a two-tone stimulus
US20200313529A1 (en) 2019-03-29 2020-10-01 Cirrus Logic International Semiconductor Ltd. Methods and systems for estimating transducer parameters
US11644370B2 (en) 2019-03-29 2023-05-09 Cirrus Logic, Inc. Force sensing with an electromagnetic load
US11509292B2 (en) 2019-03-29 2022-11-22 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter
US10992297B2 (en) 2019-03-29 2021-04-27 Cirrus Logic, Inc. Device comprising force sensors
USD945473S1 (en) * 2019-05-10 2022-03-08 Tata Consultancy Services Limited Display screen with a user interface for multi-selection and segregation of images
USD917506S1 (en) * 2019-05-23 2021-04-27 Outbrain Inc. Electronic device display or portion thereof with an animated graphical user interface
US10996761B2 (en) 2019-06-01 2021-05-04 Apple Inc. User interfaces for non-visual output of time
US11797113B2 (en) 2019-06-01 2023-10-24 Apple Inc. Devices, methods, and graphical user interfaces for interaction with a control
US10976825B2 (en) 2019-06-07 2021-04-13 Cirrus Logic, Inc. Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system
US11150733B2 (en) 2019-06-07 2021-10-19 Cirrus Logic, Inc. Methods and apparatuses for providing a haptic output signal to a haptic actuator
CN114008569A (zh) 2019-06-21 2022-02-01 思睿逻辑国际半导体有限公司 用于在装置上配置多个虚拟按钮的方法和设备
CN110290453B (zh) * 2019-06-28 2022-03-18 Oppo广东移动通信有限公司 无线播放设备的延时测试方法及系统
US10921951B1 (en) * 2019-10-09 2021-02-16 Oracle International Corporation Dual-purpose user-interface control for data submission and capturing feedback expressions
US11408787B2 (en) 2019-10-15 2022-08-09 Cirrus Logic, Inc. Control methods for a force sensor system
US11380175B2 (en) 2019-10-24 2022-07-05 Cirrus Logic, Inc. Reproducibility of haptic waveform
TWI731478B (zh) * 2019-11-20 2021-06-21 宏碁股份有限公司 電子裝置及其用戶驗證方法
US11545951B2 (en) 2019-12-06 2023-01-03 Cirrus Logic, Inc. Methods and systems for detecting and managing amplifier instability
US11269479B2 (en) 2019-12-31 2022-03-08 Google Llc Automatic focus detection with relative threshold-aware cell visibility for a scrolling cell collection
USD927537S1 (en) * 2020-01-17 2021-08-10 Magic Leap, Inc. Display panel portion with an animated icon
USD927535S1 (en) * 2020-01-17 2021-08-10 Magic Leap, Inc. Display panel portion with an animated icon
USD927536S1 (en) * 2020-01-17 2021-08-10 Magic Leap, Inc. Display panel portion with an animated icon
USD928197S1 (en) * 2020-01-17 2021-08-17 Magic Leap, Inc. Display panel portion with an animated icon
US11662821B2 (en) 2020-04-16 2023-05-30 Cirrus Logic, Inc. In-situ monitoring, calibration, and testing of a haptic actuator
CN113849241A (zh) * 2020-06-10 2021-12-28 Oppo(重庆)智能科技有限公司 音频播放控制方法、智能手表以及具有存储功能的装置
WO2021262156A1 (en) * 2020-06-24 2021-12-30 Hewlett-Packard Development Company, L.P. Dual function keys on keyboards
USD960178S1 (en) * 2020-12-04 2022-08-09 Toyota Motor North America, Inc. Display screen or portion thereof with graphical user interface
USD978873S1 (en) * 2020-12-04 2023-02-21 Toyota Motor North America, Inc. Display screen or portion thereof with graphical user interface
CN114942718A (zh) * 2021-02-08 2022-08-26 腾讯科技(深圳)有限公司 虚拟按键的设置方法、装置、介质以及电子设备
US11933822B2 (en) 2021-06-16 2024-03-19 Cirrus Logic Inc. Methods and systems for in-system estimation of actuator parameters
US11765499B2 (en) 2021-06-22 2023-09-19 Cirrus Logic Inc. Methods and systems for managing mixed mode electromechanical actuator drive
US11908310B2 (en) 2021-06-22 2024-02-20 Cirrus Logic Inc. Methods and systems for detecting and managing unexpected spectral content in an amplifier system
USD975133S1 (en) * 2021-09-12 2023-01-10 Apple Inc. Display screen or portion thereof with animated graphical user interface
US11552649B1 (en) 2021-12-03 2023-01-10 Cirrus Logic, Inc. Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013173838A2 (en) * 2012-05-18 2013-11-21 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs

Family Cites Families (111)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030040361A1 (en) 1994-09-21 2003-02-27 Craig Thorner Method and apparatus for generating tactile feedback via relatively low-burden and/or zero burden telemetry
US8020095B2 (en) 1997-11-14 2011-09-13 Immersion Corporation Force feedback system including multi-tasking graphical host environment
US6764462B2 (en) * 2000-11-29 2004-07-20 Hill-Rom Services Inc. Wound treatment apparatus
US20010033243A1 (en) * 2000-03-15 2001-10-25 Harris Glen Mclean Online remote control configuration system
JP2002143553A (ja) * 2000-11-08 2002-05-21 Taito Corp プレイヤが入力装置等の動作内容を選択できるゲーム装置
US6957392B2 (en) * 2002-01-16 2005-10-18 Laszlo Systems, Inc. Interface engine providing a continuous user interface
JP4230318B2 (ja) * 2003-09-11 2009-02-25 株式会社イシダ 商品情報処理装置
JP2005332063A (ja) * 2004-05-18 2005-12-02 Sony Corp 触覚機能付き入力装置、情報入力方法及び電子機器
JP4560388B2 (ja) * 2004-11-30 2010-10-13 株式会社リコー 画像形成装置
US7864159B2 (en) * 2005-01-12 2011-01-04 Thinkoptics, Inc. Handheld vision based absolute pointing system
US7696860B2 (en) 2005-10-14 2010-04-13 University Of Central Florida Research Foundation, Inc Electromagnetic field tactile display interface and biosensor
US9395905B2 (en) * 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
KR20110059776A (ko) 2006-06-09 2011-06-03 애플 인크. 터치 스크린 액정 디스플레이
US8692736B1 (en) 2007-06-14 2014-04-08 Amazon Technologies, Inc. Configurable keypad for an electronic device
US8373549B2 (en) * 2007-12-31 2013-02-12 Apple Inc. Tactile feedback in an electronic device
US9298261B2 (en) * 2008-01-04 2016-03-29 Tactus Technology, Inc. Method for actuating a tactile interface layer
US20090313543A1 (en) 2008-06-12 2009-12-17 Research In Motion Limited User interface for previewing notifications
EP2134069A1 (en) 2008-06-12 2009-12-16 Research In Motion Limited User interface for previewing notifications
US20090319893A1 (en) 2008-06-24 2009-12-24 Nokia Corporation Method and Apparatus for Assigning a Tactile Cue
KR101498622B1 (ko) * 2008-06-25 2015-03-04 엘지전자 주식회사 촉각 효과를 제공하는 휴대 단말기 및 그 제어방법
CN101408823A (zh) * 2008-11-18 2009-04-15 广东威创视讯科技股份有限公司 一种触摸屏判断双击的方法
KR20100065640A (ko) 2008-12-08 2010-06-17 삼성전자주식회사 터치스크린의 햅틱 피드백 방법
US8686952B2 (en) 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
US20100156823A1 (en) * 2008-12-23 2010-06-24 Research In Motion Limited Electronic device including touch-sensitive display and method of controlling same to provide tactile feedback
US8384679B2 (en) * 2008-12-23 2013-02-26 Todd Robert Paleczny Piezoelectric actuator arrangement
US9927873B2 (en) * 2009-03-12 2018-03-27 Immersion Corporation Systems and methods for using textures in graphical user interface widgets
US9746923B2 (en) 2009-03-12 2017-08-29 Immersion Corporation Systems and methods for providing features in a friction display wherein a haptic effect is configured to vary the coefficient of friction
KR101553842B1 (ko) * 2009-04-21 2015-09-17 엘지전자 주식회사 멀티 햅틱 효과를 제공하는 휴대 단말기 및 그 제어방법
JP4723660B2 (ja) 2009-04-24 2011-07-13 京セラ株式会社 入力装置
KR101598335B1 (ko) * 2009-06-11 2016-02-29 엘지전자 주식회사 휴대 단말기 및 그 동작방법
US8378797B2 (en) 2009-07-17 2013-02-19 Apple Inc. Method and apparatus for localization of haptic feedback
CA2761700C (en) 2009-07-24 2014-12-02 Research In Motion Limited Method and apparatus for a touch-sensitive display
JP5197521B2 (ja) * 2009-07-29 2013-05-15 京セラ株式会社 入力装置
JP5310389B2 (ja) 2009-08-27 2013-10-09 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP5304544B2 (ja) 2009-08-28 2013-10-02 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
CN102023740A (zh) * 2009-09-23 2011-04-20 比亚迪股份有限公司 一种触控装置的动作识别方法
JP5635274B2 (ja) 2010-01-27 2014-12-03 京セラ株式会社 触感呈示装置および触感呈示方法
US8982160B2 (en) * 2010-04-16 2015-03-17 Qualcomm, Incorporated Apparatus and methods for dynamically correlating virtual keyboard dimensions to user finger size
US8451255B2 (en) * 2010-05-14 2013-05-28 Arnett Ryan Weber Method of providing tactile feedback and electronic device
US8466889B2 (en) * 2010-05-14 2013-06-18 Research In Motion Limited Method of providing tactile feedback and electronic device
US20110304559A1 (en) 2010-06-11 2011-12-15 Research In Motion Limited Portable electronic device including touch-sensitive display and method of changing tactile feedback
US9030308B1 (en) * 2010-07-02 2015-05-12 Amazon Technologies, Inc. Piezoelectric haptic actuator integration
KR101809191B1 (ko) * 2010-10-11 2018-01-18 삼성전자주식회사 터치 패널
US9760241B1 (en) * 2010-11-05 2017-09-12 Amazon Technologies, Inc. Tactile interaction with content
CA2719659C (en) 2010-11-05 2012-02-07 Ibm Canada Limited - Ibm Canada Limitee Haptic device with multitouch display
JP5555612B2 (ja) * 2010-11-26 2014-07-23 京セラ株式会社 触感呈示装置
KR101645685B1 (ko) 2010-12-20 2016-08-04 애플 인크. 이벤트 인식
US8674961B2 (en) * 2011-01-31 2014-03-18 National Semiconductor Corporation Haptic interface for touch screen in mobile device or other device
US20120229514A1 (en) * 2011-03-10 2012-09-13 Microsoft Corporation Transitioning presence indication through animation
JP5738413B2 (ja) 2011-06-28 2015-06-24 京セラ株式会社 電子機器
JP5633906B2 (ja) * 2011-09-08 2014-12-03 Kddi株式会社 画面への押圧でページ捲りが可能な電子書籍表示装置及びプログラム
US9223395B2 (en) * 2011-09-14 2015-12-29 Microsoft Technology Licensing, Llc Viewing presentations in a condensed animation mode
US20130082974A1 (en) * 2011-09-30 2013-04-04 Apple Inc. Quick Access User Interface
JP2013092816A (ja) * 2011-10-24 2013-05-16 Brother Ind Ltd 画像形成装置、画像形成装置の制御方法およびプログラム
US8493354B1 (en) 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
JP2013200863A (ja) 2012-02-23 2013-10-03 Panasonic Corp 電子機器
US8539375B1 (en) * 2012-02-24 2013-09-17 Blackberry Limited Method and apparatus for providing a user interface on a device enabling selection of operations to be performed in relation to content
US9619912B2 (en) * 2012-03-02 2017-04-11 Verizon Patent And Licensing Inc. Animated transition from an application window to another application window
JP2013186810A (ja) * 2012-03-09 2013-09-19 Sharp Corp 操作装置
WO2013169301A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Variable feedback based on drag input
KR101683868B1 (ko) * 2012-05-09 2016-12-07 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169854A2 (en) * 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
WO2013169849A2 (en) * 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
US9891709B2 (en) 2012-05-16 2018-02-13 Immersion Corporation Systems and methods for content- and context specific haptic effects using predefined haptic effects
US10444836B2 (en) * 2012-06-07 2019-10-15 Nook Digital, Llc Accessibility aids for users of electronic devices
US9098196B2 (en) * 2012-06-11 2015-08-04 Lenovo (Singapore) Pte. Ltd. Touch system inadvertent input elimination
JP2013257657A (ja) 2012-06-11 2013-12-26 Fujitsu Ltd 情報端末装置及び表示制御方法
JP6339311B2 (ja) 2012-06-27 2018-06-06 京セラ株式会社 電子機器
WO2014018115A1 (en) 2012-07-26 2014-01-30 Changello Enterprise Llc Ultrasound-based force sensing of inputs
JP6071372B2 (ja) 2012-09-21 2017-02-01 キヤノン株式会社 電子機器及び電子機器の制御方法
US9607787B2 (en) 2012-09-21 2017-03-28 Google Inc. Tactile feedback button for a hazard detector and fabrication method thereof
KR101680502B1 (ko) * 2012-09-25 2016-11-28 노키아 테크놀로지스 오와이 촉각적 피드백을 갖는 방법 및 디스플레이 디바이스
US8743072B2 (en) * 2012-09-28 2014-06-03 Lg Electronics Inc. Display device and control method thereof
JP6123106B2 (ja) 2012-10-22 2017-05-10 シャープ株式会社 電子機器
US9229632B2 (en) * 2012-10-29 2016-01-05 Facebook, Inc. Animation sequence associated with image
US9250660B2 (en) 2012-11-14 2016-02-02 Laserlock Technologies, Inc. “HOME” button with integrated user biometric sensing and verification system for mobile device
US9898084B2 (en) 2012-12-10 2018-02-20 Immersion Corporation Enhanced dynamic haptic effects
JP6093877B2 (ja) * 2012-12-29 2017-03-08 アップル インコーポレイテッド 複数接触ジェスチャのために触知出力の生成を見合わせるためのデバイス、方法、及びグラフィカルユーザインタフェース
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
WO2014105274A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for navigating user interface hierarchies
US20160139671A1 (en) * 2013-01-15 2016-05-19 Samsung Electronics Co., Ltd. Method for providing haptic effect in electronic device, machine-readable storage medium, and electronic device
KR102035305B1 (ko) 2013-01-15 2019-11-18 삼성전자주식회사 휴대 단말에서 햅틱 효과를 제공하는 방법 및 기계로 읽을 수 있는 저장 매체 및 휴대 단말
KR102184288B1 (ko) * 2013-01-17 2020-11-30 삼성전자주식회사 입력 유닛에 햅틱 효과를 제공하는 휴대 단말 및 방법
US10578499B2 (en) 2013-02-17 2020-03-03 Microsoft Technology Licensing, Llc Piezo-actuated virtual buttons for touch surfaces
CN110109534A (zh) 2013-06-11 2019-08-09 意美森公司 用于基于压力的触觉效果的系统和方法
CN103309618A (zh) 2013-07-02 2013-09-18 姜洪明 移动操作系统
CN105579928A (zh) 2013-09-27 2016-05-11 苹果公司 具有触觉致动器的带体
TWI515621B (zh) * 2013-10-23 2016-01-01 緯創資通股份有限公司 輸入裝置、其輸入模式切換方法以及電腦裝置
JP2015087911A (ja) * 2013-10-30 2015-05-07 株式会社東芝 電子機器、方法及びプログラム
JP2015121983A (ja) * 2013-12-24 2015-07-02 京セラ株式会社 触感呈示装置
JP6289100B2 (ja) 2014-01-06 2018-03-07 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
KR20150104808A (ko) * 2014-03-06 2015-09-16 삼성전자주식회사 피드백을 출력하는 전자 장치 및 방법
KR20150118813A (ko) * 2014-04-15 2015-10-23 삼성전자주식회사 햅틱 정보 운용 방법 및 이를 지원하는 전자 장치
US9841817B2 (en) * 2014-05-09 2017-12-12 Microsoft Technology Licensing, Llc Sculpted displays for clickable user interactions
JPWO2016013068A1 (ja) * 2014-07-23 2017-04-27 富士通株式会社 触感データ処理装置、触感提供システム、及び触感データ処理方法
KR102194011B1 (ko) 2014-07-23 2020-12-22 엘지전자 주식회사 영상 표시 기기 및 그의 동작 방법
AU2015298710B2 (en) 2014-08-02 2019-10-17 Apple Inc. Context-specific user interfaces
US20170115734A1 (en) * 2014-09-09 2017-04-27 Mitsubishi Electric Corporation Tactile sensation control system and tactile sensation control method
US9519674B2 (en) 2014-09-10 2016-12-13 Amazon Technologies, Inc. Stateless datastore-independent transactions
CN105739847A (zh) 2014-12-11 2016-07-06 富泰华工业(深圳)有限公司 智能电子装置、智能电子装置唤醒屏幕的系统与方法
CN107111339A (zh) * 2014-12-24 2017-08-29 电子部品研究院 可穿戴电子设备
US9946395B2 (en) 2015-02-16 2018-04-17 Samsung Electronics Co., Ltd. User interface method and apparatus
KR20160149982A (ko) * 2015-06-18 2016-12-28 삼성전자주식회사 입력장치를 구비한 전자장치
KR20170017280A (ko) 2015-08-06 2017-02-15 엘지전자 주식회사 이동단말기 및 그 제어방법
KR101714207B1 (ko) * 2015-09-02 2017-03-08 엘지전자 주식회사 이동 단말기 및 그의 제어 방법
KR101781909B1 (ko) * 2015-09-15 2017-09-26 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2017051959A1 (ko) * 2015-09-25 2017-03-30 엘지전자 주식회사 단말 장치 및 단말 장치의 제어 방법
JP6940040B2 (ja) * 2016-02-04 2021-09-22 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 情報処理方法および電子デバイス
KR101790880B1 (ko) * 2016-04-29 2017-10-26 주식회사 씨케이머티리얼즈랩 촉각 액추에이터 및 그 제어 방법
DK201670728A1 (en) 2016-09-06 2018-03-19 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Feedback During Interaction with an Intensity-Sensitive Button
US10507137B2 (en) * 2017-01-17 2019-12-17 Karl Allen Dierenbach Tactile interface system

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013173838A2 (en) * 2012-05-18 2013-11-21 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs

Also Published As

Publication number Publication date
AU2021245192A1 (en) 2021-11-04
US11635818B2 (en) 2023-04-25
US20180067622A1 (en) 2018-03-08
JP2019512766A (ja) 2019-05-16
JP7158546B2 (ja) 2022-10-21
DK201670728A1 (en) 2018-03-19
CN108139863A (zh) 2018-06-08
KR20210029307A (ko) 2021-03-15
US20210223866A1 (en) 2021-07-22
US20230221805A1 (en) 2023-07-13
JP2022008575A (ja) 2022-01-13
KR20180095944A (ko) 2018-08-28
KR102136236B1 (ko) 2020-07-21
AU2021245192B2 (en) 2022-11-03
KR20210104158A (ko) 2021-08-24
US20180067554A1 (en) 2018-03-08
CN117742450A (zh) 2024-03-22
US10303252B2 (en) 2019-05-28
US10198073B2 (en) 2019-02-05
US10228765B2 (en) 2019-03-12
US9740381B1 (en) 2017-08-22
US20200293113A1 (en) 2020-09-17
KR20190105672A (ko) 2019-09-17
KR102357079B1 (ko) 2022-02-08
KR20200091470A (ko) 2020-07-30
AU2020200864B2 (en) 2021-07-22
US20180067555A1 (en) 2018-03-08
US10712826B2 (en) 2020-07-14
JP2022191372A (ja) 2022-12-27
KR102227266B1 (ko) 2021-03-12
JP6952173B2 (ja) 2021-10-20
KR102290422B1 (ko) 2021-08-18
US20190265797A1 (en) 2019-08-29
AU2018232928A1 (en) 2018-10-11
JP2019220200A (ja) 2019-12-26
JP6570758B2 (ja) 2019-09-04
JP2021002361A (ja) 2021-01-07
CN110825165A (zh) 2020-02-21
JP2024038258A (ja) 2024-03-19
US11320910B2 (en) 2022-05-03
JP6758462B2 (ja) 2020-09-23
AU2023200312A1 (en) 2023-02-23
KR20190025764A (ko) 2019-03-11
AU2020200864A1 (en) 2020-02-27
AU2017218929A1 (en) 2018-03-22
AU2023200312B2 (en) 2024-05-02
JP7416890B2 (ja) 2024-01-17
KR101956230B1 (ko) 2019-03-08
US20220179492A1 (en) 2022-06-09
US11009960B2 (en) 2021-05-18
CN110825165B (zh) 2023-12-15
AU2018232928B2 (en) 2019-11-21
KR102021725B1 (ko) 2019-09-16

Similar Documents

Publication Publication Date Title
CN108139863B (zh) 用于在与强度敏感按钮交互期间提供反馈的设备、方法和图形用户界面
CN104903835B (zh) 用于针对多接触手势而放弃生成触觉输出的设备、方法和图形用户界面
CN108351750B (zh) 用于处理与触摸输入相关联的强度信息的设备、方法、以及图形用户界面
CN107797658B (zh) 用于触觉混合的设备、方法和图形用户界面
CN106502638B (zh) 用于提供视听反馈的设备、方法和图形用户界面
CN104471521B (zh) 用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面
CN104903834B (zh) 用于在触摸输入到显示输出关系之间过渡的设备、方法和图形用户界面
CN108174612B (zh) 用于利用基于先前输入强度的强度阈值对触摸输入进行处理和消除歧义的设备和方法
CN105264479B (zh) 用于对用户界面分级结构进行导航的设备、方法和图形用户界面
CN104487929B (zh) 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
CN108762605B (zh) 设备配置用户界面
CN106416210B (zh) 设备之间电话呼叫路由的方法、电子设备和计算机可读存储介质
CN106462283B (zh) 计算设备上的字符识别
CN107690619B (zh) 用于处理触敏表面多个区域上触摸输入的设备和方法
CN109313491A (zh) 识别内容在其上可用的应用程序
CN109716269A (zh) 使用表冠和传感器进行手势检测、列表导航和项目选择
CN109196455A (zh) 用于carplay的应用程序快捷方式
CN109219796A (zh) 实时视频上的数字触摸
CN109844711A (zh) 用于向设备上显示的内容加注释的统一注释层的设备、方法和图形用户界面
CN109313528A (zh) 加速滚动
CN107430488A (zh) 基于活动的阈值和反馈
CN110456979A (zh) 用于在背景上显示示能表示的设备、方法和图形用户界面
CN106233237B (zh) 一种处理与应用关联的新消息的方法和装置
CN107683470A (zh) 用于web浏览器的音频控制
CN109219781A (zh) 显示和更新应用程序视图组

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant